I.

간호정보시스템에 대한 사용자의 상호작용 만족도 평가

"This study was supported by a grant of the Korea Health 21 R&D Project, Ministry of Health &Welfare, Republic of Korea. (과제고유번호: A050909)"

Evaluation of User Satisfaction for Interface with Nursing Information System

Hyojung Si1, Jaehyun Lee1, Sunju Jung1, Kijung Ju2, HeeJoon Park2, Hyochan Jeon²,

Myonghwa Park³, Kyungil Youn2, Yoon-Nyun Kim2

Health Care Information and Technology Center, Keimyung University, Daegu 700-720, pyurins@hanmail.net¹

Department of Medical Informatics, School of Medicine, Keimyung University, Daegu 700-712²

College of Nursing, Keimyung University, Daegu 700-712³

Abstract: This study was conducted to evaluate nurses' satisfaction for interface with Nursing Information System to verify the effects of nursing information system in the clinical field. The participants for this study were nurses from two hospitals in Kyeongbuk. Nurses' satisfaction of interface with Nursing Information System was evaluated with QUIS(Questionnaire for User Interaction Satisfaction) developed by Human Computer Interaction Laboratory in University of Maryland(1988).  There is a difference in user satisfaction between two hospital, however, no difference according to nurses' length of career. Using regression model, the effects of screen, terminology, learning, and capability on general satisfaction were analyzed. F value of regression model was 29.36 showing statistical significance and high explanation ability with 41.29 as coefficient of discrimination. Screen, terminology, and capability were significant factors in A hospital, and screen and learning in B hospitals. The results of this study suggest that characteristics of hospital system and environment as well as factors such as screen, terminology, learning, and capability need to be considered to develop hospital information system with high user interface.

Keyword:  Nursing Information System, interface, satisfaction

서 론

정보산업의 발달은 의료에도 큰 영향을 끼쳐 과거  행정업무 중심의 간단한 전산화 작업이 모든 진료정보를 포괄하는 병원정보시스템의 개발로 확대되고 있다. 의료기관의 정보화는 처방의 효율적인 발행과 수행, 부서간의 정확한 의사소통, 병원업무수행의 효율화 등의 이점으로 3차 의료기관 뿐만 아니라 의원급 의료기관도 정보화에 투자를 확대하고 있다[1].

그러나 병원정보시스템의 개발 시 개발자들이 시스템의 기술적, 경제적 측면을 우선시하고, 사용자의  시각은 비교적 소홀히 다루는 경우가 많았다. 예를 들어 무작위로 추출된 40개 병원을 대상으로 한 조사에서는 정보시스템의 45%가 기술적인 타당성은 문제가 없는데도 불구하고 사용자의 저항과 의료진의 간섭 때문에 실패한 것으로 나타났다[2]. 정보시스템 관련 연구에 의하면 시스템의 성과를 측정하기 위해서는 사용자 만족도 측정이 가장 적절하며[3] 사용자의 만족은 정보시스템의 성공적인 실행에 대한 예측인자, 정보시스템의 효과성 측정의 척도로 받아들여지고 있다[4].

본 연구는 간호정보시스템을 사용하고 있는 종합병원 2곳의 간호사를 대상으로 전산프로그램에 대한 사용자의 평가를 시행하고 이를 통하여 향후 효율성 높은 시스템 구축의 참고자료를 제시하고자 시도되었다.

II. 재료 및 방법

본 연구는 경북 P시에 소재한 2개 종합병원의 간호사를 대상으로 설문조사하였고, 설문기간은 2006년 4월 6일에서 4월 12일까지였다. 설문지는 총 201부를 배포하여 198부를 회수하였다.

조사대상인 A병원의 경우 2001년에 OCS 시스템을 도입하였고, 2005년부터 ENR 시스템으로 전자간호기록을 작성하고 있었다. B병원은 1998년에 OCS 시스템을 도입하였고, EMR은 초기단계로 각종 기록들을 스캔하여 저장하는 단계로 전자간호기록은 사용하고 있지 않았다.

설문내용은 QUIS(Questionnaire for User Interaction Satisfaction)를 이용하였는데, QUIS는 1988년에 Maryland 대학의 Human Computer Interaction Laboratory에서 개발되었다. QUIS는 새로 개발된 전산 프로그램에 대한 사용자들의 평가에 이용되는 것으로 프로그램의 구조와 실제적인 유용성에 대한 평가를 표준화한 도구로써, 특정한 컴퓨터 프로그램의 평가에 한정된 도구가 아니며 전반적인 사용자들의 평가에 사용되는 도구이다. Chin J. P., Dieihl V. A.와 Norman K. L.의 연구에 의하면 QUIS에 의한 프로그램의 평가는 신뢰도가 높고 각 설문항목에서의 설문자 응답이 일관성이 있는 것으로 나타났다[5].

QUIS는 1) 전체적인 이용자 반응 2) 화면구성과 배치 3) 용어 및 메시지 4) 학습 5) 시스템 기능의 5가지 항목을 평가하도록 구성되어 있고, 각 항목은 4-6개의 세부항목으로 구성되어있다. 사용자들은 각 세부항목을 1점(가장 낮은 점수)에서 9점(가장 높은 점수)으로 평가할 수 있다[6]. 본 연구에서는 5점 척도를 이용하여 조사하였다.

QUIS를 이용한 국내 논문을 살펴보면 김지영, 채영문(2002)의 의사와 간호사를 대상으로 한 전자의무기록 시스템에 대한 사용자 만족도와 관련요인에 대한 분석 연구가 있으며, 진호준, 김성권(2002)의 서울대학교병원의 의사를 대상으로 한 처방전달 시스템에

Table 1. Respondent's demographic and socioeconomic characteristics
		Hospital A		Hospital B		Chi-square*	p
		Freq.	Ratio	Freq.	Ratio
Age	<26	46	55.4	33	44.0	6.20	0.10
	26≤ ≥30	21	25.3	29	38.7
	31≤ ≥35	6	7.2	9	12.0
	35<	10	12.1	4	5.3
	missing	14	-	26	-
Educational level	three year college	75	79.0	84	87.5	5.50	0.13
	four year college	18	19.0	9	9.4
	graduate school	1	1.0	3	3.1
	others	1	1.0	-	-
	missing	2	-	5	-
Nursing career	1 year	39	41.9	22	23.2	9.77	0.02
	2-5 year	31	33.3	48	50.5
	6-9 year	10	10.8	15	15.8
	above 10 year	13	14.0	10	10.5
	missing	4	-	6	-
Total		95	-	100	-	-	-

2. 신뢰성 분석

신뢰성 분석결과는 스크린, 용어, 학습, 기능, 전반적 반응의 다섯 변수에 대해 Cronbach's alpha가 0.70이상으로 사회과학 분야의 연구에서 일반적으로 요구하는 수준인 0.60이상의 수준을 충족하고 있다.

3. 두 병원의 사용자 상호작용 만족도 평균차이검정

A병원과 B병원 사이에 사용자 상호작용 만족도 차이는 T-test를 통해 검정하였다. 그 결과 용어영역을제외하고는 A병원의 평균점수가 B병원보다 대체로

대한 사용자 만족도에 관한 설문조사 등이 있다[1,7]

III. 결 과

1. 대상자의 일반적 특성

대상자의 일반적 특성은 Table 1과 같다. 연령별로는 26세 미만이 A병원 55.4%, B병원 44.0%, 26세 이상 30세 이하가 A병원 25.3%, B병원 38.7%였고, 교육수준은 전문대학 졸업자가 A병원 79.0%, B병원 87.5%로 나타났다. 간호경력에서는 1년 이하 경력은 A병원 41.9%, B병원 23.2%, 2년 이상 5년 이하 경력은 A병원 33.3%, B병원 50.5%였다.

높았으며, 특히 학습영역과 전반적 반응영역에 있어서는 유의수준 0.05수준에서 통계적으로 유의한 차이를 나타내었다.

또한 전반적인 만족도에 대한 병원간, 경력간 차이를 검정한 결과 Table 3과 같이 경력 간에는 평균차이가 없었으나 병원 간에는 유의수준 0.05에서 유의한 차이가 있는 것으로 밝혀졌다. 평균점수에서 보면 간호사들은 기능면에서 2.66±0.71점으로 가장 만족도가 낮은 것으로 나타났고, 그 외의 항목들은 3.01±0.67점에서 3.10±0.69점까지로 대체로 만족하는 것으로 나타났다(Table 2, 3).

Table 2. Results of t-test

Variable	Hospital	n	M	SD	t-value (p)	Total
						M	SD
Screen	A	96	3.06	0.07	1.09 (0.27)	3.07	0.62
	B	100	2.95	0.08
Terminology	A	94	3.09	0.06	-0.02 (0.98)	3.10	0.69
	B	99	3.10	0.07
Learning	A	93	3.11	0.06	2.25 (0.02)	3.01	0.67
	B	99	2.90	0.07
Capabilities	A	95	2.74	0.08	1.55 (0.12)	2.66	0.71
	B	99	2.58	0.06
Overall Reactions	A	76	3.19	0.07	2.31 (0.02)	3.07	0.62
	B	99	2.97	0.06

Table 3. Results of GLM

		d.f.	Sum of Squares	Mean Square	F	Pr > F
Model		4	2.62	0.66	1.67	0.16
	Career	3	0.53	0.18	0.45	0.71
	Hospital	1	2.09	2.09	5.33	0.02
Errer		161	63.23	0.39
Total		165	65.85

4. 전반적인 만족도 평가

회귀분석을 통해 스크린, 용어, 학습, 기능의 네 가지 영역이 전반적인 반응에 미치는 영향을 검정하였으며 그 결과는 Table 4와 같이 A병원과 B병원을 구분한 분석결과와 두 병원을 함께 분석한 결과를 제시하고 있다.

회귀모형은

[eqn: y = beta_0 + beta_1 x1 + beta_2 x2 + beta_3 x3 + beta_4 x4 + epsilon]

으로 [eqn: beta_0]는 상수, [eqn: beta_1]는 스크린, [eqn: beta_2]는 용어, [eqn: beta_3]는 학습, [eqn: beta_4]는 기능, [eqn: y]는 전반적 반응을 의미한다.

회귀모형의 검정결과 F값이 두 병원을 함께 분석한 결과에서는 29.36, A병원은 19.79, B병원은 11.96으로 신뢰도 99%에서 통계적으로 유의한 결과를 보여주었다. 이는 스크린, 용어, 학습, 기능이 전반적 반응에 긍정적인 영향을 주고 있음을 의미한다. 개별회귀변수의 중요도에서는 A병원의 경우 스크린(t=2.68, [eqn: alpha]=0.01), 용어(t=3.25, [eqn: alpha]=0.01), 기능(t=1.78, [eqn: alpha]=0.10)이 전반적 반응에 긍정적인 영향을 주고 있으며, 학습(t=-0.31)의 경우에는 통계적인 유의성은 없으나 음의 관계를 나타내고 있었다. 이와는 달리 B병원에서는 스크린(t=2.73, [eqn: alpha]=0.01), 학습(t=2.39, [eqn: alpha]=0.05)이 전반적 반응에 긍정적인 영향을 주는 중요한 변수이며, 용어와 기능은 통계적 유의성은 없으나 긍정적인 관계를 나타내고 있었다. 두 병원을 함께 분석한 회귀모형에서는 스크린(t=3.86, [eqn: alpha]=0.01), 용어(t=2.51, [eqn: alpha]=0.05), 학습(t=2.16, [eqn: alpha]=0.05), 기능(t=1.69, [eqn: alpha]=0.10)가 모두 전반적 반응과 긍정적인 관계에 있었다(Table 4).

Table 4. Results of regression

	Hospital A	Hospital B	Total
Intercept	3.24* (0.00)**	4.19 (0.00)	5.08 (0.00)
Screen	2.68 (0.00)	2.73 (0.00)	3.86 (0.00)
Terminology	3.25 (0.00)	1.19 (0.23)	2.51 (0.01)
Learning	-0.31 (0.75)	2.39 (0.01)	2.16 (0.03)
Capabilities	1.78 (0.07)	0.48 (0.63)	1.69 (0.09)
F	19.79 (0.00)	11.96 (0.00)	29.36 (0.00)
R-Square	53.43	33.96	41.29

* t-value, ** p-value

IV. 고찰

본 연구는 간호업무에 이용되는 간호정보시스템에 대해 사용자인 간호사들을 대상으로 평가를 실시하고 향후 시스템 구축시 참고자료로 활용되고자 시행되었다.

A병원과 B병원의 사용자 상호작용 만족도 차이에서는 용어영역을 제외하고는 A병원이 B병원보다 대체로 높았으며, 특히 학습영역과 전반적 반응영역에서 유의한 차이를 나타내었다. 전반적인 만족도에서 경력간의 차이는 없었으나 병원 간에는 유의한 차이가 있는 것으로 나타났다. 이는 두 병원에서 사용되고 있는 병원정보화 시스템간의 차이로 오는 결과로 사료되며, 전반적인 시스템에 대한 만족도에서 경력간의 차이가 나타나지 않는 것은 신규 간호사의 경우 국가적인 정보화 정책 등으로 기존의 경력 간호사 보다 컴퓨터와 친숙하고 학교에서의 교과목이나 신규 간호사 교육시의 전산업무에 대한 교육 등으로 교육시간이 충분히 주어지기 때문이라고 사료된다. 각 항목별 만족도 평균점수에서 기능이 2.66±0.71점으로 가장 낮았다.

두 병원에서 스크린, 용어, 학습, 기능이 전반적인 사용자 반응에 긍정적인 영향을 주고 있는 것으로 나타났고, A병원의 경우 스크린, 용어, 기능이 전반적인 사용자 반응에 긍정적인 영향을 주고 있었고, B병원의 경우 스크린 학습이 전반적 반응에 긍정적인 영향을 주는 주요한 변수로 나타났다. A병원의 경우 학습이 전반적인 사용자 반응에 미치는 영향이 음의 관계를 나타내고 있어 병원정보화 시스템에서 학습적인 부분에 대한 고려가 강화되어야 할 것으로 사료된다.

이상의 결과로 볼 때 간호정보시스템 개발 시 개발자들은 시스템의 기술적, 경제적 측면 외에 사용자 측면의 의견을 적극 수렴하여 사용자의 저항을 최소화하고, 개별 병원의 특성과 환경에 대한 고려가 필요한 것으로 사료된다. 또한 간호사의 간호정보시스템과 상호작용을 향상시키기 위해서는 간호정보시스템에 대한 계속적인 교육 및 프로그램 개발자와의 계속적인 의사소통이 필요하며, 프로그램 상에서의 교육기능을 강화시킬 필요가 있는 것으로 보인다.

참고문헌

1. Chin, H. J., Kim, S. G. (2002). Survey user satisfaction in aspect of user interactions with an order communication system in seoul national university hospital. Journal of Korean Society of Medical Informatics, 8(1), 1-10.

2. Dowling A. F. (1980). Do hospital staff interface with computer system implementation?. Health Care Management Review, 5, 23-32.

3. Kim, J. K. (1990). A Conceptual Model of User Information Satisfaction. The Korea Society of Management Information Systems.

4. Delone. (1992). Information System success Information system research, 3(1), 60-65.

5. Chin J. P., Diehl V. A., Norman K. L., Development of an instrument measuring user satisfaction of the human-cmputer interface. In Proceedings of CHI '88, ACM Press, 213-221.

6. Dean F., Kuperman G. J., Fiskio J. (1999). Evaluating Physician Satisfaction Regarding User Interactions with an Electronic Medical Record System.  AMIA, 400-404.

7. Kim, J. Y., Chae, Y. M. (2002). Factors Affecting the Users' Satisfaction on the Electronic Medical Record System. Journal of Korean Society of Medical Informatics, 8(4), 39-53.