Peer teaching in medical education: twelve reasons to move from theory to practice

OLLE TEN CATE1 & STEVEN DURNING2

1Center for Research and Development of Education at UMC Utrecht, the Netherlands, 2Uniformed Services University of the Health Sciences, USA



Abstract

목적 : 얼마나 Peer teaching(동료교수, PT)이 자주 이용되는지, 그리고 그 이유

Objective: To provide an estimation of how often peer teaching is applied in medical education, based on reports in the literature and to summarize reasons that support the use of this form of teaching.


방법 : 2006년의 문헌을 살펴보고 카테고리별 분류

Method: We surveyed the 2006 medical education literature and categorised reports of peer teaching according to educational distance between students teaching and students taught, group size, and level of formality of the teaching. Subsequently, we analysed the rationales for applying peer teaching.


결과 : 12개의 서로 다른 이유들을 찾아내었음

Results: Most reports were published abstracts in either Medical Education’s annual feature ‘Really Good Stuff’ or the AMEE’s annual conference proceedings. We identified twelve distinct reasons to apply peer teaching, including ‘alleviating faculty teaching burden’, ‘providing role models for junior students’, ‘enhancing intrinsic motivation’ and ‘preparing physicians for their future role as educators’.


결론 : 자주 사용되는 방법이긴 하나 논문으로까지 나오지는 않는다. near-peer teaching이 효과적이며, 견습생(apprentice)와 장인(master)의 사이 단계인 journeyman이라는 비유가 의학교육의 연속체에서 중요하고 가치있지만 아직 잘 활용되고 있지는 않은 것이라 할 수 있다.

Discussion: Peer teaching appears to be practiced often, but many peer teaching reports do not become full length journal articles. We conclude that specifically ‘near-peer teaching’ appears beneficial for student teachers and learners as well as for the organisation. The analogy of the ‘journeyman’, as intermediate between ‘apprentice’ and ‘master’, with both learning and teaching tasks, is a valuable but yet under-recognized source of education in the medical education continuum.






Ten Cate와 Durning은 peer teaching에 대한 광범위한 프레임워크(틀)를 제시했는데, 이 틀은 Peer teaching의 세 가지 독특한 특징을 바탕으로 한다 - 교사와 학생간의 거리, 격식, 학습그룹 크기

In Ten Cate and Durning (this issue) we provided a framework for approaching the broad concept of peer teaching. This framework is based on theory and addresses three distinct features of the peer teaching encounter: the educational distance between teacher and learner, the formality of the setting, and the learner group size.






의학교육에서 peer teaching에 대한 최근 묘사

Recent descriptions of peer teaching in medical education


2006년의 문헌을 살펴봄

A comprehensive review is beyond the scope of this paper and other authors have reviewed this topic well (Ten Cate et al. 1984; Whitman 1988; Topping 1996; Falchikov 2001). To acquire a more recent impression, we reviewed the 2006 medical education literature


다음의 저널에 2006년에 발간된 모든 논문을 살펴보았다. 

We explored the full contents of all 2006 issues of Medical Teacher, Medical Education, Academic Medicine, Teaching and Learning in Medicine, Education for Health, Advances in Health Sciences Education, The Clinical Teacher, BMC-Medical Education, Medical Education Online and the abstracts of the 2006 conference of the Association for Medical Education in Europe (AMEE). We found no reports in Teaching and Learning in Medicine, Education for Health, The Clinical Teacher, Medical Teacher and Academic Medicine in 2006.


peer teaching은 journal article까지는 잘 나오지는 않는다. 그 이유가 잘 알려져 있지는 않다.

It appears that peer teaching is practiced enough to produce a substantial number of abstracts, but does not often lead to peer-reviewed journal articles; the reasons for this are not known.

    • Educational distance
    • Formality of the educational setting
    • Learner group size
    • Terminology used
    • Reasons cited

Peer teaching의 Rationale.

Rationales for the practice of peer teaching


교육에 대한 교수들의 부담 경감

To alleviate teaching pressure for faculty


4학년 학생이 교수들의 강의를 대체한다고 학습의 질이 떨어지진 않는다.

Tolsgaard et al. and Burke et al. (both in this issue), provide empirical support for the idea that replacing faculty teachers with senior medical students does not compromise the learning of the students taught, a conclusion that was previously drawn by Haist et al. (1998).


그 외에도 장점이 많다.

But even without these scaffolds, peer teaching may provide surprisingly beneficial effects (Tolsgaard et al. this issue).


학생의 인지수준에 맞는 교육 제공

To offer education to students on their own cognitive level


인지적 일치 가설(cognitive congruence hypothesis) : 지식 수준이 비슷한 경우 교육이 더 효과적이다.(지적 '거리(distance)'가 먼 경우보다 효과적이다.

The cognitive congruence hypothesis argues that a teacher with a knowledge base that is similar (i.e. congruent) to the learner’s is a more effective teacher than an expert in the field who has a dissimilar knowledge base, i.e. who is cognitively incongruent, or has a large ‘cognitive distance’ (Cornwall 1979; Lockspeiser et al. 2006).


학생간 지식의 거리가 멀지 않을 때, 비형식적인 교육일 때 'collaborative'혹은 'cooperative' 이라고 한다. 이 경우 학습에 있어서 장점은 조금 덜하다. 

When there is no cognitive distance and when the teaching task is not explicit but informal, we rather speak of collaborative or cooperative learning among students than peer teaching. Here, the relative benefit in terms of learning is less obvious. When the objective is to acquire independent, personal clinical skill, mere collaborative learning may not be more effective than individual study.



편안하고 안전한 교육환경

To create a comfortable and safe educational environment


교육 환경이 중요함

The educational environment or learning climate is appears to be important for optimizing learning and is one of the principal topics addressed in faculty development programs (Skeff et al. 1997).


동료가 학습자에게 덜 위협적이고 의학교육에서 받는 스트레스를 잘 이해할 수 있음.

Peers and near-peers however may be in even a better position to do this as they are potentially seen as less threatening by learners and often have a rich understanding of the stresses of the medical school curriculum, according to the so-called social congruence theory (Lockspeiser et al. 2006).


교육의 성과가 더 나을 뿐만 아니라, 스트레스는 낮다.

Topping (1996) cites authors who found not only better achievement in reciprocal one-to-one peer tutoring arrangements, compared to traditionally taught groups but also significantly reduced stress indicators.


학생들을 사회화시키고 롤모델을 보여줌

To socialize students in medical school and provide role models


의과대학 1학년을 시작하며 사회적으로 소외되거나 사회화 문제가 있을 수 있음. 'student counselling peer'원칙, 'helper therapy'원칙.

Specifically in the first year of medical school, the transition from secondary education or college may create alienation and problems of socialization. The ‘students counselling peers’ principle has been described as beneficial for both the student being counselled as well as the student counsellor, according to the ‘helper therapy principle’ (Whitman 1988).


뛰어난 학생들은 롤모델이 될 수도 있고, peer modelling이라고 함. hidden curriculum의 한 종류

More advanced students can also serve as powerful role models Topping (2001) has called this ‘peer modelling’. The so-called ‘hidden curriculum’ encompasses all those unwritten rules that students should follow to survive or excel the curriculum; peer modelling may play an important role in this phenomenon.


학습방법 뿐만 아니라 동기부여가 됨

To offer students an alternative motivation as well as another method for studying


어떤 부분을 가르치게 된 학생은 그 부분에 관심을 가지게 되고, 단순히 '두 번 배우는' 것이 아니라 더 지식의 유지가 더 강화된다.

Students who are tasked to teach or train others in a domain that interests them and that is relevant for their career, do not only ‘learn twice’; the literature suggests that they learn in a different way, which possibly adds to a longer and more solid retention of knowledge.


비록 예전에 공부한 것과 같더라도 가르치는 역할을 한 학생은 그것을 준비하면서 더 동기부여가 된다. 학습의 강력한 유도(driving)

One of the salient experiences with the student teaching rotation as described in this issue (Ten Cate 2007) is that students who taught were highly motivated to thoroughly prepare for the teaching, even though they studied the same content material themselves some years before. Apparently the teaching task evoked this motivation. Teaching can, next to assessment, clearly serve a powerful drive for learning.


4학년 학생이 2학년 학생에게 사회문화적 다양성을 가르치는 것이 그 이슈에 대한 지식을 높여주는데, 학습을 유도할 뿐만 아니라 가르치는 학생의 지식을 의미있는 방향으로 증대시킨다. 

Tang et al. (2004) showed how the teaching of sociocultural diversity issues in medicine to second year students, as an educational method, enhanced the knowledge of fourth year peer teachers on these issues. Not only is teaching a drive for learning, it appears to add to the teacher’s knowledge in a meaningful way. This could be through re-learning and further organizing knowledge or it may be that teaching evokes different knowledge acquisition and retention which may act synergistically to learning the material.


학생의 내적 동기 강화

To enhance intrinsic motivation in students


가르쳐야 되는 상황은 '외적 동기'처럼 보일 수 있으나, '내적 동기'도 강화시킨다. Self determination theory에 따르면 교사의 위치에 있는 학생이 단순히 학생의 역할만 하는 학생보다 더 내적 동기가 빨리 강해진다.

The obligation to teach can be viewed as an extrinsic motivator, but teaching may also enhance intrinsic motivation. Self determination theory predicts that students in a teacher role will more quickly develop intrinsic motivation to study material then when they just act in a regular student role (Ryan & Deci 2000). This may be due to the fact that the conditions for feelings of competence, autonomy and relatedness are more optimized when assuming the role of the teacher on a topic area as opposed to being a more passive learn


의사의 한 역할인 교육자로서의 준비과정

To prepare physicians for their future role as educators


'의사는 교육자가 되어야 한다'라는 점차 확대되고 있는 컨센서스에 대한 것. 

A very different argument for peer teaching is the growing consensus among the medical education community that doctors need to be educators. Dandavino et al. have elaborated this argument in a paper in this issue. Several recent competency frameworks for future physicians stipulate the role of the physician as educator (Frank et al. 1996; Bleker et al. 2004). 


The need to prepare physicians for this future role has led to...

      • initiatives to train students and residents in teaching skills (Edwards et al. 2002; Busari et al. 2006; Haber et al. 2006), 
      • provide teaching rotations for residents (Borleffs et al. 2002) and educational fellowships (Searle et al. 2006), 
      • and make medical students qualify for teaching tasks (Evans et al. 2007; Ten Cate this issue).

동료에게 피드백 주는 것에 대한 연습

To practice peer feedback as part of multi source feedback


MSF는 직무기반 medical competence의 평가에 있어서 점차 늘어나고 있는 접근법이다. 이 때 정보원중 하나는 동료들에 의한 평가이고, 이를 위해서 학생들은 서로를 평가할 수 있는 능력을 키워야 한다.

Multi source feedback (MSF) is an increasingly popular approach to the assessment of work-based medical competence in trainees and physicians (Epstein 2007). One of the sources of information for feedback and appraisal in MSF is the peer. To fulfil this objective, students should be trained to assess each other. 


Peer assessment is often not considered a easy task (Arnold et al.), and its validity is questioned (English et al. 2006; Lurie et al. 2006) (동료에 대한 평가가 너무 후함.)as students tend to rate their peers too highly (Tyler 2006). Essential is the difference between summative assessment and formative feedback. The latter appears to be much suitable to be executed by peers (Dannefer et al. 2005; Lockyer & Clyman in press). Peer assessment is not the topic of the papers in this theme issue, but the literature shows that it is increasingly practised (Arnold et al. 2005, 2007).


리더십 스킬과 자신감 훈련

To train leadership skills and confidence


리더십은 다음에 필요하다.

The role of the teacher is not merely one of knowledge transmission. 

Leadership is necessary to...

organise teaching, 

to guide and facilitate a group, 

to make decisions about what courses of action are needed during a classroom session and 

to prioritise the subject matter being taught. 

Students, who are experienced in acting as a peer teacher, specifically when distance, formality and group size are large, will likely also develop leadership skills that may be useful in other situations that an academic graduate will be expected to handle.


교육을 중요한 임무로 받아들이는 문화 형성

To modify the academic medical culture toward embracing education as a core task of health care


선진국에서 교육이 중시되지 않는 것은 단순히 재정적 문제뿐은 아니다. 

One problem regarding current medical training in western countries is the undervalued importance as well as the relative paucity of resources available for academic medical education (Cooke et al. 2006). This is not only a matter of finances; a culture that fosters educational leadership and acknowledges the importance of a profession to adequately transmit its knowledge, skills, habits and professional codes of conduct to future generations requires an attitude that is not just focused on the here an now of managed care.


자원이 제한적인 환경에서 의료 훈련 프로그램을 지속시키기 위해서

To sustain medical training programmes in severely resource-constrained settings


In most developed countries, the provision of resources for education is under pressure and peer teaching may help to alleviate some of this pressure, as was mentioned above. However, in some developing countries, the mere existence of medical education is threatened by the accumulation of societal problems. In an excellent overview, Burch (2007) discusses how South Africa’s recent combination of economic decline, a sharp increase in disease burden, a substantial emigration of medical graduates from a country with already one of the world’s lowest healthcare workers to population ratio, seriously threatens the capacity to train sufficient doctors. One recent regulation issued in this country is to spend one compulsory postgraduate year in public health care before registration as a doctor is possible


역량바탕프로그램의 졸업후 교육에서 감독책임(supervision responsibility) 강화

To offer supervision responsibility to trainees in competency-based postgraduate programmes


역량바탕교육과정에서 수련의 outcome이 중요함.

In competency-based curricula, specifically in postgraduate medical training, the outcome of training – i.e. the competence of the specialists – is considered more important than the input of the training – i.e. the training circumstances (Long 2000; Carracio et al. 2002; Ten Cate 2005; ACGME 2007).


이러한 상황에서 레지던트들은 동료 레지던트에 대한 supervision responsibility가 있다.

It has been suggested that in competency-based training, residents may be formally awarded supervision responsibilities for fellow residents, once they have mastered the required competency-level in predetermined areas, ahead of others (Ten Cate & Scheele 2007). This supervision includes being a clinical teacher and role model.




The natural interaction of learningand teaching in medical education


오랜 기간 의학은 '전문가-초심자' 관계로 전수되어왔다. 많은 세대가 개인지도를 해주는 길드 구조에서 전문직으로 키워졌으며, 이러한 길드 구조는 초심자-중간자-마스터의 단계를 이룬다. 점차 독립하게 되는 것이다. 이 중 가장 흥미로운 단계는 'journeyman'이다.

In history, medicine has long been practiced and learned in apprentice–expert arrangements. Many generations have acquired competence in our profession by joining the guild structure of personal guidance. A typical guild structure shows three levels of expertise: apprentice, journeyman and master; phases that reflect growth toward independence. Perhaps the most interesting phase is that of the journeyman, the midskilled craftsman who has completed the apprenticeship.


journeypersons는 가르치는 역할을 자주 하게 되지는 않지만, 마스터가 되기 위해 연마하는 단계를 더 밟아야 하고, journeyperson이 가르치는 역할을 맡음으로서 더 마스터에 가까워질 수 있다.

Journeypersons were often entitled to teach, but still had to develop their own skills further to become a master; indeed it is believed that having the journeyperson teach contributed to the development of mastery.


Collins는 apprenticeship을 교육에 대입해서 'cognitive apprenticeship'이라 불렀다.

Collins et al. (1989) reintroduced the apprenticeship concept in education, and called it ‘cognitive apprenticeship’. But the intermediate stage, the journeyman, seems to have vanished. Following Collins et al. (1989) ‘cognitive journeymanship’ could very well serve as a logical concept in long educational tracks, such as the medical education continuum.









 2007 Sep;29(6):591-9.

Peer teaching in medical educationtwelve reasons to move from theory to practice.

Abstract

OBJECTIVE:

To provide an estimation of how often peer teaching is applied in medical education, based on reports in the literature and to summarizereasons that support the use of this form of teaching.

METHOD:

We surveyed the 2006 medical education literature and categorised reports of peer teaching according to educational distance between students teaching and students taught, group size, and level of formality of the teaching. Subsequently, we analysed the rationales for applying peerteaching.

RESULTS:

Most reports were published abstracts in either Medical Education's annual feature 'Really Good Stuff' or the AMEE's annual conference proceedings. We identified twelve distinct reasons to apply peer teaching, including 'alleviating faculty teaching burden', 'providing role models for junior students', 'enhancing intrinsic motivation' and 'preparing physicians for their future role as educators'.

DISCUSSION:

Peer teaching appears to be practiced often, but many peer teaching reports do not become full length journal articles. We conclude that specifically 'near-peer teaching' appears beneficial for student teachers and learners as well as for the organisation. The analogy of the 'journeyman', as intermediate between 'apprentice' and 'master', with both learning and teaching tasks, is a valuable but yet under-recognized source of education in the medical education continuum.

PMID:

 

17922354

 

[PubMed - indexed for MEDLINE]





“Continuity” as an Organizing Principle for Clinical Education Reform

David A. Hirsh, M.D., Barbara Ogur, M.D., George E. Thibault, M.D., and Malcolm Cox, M.D.



의학교육의 궁극적인 목적 - 건강에 대한 사회적 요구 달성 - 을 위해서 학부의학교육은 모든 의학 분야를 망라하여 핵심역량에 대하여 폭넓게 숙련된 학생을 양성하는 것이다. 고도로 전문화되고 생산성을 높일 것이 요구되어 교육이 한정된 자원을 놓고 연구와 진료와 같은 다른 영역과 경쟁을 해야 하는 환경에서 어떻게 이 목표를 달성할 것인지는 중요한 도전과제라 할 수 있다.

If the ultimate purpose of medical education —to meet the health needs of society — is to be achieved, the primary goal of undergraduate medical education should be to produce students who are broadly skilled in the core competencies that transcend all disciplines of medicine.1,2 The challenge is how to accomplish this goal in a clinical learning environment fragmented by increasing specialization and demands for clinical productivity and constrained by a prevailing culture in which education must compete with research and clinical practice for medical school resources.3


의과학과 진료의 발전은 눈부신데, 미국 의과대학의 임상교육 모델은 William Osler가 살던 백년 전과 비교했을 때 거의 달라진게 없다. 학생들은 급성기 병원의 특정 전공과에 배치되어 랜덤한 순서로 짧은 로테이션을 돌게 된다. 그리고 그 속에서 학생이 겪게 되는 임상경험역시 Osler의 시대와 다를게 별로 없다.

As compared with the dramatic changes that have occurred in biomedical science and the practice of medicine, the fundamental model of clinical education in American medical schools has changed little since the time of Sir William Osler, a century ago. Students are still assigned to specialty-specific teams of interns, residents, and supervising faculty physicians for relatively brief, randomly sequenced rotations in acute care hospitals. 4,5 And the core clinical credentialing experience continues to be this same series of rotations, primarily in the third year of the traditional four-year undergraduate curriculum, just as it was in Osler’s day.


학생들은 졸업 후 수련과정에서 최소 3년, 길게는 8년 이상을 병원에서 보내게 될 것이며, 이 시기에 필요한 기술들을 연마하기에 병원이라는 환경이 학습 기회를 제공하는 측면에서는 부족함이 없으나, 현재의 모델은 미래사회의 요구와 변화를 전혀 따라가지 못하고 있다. 이를 인지한 많은 사람들은 현재의 급성기 임상교육 모델의 강점을 유지하면서, 현 모델이 가진 주요한 한계점인 '서로 다른 학습경험 사이의 연계성과 연속성'을 극복하기 위한 임상교육의 새로운 모델을 요구하기에 나섰다.

Although there is no doubt that the hospital environment remains rich in learning opportunities for medical students and that students need to learn the skills necessary to succeed in an environment in which most of them will spend 3 to 8 years of postgraduate training, there is a growing sense nationally that the current model is poorly aligned with society’s present and future health care needs.6,7 This realization has led many observers to call for a new model of clinical education, one that would incorporate the strengths of the present acute care educational model but eliminate the model’s major weakness — a lack of connection or continuity among different learning experiences.8,9






교육적 연속성

educational continuity


수련중인 의사에게 있어서, 근대 학습 이론에 기반을 둔 '교육의 연속성'이란, 전문직으로서 그리고 한 개인으로서 지속적인 발전에 대한 것이기도 하다. 교육과정의 한 부분이 아니라, 전체 교육과정에 대한 'ownership'을 갖는 것이 '교육적 연속성'의 필수조건이라고 할 수 있다.

Rooted in the principles of modern learning theory,10,11 the notion of educational continuity reflects the progressive professional and personal development required of physicians in training.12 A spirit of “ownership” of the entire curriculum, rather than one discipline-specific portion of the curriculum, is a prerequisite for educational continuity.13





Continuity of Care

언제나 가장 강력한 동기유발요인은 환자에게 헌신하는 마음가짐이었다. 봉사학습(service learning programs)에서는 학생들이 자신의 열망을 이룰 수 있게 하는 것이 가장 강력하게 학습을 지지하는 것이었으나, 임상실습경험 그 자체에서는 막상 이것을 거의 활용하지 않고 있었다.

Throughout the history of the profession, the most powerful motivator for learning has been the sense of deep commitment to patients. Connecting the student’s desire to serve with his or her desire to learn has strong support in learning theory and has been used effectively for many years in a wide variety of service learning programs in health-related disciplines. However, only rarely has service learning been part of the core clerkship experience itself.14


Continuity of Curriculum

학습자의 가치관/태도/지식/술기 등이 향상되도록 하기 위해서는, 교육과정의 각 요소들이 서로 논리적인 연결구조를 가지고 있어야 한다. 이러한 교육과정의 특징은 세 가지로 요약할 수 있다.

To support the progression of a learner’s values, attitudes, knowledge, and skills, each component of a curriculum should have a rational, considered relationship with all others. A developmentally progressive curriculum has three major aspects. 

First, there is a rational sequential order that facilitates learning, with certain types of knowledge and skills serving as the foundation for subsequent learning. Skills that are notably different, but equally complex, may still be most appropriately taught in a particular order. For example, knowledge of anatomy and pathophysiology facilitates the taking of a medical history. 

Second, more complex tasks should follow some degree of achievement in the performance of more simple but related tasks. Thus, one learns to construct a simple problem list before learning to develop a complicated differential diagnosis. Similarly, grappling with complex therapeutic decisions makes little sense for a student who has yet to master rudimentary diagnostic decision making. 

Third, the curriculum should be implemented in a learner-centered manner, such that a given student’s learning is tailored to his or her particular evolving (i.e., developmentally appropriate) needs.


Continuity of Supervision

교수와 학생간, 그리고 여러 교수들간 연계성을 확립하는 것이 중요하다. 학생들은 지속적으로 지도를 해주는 사람에 대해 환자진료에 대해서 공동의 책임을 갖는다는 직업적인 친밀감을 갖게 된다. 

Establishing connections between faculty, other caregivers, and students and among faculty across disciplines is critical to forming a productive learning community.16 Students and longitudinal preceptors share the professional intimacy of dual responsibility for patient care. Such relationships in which faculty members have personal responsibility for overseeing their own students, provide students with the emotional comfort to take intellectual risks in their learning. At the same time, trusting relationships and shared goals foster coaching, promote effective feedback, and enhance clinical performance.




장애물

barriers to educational continuity



'교육적 연속성'의 개념이 임상교육 개혁에 있어서 핵심 원칙이긴 하지만, 그 장애물 또한 만만치 않다. 

Although the concept of educational continuity provides a powerful organizing principle for clinical education reform, the barriers to changing the manner in which the traditional core clinical clerkship experience is organized should not be underestimated (Table 2). Promoting innovation on the basis of either educational theory or nascent outcomes data alone will require visionary leadership, innovative resource management, and careful attention to learning, cultural, and regulatory issues.





새로운 모델

new models of clinical clerkships





A부터 I까지 각각의 모델과 예시에 대한 설명


Promoting educational continuity is complicated by the traditional division of the core clinical clerkship experience into a disconnected series of independently governed, discipline-specific, randomly ordered, sequential blocks (Fig. 1A), each characterized by largely ad hoc patient assignments and poorly coordinated learning objectives. To provide opportunities for a more collective approach to curriculum design and management and to better deal with so-called orphan topicsmedical schools have begun to assume more centralized control of the clerkship year. Over the past decade, this shift in governance has allowed for the development of a variety of new models of clinical clerkships, many of which have incorporated elements of educational continuity into the overall learning experience. 


Some schools have developed interdisciplinary “intersessions” or “interclerkships” (courses, generally of about a week’s duration, interposed between sequential clerkships) (Fig. 1B)19 and longitudinal “themes” or “threads” (courses that link similar content between clerkships) (Fig. 1C).20 Both models provide opportunities for interdisciplinary curriculum design and management. However, short of major curricular revisions (such as consolidating core clerkship objectives or extending the duration of the overall experience), time limitations curtail the ability of either approach to reach its full potential. Many of these new clerkship experiences have used small-group, problem-based learning, which although a natural locus for interdisciplinary teaching,21 had not previously been used in the clinical curriculum as commonly as in the preclinical curriculum.22 

예시) In England, at the University of Manchester, modules of thematically organized, problem-based material are now being taught alongside traditional discipline-specific “attachments” (clerkships).23 Semistructured interviews of Manchester graduates have indicated significant gains in dealing with clinical uncertainty, knowing their personal limits, and asking for help when these limits are exceeded.24 


예시) A variant of problem-based learning has been used at the University of Dundee in Scotland to integrate content across the entire curriculum.25 Task-based learning uses the clinical experience itself, rather than “paper” cases, to generate examples of a series of predetermined tasks, with the students themselves responsible for finding opportunities to explore these tasks as they move through a discipline-specific, sequential curriculum. Task-based learning is credited with enhancing the transfer of basic science knowledge to the clinical years as well as providing an opportunity for integration of core content across clinical disciplines without the need to create interdisciplinary teaching teams.26


Where curricular content sufficiently overlaps disciplines (neurology and psychiatry or obstetrics and neonatology, for example), the opportunity exists to integrate clerkships more fully across disciplinary lines (Fig. 1D). However, although there are examples of integration in which related clerkships have been grouped together for administrative or scheduling purposes, multidisciplinary governance and joint teaching have been attempted only infrequently and have proved difficult to sustain in a subspecialty-dominant practice environment.27-29


Ambulatory care clerkships are another potential locus for interdisciplinary design and management. In recent years, block or longitudinal ambulatory care clerkships (Fig. 1E and 1F, respectively) — individually or collectively organized by departments of family medicine, general internal medicine, and general pediatrics — have become relatively common components of the core clerkship year.30-34 Although single or isolated block experiences are an appropriate forum for the follow-up of time-limited disorders, they provide little opportunity for exposure to chronic disease management, a major required competency in the modern practice environment. 


Students appear to benefit from longitudinal ambulatory care experiences by developing more effective relationships with patients, gaining insight into the psychosocial aspects of care, and understanding the longitudinal management of chronic illness.35 However, this potential is often degraded by competing inpatient responsibilities and patient-scheduling problems. Recurring ambulatory- block rotations devoted exclusively to generalist community practice, alternating with discipline-specific inpatient blocks (Fig. 1G)might provide an effective solution. Combining both departmentally based and interdisciplinary governance models, this intriguing approach — recently suggested to promote continuity in internal medicine residency education36 — has yet to be tested. Applied to undergraduate education, however, it would probably require substantial lengthening of the traditional clerkship year. 


Many permutations of these basic models are possible. Any substantial combination of sequential and longitudinal experiences — so-called mixed models — would allow for some degree of both discipline-specific immersion and educational continuity (Fig. 1H). 

예시) In a pilot program at Case Western Reserve University in Cleveland, for example, time was equally divided between traditional, discipline-specific inpatient rotations and ambulatory settings, with ambulatory training being provided in specialty clinics and a yearlong continuity experience in one of the generalist disciplines.37 Weekly tutorials and seminars, organized as longitudinal themes and provided by a constant group of faculty mentors, served to bridge individual specialty-specific experiences. Grade distributions in core clerkships were similarexcept in psychiatry, in which students in the integrated track achieved significantly higher scores than did students in the traditional curriculum. They also performed better on a generalist Objective Structured Clinical Examination but had a lower mean score on the National Board of Medical Examiners’ internal-medicine “shelf” exam. A majority of students reported that they would choose the integrated third year again and would recommend it to others. 

예시) Similar approaches are being tested at several teaching hospitals associated with Harvard Medical School and the University of California, San Francisco, as part of school-wide efforts on medical education reform. 


Longitudinal organization of most or all specialties that are commonly represented in the core clerkships (Fig. 1I) is an emerging but still uncommon model

예시) Motivated by the need for graduates who are interested in practicing in medically underserved areas, some schools have created clerkships that place students in longitudinal ambulatory care experiences — including primary care and multidisciplinary group practices — for a significant portion of their clinical training. When measured against regional workforce goals, these programs have been judged to be quite successful. 38-43 Students in these variously integrated longitudinal clerkships have performed as well as their more traditionally trained counterparts on local and national examinations of clinical competence.44-46


예시) Other schools are testing the feasibility of multidisciplinary, cross-site longitudinal integration without emphasizing primary care or attempting to steer students toward the generalist disciplines. In a pilot project at Harvard Medical School and the Cambridge Health Alliance in Cambridge, Massachusetts, students spend the entire third year learning from serial contact with a carefully selected cohort of patients recruited from their preceptors’ practices in internal medicine, pediatrics, psychiatry, neurology, and obstetrics and gynecology.47 Each patient is followed across all venues of care, including outpatient specialty and subspecialty clinics, the inpatient setting, and rehabilitative, nursing home, and home care. Special arrangements facilitate exposure to patients in the emergency department and a full spectrum of general surgical care. Weekly case-based tutorials on fundamental topics that seek to integrate basic and clinical science, simulation exercises, electronic records, and mentored educational portfolios further emphasize the interdisciplinary and personalized nature of the curriculum.48,49




결론

conclusions

새로운 임상실습 모델이 지속될 가치가 있는지 아니면 또 다른 모델이 등장할 것인지는 두고 볼 일이다. 그러나 모델이 무엇이든 임상교육 환경은 좀 더 전문가로서의 발달을 강조하고 환자 중심의 학습을 받아들어야 할 필요가 있다. 보건의료의 궁극적인 목적이 환자중심의 진료와 의료의 질 향상인 것처럼, 교육시스템에서는 학습자중심의 교육과 교육의 질 향상이 그 핵심이라 할 것이다.

Only time will tell whether any of these new clerkship models will have enduring value or whether yet others will need to emerge. Whatever the model, the clinical environment must be made more receptive to professional development, and learning must be embedded in caring for patients. Just as patient-centeredness and improvements in health care quality are becoming the overarching metrics of the health care delivery system, so too should learner-centeredness and improvements in educational quality become the proximate metrics of the medical education system.





 2007 Feb 22;356(8):858-66.

"Continuity" as an organizing principle for clinical education reform.





Students’ perceptions of early patient encounters in a PBL curriculum: A first evaluation of the Maastricht experience

AGNES D. DIEMERS1, DIANA H. J. M. DOLMANS1, MARIJKE VAN SANTEN2, SCHELTUS J. VAN LUIJK3, AMEIKE M. B. JANSSEN-NOORDMAN1 & ALBERT J. J. A. SCHERPBIER1

1Maastricht University, 2University Hospital Maastricht, 3VUmc, Amsterdam, at the time of the study Maastricht University, The Netherlands



Introduction: Real patient encounters before the clinical phase of undergraduate medical education are recommended to stimulate integration of theory and practice. Such encounters are not easy to integrate into the three phases of the problem-based learning cycle, i.e. preparation, self-study and reporting. The authors studied students’ perceptions of problem-based learning with real patient encounters as the starting point for learning.


Method: Students’ perceptions of the programme with real patients were evaluated by means of a questionnaire. Mean item scores on a five-point Likert scale and 95% confidence intervals were calculated.


Results: Students showed satisfaction with the patient encounters and said they learned a lot from them. Reporting was also highly rated, particularly the integration of theory and practice. Preparation and self-study received lower scores.


Discussion: The findings support the view that real patient encounters can act as a powerful driving force for learning and enhance integration of theory and practice. Student learning might benefit from: better information to students and teachers regarding educational objectives, teacher training and careful selection of patients. In order to gain more insight into learning from patient encounters, further studies should address students’ and teachers’ views and behaviours in respect of this type of learning.








Introduction


PBL의 취지와 예상되는 이점에도 불구하고, 학생들은 이론적 지식을 실제 환자에 연결시키기 어려워하고 있으며, 실제 환자를 임상실습교육기간보다 이전에 만나는 것이 이 문제의 해결법으로 제시되었다.

Problem-based learning (PBL) is increasingly being used as an educational approach in medical education. It is supposed to ‘promote the transfer of concepts to new problems and the integration of basic science concepts into clinical problems’ (Norman & Schmidt 1992). Despite this assumed benefit, students in a PBL curriculum have reported difficulty in applying theoretical knowledge to real patient problems when making the transition from preclinical, mainly theoretical courses to clinical training during the clerkships (Prince et al. 2000; 2005). Contacts with real patients during the preclinical phase have been proposed as a solution to this problem (Prince et al. 2000; 2005).


문헌을 통해서도 조기 환자접촉의 효과가 확인되고 있다. 실제 환자의 맥락 속에서 이론을 배울때 'more relevant'해지고 'easier to learn'해진다. 또한 학습의 강력한 원동력이다.

Reports in the literature concerning the use of early patient encounters in PBL have confirmed the beneficial effects of such encounters (O’Neill et al. 2000; 2002; Dammers 2001). New knowledge is better internalized when students can relate it to a real patient (Prince et al. 2000). When students learn theory within the context of real patients, it becomes ‘more relevant’, and is ‘easier to learn’ and easier to remember (Norman & Schmidt 1992; Dornan & Bundy 2004; Littlewood et al. 2005). Furthermore, when real patients are used as the starting point for learning, they act as a powerful driving force for meaningful and profound learning (Norman & Schmidt 1992; Prince et al. 2000; Parsell & Bligh 2001; Dornan & Bundy 2004; Littlewood et al. 2005).


그러나 실제로 환자 접촉을 의학 교육과정에 넣는 것은 가볍게 될 일도 아니고, 그 성공이 담보되는 것도 아니다. 주요하게 거론되는 문제로는 환자의 문제를 교육과정의 주제와 맞추기도 어렵고, 핵심 교육과정을 포괄할만큼 충분한 사례를 확보하는 것도 어렵다.

The actual implementation and integration of patient contacts in medical curricula is an undertaking that should not be embarked upon lightly and success is not to be taken for granted. The main problems reported in the literature are matching patient problems to course themes and expected difficulties in selecting sufficient numbers of suitable cases to ensure coverage of the core curriculum (Bokhoven et al. 1998; O’Neill et al. 2000; 2002; Mainhard et al. 2004). 


또 다른 문제는 학생들이 이론과 실제의 의미있는 연결고리를 찾기를 어려워한다는 것이다. 실제 환자를 만나게 하는 것이 자동적으로 학생들로하여금 환자가 가진 문제의 기전(병태생리)를 학습하게 하지는 않았다. 이 연구에서 학생들은 환자와 학습을 적절하게 연결시키지 못했다고 말했으며, 그 연결이 어떤 것인지가 '제시될' 필요가 있다고 했다. 또한 Eva는 학생들이 자동적으로 analytic reasoning을 사용하지 않으며, 환자의 문제가 어떻게 기초과학과 연결되는지 분명한 교육을 받을 필요가 있고, 여러 문제간 비교를 해줄 필요가 있다고 주장했다.

Another potential problem is students having difficulty identifying meaningful links between theory and practice. One study reported that confrontation with real patients in the curriculum did not automatically result in medical students studying the pathophysiology underlying patients’ problems (van der Wiel et al. 1999). In that study, students said that they did not make the connection between patients and learning of their own accord and that they needed ‘to be shown those links’ (van der Wiel et al. 1999). Additionally, Eva (2004) argues that students do not spontaneously use analytic reasoning, but should be explicitly instructed to link the problems presented by the patient to basic science and make comparisons across problems.


조기 환자접촉과 PBL이 가진 교육적 잠재력을 합해내려면 환자 접촉을 PBL사이클에 적절하게 포함시킬수 있는 방법이 필요하다. PBL 사이클을 세 단계로 이뤄진다. 준비-자습-보고. 우리는 준비 단계 이후에 환자를 접촉하는 과정에 대한 연구를 했고, 연구의 목적은 이 4단계 PBL사이클에 대한 학생들의 평가는 어떠한지 보고자 하는 것이다.

In order to realize the combined educational potential of early patient encounters and PBL, a way has to be found to effectively integrate real patient encounters into the PBL cycle. The PBL cycle generally comprises three phases: preparation, self-study and reporting. We studied a course in which real patient encounters were incorporated into the PBL cycle immediately after the preparation phase (Figure 1). The aim of our study was to evaluate students’ perceptions of their learning organized around this four-phase PBL cycle, in which a real patient encounter was introduced as a driving force for student learning.



교육적 배경 Educational background


2001년 Maastricht 의과대학의 6년제 PBL교육과정에 전방위적 개혁이 이뤄졌다. '낡은'교육과정은 명확히 구분되는 두 개 시기로 나눠져있었다 (4년 전임상실습, 2년 임상실습). 새로운 교육과정의 목적은 학생들이 실제 환자와의 경험을 조기에 할 수 있도록 하는 것이다.

In 2001, extensive innovations were introduced into the six-year PBL curriculum of Maastricht Medical School, the Netherlands. The ‘old’ curriculum consisted of two distinct phases: a four-year preclinical phase in which PBL tutorials were the predominant educational method and two years of mainly hospital-based clinical clerkships. One of the aims of the new curriculum is to offer students experiences with real patients earlier in the curriculum. 


이를 위해 3학년에서 실제 환자와의 잦은 접촉 기회를 포함시켰고, 새로운 3학년 교육과정의 주제는 '만성질환' 이었다. 이 주제는 크게 네 개의 클러스터로 나눠진다. 매주 학생들은 외래 클리닉에서 환자를 본다. 환자와의 접촉은 PBL사이클의 시작점이고, 각 사이클은 일주일간 진행되며 10명의 학생과 학생들의 코치가 함께하는 4시간짜리 tutorial, 모든 학생들의 환자 접촉, 환자 접촉과 다음 tutorial 사이의 자습시간으로 구성된다. 

In Year 3 this is realized by the introduction of frequent real patient encounters. The theme of the new Year 3 is Chronic Diseases. This theme is divided into four subject clusters, i.e. abdominal region, locomotor system, circulation & lungs and psychomedical problems & mental healthcare. Every week students see a patient in the teaching outpatient clinic at University Hospital Maastricht. The patient encounters are the starting point for learning in the PBL cycle. Each cycle lasts a week and comprises one four-hour tutorial attended by 10 students and their coach, patient encounters for all students, and self-study between the patient encounter and the next tutorial. 


우리는 PBL의 첫 phase를 둘로 나누었다. 하나는 준비시기로, 학생들이 환자 대면을 준비하고 사전 지식을 모으는 단계이다. 환자 대면 시기는 학생들이 짝을 이뤄서 실제 환자를 만나는 것이다. 이 환자 대면으로부터 학생들은 자습할 학습 주제를 찾는다. 

We divided the original first phase of PBL tutorials into two phases: the ‘preparation phase’ in which students prepare for the patient encounter and activate prior knowledge and the ‘patient encounter phase’ in which students, in pairs, meet a real patient instead of a paper patient. From this encounter students derive learning issues for self-study. 


그 결과 네 개의 연속된 시기가 PBL사이클을 구성한다.

As a result, four consecutive phases can be discerned in the PBL cycle. 

The preparation phase takes up the last hour of the tutorial, 

the patient encounter phase is scheduled one or two days after the tutorial, (튜터리얼 1~2일 후)

the self-study phase covers the time between the patient encounter and the tutorial in the next week, and 

the reporting phase takes place during the first three hours of the tutorial. 


PBL사이클은 3학년의 주요한 교육요소이며, 강의자, 술기훈련, 그 외 다른 교육활동으로 보충된다. 이 네 phase의 내용은 아래에서 더 자세히 다룬다.

The PBL cycle is the main educational component of Year 3 and is complemented by lectures, skills training and other educational activities. The content of the four phases will now be discussed in some detail.



1. Preparation phase

The students are given the GP’s letter of referral or a vignette (Box 1) describing the problem (or a similar problem) of the patient they will see in the outpatient clinic. The patient problems are elaborated on by the group in order to activate the knowledge gained during the preceding two years of the curriculum. During elaboration, attention is also being paid to history-taking and physical examination. The students then generate learning issues and decide what to study in preparation for the patient encounter.



2. Patient encounter phase

One or two days after the preparation phase, student pairs go to the outpatient clinic where they take a history and perform a physical examination of a patient. After about 30 minutes, when history and physical examination are finished, the students consult the patient’s attending physicianwho acts as their ‘clinical supervisor’. The students and the clinical supervisor then return to the patient to complete the consultation. The role of the clinical supervisor is to guide the students in generating learning issues on the basis of the problem presented by the patient and to give the students feedback on their performance.



3. Self-study phase

During the self-study phase the students work on the learning issues derived from the patient encounter. They make use of a variety of learning resources, such as books, skills training, lectures and so on. The student pairs prepare a clinical presentation on ‘their patient’ to present to the group during the reporting phase.



4. Reporting phase

This phase is partly devoted to the patient presentationswhich consist of a report on history, physical examination, differential diagnosis and management plan. The presentation is followed by a discussion of what the students have learned during the patient encounters and self-study phase. The purpose of this phase is to promote integration of theory and practice. Students apply their newly acquired knowledge to the patient problems.


The coach and the clinical supervisor are both clinical staff members of the disciplines involved in the Year 3 programme. Both have had two hours’ training in advance in which it is explained to them how to guide the session as a coach and clinical supervisor.








Instruments

For this study we analysed the results of the anonymous questionnaire of the regular curriculum evaluation, which is administered routinely to all students at the end of each cluster (Appendix 1). This means that each student could complete four questionnaires over the course of the year. The questionnaire is identical for the four clusters and consists of 10 statements with a five-point Likert scale (1=fully disagree, 5=fully agree): two statements about the preparation phase, three about the patient encounter phase, two about the self-study phase and three about the reporting phase. An example of a statement about the preparation phase is: ‘The tutorials provided sufficient preparation for the patient encounters.’ An example of a statement about the patient encounter phase is: ‘I learned much from the patient encounters.’




Analysis

Data were analysed using the Statistical Package for Social Sciences (SPSS version 12.0.1). Mean item scores across all students were calculated for each cluster separately. In this way 10 scores were obtained for each of the four subject clusters. Mean scores below 3.0 were considered unsatisfactory and indicative of a strong need for improvement. Mean scores of 3.0–3.4 were considered borderline, i.e. necessitating some improvement and mean scores of 3.5 or higher were considered good. We determined 95% confidence intervals (95% CI) for the mean item scores to determine whether a score differed significantly (p < 0.05) from 3.5.










Conclusions and discussion

Overall, students appear to be satisfied with the patient encounter phase and indicate that they learn a great deal from it. This supports Dornan’s (Dornan & Bundy 2004) findings that early patient contacts have the potential to enhance learning. The reporting phase is also rated highly. Students strongly agree that the patient encounters are discussed adequately during this phase. This positive view is reinforced by the relatively high scores concerning connecting theory and practice. These results are indicative of positive effects of the early introduction of real patient encounters in a PBL curriculum (Dornan & Bundy 2004). This can be seen as support for the view that real patient encounters can act as a powerful driving force for meaningful and profound learning (Norman & Schmidt 1992; Prince et al. 2000; Dornan & Bundy 2004; Littlewood et al. 2005). It should be taken into account, though, that further research is needed to further investigate the value-added of real patients in PBL.






 2007 Mar;29(2-3):135-42.

Students' perceptions of early patient encounters in a PBL curriculum: a first evaluation of the Maastrichtexperience.

Abstract

INTRODUCTION:

Real patient encounters before the clinical phase of undergraduate medical education are recommended to stimulate integration of theory and practice. Such encounters are not easy to integrate into the three phases of the problem-based learning cycle, i.e. preparation, self-study and reporting. The authors studied students' perceptions of problem-based learning with real patient encounters as the starting point for learning.

METHOD:

Students' perceptions of the programme with real patients were evaluated by means of a questionnaire. Mean item scores on a five-point Likert scale and 95% confidence intervals were calculated.

RESULTS:

Students showed satisfaction with the patient encounters and said they learned a lot from them. Reporting was also highly rated, particularly the integration of theory and practice. Preparation and self-study received lower scores.

DISCUSSION:

The findings support the view that real patient encounters can act as a powerful driving force for learning and enhance integration of theory and practice. Student learning might benefit from: better information to students and teachers regarding educational objectives, teacher training and careful selection of patients. In order to gain more insight into learning from patient encounters, further studies should address students' and teachers' views and behaviours in respect of this type of learning.










Students’ perception of a modified form of PBL using concept mapping

JONAS INNIES ADDAE, JACQUELINE I. WILSON & CHRISTINE CARRINGTON The University of the West Indies, Trinidad and Tobago


우리가 사용한 PBL방법은 Maastricht의 7-step PBL방법을 기반으로 하고 있다. 7step을 요약하면 아래와 같다.

Our PBL method has been based on the Maastricht 7-step PBL method which has been well described (Schmidt 1983). In summary, the 7-step method we have been using comprises the following steps: 

(1) 잘 모르는 단어/구절/개념을 명확히 하기

(2) 답이 필요하거나 토론해야 하는 문제를 찾기

(3) 브레인스토밍을 하고, 가설을 세우기

(4) 토론한 주제에 대한 systematic inventory 만들기

(5) 학습목표를 나열하기

(6) 개별적으로 학습하기

(7) 다시 모여서 새롭게 얻은 정보를 공유하기

(1) clarifying unfamiliar terms, phrases and concepts in the clinical problem, 

(2) identifying issues in the problem that need to be answered or discussed, 

(3) discussing the issues in a free-flowing discussion (brainstorming) and generating hypotheses to explain the issues, 

(4) making a systematic inventory of the issues discussed, 

(5) listing learning objectives that are necessary to address gaps in knowledge, 

(6) private study of the objectives and related material, 

(7) reconvening as a group to discuss the objectives and relating the newly acquired information to the clinical problem. 


7단계 중 4단계에서는 mapping을 활용하고 있으나, PBL전체적으로는 그러한 방법을 사용하는 것은 아니다.

The fourth step of our conventional 7-step PBL method (systematic inventory) uses a form of mapping but that PBL method as a whole does not use much mapping.


concept map이 유용한 도구로서 보고된 바 있지만, 이러한 map을 토론의 '결과물'로서만 봄으로써 learning exercise 과정에서 학생그룹이 어떠한 과정을 겪는지에 대한 정보가 부족하다.

Although concept maps have been found to be a useful education tool in the health sciences (Weiss & Levinson 2000; West et al. 2000; Rendas et al. 2006; Gonzalez et al. 2008), the maps produced tend to be the end products of the group discussions, and lack information about the stages that the group go through during the learning exercise.





 2012;34(11):e756-62. doi: 10.3109/0142159X.2012.689440.

Students' perception of a modified form of PBL using concept mapping.

Abstract

BACKGROUND:

Problem-based learning (PBL) and concept mapping have been shown to promote active and meaningful learning.

AIM:

To design a method of PBL that includes concept mapping and examine students' perceptions of this form of PBL.

METHODS:

We designed a 5-phase method of PBL which produced three clearly identifiable mapping phases that reflected the learning activities during the tutorial: (1) the initial understanding of the clinical problem, (2) students' prior knowledge of the problem, (3) the final understanding of the problem following self-directed study. The process of developing the second and third phases of the map involved the students answering questions that they generated on two occasions to give the entire process a 5-phase approach. Each student was exposed to both methods of PBL: a conventional 7-step method (Maastricht type) and the modified PBL (5-phase) method. We used a questionnaire to evaluate the students' perceptions of the two methods in four learning domains.

RESULT:

The students' ratings for the 5-phase method were significantly higher than for the 7-step method (paired t-test) on all items on the questionnaire.

CONCLUSION:

The students perceived the 5-phase method as promoting their passion for learning, and developing their cognitive, metacognitive and interpersonal skills






Impact of national context and culture on curriculum change: A case study (★★)

MARIE¨ LLE JIPPES, MD, PHD1, ERIK W. DRIESSEN, PHD1, GERARD D. MAJOOR, PHD2, WIM H. GIJSELAERS, PHD3, ARNO M.M. MUIJTJENS, PHD1 & CEES P.M. VAN DER VLEUTEN, PHD1

1Department of Educational Development and Research, 2Institute for Education, 3Maastricht University, Maastricht, The Netherlands



Background

앞선 연구들은 한 국가의 문화가 의과대학의 교육과정 개혁에 있어서 큰 장벽이라는 것을 보여준 바 있다. 특히 Hofstede의 문화적 영역(cultural dimension) 중 '불확실성 기피'는 통합교육과정을 도입한 비율과 유의미한 음(-)의 상관관계가 있었다.

Earlier studies suggested national culture to be a potential barrier to curriculum reform in medical schools. In particular, Hofstede’s cultural dimension ‘uncertainty avoidance’ had a significant negative relationship with the implementation rate of integrated curricula.

Aims:

그러나 일부 의과대학은 그 나라의 높은 '불확실성 기피' 수준에도 불구하고 성공적으로 교육과정 변화를 이끌어낸 바가 있다. 이로부터 우리는 이런 질문을 할 수 있다. '어떻게 이들 나라는 '불확실성 기피'라는 장벽을 극복할 수 있었을까?'

However, some schools succeeded to adopt curriculum changes despite their country’s strong uncertainty avoidance. This raised the question: ‘How did those schools overcome the barrier of uncertainty avoidance?’ 


Method: 

오스트리아는 '불확실성 기피' 특성이 강하면서도, 모든 의과대학에서 통합교육을 도입하고 있다. 4개 의과대학을 면담함으로서 27가지의 핵심 변화 agent를 발견할 수 있었다.

Austria offered the combination of a high uncertainty avoidance score and integrated curricula in all its medical schools. Twenty-seven key change agents in four medical universities were interviewed and transcripts analysed using thematic cross-case analysis.


Results

우선, 국가적으로 강력한 법을 도입하고 학교의 자율성의 제한하는 것이 ''예외'를 인정하는 문화'', '잘못을 정부 측으로 돌리는 문화'를 억제하는데 기여했다. 새로운 법은 각 대학의 자율권을 '개혁을 촉진하는 것'에 주었다. 이것만으로는 부족할 수 있었겠지만, 변화에 대한 강력한 요구, 지지적이면서 지속적인 리더십, 선견지명을 갖춘 change agent가 중요한 것으로 보인다.

Initially, strict national laws and limited autonomy of schools inhibited innovation and fostered an ‘excuse culture’: ‘It’s not our fault. It is the ministry’s’. A new law increasing university autonomy stimulated reforms. However, just this law would have been insufficient as many faculty still sought to avoid change. A strong need for change, supportive and continuous leadership, and visionary change agents were also deemed essential.


Conclusions:

불확실성을 기피하고자 하는 특성이 강한 나라에서는 엄격한 입법을 통해 변화에 대한 저항을 막을 수 있다. 국가적 입법이 변화를 유도하고, 추가적으로 변화를 지지할 내부적 요인들이 더해지면 교수들의 반대도 극복될 수 있다.

In societies with strong uncertainty avoidance strict legislation may enforce resistance to curriculum change. In those countries opposition by faculty can be overcome if national legislation encourages change, provided additional internal factors support the change process.












 2013 Aug;35(8):661-70. doi: 10.3109/0142159X.2013.785629. Epub 2013 Apr 30.

Impact of national context and culture on curriculum change: a case study.

Abstract

BACKGROUND:

Earlier studies suggested national culture to be a potential barrier to curriculum reform in medical schools. In particular, Hofstede's cultural dimension 'uncertainty avoidance' had a significant negative relationship with the implementation rate of integrated curricula.

AIMS:

However, some schools succeeded to adopt curriculum changes despite their country's strong uncertainty avoidance. This raised the question: 'How did those schools overcome the barrier of uncertainty avoidance?'

METHOD:

Austria offered the combination of a high uncertainty avoidance score and integrated curricula in all its medical schools. Twenty-seven keychange agents in four medical universities were interviewed and transcripts analysed using thematic cross-case analysis.

RESULTS:

Initially, strict national laws and limited autonomy of schools inhibited innovation and fostered an 'excuse culture': 'It's not our fault. It is the ministry's'. A new law increasing university autonomy stimulated reforms. However, just this law would have been insufficient as many faculty still sought to avoid change. A strong need for change, supportive and continuous leadership, and visionary change agents were also deemed essential.

CONCLUSIONS:

In societies with strong uncertainty avoidance strict legislation may enforce resistance to curriculum change. In those countries opposition by faculty can be overcome if national legislation encourages change, provided additional internal factors support the change process.





Globalization and the modernization of medical education

FRED C. J. STEVENS1 & JACQUELINE D. SIMMONDS GOULBOURNE2

1University of Maastricht, The Netherlands, 2University of the West Indies, Mona campus, Jamaica


Background: 

전세계적으로 교육자들과 학생들이 '효과적인 의학교육'이라고 생각하는 것에는 근본적인 차이가 있다. 그러나 의학교육에서 세계화가 용이한 '쉬운 공식'을 찾고 있었다.

Worldwide, there are essential differences underpinning what educators and students perceive to be effective medical education. Yet, the world looks on for a recipe or easy formula for the globalization of medical education.


Aims: 

여기서는 근대화의 운송자(carrier)로서 의학교육이 가지는 가정/주된 믿음/세계화의 영향 등을 보고자 한다.

This article examines the assumptions, main beliefs, and impact of globalization on medical education as a carrier of modernity.


Methods: 

문화적/사회적 구조를 찾고자 했다. 자메이카와 네덜란드의 두 의과대학에서 PBL에 대한 사례를 이용했다.

The article explores the cultural and social structures for the successful utilization of learning approaches within medical education. Empirical examples are problem-based learning (PBL) at two medical schools in Jamaica and the Netherlands, respectively.


Results: 

분석 결과, 사람들은 천성적으로 협동해서 일하는 것을 잘 하지 못했다. 효과적이고 효율적인 협력을 위해서는 그러한 문화를 만들어내기 위한 정교한 노력이 필요했다. 성공적인 PBL은 효과적인 의사소통기술에 기반하고 있고, 이는 현실을 이해하는데 필요한 공통의 지점에서 문화적으로 정의된다. 이러한 '공통성'은 존재하고 있는 것이 아니라, 명확하고 신중하게 만들어져야 한다.

Our analysis shows that people do not just naturally work well together. Deliberate efforts to build group culture for effective and efficient collaborative practice are required. Successful PBL is predicated on effective communication skills, which are culturally defined in that they require common points of understanding of reality. Commonality in cultural practices and expectations do not exist beforehand but must be clearly and deliberately created.


Conclusions: 

의학교육의 세계화는 디자인된 교수법을 도입하는 것 이상이며, 서구의 모델은 다른 환경에서 적용되기 위해서는 깊은 성찰과 숙고의 과정이 필요하다.

The globalization of medical education is more than the import of instructional designs. It includes Western models of social organization requiring deep reflection and adaptation to ensure its success in different environments and among different groups.




Results


2007년과 2008년, Maastricht 의과대학의 PBL은 학생들로부터 상당한 비판을 받았다. 학생들은 PBL이 그 근본 원칙에 따라 이루어지고 있지 않으며, 단순히 절차적인(ritualistic) 활동이 되어간다고 지적했다. 일부 학생들은 PBL의 유용성이나 적용가능성이 이미 시대에 뒤떨어졌다고 생각했다. 따라서 Bachelor학생들은 나름의 설문을 진행하여 의견을 모았고, 그 중 몇 가지를 아래에 기술하였다. 

In 2007 and 2008, PBL at the medical school of the University of Maastricht was highly criticized by students. Students felt that PBL was not carried out according to its essential principles and was at risk to become a ritualistic activity. Some believed that the usefulness and practicability of PBL was outdated. Therefore, students themselves conducted polling among all bachelor students to hear their opinions. These were some of the reported weaknesses of PBL (Stevens et al. 2010):

-그룹 상호작용은 거의 없으며 그룹 역학은 더 없다.

-학생들은 대개 개별적으로 학습하며, 그룹으로 학습하지 않는다. 이미 지정된 형식이 있는 경우 그룹학습은 ritualistic할 뿐이다.

-평가 단계에서 알아야 하는 것과 개별적으로 세우는 학습 계획이 맞지 않는다.

-학생들은 대체로 모국어로 된 권장 문헌과 인터넷을 사용한다.

-튜터는 그룹프로세스를 촉진하는 역할을 해야 하나, 학생들은 튜터의 전문가적 지식에 크게 의존한다.

– Little group interaction is used. Group dynamics hardly exist.

– Students largely work by themselves, not in groups. In areas where the prescribed formats are used, these are only ritualistic.

– A personal learning plan hardly fits to what students are expected to know at the assessments.

– Students largely use standard (recommended) literature and the internet, preferably in their native language.

– Tutors are required to only facilitate the group process. But students still heavily rely on the tutors’ expert knowledge. 


Mona 학생들과 마찬가지로 Maastricht학생들은 PBL시스템의 장점을 알고 있었다. 그러나 동시에 현장에서의 실패를 경험하고 있었다. Maastricht와 Mona의 학생들은 매우 달랐지만, 동시에 매우 비슷했다. 그룹역학이 작동하기 위해서는 적절한 문화적 구조와 적절한 사회적 구조가 필요했지만 이러한 기초요소가 없었던 것이다. 따라서 문화적 적절성의 문제, 구조적 한계의 문제는 여전히 남는다.

Just like the Mona students, Maastricht students are aware of the benefits of the PBL system but, at the same time, experience the practical failures. Obviously, the students in Maastricht and Mona are very different but, at the same time, very similar. They require the right cultural and social structural underpinnings to get the group dynamics going.

These basic ingredients are missing. So the question of cultural appropriation, structural limitations, and fit remains.



Discussion

From the comparison of PBL in Maastricht and at Mona, it is evident that in both contexts, the cultural underpinnings relating to systems and processes are/were not given due consideration for effective adaptation to the demands of PBL


The success of PBL is predicated on effective communication skills, which are culturally defined in that they require common signs and symbols and also common points of understanding of reality


Systemic problems are based on the culture of education, which includes the expectations of students as well as those of teachers and the school. This extends to the technological and structural support to make the model work as well as facilities to manage small groups.







 2012;34(10):e684-9. doi: 10.3109/0142159X.2012.687487.

Globalization and the modernization of medical education.

Abstract

BACKGROUND:

Worldwide, there are essential differences underpinning what educators and students perceive to be effective medical education. Yet, the world looks on for a recipe or easy formula for the globalization of medical education.

AIMS:

This article examines the assumptions, main beliefs, and impact of globalization on medical education as a carrier of modernity.

METHODS:

The article explores the cultural and social structures for the successful utilization of learning approaches within medical education. Empirical examples are problem-based learning (PBL) at two medical schools in Jamaica and the Netherlands, respectively.

RESULTS:

Our analysis shows that people do not just naturally work well together. Deliberate efforts to build group culture for effective and efficient collaborative practice are required. Successful PBL is predicated on effective communication skills, which are culturally defined in that they require common points of understanding of reality. Commonality in cultural practices and expectations do not exist beforehand but must be clearly and deliberately created.

CONCLUSIONS:

The globalization of medical education is more than the import of instructional designs. It includes Western models of socialorganization requiring deep reflection and adaptation to ensure its success in different environments and among different groups.

PMID:
 
23088359
 
[PubMed - indexed for MEDLINE]













Early student-patient contacts in general practice: An approach based on educational principles

RAMON P. G. OTTENHEIJM, PAUL J. ZWIETERING, ALBERT J. J. A. SCHERPBIER, & JOB F. M. METSEMAKERS

Maastricht University, Maastricht, The Netherlands


Abstract

Background: Clinical teaching and learning is generally seen as an educationally sound approach, but the clinical environment does not always offer optimal conditions to facilitate students’ learning processes.

Aims: To show how insights on constructing a good learning environment for student-patient contacts in real practice can be translated into an undergraduate clinical general practice programme in Year 3 and to study its feasibility.

Method: Literature search, yielding starting points for the development of the new programme and questionnaire evaluation of the programme.

Results: Six starting points for a good learning environment for early student-patient contacts: continuing exposure to patients, transformation of experience into knowledge, active role of students, supervision and feedback, time and space for teaching and teacher training were translated into a the new programme. The evaluation showed that the programme was feasible and well received by students and GPs, although some improvements are possible.

Conclusion: In a curriculum with clear goals for early student-patient contacts, it is feasible to implement an early clinical programme in general practice based on educational principles.






Introduction

임상교육은 학부 의학교육의 중요한 요소이다. 조기 임상노출에 대한 언급은 1970년대로 거슬러 올라간다. 또한 최근의 많은 교육과정 개선이 학생들을 조기에 임상경험을 시키는 것을 목표로 하고 있다. 일반적으로 조기 임상 경험은 affective and cognitive 측면에서 긍정적인 효과가 있다. 또한 본격적인 임상실습에 잘 준비할 수 있도록 하며, 배우는 내용을 실제 환경에서 적용할 수 있게 되는 등 여러 장점이 있다. 그러나 이러한 중요성에도 불구하고 최선의 설계가 무엇인지에 대해서는 알려져 있지 않다.

Clinical education is a core component of undergraduate medical education, comprising early clinical experiences and clinical clerkships. Programme descriptions of early clinical experiences go back to the 1970s (Pittman & Barr 1977; Smith et al. 1977; Benor 1987). Many recent curriculum revisions have been aimed at promoting students’ early clinical experiences (Howe 2001; Whipple et al. 2006; Howe et al, 2007; Diemers et al. 2007; Hook & Pfeiffer 2007). Generally, early clinical experiences have positive effects on affective and cognitive outcomes and on knowledge and skill development. Further, they offer good preparation for clerkships. More specifically, they provide an authentic context for learning, help students develop clinical ways of thinking, support students’ learning of biomedical and behavioural/social sciences and offer knowledge that cannot be learned from books (Dornan & Bundy 2004; Dornan et al. 2005). However, despite the fact that the importance of early clinical experiences is underpinned by an evidence-based set of learning outcomes, little is known about the best way to construct such experiences


임상실습에 대한 연구문헌을 살펴보면 임상환경이 항상 최선의 학습환경은 아님이 드러난다. 지나친 다양성과 예측불가능성, 불연속성 등의 특징이 있기 때문에 일차의료진료환경에서 일대일로 가르치는 것이 효과적인 임상교육을 위해서 더 좋을 수도 있다.

Research on clerkships has shown that the clinical environment is not always the best setting to enhance students’ learning processes. Students’ learning experiences are characterized by variability, unpredictability, and lack of continuity (Remmen et al. 2000; Murray et al. 2001; Irby & Bowen 2004). Primary care settings and teaching based on one-to-one contacts may be environments most likely to fulfil criteria for effective clinical teaching (van Leeuwen 1995; Gordon et al. 2000).


2001년 Maastricht의과대학의 6년 교육과정의 revision이 있었고, 그 목적 중 하나는 초기 임상경험을 강화하는 것이었다. 

In September 2001, a revision of the six-year undergraduate medical curriculum of Maastricht University was launched. One of the aims was to intensify early clinical experiences in different practice settings. Until 2001, the Department of General Practice delivered two undergraduate courses based on student-patient contacts: the early clinical Adoption Programme and a clerkship in Year 6 (Martens & op ‘t Root 1992; Crebolder & Metsemakers 1994; van Bokhoven et al. 1998).


Method

우리는 조기임상경험을 '임상실습 전에 실제 환자와 실제 임상 상황에서 접촉함으로서 학습과정을 촉진하는 경험'이라고 정의했다.

We defined early clinical experience as pre-clerkship experiences with authentic patient contact in a clinical context that enhances the process of learning (Dornan et al. 2005)


1단계 : 배경정보 - 문헌 검색

Step 1 Background information

We searched Medline and Psycinfo for articles published after 1970, using the keywords: medical education, undergraduate, programmes, family practice or general practice, and supervision.

2단계 : 프로그램 기술

Step 2 Description of the programme

This step involved translation of the starting points resulting from step 1 into the new programme.

3단계 : 프로그램 평가

Step 3 Evaluation of the programme

We evaluated the first three years of the new programme by a questionnaire survey among the GPs and students participating in the programme.



Results

전 임상실습 교육과정 중 실제 진료환경에서 학생-환자간 효과적인 학습환경을 만드는 방법

Step 1: How to construct an effective learning environment for pre-clerkship student-patient contacts in real practice

1. 조기 환자 접촉의 중요성 : 환자에 대한 지속적 노출이 중요하다.

1. The importance of early patient contacts

지식의 구조화와 장기기억에 Practical experience의 중요성

학생이 illness script를 쓰는 것이 중요

조기에 폭넓은 문제에 대해 다양한 환자를 만나는 것이 중요

There is evidence that practical experience is a prerequisite for the development of medical expertise, based on cognitive psychological theories regarding clinical reasoning and how knowledge is structured in long-term memory (Bordage & Lemieux 1991; Schmidt & Boshuizen 1993; Custers et al. 1998; van de Wiel et al. 1999). It is important for students to develop illness scripts, which consist of pathophysiological knowledge, information about physical, mental and social consequences of disease and the situation in which illness develops. These structures of expert knowledge result from continuous exposure to patients and thus require extended practice in professionally relevant contexts. This underscores the crucial importance of students seeing, at an early stage, multiple patients with a wide range of problems in a professionally relevant context (Dolmans et al. 2005). Starting point A: Continuing exposure to patients.


2. 효과적인 임상교육과 임상학습

2. Criteria for effective clinical teaching and learning

Whilst we are able to describe the settings in which students learn, we are still struggling to answer the question of ‘how’ learning comes about. 


학습 사이클 : Kolb의 경험학습이론. 다양한 사례로부터 얻은 insight가 지식을 illness script로 변환시킨다.

Learning cycle. Kolb’s experiential learning theory asserts that learning occurs through interactions between persons and their concrete experiences (Kolb 1984; Scho¨n 1990). The essence of learning is transformation of experience into knowledge in a cycle which starts with a concrete experience, such as a patient encounter, followed by reflection on that experience, which in turn leads to conceptualizations and generalizations, which are then tested in new situations at which point the cycle starts again. Experiential learning may be enhanced when learners become aware of the consequences of their actions as a result of feedback and inquiry. Generalisation of insights from many different cases can restructure knowledge in memory into illness scripts (Smith & Irby 1997). Starting point B: Transformation of experience into knowledge


학생의 능동적 역할 : 관찰은 초기 단계에서, 매우 제한된 기간동안만 효과적이다. 더우기 정교한 계획과 촉진적 교수가 필요하다. 환자를 독립적으로 보는 것이 중요하다.

Active role of students. What type of practical experience do students need to develop their illness scripts and basic skills? Several teachers think it is sufficient for students to observe clinical situations to achieve the desired exposure. However, observation is only effective in early stages of training, providing preparation and debriefing take place, and even then only for a limited period of time. Students will inevitably get bored and their enthusiasm will fade. Moreover, it requires careful planning and facilitative teachers (Kachur 2003). Thus, students should not remain passive observers for long. Active approaches are ‘hot seating’, with a student leading (a part of) a consultation, and independent patient encounters, in which a student first sees a patient alone in a separate room before being joined by the teacher. Seeing patients independently is the most valued setting for achieving positive learning outcomes (Lawrence et al. 1999; Spencer 2003; Stark 2003). Starting point C: Active role of students.


감독과 피드백 : 감독은 환자outcome에 긍정적인 효과가 있으며, 감독이 없으면 환자outcome에 악영향을 끼치게 된다. 또한 감독관은 임상적으로 유능하면서 많은 지식을 가지고 있어야 하고, 교수능력과 대인관계 능력이 좋아야 한다. 피드백은 감독하는데 있어서 중요한 요소이나 의학교육에서 피드백은 표준적이지 못하다.

Supervision and feedback. Supervision has positive effects on patient outcomes and lack of supervision is harmful to patients. Supervision is key to the success of clerkships (Kilminster & Jolly 2000; Dolmans et al. 2002). Important features of supervision are continuity over time, supervisees’ control of the content of supervision and some reflection by student and supervisor. Effective supervisors give their supervisees responsibility for patient care and offer

opportunities to carry out procedures and review patients, involvement in patient care, guidance, and constructive feedback. They should also be clinically competent and knowledgeable and have good teaching and interpersonal skills (Kilminster & Jolly 2000; Cottrell et al. 2002). Feedback is an essential component of supervision (Rolfe & Sanson Fisher 2002). Unfortunately, the frequency and quality of feedback in medical education are not always up to the mark (Schamroth & Haines 1992; Paul et al. 1998). Feedback should be directed towards behaviour that is amenable to change and be specific rather than general. The needs of the receiver as well as the giver should be considered. Also, feedback should be given timely, i.e. as close as possible to the event, and selectively address one or two key issues rather than too many all at once (Irby 1994; King 1999). Starting point D: Supervision and feedback.


3. 현실적 문제점

3. Practical points

시간과 공간의 제약 : 여러 의사들이 교육과 관련해서 언급하는 문제

Time and space. Most doctors recognize that for clinical teaching the availability of time and space may pose significant problems. Therefore, ample opportunities and acceptable incentives, such as financial reward, are important issues for doctors (Hartley et al. 1999; Haffling et al. 2001; Stark 2003). Given scarcity of time, logistical matters must be dealt with adequately (Hartley et al. 1999). An example of a model of effective and efficient use of time and integration of teaching into day-to-day routine is the ‘one-minute preceptor’ (Spencer 2003). Starting point E: Time and space for teaching. 


교수 훈련 : 학생과 교수가 임상 교육의 내용/스타일/세팅에 대해서 항상 잘 맞는 것은 아니다.

Teacher training. Students and clinical teachers are not always in agreement with regard to content, style and setting of clinical teaching (Stark 2003). Clinical teachers are not fully aware of what to expect and what not to expect from students and may be uncertain about how to give feedback and how to assess. In early patient contacts they are not merely preceptors but they take on the mentor role with a strong focus on supervision and feedback. Therefore, teaching should also include time for preparation and teacher training (Irby 1995; Gordon et al. 2000; Haffling et al. 2001; Stark 2003). Starting point F: Teacher training.




2단계 : 3학년 프로그램의 일반

Step 2: General practice programme in Year 3

The starting points (left column Table 1) resulting from step 1 were used in designing the new GP programme in Year 3 of the new Maastricht curriculum. Within the context of these encounters theory and practice are addressed in an integrated manner. Thus starting points A-D are guaranteed (Figure 1).



After the encounter, they write a structured ‘SOAPEL’ report (subjective, objective, assessment and plan (SOAP) supplemented by elaboration and learning goals)


GP를 대상으로 일 년에 두 차례의 워크숍을 수행함.

Twice a year workshops are offered to inform the GPs about the curriculum and the content of the clinical general practice programme. In the workshop, GPs are instructed about how to fit the programme into their daily practice routine and specific topics are addressed (F) (Table 2).







Step 3: Programme evaluation

The questionnaire items are presented in Table 1. Table 3 shows the response rates and descriptive statistics.


Conclusion and discussion Our findings suggest that early student-patient contacts do indeed enhance learning and integration of theory and practice, and are sustainable (Diemers et al. 2007; Howe et al. 2007).


In designing this programme, we were mindful of Mainhard’s conclusion about the Maastricht Adoption Programme (Mainhard et al. 2004)







 2008;30(8):802-8. doi: 10.1080/01421590802047265.

Early student-patient contacts in general practice: an approach based on educational principles.

Abstract

BACKGROUND:

Clinical teaching and learning is generally seen as an educationally sound approach, but the clinical environment does not always offer optimal conditions to facilitate students' learning processes.

AIMS:

To show how insights on constructing a good learning environment for student-patient contacts in real practice can be translated into an undergraduate clinical general practice programme in Year 3 and to study its feasibility.

METHOD:

Literature search, yielding starting points for the development of the new programme and questionnaire evaluation of the programme.

RESULTS:

Six starting points for a good learning environment for early student-patient contacts: continuing exposure to patients,transformation of experience into knowledge, active role of students, supervision and feedback, time and space for teaching and teacher training were translated into a the new programme. The evaluation showed that the programme was feasible and well received by students and GPs, although some improvements are possible.

CONCLUSION:

In a curriculum with clear goals for early student-patient contacts, it is feasible to implement an early clinical programme in generalpractice based on educational principles.





Changing face of medical curricula

Roger Jones, Roger Higgs, Cathy de Angelis, David Prideaux





네덜란드에서는 과부하가 걸린 교육과정을 감축하고, 더 흥미를 유발할 수 있는, 적극적인 형태의 교육을 하라는 정부의 압박에 따라 전통적 교육과정과 PBL교육과정이 같이 이뤄지고 있다. 소규모의, 문제중심학습 그룹에 기반을 둔 통합교육과정은 첫 4년간은 공통적이다. 일부 학교들은 학생들의 술기 학습을 위해서 시뮬레이션 기술을 이용하고 있는데, Limburg, Maastricht등의 의과대학이 이러한 능동적 학습 전략을 적용하는데 앞장서고 있다.

In the Netherlands, both traditional and problem-based curricula are taught in response to pressure from the government to reduce overloaded curricula, and to create more attractive and active forms of teaching. Modular, integrated courses based on small, problem-based learning groups, are common in the first 4 years. Some schools also make extensive use of simulation techniques to help students master professional skills; the medical school of Limburg, Maastricht, has had a leading role in the development and application of these active learning strategies.28




 2001 Mar 3;357(9257):699-703.

Changing face of medical curricula.

Abstract

The changing role of medicine in society and the growing expectations patients have of their doctors means that the content and delivery of medical curricula also have to change. The focus of health care has shifted from episodic care of individuals in hospitals to promotion of health in the community, and from paternalism and anecdotal care to negotiated management based on evidence of effectiveness and safety. Medical training is becoming more student centred, with an emphasis on active learning rather than on the passive acquisition of knowledge, and on the assessment of clinical competence rather than on the ability to retain and recall unrelated facts. Rigid educational programmes are giving way to more adaptable and flexible ones, in which student feedback and patient participation have increasingly important roles. The implementation of sustained innovation in medical education continues to present challenges, especially in terms of providing institutional and individual incentives. However, a continuously evolving, high quality medical education system is needed to assure the continued delivery of high quality medicine.

Comment in






Medical curriculum reform in North America, 1765 to the present: a cognitive science perspective. 

Papa FJ, Harasym PH.


1765년 이후로, 북미의 의과대학에서는 다섯 개의 주요한 교육과정 개혁 움직임이 있었다. 여기서는 각각에 대해서 그것의 기저에 있는 교육방법과 원칙, 내재적 한계, 극복을 위한 움직임 등을 보고자 한다. 이러한 개역 움직임의 원동력을 살펴보면 공통의 주제가 드러난다. 지식기반구조(knowledge-base structure)와 인지과정(cognitive process)에 대한 관심과 이해, 그리고 전문가와 초보자의 구분에 대한 관심과 이해이다. 이렇게 반복적으로 나타나는 주제들은 의학교육자들이 연구문헌, 연구방법, 인지과학의 이론적 관점들을 잘 활용해야만이 미래의 개혁을 효율적/효과적으로 이끌 수 있음을 보여준다. 저자들은 여기서 논의된 주제들과 관점들이 더 확장되고, 촉진되어 교육자들이 앞으로 21세기 의학교육 개혁 움직임을 만들어나가는데 도움이 되기를 바란다. 








 1999 Feb;74(2):154-64.

Medical curriculum reform in North America1765 to the present: a cognitive science perspective.

Abstract

Since 1765, five major curricular reform movements have catalyzed significant changes in North American medical education. This article describes each reform movement in terms of its underlying educational practices and principles, inherent instructional problems, and the innovations that were carried forward. When considering the motivating factors underlying these reform movements, a unifying theme gradually emerges: increasing interest in, attention to, and understanding of the knowledge-base structures and cognitive processes that characterize and distinguish medical experts and novices. Concurrent with this emerging theme is a growing realization that medical educators must call upon and utilize the literature, research methods, and theoretical perspectives of cognitive science if future curricular reform efforts are to move forward efficiently and effectively. The authors hope that the discussion and perspective offered herein will broaden, stimulate, and challenge educators as they strive to create the reformmovements that will define 21st-century medical education.




The challenge of reform: 10 years of curricula change in Italian medical schools

HUON SNELGROVE, GIUSEPPE FAMILIARI, PIETRO GALLO, EUGENIO GAUDIO, ANDREA LENZI, VINCENZO ZIPARO & LUIGI FRATI

First and Second Faculty of Medicine, Sapienza University of Rome, Italy



진단검사와 피드백 Progress tests and feedback


10년 전, 이탈리아의 일부 교수들의 European comparative study를 한 이후로, 이탈리아는 학생의 functional knowledge 평가를 위하여 Maastricht의 모델을 본떠서 National Longitudinal Progress Test 를 도입했다. 이 시험은 학생과 교사들에게 피드백을 줄 수 있는 거대한 자원이다. 학생들은 현재 같은 학년내에서, 과목별, 국가 순위를 받게 된다. 이 시험이 다른 시험들과 함께 EU 면허시험의 한 부분으로 쓰일지는 두고 봐야 할 것이다.

After early experimentation in some Italian medical faculties in a European comparative study over 10 years ago (Albano et al. 1996) Italy introduced a National Longitudinal Progress Test based on the Maastricht model in 2006 to assess the functional knowledge of students. Under the auspices of the National Committee of Medical Degree Course Heads this could become a systematic nationwide instrument. The test provides a huge resource for feedback to students, teachers and for internal and external evaluation (Feletti et al. 1983, van Der Vleuten et al. 1996; Tenore 2008). Students currently receive feedback on their rankings compared to class, subject area and national rankings. Whether the progress test in combination with other test formats, will be used as part of a wider EU licensure exam, as its authors had originally speculated, remains to be seen (van Der Vleuten 1990; Albano et al. 1996).





 2009 Dec;31(12):1047-55. doi: 10.3109/01421590903178506.

The challenge of reform10 years of curricula change in Italian medical schools.

Abstract

Italy has a long history of versatility in medical training in which the tension between 'knowing' and 'doing' is a recurrent theme dating from the origins of the first European medical faculties in Bologna in the eleventh century. Italian medical schools are currently undergoing widespread reforms building on two decades of concerted efforts by medical educators to move from traditional teacher and subject-centred degree programmes to integrated student-centred curricula. European higher education policies have helped drive this process. A challenge in these developments is that the adoption of integrated and outcomes-based curricula in medicine requires a discursive shift in teaching practices. While investment in teacher training is essential, it is also important for educational leaders in medicine to communicate a compelling vision of the type of health professional medicalschools are aiming to produce. Systematic educational research should accompany this transition to evaluate the process and gauge sustainability. Investigation should also examine how external influences and pressures are calibrated and adapted to the national context and epistemology. The adoption of a common international vocabulary to describe educational processes means Italy will be able to participate more fully in the Europeanmedical education debate in future.

PMID:

 

19995166

 

[PubMed - indexed for MEDLINE]






The Association of Faculties of Medicine of Canada

SUPPLEMENTAL REPORT OF THE INTERNATIONAL COMPARISONS - THE NETHERLANDS

JAY ROSENFIELD, MD

NOVEMBER 2008






2. Organization of medical education in the Netherlands:


네덜란드의 의과대학 시스템은, 대부분 고등학교를 졸업하고 바로 입학하게 되는데, secondary school 학생은 요구조건인 고등학교 교과과정을 마치고 국가시험을 치러야 한다. 네덜란드에 독특한 점은, 그렇게 시험을 보고 나서 학생은 의과대학에 입학하기 위해서 국가 가중추첨(weighted national lottery procedure)에 지원하게 된다는 점이다. 그러나 매우 고득점을 받은 사람은 바로 의과대학에 들어갈 수 있다. 두 번째 입학 방법은 미국 의과대학과 유사한데, Utrecht와 Maastricht에 존재하는 방법으로서 의과학분야에서 학사를 받은 사람이 4년제 의과대학 프로그램에 입학하는 것이다.

The Dutch medical school system, which is predominantly direct entry from high school, requires that secondary school students finish a pre-requisite high school curriculum and take a national examination. Unique to the Netherlands, students then apply to a weighted national lottery procedure for entrance selection to medical school. However, those with very high scores on the national exam may freely enter the medical school of their choice. A second entry route, similar to the North American system, exists at two schools, Utrecht and Maastricht, and allows for graduate entry into a four year medical programme for those with a prior bachelor diploma in biomedical sciences.


국가가 입학 정원을 조정하며, 현재는 매년 2850명이 입학한다. 그러나 지원자는 항상 이 정원을 넘어서서 30~50%의 지원자가 탈락한다. 탈락하는 이유는 추첨에서 떨어졌거나 기준에 맞지 않기 때문이다. 학생들은 교육의 질을 자세히 살피고 의과대학을 선택하기 보다는, 대부분 secondary school학생을 위해서 열리는 미팅에서 받은 인상에 따라서 이루어진다. 네덜란드의 대중들은 대개 대부분의 학교들이양질의 교육을 제공한다고 믿고 있으나, 사실 그렇지는 않다. 대학들이 생각하는 것에 비해서 지역적 요소가 차지하는 비중이 크다.

“The Government regulates the enrolment number, currently 2850 students per year (Table 1). As the interest among high school graduates has always exceeded this numerus fixus, 30 to 50% of applicants are turned down, either because they fall out of the lottery, or they do not meet selection criteria. The choice of a medical school is mostly based on impressions from organised meetings for secondary school students, more than from thorough investigation of the educational quality; the Dutch public usually trusts that all schools deliver adequate education which in itself is not untrue. Geographical convenience is a more important determining factor than universities would like to believe.


네덜란드의 의과대학은 6년제이며, Bologna framework를 따른다(학사+석사). 미국과 달리 네덜란드 학생들은 정부에서 상당한 생활비와 교육비 지원을 받는다. 많은 학생들이 용돈을 위해 부업을 한다. 매우 소수의 학생만이 빚 없이 졸업하게 된다. European 근무시간 지침에 따라서 근무시간은 매우 제한적이며, 의과대학에서 졸업한 학생들은 졸업후 교육에 지원하게 되는데, 대학병원이 주로 이를 담당함에도 학생의 지원은 대학의 관할 밖에 있다.

The medical program in the Netherlands is six years in length, and follows the Bologna framework. (bachelor plus master) Unlike North America, Dutch students receive significant government financial grants for their living expenses and education. Many students also work in jobs to make extra money needed. Very few students graduate with any significant debt. The work week is limited in hours as per the European work-time directive. Most students who graduate from medical school apply for postgraduate training, which is not under the jurisdiction of the Universities, though the University Medical Centres play a major role in the delivery of such training.





주요 이슈들

대학과 병원의 거버넌스 문제 : 학장은 병원에서 부원장을 맡고 있으며, 병원장은 부학장을 맡고 있다.

• Governance -integrated structures between academic health science centre and university— Dean is Vice-President of Hospital and Hospital President is Vice-Dean of Faculty— integrated, small and nimble governing board (Maastricht)

의과대학 시작과 함께 임상 실습을 하는 것(예컨대, 생리학 학습을 위해서 첫 해에 응급의학과 로테이션을 함)

• Introduction of clinical training right at beginning of medical school (eg emergency rotation in first year to demonstrate physiology) (Maastricht)

모든 학생들이 연구 프로젝트를 이수함

• All students complete research scholarly project (Maastricht)

학생이 교육과정 개발에 파트너로서 참여

• Students as partners in curriculum development (Maastricht)


(출처 : http://www.afmc.ca/future-of-medical-education-in-canada/medical-doctor-project/pdf/Netherlands%20Comparison%20report.pdf)










Measuring the effects of an international health professions faculty development fellowship: the FAIMER Institute

W. P. BURDICK1, D. DISERENS1, S. R. FRIEDMAN1, P. S. MORAHAN1, S. KALISHMAN2, M. A. EKLUND2,

S. MENNIN3 & J. J. NORCINI1


1FAIMER, Philadelphia, PA 19104, USA, 2Undergraduate Medical Education and PEAR, University of New Mexico SOM,

Albuquerque, USA, 3Mennin Consulting & Associates Inc., Sao Paulo, Brazil


교수개발 프로그램의 평가에 대해서 많은 예들이 있지만, 초국가적인(transnational) 프로그램에 대한 평가는 제한적이다. 우리는 여기서 국제보건전문직 교육 프로그램인 FAIMER Institute의 효과성 평가를 다루고자 한다. 이 프로그램은 교육과 관련된 것 뿐만 아니라 리더십과 경영에 대한 내용도 다루고 있으며, 교육자들의 지속가능한 커뮤니티를 개발하고자 했다. 

While there are many examples of evaluations of faculty development programs in resource rich countries, evaluation of transnational programs for faculty from developing countries is limited. We describe evaluation of the effects of the FAIMER Institute, an international health professions education fellowship that incorporates not only education content, but also leadership and management topics and, in addition, strives to develop a sustained community of educators. 


데이터는 후향적 사전/사후 설문조사와 인터뷰를 활용하여 수집하였다. 결과를 살펴보면 이 프로그램에 참여함으로서 교육리더십의 지식과 기술, 방법론을 향상시킬 수 있었으며, 그 지식을 본국의 기관에 적용할 수 있었다고 응답했다. 참가자들은 스스로 모든 교육과정 주제에 대한 역량이 향상되었다고 평가하였으며 인터뷰를 통해서 최소 하나 이상의 리더십 기술을 습득했음을 확인할 수 있었다. 

Data were obtained via retrospective pre/post surveys, as well as interviews. Results indicate that participating health professions faculty from developing countries are augmenting their knowledge and skills in education leadership, management, and methodology, and applying that knowledge at their home institutions. Fellows’ perceptions of importance of, and their own competence in, all curriculum theme areas increased. Interviews confirmed a nearly universal gain of at least one leadership skill. 


이러한 결과는 FAIMER 모델이 제공한 고관여(high engagement)경험이 변화를 이루는데 필요한 교육과 리더십/경영을 통합했음을 보여주며, 여러 문화권과 국가적 맥락을 넘어서는 지식과 기술을 제공하였고, 지지적/세계적/전문가의 네트워크 구축을 이루었음을 보여준다.

Findings suggest that the high engagement experience of the FAIMER model offering integration of education and leadership/management tools necessary to implement change, provides knowledge and skills which are useful across cultural and national contexts and results in the development of a supportive, global, professional network.






Background


보건전문직 교육과 관련한 교수개발에 있어서 리더십과 경영에 대한 것은 중요한 요소 중 하나로 지적되어왔다.

Leadership and management development has been recognized as a critical component of faculty development in health professions education, along with teaching skills (Gruppen et al. 2003; Steinert et al. 2003; Steinert et al. 2003; Souba 2004; Dwyer et al. 2006; Robins et al. 2006; Mouradian & Huebner 2007).


교수개발과 교육리더십 프로그램의 방법, 내용, 평가는 주로 고소득국가(resource rich)에서 이루어져왔고, 저소득국가(resource limited)에서는 연구가 제한적이었다. 우리는 국제 보건전문직 교수개발 프로그램에 대해 평가해보고자 한다.

The methods, content and evaluation of faculty development and education leadership programs have been widely addressed in resource rich countries (Rubeck & Witzke 1998; Hewson et al. 2001; Armstrong et al. 2003; Searle et al. 2006). However, they have been less well studied in resource limited regions (Svab et al. 1999; Yolsal et al. 2003; Dwyer et al. 2006; Wong & Agisheva 2007), where studies have focused on changes in management systems and processes, or improvements in work climate (Perry et al. 2005; LeMay & Ellis 2008) with little attention to the usefulness and relevance of curriculum content in diverse contexts. To address these questions we evaluated the effects of an international faculty development program in health professions education methods and leadership.


문헌에서 주로 다뤄지고 있는 교육리더십과 경영의 개념/방법은 마찬가지로 고소득국가에 집중되어 있고, 다른 국가들에는 적용가능하지 않을 수도 있다.

The methods and concepts of educational leadership and management commonly espoused in the literature are oriented to institutions in relatively resource rich regions and may not apply in other parts of the world (Sapre 2000; House et al. 2004; Mendelek et al. 2006; Morahan et al. 2006).


이러한 개념을 가르칠 때는 맥락(context)를 인지하고 민감하게 반응할 수 있어야 한다. 리더십에 중요하게 작용하는 위계/협력/상호작용/혁신 등의 요소들이 문화적 가치와 사회적 규범에 들어가 있기 때문이다.

Teaching these concepts, however, requires awareness and sensitivity to context, with particular attention to authentic local application since hierarchy, collaboration, interaction, innovation and other factors important to leadership are embedded in cultural values and social norms (Sapre 2000; House et al. 2004; Mendelek et al. 2006; Morahan et al. 2006).


교육자들의 국제적 네트워크를 개발하는 것은 리더십개발에 있어서 중요한 요소로 지적되어왔다. 그러나 이러한 개념은 저소득국가의 환경에서는 잘 작동하지 않으며, 국소적/지역적인 교수개발 프로그램이 보건전문직 교육자들을 집중시킬 수 있을지는 몰라도 교육자들간의 전문직 네트워크를 이루는 데에는 관심이 부족하다.

Development of international networks of educators has been cited as an important component of leadership development for over a quarter of a century (Culbertson 1981; Bolam et al. 2005; Cross et al. 2006). However, this concept rarely has been operationalized for educators from resource limited environments. Local and regional faculty development programs may result in concentrations of health professions educators, but there appears to be little intentional encouragement of professional networks for educators (Gruppen et al. 2006; MacLeod et al. 2007; Moses et al. in press).


2001년 FAIMER institute는 라틴아메리카, 아프리카, 아시아 등에서 개발도상국의 중견급 교수들을 대상으로하여 펠로우십 프로그램을 시작하였다. FAIMER institute의 목적은 교육리더십/경영/방법론적 기술을 강화하여 보건전문직 교육자들의 커뮤니티를 형성하는 것이었다.

In 2001, the Foundation for Advancement of International Medical Education and Research (FAIMER) initiated the FAIMER Institute, a fellowship program for mid-career faculty members from health professions schools in developing countries in Latin America, Africa, and Asia (Norcini et al. 2005; Burdick et al. 2006). The goals of the FAIMER Institute are to strengthen education leadership, management, and methodology skills, and develop a community of health professions educators


FAIMER 프로그램은 초국가적 접근법을 취했다는 점, 저소득국가의 보건전문직에 대한 강조를 했다는 점, 리더십 스킬과 전세계적 커뮤니티 형성을 목적으로 했다는 특징이 있다. 이러한 강조는 지금 이뤄지고 있는 국제적 보건자원 투자를 보완하는 역할을 한다고 할 수 있다. 또한 점차 많은 사람들이 보건시스템의 인력양성과 Capacity building에 집중할 것을 권고하고 있기도 하다.

The FAIMER program is unusual in its transnational approach and its emphasis on a mix of health professions faculty from resource limited countries, with an explicit goal of improving leadership skills and creating a global community of health professions educators. This emphasis is complementary to the approach of most current international health resource investments, which are devoted to priority disease prevention and treatment programs, and consistent with an increasing number of authors recommending funding focused specifically on capacity building of human resources in the health system (Drager et al. 2006; McCourt & Awases 2007; Awofeso et al. 2008; Global Health Workforce Alliance 2008).


FAIMER Institute model은 자신의 기관에서 교육혁신프로젝트를 집중적으로 진행하는 2년의 파트타임 fellowship으로 되어 있다.

The FAIMER Institute model consists of a two-year parttime fellowship that focuses on an education innovation project in the Fellow’s own institution, supported by the institution’s leadership.


Fellow들은 첫 해에 3주간 본 기관에 상주하다가, 1년간의 원거리 학습 세션을 가진 후, 두 번째 상주 시간을 갖고, 마지막으로 남은 두 번째 해에 원거리 학습을 하게 된다.

Fellows are in residence at the beginning of the first year for three weeks (Session 1), followed by a year-long distance learning session (Session 2), culminating in a second residential session lasting two weeks (Session 3), with a final distance learning curriculum for the remainder of the second year (Session 4).


이 모델은 다양한 고관여(high-engagement methods) 방법을 사용하여 의도적으로 fellow간 유대를 만들고 강화시킨다. 여기에는 다음과 같은 방법이 포함된다.

The Institute model intentionally creates and reinforces the bonds between Fellows by a variety of high-engagement methods. These include...

    • team building and group dynamics exercises, 
    • intensive interaction and dialogue during the residential sessions, evening ‘‘learning circles’’ during which personal stories are shared (Baldwin 1998; Danzig 1999; Wheatley 2002), 
    • continuous emphasis on development of a ‘‘safe’’ learning environment, 
    • creation of on-line discussion leader teams, 
    • telephone contact every several weeks during the non-residential sessions, 
    • and encouragement of ‘‘social presence’’ on the listserv (Kreijns et al. 2004).

목적

Aims

The purpose of this paper is to present participants’ perceptions of the utility and personal impact of the FAIMER Institute fellowship


방법

Method

University of New Mexico School of Medicine Office of Program Evaluation, Education and Research 에서 평가팀이 와서 프로그램 평가, 자료 수집, 데이터 분석을 수행하였다.

An external evaluation team from the University of New Mexico School of Medicine Office of Program Evaluation, Education and Research has conducted the program evaluation, collected data, and performed initial data analysis (Mennin et al. 2003; Kalishman et al. 2004; Kalishman et al. 2005; Mennin et al. 2006; Mennin et al. 2007; Office of Program Evaluation, Education, and Research 2008).



연구 대상 Study population


척도 Measures

자기평가지 사용

We used self-ratings of knowledge and importance of curriculum topics and open-ended responses to a structured interview to study the effects of the Institute fellowship on Fellows’ knowledge, skills, networks, and leadership.


후향적 설문조사 Retrospective Pre/Post Survey

Fellows completed a retrospective-pre/post questionnaire (Lamb & Tschillard 2005), at the end of each of the two face-to-face residential sessions (Sessions 1 and 3). The first part of the survey asked respondents to ‘‘rate the importance to you’’ of a series of FAIMER curriculum topics on a scale from 1 (none) to 7 (very high), with separate rating scales for ‘‘before FAIMER’’ (retrospective pre-test) and ‘‘today’’ (posttest). The second portion of the survey asked respondents to ‘‘rate your skills, knowledge or competence to address’’ each of the same topics on a scale from 1 (none or no skill) to 7 (expert, teach others), also for ‘‘before FAIMER’’ (retrospective pre-test) and ‘‘today’’ ( post-test). The issues and topics for the retrospective pre/post survey were chosen to be reflective of the learning emphases and goals of the FAIMER Institute.


구조화된 면접 Structured interview

An individual structured 1–2 hour interview was conducted with each Fellow by two members of the external evaluation team (SK and MAE) at the end of their second residential session (Session 3).


분석 Analyses

Mean topic sub-scale scores were created for each Fellow by adding the ratings across items within each sub-scale and dividing by the number of items. Means, standard deviations and effect size were then calculated for each pre/post topic subscale for both importance and knowledge/skills. Effect size, the standard mean difference between paired postparticipation and pre-participation ratings, was calculated by using the mean paired difference between post-participation and pre-participation ratings as the numerator and the standard deviation of the paired differences as the denominator (Cohen 1988).


Internal consistency of responses for both pre and post responses within each topic sub-scale of the retrospective pre/post survey, based on five years of data, was calculated via Cronbach’s alpha for topics containing more than two items and via Pearson correlation coefficients for topics with two items. Cronbach’s alpha was calculated separately for years with different numbers of items. 

The internal consistency coefficients for Session 1 ratings of Importance varied from .61 to .95 with a mean of .83, and for Session 3 varied from .48 to .85 with a mean of .71. The internal consistency coefficients for rating of Knowledge for Session 1 varied from .64 to .96 with a mean of .86, and for Session 3 varied from .54 to .89 with a mean of .74.


Interviews were recorded and transcribed, and responses sorted into general categories of Useful Knowledge, Skills and Tools, Network, and Leadership by the external evaluation team, (SK, MAE). A qualitative content analysis approach (Hsieh & Shannon 2005) was used by two of the authors (WPB, DD) to independently code the interview response data and identify sub-themes within each major category. The two coders refined coding subcategories by consensus. The number of responses related to each category was tabulated independently, followed by review and reconciliation of discrepant counts.



결과 Results

fellow들의 코멘트는 크게 세 카테고리로 분류되었다.

Fellows’ comments about the social network among their FAIMER colleagues fell into three general categories: 

    • the network’s qualities, 
    • the network’s utility or value to them, 
    • and the nature of the work done with FAIMER colleagues.

결론
Conclusions

구조화된 후향적 설문조사에서 fellow들은 지식과 awareness가 유의미하게 향상되었다고 응답하였다. 

In a structured retrospective pre/post survey, Fellows reported significant increases in their knowledge and awareness of concepts in education methods and leadership/management. In addition, nearly all Fellows mentioned using at least one leadership skill or tool, suggesting that these tools can be successfully adapted to non-Western and resource-limited cultural, institutional and national contexts (Sapre 2000; House et al. 2004; Mendelek et al. 2006; Morahan et al. 2006). 

특히 appreciative inquiry와 리더십이 유용하다고 대답하였다. 자기가 지역에서 담당하고 있는 프로젝트에서 적용하도록 강조한 것이 transferability에 도움이 되었다고 말했다. 또한 스스로의 리더십 스타일이 변화했으며, 자신감, 자기효용감에도 영향을 주었다고 했다.

Fellows particularly identified appreciative inquiry and leadership as useful to them (Cameron et al. 2003; Stavros & Torres 2005). The emphasis on application of concepts to an authentic local project may be partly responsible for the transferability of these concepts to the Fellows’ home systems (Vicere & Fulmer 1998; Nchinda 2002). In addition, a majority of Fellows reported a change in their own leadership style. This change included increased self-confidence, a fundamental component of self-efficacy (Sloma-Williams et al. 2009, in press).


저개발국가에서 이루어지는 대부분의 교수개발은 교육스킬의 향상에만 집중하고, 리더십이나 관리기술에는 덜 집중하는 편이다. 또한 교육자들간의 국제적 네트워크를 형성하는 것에 목적을 두는 프로그램은 거의 없다.

Most of faculty development in health professions education in resource-limited areas, when it exists, focuses on improvement of teaching skills with less, if any, emphasis on development of leadership and management skills (Yolsal et al. 2003; Beier-Holgersen et al. 2004; Anonymous 2007; Bansal & Supe 2007). Few programs explicitly aim to create an international social network of educators (Mouradian & Huebner 2007).


5년간의 FAIMER fellow들에 대한 조사와 면접으로부터 대부분의 fellow가 리더십이나 경영에 대한 교육이 도움이 되었다고 응답하였으며, 국제적 네트워크가 상당한 가치가 있다고 말했다.

Survey and interview data from five years of FAIMER Fellows provide convergent evidence that the majority of Fellows find the concepts and methods of education leadership and management useful and applicable in their professional settings and that the international network of colleagues created is both valuable and supportive.


대부분의 fellow들이 교육방법이나 개념에 비해서 리더십/경영 방법과 개념에 대해서 많이 언급했다.

In the present study, data from the retrospective pre/post surveys about education, leadership and management topics illuminates data from qualitative analysis of interviews. A higher percentage of Fellows mentioned leadership/management methods and concepts compared to education methods and concepts when interviewed about what they had applied in their work that they had learned at the FAIMER Institute. 


한 가지 가능한 설명은 리더십/경영에 대한 주제가 그들에게 비교적 새로운 것이라는 점이다. 후향적 사전조사가 이것을 설명해준다. 사전 지식 수준은 변화관리나 경영 등에 대해서 거의 제일 낮았으나 이들 영역이 효과크기의 증가가 가장 컸다.

One possible explanation is that leadership/management topics were newer to most of them. Data from the retrospective pre survey supports this explanation; ‘‘pre’’ levels of importance and knowledge were lowest for change theory and management, personal professional development, program evaluation, project management, advanced leadership, and whole systems models to sustain change and these areas had the largest increase in effect size. 


우리는 교수개발 프로그램은 리더십이나 경영 기술까지 다루어야 한다고 주장해왔는데, 이는 모든 교육과정개혁은 반드시 '관리되어야 하는 조직의 변화'를 수반하기 때문이다. 

Our thesis has been that faculty development programs need to be expanded to include leadership or management skills in addition to education methods, because any curriculum innovation inevitably involves organizational change that needs to be led and managed. The evaluation data presented here, both quantitative and qualitative, suggest that FAIMER Fellows appreciated, learned and used these skills. 


교육방법, 학생평가, 국제적 의학교육 등은 작은 효과크기를 보였으며, 이는 fellow들이 이미 그 전에 지식과 개념을 많이 가지고 있음을 말한다. 그럼에도 불구하고 질적/양적 연구결과 모두 fellow들이 교육영역의 지식과 기술 역시 많이 사용하고 있음을 확인해주었다.

The topics education methods, student assessment, and international medical education showed slightly smaller effect sizes, which may be reflective of Fellows’ higher pre-intervention appreciation and knowledge of education methods compared to leadership and management concepts. Nevertheless, the significant increases reported in the quantitative assessment are also consistent with the qualitative data showing that a majority of Fellows reported using knowledge or skills gained in the education domain.


교수개발 프로그램의 평가는 언제나 쉬운 일은 아니지만, 여기에서는 데이터의 의미있는 해석에 양적/질적 데이터를 병합하는 것의 가치를 보여주고 있다.

Evaluation of faculty development programs in health professions education continues to present a challenge (Jayawickramarajah 1992; Irby & Hekelman 1997; Amin et al. 2004); the data here illustrate the value of qualitative and quantitative data in converging on a meaningful interpretation of the data (Greene & Caracelli 1997; Reinelt & Russon 2003; Grove et al. 2006; Westhues et al. 2008).


연구의 한계는 자기보고식이며, 개개 참가자들의 reflection에 기반하였다는 것이다. 여러 상황에 의해서 응답이 bias되어있을 수 있다. 우리는 외부 평가팀에게 의뢰하여 이러한 것을 최소화하려고 했다. 후향적 방법이 bias를 줄이기 위하여, 그리고 robust한 response rate를 위하여 사용되었지만 이것도 한계가 없는 것은 아니다. 향후에 institutional case study나 survey를 해야 할 필요가 있다.

A limitation of this study is that the source of all the effects data is self-report and reflection by individual participants. Responses may be biased by respondents’ appreciation of sponsorship and hesitancy to criticize a source of funding, or social desirability of an affirmative response. We sought to minimize this by having an external evaluation team conduct the interviews. (Mennin & Kalishman 2002). In addition, while, the retrospective pre/post-test methodology was chosen to ensure a robust response rate as well as to avoid the response bias of a traditional pre-test as reported by some researchers (Lamb & Tschillard 2005), this methodology is not without limitations (Hill & Betz 2005). In future research, institutional case studies and surveys of school leaders may be a means to assess further the impact of FAIMER Fellows as agents of change in their schools (Dannels et al. 2009).


저소득 국가에서의 교수개발 프로그램은 고소득 국가에서보다 더 제한적인데, 이는 이 분야가 덜 성숙되어있을 뿐만 아니라, 분야가 성장할 기회가 적기 때문일 수 있다. 시간과 돈이 부족한 것도 주요한 제한점이다.

Faculty development programs in health professions education in resource poor countries are more limited than those in resource rich countries, probably due to limited maturation of the field of health professions education and few opportunities for advancement in that domain (Nchinda 2002; Morahan & Fleetwood 2008). Lack of time and money are also major impediments to faculty development (Amin et al. 2005; Supe & Burdick 2006).


FAIMER institute의 효과에 대한 평가는 개발도상국의 교수들도 교육리더십, 경영, 방법론 등을 학습하고 이것을 적용할 수 있음을 보여준다. 지식을 축적하고 적절한 도구가 있고, 지지적 전문직 네트워크가 형성된다면 국제적 교수개발 프로그램으로서 효과적인 모델이 될 수 있음을 보여준다.

Evidence about the impact of the FAIMER Institute indicates that health professions faculty from developing countries are augmenting their knowledge and skills in education leadership, management, and methodology, and applying that knowledge at their home institutions. Integration of knowledge acquisition with the tools necessary to implement change, coupled with a supportive professional network, appears to be an effective model for an international faculty development program for participants from diverse developing regions.















 2010;32(5):414-21. doi: 10.3109/01421590903394587.

Measuring the effects of an international health professions faculty development fellowship: the FAIMER Institute.

Abstract

While there are many examples of evaluations of faculty development programs in resource rich countries, evaluation of transnational programs forfaculty from developing countries is limited. We describe evaluation of the effects of the FAIMER Institute, an international health professionseducation fellowship that incorporates not only education content, but also leadership and management topics and, in addition, strives to develop a sustained community of educators. Data were obtained via retrospective pre/post surveys, as well as interviews. Results indicate that participatinghealth professions faculty from developing countries are augmenting their knowledge and skills in education leadership, management, and methodology, and applying that knowledge at their home institutions. Fellows' perceptions of importance of, and their own competence in, all curriculum theme areas increased. Interviews confirmed a nearly universal gain of at least one leadership skill. Findings suggest that the high-engagement experience of the FAIMER model offering integration of education and leadership/management tools necessary to implement change, provides knowledge and skills which are useful across cultural and national contexts and results in the development of a supportive, global, professional network.








Setting Priorities for Teaching and Learning: An Innovative Needs Assessment for a New Family Medicine Program in Lao PDR

Jeanie Kanashiro, MD, MMEd, Gwen Hollaar, MD, MPH, Bruce Wright, MD, Khamphong Nammavongmixay, MD, and Sue Roff, MA


라오스는 동남아시아의 작은, 열대, 내륙 국가이다. 이 지역에서 가장 개발이 덜 된 국가 중 하나이며, 사회경제적 지표는 세계에서도 하위 25%에 속한다. WHO는 일차의료에 대한 평등을 요구하고 있으며 라오스도 이러한 요구에 부응하기 위하여 Family Medicine Specialist Program (FMSP)를 개발하였다. 이것은 라오스에서 개발된 졸업후 수련 프로그램으로서 지역사회 일차의료진을 양성하여 라오스 국민의 80%가 살고 있는 농촌 및 외딴 지역의 의료인력을 공급하기 위한 목적을 가지고 있다. 

Lao People’s Democratic Republic (Lao PDR) is a small, tropical, landlocked country in southeast Asia. It is one of the least developed countries in the region, and its socioeconomic indicators are among the lowest 25% in the world. The World Health Organization has long called for increased equity in primary health care access around the world. To meet this need in Lao PDR, the Family Medicine Specialist Program was developed, a Lao-generated postgraduate training program designed to produce community-oriented primary care practitioners to serve the rural, remote areas of Lao PDR, where 80% of the population lives. 


요구사정을 위하여 혁신적인 방법이 필요했기 때문에, modified Delphi technique, 지역의 의학교육 핵심지도자, 임상 전문가, 교사 등을 통해 병원기반교육과정의 목표를 개발하고자 했다. 교수-학습의 우선순위를 설정하고 라오스의 요구 환경을 파악함으로서 저소득국가에서 교육과정 개발시 사용할 수 있는 새로운 접근방법을 개발하였다. 이러한 단계는 부족한 자원을 잘 분배하여 획기적인 프로그램을 도입할 수 있기 위한 과정이며, 더 중요한 것은 이 요구사정의 모델은 다른 저소득국가에서도 활용될 수 있을 것이라는 점이다.

An innovative method of needs assessment was required to determine the health care priorities to be met by this new program. Through the use of a modified Delphi technique, local key leaders in medical education, clinical specialists, and teachers were consulted to develop prioritized objectives for the hospital-based curriculum of the program. By setting priorities for teaching and learning in the unique and needy circumstances of Lao PDR, a novel approach to curriculum planning in a low-income country was explored and ultimately formed the foundation of the new curriculum. This process served to direct the allocation of scarce resources during implementation of this groundbreaking program. More importantly, this model of needs assessment could potentially be used to customize medical curricula in other low-income countries facing challenges similar to those in Lao PDR.


Acad Med. 2007; 82:231–237.





라오스는 아시아의 최저개발국 중 하나이며, 인구는 약 600만명이고 80%의 인구가 농촌지역에 거주하고 있다. 라오스의 보건지표는 거의 가장 나쁜 수준이며 사회 지표들은 사하라 이남지방의 국가들과 비슷한 수준이다. 

Laos, or Lao People’s Democratic Republic (Lao PDR), is one of the least developed countries in east Asia. Its population is estimated at six million people, and approximately 80% of the population lives in rural areas. The health status of the Lao people is considered by the World Bank as being among the worst in the region, with social indicators comparable with those of countries in sub-Saharan Africa.1 

    • Life expectancy at birth for the total population is 55 years (compared with 78 years in the United States). 
    • The infant mortality rate is 87.1/ 1,000 live births (compared with 6.4/1,000 live births in the United States). 
    • More than 75% of the Lao people live on less than two U.S. dollars per day. 
    • An estimated 40% of the population lives below the national poverty line.2 
    • Malaria, pneumonia, and diarrhea—preventable and treatable conditions—remain leading causes of morbidity and mortality.3 
비록 사회경제적 지표가 개선중에 있기는 하나 라오스는 UNHDI 기준으로 177개국중 135위이며, 여전히 가장 저개발된 국가 중 하나이다.

Although socioeconomic and health indicators are improving, Lao PDR is ranked 135 out of 177 countries by the United Nations Health Development Index and remains among the world’s least developed nations.4



새로운 가정의학 교육과정 개발 Developing a New Family Medicine Curriculum


2004년 라오스 국립대학의 의과학과 교수(Faculty of Medical Sciences)와 라오스의 보건부/교육부는 캘거리대학의 의과대학 교수들과 함께 새로운 일차의료 프로그램을 개발하기로 하였다.

In 2004, the Faculty of Medical Sciences (FMS) at the National University of Laos (NUOL) and the Lao Ministries of Health and Education joined with the University of Calgary Faculty of Medicine to develop a new primary care program.


라오스 국립의대 대표들과 캘거리대학 대표들은 FMSP라는 2년짜리 프로그램을 만들고자 했다.

With this in mind, representatives from the FMSNUOL, the ministries, and the University of Calgary developed a two-year primary care training program called the Family Medicine Specialist Program (FMSP).


FMSP의 목표는 라오스 연수생들이 실질적으로 도움이 되는 경험을 쌓고 최소한의 지원만 받고서도 라오스의 농촌 지역에서 독립적으로 진료를 할 수 있는 역량을 갖추는 것이다.

The expressed goal of the FMSP was for Lao trainees to acquire practical, hands-on experience in the care of patients, so that they would gain the competence and confidence to practice in isolated rural settings independently with minimal assistance.


국제사회는 일차의료서비스를 전세계에 고르게 제공할 것을 요구하고 있다.

The international community has advocated a mandate to deliver primary health care services throughout the world.6


이러한 요구는 개발도상국에서 특히 절실하다. 라오스에서 의과대학 교육과정은 여러 도전을 극복해야 한다. 장애물은 다음과 같다.

This need is especially grave in developing nations. In Lao PDR, medical curriculum development faces many challenges that are specific to its low-income status. Obstacles include...

    • lack of health care professionals with adequate training and remuneration, 
    • the poverty and the predominantly rural location of the general population, 
    • a lack of basic resources in health services, 
    • lack of educational resources for professional development, 
    • a lack of a professional infrastructure for medical personnel, 
    • a lack of informational infrastructure in medical institutions, 
    • the poor health-seeking behaviors of the general public, 
    • difficult physical access to rural villages and health care centers, and many others.
라오스의 유일한 의과대학은 NUOL에 있으며, 졸업 후에 일부 학생은 외국으로 수련을 떠나거나 소수의 졸업후 전공과목 수련 프로그램에 들어간다. 다른 학생들은 nonclinical employment에 의존한다. 그리고 매우 극소수의 졸업생만이 지방의 의료시설에 근무하나, 이 지역은 가장 도움이 절실한 지역이다. 2002년 라오스 정부는 의학교육의 실태를 평가하고 보건의료인력개발이 절실히 필요함을 보고했다. 의과대학 졸업생들은 최일선에서 진료할 능력과 자신감 부족, 적절한 훈련 시스템 부족 등을 이유로 농촌에서 진료를 하기를 꺼려했다. FMSP가 2005년 도입되기 이전까지는 국가의 일차의료를 제공하기 위한 수련 프로그램은 전무한 상황이었다.

The only medical school in the country is located at the NUOL. At graduation, a small number of students pursue further training in a foreign country or they enter one of a few small postgraduate specialty-training programs in Lao PDR.8 Other students resort to nonclinical employment within the urban center of Vientiane. Very few medical graduates go on to work independently in district health centers or provincial hospitals, where care is most needed. In 2002, the Lao government assessed its status of medical education in the country and reported severe needs in the area of health human resources development. Medical graduates were found to be unwilling and unable to practice in the remote and rural areas of the country because of a lack of adequate training and, hence, a lack of ability and confidence to provide frontline primary care.9 Before the launch of the FMSP in January 2005, there was no educational training program dedicated to providing primary health care in the country.



요구사정의 필요성 A Need for Needs Assessment


새로운 FMSP 교육과정을 정의하는 중요한 업무를 위해서는 지역의 상황에 맞고 라오스의 맥락에 맞는 혁신적 방법을 필요로 했다. 그 첫 단계는 프로그램이 도달해야 하는 보건의료 요구를 파악하는 것이었다.

The sizable task of defining a new FMSP curriculum that reflected the health care needs of the country’s tropical Asian environment and that was feasible to achieve Lao PDR’s social, cultural, and economic context required innovative methodology. The first step of planning a new medical curriculum is to identify the health care needs that the program intends to meet.10


A modified Delphi

We implemented a modified Delphi technique modeled after a study described by Lawrence et al11 to serve as the needs assessment for the first-year curriculum. The technique consisted of the following features:


The expert panel

The Lao Ministry of Health and FMS leadership at NUOL established an expert panel called “the Key Leaders” to tackle multiple curricular innovations in medical education in Lao PDR, including defining the curricular objectives of the FMSP.


Consultation with clinicians and teachers

We identified three groups of clinicians to form the second iteration of the Delphi process:

We constructed a questionnaire based on the list of objectives created by the Key Leaders.


Developing priority lists

As the final component of our Delphi technique, we created prioritized objective lists for teaching and learning by combining the responses of the above three clinician groups, collectively called “the expert clinician group.”



요구사정 결과에 대한 평가 Assessing Our Needs Assessment


교육 프로그램에서 이끌어낸 해결책은 '메이드 인 라오스'이다. 프로그램은 라오스사람들에 의해서 라오스사람들을 위해 만들어졌고, 캘거리대학 자문단의 역할은 과정에 대한 것이었지 내용에 대한 것이 아니었다.

The educational program that evolved was a “made in Laos” solution to a lack of available primary care; the program was created by Laotians for Laotians. The role of the University of Calgary consultants was mainly to help with process, not to formulate content.


한 가지 딜레마는 가르쳐야 하는 것과 라오스 농촌에서 수행할 수 있는 것 사이의 간극이었다.

One consistent dilemma the respondents faced was the polarity between wishing to teach what ought to be learned versus what can be practiced within the restricted resources of rural Laos.


한 가지 예시는 CPR의 우선순위가 낮다는 것이었다.

One prime example was the lower ranking of cardiopulmonary resuscitation (CPR) in both the surgery and pediatrics objectives.


라오스 사람들이 lifesaving external device에 대해서 가지고 있는 종교적 믿음이, 그 장치 사용을 가로막았다. 라오스 불교적 관점에서 신체를 'holy temple'로 바라보았고 환자와 가족들은 종종 침습적 방법을 사용하는게 그 믿음에 위배되는 것이라고 보았다.

Senior surgeons identified that the religious beliefs of the Lao people can prevent the use of lifesaving external devices; in the Lao Buddhist religion, the body is viewed as a “holy temple,” and patients and family members would often consider invasive maneuvers a violation of their beliefs.


첫 단계에서 핵심 리더 그룹이 인지한 교육과정에 대한 문제 중 하나는 attitudinal objectives가 없다는 점이었다.

A criticism of the curriculum that was acknowledged by the Key Leaders group in the first stage of our assessment was the lack of attitudinal objectives present in the curriculum.


영문에서 라오어로 번역하는 것 역시 이 평가의 한계로 작용했는데, 라오스 의사들과 선생님들이 여러 언어를 잘 하긴 했지만 영어는 아니었고, 라오어는 라오스의 유일한 공식 언어였다.

Language equivalency and translation of the study materials from English into Lao represented a weakness in this assessment. Lao physicians and teachers can be fluent in multiple languages, but not necessarily in English. The only official language of the country is Lao.


또 다른 약점은 농어촌 의료진을 포함시키지 못한 것이다.

A further weakness of this assessment was the inability to include existing rural practitioners.


연구의 강점은 이 과정이 두 가지 목적을 동시에 추구했다는 것이다. 하나는 보건의료의 우선순위를 밝히고자 했고, 다른 하나는 교수개발의 도구로서 라오스의 의학교육 리더들을 교육과정 개발과 요구사정에 참여시켰을 뿐만 아니라 새 프로그램에서 교사로 참여할 의사들도 포함시켰다.

The strength of this study is that the process served a dual purpose. First, it identified the health care priorities to be addressed by the FMSP. Second, it functioned as a faculty-development tool and introduced not only the Lao medical education leadership to novel methods of curriculum development and needs assessment, but it also involved the clinicians who would be the new teachers of the program.


교수개발을 제공하는 것과 더불어, 중요한 또 하나는 델파이방법의 특징인 익명성이다. 라오스 의학교육 시스템은 교사와 의사사이에 위계가 중요하다. 이는 요구사정 과정의 정확성을 해칠 수 있다. 모든 의사들을 델파이 과정에 참여시킴으로서 각각의 참여자들이 위협받지 않는 상황에서 동등하게 기여할 수 있었다.

In addition to providing faculty development, the process used a key characteristic of the Delphi method—anonymity. Within the Lao medical education system, hierarchy between teachers and clinicians can play a dominant role, which may hinder the accuracy of a needs-assessment process. By involving all available clinicians (junior and senior physicians) in the Delphi process, each participant was able to contribute equally in a nonthreatening environment and, thus, have a voice in the new curriculum.


우리가 수행한 요구사정 방법은 이해관계자들과의 관계를 증진시키고 정보를 모음으로서 다른 방법으로는 측정하기 어렵거나 모으기 힘든 자료를 수집했다는 점이다. 라오스의 통계자료는 심지어 국가적 수준에서도 분절되어있고 신뢰하기 어렵다. 라오스 의사들과의 소통을 통한 질적 자료 수집은 드러나지 않았던 독특한 이슈들을 드러나게 했다. 

The needs assessment we performed was rooted in developing relationships with the relevant stakeholders to gather information that would otherwise be immeasurable and unattainable by standard quantitative means. Statistical data in Laos is fragmentary and unreliable at best, even at the national level. The qualitative data obtained through interacting with the Lao clinicians and educators uncovered unique issues, such as creating public awareness for the program, so that rural Laotians will attend local medical centers, which are currently underused.


또한 우선순위 리스트를 작성함으로써 study guide나 logbook이 개발될 수 있었으며, 이들 리스트를 활용하여 교사들은 임상적으로 더 중요한 내용들에 집중할 수 있게 되었다.

There have been many advantages to producing the prioritized lists for teaching and learning at the outset of the FMSP. Study guides and logbooks based on the priority objective lists were developed to support both trainers and trainees. Using these lists, teachers have been directed to teach more on topics of greater clinical relevance and less on topics that are rare within the Lao context.











 2007 Mar;82(3):231-7.

Setting priorities for teaching and learning: an innovative needs assessment for a new family medicine program inLao PDR.

Abstract

Lao People's Democratic Republic (Lao PDR) is a small, tropical, landlocked country in southeast Asia. It is one of the least developed countries in the region, and its socioeconomic indicators are among the lowest 25% in the world. The World Health Organization has long called for increased equity in primary health care access around the world. To meet this need in Lao PDR, the Family Medicine Specialist Program was developed, a Lao-generated postgraduate training program designed to produce community-oriented primary care practitioners to serve the rural, remote areas of LaoPDR, where 80% of the population lives. An innovative method of needs assessment was required to determine the health care priorities to be met by this new program. Through the use of a modified Delphi technique, local key leaders in medical education, clinical specialists, and teachers were consulted to develop prioritized objectives for the hospital-based curriculum of the program. By setting priorities for teaching and learning in the unique and needy circumstances of Lao PDR, a novel approach to curriculum planning in a low-income country was explored and ultimately formed the foundation of the new curriculum. This process served to direct the allocation of scarce resources during implementation of this groundbreakingprogram. More importantly, this model of needs assessment could potentially be used to customize medical curricula in other low-income countries facing challenges similar to those in Lao PDR.








AMEE GUIDE NO 36

Faculty development: Yesterday, today and tomorrow

MICHELLE MCLEAN1, FRANCOIS CILLIERS2 & JACQUELINE M. VAN WYK3

1University of the United Arab Emirates, 2University of Stellenbosch, South Africa, 3University of KwaZulu-Natal, South Africa


Abstract

의학교육은 그 자체가 하나의 학문으로서 진호하였다. Medical faculty에게 요구되는 사회적 책무와 함께 가르치는 일에 대해서도 professionalization의 압박이 커지고 있다. 프로페셔널하고 역량있는 선생, 교육자, 연구자, 리더를 키우기 위해서는 교수개발(faculty development, FD)가 필요하다. 그러나 FD는 쉬운 일이 아디나. 조직 차원에서의 지지가 필요하고, 적절한 자원의 배분과 우수한 교육자를 인정해주는 것이 필요하다.

Medical education has evolved to become a discipline in its own right. With demands on medical faculties to be socially responsible and accountable, there is now increasing pressure for the professionalisation of teaching practice. Developing a cadre of professional and competent teachers, educators, researchers and leaders for their new roles and responsibilities in medical education requires faculty development. Faculty development is, however, not an easy task. It requires supportive institutional leadership, appropriate resource allocation and recognition for teaching excellence.


이 가이드는 의학분야 뿐만 아니라 관련된 보건분야를 막라하여 교육에 대한 교수의 새로운 역할을 위한 FD를 담당하고 있는 사람들을 위해 만들어졌다. FD 개발의 역사적 관점을 보여주고 FD 프로그램을 만들기 위해서 도움이 될 만한 프레임워크를 제공하고자 했다. 이 프레임워크는 FD 담당자들이 계획을 세우고, 도입하고, 평가하는데 도움을 줄 것이다.

This guide is designed to assist those charged with preparing faculty for their many new roles in teaching and education in both medical and allied health science education. It provides a historical perspective of faculty development and draws on the medical, health science and higher education literature to provide a number of frameworks that may be useful for designing tailored faculty development programmes. These frameworks can be used by faculty developers to systematically plan, implement and evaluate their staff development programmes.


마지막으로 이 가이드는 미래 FD를 이끌어나갈 주요 트렌드와 원동력을 짚어보았다.

This guide concludes with some of the major trends and driving forces in medical education that we believe will shape future faculty development.








교수개발의 미래

Future directions for faculty development


의학과 의학교육의 미래를 예측한 많은 논문들이 있다.

An extensive literature exists which attempts to predict the future of medicine and medical education (Alkan 2000; Benor 2000; Harden 2000, 2006; Rennie 2000; Gorman et al. 2000; Karle 2006).


'혁명적' 관점이 아닌 '진화적' 관점에서 보았을 때, 의학교육에서 현재 일어나고 있는 세 개의 발전을 볼 필요가 있다.

From an ‘evolutionary’ rather than a ‘revolutionary’ perspective (Harden 2000), we are of the opinion that three current but related developments in medical education warrant discussion.



디지털 시대, 세계화, 상업화

The digital age, globalization and the commercialisation of medical education


정보기술, 시뮬레이션, 가상현실은 이미 의학과 의학교육에서 중요한 부분이 되었고 앞으로도 계속 진보할 것이다. Gorman 등은 외과 분야의 미래에 대해서 '더 이상의 피와 위장은 없고 비트와 바이트가 있을 것이다' 라고 했다.

Information technology, simulation and virtual reality, already an integral part of medicine and medical education, will continue to advance medical practice in the 21st century (Benor 2000; Harden 2000, 2006; Gorman et al. 2000). Gorman et al. (2000) see the future of their discipline (surgery) as ‘no longer blood and guts, but bits and bytes’ (Box 6).




Ronald Harden의 노력으로 IVIMEDS가 생겼다.

Through the labours of Ronald Harden, the International Virtual Medical School (IVIMEDS) was born (Harden & Hart 2002).


의학교육도 빠르게 사업의 영역이 되고 있다. 외국에서 온 학생들은 영국 의대생의 15%, 일부 호주 의대에서는 40%까지를 차지하고 있다.

Like health care, medical education is fast becoming a business. Foreign fee-paying learners may now account for up to 15% of medical students at UK universities and as many as 40% at some Australian universities (Hawthorne et al. 2004).


의학교육관련 문헌에서 'global'이나 'international'이라는 단어는 점차 'transnational'이란 단어로 바뀌어가고 있다. Harden에 따르면 Transnational education의 정의는 ‘the intersection of international students, international teachers, and an international curriculum customized to local needs’이며, 'transnational competence'는 'medical training that addresses health in the context of global migration'이다.

In the medical education literature, the terms ‘global’ and ‘international’ are now being replaced by ‘transnational’. Transnational education is defined as ‘the intersection of international students, international teachers, and an international curriculum customized to local needs’ (Harden 2006), while ‘transnational competence’ refers to the medical training that addresses health in the context of global migration (Koehn & Swick 2006).


의학교육을 하는 사람들이 점차 세분화되면서 의학교육에도 국제표준이 적용되고 있다. 표준 교육과정을 다운로드 받을 수 잇다.

Global standards should also apply to medical educators (Purcell & Lloyd-Jones 2003), as medical education staff become increasingly specialized (e.g. in assessment, curriculum development or research) (Benor 2000; Davis et al. 2005). One can download a draft version of curriculum standards for educational professionals from the website of the recently established Academic of Medical Educators (http://medicaleducators.org).


Purcell과 Lloyd-Jones는 두 개의 모델을 제시했는데 하나는 competency 모델이고 다른 하나는 scholarship 모델이다.

Purcell and Lloyd-Jones (2003) have evaluated two possible models regarding standards for medical educators – a competency model (Harden et al. 1999; Hesketh et al. 2001) and a scholarship model (Fincher et al. 2000).


2000년에 Benor는 2020년에 의과대학에 대해서 세 부류의 교수를 예상했다. Content experts, Assessors, Moral guide. 그리고 이것이 옳은 것으로 드러나고 있다.

In a 2020 medical school, Benor (2000) envisaged three types of medical teachers: content experts, assessors and moral guides. Have his predictions materialized almost a decade later? (Table 9). In many respects, Benor (2000) was correct.


의대생들에게 2020년의 의학교육에 대해서 물은 뒤, Rennie는 의학교육은 언제나 caring/sensitive practitioner를 양성하기 위해 노력할 것이라고 믿었다.

When asked to comment on medical students and medical education in 2020, Rennie (2000) believed that medical education would always strive to produce caring, sensitive practitioners.


Compassion에 대한 기풍은 언제나 health care의 한가운데 자리잡고 있었지만, 의학교육에서 항상 그래왔던 것은 아니다.

While an ethos of compassion has always been advocated as the central theme of health care, it has not always been at the core of medical education. 





이것이 교수들에게 시사하는 바는 무엇인가?

What does this mean for medical faculties?


의과대학의 질에 영향을 주는 요소는 Accountability, accreditation, technological advances, globalization and commercialization등이 있다. FD의 주된 과제는 행정가들의 요구, 학계의 요구, 사회의 요구를 관리하는 것이다.

Accountability, accreditation, technological advances, globalization and commercialization are some of the factors that will drive quality academic medicine. The challenge for faculty developers is to find better ways of managing the perceived needs of administrators, the expressed needs of academics and the real health care needs of society.


성공과 지속가능성은 다양한 이해관계자들이 교육의 가치를 어떻게 평가하느냐에 달렸다. Williams등은 최근 교육에 대해 인정해주지 않고 보상해주지 않는 오래된 문제를 어떻게 극복할 것인가에 대해서 '가장 큰 문제는 좋은 교육과 수익간에는 간접적인 관계만 있는 것이다. 따라서 좋은 교육을 유도하고 지속시키기 위한 대안적 모델이 필요하다. 두 가지 모델이 가능한데 하나는  regulatory model이고, 다른 하나는 quality model이다. Regulatory model은 마치 임상술기와 같이 교육스킬이 정기적으로 업데이트되는 것이다.Quality model은 교육의 질에 기반해서 지원자를 놓고 경쟁하는 것이다' 라고 했다. 

Success and sustainability will, however, depend on the value ascribed to teaching by various stakeholders. Williams et al. (2007) recently offered suggestions to overcome the ageold hiatus of recognizing and rewarding teaching ‘. . . the difficulty in sustaining the effects of faculty development programs relates to the fact that good teaching is only indirectly related to revenue, unlike clinical or research activities. Because it is unlikely that good teaching will be directly related to institutional revenue in the foreseeable future, alternative models for improving and maintaining good teaching should be sought. Two such models are a regulatory model, in which teaching skills are regularly updated, analogous to clinical skills improvement through continuing medical education, and a quality model, in which teaching institutions compete for applicants based on valid measures of teaching quality in their programs. These and other models should be examined and tested in future faculty development programs’.


결국 문제는 이것이다. 의학 선생님, 의학 교육자에게 최소요구조건 또는 최소기준이 있어야 하는가?

All of this begs a question: Should there be minimum requirements and standards of practice for medical teachers and educators? 


우리의 관점에서 최소한의 기준은 아래와 같다.

From our perspective, minimum requirements for professionalising teaching practice might then include the following:

.FD가 모든 의과대학의 미션에 핵심적으로 있어야 하고,

.조직 문화가 교육을 인정해주고 보상해야 하며

.학생을 가르치려는 사람은 일정한 공식적인 준비과정을 거쳐야 한다.

. faculty development for academics should be integral to the mission of every medical school, such that deans and administrators cannot ignore issues of quality assurance and social accountability;

. the institutional culture must recognize and reward teaching excellence and scholarship equally with research and clinical service;

. there should be formal preparation for anyone who teaches our students. For appointments and for promotion along the educator track, a teaching qualification should be mandatory. Provision should be made for initial and ongoing professional development for all faculty members and teachers.


Tomorrow's Doctor를 다시 인용하자면, '우리가 할 수 있는 것은 의사들이 적응하고 변화할 수 있도록, 새로운 아이디어와 기술의 발전을 포용할 수 있도록, 전문직으로서의 평생에 걸친 학습태도를 지속할 수 있도록 가르치는 것 뿐이다.'라는 문구는 미래의 의사들을 유연성을 갖춘 평생학습자로 길러야 한다는 것을 강조한다. 

Reiterating an extract from Tomorrow’s Doctor (GMC 1993): ‘. . . we can best strive to educate doctors capable of adaptation and change, with minds that can encompass new ideas and developments and with attitudes to learning that inspire the continuation of the educational process throughout professional life’, reminds us of the need to train tomorrow’s practitioners to be flexible, life-long learners. 


Carl Rogers는 30년도 전에 이렇게 말한 바 있다. 

한 사람이 '교육받았다' 라고 할 수 있으려면, '어떻게 배우는가'를 배운 사람이어야 한다. 그리고 어떻게 변화에 적응해야하고 어떻게 변화해야 하는지를 배운 사람이어야 한다. 지식은 만고불변한 것이 아니며, 변하지 않는 것은 '지식을 찾아나가는 과정'임을 깨달은 사람이어야 한다.

Carl Rogers (1969) expressed these very sentiments more than 30 years ago: ‘The only person who is educated is the person who has learned how to learn; the person who has learnt how to adapt and change; the person who has realized that no knowledge is secure, that only the process of seeking knowledge gives a basis for security’.


결론은 무엇인가?

What conclusions can we draw about faculty development?


우리가 교육 프로그램에 대해 다루고 있지만, Gibbs는 FD에 대해서 했던 코멘트를 다시 새겨볼 필요가 있다. 있는 것을 계속 새로 만들려고 노력할 수는 없으며, 가지고 있는 것을 실제 환경의 다이나믹한 변화에 적용가능하도록 바꾸어야 한다. 얼마나 안정적으로 만들 것이냐를 기준으로 프로그램을 만들지 말고, 변화에 얼마나 적응하여 지속가능한가를 기준으로 만들어야 한다.

Although referring to educational programmes, Gibbs’ (2006) comments ring true for faculty development ‘We cannot afford to keep ‘re-inventing the wheel’; we need to make the wheel adaptable to the dynamically changing and real-world environment. We need to design programmes that are not dependent on stability, but are sustainable by adapting to change’.


요약하자면 FD의 현재와 미래는 다음과 같다.

In summary, faculty development today and tomorrow should:

. be systematically planned and implemented, with realistic, achievable and measurable outcomes that are appropriate for the task. This requires developing objectives and measurable performance criteria early in the planning process.

. include practitioners in various clinical settings, such as the community and other health care professions.

. be task-oriented, with immediate application. 

. be tailored to suit the needs of the institution, disciplines and individual teachers, including educational scholars and leaders. These needs may become more specialised (e.g. international assessors) as medical education becoming more global or transnational.

. promote both professional and personal developmentwhich requires continuous and long-term intervention.

. include multidisciplinary and group training, to promote collegiality and to create communities of practice in teaching, medical education research and administration.

. be underpinned by theories and principles of learning (e.g. self-directed; interactive; authentic; contextually relevant).

. be adaptable to meet the changing health care requirements and innovations in medical education (e.g. web-based learning and digital technology). . take cognisance of globalization and the need for international standards and core competencies (even amongst medical school academics and medical educators).

. involve collaboration with disciplines beyond the boundaries of medical education. With the growing emphasis on multidisciplinary team work, interprofessional faculty development is likely to become a future imperative.



가르침과 교육이 연구나 진료만큼 보상받지 못하는 기관에서는 FD에 대한 참여를 유도하기 위해서는 인센티브가 필요하다. 참여를 유도하기 위한 성공적인 전략은 학생들의 요구를 하나의 목표로 삼음으로서 교수들의 moral responsibility에 호소하는 방법이 있다.

In institutions where teaching and educational scholarship is not afforded the same reward as research or clinical care, participation in faculty development may require incentives. Successful strategies for participation include appealing to faculty’s moral responsibility by promoting student needs as an objective (Hill & Stephens 2004) or awarding CME credits (Williams et al. 2007).


마지막으로 우리는 Brown이 '고등교육에서의 교육은 알아서 변하도록 놔두기에는 너무나도 중요한 것이다'라는 말에 전적으로 동의한다.

Finally, we agree wholeheartedly with Brown (2000) that teaching in higher education is too important to be left to chance’. Medical education is at a point where faculty development that promotes the professionalisation of teaching must be an integral aspect of the life of every medical school.








 2008;30(6):555-84. doi: 10.1080/01421590802109834.

Faculty developmentyesterdaytoday and tomorrow.

Abstract

Medical education has evolved to become a discipline in its own right. With demands on medical faculties to be socially responsible and accountable, there is now increasing pressure for the professionalisation of teaching practice. Developing a cadre of professional and competent teachers, educators, researchers and leaders for their new roles and responsibilities in medical education requires faculty developmentFaculty development is, however, not an easy task. It requires supportive institutional leadership, appropriate resource allocation and recognition for teaching excellence. This guide is designed to assist those charged with preparing faculty for their many new roles in teaching and education in both medical and allied health science education. It provides a historical perspective of faculty development and draws on the medical, health science and higher education literature to provide a number of frameworks that may be useful for designing tailored faculty development programmes. These frameworks can be used byfaculty developers to systematically plan, implement and evaluate their staff development programmes. This guide concludes with some of the major trends and driving forces in medical education that we believe will shape future faculty development.

PMID:
 
18677659
 
[PubMed - indexed for MEDLINE]


AMEE GUIDE NO 36

Faculty development: Yesterday, today and tomorrow

MICHELLE MCLEAN1, FRANCOIS CILLIERS2 & JACQUELINE M. VAN WYK3

1University of the United Arab Emirates, 2University of Stellenbosch, South Africa, 3University of KwaZulu-Natal, South Africa


Abstract

의학교육은 그 자체가 하나의 학문으로서 진호하였다. Medical faculty에게 요구되는 사회적 책무와 함께 가르치는 일에 대해서도 professionalization의 압박이 커지고 있다. 프로페셔널하고 역량있는 선생, 교육자, 연구자, 리더를 키우기 위해서는 교수개발(faculty development, FD)가 필요하다. 그러나 FD는 쉬운 일이 아디나. 조직 차원에서의 지지가 필요하고, 적절한 자원의 배분과 우수한 교육자를 인정해주는 것이 필요하다.

Medical education has evolved to become a discipline in its own right. With demands on medical faculties to be socially responsible and accountable, there is now increasing pressure for the professionalisation of teaching practice. Developing a cadre of professional and competent teachers, educators, researchers and leaders for their new roles and responsibilities in medical education requires faculty development. Faculty development is, however, not an easy task. It requires supportive institutional leadership, appropriate resource allocation and recognition for teaching excellence.


이 가이드는 의학분야 뿐만 아니라 관련된 보건분야를 막라하여 교육에 대한 교수의 새로운 역할을 위한 FD를 담당하고 있는 사람들을 위해 만들어졌다. FD 개발의 역사적 관점을 보여주고 FD 프로그램을 만들기 위해서 도움이 될 만한 프레임워크를 제공하고자 했다. 이 프레임워크는 FD 담당자들이 계획을 세우고, 도입하고, 평가하는데 도움을 줄 것이다.

This guide is designed to assist those charged with preparing faculty for their many new roles in teaching and education in both medical and allied health science education. It provides a historical perspective of faculty development and draws on the medical, health science and higher education literature to provide a number of frameworks that may be useful for designing tailored faculty development programmes. These frameworks can be used by faculty developers to systematically plan, implement and evaluate their staff development programmes.


마지막으로 이 가이드는 미래 FD를 이끌어나갈 주요 트렌드와 원동력을 짚어보았다.

This guide concludes with some of the major trends and driving forces in medical education that we believe will shape future faculty development.









FD의 계획과 도입

Planning and implementing faculty development


장기적 또는 의미있는 성과의 보고가 적다는 것이 '아기를 물가에 내놓아도 된다'라는 뜻은 아니다.

The general lack of reported long-term or meaningful outcomes of faculty development programmes does not mean, however, that we should ‘throw the baby out with the bath water’


비유를 들자면 FD를 여행가는 것에 비교할 수 있다. 사람들은 모두 다른 이유로 여행을 떠난다. 잘 알려지지 않은 목적지 또는 적절하지 않은 목적지로 여행을 떠나는 사람은 거의 없을 것이다. 중간에 목적지가 바뀐다면 일부는 떨어져나갈것이다. 모든 여행자를 이끌기 위해서는 그들이 누구고, 어디로 가고 싶고, 왜 그 여행을 떠났는지를 알아야 한다.

Perhaps a useful analogy at this stage would be a comparison between a faculty development programme and a journey. Passengers embark on a journey for many different reasons (Fullan 1993). If the destination is not advertised or is not suitable, few passengers will start the journey. If the destination changes en route, some will disembark along the way. To cater for all travellers, it is important to know who they are, where they want to go and why they are taking this particular excursion.



FD의 여섯 단계

A six-step approach to faculty development (adapted from Kern et al. 1998)


Kern의 여섯 단계를 세 단계로 구분하고자 한다.

For simplicity, we have divided Kern et al’s (1998) six steps into three phases:

A. planning (Steps 1–3);

B. implementation (Steps 4–5) and, finally;

C. evaluation and feedback (Step 6).


A. 계획 단계

A. Planning faculty development (Steps 1–3)


1. 문제를 명확히하고, 일반적 요구 조사

1. Problem identification and general needs assessment


Table 6의 질문을 해야 한다.

Critical questions at this stage might include (Table 6):


원동력이 주로 외부에 있다면, 그리고 개개인의 동기부여가 잘 되어있지 않다면 개별 교수들은 왜 참여해야하는지 의문을 가질 것이다.

If the driving forces are largely external and if there is little personal motivation to improve teaching, then individual faculty members will want to know why they should participate (Carroll 1993).


2. 대상자에 대한 요구조사

2. Needs assessment of target participants


FD프로그램의 일반적 요구조사가 되었다면, 개별 교수들, 학문영역, 조직 수준의 요구가 조사되어야 한다.

Having agreed on the general purpose of the faculty development programme, the needs of individual faculty members, disciplines and the institution should be identified


3. 적절한 목표와 성과 설정

3. Appropriate goals and specific measurable outcomes


Table 6에 있는 질문을 생각해보아야 한다.

Questions at this point may include:


task는 궁극적인 목적과 성과를 달성하도록 해야 하고, 인지적/정동적/운동적 부분을 다 포괄해야 한다.

The task at hand will dictate the overarching goal and specific outcomes, which may range from cognitive or affective to psychomotor.


현실적이고 측정가능한 성과는 다음을 포함해야 한다.

Realistic and measurable outcomes may then include

.인지/정동/운동 발달을 포함하는 역량

.학습 '프로세스'

.교육적/임상적 효과(이득)

. Individual competencies in terms of cognitive (knowledge), affective (attitudinal) and psychomotor (skills and performance) development.

. The learning ‘process’ (e.g. small group facilitation; reflective teaching).

. Educational (e.g. better student assessment) or clinical (e.g. improved communication with patients) benefits.



B. 도입

B. Implementation (Steps 4 & 5)


4. 교육 전략

4. Educational strategies


FD프로그램에 사용되는 교육 전략은 학습 성과와 일치해야 한다.

Educational strategies used in the faculty development programme should be aligned with the learning outcomes


FD가 학습향상에 대한 관점을 통한 교육의 변화를 추구한다면, 하나 혹은 그 이상의 이론적 모델에 기반해야 한다.

If faculty development is about changing practice with the view to improving student learning, then it should be underpinned by one or more theoretical models (Box 5).





고등교육에서의 많은 연구는 conceptual change model을 student learning model과 연결시켜왔기 때문에, Faculty developer는 주로 복합적인 접근법을 사용해왔다. 이러한 좋은 예는 아래와 같은 것이 있으며, 교수들이 좀 더 transformative conception을 적용할 수 있다면 학생의 deep learning을 촉진할 수 있음을 보여준다.

Much of the research in higher education has linked conceptual change models with student learning models and so faculty developers have tended to use a hybrid approach (Trigwell 1995; Kember 1997; Prosser & Trigwell 1997; Prebble et al. 2004; Richardson 2005). Good examples of this combination include the studies of Ho et al. (2001) and Gibbs & Coffey (2004). Gibbs and Coffey (2004) suggest that if teachers can adopt more transformative conceptions of learning, their more student-centred teaching practice should foster deep learning.



따라서 학습자중심의 접근법에 있어서 참여자는 아래와 같이 해야 한다.

Thus, in a learner-centred approach to faculty development, participants should be encouraged to

. negotiate their learning objectives (Knowles 1975),

. have hands-on practical experience (Kolb 1984),

. collaborate as members of a team (Bandura 1986),

. engage in self-directed learning (Knowles 1975),

. recognize the assumptions that underlie their beliefs and behaviours (Brookfield 1995),

. receive and provide feedback (Knowles 1975),

. solve problems and transfer this experience to other situations (Regehr & Norman 1996),

. reflect in- and on-action, alone (Scho¨n 1987, 1991) and with colleagues (Bandura 1986),

. engage in self-assessment (Williams et al. 1999), and

. apply what they have learnt to their practice (Knowles 1988; Regehr & Norman 1996).


Trigwell은 몇 가지 전략을 제시했다.

Trigwell (1995) has suggested some practical strategies that might be useful to engage academics with their practice during faculty development sessions. These include

.교수들의 다양한 사고방식을 인식한다.

.학습을 향상시킬 수 있는 교육 개념을 토론한다.

.이러한 개념에 맞는 전략과 수행을 묘사한다.

.향상된 교육을 보여준 교수에 대해 학생들의 긍정적인 코멘트를 활용한다.

. developing an awareness of the variation (i.e. different conceptions) in teacher thinking (e.g. through appropriate articles in journal clubs),

. discussing conceptions of teaching which are thought to lead to improved learning (e.g. in small group discussions with colleagues who have been recognized for their teaching excellence),

. illustrating strategies and practices that are consistent with these conceptions (e.g. through reviewing and reflecting on video-taped sessions),

. using positive student comments relating to teachers who have improved their teaching practice, which could be discussed in groups or through a peer mentoring programme.


5. 최종 도입

5. Final implementation

이 단계에서 해야 할 질문은 "FD가 multidisciplinary해야하는가?" "보장된 시간이 있는가?" "목적과 성과과 도달될 것인가" 이다.

Questions that need to be answered at this stage include: Should faculty development be multidisciplinary? Is there protected time? Are the goals and outcomes being met?


academic group을 교육과 관련된 복잡한 지식/태도/술기를 향상시키기에 효과적인 세팅이라고 보고한 근거들이 있다.

The evidence supports the academic group as an effective setting for developing the complex knowledge, attitudes and skills involved in teaching (Prebble et al. 2004).


이러한 팀워크는 professional inquiry의 문화를 촉진하기 위해서 필요하나, 그룹 FD는 학과별로 해야하는가 아니면 학제간으로 해야하는가? 둘 다 찬/반이 있다.

This team work should also aim to foster a culture of professional inquiry, but, should group faculty development be departmental or multidisciplinary? Both have pros and cons.


Neumann의 고등교육 관점에 따르면 학과기반의 FD는 pedagogical practice를 향상시키는 것에 장점이 있다.

From Neumann’s (2001) higher education perspective, department- based professional development is more likely to offer better opportunities for enhancing pedagogical practice than a centralised, generic teaching skills accreditation programme approach


학제간 FD는 교수들의 통합교육과정에 대비하게 하고 각각의 학문들이 어떻게 수직, 수평으로 통합되었는지에 대한 이해를 도와준다.

Interdisciplinary faculty development offers several benefits. A multidisciplinary approach, for example, to prepare faculty for reform to an integrated curriculum would certainly promote an appreciation and understanding of how individual disciplines become horizontally and vertically integrated.


Lave는 situated learning theory를 이용해서 어떻게 교수들의 새로운 교수를 socialize하는지 설명한 바 있다.

Lave’s (1988) situated learning theory explaining how interaction with professionals socialises newcomers into the institutional culture can also be drawn upon.


그룹 활동을 계획할 때에는 관계/지위/책임/평판 등을 고려해야 한다. FD는 collegiality와 collaboration이 필요하기 때문에, 어떤 그룹이 더 잘 함께할 수 있는지 알아야 한다.

When planning group activities, we should, however, take cognisance of, for example, relationships, status, responsibility and reputation (i.e. Maslow’s (1970) hierarchy of needs). Where faculty development requires collegiality and collaboration (e.g. developing skills to undertake curriculum reform), we need to recognize which faculty groups work best together.


다람쥐가 공룡이나 코알라랑 잘 하겠는가, 아니면 양이나 카멜레온과 잘 하겠는가?

Do the squirrels work best with the dinosaurs and koalas, or do they work better with the sheep and the chameleons? (Challis 2001).


C. 평가와 피드백

C. Evaluation and feedback (Step 6)


6. 프로그램 효과 평가와 피드백 제공

6. Evaluate programme effectiveness and provide feedback


비록 평가가 FD에서 중요한 부분이지만, 가장 무시되는 부분이기도 하다.

Although evaluation is an important aspect of faculty development, it is probably the most neglected (Prebble et al. 2004;

Steinert 2005; Steinert et al. 2006).  


계획 단계에서부터 중요한 질문들을 해야 한다.

Critical questions about measuring programme effectiveness need to be asked and answered during the planning stage, when the objectives are agreed upon (i.e. Stage 3 of Kern et al.’s (1998) approach) (Table 6).


장기적/의미있는 성과에 대해서 잘 기술하지 않으면, 기본적인 측정의 어려움 뿐만 아니라 부적절한 평가 도구를 사용하게 될 수도 있다.

As already alluded to, the poor documentation of long-term and meaningful outcomes may, apart from inherent difficulties of measuring higher level outcomes, relate to inappropriate evaluation tools, amongst a number of other factor.


낮은 레벨에 해당하는 참가자의 만족도는 몰라도 높은 레벨에서는 질적 척도가 필요하다.

While this may be appropriate for lower level outcomes (e.g. participant satisfaction) in Kirkpatrick’s (1994) model (Table 3), higher order outcomes require more qualitative measures (Skeff et al. 1997a; Knight et al. 2007).


다른 고등교육영역에서 사용된 validated inventories나 instruments를 활용하는 것도 한 가지 방법이다. 다음이 그 예이다.

It would be useful for faculty developers to use validated inventories and instruments from the higher education arena and Psychology for evaluating learner or faculty interventions. Prosser & Trigwell’s (1993) Approach to Teaching Inventory and instruments used by Gibbs & Coffey (2004) in their landmark study are two such examples.


의미있는/장기적 성과를 측정하기 위해 노력하고 있는 동안 Steinert는 Kirkpatrick 모델에서 만족도는 비록 낮은 단계에 있지만 중요하게 고려되어야 한다고 주장한다. 만약 참석자들이 그들이 투자한 시간과 노력이 의미있다고 생각하지 않으면, 더 이상 FD에 참여하려고 하지 않을 것이기 때문이다. 또한 우리는 교수들이 FD의 가치를 깨닫고 동료들에게 권하기를 원하기 때문이다. educational programme의 평가에 대해서 Goldie의 조언을 찾아보거나 clinical education intervention에 있어서 측정 원칙에 대해서는 Snell의 연구를 참고할 수 있다.

While we strive to measure ‘meaningful’ and ‘long-term’ outcomes of faculty development, Steinert (2005) has pointed out that despite participant satisfaction being assigned to the lowest level on Kirkpatrick’s (1994) model, it is nevertheless an important consideration in faculty development. If participants do not believe that their time and efforts were well spent, they may not sign up for further faculty development sessions, just as the travellers on the train journey. We would also certainly want faculty to recognize the value of courses and recommend them to colleagues. Readers should consult Goldie (2006) for a description of the range of tools for evaluating educational programmes and Snell et al. (2000) for a discussion of measurement principles relating to clinical educational interventions.







 2008;30(6):555-84. doi: 10.1080/01421590802109834.

Faculty developmentyesterdaytoday and tomorrow.

Abstract

Medical education has evolved to become a discipline in its own right. With demands on medical faculties to be socially responsible and accountable, there is now increasing pressure for the professionalisation of teaching practice. Developing a cadre of professional and competent teachers, educators, researchers and leaders for their new roles and responsibilities in medical education requires faculty developmentFaculty development is, however, not an easy task. It requires supportive institutional leadership, appropriate resource allocation and recognition for teaching excellence. This guide is designed to assist those charged with preparing faculty for their many new roles in teaching and education in both medical and allied health science education. It provides a historical perspective of faculty development and draws on the medical, health science and higher education literature to provide a number of frameworks that may be useful for designing tailored faculty development programmes. These frameworks can be used byfaculty developers to systematically plan, implement and evaluate their staff development programmes. This guide concludes with some of the major trends and driving forces in medical education that we believe will shape future faculty development.

PMID:
 
18677659
 
[PubMed - indexed for MEDLINE]





AMEE GUIDE NO 36

Faculty development: Yesterday, today and tomorrow

MICHELLE MCLEAN1, FRANCOIS CILLIERS2 & JACQUELINE M. VAN WYK3

1University of the United Arab Emirates, 2University of Stellenbosch, South Africa, 3University of KwaZulu-Natal, South Africa


Abstract

의학교육은 그 자체가 하나의 학문으로서 진호하였다. Medical faculty에게 요구되는 사회적 책무와 함께 가르치는 일에 대해서도 professionalization의 압박이 커지고 있다. 프로페셔널하고 역량있는 선생, 교육자, 연구자, 리더를 키우기 위해서는 교수개발(faculty development, FD)가 필요하다. 그러나 FD는 쉬운 일이 아디나. 조직 차원에서의 지지가 필요하고, 적절한 자원의 배분과 우수한 교육자를 인정해주는 것이 필요하다.

Medical education has evolved to become a discipline in its own right. With demands on medical faculties to be socially responsible and accountable, there is now increasing pressure for the professionalisation of teaching practice. Developing a cadre of professional and competent teachers, educators, researchers and leaders for their new roles and responsibilities in medical education requires faculty development. Faculty development is, however, not an easy task. It requires supportive institutional leadership, appropriate resource allocation and recognition for teaching excellence.


이 가이드는 의학분야 뿐만 아니라 관련된 보건분야를 막라하여 교육에 대한 교수의 새로운 역할을 위한 FD를 담당하고 있는 사람들을 위해 만들어졌다. FD 개발의 역사적 관점을 보여주고 FD 프로그램을 만들기 위해서 도움이 될 만한 프레임워크를 제공하고자 했다. 이 프레임워크는 FD 담당자들이 계획을 세우고, 도입하고, 평가하는데 도움을 줄 것이다.

This guide is designed to assist those charged with preparing faculty for their many new roles in teaching and education in both medical and allied health science education. It provides a historical perspective of faculty development and draws on the medical, health science and higher education literature to provide a number of frameworks that may be useful for designing tailored faculty development programmes. These frameworks can be used by faculty developers to systematically plan, implement and evaluate their staff development programmes.


마지막으로 이 가이드는 미래 FD를 이끌어나갈 주요 트렌드와 원동력을 짚어보았다.

This guide concludes with some of the major trends and driving forces in medical education that we believe will shape future faculty development.







효과적이고 지속가능한 FD의 구성요소는?

What constitutes ‘effective’ and sustainable faculty development?


우리는 '효과적'이라는 단어를 신중하게 사용하고자 하는데, 그 이유는 많은 프로그램들이 participation이나 satisfaction 수준만 평가할 뿐 학생의 학습에 효과가 있었다는 등의 장기적인 성과는 보고하고 있지 않기 때문이다. CME에 있어서도 비슷하게 '의미있는 성과'에 대한 보고가 부족하다.

We, however, reserve the use of the word ‘effective’ since the reported success of many programmes relates to faculty participation and satisfaction rather than long-term outcomes such as changed practice or improved student learning (Prebble et al. 2004; Steinert et al. 2006; Knight et al. 2007; Williams et al. 2007). A similar paucity of ‘‘meaningful outcomes’’ has also plagued continuing medical education programmes for the same reasons (Tian et al. 2007). 


Steinert등과 Tian등은 Kirkpatrick의 평가모델을 gold standard로 삼았다. 참여자들의 만족과 스스로 응답한 변화/향상 등이 가장 흔히 보고되는데 이것들은 모두 Kirkpatrick scale에서 낮은 레벨에 대한 것들이다. Kirkpatrick의 모델에서 intervention의 효과는 다음의 네 단계로 평가 가능하다.

In reaching their conclusions, Steinert et al. (2006) and Tian et al. (2007) used Kirkpatrick’s (1994) levels of evaluation as the gold standard for assessing the outcomes. Participant satisfaction and self-reported changes or improvements were most commonly reported, which are both lower order levels of outcomes on the Kirkpatrick (1994) scale (Table 3). In Kirkpatrick’s (1994) model, effectiveness of an intervention is considered at four levels:


(1) 반응 reaction of participants (e.g. participant satisfaction);

(2) 학습 learning (in terms of knowledge, skills and attitudes);

(3) 행동 behavioural changes (willingness to transfer learning to educational environment); and

(4) 결과 results (impact on learners, trainees, patients, organizational culture).





비록 Freeth등은 Kirkpatrick의 레벨이 위계가 있다고 보지는 않았지만, '결과'에 해당하는 성과를 측정하는 것은 대단히 어렵다. 

Although Freeth et al. (2002) do not view Kirkpatrick’s levels as hierarchical, outcomes become increasingly difficult to measure as one moves from reaction to results.


Guskey는 조직의 리더들과 Faculty developer들이 같은 찬송가를 부르기 위해서는(즉 조화를 이루기 위해서는) '효과적인' FD가 무엇인지에 대한 의견의 일치가 있어야 한다. 우리의 관점에서 효과성은 'FD프로그램의 일차적 목적' 등을 비롯한 몇 가지 요인에 따라 달라지는 것으로 보인다. 

Guskey (2003) advises us that in order for institutional leaders and faculty developers to sing from the same hymn sheet, we should agree on what constitutes ‘effective’ faculty development. In our view, effectiveness will, however, depend on a number of factors, including the primary aim of the faculty development activity or programme.


Prebble 등이 지적한 바와 같이 학생이 향상되었다는 식의 성과를 측정하기 어려운 중요한 이유 중 하나는 FD와 학생성과간에 연결이 간접적 또는 두 단계를 거치기 때문이다.

As Prebble et al. (2004) have pointed out, the difficulty in measuring improved student outcomes may stem, in part, from the fact that the link between faculty development and student outcomes is an indirect or two-step process


앞서 지적한 바와 같이, 여러 문헌들로부터 teaching practice를 향상시켜서 student learning을 향상시키는 것이 가능하다는 것이 보고되고 있고, 이는 교수들의 '학습에 대한 개념 변화'를 촉진시킴으로서 가능할 수 있다.

As alluded to earlier, the literature informs us that it is possible to promote student learning by improving teaching practice, which may be facilitated by changing teachers’ conceptions of learning (Prosser & Trigwell 1997; Prebble et al. 2004; Richardson 2005). 


그러나 어떻게 교육의 'transformative conception'을 향상시키는 FD프로그램을 만들 수 있으며, '의학교육이 그 어느 때보다도 다양해진', '의학교육이 절대로 가만히 있지 않는' 이 때에 어떻게 teaching practice를 바꿀 수 있을 것인가?

But, how do we develop faculty development programmes that promote more transformative conceptions of teaching and learning and how do we change teaching practice when ‘Medical education is probably as diverse as it has ever been’ (Pritchard 2004) and when ‘Medical education seems to be in a perpetual state of unrest’ (Cooke et al. 2006)?


크게 세 분류로 나눠서 제언을 할 수 있을 것이다. (후반부에 다뤄짐)

We have chosen to group these recommendations into three main categories: effective change management strategies, effective educational practice and accountable practice.





상주하고 있는 FD전문가 Resident faculty development experts. 

자문위원을 초청하여 단기간의 훈련 코스를 요청하거나 faculty를 다른 기관으로 보내 (종종 큰 비용을 들여) 수행하는 것은 지속가능하지 못하다. 성공적인 FD는 faculty teaching과 student learning의 장기적 성과에 달려 있다.

The once popular practice of inviting consultants to offer short training courses or sending faculty to other institutions, often at great cost, is not sustainable. Successful faculty development depends on its long-term outcomes for faculty teaching and student learning


우리가 보기에, faculty가 무엇을 필요하는지 잘 알고, 즉각적으로 자문을 해 줄 수 있는 MEU/Dept of ME의 스테프들이 필요하다. 

In our view, this necessitates a medical education unit/department staffed with appropriately trained professionals who are sensitive to the needs of faculty and readily available for consultation (Hitchcock et al. 1993, Davis et al. 2005).


또 다른 권장사항은 '교육적으로 영향력이 있는' 사람을 파견보내는 것이다. 이 사람들이 동료로부터 존경받는 사람인지 여부가 중요하다. Simpson 등은 faculty developer를 'risk-taking role model'이라고 묘사하면서, 교육적 불완전함과 실수를 다함께 공유하고, 거기서 배운 교훈을 공유하면서 교육의 진전을 이루는 사람이라 칭했다.

Also recommended is the practice of seconding ‘educationally influential’ colleagues as role models and advocates, such as those who have been rewarded for teaching (Kaufman et al. 1999; Rogers 2005; Williams et al. 2007). It is critical, however, that these individuals are respected by their colleagues (Steinert 2005). Simpson et al. (2006) have described faculty developers who are ‘risk-taking role models’, whose behaviour advances education through public sharing of educational imperfections and mistakes, through lessons learnt and as individuals who are able to modify faculty development to engage participants.


새로운 것을 만드는 것에 집착하지 말기 Avoid reinventing the wheel

새로운 프로그램을 만드는 것에 시간과 에너지를 쏟기 보다는 이미 성공이 증명된 프로그램이 사용한 전략을 도입하는 것이 좋다. 이를 위해서 Wong과 Agisheva는 지역과 기관의 맥락을 잘 파악하여 한 문화권에서 다른 문화권으로 FD프로그램을 도입시키는데 성공했다.

Rather than expending time and energy on de novo programmes, it makes sense to adopt strategies from programmes with proven success. To this end, Wong and Agisheva (2007) successfully transposed of a well designed and successful faculty programme from one culture to another, taking cognisance of local contextual and institutional factors.


의학교육 외 영역과 협동하기 Collaboration with and beyond the medical education arena.

조직의 자원은 대개 한정되어 있으므로 변화와 밀접히 관련이 된 사람들의 협동이 필요하다.

As institutional resources are generally finite, it is not surprising that ‘Co-operation has emerged a key theme amongst academics closely involved in change


지역간 협동은 매우 성과가 좋다. AMEE, ASME, AAMC 등.

Collaboration between regional institutions can be very productive (Kent & Gibbs 2004). AMEE (Association for Medical Education in Europe), ASME (Association for the Study of Medical Education) in Europe and the AAMC (Association of American Medical Colleges) in the USA have served important networking roles regionally and internationally. (Western Cape Branch of the South African Association for Health Educationists.)


국제적 수준에서 보면, FAIMER는 잘 사는 국가와 저소득 국가간 협력을 촉진하고 네트워크를 구축해서 의학교육의 리더십과 역량을 키우고자 했다.

On a global scale, FAIMER is contributing to building capacity and leadership in medical education across the globe by fostering co-operation and establishing networks between more and less developed nations (Burdick et al. 2006).


FD에서의 협동은 의학을 넘어 다른 보건의료직과 이루어져야 한다.

Collaboration in faculty development should also extend beyond medicine and the health professions.


변화의 원동력으로 FD를 활용하기 Faculty development as change. 

모든 FD프로그램은 변화를 일으키고 지속시켜야 한다.

Any faculty development programme should endeavour to initiate and sustain change


Context가 변화에 중요하기 때문에, 열린 조직문화, 학습을 조장하는(Conducive) 조직문화가 장려되어야 한다.

As context is important for change, an open, conducive organizational culture of learning should be fostered (Eckhert 2002).


만약 FD가 변화를 위한 것이라면 Farmer는 CAS를 사용하기를 권고한다. CAS이론에 따르면 강력한 변화과정을 만들어내려면 macro 전략에 집중하기보다는 micro한 수준에 더 집중해야 한다.

If faculty development is about change, then Farmer (2004) suggests using the Complex Adaptive Systems (CAS) theory to inform our practice. The CAS Theory, rather than focusing on the ‘macro’ strategic level of an organization, purports that it is at the ‘micro’ level that the most powerful change processes take place.


이러한 측면에서 네 조건이 맞아야 한다. 

변화를 위한 열망, 

무엇을 어떻게 할 것인가에 대한 지식, 

지지적 환경, 

변화를 수용하는 포상.

In this regard, four conditions need to be met: a desire to change, the knowledge of what to do and how to do it, a supportive work environment and reward for embracing change


모든 FD프로그램은 변화관리원칙에 기반한 최선의 practice를 해야 한다.

Any faculty development programme should therefore conform to best practice regarding change management principles (Kirkpatrick 1994; Gale & Grant 1997; Bascia & Hargreaves 2000; Bland et al. 2000).


적절한 태도와 행동과 롤모델을 통해서, faculty developer는 change agent로서의 역할을 할 수 있다.

Through appropriate attitudes and behaviour and role modeling, faculty developers have the potential to act as change agents.



책임있는 행동으로서 FD Faculty development as accountable practice

FD가 좀더 현실에 기반을 둔 접근법을 따르기 위해서는, 진행되고 있는 많은 프로그램들에 대한 적절한 평가와 보고가 중요하다.

If faculty development practice is to promote a more grounded approach, the myriad of initiatives underway across the globe should be appropriately evaluated and reported


평가를 더 잘 해야한다는 오래된 요구에도 불구하고, 최근의 보고를 보면 이런 측면에서의 질적 데이터가 여전히 부족하다. 시간, 자금, 인력이 부족한 것이 그 이유로 꼽힌다.

Despite long-standing calls for better evaluation of practice, recent reviews still lament a lack of quality data in this regard (Prebble et al. 2004; Steinert et al. 2006). Lack of time, money and staff have been most frequently cited as factors preventing systematic evaluation of faculty development (Kreber & Brook 2001).


이러한 측면에서 두 개의 유용한 프레임워크가 있다.

Two useful frameworks relating to accountable practice are provided by Gray and Radloff (2006) and Otto et al. (2006).

In Gray and Radloff’s (2006) framework for quality management in academic development in higher education, change is viewed as faculty development moving from remediation to transformation of practice. Quality management spans faculty development from the perspective of the academic developer to that of institutional management. Otto et al. (2006) describe the application of the programme logic model (borrowed from the Kellogg Foundation) to measure the contribution of faculty affairs and development offices to the recruitment, retention and development of a medical school’s faculty. These documents are well worth reading.



FD의 순응성 Adaptability of faculty development.

개개인의 교수들이 조직적 차원과 사회적 요구에 맞게 발전하기 위해서는 FD활동은 그에 맞춰 바뀌어야 한다.

As the roles and responsibilities of individual faculty members continue to evolve in terms of institutional and societal needs, faculty development activities must be modified accordingly.





FD를 다듬기

Tailoring faculty development


FD의 단계

Levels of faculty development

(1) 새로운 staff member를 조직 문화로 끌어들이기

(2) 조직의 중요한 사건(새로운 평가법 도입 등)에 따른 별개의 기술을 개발하기

(3) 교육의 Professionalization 

(4) Educational scholarship의 개발

(5) Educational leadership의 개발 


(1) orienting new staff members into the academic culture of the institution;

(2) developing discrete skills, which may be precipitated by a key event in the life of an institution, such as the implementation of new assessment methods or online learning; 

(3) professionalizing teaching, by enhancing and extending the educational practice of academics in different

disciplines; 

(4) developing educational scholarship, by supporting individuals who will extend the field of medical education research; and    

(5) developing educational leadership, by supporting faculty members who wish to become policy-makers, chairs of educational committees or deans of faculty.


Benor의 2020 vision으로부터 위의 레벨을 가져왔다. 

We have adapted these levels from Benor’s (2000) 2020 vision of multiphasic faculty development and teacher accreditation, in which he proposed four phases of staff development


모든 교수들은 일반적인 교육 기술을 가지고 있어야 하고, 임상 교수들은 좀 더 구체적인 기술들을 가져야 한다.

All teachers would also require a repertoire of generic teaching skills (e.g. teaching in small groups), while clinical teachers need more specific skills (e.g. teaching ethically with patients or supervising residents).


Carroll은 Levinson 등의 묘사를 활용하여 FD프로그램은 개개인의 transition point(새로 임용된, 승진을 앞둔, 테뉴어를 앞둔, 집행부를 맡은, 정년을 앞둔) 에 있는 교수들을 타겟으로 해야 한다고 제안하였다.

Using Levinson et al.’s (1978) description of life as a series of transitions and plateaus at different stages in academic life, Carroll (1993) suggested that faculty development programmes should be aimed at individual faculty members at transition points (which may be regarded as phases) in their career, such as initial appointment, promotion, tenure, assumption of supervisory or leadership duties and, finally retirement.


FD의 현 상태를 고려하면, 대부분의 교수들은 아마도 level 1이나 level 2에 해당하는 훈련만 받고 있을 것이다. 국제적 표준을 따르라는 압박이 세지고 인증기관들이 professional teaching requirement를 도입함에 따라서 모든 교수들은 최소 level 3에 도달해야 한다.

Considering the global status quo in faculty development, most faculty members probably receive Level 1 and possibly Level 2 training only (Table 5). As the pressure to implement global standards gains momentum and as accreditation bodies implement professional teaching requirements, it may come to pass that all teachers would be expected to attain Level 3 as a minimum requirement. 


일부 대학들은 의학교육을 전공하는 대학원생들을 educational researcher가 되게 하거나 leader로 키우고자 할 것이다(level 4). 그러나 개발도상국과 같이 자원이 풍족하지 않은 조직에서는 level 2를 달성하는 것 조차 어려울 수 있다. FAIMER의 역할은 아프리카, 아시아, 남아메리카에 의학교육자들의 집단을 키워내서 이 지역에 역량을 키울 수 있도록 기여하는 것이다.

Some academics may choose or be encouraged to undertake post-graduate studies in medical education to become educational researchers and perhaps leaders and administrators (Level 4). It should, however, be borne in mind that for under-resourced institutions, as is the case in many developing countries, achieving Level 2 would be difficult. FAIMER’s role in creating a cadre of medical educators in Africa, Asia and South America will contribute greatly to developing this capacity in these regions.






단기과정 vs 지속과정 

Short courses vs. ongoing faculty development


단기 코스는 행동이나 교육행동을 바꾸는데 한계가 있어 보인다.

it would appear that short training courses (e.g. one-off seminars, workshops) have a limited impact on changing teaching behaviour or practice (Prebble et al. 2004).


단기 코스는 낮은 비용으로 다수의 그룹에 정보를 알리는데 효과가 있어서 FD에서 많이 사용되어왔지만, 조직의 요구에 바로 들어맞는 '시기에 딱 맞는' 훈련을 위해서도 가치가 있다.

Short courses have been used extensively in faculty development as they are cost-effective for disseminating information to large groups. Short courses should also valuable for ‘just-in-time’ training, which may dovetail with institutional needs,


지속적인 FD가 필요하다는 연구 결과가 축적되고 있다.

While the evidence leading to such a conclusion is currently insufficient, the gradual accumulation of research data suggests that for sustainable faculty development, such interventions may be necessary (Prebble et al. 2004; Steinert et al. 2006).


지속적인 프로그램은 certification이나 accreditation과도 연관이 되어서 개인적인 요구 뿐만 아니라 학문적, 기관 차원의 요구에도 잘 맞는다.

Continuous programmes may also lead to certification or accreditation, which may meet both the personal and professional needs of individual faculty members as well as those of the discipline and the institution.








 2008;30(6):555-84. doi: 10.1080/01421590802109834.

Faculty developmentyesterdaytoday and tomorrow.

Abstract

Medical education has evolved to become a discipline in its own right. With demands on medical faculties to be socially responsible and accountable, there is now increasing pressure for the professionalisation of teaching practice. Developing a cadre of professional and competent teachers, educators, researchers and leaders for their new roles and responsibilities in medical education requires faculty developmentFaculty development is, however, not an easy task. It requires supportive institutional leadership, appropriate resource allocation and recognition for teaching excellence. This guide is designed to assist those charged with preparing faculty for their many new roles in teaching and education in both medical and allied health science education. It provides a historical perspective of faculty development and draws on the medical, health science and higher education literature to provide a number of frameworks that may be useful for designing tailored faculty development programmes. These frameworks can be used byfaculty developers to systematically plan, implement and evaluate their staff development programmes. This guide concludes with some of the major trends and driving forces in medical education that we believe will shape future faculty development.

PMID:
 
18677659
 
[PubMed - indexed for MEDLINE]


AMEE GUIDE NO 36

Faculty development: Yesterday, today and tomorrow

MICHELLE MCLEAN1, FRANCOIS CILLIERS2 & JACQUELINE M. VAN WYK3

1University of the United Arab Emirates, 2University of Stellenbosch, South Africa, 3University of KwaZulu-Natal, South Africa


Abstract

의학교육은 그 자체가 하나의 학문으로서 진호하였다. Medical faculty에게 요구되는 사회적 책무와 함께 가르치는 일에 대해서도 professionalization의 압박이 커지고 있다. 프로페셔널하고 역량있는 선생, 교육자, 연구자, 리더를 키우기 위해서는 교수개발(faculty development, FD)가 필요하다. 그러나 FD는 쉬운 일이 아디나. 조직 차원에서의 지지가 필요하고, 적절한 자원의 배분과 우수한 교육자를 인정해주는 것이 필요하다.

Medical education has evolved to become a discipline in its own right. With demands on medical faculties to be socially responsible and accountable, there is now increasing pressure for the professionalisation of teaching practice. Developing a cadre of professional and competent teachers, educators, researchers and leaders for their new roles and responsibilities in medical education requires faculty development. Faculty development is, however, not an easy task. It requires supportive institutional leadership, appropriate resource allocation and recognition for teaching excellence.


이 가이드는 의학분야 뿐만 아니라 관련된 보건분야를 막라하여 교육에 대한 교수의 새로운 역할을 위한 FD를 담당하고 있는 사람들을 위해 만들어졌다. FD 개발의 역사적 관점을 보여주고 FD 프로그램을 만들기 위해서 도움이 될 만한 프레임워크를 제공하고자 했다. 이 프레임워크는 FD 담당자들이 계획을 세우고, 도입하고, 평가하는데 도움을 줄 것이다.

This guide is designed to assist those charged with preparing faculty for their many new roles in teaching and education in both medical and allied health science education. It provides a historical perspective of faculty development and draws on the medical, health science and higher education literature to provide a number of frameworks that may be useful for designing tailored faculty development programmes. These frameworks can be used by faculty developers to systematically plan, implement and evaluate their staff development programmes.


마지막으로 이 가이드는 미래 FD를 이끌어나갈 주요 트렌드와 원동력을 짚어보았다.

This guide concludes with some of the major trends and driving forces in medical education that we believe will shape future faculty development.









FD를 이끄는 원동력은 무엇인가?

What drives faculty development?


Gruppen 등이 세 가지의 주된 원동력을 밝혔으며, 다른 몇 가지의 내적/외적 요인들이 있다.

While Gruppen et al. (2006) have identified three main driving forces (public accountability, the changing nature of health care delivery and the need to sustain academic vitality) of faculty development, several others, both internal and external, also warrant consideration.


내적 요인

A. Internal factors


조직 문화의 사회화 Socialization into the institutional culture.



교육을 위한 준비 Preparation for teaching


대부분의 의과대학 교수들이 교육에 대해서 훈련을 받거나 준비과정을 거친 적이 거의 없는 것이 사실이다.

It would be true to say that most medical academics have received little or no training or preparation for their teaching responsibilities.


효과적이고 모범적인 교사, 교육자가 되는 과정은 발달과정과 같다. 한 사람이 어떻게 교육에 접근하는가는 교육/학습에 어떠한 개념을 가지고 있는지를 반영한다.

We believe that becoming an effective and exemplary teacher and then an educator is a developmental process (Riley 1993; Higgs & McAllister 2007a,b). It is generally accepted that one’s approach to teaching reflects one’s conception of teaching and learning (Trigwell 1995; Kember 1997; Prosser & Trigwell 1997; Lueddeke 2003; Richardson 2005; Prebble et al. 2004).


그 개념의 범위는 'reproductive', 즉 지식을 전달하는 것으로부터 'transformative' 즉 가르친다는 것은 인지적 측면 뿐만 아니라 정서적(affective) 측면의 변화까지 일으킨다는 것 까지 넓다. 가르쳐보는 경험만으로 transformative 라는 개념을 익히게 된다는 근거는 거의 없기 때문에 교수들이 교육을 더 잘 하도록 하려면 기관적 차원에서 이러한 개념을 가르쳐주고 지원하는 것이 필요하다. 

Conceptions range from reproductive, in which teaching is perceived as knowledge transmission, to a transformative conception in which teaching is perceived as fostering not only cognitive but also affective change in learners. As there is little evidence suggesting that teaching experience alone promotes the adoption of transformative conceptions (Norton et al. 2005), it is becoming imperative that institutions invest in and support their teaching faculty in transforming their conceptions, which should then improve their teaching practice. 


'교육'과 관련한 커리어를 밟는 사람들은 다음과 같은 논리적 과정을 거치게 된다. 

"Teacher => Scholarly teacher => Educational scholar/Educational leader."

For individuals who choose a ‘teaching’ career path (i.e. personal development), this professional development can be followed through to its logical conclusion: from teacher, to scholarly teacher, to educational scholar (Cohen et al. 2005; Fincher & Work 2006) or perhaps educational leader (Eitel et al. 2000; Steinert et al. 2003; Rogers 2005; Cohen et al. 2005).


지원을 해주기 위해서는 교수들에게 조언을 해주고 피드백을 줘야 한다. 세 가지 모델이 있다.

To provide support, advice and feedback for teachers to improve their practice, Weimer and Lenze (1997) describe three models:


      • The professional service model, in which a consultant provides organizational or technical support.
      • The counselling model, in which a consultant assists teachers to seek solutions to their own problems and challenges.
      • The collegial model, in which two peers provide mutual guidance.


이 세가지 모델을 조합해서 활용하는 것이 효과적일 것이다.

It is likely that a combination of these models will be effective, as each caters for different needs.


멘토링은 professional inquiry의 문화를 만들어서 새롭게 들어온 사람들이 두려워하지 않아도 되는 환경을 조성하고, 협력적 네트워크를 조성하고, 진로개발을 도와주며, 의미있는 academic encounter를 권장해준다.

Mentoring, through the creation of a culture of professional inquiry, may foster a nonthreatening environment for socializing newcomers, promoting collaborative networks, developing career paths and encouraging meaningful academic encounters (Pololi et al. 2002; Steinert 2005; Ramani 2006).


더 국제적인 관점에서 FAIMER의 성공은 멘토링 프로그램을 통해 국제적 네트워크와 협력 고리를 만들었기 때문에 가능한 것이었기도 한다.

In a more global context, part of the success of the Foundation for the Advancement of International Medical Education and Research (FAIMER) in terms of establishing international networks and collaborative links rests with its mentoring programme (Burdick et al. 2006).



학문적 활력 유지 Sustaining academic vitality


교수들 사이에 스트레스와 burnout은 흔한 일이다.

Stress and burnout amongst medical teachers is common (Harden 1999).


academic vitality를 증진시키기 위해서는 적절한 FD프로그램이 적절한 보상/인센티브와 연계되어야 한다.

To promote academic vitality, appropriate faculty development programmes linked to rewards and incentives would assist in retaining teachers, clinicians, researchers and administrators (Bland & Stritter 1988; Hitchcock et al. 1993; Wilkerson & Irby 1998; Bligh 2005; Gruppen et al. 2006).



외적 요인

B. External factors


사회적 요구에 부응 Meeting society’s needs


의학교육의 궁극적 목표가 의료전달을 향상시키는 것이기 때문에, 사회의 보건의료에 대한 요구는 지속적으로 변화한다.

While the overarching goal of medical education is to improve health care delivery (GMC 1993, Boelen 1999), the health care needs of society are constantly changing.


GMC에서는 다음과 같이 기술하고 있다.

GMC (1993) document: 


의과학과 의학기술의 발전속도를 감안하면, 미래의 의사들은 지금은 전혀 본적도 없는 지식과 기술을 활용하게 될 것이다. 우리는 발견되지 않은 과학을 가르칠 수도 없을 뿐더러 미래를 예측할 수도 없다. 하지만 현재 의학기술과 의과학의 일부는 분명 살아남아 미래 의료의 근간을 이룰 것이다. 나머지에 대해서 우리가 할 수 있는 것은 의사들이 적응하고 변화할 수 있도록, 새로운 아이디어와 기술의 발전을 포용할 수 있도록, 전문직으로서의 평생에 걸친 학습태도를 지속할 수 있도록 가르치는 것 뿐이다.

Given the pace at which the horizons of medical science and technology expand, we can be certain that the doctors of tomorrow will be applying knowledge and deploying skills which are at present unforeseen . . . We cannot teach science that is as yet undiscovered nor can we forecast its future implications. But some of the present day art and science of medicine is fundamental to its practice and will certainly endure . . . For the rest, we can best strive to educate doctors capable of adaptation and change, with minds that can encompass new ideas and developments and with attitudes to learning that inspire the continuation of the educational process throughout professional life [p. 4].


개개 의대교수들에게는 막중한 책무와 사회적 책임이 따른다.

A considerable onus and social responsibility therefore rests with individual medical faculties



교육의 전문직화과 교육에 대한 책 Accountability and the professionalization of teaching practice


삼차 교육에 있어서 책무는 피할 수 없는 현실이다. Brown이 약 십년 전에 지적한 것처럼 '교육에 대한 책임은 대학만 가지고 있는 것은 아니며, 대학이 하는 역할 중에서 학생/직원/기타 이해관계자가 관심을 두는 가장 대중적인 역할이다.

Accountability is a fact of life in tertiary education. As Brown (2000) pointed out almost a decade ago, ‘teaching is rarely the only occupation of an academic . . .. And yet it is the most public aspect of the work, in that students, employers and other stakeholders often focus on that part of the academic’s role’.


인증에 대한 여러 문헌들에서는 '측정가능한 성과'에 대해서 교수들이 가르치는 것을 'professionalize'해야 할 필요가 있으며, 이에 대해 보상받아야 할 것을 주장하고 있다. HPCSA에서는 '의과대학은 교육의 효과성에 대한 기준을 마련해야 한다. 의학교육에 대한 qualification이 승진에 반영되어야 한다'라고 하고 있다.

Measurable outcomes in many accreditation documents increasingly refer to the need for teachers to professionalise their practice, for which they should be rewarded (e.g. World Federation for Medical Education 2003, HPCSA 2004) – ‘Medical schools should establish effectiveness-related standards of performance for all teaching staff. . .. Qualifications in medical education should be recognized for promotion’ (HPCSA 2004).


Box3에서 다루고 있는 역량은 삼차교육에 종사하는 모든 교수들이 갖추어야 할 일반적인 기술과 능력을 평가하는 좋은 시작점이다.

(Box 3). Such competencies might be a good starting point for reflecting on generic skills and abilities of all teachers in tertiary education, including medical education.





인증에 대한 압박은 국경을 넘어 확장되고 있다.

the pressure for accreditation now extends beyond a country’s borders (Hamilton 2000; Lilley & Harden 2003; Stern et al. 2003; 2005; Karle 2006).


한 예로서 WFME는 staff development의 기본 기준을 다음과 같이 말하고 있다.

As an example, the WFME (2003) requires that as a basic standard of staff development


의과대학은 교육/연구/진료 능력에 대해서 균형잡힌 정책을 가져야 하며, 칭찬할 만한 업적에 대해서는 충분히 인정해줘야 한다.

‘the medical school must have a staff policy which addresses a balance of capacity for teaching, research and service functions, and ensures recognition of meritorious academic activities, with appropriate emphasis on both research attainment and teaching qualifications.’


의과대학 학생들을 의학의 지식과 기술을 가르치는 것 외에도 의과대학 졸업생은 가르칠 수 있는 능력을 지녀야 한다.

In addition to training medical students in the art and science of medicine, our medical graduates are also expected to teach.


미국 의과대학 학생연합(AMSA)는 Mount Sinai School of Medicine과 협동을 통해서 'Training Tomorrow's Teachers Today'라는 프로그램을 만들어서 학생들의 임상교육능력과 학문적 리더십 스킬을 높이고자 했다.

The American Medical Students’ Association, recognizing this omission, has proactively, in collaboration with Mount Sinai School of Medicine, designed the ‘Training Tomorrow’s Teachers Today’ programme to enhance students’ clinical teaching and academic leadership skills.



FD의 장애물은 무엇인가?

What are the barriers to faculty development?


Skeff등은 세 가지의 주된 장애물을 언급했다.

For Skeff et al. (1997b), three major barriers impact on faculty development: lack of institutional support, misconceptions and attitudes of teachers and the relative paucity of research on what constitutes effective teaching improvement.



학교 차원의 지원 부족

Lack of institutional support for faculty development


조직의 문화 Institutional culture

조직의 문화는 FD에 담겨지는 가치에 영향을 준다. 조직 내, 학문 내의 다양한 맥락적 상황적 요소가 이러한 mismatch에 영향을 준다.

The institutional culture affects the value ascribed to faculty development. A number of contextual and situational factors (e.g. leadership; appropriate rewards) within institutions and even within different disciplines may contribute to this mismatch, including the value assigned to teaching (Healey 2000; Knight & Trowler 2000; Richardson 2005; Norton et al. 2005).


연구가 승진의 'gold standard'인 기관에서 FD에 대한 참여가 떨어지고, FD가 하향식 접근법으로 여겨지는 상황에서도 비슷한 일이 생긴다. 

At institutions where research remains the ‘gold standard’ for appointment and promotion, participation in faculty development may require negotiation. A similar situation could arise if faculty development is perceived as a political ‘top-down’ approach, with little or no personal or professional reward (Hill & Stephens 2004).


Boyer’s (1990) identification of four scholarships, followed by Glassick et al. (1997) criteria for measuring these scholarships, has provided a template for recognizing and rewarding excellence and scholarly activities in all spheres of academia.


교수들의 태도와 오해 Teachers’ attitudes and misconceptions

교수들의 태도와 오해는 FD에 참여할 가능성을 낮춘다.

Teachers’ attitudes and misconceptions about their teaching reduce the likelihood of participation in faculty development (Skeff et al. 1997b).


FD의 장기적 효과에 대한 연구 부족 Paucity of research on long-term benefits of faculty development. 

앞서 언급된 것처럼 의미있는 혹은 장기적인 효과는 연구된 바가 부족하다. 

As mentioned earlier, meaningful or longterm outcomes of faculty development have generally not been measured or documented, despite several decades of research on and reported success of faculty development programmes (Skeff et al. 1997a, b; Guskey 2003; Prebble et al. 2004; Steinert 2005; Steinert et al. 2006).




FD가 진짜로 중요한가?

Does faculty development really matter?


만약 teaching이 student learning에 영향을 준다는 교육의 기본 전데를 받아들인다면, 교육에 대한 지식/교육 업무를 향상시킴으로서 학생에게 이득이 돌아갈 것이다. FD에 관한 문헌은 많지만 teaching practice에 변화가 있었는지, student learning이 향상되었는지에 관한 의미있는 결과를 보고한 연구는 적다.

If we accept the fundamental educational premise that teaching influences student learning (Lueddeke 2003; Prebble et al. 2004), then by improving educational knowledge and teaching practice, students should benefit. Despite a wealth of literature describing faculty development programmes in medical, health sciences and higher education, few studies document meaningful outcomes such as sustained changes in teaching practice or improved student learning (Skeff et al. 1997a; Prebble et al. 2004; Steinert et al. 2006; Knight et al. 2007; Williams et al. 2007).


이러한 측면에서 Prebble 등은 FD의 틀(frame)에 영향을 주는 네 개의 주된 요소를 주장했다.

In this regard, Prebble et al. (2004) identified four guiding influences, which can be used to frame faculty development. 


These include:

(1) attributes and elements that contribute to good teaching practice,

(2) teachers’ beliefs and conceptions of teaching and learning that may positively influence student outcomes,

(3) a range of conceptual models of good teaching, and

(4) learners’ perceptions of what constitutes quality teaching.


1. 좋은 교육행동에 영향을 주는 요소들

1. Teaching elements and attributes contributing to good teaching practice

학생들의 학습을 촉진하는 교육의 특질을 나열하는 것이 가능하다.

It has been possible to identify teaching attributes (from an extensive list) that promote student learning, such as those proposed by Cohen (1981) and Ramsden et al. (1995) (Box 4).


2. 교사가 교육에 대해 가지고 있는 믿음

2. Teachers’ beliefs about teaching.
     교육과 학습에 대한 개념을 제대로 이해하고 있지 않으면, 교사들은 교육을 지식을 전달하는 것으로 보기 쉽다.

Without an awareness of their teaching and learning conceptions, teachers generally view their task as imparting knowledge.


3. 교수-학습에 대한 개념 모델

3. A conceptual model of teaching and learning. 


학생 중심의 학습 접근법을 가지고 있는 교사들은...

In their view, teachers who adopt a ‘student-centred learning approach’ to teaching

(1) 학생의 학습의 관점에서 도달하고자 하는 것이 무엇인지에 대한 일관되고 분명한 관점을 가지고 있다.

(1) develop a coherent and articulated view of what they are trying to achieve in terms of student learning, and how they can achieve this (i.e. focus on student learning). Today, learning outcomes need to reflect more than just knowledge acquisition,

(2) 학생들이 planned learning context를 인지할 수 있는 다양한 방법을 활용한다.

(2) discover the many ways in which students perceive the planned learning context (i.e. take cognisance of the learning environment), and

(3) 자신의 분명한 관점을 학생들이 이해하도록 한다.

(3) ensure that students understand the articulated view (i.e. align teaching and learning).


따라서 FD의 주된 기능은 교수들이 자신의 teaching practice를 학생의 needs와 align시키는 것이다.

A major function of faculty development should therefore be about making teachers aware of aligning their teaching practice with the needs of students.


4. 가르침에 대한 학생의 인식

4. Students’ conceptions of teaching

학생들이 자신들의 학습경험에 대해서 평가하도록 하는 것은 흔히 사용되는 방법이다. 많은 사람들이 믿는 바와 달리 학생들의 평가는 적절하게 사용되면 일반적으로 신뢰도도 높고, 편향이 적어서 피드백을 주기에 유용하다. 학생들의 평가는 FD의 좋은 시작점이다.

Asking students to assess the quality of their learning experiences is commonly used by institutions to guide faculty development. Contrary to what many academics may believe, student evaluation, provided it is used appropriately, is useful, generally reliable and is relatively unbiased in terms of providing feedback to individual faculty and administrators (Dunkin 1997). Student evaluation has been recommended as a good starting point for faculty development (Hitchcock et al. 1993; Trigwell 1995).






의학교육실(Medical Education Units Offices)이 FD에 기여한 바는 무엇인가?

What contributions have medical education units offices made to faculty development?


최조의 의학교육실(offices of medical education)은 1950년대 후반부터 1960년대 초반 사이에 세워졌다. 그들의 주된 업무는 기본적으로 의학교육 연구였다. 이후 1970년대 이후에 의학교육실/교실(medical education units/departments)들은 학부 의학교육을 지원하게 되었으나 교수들에게 새롭게 요구되기 시작한 책무에도 반응하고 있었다.

Although the first offices of medical education were set up in the late 1950s and early 1960s, their focus, according to Davis et al. (2005), was primarily medical education research. Later, in the 1970s, medical education units/departments were established to support undergraduate medical programmes, but probably also in response to the evolving responsibilities (and hence needs) of teachers (Tables 1 and 2). 


1980년대와 1990년대에 PBL이 널리 퍼지면서 활동 영역이 더넓어졌고, 지난 20년간 FD의 초점은 개개 교수로부터 학과/조직의 요구에 이르게 되었다. 의학교육학과는 많은 의과대학에서 중요한 역할을 하게 되었다. 1993년 이전에는 의과대학에서 교육 전문가들을 거의 키우지 않았지만, 이제는 사회의 변화하는 요구에 맞춰서 새로운 기술을 익히고 학문적 협회를 발달시키는 역할을 하고 있다. 

The widespread adoption of problem-based learning (PBL) in the late 1980s and 1990s then sparked a flurry of activity, resulting in education units appearing in many medical faculties. Over the past two decades, with the shift in focus of faculty development from the individual teacher to departments and institutional needs (Bland & Schmitz 1988; Benor 2000; Hill & Stephens 2004), medical education departments have become integral in a number of medical colleges. Educational specialists, a rare breed at medical schools prior to 1993 (Leinster 2003), but now highly sought after, are responsible for reskilling and developing the academic fraternity in the light of society’s changing health care needs. For a comprehensive discussion on the development and roles of a medical education unit, readers should consult AMEE Educational Guide No. 28 (Davis et al. 2005).









 2008;30(6):555-84. doi: 10.1080/01421590802109834.

Faculty developmentyesterdaytoday and tomorrow.

Abstract

Medical education has evolved to become a discipline in its own right. With demands on medical faculties to be socially responsible and accountable, there is now increasing pressure for the professionalisation of teaching practice. Developing a cadre of professional and competent teachers, educators, researchers and leaders for their new roles and responsibilities in medical education requires faculty developmentFaculty development is, however, not an easy task. It requires supportive institutional leadership, appropriate resource allocation and recognition for teaching excellence. This guide is designed to assist those charged with preparing faculty for their many new roles in teaching and education in both medical and allied health science education. It provides a historical perspective of faculty development and draws on the medical, health science and higher education literature to provide a number of frameworks that may be useful for designing tailored faculty development programmes. These frameworks can be used byfaculty developers to systematically plan, implement and evaluate their staff development programmes. This guide concludes with some of the major trends and driving forces in medical education that we believe will shape future faculty development.

PMID:
 
18677659
 
[PubMed - indexed for MEDLINE]






AMEE GUIDE NO 36

Faculty development: Yesterday, today and tomorrow

MICHELLE MCLEAN1, FRANCOIS CILLIERS2 & JACQUELINE M. VAN WYK3

1University of the United Arab Emirates, 2University of Stellenbosch, South Africa, 3University of KwaZulu-Natal, South Africa


Abstract

의학교육은 그 자체가 하나의 학문으로서 진호하였다. Medical faculty에게 요구되는 사회적 책무와 함께 가르치는 일에 대해서도 professionalization의 압박이 커지고 있다. 프로페셔널하고 역량있는 선생, 교육자, 연구자, 리더를 키우기 위해서는 교수개발(faculty development, FD)가 필요하다. 그러나 FD는 쉬운 일이 아디나. 조직 차원에서의 지지가 필요하고, 적절한 자원의 배분과 우수한 교육자를 인정해주는 것이 필요하다.

Medical education has evolved to become a discipline in its own right. With demands on medical faculties to be socially responsible and accountable, there is now increasing pressure for the professionalisation of teaching practice. Developing a cadre of professional and competent teachers, educators, researchers and leaders for their new roles and responsibilities in medical education requires faculty development. Faculty development is, however, not an easy task. It requires supportive institutional leadership, appropriate resource allocation and recognition for teaching excellence.


이 가이드는 의학분야 뿐만 아니라 관련된 보건분야를 막라하여 교육에 대한 교수의 새로운 역할을 위한 FD를 담당하고 있는 사람들을 위해 만들어졌다. FD 개발의 역사적 관점을 보여주고 FD 프로그램을 만들기 위해서 도움이 될 만한 프레임워크를 제공하고자 했다. 이 프레임워크는 FD 담당자들이 계획을 세우고, 도입하고, 평가하는데 도움을 줄 것이다.

This guide is designed to assist those charged with preparing faculty for their many new roles in teaching and education in both medical and allied health science education. It provides a historical perspective of faculty development and draws on the medical, health science and higher education literature to provide a number of frameworks that may be useful for designing tailored faculty development programmes. These frameworks can be used by faculty developers to systematically plan, implement and evaluate their staff development programmes.


마지막으로 이 가이드는 미래 FD를 이끌어나갈 주요 트렌드와 원동력을 짚어보았다.

This guide concludes with some of the major trends and driving forces in medical education that we believe will shape future faculty development.








Introduction


한 때, 의과대학을 졸업한 사람은 누구나 가르칠 수 있는 능력이 있다고 생각되던 때가 있었다. 그러나 점차 가르치는 것은 타고난 재능이 아님이 명백해졌고, 가르치는 내용 외에도 '가르침'이라는 것은 어떤 '과정'으로서 '기술'이 필요하고 학문적 지원이 필요함이 확실해졌다.

At one time, anyone who graduated from medical school was considered capable of teaching. It became apparent, however, that teaching was not an innate gift. Besides content, teaching also involved ‘process’, and to develop the ‘art’ of teaching, academics required support (Benor 2000).


초기의 teacher training이라는 것의 목적은 교수들의 '가르치는 능력'을 키워주기 위한 것이었다.

The purpose of this early ‘teacher training’ was generally to prepare academic faculty members for teaching,


연구와 행정이라는 반복되는 레파토리와 함께 FD의 개념은 확장되어서 한 조직의 학문적 기반을 확장하는 것이라는 의미를 담게 되었다.

As an academic’s repertoire of responsibilities evolved to include research and administration, the concept of faculty development expanded, largely to strengthen the academic base of institutions (Bland & Stritter 1988; Hitchcock et al. 1993; Wilkerson & Irby 1998; Steinert 2000, 2005; Steinert et al. 2003; Harris et al. 2007).


Sheets와 Schwenk는 FD의 정의를 다음과 같이 내렸다. "교수들로 하여금, 그들이 자기 학과나 레지던트 프로그램을 위해서 어떤 수행을 하는데 필수적이라고 여겨지는 영역의 지식과 술기를 향상시키기 위한 계획된 활동"

Sheets and Schwenk (1990) capture this in their definition of faculty development: ‘‘Any planned activity to improve an individual’s knowledge and skills in areas considered essential to the performance of a faculty member in a department or a residency programme (e.g. teaching skills, administrative skills, research skills, clinical skills)’’. 


'학생의 학습'의 근간을 이루는 이론들이 staff development가 진화하는데 중요한 역할을 했다.

The theories underpinning student learning have played a major role in the evolution of staff development (Table 2).


1970년대에는 '좋은 선생'을 목표로 하였고, 80년대와 90년대에는 좀 더 학생중심이 되어서 학습의 촉진자가 목적이었다. 21세기에는 성과바탕교육이 등장하였다.

in the 1970s, faculty development aimed to develop the attributes and competencies of the ‘good’ teacher: someone who could use various teaching aids, reinforce important concepts and communicate effectively (Wilkerson & Irby 1998). In the 80s and 90s, reform to more student-centred and self-directed learning required a metamorphosis of the teacher, from a didactic conveyer of knowledge to a facilitator of student learning (Entwistle & Ramsden 1983; Knowles 1988). To make this transition, teachers needed new skills, which required training. The dawning of the new millennium brought ‘outcomes-based education’, with competencies being identified for graduating medical students (Harden et al. 1999; Carraccio et al. 2002; Simpson et al. 2002).


FD는 의대교수들의 역할이 다양해짐에 따라서 그 영역과 정의가 더 넓어졌다.

Faculty development followed suite, and the various roles of the medical teacher, from clinical expert to mentor and role model, were further expanded and defined (Harden & Crosby 2000) (Figure 1).


Hesketh 등은 three circle model을 이용하여 좋은 임상 선생님의 지능에 대해 정의한 바 있다.

Not long afterwards, Hesketh et al. (2001), using the three circle model (Harden et al. 1999), defined the intelligences of an excellent clinical teacher


'교수의 역량'은 끊임없이 재정의된다. 개개인의 교수들이 모든 영역에서 다 뛰어날 수 없기 때문에 '노동의 분할'이라는 경향이 일부 학문 영역에서 등장하기 시작했다.

the competencies of faculty members are continuously being redefined. Acknowledging that individual faculty members cannot excel in all of the recognized responsibilities, a trend of a ‘division of labour’ has emerged in some academic disciplines (Tedesco et al. 2002; Harris et al. 2007).


FD를 재정의하는데 있어서 확장되고 있는 'faculty'라는 개념을 이해할 필요가 있다.

In redefining faculty development, cognisance should be taken of the broadening concept of ‘faculty’.


오늘날의 의대생들의 선생님은 개인병원의 의사, 지역사회의 의사, 다른 보건의료직 등을 모두 포함한다. 교육 경험과 각 선생의 수준이 다르기 때문에 FD는 의대생과 졸업후 교육을 하는 사람들을 모두 포함해야 한다.

Thus, teachers of today’s medical students may now include clinicians in private practice, community preceptors as well as practitioners from other health care professions, such as physiotherapists, nurses and social workers (Eitel et al. 2000; Steinert 2005). As their teaching experience and level of teacher training will vary (Clark et al. 2004; Houston et al. 2004), faculty development should therefore include any individual involved in teaching undergraduate medical students or supervising post-graduates.







왜 가이드가 필요한가?

Why the need for a guide?


FD의 초점은 개개인의 교사에 대한 접근에서 조직적/총체적 접근쪽으로 옮겨져갔다. 어떤 사람들이 보기에 이것은  하향식의 접근법이며 개개인의 희생을 요구하는 것이다.

As a result of some of these forces, the focus of faculty development has shifted from individual teacher development to a more institutional and systematic planning approach, which some may perceive as top-down, and at the expense of individual academics (Hill & Stephens 2004).


우리는 모든 FD프로그램은 조직의 발전과 개인의 발전을 모두 추구해야 한다고 생각한다.

we believe that any faculty development programme should address both the professional (i.e. in the interest of the institution) and the personal (i.e. benefiting the individual) development of teachers.


보건 의료분야의 고등교육에 대한 문헌들에서 다양한 FD프로그램을 다루고 있다. 하지만 모든 문헌들이 그 효과성까지 기술하고 있는 것은 아니다. 평가는 종종 자기기입식의, 스스로 생각하는 이익에 대해 보고하는 수준이며, 실제 교육 현장을 모니터하고 평가되고 있지는 않아 그 효과성을 판단하기 쉽지 않다.

The medical, health sciences and higher education literature abounds with descriptions of the many and varied faculty development programmes (Wilkerson & Irby 1998; Prebble et al. 2004; Steinert et al. 2006; Skeff et al. 2007). Not always forthcoming, however, is the effectiveness (i.e. meaningful outcomes, such as improved teaching practice) of many of these interventions (Prebble et al. 2004; Steinert 2005; Otto et al. 2006; Steinert et al. 2006). Evaluation has often relied on perceived, self-reported benefits rather than monitoring and assessment of actual teaching practice, making it difficult to judge the effectiveness of faculty development.


여기서는 무엇을 다룰 것인가?

What will be covered in this guide?


여기서는 '가르치는' 영역에 대해서만 다룰 것이다.

Direction will therefore be provided in terms of the ‘teaching’ aspect only..


누가 이 가이드를 읽어야 하는가?

Who should read this guide?


이 가이드는 Faculty developer들을 돕기 위해서 만들어졌으며 우리는 이들이 이 가이드를 유사한 영역인 interprofessional learning에까지 적용하기를 기대한다.

This guide aims to assist faculty developers who have been tasked with supporting teachers and supervisors of medical students. We hope that faculty developers in allied health professions will also find the guide useful as similar principles will apply, particularly in the light of an increasing emphasis on interprofessional learning (Parsell & Bligh 1999; Bligh et al. 2001).


이 가이드에 담겨있는 가정과 원칙은 무엇인가?

What assumptions and principles are embodied in this guide?



이 가이드에 담긴 기본 가정은 FD는 의학교육의 궁극적인 목적을 달성하기 위한 것이라는 점이다. 

The primary assumption embodied in this guide is that faculty development must ultimately serve the overarching goals of medical education i.e. improving patient and community care by training and educating quality medical practitioners.


그 외의 다른 가정들은 아래와 같다.

Several other assumptions are embodied in this guide: 

의학교육은 의학교육자와 각 전공과목 교육자들에 의해 감독받는 하나의 전문직종이다.

. Medical education is a profession in its own right, overseen by specialist educators and medical educators.

여기서 사용하는 teacher와 educator는 professional development의 서로 다른 레벨을 의미한다.

. The use of ‘teacher’ and ‘educator’ in this guide refers to different levels of professional development.

Educator는 조금 더 학문적인 것으로서 더 높은 medical education qualification의 더 높은 단계이고, 의학교육연구에도 관여하는 것을 말한다.

An ‘educator’, on the other hand, is more scholarly, and will often have a higher or medical education qualification and is involved in medical education research.

FD은 다양한 목적을 위해서 필요하기 때문에 FD는 다양한 레벨에 대해서 계획되어야 한다(개인, 부서, 조직, 지역, 국가, 국제)

. Faculty development serves many purposes, ranging from individual staff development in terms of teaching, research, administration or career opportunities, to meeting the accountability needs of an institution. Faculty development should therefore be planned at different levels: individual, departmental, institutional, regional, national or international (Skeff et al. 1997a, b).

FD프로그램은 academic staff의 개인적 발전과 전문직 발전을 모두 촉진해야 한다.

. Faculty development programmes should promote both the personal and professional development of academic staff


21세기에 기관 수준에서의 FD에 대한 더 종합적인 정의는 아래와 같다.

A more comprehensive definition of faculty development at an institutional level in the 21st century might then read something along the lines of:


"The personal and professional development of teachers, clinicians, researchers and administrators to meet the goals, vision and mission of the institution in terms of its social and moral responsibility to the communities it serves."









 2008;30(6):555-84. doi: 10.1080/01421590802109834.

Faculty developmentyesterdaytoday and tomorrow.

Abstract

Medical education has evolved to become a discipline in its own right. With demands on medical faculties to be socially responsible and accountable, there is now increasing pressure for the professionalisation of teaching practice. Developing a cadre of professional and competent teachers, educators, researchers and leaders for their new roles and responsibilities in medical education requires faculty developmentFaculty development is, however, not an easy task. It requires supportive institutional leadership, appropriate resource allocation and recognition for teaching excellence. This guide is designed to assist those charged with preparing faculty for their many new roles in teaching and education in both medical and allied health science education. It provides a historical perspective of faculty development and draws on the medical, health science and higher education literature to provide a number of frameworks that may be useful for designing tailored faculty development programmes. These frameworks can be used byfaculty developers to systematically plan, implement and evaluate their staff development programmes. This guide concludes with some of the major trends and driving forces in medical education that we believe will shape future faculty development.

PMID:
 
18677659
 
[PubMed - indexed for MEDLINE]














Kirkpatrick의 4단계 평가 모델을 활용한 이종욱-서울 프로젝트 1차년도 성과 평가

서울대학교 의과대학 의학교육학교실

이승희, 신좌섭, 김도환, 김은정, 황진영, 윤현배





2011년 시작된 '이종욱-서울 프로젝트'는 라오스 국립의대 교수진에게 의학 및 의료기술 교육을 제공하는 사업이다.  이 프로젝트는 한국의 보건의료 발전 모델을 개발도상국에 적용하는 중요한 시도로 받아들여지고 있을 뿐만 아니라 유사한 원조 프로젝트가 여러 국가들로 확대되고 있다는 점에서 그 중요성을 더한다. 따라서 우리는 프로젝트 효과성을 평가하여 개선 방향을 제시하고 나아가 이종욱-서울 프로젝트의 미래 방향에 대한 기초자료로 삼고자 한다.

Purpose: The Lee Jong-Wook Seoul Project, which began in 2011, is a training program that aims to educate faculty members of Lao University of Health Sciences in medical knowledge and skills. The project has tremendous significance, attempting to apply the Korean health care developmental model to developing countries. Precise evaluation of the project outcome must be performed to enhance the effectiveness, improve the shortcomings, and adjust the future direction of the program.


교육프로그램의 성과 평가는 Kirkpatrick의 4단계 모형을 기반으로 수행되었다. 프로그램 진행 중간과 종료 시점에 지도교수와 교환교수에게 2회의 설문조사를 하였으며, 이를 바탕으로 Kirkpatrick 모형의 1단계와 2단계를 평가하였다. 3단계는 1차년도 교환교수들이 연수를 마치고 귀국 8개월 후에 라오스 현지를 방문하여 교환교수와 그들의 동료를 대상으로 다면평가를 실시하였다.

Methods: Trainers and exchange professors were asked to fill out questionnaires in the middle and at the end of the program. Eight months after its completion, an evaluation team visited Lao and interviewed each exchange professor individually. Also, 360-degree feedback was obtained from their colleagues. We analyzed the answers to the questionnaires, based on Kirkpatrick’s 4-level model.


1단계(반응) 수준의 평가에 대해서는 지도교수와 교환교수 모두 비슷한 수준의 긍정적 응답을 보였다. 2단계(학습) 수준의 평가에서는 지도교수, 교환교수 모두 지식 및 술기의 향상이 있었다는 것에는 공통적인 의견을 나타냈으나, 그 수준에 있어서는 교환교수가 스스로의 성취도를 조금 더 과대평가하는 경향이 있었다. 3단계(전이) 수준의 평가에 있어서 교환교수가 연수 프로그램에서 얻은 지식, 경험, 자료를 많이 공유하고 있다는 것을 알 수 있었다. 

Results: The trainers and exchange professors had positive reactions to the program. All participants felt that their knowledge and skills improved (in their respective fields), although the actual improvement was not extensive, according to their trainers' assessments. The 360-degree feedback demonstrated that the participants actively passed on their experience, knowledge, and skills to their colleagues on returning to work.


4단계의 평가가 이루어지지 않았고, 평가 측면에서 학업성취평가, UHS내 양적 데이터 수집, 다면평가 데이터 수집 등의 측면에서 아직 극복해야 할 난관(challenge)이 많지만 1차년도 이종욱-서울 프로젝트를 통해 교환교수들은 많은 것을 학습하고 현지에서 활용하고자 노력한다는 것을 확인할 수 있었다.

Conclusion: Although a 4-level evaluation was not conducted and despite the limitations in examining academic achievement, interviewing Lao professors, and acquiring quantitative data at Lao University of Health Sciences, this project has demonstrated its value in the development of individual professors and their colleagues.



Fig. 1 
Brief Description of the Four Levels of Kirkpatrick's Evaluation Model



Table 1 
Profile of Exchange Professors

M: Male, F: Female, UHS: University of Health Sciences.

a)Completed 6 month-training.



Table 2 
Reaction to Training Program

Data are presented as mean±SD.

a)t-test between trainers' and exchange professors' responses at final evaluation, b)Based on the assumption that the major class of the same school year average is 50 in Seoul National University College of Medicine



Table 3 
Evaluation of Knowledge at Pre-training and Post-training

Data are presented as mean±SD.

a)t-test between trainers' and exchange professors' responses at final evaluation, b)Based on the assumption that the major class of the same school year average is 50 in Seoul National University College of Medicine.



Table 4 
Changes in Behavior Related to Teaching



Table 5 
Changes in Behavior Related to Medical Practice



Table 6 
Evaluation of Training Program Management






Korean J Med Educ. 2014 Mar;26(1):41-51. Korean.
Published online 2014 March 05.  http://dx.doi.org/10.3946/kjme.2014.26.1.41 
© The Korean Society of Medical Education. All rights reserved.
Evaluation of first year outcomes of Lee Jong-Wook Seoul Project using Kirkpatrick's four-level evaluation approach

Seunghee Lee, Jwa-Seop Shin*, Do-Hwan Kim, Eun Jeong Kim, Jinyoung Hwang and Hyun Bae Yoon

Department of Medical Education, Seoul National University College of Medicine, Korea.

*Corresponding Author: Jwa-Seop Shin. Department of Medical Education, Seoul National University College of Medicine, 103 Daehak-ro, Jongno-gu, Seoul 110-799, Korea. Tel: +82.2.740.8175, Fax: +82.2.745.6373,Email: hismed1@snu.ac.kr 
Received October 17, 2013; Revised November 19, 2013; Accepted November 21, 2013.


“Genes to Society”—The Logic and Process of the New Curriculum for the Johns Hopkins University School of Medicine

Charles M. Wiener, MD, Patricia A. Thomas, MD, Elizabeth Goodspeed, MHS, David Valle, MD, and David G. Nichols, MD


Abstract

2009년 8월, 존스홉킨스 의과대학은 "유전자에서 사회로"라는 새로운 교육과정을 도입하였다. 새로운 교육과정은 건강과 질병의 맥락을 더 넓은 범위에서 바라보고, 학생들로 하여금 환자의 건강을 더 넓은, 사회/문화/정신/환경이 통합된 시스템에서 바라보도록 하는 것에 그 목적이 있다. 이러한 접근법은 환자의 표현형은 내적인 요인들과 외적인 요인들이 종합되어 나타난다는 것을 보여준다. GTS는 건강과 질병의 이분법적 접근을 거부하고, 환자를 "무증상이며 잠재적인"상태에서 "심각한 상태"까지의 연속체로 바라보도록 한다. GTS는 개인을 유전체에서 환경까지를 포괄하여 바라보는 다가오는 의학의 혁명에 발맞추어 학생들의 경험을 재조직할 필요에 의해 개발되었다. 본 논문은 목표를 설정하고, 새로운 교육과정을 개발하고, 새로운 교육건물을 만들고, 학생 생활과 교수 개발을 향상시키는 5년간의 과정을 묘사하고자 하였다.  수직적 구조와 수평적 구조를 만들었으며, 이 모든 것이 모여 GTS 교육과정을 이루었다. GTS를 도입하는 과정에서 중요한 난관들을 해결하는데 핵심적 요소들은 리더십의 지원, 교수와의 대화, 다양한 구성원의 참여, 좁은 시야의 극복, 개념과 방법을 시험하기 위한 파일럿 코스 등등이었다. GTS는 미래 의사들의 기초과학/임상 진로개발을 위한 토대이다.

In August 2009, the Johns Hopkins University School of Medicine implemented a new curriculum, “Genes to Society” (GTS), aimed at reframing the context of health and illness more broadly, to encourage students to explore the biologic properties of a patient’s health within a larger, integrated system including social, cultural, psychological, and environmental variables. This approach presents the patient’s phenotype as the sum of internal (genes, molecules, cells, and organs) and external (environment, family, and society) factors within a defined system. Unique genotypic and societal factors bring individuality and variability to the student’s attention. GTS rejects the phenotypic dichotomy of health and illness, preferring to view patients along a phenotypic continuum from “asymptomatic and latent” to “critically ill.” GTS grew out of a perceived need to reformulate the student experience to meet the oncoming revolution in medicine that recognizes individuality from the genome to the environment. This article describes the five-year planning process that included the definition of objectives, development of the new curriculum, commission of a new education building, addition of enhancements in student life and faculty development, and creation of a vertical and horizontal structure, all of which culminated in the GTS curriculum. Critical ingredients in meeting the challenges of implementing GTS were leadership support, dialogue with faculty, broad engagement of the institutional community, avoidance of tunnel vision, and the use of pilot courses to test concepts and methods. GTS can be viewed as the foundation for the scientific and clinical career development of future physicians. 



Acad Med. 2010; 85:498–506.








GTS교육과정 - 구조와 내용

The GTS Curriculum—Structure and Content


GTS교육과정은 2009년 8월 시작되었다.

The GTS curriculum began in August 2009 with a firm grounding in basic science (Chart 1).


처음 네 달의 목적은 학생들에게 의학이 자연/인문/사회과학과 상호작용하는 것임을 깨우쳐주기 위함이다.

A goal of this initial four-month period that includes the SFM, CF, and FPH courses is to heighten students’ awareness of the interaction of the natural, humanistic, and social sciences with medicine.


첫 세 개의 Foundation course를 마치고 나서 학생들은 15개월의 GTS과정을 밟게 된다.

After completion of the three foundations courses—or at a point roughly four months into year one—the students will begin a 15-month course designated the GTS course. This course will be organized by organ system, with each section of the course considered as a continuum from genes and biological systems through to the social and cultural factors that influence health (Chart 1).


GTS기간동안 각각의 기관-시스템 섹션은 핵심개념을 중심으로 분자과학부터 생물학적 시스템, 공공보건까지를 포괄하게 된다.

It is important that, throughout the GTS course, each organ-system section cover relevant core concepts extending from molecular science through biologic systems and public health.


GTS과정동안 학생들은 LAC에서 다양한 임상문제를 접하게 된다.

While they are taking the GTS course, the students will be exposed to a wide range of clinical problems in their Longitudinal Ambulatory Clerkship (LAC), which meets for half-a-day a week from the middle of the first year through most of the second year. The direct clinical and scientific exposures provided by the LAC and the GTS course will allow each of these experiences to highlight the relevance of the other to medicine.


8회의 1주 intersession이 있어서 임상의학과 기초과학의 시너지를 다시 한 번 강조하게 된다.

A second strategy for emphasizing and exploiting synergies between clinical medicine and basic science involves a series of eight 1-week intersessions, interspersed throughout the GTS course in years one and two, that use clinical themes (e.g., patient safety, pain management, and health care disparities) to explore scientific content and social consequences (including safety, cost, ethics, and policy).


SC는 일련의 세미나 과정으로서 학생은 이 시기에 GTS교육과정의 특정 요소에 대해서 연구를 하게 된다.

Scholarly Concentration (SC) series of seminars and mentored scholarship opportunities. The SC course allows the student to explore research in one specific element of the GTS continuum under the guidance of a faculty researcher


SC를 마치기 위해서는 각 학생들은 scholarly project를 제출해야 한다.

To complete the SC course, each student must submit a mentored scholarly project.


GTS교육과정을 마친 후, PBL 모듈과 통합된 4주의 Transition to the Wards 과정이 있다.

After completing the GTS course and a four-week Transition to the Wards course that combines problem-based learning modules with practical information (e.g., interpretation of electrocardiograms, teamwork skills, and image interpretation), the students will embark on clinical clerkships that provide intense clinical experiences building on the CF course in year one and the LAC in years one and two.


핵심 임상 실습이 끝난 뒤에는 Translational Medicine Intersession이 있어서, 기초의학교수와 임상의학교수가 합동으로 임상문제에 대한 기초과학적 함의를 다루는 세미나가 열린다.

After the Core Clinical Clerkships come the weeklong translational medicine intersessions, in which basic science and clinical faculty will jointly lead seminars focusing on the basic science implications of the clinical experiences that the students observed firsthand during their clerkships. In addition to emphasizing the scientific basis of medicine, these intersessions will reinforce rigorous thinking, lifelong learning, and the conceptual basis for patient individuality.


핵심 임상 실습 외에도 학생들은 선택 임상 실습을 하면서 전공의 과정을 준비해야 한다.

In addition to Core Clinical Clerkships, students will continue to have great flexibility to determine their elective rotations to prepare for residency. However, each student also must take an Advanced Clerkship in Chronic Care (e.g., geriatrics, physical medicine and rehabilitation, or palliative care) and an Advanced Clerkship in Intensive Care.


GTS의 사회적 요소들은 개인 환자의 표현형이 가족과 사회에 어떻게 영향을 주는지 (그 반대도 마찬가지)를 배우게 된디ㅏ.

This emphasis on the societal component of GTS within these subinternships illustrates for the student how the individual patient phenotype may affect the family (or community or society), and vice versa.


마지막으로 졸업 전에 capstone course를 밟게 된다.

Finally, just before graduation, all students will complete a capstone course, called Transition to Residency and Preparation for Life (TRIPLE).


GTS교육과정의 중요한 측면은 지속적 발전과 교육적 연속성에 대한 것이다.

Key aspects of the GTS curriculum are its developmental progression and educational continuity.27


우리는 강력한 중심적(비 학과적) 교육과정을 만들어서 수직적, 수평적 요소들을 점검하고 학과 중심으로 되어있던 전통적 교과목 구조를 바꾸었다.

We have established a strong central (nondepartmental) curriculum administration to monitor the vertical and horizontal content areas of the curriculum and to replace the traditional departmental organization of coursework.




GTS교육과정은 무엇이 다른가?

How Will the GTS Curriculum Look Different?


임상 경험이 쌓이면 모든 환자는 서로 다르고 "classical case"라는 것은 교과서 내에만 존재한다는 것을 알게 된다.

Experienced clinicians have learned that every patient is different and that the “classic case” is merely a pedagogical construct.


개개인을 중시하는 GTS는 의학을 바라보는 개념틀을 제시한다.

The GTS perspective, with its emphasis on individuality, provides a conceptual framework for thinking about medicine.


의학지식의 역동성은 intersession동안 강조되고, 핵심 임상 실습이 끝난 뒤 학생들은 일년, 이년 전 GTS기간에 생각했던 주제들에 대해서 자신의 환자경험과 통합시켜서 다시 최신 문헌을 찾아보게 된다.

The dynamic nature of medical knowledge will be reinforced during these intersessions as students revisit, after their Core Clinical Clerkship, topics they considered one to two years earlier in their GTS course, and they will have the opportunity to integrate their background knowledge with firsthand patient experience and review of the current literature.



미래를 향한 도전

Challenges for the Future

교육과정에 대한 전반적 평가가 중요하며, 우리는 현재 정보를 수집하고 있다. 그러나 아직 "GTS교육과정이 이전 것보다 더 좋은지 어떻게 알 수 있나?"라는 질문에 대답할 적절한 metric을 찾지 못하고 있다.

The issue of overall curricular assessment and evaluation is an important challenge. We are currently collecting data on student experience, graduate outcomes, board scores, and career satisfaction that will be used in comparisons with students from the pre-GTS era. However, we do not yet have an adequate metric to answer the often-asked question, “How will we know if the GTS curriculum is better than our old curriculum?”


한가지 가능한 것은 "concept mapping"을 cognitive task analysis로서 사용하도록 하는 것이다.

One potential avenue involves “concept mapping” as a tool for cognitive task analysis.28 Concept mapping is a validated tool of knowledge elicitation and knowledge representation, wherein a team of students could build a relational map of the most relevant concepts in explaining a patient’s phenotype by using GTS concepts.28,29,30 Faculty experts from different specialties could be invited to critique these maps for granularity, comprehensiveness, and relevance to the integration of the knowledge needed for clinical care and communication with the patient. 


위원회는 교육의 가치는 단순히 돈으로 측정되는 것이 아니라, 교육에 대해서 교수들을 인정해주고 승진에 반영하고, 연례 평가에서 학장이 학과 단위로 인정해주는 것이 필요하다고 말했다. 이러한 가치들을 서로 교환할 수 있는 방법을 개발중이다.

This committee noted that valuation of education is measured not only with money but also with faculty recognition and promotion and with departmental recognition during the annual review by the dean. A methodology was developed to interchange these types of valuations— personal, departmental, and financial


교육과정개발동안 일부 자금이 필요한 것은 어쩔 수 없다. 우리는 기존 교과과정을 어설프게 땜질하는 것은 전체를 완전히 바꾸는 것에 비해서 효과가 없을 것이라 생각했다. 동시에 교육을 담당하고 있는 사람들이 꾸준히 자금원을 확장하기 위해서 노력해야 한다.

The need for a certain level of funds is inescapable during curriculum reform. We argue that minor tinkering with an existing curriculum is less likely to be perceived as adding value to an institution than is wholesale reform. At the same time, those responsible for education must constantly strive to diversify the funding base beyond tuition—through grants, consulting contracts, continuing education courses, etc.—while paying scrupulous attention to the risks of conflict of interest or dilution of the institutional mission.


요약

Summary


의과대학의 목표는 바뀌지 않았다. 단지, 이 목표를 달성하기 위해서 미래 세대의 의사들은 새로운 개념적 기반이 필요하다는 것이다. 

The goal of medical school—namely, to educate students in preparation for fulfilling careers in clinical care, investigation, education, and leadership— has not changed; however, to reach this goal, the next generation of physicians will require a new conceptual foundation of health and disease that focuses on individual characteristics and that explores how they interact with accrued environmental experiences. 


Hood 등은 이러한 접근법을 P4 medicine이라 불렀다. P4는 Predictive, Preventive, Personalized, Participatory medicine의 약자이다. 우리의 GTS 교육과정은 P4 medicine을 가르치기 위한 것이다. 최근 Macy재단의 보고서는 의과대학 교육과정이 좀 더 사회적 요구와 기대에 맞추어져야한다고 기술하고 있다.

Hood and colleagues31 called this approach “P4 medicine,” with “P4” representing predictive, preventive, personalized, and participatory medicine. Our GTS curriculum proposes a way of teaching P4 medicine. A recent report from the Macy Foundation proposed that medical school curricula become more aligned with societal needs and expectations.32












 2010 Mar;85(3):498-506. doi: 10.1097/ACM.0b013e3181ccbebf.

"Genes to society"--the logic and process of the new curriculum for the Johns Hopkins University School of Medicine.

Abstract

In August 2009, the Johns Hopkins University School of Medicine implemented a new curriculum, "Genes to Society" (GTS), aimed at reframing the context of health and illness more broadly, to encourage students to explore the biologic properties of a patient's health within a larger, integrated system including social, cultural, psychological, and environmental variables. This approach presents the patient's phenotype as the sum of internal (genes, molecules, cells, and organs) and external (environment, family, and society) factors within a defined system. Unique genotypic and societal factors bring individuality and variability to the student's attention. GTS rejects the phenotypic dichotomy of health and illness, preferring to view patients along a phenotypic continuum from "asymptomatic and latent" to "critically ill." GTS grew out of a perceived need to reformulate the student experience to meet the oncoming revolution in medicine that recognizes individuality from the genome to the environment. This article describes the five-year planning process that included the definition of objectives, development of the new curriculum, commission of a new education building, addition of enhancements in student life and faculty development, and creation of a vertical and horizontal structure, all of which culminated in the GTS curriculum. Critical ingredients in meeting the challenges of implementing GTS were leadership support, dialogue with faculty, broad engagement of the institutional community, avoidance of tunnel vision, and the use of pilot courses to test concepts and methods. GTS can be viewed as the foundation for the scientific and clinical career development of future physicians.



“Genes to Society”—The Logic and Process of the New Curriculum for the Johns Hopkins University School of Medicine

Charles M. Wiener, MD, Patricia A. Thomas, MD, Elizabeth Goodspeed, MHS, David Valle, MD, and David G. Nichols, MD


Abstract

2009년 8월, 존스홉킨스 의과대학은 "유전자에서 사회로"라는 새로운 교육과정을 도입하였다. 새로운 교육과정은 건강과 질병의 맥락을 더 넓은 범위에서 바라보고, 학생들로 하여금 환자의 건강을 더 넓은, 사회/문화/정신/환경이 통합된 시스템에서 바라보도록 하는 것에 그 목적이 있다. 이러한 접근법은 환자의 표현형은 내적인 요인들과 외적인 요인들이 종합되어 나타난다는 것을 보여준다. GTS는 건강과 질병의 이분법적 접근을 거부하고, 환자를 "무증상이며 잠재적인"상태에서 "심각한 상태"까지의 연속체로 바라보도록 한다. GTS는 개인을 유전체에서 환경까지를 포괄하여 바라보는 다가오는 의학의 혁명에 발맞추어 학생들의 경험을 재조직할 필요에 의해 개발되었다. 본 논문은 목표를 설정하고, 새로운 교육과정을 개발하고, 새로운 교육건물을 만들고, 학생 생활과 교수 개발을 향상시키는 5년간의 과정을 묘사하고자 하였다.  수직적 구조와 수평적 구조를 만들었으며, 이 모든 것이 모여 GTS 교육과정을 이루었다. GTS를 도입하는 과정에서 중요한 난관들을 해결하는데 핵심적 요소들은 리더십의 지원, 교수와의 대화, 다양한 구성원의 참여, 좁은 시야의 극복, 개념과 방법을 시험하기 위한 파일럿 코스 등등이었다. GTS는 미래 의사들의 기초과학/임상 진로개발을 위한 토대이다.

In August 2009, the Johns Hopkins University School of Medicine implemented a new curriculum, “Genes to Society” (GTS), aimed at reframing the context of health and illness more broadly, to encourage students to explore the biologic properties of a patient’s health within a larger, integrated system including social, cultural, psychological, and environmental variables. This approach presents the patient’s phenotype as the sum of internal (genes, molecules, cells, and organs) and external (environment, family, and society) factors within a defined system. Unique genotypic and societal factors bring individuality and variability to the student’s attention. GTS rejects the phenotypic dichotomy of health and illness, preferring to view patients along a phenotypic continuum from “asymptomatic and latent” to “critically ill.” GTS grew out of a perceived need to reformulate the student experience to meet the oncoming revolution in medicine that recognizes individuality from the genome to the environment. This article describes the five-year planning process that included the definition of objectives, development of the new curriculum, commission of a new education building, addition of enhancements in student life and faculty development, and creation of a vertical and horizontal structure, all of which culminated in the GTS curriculum. Critical ingredients in meeting the challenges of implementing GTS were leadership support, dialogue with faculty, broad engagement of the institutional community, avoidance of tunnel vision, and the use of pilot courses to test concepts and methods. GTS can be viewed as the foundation for the scientific and clinical career development of future physicians. 



Acad Med. 2010; 85:498–506.








1910년 발간된 플렉스너 보고서는 의학에서 과학의 중요성을 역설하며 의학교육의 혁명을 일으켰다. 한 세기 휘, 생의학 연구에서 유전학이 사회적 경제적 변화를 가속시키면서 많은 사람들이 다시 한 번 의학교육에 변화의 시기가 왔음을 주장하고 있다. 이를 위해서 우리는 의학교육 교과과정의 새로운 개념틀을 제안하였다. 생물학과 환경적 개인성(environmental individuality)에 기반한 본 교육과정의 주요 목적은 건강과 질병을 더 넓은 틀에서 다시 바라보고, 의과대학생들로하여금 개개인의 건강을 사회/문화/심리/환경 등을 포괄한 더 넓고 통합적인 시스템 내에서 바라보도록 하는 것이다.

The Flexner Report,1 published in 1910, stressed the importance of science for medicine and catalyzed a revolution in medical education. A century later, with genomics catalyzing a revolution in biomedical research in an environment of accelerating social and economic change, many have argued it is time for another sea change in medical education.2 To this end, we proposed a new conceptual framework for the medical education curriculum, to be based on principles of biologic and environmental individuality. A major goal of this new curriculum is to reframe the context of health and illness more broadly, to encourage medical students to explore the biologic properties of an individual’s health in the light of a larger integrated system that also includes social, cultural, psychological, and environmental variables.3,4


이 교육과정은 유전자에서 사회로(GTS)라고 불리며, 유전적, 환경적, 사회적 영향이 변화한다는 것에 기초하고 있다.

This curriculum, called “Genes to Society” (GTS), is based on the precept that genetic, environmental, and societal influences are subject to variation.


우리가 이렇게 생각한 것은 Barton Childs로부터 영향을 받은 것이다. 전통적으로 의사들은 "무엇이 잘못된 것이고, 나는 무엇을 할 수 있지?"라고 생각해왔다.

Our thinking in this regard has been greatly influenced by the ideas of Barton Childs7 and his advocacy for genetic thinking in medicine. The physician’s classic perspective is “What is wrong, and what can I do?”


그러나 이제는 "왜 이 특정한 사람이 이 특정한 시기에 이 특정한 질병에 걸렸는가?"가 질문이 되었다. 이러한 새로운 관점은 Sir Archibald Garrod가 1902년 처음 주장한 chemical individuality에 기반한 것이다.

“Why does this particular person have this particular disorder at this time?” or “Why is my patient at risk for developing certain problems and what can I do to prevent or forestall their onset?”8 This “new” view of medical education derives from Sir Archibald Garrod9 and his seminal idea of chemical individuality, which he first proposed in 1902.


레퍼런스 인간 유전자가 밝혀지고 개개인의 염기서열이 다르다는 것을 알게 되면서 유전적 다양성의 범위과 그 복잡함이 드러난 것이다.

The elucidation of the reference human genome sequence and the growing appreciation of the uniqueness of each person’s version of this sequence, confirmed by recent sequencing of “personal genomes,” have exposed the extent and complexity of genetic variation.10 –12




개인성과 인간게놈프로젝트의 영향

Individuality and the Impact of the Human Genome Project


즉, 모든 환자는 다 다르다는 것이다.

that every patient is unique.13


사람과 사람 사이에는 SNP나 CNV의 형태로 수백만의 차이가 존재하며 이것이 유전자가 개인성(individuality)에 기여하는 바이다.

several million differences exist between the genome of one person and that of another, in the form of single-nucleotide polymorphisms (SNPs) and copy number variations (CNVs) that provide the genetic contribution to individuality.14,15


더 나아가서 복잡한 생물학적 시스템에서 작용을 하는 단백질이 있다. 이러한 다양성이 어떻게 생물학적 시스템 하에서 영향을 주는가가 개개인의 건강 상태를 이해하는데 중요하다.

Moreover, the variation in the protein products of genes plays out in the behavior of complex biological systems made up of these proteins. Knowledge of how this variation affects the properties of these biological systems (called “systems biology”) will be important for gaining an understanding of the dynamic state of an individual’s health.


미래의 의사들은 생물학적 시스템에 개인별 정보(유전자, 유전체, 단백질, 세포, 조직, 기관, 환경, 사회)에 기반한 근거를 통합적으로 해석할 수 있어야 한다.

Future physicians will integrate individual bits of evidence into a biologic system that extends from genes and the genome, proteins, cells, tissues, and organs (internal elements) to the environment and society (external elements).




교육과정 개혁 - 절차와 도전

The Curriculum Reform—Process and Challenges


광범위한 조사, 존스홉킨스 의과대학의 모든 구성원의 참여, 그리고 우연히 따른 운이 우리의 교육과정 개혁을 이뤘다. JHU는 성공적으로 교육 혁신을 이룬 역사가 있으며, 이것이 임박해있던 변화의 중요한 배경이 되었다.

Broad inquiry, complete involvement of all elements of the JHU School of Medicine, and some serendipity have marked our curriculum reform process. JHU is fortunate to have an institutional history of successful educational innovation, which provided an important context for the changes that were to take place.22,23


2002년 소아과학교실 주임교수가 교육부학장에게 같은 교실의 Barton Childs라는 교수가 쓴 Genetic Medicine이라는 책을 건넸다. 

In 2002, the chair of the Department of Pediatrics handed the vice dean of education a recently published book entitled Genetic Medicine—A Logic of Disease,7 which had been written by one of the department’s faculty members, Barton Childs.


"향후 10년간 의학은 어떻게 달라질 것인가?"

“How will medicine be practiced in 10 years?”


2003년, 존스홉킨스 의과대학의 학장은 교육과정개혁위원회(CRC)를 소집하고 현재 교육과정을 평가하고 필요하다면 어떻게 바뀌어야할지 제안하도록 했다. 1986년의 개혁에서는 주로 첫 2년간의 교육과정을 손보았고 임상실습시기는 거의 손대지 않았다. 부학장의 전략적 계획에 따라서 학장은 교수 중심의 위원회를 구성하여 빠르게 변화는 과학적, 사회적 환경을 고려하여 어떻게 향후 10년에 대한 최선의 의사양성방법을 보고하도록 했다.

In 2003, the dean of the JHU School of Medicine convened a Curriculum Reform Committee (CRC) to evaluate the current curriculum and to recommend whether and, if so, how the medical school curriculum should be revised. An earlier (1986) curriculum reform at JHU had predominantly affected the first two years of medical school and did not change much in the format of the clinical years.22 On the basis of the vice dean’s strategic planning exercise, the dean charged a faculty-led committee to consider the rapidly changing scientific and social milieu and report back on how best to educate future physicians for practice in 10 years.


초기의 CRC는 작은 규모였다. 일 년동안 두 달에 한 번 정도 회의를 갖고 새로운 교육과정이 필요한지, 만약 그렇다면 어때야 하는지를 논의했다. 일 년이 종료될 시점에서 CRC가 학장에게 한 제안은 현재 교육과정을 손보는 것보다 완전히 교육과정을 새롭게 디자인하는 것이었다. 그 후 4년간 CRC는 그 규모가 커져서 교수와 학생을 포함한 다양한 대표자가 포함되었다.

The initial CRC was small (approximately 15 members from diverse clinical and scientific backgrounds); for one year, it met every two months to assess whether a new curriculum was needed and, if so, what the needs of that curriculum would be. The recommendations of the earlier curriculum reform committee that had not been implemented were considered in those discussions.22 At the end of that year, the committee’s recommendation to the dean was a complete redesign of medical school curriculum, rather than a revision of the existing curriculum. Over the next four years, the CRC grew substantially, to include broad representation from faculty and students, so that it could build on the initial vision.


존스홉킨스 블룸버그 보건대학은 이 교육과정 개발에서 중요한 파트너였다. CRC의 위원장, 교육부학장, 학장은 투명하고 모든 의과대학 구성원들이 교육과정 개혁에 대해서 정기적이고 투명한 대화를 할 수 있도록 노력하였다.

The JHU Bloomberg School of Public Health was a prominent partner in curriculum development. The CRC chair, the vice dean for education, and the dean of the JHU School of Medicine worked toward transparent and regular communication with all members of the School of Medicine community about curricular reform efforts.


CRC의 원년멤버 중 한 명은 교육과정 설계에 대한 주요 문헌을 정리하고 모든 사안에 대한 초기 백서를 작성하였다. 이 백서에서는 교육과정을 위한 associate dean 자리를 새롭게 만들 것을 제안했으며, 의과대학생들을 위한 새로운 4년 교육과정을 제안했고, 중앙화된 교육과정 관리 소프트웨어/온라인 시험/학생 포트폴리오를 개발하고, 새로운 교육 장소를 만드는 것 등을 제안했다.

One of the original CRC members had coedited a major text on curriculum design and was able to write an early white paper on all of the items (beyond curricular content revision) that would be needed for comprehensive curriculum reform.24 This white paper’s recommendations included the creation of a new position of associate dean for curriculum and a new four-year college advising system for medical students, the development of centralized curriculum management software, online testing, and student portfolios, the provision of new teaching space, and a reevaluation and eventual rewriting of the promotion criteria for educators.


2005년 임상수기교육과 좀 더 구조화된 학생상담을 위한 시설이 마련되었다.

The college system for teaching clinical skills and for more structured student advising was implemented in 2005.25


새로운 의과대학 교육과정에 대한 폭넓은 논의가 이루어졌다.

The broad discussion of a new medical school curriculum was accompanied by...

    • great deal of discussion among faculty and students about the conceptual framework for the design of the curriculum, 
    • the optimal method of teaching the new curriculum, 
    • the extent of the scholarly requirement, 
    • and the need for a structured, core, basic clerkship sequence and required advanced clerkships (neither of the latter existed previously). 


이러한 논의들이 교육과정을 지속적으로 섬세하게 다듬는데 일조했고, CRC의 위원장과 부학장은 정기적으로 town hall and faculty meeting을 하였다. 교육과정이 계획에 따라 개선되고 있는가를 알리기 위해서 웹사이트를 만들고 정기적으로 뉴스레터를 발간하였다. 

These discussions at the school, department, division, and student government levels led to continual refinement of the curriculum. The CRC chair and the vice dean held regular town hall and faculty meetings (usually attended by the dean) as well as annual schoolwide retreats to publicize the curriculum and receive faculty input on the pros and cons of various new curricular elements. Dedicated administrative support for CRC allowed the creation of a Web site and periodic newsletters to inform the community of the progress toward the planned revision.


2004년부터 2007년까지 확장된 CRC는 작은 그룹들로 분할되어 각각의 교육과정 요소별로 목표를 설정하기 위한 작업에 들어갔다. 이 지점에서 우리는 4년의 대략적인 아웃라인을 잡았고, 학생과 교수들에게 구체적인 목표/경험 설계를 부탁하였다. 

From 2004 through 2007, the enlarged CRC broke down into smaller groups, who were tasked with actually formulating objectives for each new component of the curriculum. At that point, we had roughly outlined the new four-year sequence of courses and were asking faculty and students to begin the design of specific objectives and experiences. 


점차 CRC위원들이 CTS의 수직적 개념들에 집중하고 있는 사이에, 아무도 수평적 통합을 보고있지 않다는 것을 알게 되었고, 그래서 CRC의 하부위원회인 Horizontal Strands Subcommitee를 만들었다. 이 그룹은 모든 교과목과 임상실습에 영향을 줄 수 있도록 전체 교육과정을 짜는(weaving)역할을 맡았고, 크게 두 주제로 나뉘었다.

(1) social and behavioral strands 

(2) biomedical strands 

It became apparent that, whereas CRC members were focusing on the “vertical” concepts of GTS within each course or section, no one was looking horizontally at the integration of broad concepts over the four-year experience. We therefore created a new subcommittee of the CRC, called the Horizontal Strands Subcommittee. This group was charged with weaving into the entire curriculum themes that affect every course and clerkship. These themes fit into two categories: (1) social and behavioral strands (i.e., pain, patient safety, professionalism, epidemiology, nutrition, communication, cultural competence, public health, clinical reasoning, and human development) and (2) biomedical strands (i.e., genomics/ proteomics, imaging [microscopic and macroscopic], informatics, molecular embryology, pathology, and pharmacology).


새로운 교육과정이 강의가 아닌 방법을 사용하려고 한다는 것이 명확해졌을 때, 현재의 시설로는 새로운 교육과정을 수행하기에 부적합하다는 것을 깨달았다.

When it became apparent that the new curriculum would use nonlecture teaching methods to a larger extent than did the previous curriculum, we realized that the current medical school facilities would be inadequate for the new curriculum.


우리는 더 넓은 범위의 이사진과 정기적으로 모임을 하여 새로운 교육과정을 제안하고 시설을 새롭게 해줄 것을 요청했다.

We communicated regularly with the wider community of trustees and alumni about the proposed new curriculum and the updated facilities that the curriculum would require.


새로운 건물의 한 층은 그룹학습/개인학습 뿐만 아니라 community event를 위한 공간으로 만들었다.

One floor of the new building was dedicated to the colleges to provide space for community events as well as group and individual study.


새로운 교수법, 전임상과정, 학문이수요건, 사이세션 등등을 위해서는 교수개발이 필수적이었다.

With the new pedagogy, preclinical content, scholarly requirements, intersessions, required clerkship material, and advanced clerkship material, there is a major need for faculty development.


새로운 교육 건물을 짓기 위한 지원을 찾아나선 것 이외에도 학장과 이사진은 교수들의 교육과 커리어 개발을 위해서 많은 노력을 쏟았다. 교수들이 가르치는 것을 재정적으로 지원하는 것에 대한 노력 외에도, 교육업적을 더 잘 평가하고 승진과정에서 보상하는 것도 더 잘하고자 했다. 이 과정은 지금까지의 대학 승진시스템이 단일했기 때문에 복잡한 과정이었다.

In addition to seeking private support for the new education building, the dean and the board of trustees are continuing their efforts to find private support for faculty education time and career development. Along with its efforts with respect to the financial support of faculty teaching, the institution has been working to better assess and reward teaching in the promotions process. This task is complex because our institution has maintained a single-track promotion system with delineation of potential paths to promotion that allow for diverse faculty activities.


CRC의 마지막 해에 교수와 학생은 각각 교과목, 섹션, 수평요소으로 나뉘어서 교육과정의 각 요소에 대한 최종 점검을 했다.

During the last year of the CRC, academic year 2006–2007, the faculty and students broke into subgroups by course, section, and horizontal strand to finalize educational strategies for each component of the curriculum.


자문위원회에서 GTS교육과정에 대한 승인을 받은 뒤 CRC는 2007년 6월 해체되었고, CTS Integration Committee로 대체되었다. 이 그룹에는 HSS의 대표 외에도 새로운 교육과정의 교과목 담당교수도 포함되었다.

After approval of the GTS curriculum by the advisory board of the medical faculty, the CRC was disbanded in June 2007 and was replaced with the GTS Integration Committee. This group comprised all of the course directors of the new curriculum as well as the leaders of the Horizontal Strand Subcommittee.



교육과정 설계와 도입

Curriculum Design and Implementation Challenges


일부 교수들과 교실은 종종 변화에 저항하곤 했다. 교육과정 개혁의 첫 2년간 일부 기초의학 교수들은 GTS의 개념에 반대했다. 이 시기는 NIH Roadmap을 출간한 시기와 일치한다. GTS에 대한 반대는 이 Roadmap에 반대하는 것과 유사했다. 즉 translational, integrated 한 접근법은 각 학과목에 대한 학생들의 이해 수준을 낮출 것이라는 우려다.

Some faculty and departmental resistance to change did arise from time to time. During the first few years of curriculum reform, some basic science faculty objected to GTS concepts as the basis for curriculum reform. This period coincided with the publication of the NIH Roadmap.26 The objections to the GTS approach were similar to those directed against the Roadmap—namely, that the translational, integrated approach that replaced separate courses in the traditional disciplines (e.g., pharmacology, physiology, and pathology) would undermine understanding of these disciplines.


통합적-다학제간 컨텐츠를 8주간 포함시킨 것은 첫 2년간 생의학과학에 배정된 시간이 줄어든 것과 같았으나, 기초의학 교실들은 대신 3학년과 4학년의 translational intersession의 주도권을 갖게 되었다. 이러한 점에서 대부분의 기초의학 교수들은 GTS교과과정에 대해서 전체적으로는 좋게 평가했다. 

The inclusion of eight weeks of integrative multidisciplinary content in the intersession weeks in the first two years meant that less time was allocated to biomedical science. However, basic science departments assumed the leadership of the translational intersessions in the third and fourth years. Thus, most basic science faculty appreciated that the GTS curriculum as a whole not only emphasized basic science but also afforded an opportunity for basic science faculty to bring the very latest research results to the students at a point when they had developed the much more sophisticated framework needed to absorb such information.


교육과정개혁 과정의 후반부에서는 임상 교실들이 어떤 임상실습이 더 많은/더 적은 시간을 배정받을 것인가에 따라서 여러 결정에 반대를 하였다.

Later in the process, it was the clinical departments’ turn to object to various decisions about which clerkships would get more or less time in the new curriculum.


대학원생들이 의과대학교육에 어떻게 참여할것인가는 또 다른 어려운 문제였다. 기존의 교육과정은 주로 교실 중심으로 이루어졌기 때문에 이러한 참여가 편리했으나 완전히 통합된, 시스템 기반의 교과과정에서는 그렇지 않았다.

The participation of graduate students in medical student education was another thorny problem. The old curriculum made such participation easy because the curriculum largely was departmentally based, but a fully integrated, systemsbased curriculum presented challenges.


새로운 의학교육건물은 대학원생과 의과대학생의 합동 수업이 계속 가능하도록 디자인되었다. 

The medical education building was designed to continue to allow joint graduate and medical student classes. Graduate and medical education schedules were coordinated whenever possible so that highly specialized facilities (e.g., the anatomy lab) are available for graduate education.


충분한 자금 지원을 받는 것은 교육과정 개혁에서 항상 맞닥뜨리는 문제이다. 교육부학장과 회계과가 밀접하게 협조할 필요가 있으며 매 해의, 5년단위의, 10년단위의 비용을 지원받아야 한다. 

The availability of adequate funds to implement an entirely new curriculum is an ever-present challenge. Very close cooperation between the office of the vice dean for education and the finance office allowed annual and 5- and 10-year projections of the costs of the new curriculum, which were then incorporated into the school’s overall finance plan. The newly created position of assistant director of finance focuses solely on education and reports jointly to the vice dean for education and the chief financial officer. 


아마도 가장 중요한 접근법은 학장이 의학교육의 수월성을 강조하는 것인데, 비용으로 인한 불가피한 tradeoff는 과정이 끝날 단계에서 이루어져야지 시작단계나 개혁중간에 생겨서는 안된다.

Perhaps the most important approach was the dean’s directive to concentrate on excellence of medical education. The inevitable tradeoffs based on cost would be made at the end of the process, not at the beginning or even during the curriculum reform process.












 2010 Mar;85(3):498-506. doi: 10.1097/ACM.0b013e3181ccbebf.

"Genes to society"--the logic and process of the new curriculum for the Johns Hopkins University School of Medicine.

Abstract

In August 2009, the Johns Hopkins University School of Medicine implemented a new curriculum, "Genes to Society" (GTS), aimed at reframing the context of health and illness more broadly, to encourage students to explore the biologic properties of a patient's health within a larger, integrated system including social, cultural, psychological, and environmental variables. This approach presents the patient's phenotype as the sum of internal (genes, molecules, cells, and organs) and external (environment, family, and society) factors within a defined system. Unique genotypic and societal factors bring individuality and variability to the student's attention. GTS rejects the phenotypic dichotomy of health and illness, preferring to view patients along a phenotypic continuum from "asymptomatic and latent" to "critically ill." GTS grew out of a perceived need to reformulate the student experience to meet the oncoming revolution in medicine that recognizes individuality from the genome to the environment. This article describes the five-year planning process that included the definition of objectives, development of the new curriculum, commission of a new education building, addition of enhancements in student life and faculty development, and creation of a vertical and horizontal structure, all of which culminated in the GTS curriculum. Critical ingredients in meeting the challenges of implementing GTS were leadership support, dialogue with faculty, broad engagement of the institutional community, avoidance of tunnel vision, and the use of pilot courses to test concepts and methods. GTS can be viewed as the foundation for the scientific and clinical career development of future physicians.


Long-term Outcomes of the New Pathway Program at Harvard Medical School: A Randomized Controlled Trial

Antoinette S. Peters, PhD, Rachel Greenberger-Rosovsky, Charlotte Crowder, MPH, Susan D. Block, MD, and Gordon T. Moore, MD, MPH






목적 : New Pathway(NP) 프로그램이라는 혁신한 교육과정의 장기효과를 평가하기 위해서 인문의학, 평생학습, 사회적학습의 세 측면과 관련한 행동 및 태도를 보고자 했다.

Purpose. To evaluate the long-term effects of an innovative curriculum, the New Pathway (NP) Program, on behaviors and attitudes related to humanistic medicine, lifelong learning, and social learning. 


방법 : 무작위대조군연구에 참여한 하버드의과대학 졸업생을 장기 추적하였다. 100명(NP 50명, 전통적교육과정 50명) 에게 1998회의 전화인터뷰를 하여 descriptive study를 하였다. NP프로그램은 PBL을 기반으로 하여 공동강의와, 실험, 인문의학경험, 임상경험 등으로 구성되어 있다. 전통적 교육과정은 강의와 실험실 학습으로 이루어져 있다.

Method. Long-term follow-up of Harvard Medical School students who participated in a randomized controlled trial. Descriptive study using 1998 telephone interviews of 100 1989 and 1990 graduates (50 who had studied the NP curriculum, 50 who had studied the traditional curriculum). The NP Program consisted of problem-based learning tutorials, with coordinated lectures, labs, experiences in humanistic medicine, and clinical experiences; the traditional program consisted of basic science lectures and labs.


결과 : 22개의 척도중에서 NP와 TP학생은 다섯 개의 척도에서만 차이를 보였다. NP학생들 중 40%, TP학생 중 18%가 일차의료 혹은 정신과를 전공하고 있었다. NP학생들은 인문의학적 실천에 대한 준비가 더 잘 되어있다고 했고 환자의 심리사회적문제를 더 잘 다룰 수 있다는 자신감을 드러냈다. NP학생들은 첫 2년간 교육이 자신들의 사고에 영향을 더 주었다고 했고, NP학생들은 TP학생들보다 그 교육과정을 더 좋아했다. 평생학습적 측면에서는 차이가 없었다.

Results. Of 22 measures on the survey, NP and traditional students differed significantly on only five (three humanism; two social learning): 40% of NP students and 18% of traditional students went on to practice primary care or psychiatry. NP students rated their preparation to practice humanistic medicine higher than did traditional students and expressed more confidence in their ability to manage patients with psychosocial problems. NP students were more likely than were traditional students to believe that faculty from the first two years continued to influence their thinking. NP students liked the pedagogic approaches of their program more than traditional students did. There was no difference between the groups on measures of lifelong learning.


결론 : 의과대학기간과 레지던트 기간동안에 인문학적 영역에서 나타난 NP와 TP학생간의 차이는 수련 후 진료를 하는 기간에도 유지되었고, 이는 인문의학적인 측면을 가르치는 것, 배우는 것이 가능함을 의미한다.

Conclusions. Differences between NP and traditional students in the humanism domain first appeared during medical school and residency and remained significant well into practice, suggesting that humanistic medicine can be taught and learned.







1985년 하버드 의과대학은 NP교과과정을 도입하였다. 이는 전임상실습과정의 교육과정으로 기초과학 지식을 잘 다지고, 능동적, 자기주도적 학습에 대한 긍정적 태도를 갖추며 환자진료에 대해서 통합적인 정신사회학적, 인문학적 개념을 갖추도록 하는 것을 추구하는 교육과정이었다.

In 1985, Harvard Medical School introduced the New Pathway program (NP), a preclinical curriculum that sought to promote a sound knowledge of basic science, facility in and positive attitudes toward active, self-directed learning, and competency in integrating psychosocial and humanistic concepts with biologic principles in patient care.1 


멕마스터대학에서 선두적으로 도입한 PBL은 이러한 목표를 달성하기 위한 기본적인 교수법으로 도입되었으나, 새로운 교육과정에는 여전히 강의, 실습, 의학의 인문학적 측면을 배우는 기간, 휴머니즘과 환자의사관계를 촉진시키기 위한 임상경험 등도 포함되어 있었다.

Problem-based learning (PBL)—pioneered at McMaster University—was adopted as the primary pedagogic method to meet these goals, but the new curriculum also included lectures, labs, weekly structured learning experiences focused on humanistic aspects of medicine, and clinical experiences designed to foster humanism and the doctor–patient relationship.2–4


모든 교육적 활동은 튜터리얼 사례와 함께 통합되었으며, 능동적 학생주도적 학습은 자립적인 태도를 키우고자 했다. 임상적 맥락은 동기부여의 목적이 있었다.

All educational activities were coordinated with the tutorial cases to enhance integration, while active, student-directed learning aimed to encourage self-reliance. The clinical context facilitated motivation.


새로운 교육과정은 2년간 무작위대조군연구와 같이 도입되었다. 프로그램 평가는 2년과 4년이 끝나는 시점, 그리고 졸업 후 4년이 되는 시점에서 이루어졌다. 이 때 NP와 기존 교과과정 학생들은 강하고 꾸준히 차이를 보였는데, NP학생들이 좀 더 인본주의적인 것에 긍정적 태도를 보였고, 기초의학지식이나 임상문제해결에는 차이가 없었다.

The new curriculum was introduced to two consecutive classes as a randomized controlled trial. Program evaluation took place at the end of the students’ second and fourth years of medical education, as well as four years after graduation. At these times, the NP and control students demonstrated strong and consistent differences, with NP students more positive in the humanistic domain. No significant difference was observed in basic science knowledge or clinical problem solving.5









METHOD


Participants

The NP was conducted as an experiment in its first two years (1985–86 and 1986–87). Of 280 entering students, 125 agreed to be randomized to the New Pathway (63 students) or traditional curriculum (62 students, matched for race and gender). The students in the traditional curriculum served as controls for all phases of the evaluation. 1 Participants provided informed consent to respond to all phases of the evaluation.



Survey

We developed survey items to measure attitudes and self-reported behaviors in three domains: humanistic medicine, lifelong learning, and social learning (List 1). While a few items from prior surveys were repeated (Domain 1: Behavior Item 1; Attitude Items 1 and 2), most items were developed to measure behaviors appropriate for physicians in practice. The survey was field tested and refined twice prior to its administration.



Analyses

Principal-components analyses were conducted to confirm the cohesion of domains and to form composite variables (List 1). Items with low inter-item correlation were analyzed as univariates. To ensure comparability of responses across composites, we divided the total scores by the numbers of items composited. Thus, indices of attitudes and some behaviors are expressed on scales ranging from 0 to 10.


Respondents’ perceptions of the lasting effects of the first two years of medical school were stripped of respondent identifiers and language that overtly referred to the NP or traditional program. Three of the authors independently conducted content analyses7 to (1) identify broad themes and (2) evaluate the language used to discuss each theme (e.g., positive or negative). Then, matching comments to respondents, we identified the frequencies of categorized responses by program. The content analysts identified the following themes: lifelong learning, humanism, basic science foundations, group work, and friendships. We agreed to collapse the last two into ‘‘social outcomes of the pedagogic program,’’ to conform to the social learning domain.




RESULTS

Humanism (Table 1)

The NP graduates and traditional graduates differed significantly on one of the three measures of humanistic behaviors and on two of the five measures of humanistic attitudes. 




Lifelong Learning (Table 2)

There was no statistically significant difference between NP and traditional graduates’ behaviors or attitudes in this domain





Social Learning (Table 3)

There was no significant difference between the two groups in terms of behaviors designed to measure the effects of social learning; however, the NP graduates’ attitudes relative to social learning were significantly different from the traditional graduates’ on two of the five measures.





Lasting Effects of the First Two Years of Medical School (Table 4)

Ninety-five percent of the graduates (46 NPs and 49 traditionals) reported at least one lasting effect of the first two years of medical education. Twenty-one NP and two traditional graduates reported that their programs had had lasting effects upon the way they approached and thought about patients.











 2000 May;75(5):470-9.

Long-term outcomes of the New Pathway Program at Harvard Medical School: a randomized controlled trial.

Abstract

PURPOSE:

To evaluate the long-term effects of an innovative curriculum, the New Pathway (NP) Program, on behaviors and attitudes related to humanistic medicine, lifelong learning, and social learning.

METHOD:

Long-term follow-up of Harvard Medical School students who participated in a randomized controlled trial. Descriptive study using 1998 telephone interviews of 100 1989 and 1990 graduates (50 who had studied the NP curriculum, 50 who had studied the traditional curriculum). The NPProgram consisted of problem-based learning tutorials, with coordinated lectures, labs, experiences in humanistic medicine, and clinical experiences; the traditional program consisted of basic science lectures and labs.

RESULTS:

Of 22 measures on the survey, NP and traditional students differed significantly on only five (three humanism; two social learning): 40% of NP students and 18% of traditional students went on to practice primary care or psychiatry. NP students rated their preparation to practice humanistic medicine higher than did traditional students and expressed more confidence in their ability to manage patients with psychosocial problems. NP students were more likely than were traditional students to believe that faculty from the first two years continued to influence their thinking. NP students liked the pedagogic approaches of their program more than traditional students did. There was no difference between the groups on measures of lifelong learning.

CONCLUSIONS:

Differences between NP and traditional students in the humanism domain first appeared during medical school and residency and remained significant well into practice, suggesting that humanistic medicine can be taught and learned.






Evolution of the New Pathway Curriculum at Harvard Medical School

the new integrated curriculum




Jules L. Dienstag



ABSTRACT 

1985년 하버드 의과대학은 "New Pathway"라는 새로운 교육과정을 도입하였다. 이 교과과정은 능동적, 성인학습을 바탕으로 하여 문제중심, 교수촉진 소그룹 교육방식을 통해 평생학습과 자기주도학습을 향상시키기 위해 개발되었다. Basic science 과정에서 임상적으로 관련있는 내용들이 성공적으로 통합되었음에도 불구하고 NP교과과정의 성과는 임상실습 이전의 교과과정에 국한되었다. 게다가 의료가 점차 입원환자에서 외래환자 중심으로 바뀌어가는 상황은 임상교육을 제한하는 요인으로 작용하였고, 임상교육에서 교수들이 전통적인 교수자의 역할을 하는 것도 제한적이 되었다.

In 1985, Harvard Medical School adopted a “New Pathway” curriculum, based on active, adult learning through problem-based, faculty-facilitated small-group tutorials designed to promote lifelong skills of self-directed learning. Despite the successful integration of clinically relevant material in basic science courses, the New Pathway goals were confined primarily to the preclinical years. In addition, the shifting balance in the delivery of health care from inpatient to ambulatory settings limited the richness of clinical education in clinical clerkships, creating obstacles for faculty in their traditional roles as teachers. 


2006년 HMS는 네 가지 원칙에 기반하여 더 통합적인  교과과정을 도입하였다. 네 가지 원칙은 다음과 같다.

In 2006, Harvard Medical School adopted a more integrated curriculum based on four principles that emerged after half a decade of self-reflection and planning: 

(1) 학생의 모든 학습경험에 기초과학/인구과학을 임상의학에 접목시킨다.

(1) integrate the teaching of basic/population science and clinical medicine throughout the entire student experience; 

(2) 교수-학생간 의미있고 집중적인 관계를 재정립하고, 교수의 참여를 높인다.

(2) reestablish meaningful and intensive faculty-student interactions and reengage the faculty; 

(3) 임상교육의 새로운 모델을 개발하여 환자경험에 있어 장기적 연속성을 가질 수 있게 하고, 학제간 교육과정을 만들고, 교수에 의한 멘토링을 하고, 학생 평가를 한다.

(3) develop a new model of clinical education that offers longitudinal continuity of patient experience, cross-disciplinary curriculum, faculty mentoring, and student evaluation; and 

(4) 모든 학생들이 심화적이면서 교수의 지도를 받는 연구 프로젝트에 참여할 기회를 갖는다.

(4) provide opportunities for all students to pursue an in-depth, faculty-mentored scholarly project.


이 New Integrated Curriculum의 네 가지 원칙은 "학생과 교수가 학문과 리더십을 향한 파트너십을 갖도록 하려는" 우리의 교육과정에 대한 비전을 보여준다.

These principles of our New Integrated Curriculum reflect our vision for a curriculum that fosters a partnership between students and faculty in the pursuit of scholarship and leadership.


Dean for Medical Education, Harvard Medical School, Gordon Hall, Room 103, 25 Shattuck Street, Boston, MA 02115.

E-mail: jules_dienstag@hms.harvard.edu.

Perspectives in Biology and Medicine, volume 54, number 1 (winter 2011):36–54

© 2011 by The Johns Hopkins University Press






Supporting Pillars of Curriculum Reform


교육과정 개혁의 초기에 우리는 우리가 교육과정을 얼마나 창의적으로 손보든지에 관계없이 교수들이 교수자로서 역할을 하기 위해 필요한 지원에 관심을 두지 않는다면 성공하지 못할 것임을 인지했다. 따라서 교육과정을 개선하는 것에 덧붙여 교수와 집행부는 교수개발, 교육에 대한 보상, 승진에 관한 교육 인정 등에 혁신적 접근을 시도하였다.

Early on during curriculum reform, we recognized that no matter how creative we were in revamping our curriculum, we could not be successful without focusing attention on the resources our faculty would need to support them in their roles as teachers.Therefore, in addition to revamping the curriculum itself, our faculty and medical school leadership advocated for innovative approaches to faculty development, to faculty compensation for teaching, and to recognition of faculty teaching effort in academic promotions.



교수개발 Faculty Development


의학교육 개혁 이니셔티브의 한 부분으로서 우리는 HMS Academy내에 Academy Center for Teaching and Learning를 설치하고 교수와 레지던트들이 더 나은 선생님이 될 수 있도록 도와주었다. 

As part of our medical education reform initiative, we inaugurated the Academy Center for Teaching and Learning within the HMS Academy to help our faculty and residents who teach in classroom or clinical settings become better teachers.


이 센터는 교수자로서의 교수개발에 초점을 맞췄다.

The center was charged with focusing on faculty development as teachers; 

    • facilitating communication among the various educational faculty development programs at the medical school and our affiliated hospitals; 
    • providing expertise in medical education and medical education scholarship; 
    • supporting faculty development programs at the affiliated teaching hospitals; 
    • facilitating the evaluation of faculty educators; and 
    • promoting system-wide reflective practice of medical education.

교수육에 대한 보상 Faculty Compensation


의과대학 학생을 가르치는 것에 대한 공정하고 공평한 공식을 개발하기 위한 실무진이 꾸려졌다. 임상실습에서 교육 활동에 대한 정보를 수집한 결과 나타난 문제를 해결하기 위하여 학장은 affiliated teaching hospital의 집행부를 포괄하는 위원회를 결성하였다. 제한이 붙지 않는 자금 지원을 최대화하기 위하여 임상교육에 대한 새로운 메커니즘을 설계하였다. 그 핵심은 재정에 대한 책임을 의과대학과, 대학과, 임상과, 병원이 공동으로 지고, 교수 임용을 그 보상으로 받는 것이었다.

A working group was charged with developing a fair and equitable formula upon which to base compensation of faculty for teaching medical students.An analysis of data on teaching activity in clerkships at our teaching hospitals indicated that approximately half of the financial support for these clerkships came from the medical school but that half was “donated” by the teaching faculty and host institutions and departments.To address this shortfall, and to place the funding of medical education on a more firm foundation, the Dean appointed a committee that included the leaders of our affiliated teaching hospitals.To maximize unrestricted funding, they designed a new mechanism for funding clinical education, the centerpiece of which is shared financial responsibility among the medical school, the university, the clinical departments, the teaching hospitals, and, in return for faculty appointments, the faculty themselves.


병원이 의학교육에 새롭게 자금을 대게 되면서, 그리고 의과대학 교육재정이 교육에 참여한 교수들에게 보상으로 좀 더 자유롭게 쓰일 수 있게 되면서, 그리고 대학이 기부기금을 통해서 추가적인 자금을 대면서 의과대학 학생 교육에 활용할 수 있는 자금이 두 배가 되었다. 

With an agreement from the hospitals to provide new funding for medical education,with a restructuring of the medical school education budget to liberate funding that could be applied to faculty teaching compensation, and with a commitment from the university to increase an extra allocation from the university based upon endowment funds linked to endowed chairs in the clinical departments—in other words, by maximizing the benefit of already available restricted funds and by adding an infusion of new funds—we realized a doubling of the funding available for teaching medical students. 


위원회의 권고에 따라 의과대학은 의과대학 학생들을 교육한 교수들에게 균일하고 투명하게 지불할 수 있는 공식을 도입하였다. 이 기금은 월급에 가산되어 추가로 주는 것이 아니라, 교육에 참여하는 교수들의 시간을 "사서" 임상업무나 연구활동을 뺏기는 것으로부터 오는 손실을 줄여주는 개념이다. 자금이 더 유입된 것 뿐만 아니라, 새로운 프로그램은 하버드 의과대학에서 교육이 중요하다는 것을 실제로 느끼게 해주었다.

Based on the committee’s recommendation, the medical school adopted a uniform, transparent formula for paying faculty who teach medical students in required courses (~$100/hour at all sites and in all disciplines); the funds are not a bonus on top of salaries but a mechanism for “buying” the time of the teaching faculty and limiting the financial disadvantage of time lost from remunerative clinical and investigative activities. Beyond the financial transfer of funds, the new program represented tangible recognition of the importance of teaching at HMS.



교육 참여에 대한 인정 Faculty Recognition for Teaching


교수 승진의 새로운 기준으로서 교육은 새로운 단계로 격상되었다. 모든 교수들은 학생 교육에 참여해야 했고, 승진에 대한 자격은 교수의 가르치는 역할로부터 시작하게 되었다. 추가적으로 병원의 부서와 부서 chief가 전공의와 전임의의 교육을 담당한 반면, 교수 승진 기준에 의과대학 학생교육이 포함된 것은 교수들에게 뚜렷한 메시지를 전달하였다.

As part of new criteria for faculty promotions, teaching was elevated to a new level. Every faculty member is expected to teach, and faculty promotions credentials are expected to begin with the faculty member’s teaching role. In addition, while hospital departments and department chiefs advocate for the teaching of residents and fellows, an emphasis on teaching medical students in the promotions criteria provides a strong message to the faculty about the importance of teaching medical students. 


추가로 새로운 승진 기준에서 의과대학은 기존의 융통성 없는 academic tracks대신 "areas of excellence"를 도입하여 그 중 하나로 "교육과 교육리더십"을 넣음으로써 승진에 교육이 강력한 위상을 가지게 되었다. 또한 교육 리더십은 다른 excellence area를 선택하더라도 거기에 supporting credential로서 들어갈 수 있다. 따라서 예컨대 임상연구에 excellence가 있는 교수가 추가적으로 교과목 책임자로서 의과대학 교육과정을 담당하게 되면 그렇지 않은 동료교수에 비해서 연구비를 더 적게 따도 되고 논문 출간을 덜 해도 된다.

Furthermore, in the new promotion criteria, the medical school abandoned its previous, rigid academic tracks (investigator, clinician-teacher) and replaced them with “areas of excellence,” one of which is “teaching and educational leadership,” a strong recognition of the value placed on education in academic promotions.Moreover, teaching leadership can be recognized as a supporting credential for a faculty member who chooses any area of excellence; therefore, a faculty member who serves as a course director for a major medical school course but whose area of excellence is in clinical investigation, for example,might be expected to generate fewer grants and publications than a colleague who does not have such a central teaching role (HMS and HSDM 2008).




Medical Education Reform Is Never Done


교육과정을 크게 변화시키기 위해서 많은 노력과 자원이 들어가지만, 교육과정 개혁은 "끝날 수 있는" 성질의 것이 아니다. 교육과정 개혁은 일시적 이벤트가 아니라 지속되는 과정으로, 교육과정 평가, 개혁, 개선, 재평가가 반복되어야 한다. 

Although the effort and resources that go into episodic major curriculum shifts are too substantial, distracting, and even draining to be repeated too frequently, curriculum renovation can never be done. Curriculum reform is not an event but an ongoing process of curriculum evaluation, innovation, renewal, and reevaluation; even the best of innovations require consolidation, nurturing, and tweaking.


이번 교육과정 개혁에서 학생들의 의사소통기술을 다루는 1학년의 환자-의사1과 역사 및 신체검진을 다루는 2학년의 환자-의사2는 거의 손대지 않았다.

Barely touched during our multi-year focus on the curriculum were the components of our preclinical curriculum in which we introduced students to communications skills (Patient-Doctor I in Year I) and to history and physical examination skills (Patient-Doctor II inYear II).


현재, 대부분의 임상 교육 장소에서 영상의학은 임상실습동안 한 달을 배우게 된다. 우리가 PCE를 통해 임상실습을 더 longitudinal하게 만들었지만 우리는 영상의학에 대한 교육은 그대로 두었다.

Currently, at most of our clinical sites, we teach radiology as a discrete onemonth clerkship during the clinical year. Even though we have changed the clinical curriculum by making it more unified and longitudinally developmental (the PCE), we have retained the model for teaching imaging that emerged when clerkships were fragmented and taken at different hospitals.


최근 의과대학생을 가르쳐본 사람이라면 디지털매체와 정보기술이 낡은 교육방법과 더 이상 맞지 않음을 느꼈을 것이다. 의과대학의 강의는 서로서로 조정과정을 거치지 않은 수많은 개별 교수들에 의해서 이루어지고, 대부분의 강의는 PPT에 의존하고 있어서 강의 출석이 점점 낮아지고 있다. 어떻게 강의에서 상호작용을 높이고 참여를 높일 수 있을까?

Anyone teaching medical students in this age of instant access to digital media and information recognizes that the timeworn teaching styles of generations past no longer resonate with contemporary students. Because lectures in medical school courses tend to be given by many different faculty members who do not coordinate with one another, and because most lecturers rely on PowerPoint presentations that do not engage students actively in interactive learning, attendance at lectures has declined. How do we make lectures more interactive and engaging? 


이 중요한 문제를 해결하기 위해서 우리는 Fundamentals of Medicine의 강의실 교육에 대한 TFT를 꾸렸다. 

To address these important issues,we have charged a task force on teaching in the classroom with developing a plan for Fundamentals of Medicine courses...

    • to reengineer large-group teaching, especially lectures; to revitalize tutorials; 
    • to introduce educational strategies for modeling and fostering critical thinking and analytical reasoning; 
    • to propose approaches for identifying, training and supporting faculty who will acquire new teaching skills in these areas, including the possibility of establishing a core teaching faculty; and 
    • to suggest approaches to evaluating student performance and competence more objectively in these teaching settings.


Conclusion


교육과정 개혁은 플렉스너 시기부터 항상 생기가 넘쳤고, 한 세기 전 플렉스너가 주창한 원칙들은 아직도 교육과정 개혁에서 작용하고 있다. 2006년부터 하버드 의과대학에 도입된 새로운, 더 통합된 교육과정은 교수들과 학생들의 지혜를 반영하였다. 

Curriculum reform has been a vibrant enterprise since the days of Flexner, and the principles he enunciated a century ago still resonate in contemporary efforts of curricular innovation.The new,more integrated curriculum that we introduced at Harvard Medical School in 2006 reflects the wisdom of faculty and students who surveyed the landscape of medical education and trends in medicine and society that influence education, and, indeed, the themes of our curriculum reform appear in the curriculum reform plans of most contemporary medical schools. 


우리가 초점을 맞춘 여러 주제들이 이미 2010년 카네기 재단에서 낸 보고서와 맞닿아 있다. 이러한 문제들을 발견해 낸 것에 대해 우리만의 고유한 것이라고 주장할 수는 없다. 그러나 우리의 비전은 새로운 혁신과 접근법을 이용하여 거대한 연구중심 대학을 곁에 둔 국가적 의과대학으로서 교육적 사명을 달성하는 것이다.

Not surprisingly, many of the themes upon which we focused are re-flected as well in the 2010 Carnegie Foundation report on medical education (Irby, Cooke, and O’Brien 2010), described elsewhere in this volume.We cannot claim originality in identifying the problems or even in the approaches we adopted to address them, but our vision was to embrace innovations and approaches that—building on our previous education initiatives and on needs specific and unique to our curriculum and our student body—would help us fulfill our education mission as a national medical school within a large research university.


모든 의과대학은 교육과정을 개선하고자 한다. 전문직으로서, 우리는 더 나아지기 위해 항상 노력하고 있지만 그 영향력을 측정하는 것은 쉽지 않다. 우리 대학에서도 교육과정 개혁의 효과를 측정하는 일이 쉽지 않았다. 우리 대학은, 운이 좋게도 다수의 우수한 학생들을 받고 있고, 상상할 수 있는 모든 영역에서 다양성을 갖추고 있어서 이들은 그 다양성만큼 다양한 진로를 추구한다.

All medical schools engage in curriculum reform.As a profession,we are restless in our search for improvement; however, metrics to measure the impact and success of curriculum change are limited.At our school, for example,measuring the impact of curriculum change has been challenging.We have been fortunate to attract a highly talented cadre of students, diverse in every imaginable dimension, who have gone on to pursue a list of career paths as diverse as they are.


우리 졸업생 중 다수는 아카데미아, 지역사회, 공공보건, 정부, 의학교육 등등 수많은 분야에서 에서 리더의 역할을 맡고 있다. 이러한 경향은 우리가 교육과정을 여러번 바꾸었음에도 변함이 없고, 이는 우리 학생들의 성공은 우리가 무엇을 가르치는가보다 우리가 어떠한 학생을 받아서 키우는지에 달려있음을 시사한다. 

Among our graduates,many find themselves in positions of leadership in academia, the community, public health, government, medical education, and a broad range of nontraditional careers.This trajectory has been consistent across multiple iterations of our curriculum, suggesting that our students’ success is a function less of what we teach than of whom we admit and nurture.


우리는 우리의 진화하는 교육 원칙, 과학의 진보, 임상의 발달, 사회적 힘, 보건 현실에 맞춰서 교육과정을 개혁하고자 했다. 일부 교육과정 개혁은 진정으로 패러다임 변화라고 할 수 있으며, 어떤 것은 어설프게 손만 본 것일 수도 있다. 교육과정을 어떤 수준에서 바꾸었든, 의학과 생명 그 자체에서 변화가 중요하듯 의학교육에서도 변화는 중요한 것이다. 도전과 변화의 새로운 발견, 혁신 없이는 우리는 굳어져서 그 자리에 머물게 될 것이다.

We reconsider and reform our curriculum based on evolving pedagogic principles, scientific progress, clinical advances, societal forces, and health realities. Some curricular reforms are truly revolutionary paradigm shifts, while others can be characterized as incremental tinkering.Whatever the level of curriculum reconfiguration, the argument can be made that change is as important an ingredient in medical education as it is in medicine and life itself; without the challenge and reinvention of change and innovation, we ossify and stagnate. 


그러나 궁극적으로 우리가 어떻게 가르치는지, 그리고 무엇을 가르치는지보다 중요한 것은, 우리가 학업적 탐구와 리더십을 위해서 교수와 학생간 파트너쉽을 촉진하기 위해서 어떠한 환경을 만드는가이다. Humphrey, Levinson, Smith는 이렇게 말했다. "교육의 질은 탐구하고 발견해나가는 환경 안에 교수자와 학습자간의 관계가 어떠한가에 달려있다. 교수자는 롤모델이자 리더이며, 이들은 의학을 가르치고 환자를 돌보고 실험실에서 새로운 발견을 함으로써, 결국 학생에게 영감을 준다." 또한 이들은 "의과대학에서 더 중요한 것은 학습의 가치, 비판적 사고, 전문직업성, 탐구, 학문, 그리고 지적 담화의 문화이다"라고 했다. 이것들은 오래동안 지속될 플렉스너의 가치이며 수많은 교육과정 개선 속에서도, 수 세대의 교수자와 학습자를 거치면서도 유지되어 왔다. 이것은 아브라함 플렉스너의 영구한 유산으로서 한 세기가 아니라 다가올 수 세기동안에도 지속될 것이다.

Ultimately, however, how we teach and what we teach are probably less important than the environment we create to facilitate a partnership between faculty and students in scholarly inquiry and leadership. As Humphrey, Levinson, and Smith (2010) articulated so eloquently: “it is the relationship of teachers and learners in an environment of inquiry and discovery that establishes the quality of education.Those teachers, role models, and leaders, by teaching medicine, caring for patients, and making discoveries in the laboratories and beyond, inspire generations of students.”They remind us as well that “The more important issue for medical schools rests on the values of learning, critical thinking, professionalism, inquiry, and scholarship and the culture of intellectual discourse” (p. 281).These are the durable, basic Flexnerian values that have survived multiple curricular revisions and generations of teachers and learners and that will remain Abraham Flexner’s durable legacy, not for a single century but for centuries to come.









 2011 Winter;54(1):36-54. doi: 10.1353/pbm.2011.0003.

Evolution of the New Pathway curriculum at Harvard Medical School: the new integrated curriculum.

Abstract

In 1985, Harvard Medical School adopted a "New Pathwaycurriculum, based on active, adult learning through problem-based, faculty-facilitated small-group tutorials designed to promote lifelong skills of self-directed learning. Despite the successful integration of clinically relevant material in basic science courses, the New Pathway goals were confined primarily to the preclinical years. In addition, the shifting balance in the delivery of health care from inpatient to ambulatory settings limited the richness of clinical education in clinical clerkships, creating obstacles for faculty in their traditional roles as teachers. In 2006, Harvard Medical School adopted a more integrated curriculum based on four principles that emerged after half a decade of self-reflection and planning: (1) integrate the teaching of basic/population science and clinical medicine throughout the entire student experience; (2) reestablish meaningful and intensive faculty-student interactions and reengage the faculty; (3) develop a new model of clinical education that offers longitudinal continuity of patient experience, cross-disciplinary curriculum, faculty mentoring, and student evaluation; and (4) provide opportunities for all students to pursue an in-depth, faculty-mentored scholarly project. These principles of our New Integrated Curriculumreflect our vision for a curriculum that fosters a partnership between students and faculty in the pursuit of scholarship and leadership.

PMID:
 
21399382
 
[PubMed - indexed for MEDLINE]


















Evolution of the New Pathway Curriculum at Harvard Medical School

the new integrated curriculum




Jules L. Dienstag



ABSTRACT 

1985년 하버드 의과대학은 "New Pathway"라는 새로운 교육과정을 도입하였다. 이 교과과정은 능동적, 성인학습을 바탕으로 하여 문제중심, 교수촉진 소그룹 교육방식을 통해 평생학습과 자기주도학습을 향상시키기 위해 개발되었다. Basic science 과정에서 임상적으로 관련있는 내용들이 성공적으로 통합되었음에도 불구하고 NP교과과정의 성과는 임상실습 이전의 교과과정에 국한되었다. 게다가 의료가 점차 입원환자에서 외래환자 중심으로 바뀌어가는 상황은 임상교육을 제한하는 요인으로 작용하였고, 임상교육에서 교수들이 전통적인 교수자의 역할을 하는 것도 제한적이 되었다.

In 1985, Harvard Medical School adopted a “New Pathway” curriculum, based on active, adult learning through problem-based, faculty-facilitated small-group tutorials designed to promote lifelong skills of self-directed learning. Despite the successful integration of clinically relevant material in basic science courses, the New Pathway goals were confined primarily to the preclinical years. In addition, the shifting balance in the delivery of health care from inpatient to ambulatory settings limited the richness of clinical education in clinical clerkships, creating obstacles for faculty in their traditional roles as teachers. 


2006년 HMS는 네 가지 원칙에 기반하여 더 통합적인  교과과정을 도입하였다. 네 가지 원칙은 다음과 같다.

In 2006, Harvard Medical School adopted a more integrated curriculum based on four principles that emerged after half a decade of self-reflection and planning: 

(1) 학생의 모든 학습경험에 기초과학/인구과학을 임상의학에 접목시킨다.

(1) integrate the teaching of basic/population science and clinical medicine throughout the entire student experience; 

(2) 교수-학생간 의미있고 집중적인 관계를 재정립하고, 교수의 참여를 높인다.

(2) reestablish meaningful and intensive faculty-student interactions and reengage the faculty; 

(3) 임상교육의 새로운 모델을 개발하여 환자경험에 있어 장기적 연속성을 가질 수 있게 하고, 학제간 교육과정을 만들고, 교수에 의한 멘토링을 하고, 학생 평가를 한다.

(3) develop a new model of clinical education that offers longitudinal continuity of patient experience, cross-disciplinary curriculum, faculty mentoring, and student evaluation; and 

(4) 모든 학생들이 심화적이면서 교수의 지도를 받는 연구 프로젝트에 참여할 기회를 갖는다.

(4) provide opportunities for all students to pursue an in-depth, faculty-mentored scholarly project.


이 New Integrated Curriculum의 네 가지 원칙은 "학생과 교수가 학문과 리더십을 향한 파트너십을 갖도록 하려는" 우리의 교육과정에 대한 비전을 보여준다.

These principles of our New Integrated Curriculum reflect our vision for a curriculum that fosters a partnership between students and faculty in the pursuit of scholarship and leadership.


Dean for Medical Education, Harvard Medical School, Gordon Hall, Room 103, 25 Shattuck Street, Boston, MA 02115.

E-mail: jules_dienstag@hms.harvard.edu.

Perspectives in Biology and Medicine, volume 54, number 1 (winter 2011):36–54

© 2011 by The Johns Hopkins University Press





플렉스너가 20세기 초 의학교육에 관하여 저술했을 때, 그는 의학교육과 의술(의학)은 과학적 방법에 기반해야 하며, 의학교육은 - 학문과 연구의 중심인 - 대학에 속해야 한다고 주장했다.

WHEN FLEXNER WROTE about medical education at the beginning of the 20th century, he articulated and amplified the emerging view that medical education and the practice of medicine should be grounded in scientific method and that medical education belonged in the province of the university, an environment dedicated to original scholarship and investigation (Cooke et al. 2006; Flexner 1910; Ludmerer 2010).


그러나 대부분의 20세기동안 플렉스너의 교리는 소위 "2+2 교육과정"으로 드러난게 고작이었다.

For most of the 20th century, however, the Flexner “doctrine” was expressed in a so-called “2 + 2” curriculum split: two years of basic science followed by two years of clinical medicine


1985년, Daniel Tosteson학장이 하버드 의과대학에 "New Pathway in General Medical Education"을 도입하였고, 당시 그는 학생의 능동적 참여와 자율적 학습, 즉 학습의 성인학습자적 접근을 지지하였다.

When then dean Daniel Tosteson championed the “New Pathway in General Medical Education,” a new curriculum introduced in 1985 at Harvard Medical School, he espoused a focus on active engagement by students in their own learning—in other words, adult approaches to learning


비록 첫 2년이 대부분 기초생명과학을 가르치는데 사용되고, 그 다음 2년은 임상의학을 가르치는데 사용되긴 하지만 New Pathway는 직접 임상수기를 실습 전에 익히도록 할 뿐만 아니라 임상내용을 초기에 접하도록 하는 특징이 있었다.

Although the bulk of the first two years was devoted to teaching the basic biological (and population) sciences and the last two years to teaching clinical medicine, the New Pathway was characterized by the early introduction of clinical content as well as hands-on clinical skills in the preclinical years.


NP 교육과정을 도입하는 것은 학교에 큰 변화를 가져왔다. 그러나 20년이 지난 지금 NP의 목표는 주로 첫 2년에 국한되고 있으며, 임상실습을 도는 2년간에는 거의 실현되지 않고 있다.

Adoption of the New Pathway curriculum was transformative for our school (Tosteson et al. 1994), but 20 years later, the consensus was that the New Pathway goals had been confined primarily to the first two years and, generally,were not reinforced or realized during the clinical years.


임상실습 시기에 학습환경 악화(erosion)되는 것은 교수자와 학습자 모두에게 손해였다. 이러한 입원환자 중심의 카오스적 상태로 인해 많은 희생자가 발생하였다. 교수의 가르치는 역할은 선생님/멘토가 아닌 서비스/기질 제공자로 바뀌어있었다. 그 결과로 우리의 많은 유능한 시니어 교수들은 가르치는 것을 점점 멀리하면서 학생에게 영감을 줄 수 있는 영웅으로서의 역할을 더 이상 하지 못하게 되었다. 게다가 임상교육이 각 과별로 분절되고 임상교육의 일관성이 떨어지면서 임상실습은 학생이 하나의 독립된 임상과에서 또 다른 독립된 임상과로 로테이션하는 것이 되었다. 지속적, 장기적 경험을 쌓지 못했고, 관리나 피드백이 없었고, 학문적/전문직업적/개인적 발달은 이루어지지 않았다.

This erosion in the learning environment took a toll on teachers and learners. As a casualty of the chaotic pace of inpatient medicine, the role of teaching faculty shifted from teacher/mentor to service/disposition provider. Consequently, many of our most talented, accomplished senior faculty disengaged from teaching, depriving students of their traditional role models and inspirational heroes. In addition, because of the fragmentation of segmented clerkships and the absence of coherence in clinical education as students rotated from one independent clinical service to another and from one teaching hospital to another, the clerkship experience was not conducive to supporting longitudinal experience, oversight/feedback, and attention to academic, professional, and personal development—important elements of student-centered learning.


2001년부터 LCME의 재인증을 준비하는 동안 자기성찰적 과정을 거치며 우리는 NP교육과정의 한계를 넘어서 이를 더 강화할 수 있도록 하는 다년간의 과정에 착수했다.

Beginning in 2001, with the introspective process of preparing for reaccreditation by the Liaison Committee on Medical Education, we began a multiyear process to consider how we could build upon the strengths of our New Pathway curriculum and address its limitations.


오년간의 여러 과정을 거쳐 교육과정 개혁의 네 가지 핵심 제안이 만들어졌다.

From a five-year series of blue-sky committees, task forces, and working groups involving hundreds of faculty and student representatives emerged four overarching recommendations for curriculum reform: 

(1) increase the rigor of the teaching of basic biologic and population sciences and integrate the teaching of science and clinical medicine throughout the entire student experience; 

(2) reestablish meaningful and intensive faculty-student interactions and reengage the faculty, including the most senior faculty, in the education mission, as teachers, mentors, and guides; 

(3) develop a new model of clinical education that is based on the educational and developmental needs of the student and that offers longitudinal continuity of patient experience, cross-disciplinary curricular content, faculty mentoring, and student evaluation; and 

(4) provide opportunities for all medical students to model the experience of discovery by pursuing in-depth scholarship in one area of inquiry and producing a written scholarly product under the guidance of, and in partnership with, an expert faculty member. 


또한 교육과정 개선 과정에서 교수법과 교육환경을 바로잡고, 인도주의/전문직업성/다문화적 감수성/의사소통능력을 강화하는 것에도 뜻을 모았다.

Also included in a consensus on curriculum reform was a commitment to optimize pedagogic methods and teaching environments and to emphasize and nurture humanism, professionalism, and cross-cultural sensitivity and communication skills (HMS 2004).




Introduction to the Profession


교육과정은 2주짜리 도입부 교과과정으로 시작한다. 다양한 관점에서 직업에 대한 넓은 시야를 갖도록 해주는 역할 등.

The curriculum begins with a two-week introductory course designed 

to provide a broad overview of the profession from a variety of perspectives; 

to introduce students to problem-based, collaborative learning; and 

to clarify the goals, expectations, and demands placed upon students as they make the transition to physicians-in-training and prepare to undergo a profound change in identity and world view. 


비록 전달하고자 하는 메시지가 이 때에는 와닿지 않을 지 모르지만, 이 과정의 주요한 목적 중 하나는 학생들이 학습과정에서 개개인의 책임을 느낄 수 있도록 하는 것이고, 학생들이 배워야 하는 것은 시험에 통과하기 위해서가 아니라 환자에 대한 의무를 다하고 환자에게 기여할 수 있는 최고의 의사가 되기 위한 것임을 아는 것이다.

Although the message may not penetrate this early in medical education, one of the objectives of the course is to help students begin to assume personal responsibility in the learning process, to abandon the mindset of learning what they need to know to pass a test in favor of thinking about medical education as preparation for becoming the best physician for—contributing and fulfilling their responsibility to—their patients.




Fundamentals of Medicine


임상실습 전 교육과정에서 계속 강조되는 것은 교과목간 통합이다. 

Emphasized in all components (basic science, clinical-introductory, population science) of the preclinical curriculum is content integration within and across courses.

첫 해에는 분자에서 세포로, 그리고 기관으로 가도록 설계되어있다.

The first-year curriculum is designed to build from molecules to cells to organisms, beginning with a molecular framework (biochemistry/molecular biology/cell biology) that integrates seamlessly with the transition to anatomy. 

두 번째 해에는 약리학, 병리학, 영양학 등이 통합된 형태로 병태생리학을 배운다.

In the second year, the teaching of pathophysiology is presented in an integrated way that incorporates aspects of pharmacology, pathology, and nutrition associated with individual systems. 

또한 인구과학과 의료윤리, 전문직업성, 사회의학, 임상역학 등이 포함된다.

In addition, a sequence of courses in the population sciences,which addresses important issues confronting physicians in the 21st century and which underlie contemporary medicine—medical ethics and professionalism, social medicine, clinical epidemiology and population health (Finkelstein et al. 2008), and health policy—are integrated with the teaching of the basic biological sciences and with introductory clinical exposures



Principal Clinical Experience

새로운 교육과정에서 가장 중요한 것은 임상 교육과정을 재구조화 하는 것이다. 전통적으로 3학년 때 필수 임상실습을 하게 된다. 분절화와 교육학적 연속성이 떨어지는 한계를 극복하고, 학생이 소외되는 것을 해소하기 위해서 2학년 5월부터 시작되어 한 병원에서 전체 핵심임상과를 포괄하는 48주짜리 장기프로그램을 도입하였다. 

An important centerpiece element of the new curriculum—the most tangible component of our curriculum reform initiative—is the restructuring of the clinical curriculum, which, traditionally, comprised the third-year core clinical clerkships.To overcome the fragmentation and absence of pedagogical continuity of core clerkship experiences and the marginalization of students on clinical services during the core clinical clerkships, we adopted an integrated 48-week long program beginning in May of the second year and incorporating all the disciplines of the core clinical clerkships (medicine, surgery, obstetrics/gynecology, pediatrics, neurology, psychiatry, radiology, and primary care) at one hospital site. The seed for this program was planted at Cambridge Hospital, a 118-bed community teaching hospital, in a pilot program beginning in 2004.


더 큰 병원(BIDMC, BWH, MGH)에서는 특정 임상과에 대한 집중적 노출 기회를 유지하도록 discrete immersion clerkship을 하였다. 48주짜리 프로그램(PCE)에 핵심 임상과 실습을 통합한 것이었다.

At our larger teaching hospitals—Beth Israel Deaconess Medical Center (BIDMC; Bell et al. 2008), Brigham andWomen’s Hospital (BWH), and Massachusetts General Hospital (MGH)—the pioneering elements of the Cambridge Integrated Clerkship were integrated with discrete immersion clerkships, which were preserved to provide an intense exposure to discipline-specific approaches to patient care.This 48-week program, the Principal Clinical Experience (PCE), is an integrated approach to the core clinical disciplines. In the PCE, students remain predominantly at one hospital site for all their discrete disciplinary clinical clerkships, instead of rotating from hospital to hospital, as had been done in the past.


접근법은 환자중심이고 학생중심 학습이었다. 따라서 학생들은 환자, 교수들과 더 많은 접촉을 하게 된다. 각 학생들이 어떻게 향상되는 것은 가까이 관찰하여 교정이 필요한 부족한 부분을 빨리 찾아낸다.

The approach is patient-centered and focuses on student-centered learning; accordingly, students have more contact with their patients and with their faculty. Each student’s progress is monitored closely, allowing for early detection of weaknesses in need of remediation and strengths that would benefit from reinforcement. Another important objective for the PCE is student-centered clinical learning that is uncoupled from internship preparation/auditioning.


요약하면, 학생들은 PCE site에서 실습을 하고, 교수들은 그들의 PCE학생에 대한 ownership을 갖는다. 추가적으로 학생들은 동료끼리 학습집단을 형성하여 서로 돕고, PCE는 편안한 학습환경을 만들어준다.

In short, students identified with their PCE sites, and the faculty took ownership of their PCE students. In addition, students formed a learning community with peer-group support, and the PCE provided a comfortable learning environment that fostered opportunities to create connections with faculty and staff. Faculty appreciated the opportunity to work across disciplines, the ability to get to know students well, and the ability to assist in student growth and development.




Advanced Experiences in Clinical Medicine and Basic Science

의과대학 4학년는 가장 구조화가 덜 되어있는 시기이다. 학습목표를 강화하고 임상 세팅에 대한 자신감과 익숙함을 향상시키기 위해서 4학년은 의학교육의 '발효' 시기와도 같으며, 자기성찰의 시기이고, 미래에 학문(진로)를 선택하거나 강화하는 시기이다.

The fourth year of medical school, the elective year, has been the least structured of the medical school experiences.As an important time to consolidate learning objectives and to increase familiarity with and confidence in clinical settings, the fourth year provides leavening to a medical education, a period of reflection, and an opportunity to select or reinforce the selection of a future discipline.


이번 의학교육 개혁을 할 때 4학년 과정에 대해서 고려했던 것은 의과대학의 마지막 학년은 느슨하게 구성되어서 중앙의 감독/지시/엄격한 관심을 줄이도록 해야 한다는 것이었다.

When we considered the fourth year during our medical education reform  initiative, our collective consensus was that the final year of medical school was organized very loosely with limited central oversight, guidance, or attention to rigor.


대부분의 변화들은 더 많은 자원, 새로운 교과목, 창의적 혁신이 필요했지만 그 어떤 것도 금방 달성되는 것은 아니었다. 되돌아보면 우리는 1학년과 2학년을 응축시키고, 더 견고하게 조직된 48주 PCE를 도입하고, 연구프로젝트를 야심차게 더하였는데, subinternship을 하나 더 추가한 것은 4년 교육과정에 들어가기에는 너무 과도해서 외과 subinternship은 권고되지만 의무는 아니게 하였다.

Many of the recommended changes will require more resources, new courses, and creative innovation, all of which cannot be achieved quickly. In retrospect, we realize that condensing Years I and II (Fundamentals of Medicine), launching a rigidly structured, 48-week Principal Clinical Experience, and adding a required scholarly project is an ambitious program, and that adding yet another subinternship was just too much to fit into a four-year curriculum a surgical subinternship will be recommended but not required.



In-Depth Educational Experience

하버드 의과대학에서 의학교육 개혁의 네 번째 원칙은 MD프로그램의 한 부분으로서 교수가 멘토를 하고 학문적으로 심화된 경험을 하는 것이었다.

The fourth principle of medical education reform at Harvard Medical School was to require, as part of the MD program, a mentored, scholarly, in-depth experience that would culminate in a substantive written product.


"Scholarship in Medicine Program"의 목적은 모든 학생을 연구자로 만드는 것이 아니라, Thesis든 다른 어떤 형태든, 문제를 찾고, 교수와 함께 그 문제를 해결하고, 자신이 한 일을 성찰하는 경험을 해보도록 하는 것이었다.

The objective of the “Scholarship in Medicine Program” is not to turn all our students into research investigators, but instead to model for them an experience in which they will identify a problem, work with a faculty member to address that problem, and prepare a reflective written summary of the work, either as a formal thesis or as a less formal written report


학생이 연구자의 길을 택하든 그렇지 않든, 그들은 궁극적으로 해결해야만 하는 문제에 맞닥뜨리게 될 것이다. 우리가 바라는 것은 학생들이 그러한 문제를 해결할 수 있는 능력을 갖추게 하기 위해서 그러한 종류의 실제 경험을 하도록 하는 것이다.

Whether or not students will pursue a formal investigative career, they will all encounter problems that beg for solutions.Our aspiration is for students to realize they are capable of tackling such problems and to provide them with a concrete experience in having addressed such a problem.


이것의 기본 개념은 답이 없는 문제를 어떻게 해결해야 하는가에 대해서 경험하는 것이고, 그 목표는 리더십의 근본이라 할 수 있는 깊은 성찰이 가능한 졸업생을 키우는 것이다.

The concept is to help them appreciate and experience how to address unanswered questions, and the objective is to generate graduates capable of deep reflection, which is at the heart of leadership.


이러한 연구프로젝트를 도입하는 것은 더 많은 교수들이 교육에 참여하게 하고, 교수-학생 파트너십을 강화하며, 의학교육 개혁 이니셔티브의 또 다른 핵심 중 하나인 교수들의 교육참여를 높이는 것에 기여하게 된다. 우리는 또한 학생과 교수 모두에게 의학교육은 정보 목록을 나열하여 제공하는 것이 아니라 교수자와 학습자가 '알려진 것'과 '알려지지 않은 것'사이의 경계를 확장시키기 위해 적극적으로 참여하는 것이라는 메시지를 전달하고자 했다.

Adoption of such a scholarly project requirement also draws more faculty into teaching and sustains faculty-student partnerships, thereby fulfilling one of the other pillars of our medical education reform initiative—to engage the faculty in the education of medical students.We also send the message to both faculty and students that medical education should not be designed to catalogue information but to encourage teachers and learners to participate actively in extending the boundary between what is known and what is unknown.


인문대학과 사회대학의 교수들은 학문 탐구의 정수를 다음과 같이 표현했다. "학생들에게 '알려진 것'의 경계를 확장시키고, 새로운 발견을 하는 희열을 경험하게 하고, 전혀 기대하지 않았던 것을 만들어내는 것으로부터오는 성취감을 맛볼 수 있게 하는 것이다"

University Faculty of Arts and Sciences, captured the essence of scholarly inquiry:“the ability to bring students into the process of pushing bounds of what is known—to experience the thrill of a new discovery, and to feel the sense of accomplishment that comes from creating something really unexpected.”









 2011 Winter;54(1):36-54. doi: 10.1353/pbm.2011.0003.

Evolution of the New Pathway curriculum at Harvard Medical School: the new integrated curriculum.

Abstract

In 1985, Harvard Medical School adopted a "New Pathwaycurriculum, based on active, adult learning through problem-based, faculty-facilitated small-group tutorials designed to promote lifelong skills of self-directed learning. Despite the successful integration of clinically relevant material in basic science courses, the New Pathway goals were confined primarily to the preclinical years. In addition, the shifting balance in the delivery of health care from inpatient to ambulatory settings limited the richness of clinical education in clinical clerkships, creating obstacles for faculty in their traditional roles as teachers. In 2006, Harvard Medical School adopted a more integrated curriculum based on four principles that emerged after half a decade of self-reflection and planning: (1) integrate the teaching of basic/population science and clinical medicine throughout the entire student experience; (2) reestablish meaningful and intensive faculty-student interactions and reengage the faculty; (3) develop a new model of clinical education that offers longitudinal continuity of patient experience, cross-disciplinary curriculum, faculty mentoring, and student evaluation; and (4) provide opportunities for all students to pursue an in-depth, faculty-mentored scholarly project. These principles of our New Integrated Curriculumreflect our vision for a curriculum that fosters a partnership between students and faculty in the pursuit of scholarship and leadership.

PMID:
 
21399382
 
[PubMed - indexed for MEDLINE]

















Summary of Educating Physicians: A Call for Reform of Medical School and Residency

Abstract:

This summary is based on the Jossey-Bass publication of the same title, Educating Physicians: A Call for Reform of Medical School and Residency (June 2010).



THE STUDY


본 연구는 '전문직이 되기 위한 준비'에 대하여 The Carnegie Foundation for the Advancement of Teaching에서 수행한 더 큰 프로그램의 한 부분이다. 본 연구는 Atlantic Philanthropies 의 지원을 받아 이루어졌으며, 결과물인 Educating Physicians: A Call for Reform of Medical School and Residency는 성직자, 법관, 엔지니어, 간호사 교육에 대한 보고서의 자매편이라 할 수 있다.

This study was part of a larger program of research by The Carnegie Foundation for the Advancement of Teaching on preparation for the professions. The work was funded by a grant from the Atlantic Philanthropies and the resulting book, Educating Physicians: A Call for Reform of Medical School and Residency, is a companion to reports on educating the clergy, lawyers, engineers, and nurses.


1909년 아브라함 플렉스너는 미국과 캐나다의 모든 155개의 의과대학을 방문하였고, 1910년 Medical Education in the United States and Canada라는 보고서를 저술하였다. 플렉스너는 현장 방문을 연구 프로토콜의 하나로서 도입한 선구자이며, 카네기 재단의 연구자들은 플렉스너로부터 많은 힌트를 얻었다.

Beginning in 1909, Abraham Flexner went to all 155 of the medical schools in the United States and Canada. In 1910 he released Medical Education in the United States and Canada. Flexner pioneered the idea of site visits as a research protocol, and Carnegie’s researchers took many of their cues from Flexner.


연구 프로토콜을 디자인하고 연구에 대한 허가를 받은 후 본 연구의 연구진은 AAMC의 LCME로부터 인증을 받은 미국 내 130개 의과대학을 방문하였다. 연구진은 열한 개 의과대학과 연계된 Academic medical center의 내과와 외과 레지던트 프로그램도 방문하였으며, 세 개의 non-university teaching hostpital도 방문하였다.

After designing the study protocol and receiving approval from human subject review boards of the Carnegie Foundation and the University of California, San Francisco, the research team visited eleven of the 130 medical schools in the United States currently accredited by the Liaison Committee for Medical Education of the Association of American Medical Colleges. The team also visited residency programs in internal medicine and surgery at the academic medical centers affiliated with those eleven medical schools as well as at three non-university teaching hospitals.


이 기관들은 미국 내에 위치한 연구중심 의과대학, 지역사회중심 의과대학, academic medical center, non-university teaching hospital을 모두 포괄하고 있다.

The institutions thus represent the array of research intensive and community-based medical schools, academic medical centers, and non-university teaching hospitals where U.S. medical education is located.


방문한 기관은 다음과 같다.

The sites were:

• • Atlantic Health, Morristown, New Jersey

• • The Cambridge Hospital, Cambridge, Massachusetts

• • Henry Ford Hospital and Medical Center, Detroit, Michigan

• • Mayo Medical School, Rochester, Minnesota

• • Northwestern University, Chicago, Illinois

• • Southern Illinois University, Springfield, Illinois

• • University of California, San Francisco, San Francisco, California

• • University of Florida, Gainesville, Florida

• • University of Minnesota–Duluth, Duluth, Minnesota

• • University of North Dakota, Grand Forks, North Dakota

• • University of Pennsylvania, Philadelphia, Pennsylvania

• • University of South Florida, Tampa, Florida

• • University of Texas Medical Branch, Galveston, Texas

• • University of Washington, Seattle, Washington



SUMMARY

현재 북미 의학교육의 청사진은 1910년 아브라함 플렉스너의 보고서(Medical Education in the United States and Canada)에 기술된 것을 따르고 있다. 

The current blueprint for medical education in North America was articulated in 1910 by Abraham Flexner in his report, Medical Education in the United States and Canada, a comprehensive survey of medical education prepared on behalf of The Carnegie Foundation for the Advancement of Teaching and at the request of the American Medical Association’s Council on Medical Education.


이제 의학교육은 다시 한 번 갈림길에 섰다.

Now medical education in the United States is at a crossroads:


플렉스너는 의학과 의학교육에 있어서 과거의 전통이나 관습이 아닌 과학적 탐구와 발견이 미래를 가리키는 것이어야 하며, 오늘날에 들어서 이러한 경고는 더욱 의미가 있다.

Flexner asserted that scientific inquiry and discovery, not past traditions and practices, should point the way to the future in both medicine and medical education. Today, this admonition seems even more compelling,


의학 내적인 환경의 힘과 그 변화에 대응하기 위해서 사실상 의료전문직 내 모든 기관은 의학교육에 대해서 다시 살펴볼 필요가 있다.

Responding to these environmental forces and changes within medicine, virtually every organization within the medical profession is re-examining medical education.


그리고 이들은 모두 근본적인 질문을 던지고 있다. "어떻게 의학교육을 향상시킬 수 있을 것인가?", "더 유능하고 더 공감할 수 있는 의사를 더 효과적, 효율적으로 키워낼 수 있는가?

all asking fundamental questions, such as: How can we improve medical education? Can we produce competent and compassionate physicians more efficiently and effectively?


연구진은 현재 의학교육의 상태를 점검하고 미래를 위한 방향을 제시하고자 하였다. 플렉스너의 발자취를 따라가며 전국의 의과대학과 대학병원을 방문하였다. 

The research team set out to examine the status of medical education and to chart the course for the future. Following in Flexner’s large footsteps, they visited medical schools and academic health centers around the country.


그러나 플렉스너 시대처럼 교육의 질에 있어서 의과대학 사이의 큰 격차가 있지는 않았다.

Unlike Flexner, however, they did not find great disparities in the quality of education among the medical schools visited.


1910년 이후로 발달하기 시작한 두 개의 중요한 외부 기관 - 인증시스템과 면허시스템 - 이 의학교육의 기본을 확고히 하고 있었다.

they recognized that two important external agents, the accrediting and licensing systems—which have become well-developed since 1910—ensure a baseline of quality in medical education


1909년 플렉스너가 비판한 이후 의학교육이 발전하고 있는 것은 맞으나, 플랙스너는 아마 의학교육의 낡은 구조와 형태가 지속적으로 의학교육을 둘러썬 내부/외부의 변화를 극복할 수 있을 것인지 의문을 가질 것이다.

Medical education has certainly evolved since Flexner’s critique in 1909. However, he might wonder if the old structures and forms of medical education can continue to meet the rising challenges, both internal and external, to medical education.


의학교육의 근본적 변화를 위해서는 새로운 교육과정, 새로운 교육법, 새로운 평가법이 필요하다.

Fundamental change in medical education will require new curricula, new pedagogies and new forms of assessment.


다행스럽게도, 이러한 비전은 이미 그 형태를 보여주고 있다.

Fortunately, this vision is beginning to take shape.


Time to Heal을 통해 Kenneth Ludmerer 가 지적한바와 같이 플렉스너가 옹호했던 방식의 개혁은 이미 그가 보고서를 내기 이전부터 시작중이었다. 마찬가지로 연구진은 많은 창의성과 혁신이 진행중임을 확인할 수 있었다.

As Kenneth Ludmerer points out in Time to Heal, the reforms that Flexner advocated were underway well before he issued his critique. Similarly, the researchers observed much creativity and innovation in the course of their field work and study of the literature on medical education and the learning sciences.


그러나 플렉스너가 그 당시에 그랬던 것처럼, 연구진은 의학교육이 많은 부분에서 부족하다는 것도 확인하였다.

However, as did Flexner in his time, the Carnegie researchers found medical education lacking in many important regards. 

수련과정은 경직되어있었고, 길고, 학습자 중심이 아니었으며

Medical training is inflexible, excessively long and not learner centered. 

임상교육은 입원환자 중심으로, 임상교수들은 점점 교육에 쓸 시간을 잃어가고 있었고 관련한 대부분의 업무를 레지던트에게 미룬 상태였다. 병원도 이들의 교육 업무를 지원하기에는 한계에 다다랐다.

They found that clinical education is overly focused on inpatient clinical experience, supervised by clinical faculty who have less and less time to teach and who have ceded much of their teaching responsibilities to residents, and situated in hospitals with marginal capacity to support their teaching mission. 

형식적 지식과 실제적 학습간 연결이 약했고, 환자집단, 의료전달체계, 효율성에 대한 관심은 점차 줄어들고 있었다.

They observed poor connections between formal knowledge and experiential learning and inadequate attention to patient populations, systems of health care delivery, and effectiveness. 

학습자들은 환자와 '함께'일할 기회가 부족했고, 시간에 따라 질환이 진행되고 회복되는 동안 환자가 어떻게 변하는지 볼 시간이 없었다. 학생과 전공의는 '의사노릇'이외의 의사의 역할에 대한 이해가 부족했다.

Learners have inadequate opportunities to work with patients over time and to observe the course of illness and recovery; students and residents often poorly understand non-clinical physician roles. 

의학교육은 학습과학(learning science)를 활용하지 못하고 있었고, 마지막으로 보건의료의 속도와 상업적 속성이 전문직의 기본적 가치를 손상시키고 있었다.

The team observed that medical education does not adequately make use of the learning sciences. Finally, time and again the researchers saw that the pace and commercial nature of health care impede the inculcation of fundamental values of the profession.



현장 방문에 앞서서 연구진은 교수진, 학장, 교육부학장, CEO등을 면담하였다. 대부분의 현장방문은 3일간 진행되었다.

Prior to each site visit, the team interviewed approximately ten faculty members, the dean, the education-related associate deans, and the CEO of the teaching hospital. Most site visits lasted three days, included the authors plus other Carnegie staff, and involved further interviews.


전체 현장방문동안 연구진은 총 184회의 면담, 104회의 포커스그룹 인터뷰, 100회의 참관을 하였다.

Over the course of the site visits, the team conducted approximately 184 interviews, 104 focus groups and 100 observations.


의학교육 및 학습과학과 관련된 문헌을 살펴보았으며 현장방문 전, 현장방문 중, 현장방문 후에 걸쳐서 AAMC, AMA, SDRME등의 여러 집행부와 직원들과 상담했다.

The team also reviewed the literature on medical education and the learning sciences as a means of guiding the interpretations of results and recommendations. Before, during and after the site visits, they consulted widely with the leadership and staff of the Association of American Medical Colleges, the American Medical Association, the Society of Directors of Research in Medical Education, and other medical professional organizations;




TOWARD A VISION FOR THE FUTURE OF MEDICAL EDUCATION


연구의 핵심 결과에 근거하여, 연구진은 의학교육에 대해서 네 개의 목표를 제언하였다.

Based on the study’s key findings, the team recommends four goals for medical education: 

학습성과의 표준화외 학습과정의 개별화

standardization of learning outcomes and individualization of the learning process; 

1. In the Flexner model two years of basic science instruction is followed by two years of clinical experience. This model has been perpetuated through the system of accreditation. However, medical education should now instead standardize learning outcomes and general competencies and then provide options for individualizing the learning process for students and residents


지식과 임상경험의 통합

integration of formal knowledge and clinical experience; 

2. In practice physicians must constantly integrate all aspects of their knowledge, skills and values. Moreover, physicians educate, advocate, innovate, investigate and manage teams. Students and residents need to understand and prepare for the integration of these diverse roles, responsibilities, knowledge and skills; and their learning in the basic, clinical and social sciences should be integrated with their clinical experiences. To experience integration of skills and knowledge in a way that prepares them for practice, medical students should be provided with early clinical immersion, and residents should have more intense exposure to the sciences and best evidence underlying their practice.


탐구 및 혁신하는 태도 함양

development of habits of inquiry and innovation; 

3. A commitment to excellence involves developing the habits of mind and heart that continually advance medicine and health care; this applies to institutions as well as individuals. To help students and residents develop the habits of inquiry and improvement that promote excellence throughout a lifetime of practice, medical schools and teaching hospitals should support the engagement of all physicians-in-training in inquiry, discovery and systems innovation.


전문직의 정체성 형성에 집중

focus on professional identity formation:

4. Professional identity formation—the development of professional values, actions, and aspirations—should be the backbone of medical education, building on an essential foundation of clinical competence, communication and interpersonal skills, and ethical and legal understanding, and extending to aspirational goals in performance excellence, accountability, humanism and altruism.





ESSENTIAL EDUCATIONAL GOALS


현재 교육과정 내용과 관련해서, 필수과정과 그 외의 것들이 좀 더 확실히 구분되어야 한다. 의학지식과 기술이 지속적으로 진화한다는 것을 감안하면, 5년 혹은 10년 지난 것들은 최소화되어야 한다.

• • With respect to curricular content, educators must distinguish more clearly between core material and everything else. Given that the medical knowledge base and the skills required to practice effectively are constantly evolving, it is crucial that curricular material with a five- or tenyear date-stamp is minimized.


어떤 단계에서든, 학습자들이 해당 단계에 요구되는 적절한 수준의 역량을 갖췄다면 불필요하게 반복하느라 시간을 낭비할 필요가 없다. 의학교육은 교육과정을 더 유연하게 디자인함으로서 개별 학습자들이 다양한 난이도의 학습을 할 수 있게 해야한다.

• • Learners at all levels should not be obliged to spend time unproductively repeating clinical activities once they have mastered the competencies appropriate to their level. Medical education must make much more use of readiness assessments and design curricula that are sufficiently flexible to allow individual learners to engage at various levels of difficulty. Eliminating non-core activities will free up time for students and residents to develop additional depth in areas of individual interest and to explore the non-clinical roles of physicians.


모든 단계에 있어서, '역량은 최소기준'임을 강조해야 한다. 이는 필수내용(core)와 관련해서 의사가 되려고 하는 사람이면 누구든 갖춰야 하는 것이다. 학습자는 수월성을 갖추기 위해서 노력해야하며, 이를 위해서 의과대학과 전공의 프로그램은 학습자가 평생에 걸쳐 수월성을 추구할 수 있도록 격려해야 한다. 

• • At every level, the approaches to teaching must emphasize that "competence means minimal standard"; it is the level of performance that all aspiring physicians must attain with respect to the core. It is essential that the aspirational nature of the quest for excellence be communicated to and inculcated in learners. For this reason, medical schools and residency programs must encourage learners to form lifelong commitments to pursuing excellence, instilling in students and residents the understanding that learning continues beyond the formal four- to ten-year training period, and preparing them to continuously incorporate the advancing knowledge base and procedural innovations of contemporary medicine.


의학교육은 근본적으로 학습자들이 스스로 동기를 부여하고, 스스로 학습하며, 임상경험으로부터 자극을 받고, 스스로의 진료 효율성에 대한 정보에서 자극을 받아 다른 사람들과 상호작용하는 것이어야 한다. 이같은 '학습 나선'은 이미 가지고 있던 지식, 임상경험, 새로운 질문을 서로 연결시켜준다. 

• • The fundamental pedagogy of medical education aims to have learners develop the motivation and skill to teach themselves, stimulated by their clinical experiences, information about the effectiveness of their care, and interactions with others in the clinical environment. This “learning spiral” connecting prior knowledge, clinical experience, identification of next questions, and formal study should be presented to medical students and residents as the basis for the metacognitive monitoring of their own approaches to learning. To the greatest extent possible, learners should approach curricular material, including the sciences foundational to medicine, through questions arising out of clinical work; this is as important for residents as it is for early medical students.


의학교육의 전 과정에 걸쳐서 학생과 전공의는 교수들과의 관계를 통해 도전정신을 갖고, 롤모델을 찾고, 개별지도의 기회를 갖도록 해야 한다.

• • Throughout their medical education, students and residents require strong, engaged relationships with faculty members that provide challenge, support and strong role modeling, as well as the opportunity for individual guidance.


의과대학과 전공의 교육 둘 다에 있어서, 평가를 통해서 학습자들이 '필수 영역'의 정해진 역량수준에 도달할 수 있어야 한다. 의과대학부터 수련후까지 이어진 학습의 연속체(continuum)에 걸쳐서 평가는 공통된 역량 영역(competency domain)을 사용하고, 어떤 단계에서 어느 수준에 도달해야하는지 기준을 제시해야 한다.

• • At both the medical school and residency levels, medical education must ensure, through assessment, that learners achieve predetermined standards of competence with respect to knowledge and performance in core domains. Assessment should use a common set of competency domains over the entire learning continuum with actual benchmarks specified by learner level. There are successful examples of this kind of assessment over a developmental spectrum from which medical education should learn. Such benchmarking, shared nationally, would allow medical schools, residencies and learners to understand how programs compare in terms of the capabilities of their entering learners, and what the education that they provide adds as measured by the performance of their graduates.


평가는 단순히 학생과 레지던트가 현재 무엇을 알고 있고 무엇을 할 수 있느냐를 알려주는 것을 넘어서 무엇을 더 해야하고, 다음 단계는 무엇인지를 알려줄 수 있어야 한다. 그러한 'gap'에 대해서 아는 것이 평생학습을 이끌기 때문이다. 역량에 대한 평가는 통합적이어야 하고 누적되어야 한다.

• • Assessment must go beyond what students and residents know and can do to address learners’ ability to identify gaps and next steps for learning, as it is the appreciation of those gaps that should drive lifelong learning. To discourage learners’ segmentation of knowledge and skills, and to reinforce the development of well-networked understandings of medical phenomena, assessment across the competencies should be integrated and cumulative.


수월성을 추구하는 것은 의학의 전문직으로서 갖춰야 할 특징이다. 전문성(expertise)는 헌신에서 나오는 것이 저절로 얻어지는 것이 아니다. 

• • Commitment to excellence is a hallmark—some would maintain the hallmark—of professionalism in medicine; expertise is likewise a commitment, not an attribute. This concept is fundamental to the team’s view of medical education and knits together the goals of standardization and individualization, integration, innovation and improvement, and identity formation.



위 목표들은 각각 의사의 전문직으로서의 정체성 영역에 해당된다.

Each of the goals refers to a dimension of professional identity of physicians:


표준화를 통한 질의 확보

• • the assurance of quality accomplished through standardization;

학습자를 인간적으로 대하고, 각각의 차이, 능력, 경험을 존중하며 높은 성취를 유도하는 교육적 과정

• • an educational process of individualization that treats learners humanely, respects their different interests, abilities and experiences, and encourages high achievement;

수련을 마친 후 뿐만 아니라 수련기간에도 사회에서 다양한 역할을 할 수 있다는 기대

• • the expectation that physicians play a broad role in society, even during training; and

모든 의사들이 현장(field building)에 참여한다는 주장

• • the insistence that all physicians participate in field building.


프로그램은 학습자의 경험을 고려해야 하며, 교육과정/교육법/평가법에 의해서 노골적으로 또는 은유적으로 전해지는 메시지를 경계해야 한다. 그렇지 않으면 그 프로그램에 의한 전문직 양성의 결과는 왜곡될 것이다.

Programs must be deliberate about learners’ experiences and vigilant about the implicit and explicit messages conveyed by the curriculum, pedagogy and assessment; otherwise, the professional development outcomes desired by the program may be distorted or subverted.



SUPPORTING EXCELLENCE THROUGH EFFECTIVE POLICY


미국에서 의학이 전문직으로 살아남을 수 있었던 것은 의학교육의 다양한 이해관계자들이 지속적으로 교육과 진료에 높은 기준을 요구해왔기 때문이다.

Medicine as a profession has thrived in the United States in part because medical education’s considerable array of stakeholders has continued to insist on high standards for education and practice. 


따라서 교육과정 학장, 전공의 프로그램 관리자, 교과목/실습 관리자가 교육 프로그램을 설계하는데 직접적으로 관계되어 있지만 이들도 역시 외부 요인에 의해 제약을 받게 된다. 의과대학과 전공의프로그램을 효과적으로 개혁하기 위해서는 여기에 영향을 미칠 수 있는 자금을 제공하는 사람, 규제, 전문직 단체 등도 이 노력에 활발히 관려해야 한다.

Thus, although curriculum deans, residency program directors and course and clerkship directors have immediate responsibility for the design and delivery of educational programs, they work within constraints imposed by external entities. In order for medical schools and residency programs to successfully innovate, the funders, regulators and professional organizations that control and influence medical education must be actively engaged in this reform effort.


1. 1. The Association of American Medical Colleges (AAMC) and medical schools work together to revise pre-medical course requirements and admission processes, ensuring appropriate socio-economic and racial-ethnic diversity of those in medical training.


1. 2. Accrediting, certifying and licensing bodies together develop a coherent framework for the continuum of medical education and establish effective mechanisms to coordinate standards and resolve jurisdictional conflicts.


1. 3. CEOs of teaching hospitals and directors of residency programs align patient care and clinical education to improve both and develop educational programs that are consistent with practice requirements.


1. 4. Deans of medical schools and CEOs of teaching hospitals support the teaching mission of the faculty by providing financial support, mentoring, faculty development, recognition and academic advancement. 


1. 5. Deans of medical schools and CEOs of teaching hospitals collaboratively make funding for medical education transparent, fair and aligned with the missions of both medical schools and teaching hospitals. 


1. 6. AAMC, American Medical Association (AMA), Accreditation Council for Graduate Medical Education (ACGME), medical specialty societies and medical schools advocate for sustained private, federal, and state funding commitments to support infrastructure, innovation, and research in medical education. Medical education is a public good that should be supported by society.


1. 7. AAMC, AMA, ACGME, medical specialty societies and medical schools collaborate on the development of a medical workforce policy for the United States. A variety of interventions addressing the cost of medical education, length of training, and practice viability ensure that the country has the mix of specialty and subspecialty physicians to meet the needs of the population.





Summary of Educating Physicians: A Call for Reform of Medical School and Residency

Printer-friendly versionPrinter-friendly version
Molly Cooke, David M. Irby, Bridget C. O'Brien
Abstract: 

This summary is based on the Jossey-Bass publication of the same title, Educating Physicians: A Call for Reform of Medical School and Residency (June 2010).


(http://www.carnegiefoundation.org/elibrary/summary-educating-physicians)





Cooke, M., Irby, D. M., & O'Brien, B. C. (2010). Educating physicians: a call for reform of medical school and residency (Vol. 16). John Wiley & Sons.

























The use of portfolio learning in medical education

DAVID SNADDEN & MARY THOMAS

Tayside Centre for General Practice, University of Dundee, Scotland, UK







포트폴리오 학습이란 무엇인가? What is portfolio learning?


포트폴리오에는 '학습과 관련된 문서'들, 그리고 '그로부터 무엇을 배웠는가'에 대한 설명이 포함된다. '학습과 관련된 문서'는 다음의 것들을 포함한다.

In practice portfolios include documentation of learning, and an articulation of what has been learned. The documentation can include:


· records of events or experiences;

· lists of critical reviews of articles read;

· projects carried out;

· teaching sessions attended;

· videoclips, educational events and patients seen.


'그로부터 무엇을 배웠는가' 에는 다음의 것들이 포함된다.

The articulation of what has been learned may include: 


· written reflective accounts of the events documented;

· personal reflections kept in the form of a journal or diary.


문제가 무엇인지, 무엇을 배웠는지, 앞으로 무엇을 더 배워야 하며 그 계획은 어떻게 되는지에 대한 성찰이 포함된다.

These would include reflections on problem areas, what has been learned, what has still to be learned and plans for how new learning will be tackled.



배경 The background to portfolio learning in medical education


포트폴리오가 새로운 것은 아니다.

Portfolios are not new,


평가도구로서도 매력적인데, 일정 기간에 걸쳐 임상 수행능력을 평가할 수 있을 뿐만 아니라, authentic assessment의 한 방법이기도 한다.

They are also attractive as assessment tools in that they have a potential to assess clinical performance over a period of time, constituting one form of authentic assessment


학습에 따라서 학습자의 행동, 직관, 수행능력이 달라진다. 성인학습자적, 자기주도적, 성찰적 학습은 수동적 학습을 장려하는 환경에서는 일어나기 힘들다.

In other words learning which impacts on the behaviour, intuition and performance of the learner. Adult, self-directed and reflective learning are deemed less likely to occur in environments where passive learning is encouraged,


Brookfield와 Boud는 교육 프로그램 자체가 성찰적인 요소(reflective component)를 포함함으로써 상호작용을 촉진시켜야 한다고 주장했다.

Brookfield (1986) and Boud (Boud & Walker, 1993) suggest that educational programmes should be interactive, include reflective components and be related to experience.



포트폴리오 학습 : 미국 교육 시스템에서의 발전 
Portfolio learning: its development in the American school system.


비록 포트폴리오가 그래픽아트 분야에서 오랜기간 사용되어오긴 했지만, 북미 교육 시스템 내에서 포트폴리오는 성찰을 촉진시키기 위한 기제였다.

Portfolios as mechanisms to enhance reflection were developed within the North American school system - though it could be argued that portfolios in terms of the graphic arts have been in existence for many years.


포트폴리오 학습은 빠르게 도입되었으나, 평가 측면에서 포트폴리오의 활용과 개발에 대한 평가는 제대로 이루어지지 않은 채 도입된 것이었다.

The rapid adoption of portfolio learning, including its use in assessment, seems, however, to have been implemented with little true evaluation of the use and development of portfolios


평가자들간의 컨센서스는 쉽게 달성되지 않았고, 준거, 효과적 수련, Rubric, 상식(Common values), 학생 수행능력에 대한 이해 등에 따라서 많이 달라졌다. 

Consensus amongst raters was not achieved easily and depended on clearly articulated criteria, effective training, and rubrics that reflected shared experience, common values and a deep understanding of student performance.


그럼에도 불구하고 포트폴리오 평가의 도입은 교사들의 활동에 영향을 주었다.

Nevertheless the implementation of portfolio assessment seems to have influenced the activity of classroom teachers.


이들 초등학교 프로젝트는 포트폴리오 기반 학습이 학교에서 이루어지는 것이 교사와 학생 모두에게 쉽지 않은 일이지만, 교실의 분위기를 드라마틱하게 바꾸고, 교사-학생간 상호작용의 특성을 변화시켰으며, 학생과 교사 모두가 활발하게 평가를 위한 준거를 개발하고 적용시키는 모습으로 바꾸어놓았다. 

These elementary school projects lead to the conclusion that portfolio-based learning, in the school context, is challenging for teachers and students, can dramatically alter the climate of the classroom and the nature of teacher/student interactions and has brought assessment into the classroom with students and teachers actively engaged as they generate and apply criteria to each other’s work.



간호학과 의학에서의 포트폴리오 Portfolios in nursing and medicine

영국에서 포트폴리오는 간호학 교수들에 의해서 전격적으로 도입되었으며, 지금은 간호사와 조산사 수련 기관에서의 형성평가와 총괄평가를 위해서 사용되고 있다. 

In the UK portfolios have been adopted with enthusiasm by the nursing profession and are now used for both formative and summative assessment in several nurse and midwifery training institutions (Jasper, 1995a) and have also been supported by the UK Central Council for Nursing and Midwifery to track professional development (Jasper, 1995b).



하지만 다음과 같은 문제가 드러났다.

· 개별적 평가와 대규모 평가에서 활용시 갈등 There may be conflict for portfolios serving both the purposes of individual learning/assessment and large-scale assessment.

· 업무가 표준화되지 않은 상태에서 포트폴리오 평가가 가능한가? Can portfolios be assessed if the work is not standardized?

· 학생의 태도, 감정, 행동을 평가하는 준거는 무엇이 되어야 하는가? What criteria should be involved in making judgements about students’ attitudes, feelings and behaviour?

· 프라이버시와 기밀과 같은 개인적인 내용은 어떻게 해야 하는가? What about issues of privacy and confidentiality as some portfolios contain highly personal material?


교사들은 포트폴리오가 좋은 학습 도구라고 생각했다.

the tutors felt that a portfolio was a valuable learning tool from their point of view and that of their students.


학생측에서 가장 큰 문제는 무엇을 해야하는가에 대한 불확실성에 대한 걱정과 개인적 감정을 기록하는 것에 대한 불안감이었다.

The main problems for students were uncertainty regarding what was expected of them and anxiety about recording personal feelings..


Glen과 Hight는 영국 간호사와 조산사 교육에서 포트폴리오를 논하면서, 포트폴리오의 주요 기능은 교육 변화의 촉매재라고 하였다. 즉, 포트폴리오를 만드는 과정이 그 결과보다 중요하다는 것이다.

Glen & Hight (1992), writing on the place of portfolios in nursing and midwifery education in the UK, also raised the question of whether the main function of portfolios was that of a catalyst for educational change, in other words was the process of developing portfolios more important than the product.


포트폴리오 기반 학습은 이제 영국의 일반진료에도 적용되고 있다.

Portfolio-based learning has now been actively promoted in general practice in the UK.


Practitioner와 Mentor가 함께 일하는 방식으로 GP에 대한 보수교육의 목적으로 활용되었다.

Portfolio development in general practice has continued with descriptions of portfolios being used to support continuing education for established general practitioners in which practitioner and mentor work together, the practitioner then submitting a portfolio which is assessed against a number of criteria to allow the award of postgraduate education credits (Treasure, 1996; Challis et al., 1997).


이 시점에서 포트폴리오와 로그북의 차이를 강조하는 것이 필요할 것이다. 로그북은 수행한 업무의 모음으로서 비판적 성찰을 담고 있지 않으며, 학습을 촉진한다기보다는 정기적으로 하는 업무(chores)에 가깝다.

It is perhaps important, at this point, to emphasize the difference between portfolios and the log-books that have been introduced into some higher specialist training programmes. Such log-books are collections of tasks carried out, they do not contain critical reflections and may be seen as chores rather than as a way of stimulating learning


포트폴리오는 자신의 수행에 대한 비판적 성찰을 담고 있으며, 로그북에서는 이루어지지 않는 새로운 방식의 학습이 이뤄진다.

Portfolios contain critical reflection on practice and as such challenge the learners’ performance and learning in a way that log-books do not.


교육자들 사이에서는 포트폴리오 기반 학습이 유명해졌지만, 여전히 이론가들이나 교육과정을 조직하는 사람들은 여전히 몇 가지 의문을 갖는다.

Despite the popularity of portfolio-based learning amongst educationalists, theorists and course organizers there still seem to be a number of outstanding questions:


· What do learners think of portfolio learning?

· What is the effect of portfolio learning on their education?

· Is there a valid assessment component?

· Is there a place for these ideas in general medical education?


이 질문들은 Scottish General Practice Training Regions에서 두 연구에 의해서 설명되었다. 

These questions were addressed in an action research project carried out in two Scottish General Practice Training Regions (Tayside and Highland) which has helped develop a number of principles concerning how portfolio learning can be developed in general practice and whether it has a place.



의학교육에서 포트폴리오 개발 Developing a portfolio in medical education


포트폴리오는 어떻게 생겼는가? What does a portfolio look like?


사용자가 만족한다면 어떻게 생겼는지는 중요하지 않다.

It really does not matter as long as the user is happy with it.


포트폴리오란 무엇인가? What is in a portfolio?


포트폴리오의 구성요소들은 성인학습자 그리고 성찰적 학습(reflective learning)의 개념에 기반하고 있다. 학습과정에 걸쳐서 스스로의 요구와 아젠다를 설정해야 하며, 자신의 임상수행, 그 기간동안 어떤 경험을 했는지도 설명할 수 있어야 한다. 

The components of a portfolio described here are based on the concepts of adult and reflective learning. Throughout learners are asked to identify their own needs and agendas, often through reflection on their own clinical practice and experiences they have in their learning period.


다음은 포트폴리오에 들어갈 수 있는 것들이다.

The following are examples of what a portfolio can contain:

· critical incidents of events with patients;

· a reflective journal or diary;

· tutorials and learning plans, and re¯ection on them;

· routine clinical experiences;

· exam preparation material;

· video recordings of consultations and other relevant material;

· audits and project work;

· critical reviews of articles;

· feedback material;

· management material.



    • Critical incidents of events with patients. Critical incidents are those incidents in a working day that are memorable for going well or going badly. (특별히 기억에 남거나 잘 하지 못했던 것들)

    • A reflective journal or diary. Again this does not need to be extensive, but does require some discipline in committing thoughts to paper. The benefit of this is that it encourages learners to reflect on what they are doing, what they are finding difficult and what they are trying to plan for. 

    • Tutorials and learning plans. Descriptions of tutorials that have happened and the follow up of learning needs that have resulted from them can be useful, but more important are some brief reflective notes on which areas within the tutorial were identified as strengths, and which as problem areas for the particular leaner.

    • Routine clinical experiences. There is a lot of routine work in medicine, therefore it is important to focus occasionally on routine incidents in the same way that critical incidents are described above.

    • Exam preparation material. Exams and assessments are an inevitable part of education. Most students and young doctors prepare for examinations through course work and material collected from this and reflection on these can help in their preparation.

    • Video recordings of consultations and associated material. Communication training is now commonplace in medicine and videos of simulated and genuine clinical consultations are used more and more to teach and assess progress in this area.

    • Audits or other project work carried out. Similarly, audits and other project work can form part of a portfolio, again giving evidence of work carried out.

    • Articles and texts reviewed critically. Current emphasis on critical appraisal suggests that all students and doctors should be able to review articles and books critically.

    • Anything else. The important thing is to give learners freedom in what they collect and how, so anything else they wish to include can become part of a portfolio.



포트폴리오는 어떻게 활용할 수 있는가? How can the material in a portfolio be used?


몇 가지로 활용될 수 있다.

- 개인적 발전을 추척하는 방법

- 토론을 촉진하고 미래 학습의 계획을 세우는 Formative Learning

- 공식적(총괄)평가 도구

Portfolios can be used in a number of ways:

· as a method of personal development and a way of tracking progress;

· formatively as a learning tool to stimulate discussion and to plan future learning;

· as a formal (summative) assessment tool.



개인적 발전을 추척하는 방법으로서의 포트폴리오
As a method of personal development and a way of tracking 
progress. 


포트폴리오는 튜터나 멘토의 지원 없이도 자기주도학습의 목적으로 사용될 수 있다.

Portfolios can be used for self-learning as a personal activity without support and input from a tutor or mentor.


그러나 튜터의 지원이 없는 상태에서 포트폴리오를 만드는 사람은 거의 없을 것이다. 포트폴리오와 그 주변 시스템을 세팅할 때 효과적인 튜터와 멘토의 네트워크는 그 시스템의 성공에 있어 매우 중요하다.

Lack of tutor support, however, will mean that few will create a portfolio. In setting up any system based around portfolios an effective network of tutors and mentors will be important in determining the effectiveness and success of the system.



토론을 촉진하고 미래 학습 계획을 세우는 도구로서의 포트폴리오

Formatively as a learning tool to stimulate discussion and to plan future learning. 


어떤 포트폴리오든지 그것이 활용되는 과정에 따라 그 유용성이 달라진다. 비록 스스로 성찰하는 것이 종종 도움이 되지만, 진정한 의미의 성찰은 다른 사람(튜터)의 도움이 필요하다.

The content of any portfolio is only as useful as the process by which the materials is used. Although reflecting to oneself through a reflective journal is therapeutic for some, real and challenging reflection requires another person, the trainer or tutor.


다음의 스텝을 따르게 된다.



Step 1

The learner:

· identifies an experience-this may be from an entry in the portfolio,

· describes it.

The trainer:

· listens actively-this means using verbal and non-verbal encouragement;

· is not judgmental;

· avoids interpretations;

· only challenges statements that are at odds with behaviour


Step 2

The learner:

· reflects on the experience trying to identify what has been learned.

The trainer:

· clarifies;

· summarizes;

· reflects what the learner has said;

· does not interpret.


Step 3

The learner:

· identifies new learning needs;

· devises a plan to met these.

The trainer:

· facilitates this process;

· may now suggest answers or offer advice, but must make it clear that there may be other answers.



이 과정에서 도움이 될 만한 질문은 다음과 같은 것들이 있다.

Here are some examples of the sorts of questions that can be helpful in this process:

· What happened?

· What did you notice/find intriguing/exciting/worrying?

· What could you learn from this?

· How would you go about learning it?

· How would you know you have learned it?



이러한 과정이 끝나면, 포트폴리오를 이용한 학습 계획을 세워야 한다. 학습의 다음 단계가 무엇인지 적어보는 것은 나중에 진짜로 그것을 달성했는지, 혹은 어떤 행동이 이뤄졌는지 확인하는데 중요하다. 또한 포트폴리오는 피드백 기회를 제공하기도 한다.

At the end of all this it is important to commit to the portfolio some sort of learning plan. Writing down the next steps in a learning process is an important way of checking up later to see what has happened or what action has been taken. In addition to this the portfolio can give a valuable opportunity to stimulate feedback.



공식적(총괄) 평가도구로서의 포트폴리오

As a formal (summative) assessment tool. 


포트폴리오는 어느 기간에 걸친 수행능력을 평가하는 한 방법으로서 매력적인 평가도구이다. 즉, 이론을 잘 적용하는지, 수행능력이 어떠한지를 평가할 수 있다. 이것을 Authentic assessment라 부른다. 그러나 공식적 평가 목적으로서 포트폴리오를 활용할 경우 순수하게 학습적 목적으로 활용할 경우와 전혀 다른 내용이 들어갈 수 있다는 것이 강조될 필요가 있다.

Portfolios are attractive as assessment tools as they appear to be one way of assessing performance in practice over a period of time, in other words they assess the application of theory and the performance of the student or doctor. This is now called an authentic assessment. It must be stressed, however, that if portfolios are to be used for formal assessment purposes learners may keep quite different material than if the portfolio is to be used for purely learning purposes.


공식적 평가는 어떤 자료가 수집되는가에 있어서 부정적 영향을 주기 쉽다.

negative impact formal assessment would have on the material collected


포트폴리오를 평가하기 어려운 한 가지 이유는, 그것이 개인적 내용을 담고 있기에 객관성이 거의 없으며, 학생간 의사간 비교가 어렵게 된다는 점이다. 평가는 또한 노동집약적인데, 평가자는 학습자의 목표와 그에 따라 어떤 근거를 수집하였는지를 꼼꼼히 살펴보아야만 한다.

One of the reasons that portfolios are difficult to assess is that they contain personalized material with few points of objectivity that allow comparisons to be made between students or doctors. Assessment is also labour intensive and requires careful reading and response to a learner’s objectives and evidence of whether they have been met. 


개인적 학습과 성장을 촉진하는 기전으로서는 효과적이나 비교를 위한 평가에는 어려움이 있다.

This means they are effective as mechanisms to support and facilitate personal learning and growth, but cumbersome in comparative assessments.


대규모 포트폴리오 평가의 질에 대한 연구는 거의 없으며, 지금까지 이뤄진 것도 대부분 미국 학교 시스템 내에서 이루어져왔다.

There is little research available in the literature on the technical quality of large-scale portfolio assessments, and what has been done is largely within the American school system.


새로운 평가 방법이 학습에 대한 새로운 아이디어로부터 만들어져야 하는 어려움과 포트폴리오 평가의 어려움을 말해준다.

This illustrates the difficulties in assessing portfolios and how new methods of assessment will need to be developed in the context of new ideas on learning.


평가에 대한 전통적인 관점에 사로잡혀 있다면 포트폴리오의 효과적 평가는 어렵다. 다른 말로 하면, 학생간 서로 비교하여 학점을 주고, 점수를 주는 것은 본질적으로 비-표준화된 방법인 포트폴리오에 적합하지 않은 것이다. 포트폴리오는 비-비교적 평가 방법이 개발되기 전까지는 평가가 어려울 수 밖에 없다. 

This in essence means that the effective assessment of portfolios will continue to be difficult if we remain trapped within our traditional view of assessment. In other words, assessment based on comparing students with each other and with issuing grades or marks does not fit easily with portfolios which are essentially non-standardized. Portfolios will remain difficult to assess until new non-comparative assessment methods are developed. While the emphasis on grading, excellence and comparison between students and doctors remains in assessment and medicine, it is likely that portfolios will have a greater place as a learning tool than as a summative assessment tool,



포트폴리오의 개념을 어떻게 도입할 것인가? How do you introduce the concept of portfolios?


포트폴리오는 다양한 방법으로 사용가능하며, 학생과 의사 모두에게 포트폴리오가 무엇을 위해 사용되고, 어떻게 사용할 것이 기대되는지를 명확히 해줘야 한다. 몇 개의 ground rule 이 매우 중요하다.

Also, as portfolios can be used in a number of ways it has to be absolutely clear for students and doctors what the portfolios will be used for and how they are expected to use it. For this reason the early establishment of some ground rules is very important


Ground rules.

· 포트폴리오에 쓰인 것은 누가 보는가? Who sees what is written in the portfolio?

· 누가 포트폴리오를 쓸 수 있는가? Who can write in a portfolio?

· 쓰여진 내용에 대해서 어떤 일을 하게 되는가? What will happen to the written material?

· 평가는 어떻게 되는가? Where does assessment ®t in?

· 언제 포트폴리오가 사용되며, 시간은 얼마나 할당되는가? When will the portfolio be used and how much time will be set aside for it?

· 어디에 보관될 것인가? Where it will be kept?


아래는 위에 대한 몇 가지 아이디어들이다. 

Here are some ideas on these topics that have come from our research. These may seem a bit restrictive, but they help give learners a feeling of control and confidence at the start of using a new learning system. In practice they become quite open with their portfolios as they represent a record of their development; the ground rules, however, are essential in allowing this openness to develop


누가 보는가? Who gets to see the portfolio?


의무기록과 비슷한 수준의 보안이 유지되는 것이 중요하다.

it is important that they are treated with the same degree of confidentiality as any medical record

가장 효과적인 성찰 코멘트는 교사와 학습자가 정기적으로 볼 때 가능하다.

The most effective reflective comments seem to be those that both trainer and learner regularly see.


누가 쓰는가? Who writes in it? 


어떤 부분은 교사와 학습자의 기여가 모두 포함될 수 있다.

Some portfolios may contain contributions from trainer and learner. 


어디에 사용되며 얼마나 시간이 배정되는가?

When will the portfolio be used and how much time will be set aside for it? 


학습자의 요구에 맞는 교육과정 개발에 사용될 수 있음. 

Used imaginatively a portfolio will help develop a curriculum for a student or doctor that is relevant to a learner’s needs.


쓰여진 내용에 대해서 어떤 일을 하게 되는가? 

What happens to the written material in the portfolio?


학습자의 포트폴리오는 자기자신의 것이며, 훈련에 관한 자기만의 기록이다. 무엇이 될 것인가는 학습자에 달렸다.

Learners’ portfolios are theirs, they are their own personal record of their training, it is up to them what happens to them.




시작하기 

Getting started


가장 중요한 것은 교수와 학생에게 어떻게 사용할 것인지 정보를 주는 것이다.

More important is the information that is given to faculty and students on how to use portfolios


교수와 학생에게 포트폴리오와 친해지게 하기

Workshops to familiarize faculty and students 


대부분의 의사와 학생은 포트폴리오 학습에 대한 우려가 해소될 때 까지 사용하려고 하지 않을 것이다. 교사와 학습자를 모두 모아놓고 이 장애물을 해결하기 위해서는 토론과 도전을 통해서 아이디어를 모아야 한다.

Most doctors and students will not consider portfolio learning unless some of their concerns and apprehensions are dealt with. Bringing groups of learners and teachers together to explore ideas through discussion and challenge is fundamental in dealing with some of these barriers.


워크숍을 통해서 우려를 해소하고, ground rule을 개발하고, 앞서 언급된 세 개의 튜토리얼 스텝을 연습할 수 있다.

Workshops can deal with concerns, develop ground rules, refine written notes and help staff practice the three tutorial steps described earlier.


워크숍에서 중요한 부분은 포트폴리오를 사용한 사람과 사용하지 않은 사람이 서로 만나는 것이다.

An important part of any workshop is to meet others who have and have not used portfolios


또한 다른 전공의 사람을 만나는 것도 마찬가지로 중요하다.

Equally important is exposure to people from other disciplines


FAQ

Some frequently asked questions


시간이 많이 드나요? Does keeping a portfolio take a lot of time?


Portfolios do take a little time, but not as much as first imagined. In many ways portfolios are a parallel to medical records. Few doctors see patients without writing something down about them to help them next time they or their colleagues see a patient.


A few minutes at the end of each day is all that is needed


상호 관계에 영향을 미치나요? Does a portfolio influence relationships?

This is a difficult question to answer.


Where the relationship is good portfolios seem to work well, but they are less likely to do so where the relationship has some problems.


모든 사람이 만족하나요? Is everyone happy to use a portfolio?


No. Some learners have great difficulty seeing the relevance of intense reflective learning. Young doctors have a variety of learning styles and some who have very active styles of learning in terms of their desire to acquire knowledge do not wish to use such a system, often perceiving it as time wasting or not fitting their needs.



얼마나 오래 사용하나요? How long do people use portfolios for?

One of the most interesting phenomena of portfolio use amongst GP registrars is the bridging phenomenon (Snadden & Thomas, 1998). The transition from working in the fairly sheltered environment of hospital to the culture of uncertainty and isolation that is general practice is not easy. Portfolios assist in the transition by capturing and supporting the young doctor’s difficulties in adapting to a complex and changing environment.


포트폴리오를 쓰면 도움이 된다고 느끼나요? Do people feel they have benefited from keeping a portfolio?

For those that keep portfolios there are several benefits. They help focus teaching sessions on material that is

relevant to them.


In addition to this they help track learning by keeping a record of what the learner has achieved. More importantly the learner can examine areas in which he/she is not confident and plan new learning based on these.


Portfolios explore performance in practice and as such they are a challenging, and confidence building, learning mechanism for both learner and teacher.



Conclusion


A well-completed portfolio will give a young doctor or student and his/her teacher a written record of what has been accomplished in a training period.






Research Article

The use of portfolio learning in medical education

1998, Vol. 20, No. 3 , Pages 192-199 (doi:10.1080/01421599880904)

SUMMARY Portfolio learning is a method of encouraging adult and reflective learning for professionals. Derived from the graphic arts it is based on developing a collection of evidence that learning has taken place. Portfolios are being used more in nursing and medical education. They are excellent tools for assisting formative assessment and professional development. They are also being developed for formal assessment processes, being seen as one form of authentic assessment particularly suited to evaluating the application of theory in practice. There are, however, difficulties associated with the lack of standardization of the content of portfolios in terms of developing assessment instruments. As long as formal assessment is based on the philosophy of measurement, portfolios will be difficult to assess and will require the development of noncomparative methods of assessment. This article describes some of the history of portfolios, how to develop a portfolio to assist learning or for professional development purposes and discusses some of the current thinking about the use of portfolios for formal assessment.




Read More: http://informahealthcare.com/doi/abs/10.1080/01421599880904

포트폴리오 평가와 의학교육에의 적용

가톨릭대학교 의과대학 의학교육학과

김 선






서 론

교육평가란 교육의 목표가 얼마나 잘 달성되었는지를 검토하는 작업으로서 교육과정에서 필요로 하는 학생에 관한 정보를 수집하고, 교육과정의 효율성을 판단하며, 이에 대한 달성도를 밝히는 과정이기 때문에 전체 교육과정 중 빼어놓을 수 없는 부분 중의 하나이다.


성태제 (2002)는 교육평가를 교육과 관련된 모든 것을 체계적이고 과학적으로 측정하고 관찰하여 가치와 질 등을 판단하는 주관적 행위라 하였다.


채선희 (1998)는 우리가 ‘어떻게 평가할 것인가’라는 기술적인 문제에만 치중해 온 경향이 있다고 하면서, ‘무엇을 그리고 왜 평가하는가’라는 문제를 간과해왔다고 지적하였다. 따라서 교육을 평가함에 있어서는 평가의 목적, 평가의 주체, 평가의 대상, 평가의 기준, 평가의 방법의 다섯 가지 영역을 구분하고, 이들 각각의 특성과 관계를 명확히 이해해야 한다는 것이다.


그러나 최근 교육패러다임이 변하면서 학습결과 뿐만이 아니라 학습과정에도 관심을 기울이고 있으며, 학습과정에서 학습자들의 능동적인 참여를 강조하고, 통합된 지식과 기술을 평가하며 평가 형태 또한 일회적이 아닌 메타인지적인 관점에서 학습을 보는 지속적인 평가가 요구되고 있다.


포트폴리오는 수업과의 연계선상에서 학생의 성취수행을 평가하며, 특정 학습내용 범위를 초월하여 학생의 학업성취를 광범위하게 기술 묘사할 수 있는 방법이다. 뿐만 아니라 학생들이 무엇을 할 수 있는지, 무엇을 할 수 없는지에 대한 정보를 제공하여 학생들의 강점과 약점을 정확하게 파악할 수 있고 (김동일, 2001), 생들로 하여금 학습활동에 참여하게 하고 자신의 학습활동에 대하여 책임을 질 수 있도록 격려하는 방법이다.



본 론

가. 포트폴리오의 이해

1) 개념 및 목적


포트폴리오 (Portfolio)는 이탈리아어의 ‘나르다’라는 의미의 ‘포르타레 (portare)’와 ‘종이’라는 의미의 ‘폴리오 (folio)’의 합성어로 ‘종이를 나르는 것’이라는 의미를 지니고 있다. 흔히 종이 끼우개, 서류 가방의 의미로 사용되는데, 포트폴리오의 기원은 건축가나 예술가, 사진 작가들이 그들의 능력과 활동을 설명하기 위해서, 또는 은행가가 고객을 유치하기 위한 목적으로 사용해 왔다 (김명선, 김석우, 2001).


이러한 객관식 평가는 단편적인 사실의 기억과 회상에 초점을 두고, 학생들이 수동적으로 주어진 답지 중에 하나를 고르게 하는 것이기 때문에 정보화시대에 필요한 고차원적 사고기능을 측정하기 부적합하다는 지적이다.


포트폴리오를 한 마디로 학습자가 지속적으로 모아둔 학습과제물의 모음집이라고 정의하기도 한다.


포트폴리오란 자신이 쓰거나 만든 작품을 지속적이면서도 체계적으로 모아 둔 개인별 작품집이나 서류철을 이용하여 평가하는 방법이다


석문주 외(1998)는 Taylor가 기술한 포트폴리오 평가의 목적을 정리하였는데, 크게 학생과 교사의 두 측면에서 기술하였다. 

학생을 위한 포트폴리오의 목적은 

코스 내용과 기술에 관한 학습의 평가, 

②창의적 과정에 대한 통찰 증가, 

학습과정에서 주체성 획득, 

④시간의 경과에 따른 자신의 성장 인식, 

⑤작업에 반영되는 평가 기술의 증진, 

⑥수동적 학습자에서 능동적 학습자로 변화, 

⑦자신감의 획득, 

성공적 학습자로서의 개인적 이미지 개선이다. 


포트폴리오 평가의 교사를 위한 목적은 

① 개개 학생의 성장과 진전 영역에 대한 증거 제공, 

② 각 활동에 대한 가장 좋은 것에 대한 준거 식별, 

③ 작업 과정에 대한 학생들의 사고 제공, 

④ 완성된 작업에 대한 반응을 통한 상호 의사 전달과 협동의 개선, 

코스 내용과 학생 목표의 개발, 평가 및 수정, 

⑥ 학생의 요구충족을 위한 수업전략 개발, 

⑦ 학생의 성장에 대한 부모, 다른 교사, 행정가의 이해를 촉진하기 수단을 제공하는 것이다.



2) 포트폴리오의 특징


포트폴리오의 특성과 장점에 대해서 배호순(2000)은 여섯가지를 제시하고 있다. 

① 수업과 연계시킨 학생의 성취수행 평가, 

② 학생의 학업성취를 광범위하게 기술 묘사하며 특성 학습내용의 범위 초월 가능, 

③ 특정 내용영역에서의 학생의 성장을 정확히 기록, 

④ 학생들 스스로 자신의 강점과 약점 파악, 

⑤ 학생들을 학습활동에 참여하게 하고 책임을 지도록 격려, 

⑥ 학부모나 교육행정가의 가치로운 정보의 원천.


Oosterhof (1994)는 포트폴리오의 특성을 종합적인 관점에서 다음과 같이 7가지 항목으로 정리하고 있다. 

① 개별화된 교수목표에 용이하게 적용할 수 있다, 

② 산출물의 평가에 초점을 둔다, 

③ 전형적으로 학생의 약점보다는 장점을 파악할 수 있게 해 준다, 

④ 평가과정에 학생을 적극 참여시킨다, 

⑤ 학생의 성취에 관하여 타인들과 의사소통하는 것을 촉진할 수 있다, 

⑥ 시간을 집중적으로 활용할 수 있다, 

⑦ 포트폴리오 평가의 신뢰도에 관해서는 별로 알려진 것이 없다


Marswh와 Willis (1999)는 

① 학생들로 하여금 자신의 지식을 구성하는 데 능동적으로 참여할 수 있게 해 준다, 

 학생들 자신을 평가할 수 있도록 격려해 준다, 

③ 학생들이 평가를 위하여 광범위하고 다양한 항목을 활용할 수 있도록 허용해 준다, 

④ 학생들로 하여금 사고능력과 표현능력을 과시하도록 요구한다, 

⑤ 학생들이 알고 있고 할 수 있는 바를 공평하고 민감하게 묘사할 기회를 제공해 준다, 

⑥ 믿을 만한 학생의 성취근거를 학부모 및 지역사회에 제공할 수 있다는 점을 포트폴리오의 장점으로 꼽았다.


3) 평가 절차와 도구

현재까지의 포트폴리오 평가 절차는 표준화되어 있다거나 정해진 방법이 있는 것은 아니다


Worthen (1993)은 포트폴리오의 계획 및 준비단계를 다음과 같은 5단계로 정리하고 있다. 

① 원하는 포트폴리오의 모습을 결정한다. 

② 포트폴리오에 포함시킬 내용을 결정한다. 

③ 포트폴리오 견본을 선정하는 시기와 방법을 결정한다. 

④ 포트폴리오를 평가하는 방법을 결정한다. 

⑤ 포트폴리오 활용하는 방법을 결정한다.


McMillan (1997)은 평가설계 및 준비단계에서 중시할 사항을 다음과 같은 질문형식으로 정리하였다.

◦ 학습목표는 명료한가?

◦ 포트폴리오 사용목적이 분명하게 설정되었는가?

◦ 적절한 포트폴리오의 수집함이 준비되었고 그를 용이하게 활용할 수 있는가?

◦ 수집할 포트폴리오 내용물을 선정하는 절차가 분명하게 정해져 있는가? 

◦ 포트폴리오 내용이 학습목표에 부합되는가?

◦ 자기 반성적 평가내용과 그 절차를 학생이 숙지하고 있는가?

◦ 점수체제가 설정되었는가?



Knight와 Gallaro (1994)는 포트폴리오의 절차를 목표와 목적, 도구개발, 자료수집, 자료분석, 자료활용 단계로 구분하고 각 단계별 주의해야할 사항을 다음의 질문형태로 정리하였다.

◦ 목표 및 목적의 개발에서 목적이 과정 중에 포함되어야 하는가?

◦ 도구의 개발 : 적절한 작품 견본을 어떻게 확인할 것인가, 개인별 작품 견본에 필요한 평정체제를 어떻게 개발하고 타당화할 것인가?

◦ 자료의 수집: 누가 포트폴리오를 수집하고 관리할 것인가?

◦ 자료의 분석: 프로그램 수준에서 개인별 작품(성취수행)의 기대수준이나 기준을 어떻게 설정할 것인가, 근거의 비중을 어떻게 정할 것인가, 그 과정을 어떻게 타당화할 것인가?

◦ 자료의 활용: 수집된 근거에 입각하여 행동할 것인가, 자료 분석 결과에 근거하여 행동할 것인가?


4) 포트폴리오 평가의 문제점


평가부분과 관련하여서는 당도신뢰도로 나누어 살펴볼 수 있다


포트폴리오는 학습주제나 학습에 대한 반응의 수준을 잘 표준화, 일반화 할 수 없다는 점이 문제이다. 평가의 영역이 넓은 포괄성을 지니기 때문에 점수화에 큰 어려움이 있는 것이다. 또한 평가시 평정자의 지각과 편견이 들어가서는 안되기 때문에 평가자의 훈련이 고도로 필요한 것도 하나의 지적 사항이다.


따라서 포트폴리오 검사를 제작할 때 

① 특정한 사용을 위한 타당화의 논쟁, 

② 적용 가능한 기술적, 윤리적 기준의 근원과 적용될 구체적 기준, 

③ 검사의 해석과 사용에 대한 지지에서 각기 적용할 만한 기준에 상응하는 증거의 특성을 고려, 

④ 사용과 관련된 결과의 의미 등을 강조해야 한다. 


따라서 신뢰도의 문제를 극복하기 위한 노력으로는 표준화된 수행평가, 평가자들의 훈련과 재훈련이 있다(석문주 외, 1998).


포트폴리오 프로그램은 특히 교수자에게 부담이 많다.

포트폴리오의 점수화, 시간제약, 교수자의 저항, 비용 등이다


우선 포트폴리오 평가의 타당성과 신뢰성을 확립하기 위해서는...

현장실험을 거친 문서화된 채점안내서의 준비하고 명료하고 구체적인 준거를 제시할 필요가 있다. 

또한 모든 점수에 대하여 해석이 딸린 실제 예를 제시하고, 

충분한 연습과 피드백 제공, 

채점하기 전에 여러 채점자들간의 일치도를 과시하기, 

정기적인 신뢰도 점검 실시, 

필요한 경우의 재훈련, 

적절하고 신뢰로운 자료수집 활동의 기록 정리도 많은 도움이 될 수 있다.


Herman, Aschbacher와 Winters(1992)가 제시한 포트폴리오 평가의 기본적인 구비 조건을 시사해주는 다음의 준거 항목들을 눈여겨 볼 필요가 있다. 

① 좋은 포트폴리오 평가란 무엇을 의미하는가? 왜 필요하며, 어떤 목적으로 활용하려는가? 

② 포트폴리오에 어떤 과제가 포함되는가? 

③ 어떤 준거와 기준을 적용해야 하는가?  

④ 채점 및 평정과 판단에서 어떻게 일관성을 유지하려는가? 

⑤ 평가 결과는 의도한 목적에 타당한 것인가? 

⑥ 평가 결과를 어떻게 활용하려는가?



결국 포트폴리의 문제점을 극복하기 위한 방안을 정리하면, 

첫째, 평가 과정에서 어떻게, 무엇이 평가되어 지는지에 대해 학생들의 의견을 반영하여 관심을 갖게 한다. 

둘째, 학생들의 수행에 대해 제공되는 정보의 종류를 학생들로 하여금 세밀히 조사하도록 한다. 이를 통해 학생들이 평가 과정 자체로부터 학습할 기회를 갖게 하고, 숫자에 의존하는 것이 아닌 상세한 개인적 피드백을 제공한다. 

셋째, 평가준거를 명확히 하여 학생들 스스로가 학습을 할 수 있도록 유도해야 한다



나. 포트폴리오의 의학교육에의 적용


앞에서 언급한 바와 같이 실제 상황에서의 수행정도를 평가하는 참평가 (authentic assessment)의 대안평가로 포트폴리오가 많은 관심을 받고 있다고 하였다.


“Tomorrow's Doctors”를 발표한 Genenral Medical Council (1993)에서도 학습자중심 교육을 강조하면서 의대생들에게는 전문적 발달이 중요하므로 기존의 전통적인 학습평가방법과 함께 문제중심학습 방법과 포트폴리오 평가의 중요성을 역설하였다.


영국의 Royal College 의과대학은 일반의들의 훈련과 지속적인 전문성 발달 과정에 변화를 주었는데, 1993년 “Porfolio-based learning in General Practice”라는 저서를 펴내면서 본격적으로 포트폴리오 기법을 활용하였다.


Chief Medical Officer는 1997년 GMC가 “The New Doctor”라는 책을 발간하자, 운영위원회를 조직하여 “Portfolio for pre-registration house officers(PRHOs)”라는 포트폴리오 접근방법을 제시했다.


Sheffield 의과대학에서는 준거지향적인, 프로파일 중심 평가를 사용해 왔다. 이 대학에서는 공식적인 기말 시험을 면제받을 수 있는 방법을 학생들에게 제시했는데 바로 개인의 포트폴리오 기록들을 제출하는 것이다.


정보화시대에 걸맞는 포트폴리오의 형태도 시도되었다. 영국의 WISDOM 프로젝트라고 하는 것인데, 앞으로의 의료행위에는 컴퓨터의 상용이 필수적인 것이 될 것이므로 일차진료의들을 훈련시키기 위한 목적으로 컴퓨터를 통한 의사소통 기술을 높이고, 인터넷을 이용하여 가상 교실을 만드는 것이다.


문제중심학습을 이용한 교육과정을 중심으로 학생들을 교육하는 네델란드의 Maastricht 의과대학서는 최근 학생평가에서 포트폴리오 기법을 도입하였다.



결 론

교육평가는 교육의 패러다임의 변화에 따라 함께 변한다. 최근 교육평가 변화의 동향은 행동주의적 관점에서 인지적 관점으로 변한다는 것이다. 즉, 학습결과에 대한 관심뿐만이 아닌 학습과정에 대한 관심이 높아져 가는 것이다. 단편적이고 분절된 기능평가가 아닌 통합적이고 간학문적인 평가가 요구되고 있다 (김경자 역, 2000). 따라서 안다는 것과 할 수 있다는 것의 의미에 대한 변화가 생기면서 기능의 재생이 아닌 지식의 적용과 활용을 강조하고 있다. 또한 지필 평가에서 참평가 (authentic assessment)로의 변화가 일고 있다.


또한 하나의 속성을 평가하는 것이 아니라 학생들의 다양한 능력과 재능을 개발하고 보여줄 수 있는 다차원적인 평가고 변화하고 있으며, 개인만 강조하던 평가에서 협동을 중시하는 그룹 활동을 강조하는 평가를 요구하고 있다.


그러나 교육평가에서의 ‘제3의 물결’이라고 칭하고 있는 포트폴리오 방법이 도입단계에서는 교수자들의 많은 시간과 노력을 요구하고 평가문화가 제대로 정립되지 않은 현재 한국 교육적 상황에서는 교사들의 자발적인 참여가 저조할 가능성이 있다.








Korean J Med Educ. 2003 Aug;15(2):73-81. Korean.
Published online 2003 August 31.  http://dx.doi.org/10.3946/kjme.2003.15.2.73 
Copyright © 2003 The Korean Society of Medical Education
Portfolio Assessment and its Application in Medical Education
Sun Kim, PhD
Department of Medical Education, Catholic University College of Medicine, Seoul, Korea.


Portfolios for assessment and learning: AMEE Guide no. 45

JAN VAN TARTWIJK1 & ERIK W. DRIESSEN2

1Leiden University, 2University of Maastricht, The Netherlands








오늘날의 의사들은 지식이 많아지고 주장도 강해진 환자들을 대해야 하며, 새로운 것이 발견되거나 새로운 근거가 쌓이면 이를 매일매일의 진료에 적용시켜야 하는 압박도 받고 있다. 

Today’s doctors find themselves confronted not only with patients who are increasingly knowledgeable and assertive, but also with pressure to apply new findings and evidence in day-to-day practice, and with the necessity to collaborate with other health professionals in ever larger teams and communities.


이 복잡한 상황에서 의사들은 의사소통, 조직화, 팀워크, 프로페셔널리즘을 효과적으로 향상시킬 필요가 있고, 이러한 'Generic Competencies'는 종종 'Hard clinical skills'와 대비되어 'Soft skills'로 불리곤 한다.

To deal with these complexities, doctors need generic competencies to enhance effective communication, organisation, teamwork and professionalism. These generic competencies are sometimes labelled as doctors’ ‘soft skills’ in contrast to ‘hard clinical skills’.


그 결과 각종 협회와 정부는 이 Generic competencies를 교육과 평가에 도입할 것을 요구하고 있다.

As a result, professional associations and governments began to voice increasingly urgent demands to include these generic competencies in education and assessment (General Medical Council 2000).


그러나 이들 역량을 개발하는 것과 그 결과를 평가하는 것은 단순하지 않다.

However, stimulating the development of competencies (Box 1) and the assessment of its result is complicated







이미 1990년에 밀러는 임상역량과 관련된 과제가 무엇인지 기술한 바 있다.

Already in 1990, Miller described the challenges involved in assessing clinical competence.


Knows how단계는 시험으로 평가할 수 있다.

The Knows how level can also be assessed by written tests.


한 단계 올라가면, 관심은 가상의 상황에서 학습자가 지식을 활용할 수 있는가를 보는 것으로 옮겨간다.

One level up, at level 3, the issue of interest is that learners demonstrate their ability to use their knowledge to take appropriate action in a simulated environment


피라미드의 가장 윗 레벨은 복잡한 일상 진료환경에서의 독립적인 수행능력과 관계되어 있다.

The top of the pyramid is concerned with independent performance within the complex environment of day-to-day practice.


일반적으로, 이 단계를 적절히 수행하기 위해서는 다양한 역할을 통합적으루 수행할 수 있어야 한다. (의료전문가, 상담가, 의사-환자 관계의 참여자, 리더십 등등)

Typically, adequate performance at this level requires integrated performance of different roles; not only the role of medical expert but also that of counsellor, participant in the doctor–patient relationship, a leadership role in relation to nursing staff, etc. Good performance at the Does level implies competence.


1990년 밀러는 가장 윗 단계를 평가하기 위한 도구가 없다는 것을 발견하였고, 동시에 Teacher education분야의 학자들은 비슷한 문제를 겪고 있었다. 여기서도 문제는 실제 상황에서 어떻게 수행능력을 평가하는가였다. Shulman은 Teacher Assessment Project에서 일차, 이차 교육에서 교사를 평가하는 새로운 접근법을 제안하였다.

In 1990, Miller observed that there were no instruments to evaluate performance consistent with the top of the pyramid (Miller 1990). At the same time, scholars in the field of teacher education and teacher assessment were struggling with the same problem (Bird 1990). Here too, the key challenge was how to assess performance in real life settings. Shulman (1998) describes the Teacher Assessment Project that was set up with the purpose of exploring and developing new approaches to the evaluation of teaching in primary and secondary education.


예술과 건축학 분야에서의 포트폴리오라는 개념이 도입되기에 이르렀다.

As part of efforts to achieve fair judgement of teacher performance in a broad array of settings and situations, the portfolio concept was borrowed from the arts and architecture (Box 2).


의학교육분야에 포트폴리오는 1990년대에 도입되었고, 평가와 전문성 함양을 촉진하는 도구로서 사용되었다.

Since portfolios were introduced in medical education in the early 1990s (Royal College of General Practitioners 1993), their use as an instrument for both assessment and encouraging professional growth has increased enormously (Snadden et al. 1999; Friedman Ben David et al. 2001).



Portfolio goals, content and organisation

Portfolios as a multipurpose instrument


평가도구로서 포트폴리오 Portfolios for assessment. 


포트폴리오가 처음 교육분야에 도입되었을 때에는 건축학이나 예술 분야의 그것과 무척 흡사했다.

When portfolios were originally introduced in education as instruments for authentic assessment, they closely resembled the portfolios of architects and artists,


삼각측량의 원칙에 근거하여 역량에 대한 타당한 결론을 이끌어 내는데 필요한 모든 종류의 근거를 모으는 것이었다.

Building on the principle of triangulation (Denzin 1978; Denzin & Lincoln 2000) all kinds of evidence can be brought together in those portfolios that, in combination, give the possibility to draw valid conclusions about competence (Box 3).


그러나 교사 평가의 목적을 위한 포트폴리오에서 Bird가 발견한 것은 포트폴리오의 과정이 단순히 종이를 모으는 작업에 그치게 되기가 쉽다는 점이었다.

However, in one of the first explorations of portfolios for teacher assessment, Bird (1990) wrote that the portfolio procedures for assessment might easily degenerate into exercises in amassing paper.


"~한 것을 했다는 것을 보이시오"라는 것과 같은 지시사항은 수행능력에 대한 특정한 근거를 낼 것을 요구했다.

Instructions starting with ‘Show how you . . .’ might clarify for portfolio owners that they are asked to provide specific evidence about their performance.


Collins는 포트폴리오의 각 근거에 캡션(caption)을 달 것을 제안했다.

Collins (1991) suggested that captions should be attached to the evidence in the portfolio:


포트폴리오의 중요한 요소 중 하나는 캡션이다. 캡션이란, 각 서류에 그 서류가 무엇인지, 왜 근거로서 가치가 있는지를 설명해주기 위해 붙이는 작은 종이이다. 캡션은 포트폴리오 개발 과정에 필수적이며, 캡션이 없는 서류는 평가자에게 의미가 없다.

One essential component of the portfolio was the document caption. The caption is a little sheet attached to each document stating what the document is (. . .) and why it is valuable evidence. (. . .) Captions proved to be essential to the portfolio development process. Documents without captions were meaningless to the raters. p. 153)




학습을 위한 포트폴리오 Portfolios for learning


포트폴리오는 성인학습자의 학습을 촉진하고 반성적 학습을 하게 하는 수단이다. 그래픽아트 부분으로부터 도입된 포트폴리오는, 학습자의 학습이 '발생한' 근거를 수집하는 것에 기반한다.

Portfolio learning is a method of encouraging adult and reflective learning for professionals. Derived from the graphic arts it is based on developing a collection of evidence that learning has taken place. (p. 192)


연구자들은 포트폴리오 학습에 있어서 감독과 비판적 성찰의 중요성을 강조한다.

They emphasise the importance of supervision and critical reflection for portfolio learning:


학습자와 멘토의 상호작용을 통해 학습을 더욱 나아가게 하는 촉매제로서 작용할 때 가장 좋다. 포트폴리오가 단순한 보거나 경험한 사건의 모음집이어서는 안되며, 그 학습으로부터의 비판적 성찰을 한 내용을 담고 있어야 한다.

The system works well when it operates through the interaction of a learner and mentor using the material as a catalyst to guide further learning. It is essential that the portfolio does not become a mere collection of events seen or experienced, but contains critical reflections on these and the learning that has been made from them. p. 192)



성찰을 촉진하는 도구로서의 포트폴리오 A portfolio can also stimulate reflection


많은 경우에 포트폴리오는 긴 시간동안 축적된다.

In many cases, portfolios are assembled over a longer period of time.


한 가지 방법은 포트폴리오에 학습활동과 성취내역 뿐만 아니라 학습목표를 포함시키는 것이다.

One way to do so is to include learning objectives in the portfolio as well as a document trail of related learning activities and accomplishments (Mathers et al. 1999; Oermann 2002).


학습자로 하여금 성찰을 유도하고 발전에 대해 논하게 하려는 목적을 가진 포트폴리오는 학습자의 성찰을 중심으로 작성되어야 한다.

Portfolios whose primary objective is to foster learning by stimulating learners to reflect on and discuss their development will be organised around learners’ reflections.




다양한 목적의 도구 A multipurpose instrument 1. 


포트폴리오의 활용 범위와 적용 범위가 넓어졌다.

Inevitably, these developments have widened the applicability of the label portfolio to a broad range of instruments.


이제 중요한 질문은 특정 포트폴리오가 처음 의도한 목적에 맞는가이다.

The question to be answered is whether a certain portfolio is fit for its intended purpose


특정한 교육적 세팅에 맞춰져서 제작된 포트폴리오는 다른 교육 설정에서는 잘 들어맞지 않을 수 있다. 그리고 잘 맞지 않는 포트폴리오는 언젠가는 반드시 버려지게 된다.

portfolios tailored to particular one educational setting may not fit into the educational configuration(s) of other settings (Spandel 1997). An ill-fitting portfolio will inevitably be discarded sooner or later


명백히, 포트폴리오는 한 가지 이상의 목표를 달성하기 위해 사용될 수 있다.

Obviously, a portfolio can be used to achieve more than one goal.


현실에서는 대부분의 포트폴리오는 삼각형의 어느 한 꼭지점에만 위치해있지 않다. 교육 포트폴리오에서 논쟁이 되는 한 가지 이슈는 하나의 포트폴리오와 평가와 성찰이라는 두 가지 목적을 모두 달성할 수 있느냐이다. 이 Dual Function에 반대하는 논리로는, 평가가 효과적인 멘토링에 꼭 필요한 성찰의 질을 저하시킨다는 점이다. 

In practice, the majority of portfolios are not situated in one of the corners of the triangle (Buckley et al. 2009). A controversial issue in the literature on educational portfolios is whether it is acceptable to have one portfolio for both assessment and reflection (Snyder et al. 1998). An argument against this dual function is that assessment may jeopardise the quality of reflection thereby detracting from the portfolio’s effectiveness for mentoring purposes.


반면, 포트폴리오를 평가하지 않을 경우 학습자가 거기에 투자한 시간과 에너지에 대한 보상을 하지 않는 꼴이 된다.

Portfolios that are not assessed, on the other hand, do not ‘reward’ learners for the time and energy they invest in them.


효과적인 포트폴리오는 확실하면서도 유연한 구조를 가지고 있으면서, 개개의 학습자에게 각자만의 발달을 묘사할 기회를 주는 것이어야 한다. 명확한 지침은 중요하지만, 포트폴리오의 내용을 세부적으로 다룰 때에 포트폴리오는 매우 관료적인 도구가 된다. 포트폴리오는 학습자가 포트폴리오의 내용에 대하여 일정한 자유가 있을 때 더욱 강력하다.

An effective portfolio has a clear but flexible structure, giving individual learners’ opportunities to describe their own unique development (Pearson & Heywood 2004; Driessen et al. 2005b; Grant et al. 2007). Clear instructions are important, but when the content of a portfolio is prescribed in detail, portfolios are often experienced as highly bureaucratic instruments (Davis et al. 2001; O’Sullivan et al. 2004; Pearson & Heywood 2004; Kjaer et al. 2006). Portfolios meet with stronger appreciation when learners have a certain amount of freedom to determine the content of their own portfolios (Snadden & Thomas 1998a; Driessen et al. 2005b).



전자 포트폴리오 Electronic portfolios


하이퍼링크.

In e-portfolios, hyperlinks can be inserted to make connections between evidence, overviews and reflections.


종이 포트폴리오는 부피가 크다. 또한 단 한 부밖에 없다는 단점도 있다.

A paper-based portfolio can be cumbersome because of its bulk. Imagine an assessor who needs to take 15 paper portfolios home! Furthermore, there is generally only one copy of a paper portfolio.


스크린으로 보고 읽는데 익숙하지 않은 멘토는 결국 인쇄하게 된다.

Mentors who do not like to read a portfolio on screen will still have to print it. In most systems it is not possible to make notes on the portfolio itself


관련 소프트웨어와 하드웨어 사용에 익숙한 사람에게만 쓸 수 있다.

E-portfolios can only be used by learners and teachers who are sufficiently skilled in using the relevant software and hardware


안정적이고 높은 수준의 정보기술이 필요하다.

An e-portfolio requires a stable and high quality information technology infrastructure that is not always available


여러가지의 사용자 친화적인 포트폴리오 시스템이 있다.

Nowadays, many dedicated portfolio systems are available, which are usually user-friendly (Dornan et al. 2002; www.eportfolioservice.nl).


워드프로세서나 HTML에디터를 사용할 수도 있다.

Apart from dedicated systems, learners can produce an e-portfolio using standard word-processors or HTML editors, preferably ones that they and their teachers are familiar with(Gibson & Barrett 2003).


많은 포트폴리오 시스템이 갖는 한계는 한 가지 또는 두 가지의 포트폴리오 타입만 제공한다는 것이다.

Another reason is that many portfolio systems are limited because they are built to accommodate no more than one or two portfolio types.


종합하면, 표준 소프트웨어 툴은 인터넷으로 접속하기 한계가 있고, 직무기반 평가도구로서 한계가 있으나 학습자가 만들고자 하는 포트폴리오를 만들 수 있게 해주며 보기에 좋다.

In summary, standard software tools have disadvantages from the perspective of managing access to the portfolio using the internet or to include work based assessment instruments, but they usually provide all the options learners need to produce a portfolio that works well and looks great.


많은 멘토들은 웹기반 포트폴리오의 사용이 편해서 더 좋아한다.

but mentors were also unanimous in their appreciation of the greater ease of use of web-based portfolios compared to the more familiar paper-based ones.




포트폴리오와 경험으로부터의 학습 Portfolios and learning from experience


경험으로부터 학습하는데 있어서 멘토의 역할은 중요하다.

Research shows that the role of the mentor is crucial to the successful use of portfolios aimed at learning from experience (Finlay et al. 1998; Snadden & Thomas 1998a; Mathers et al. 1999; Pearson & Heywood 2004; Driessen et al. 2005b; Grant et al. 2007).



이론적 근거 Theoretical background


구성주의에 기반한 최근의 학습에 대한 관점에서, 사람들은 기존에 알고 있는 것, 믿고 있는 것으로부터 새로운 지식과 이해를 '구성'해낸다.

The contemporary view of learning, based on constructivism, is that people ‘construct’ new knowledge and understanding based on what they already know and believe (Bransford et al. 2000).


한 사람의 행동을 바꾸는 것은 그 사람의 현실에 대한 인식이다.

It is this personal perception of reality that guides a person’s actions.


성찰은 '인식 구조를 바꾸는 것'과 관련해서 이러한 프레임워크에서 중요한 개념이다. 성찰과 같은 메타인지(meta-cognitive)기술이 새로운 세팅이나 사건으로부터 배운 것을 전이(transfer)하는데 도움이 된다는 것을 밝혔다.

Reflection is an important concept in this framework, which relates to changing cognitive structures. Research has shown that meta-cognitive skills, such as reflection, increase the degree to which learners transfer what they have learned to new settings and events (Bransford et al. 2000).


성찰에 대해서 연구한 사람들은, 구성주의적 관점을 공유하는데, 그것은 진화하고, 변하고, 경험에 반응하는 정신구조(mental structure)에 의해서 행동이 변한다는 것이다.

all authors writing about reflection share the constructivist view that human behaviour is guided by mental structures that are not static but flexible, evolving and changing in response to experiences.


짧게 줄이면, 성찰이란 것은 자신의 경험에 대한 이해를 더 살피고 더 면밀히 검토하는 것이다. 성찰에는 세 가지 종류가 있는데 

한 가지는 특정 목적을 달성하기 위한 means에 대한 것이고, 

두 번째는 means뿐만 아니라 goals에 대한 것이며, 

세 번째는 critical reflection이다. 

In short, reflection means exploring and elaborating one’s understanding of an experience (Eva & Regehr 2008). Building on van Manen’s work (1977), Hatton and Smith (1995) distinguish three types or levels of reflection. The first type is concerned with the means to achieve certain ends. The second type is not only about means, but also about goals, the assumptions upon which they are based, and the actual outcomes. The third typeof refection is referred to as critical reflection


이 세 가지의 성찰은 위계가 있는 것이 아니며, 다양한 맥락과 상황에서 한 종류에서 다른 종류로 옮겨가는 것이다.

Hatton and Smith (1995) emphasise that these three types of reflection should not be viewed as hierarchical. Different (educational) contexts and situations may lend themselves more to one kind of reflection than to another.










성찰과 전문가적 성장Reflection and professional development


경험함으로써 학습하고자 하는 사람을 돕고자 할 때, medical teacher에게 중요한 것은 '어떻게 학습자들로 하여금 경험을 성찰하고 그것으로부터 배울 수 있게 할 수 있을까?'이다. 이 guide에서는 한 가지를 더하려고 하는데, 바로 '어떻게 포트폴리오를 통해 성찰의 질을 높일 수 있을까?'이다. 

For medical teachers who want to help learners learn from practice, the key question to answer is: ‘How can I stimulate my learners to reflect on their experiences and learn from them?’ For this AMEE guide the additional question is ‘. . . and how can a portfolio help to improve the quality of reflection?’


ALACT 모델을 제시했다.

Korthagen designed the Action, Looking back, Awareness, Creating alternative methods and Trial (ALACT) model (Figure 3) to describe the spiralling process that effective learners go through when faced with a situation for which no routine solution is available (Korthagen et al. 2001).


  • Action. The cycle starts with action undertaken for a specific purpose
  • Looking back on action: Self directed assessment seeking
    • ALACT 사이클은 학습자가 지난 행동, 특히 그것이 성공적이지 못했거나 기대하지 않은 일이 일어날 경우 그 단계에 초점을 둔다. 
      The ALACT cycle then moves to the stage where learners look back on a previous action, usually when that action was not successful or something unexpected happened
    • 자기평가는 일반적으로 좋지 못하며(poor), 그 대신 self-directed assessment seeking을 대안으로 제시한다.
      Eva and Regehr (2008) write that most 
      of the time self-assessment is conceptualised according to a guess your grade’ model of which the quality is generally poor (Davis et al. 2006). As an alternative they propose self-directed assessment seeking, which they describe as a process by which a learner takes personal responsibility for looking outward, explicitly seeking feedback and information from external sources of assessment data, to direct performance improvements that can help them to validate their self-assessment.
    • In Box 4, we give suggestions for a number of strategies to be used by medical teachers in this phase, derived from the work by Korthagen et al. (2002).
  • Awareness of essential aspects: Reflection. 
    • 수행의 질과 상황의 특징에 대한 결론을 이끌어내었다면, 그 다음은 필수적 측면에 대한 awareness를 높이는 것이다. 이 단계에서 학습자들은 벌어진 일에 대한 새롭고 더 나은 이해를 발전시키게 된다.
      After conclusions 
      have been drawn about the quality of performance and the characteristics of the situation, the next step in the ALACT model is to foster awareness of essential aspects. In this phase, learners try to develop a new and better understanding of what has happened, i.e. they reflect on their performance.
    • 멘토는 반드시 모든 정답을 알 필요는 없다. 중요한 것은 옳은 질문을 던지는 것이다.
      Teaching strategies – To stimulate learners to reflect and learn 
      from their experiences, mentors do not need to have all the right answers. The most important thing for them is to ask the right questions


  • Creating or identifying alternative methods of action: Change
    • 새로운 목표와 다른 전략을 해석해내는 것이 중요하다.
      It is 
      important to explicate (new) goals and alternative strategies.
    • 구체적인 목표를 정해주는 멘토와 학습한 경우 멘토와 같이 하지 않은 경우에 비해서 더 많이 향상된다.
      Learners who work with a mentor set more 
      specific goals and improve more than those who do not work with a mentor (Smither et al. 2003).
  • Trial. The last step in the ALACT cycle is trial. This is also the start of a new cycle in the spiral of professional development in this model.










Using portfolios as tools for assessment


Snadden과 같은 저자나 Webb 등과 같은 저자들은 standardized psychometric assessment criteria에 non-standardized portfolio를 끼워맞춰서는 안된다고 주장한다. 그들은 포트폴리오평가는 기본적으로 다양한 질적 정보를 해석하는 일이므로, 평가 단계가 질적 연구 기법에 기반하여 이뤄져야 한다고 지적한다.

Authors like Snadden (1999) and Webb et al. (2003) all come to the conclusion that we should not try to fit non-standardised portfolios to standardised psychometric assessment criteria. They point out that portfolio assessment is primarily concerned with interpreting various forms of qualitative information and suggest that assessment procedures should be developed that are based on methods used in qualitative research.


. What is assessed?

. Why is this assessed?

. How is this assessed?

. Who assesses?

. When is this assessed?



What?


포트폴리오는 직무기반 평가에 적합하다. 다른 말로 하면, 밀러의 피라미드에서 Does 단계를 평가하는데 도움이 된다.

portfolios are particularly suited to work-based assessment. In other words, they have added value at the Does level of Miller’s pyramid (Miller 1990).


평가 단계에서 역량을 평가할 때 매우 세세하고 '~을 할 수 있다'로 점철된 긴 리스트와 overview를 제공하지만 평가를 하기에는 기반이 부족한 global description 사이의 균형을 잡는 것은 무척 중요하다.

In aligning competency descriptions with assessment procedures it is of the essence to strike the right balance between very concrete but also very detailed and long lists of ‘is able to’ statements, on the one hand, and very global descriptions providing an overview but too little to support assessment, on the other hand


두 가지를 복합한 좋은 방법은 scoring rubric을 사용하는 것이다.

A way to combine the best of both approaches is to use scoring rubrics. A scoring rubric is a global performance descriptor that lists the criteria for a competency and articulates a limited number of gradations of quality for each criterion.


각각의 학습자와 멘토에게 있어서 scoring rubric은 역량 개발을 위한 로드맵과 같은 것이며, 학습자의 현재 역량 수준을 진단해주고 향후 발전을 위한 방향을 제시해준다.

For learners and their mentors, scoring rubrics can be a roadmap for competence development. It can help them diagnose a learner’s current level of competence and point the way to further development.


Why?


선발, 진단, 증명

Assessing competencies can be done for three reasons: selection, diagnosis and certification.



How?


평가의 질은 어떤 과정으로 평가하느냐에 달려있다.

The quality of the assessment of competencies is crucially determined by the procedure that is used.


의학교육에서 Webb은 포트폴리오 평가가 질적정보와 관련되어 있기 때문에 질적 연구를 위해서 개발된 아이디어를 도입하였다. Guba와 Lincoln은 credibility와 dependability를 달성하기 위한 연구를 하였다.

In medical education, Webb et al. (2003) pointed out that portfolio assessment is primarily concerned with qualitative information and they introduced the idea to use routines developed for qualitative research. Guba and Lincolns’ (1989) strategies to achieve credibility and dependability of assessment can be translated to portfolio assessment (Webb et al. 2003; Tigelaar et al. 2005).


포트폴리오 뿐만 아니라 질적 연구와 관련한 주요 문제는 시간이 많이 든다는 점이다.

The major problem with qualitative research methods as well as with portfolio assessment is the required substantial time investment.



Who?


포트폴리오에 대한 연구에서 주로 나오는 것은 멘토와 평가자가 한 사람이 되면서 생기는 feasibility와 acceptability의 문제이다.

A problem that is much debated in the portfolio literature is the feasibility and acceptability of combining the roles of mentor and assessor into one person


이러한 이유에서, 대부분의 전문가는 멘토가 총괄평가에는 관여하지 않거나 평가위원회에 제안을 해서는 안된다고 한다. 하지만 일부는 'Support를 위한 평가와 High-stakes 의사결정을 위한 평가 사이의 긴장은 사라지지 않을 것'이라고 하면서 '그러한 긴장이 교사와 교육자들에 의해서 잘 다뤄지고 있다'라고 주장하기도 한다.

For this reason, the majority of the experts were of the opinion that mentors should not be involved in summative assessment nor make recommendations to an assessment committee. However, there was a minority who agreed with Snyder et al. (1998, p. 59), who wrote that ‘The tension between assessment for support and assessment for high stakes decision making will never disappear. Still, that tension is constructively dealt with daily by teacher educators throughout the nation’.



When?


선발, 진단평가, 증명

Selection / Diagnostic assessment / Certification



성공적인 포트폴리오 도입을 위한 요소들 Factors influencing the success of the introduction of a portfolio2


교육 변화에 대한 문헌들을 보면, 리더십 뿐만 아니라 사람들(교수, 학습자)의 마음을 얻는 것에 대한 내용이 있다. 

In the literature on educational change, winning the hearts and minds of the people involved, both teachers and learners, as well as the quality of leadership are identified as key factors for lasting educational improvement (Martin et al. 2003; Hargreaves & Fink 2004).


People


교사는 새로운 접근법에 대한 교육적 가치를 인식하면 지지적이 되고, 교육적 변화에 투자를 마다하지 않는다. 

Teachers are more likely to support and invest in educational changes if they acknowledge and subscribe to the educational value of the new learning approach, internalise and support the innovation, and are empowered to assume ownership of it.



Academic leadership


교사를 자극하여 학생 중심의 접근법을 도입하도록 하는데 성공한 교육리더들이 있다. 이들 리더의 특징은 교사들과 토론하고 협상한다는 것이다. Bland의 연구를 보면 리더십이 아래로부터 올라오고 또 올라와서 결국 교육과정 변화에 중요한 요소가 된다.

A group of educational leaders was identified who were successful in stimulating teachers to adopt a student focused approach to teaching. A characteristic of these educational leaders is that they discuss and negotiate these changes with the teachers. Similar findings are reported by Bland et al. (2000), who reviewed the available literature with the aim to identify a set of characteristics that are associated with successful curricular change in medical education. They write that leadership comes up again and again as critical to the success of curricular change.


Infrastructure


An increasing number of Faculties of Medicine are choosing to work with electronic rather than paper portfolios. In the section ‘e-portfolios’, we described the reasons for this choice




Concluding remarks


포트폴리오를 성공적으로 도입하기 위해서는 않은 조건들이 달성되어야 한다. 그리고 설령 그렇다고 하더라도, 포트폴리오가 모든 문제를 해결해주지는 못한다.

The literature shows that many conditions need to be fulfilled to enable successful introduction of a portfolio (Driessen et al. 2007b), and even then a portfolio is not a cure for all pains.


포트폴리오를 도입하는 것은 신발을 사는 것과 같다. 가장 좋은 선택은 목적이 무엇인지에 달려 있으며, 신발이 잘 맞기까지는 많은 시간이 걸린다.

introducing portfolios is just like buying shoes: the best choice depends on purpose and a really good fit happens over time, with lots of use and the right give and take by the user ’. (p. 573)





 2009 Sep;31(9):790-801.

Portfolios for assessment and learning: AMEE Guide no. 45.

Abstract

In 1990, Miller wrote that no tools were available for assessment of what a learner does when functioning independently at the clinical workplace (Miller 1990 ). Since then portfolios have filled this gap and found their way into medical education, not only as tools for assessment of performance in the workplace, but also as tools to stimulate learning from experience. We give an overview of the content and structure of various types of portfolios, describe the potential of electronic portfolios, present techniques and strategies for using portfolios as tools for stimulating learning and for assessment, and discuss factors that influence the success of the introduction. We conclude that portfolios have a lot of potential but that their introduction also often leads to disappointment, because they require a new perspective on education from mentors and learners and a significant investment of time and energy.



의학전문대학원생이 스스로 평가한 커뮤니케이션 능력점수와 표준화 환자가 평가한 의학전문대학원생의 커뮤니케이션 능력 점수의 일치도

부산대학교 의학전문대학원 1인문사회의학교실, 2재활의학과

제민지1, 이수현1, 이창형2, 김성수1


(http://www.emadashi.com/tag/communication-skills-verbal-convesation-successful/)





서론

(AAMC)는 2015년부터 의학전문대학원 입학 시험(the Medical College Admission Test)에 사회 과학(social science) 영역을 50% 가량 출제하여 의예과(pre-med) 학생들의 인문학적 소양을 평가하겠다고 밝혔다[1]. 또한 Accreditation Council for Graduate Medical Education (ACGME)와 American Board of Medical Specialties (ABMS)에서는 의사가 갖추어야 할 6가지 핵심 능력 중 하나로 대인관계 커뮤니케이션 기술(interpersonal and communication skills)을 제시하고 있다[2]. 이처럼 미국의 의료계에서는 의료서비스 질의 개선을 위해 의사의 공감능력과 커뮤니케이션 기술에 대한 평가가 중요함을 강조하고 있다[3]. 


국외 선행 연구에 의하면, 의료진의 커뮤니케이션 능력은 환자에게 긍정적인 효과를 주는 것으로 보고되고 있다.


의료진의 커뮤니케이션 능력을 파악하는 데 핵심이 되는 공감 능력을 측정하는 방법에는 의료진이 스스로 본인의 공감 능력을 평가하는 방법환자가 의료진의 공감 능력을 평가하는 방법이 있다. 이 때 환자가 평가한 의료진의 행동을 분석하는 것이 의료진의 환자에 대한 태도를 바꾸는 데 있어 효과적이다[7]. 

  • 왜냐하면 의료진의 공감 능력을 측정할 때, 의료진의 자가 평가(self-reporting)만을 반영할 경우 환자가 실제로 느끼는 감정이 배제될 수 있으며 환자의 치료 결과에도 부정적인 영향을 미칠 수 있기 때문이다[8]. 
  • Stewart et al. [9]은 환자가 측정한 의료진의 커뮤니케이션 능력 수준과 다른 관찰자가 분석한 의료진의 커뮤니케이션 능력 수준을 비교․분석한 연구에서, 환자가 측정한 결과만이 환자의 긍정적인 치료 결과와 유의미한 관련이 있다고 보고하였다. 
  • 또한 Kruger & Dunning [10]은 개인의 커뮤니케이션 능력 수준을 측정할 때 자가 평가 방식만을 이용할 경우, 상대방이 느끼는 것보다 자신의 능력을 더 높게 평가하는 경향이 나타난다고 보고한 바 있다.


국외에서는 의료진이 스스로 측정한 본인의 커뮤니케이션 능력 수준과 다른 관찰자가 측정한 의료진의 커뮤니케이션 수준 간의 차이를 비교하거나 일치도를 분석하는 연구가 진행되고 있다. 레지던트를 대상으로 한 Millis et al. [11]의 연구에 의하면, 표준화 환자(standardized patient, SP)에게 자신의 커뮤니케이션 능력을 낮게 평가를 받은 레지던트들이 본인의 능력을 높게 평가하는 경향이 있는 것으로 보고되었다[11].


최근 국내에서도 의사의 지식 영역뿐만 아니라 환자를 대하는 태도 영역까지 종합적으로 평가하기 위해 2009년 의사 국가고시부터 실기시험을 시행하고 있으며, 그 중에서도 의료커뮤니케이션 영역은 임상수행시험(clinical performance examination)에서 10%의 비중을 차지하고 있다[12]. 


또한 Kim et al. [8]의 연구에 의하면, 의사의 공감적 커뮤니케이션 능력과 환자의 만족도 및 치료 순응도 사이에는 높은 상관관계가 있으며, 특히 의료진의 정서적 공감 능력이 높을수록 환자의 만족도와 치료 순응도가 높아지는 것으로 나타났다. Yoo et al. [14]의 연구에서는 의사의 환자 중심형 커뮤니케이션 스타일은 환자의 진료 만족도와 의사 신뢰도를 높여 환자의 재방문 의도에 간접적인 효과를 주는 것으로 나타났다.


대상 및 방법

1. 연구 대상

2. 연구 방법

1) 측정 도구

본 연구에서는 의학전문대학원생의 커뮤니케이션 능력 수준을 알아보기 위해 Kim et al. [8]이 개발한 의사의 공감적 커뮤니케이션 능력 측정 도구와 Millis et al. [11]이 재구성한 레지던트의 대인관계 커뮤니케이션 능력 측정 도구를 수정․ 보완하여 사용하였다.

2) 측정 방법

본 연구에서는 의학전문대학원생이 스스로 평가한 본인의 커뮤니케이션 능력 점수와 SP가 평가한 의학전문대학원생의 커뮤니케이션 능력 점수의 일치도를 분석하기 위해, MedCalc version 12.3.0 (MedCalc Software, Mariakerke, Belgium)을 이용하였다.

일반적으로 두 집단의 비교를 설명할 때에는 t-test, Pearson r, intra-class correlation coefficient (ICC), 최소자승법(least square method) 등의 방법을 주로 사용한다. 하지만 이러한 방법들은 두 집단이 서로 일치하는지를 측정할 때 일치하는 범위를 과장하거나 상관관계가 낮을 수도 있는 단점이 있다[11]. 특히 두 변수를 비교할 때 주로 쓰는 Pearson r의 경우, 코더 간 신뢰도(inter-coder reliability)에서 가장 큰 문제점을 보인다[15]. 다시 말해 두 변수 사이의 선형 관계를 평가할 때 쓰이는 Pearson r은 곡선형의 관계인 두 변수의 관계에서는 매우 낮은 상관이나 ‘0’에 가까운 상관을 나타낼 수도 있다[15]. 그렇다고 해도 이 두 변수 사이에 관계가 없다고 단정 지을 수는 없다. 


반면 Lin’s concordance는 Pearson r의 결점을 보완하여, 관찰된 새로운 값들이 기존의 값들을 얼마나 잘 설명하는지를 보여준다. Lin’s concordance는 원점을 통과하는 하나의 기울기를 가지므로 값들의 일치 정도에 대한 정확도와 신뢰도가 높아지는 장점이 있다[15]. 일반적으로 Lin’s concordance는 최근 의학통계에서 새로운 기구나 측정 방법의 효율성을 평가할 때 많이 사용하는 기법이다. 하지만 본 연구처럼 동일한 정보에 대한 복수의 관찰자를 활용할 때에도 Lin’s concordance를 이용하는 것이 값들의 일치도를 파악하는 데 있어 더욱 타당하다고 할 수 있다.


Lin’s concordance는 측정된 값들의 산포도를 그렸을 때 데이터들이 기울기가 1인 직선(the 45-degree line)에 가까울수록 두 집단의 데이터가 일치하는 것으로 본다. 또한 Lin’s concordance의 rc값(Lin’s concordance correlation coefficient)은 관찰된 데이터가 기울기가 1인 직선으로부터 얼마나 떨어져 있는지를 정확하고 정밀하게 알아볼 수 있게 한다. 결국 rc는 기울기가 1인 직선에 근접할수록 함수로서 가치가 높아진다고 할 수 있다. rc는 Pearson’s r (the measure of precision)과 Cb (the measure of accuracy)의 곱으로 계산되며, rc와 Cb가 1에 가까울수록 두 집단이 서로 상관관계가높은 것이다.


rc값(Lin’s concordance correlation coefficient)으로 의학전문대학원생의 자가 평가 점수와 SP 평가 점수 간의 일치 정도를 파악하였다.


결과

1. 의학전문대학원생의 커뮤니케이션 능력 수준


Table 1은 의학전문대학원생이 스스로 평가한 커뮤니케이션 능력 수준과 SP가 평가한 의학전문대학원생의 커뮤니케이션 능력 수준을 각각 최상, 상, 중, 하, 최하로 분류하여 분석한 결과이다. 

공감적 커뮤니케이션 능력 중 인지적 공감 능력에 대해서는, 

공감적 커뮤니케이션 능력 중 정서적 공감 능력에 대해서는,

대인관계 커뮤니케이션 능력에 대해서는,


이를 통해 볼 때, 의학전문대학원생이 인식하고 있는 본인의 커뮤니케이션 능력 수준과 SP가 인식한 의학전문대학원생의 커뮤니케이션 능력 수준에는 차이가 있다는 것을 알 수 있다.


2. SP가 평가한 의학전문대학원생의 공감적 커뮤니케이션 능력과 대인관계 커뮤니케이션 능력 간의 상관관계


Table 2는 SP가 평가한 의학전문대학원생의 공감적 커뮤니케이션 능력과 대인관계 커뮤니케이션 능력 간의 상관관계를 분석한 결과이다. SP에게 인지적 공감 능력을 높게 평가받은 의학전문대학원생일수록 정서적 공감 능력(r=0.869, p<0.01)과 대인관계 커뮤니케이션 능력도 높게 평가받았다(r=0.840, p<0.01).


이를 통해 볼 때, SP에게 공감적 커뮤니케이션 능력을 높게 평가받은 의학전문대학원생일수록 대인관계 커뮤니케이션 능력 역시 높게 평가받은 것을 알 수 있다(Table 2).


3. 의학전문대학원생이 스스로 평가한 커뮤니케이션 능력 점수와 SP가 평가한 의학전문대학원생의 커뮤니케이션 능력 점수의 일치도


Table 3은 의학전문대학원생이 스스로 평가한 커뮤니케이션 능력 점수와 SP가 평가한 의학전문대학원생의 커뮤니케이션 능력 점수의 일치 정도를 알아보기 위해 Lin’s concordance를 이용하여 분석한 결과이다.


이상의 Lin’s concordance의 결과를 볼 때, 의학전문대학원생이 스스로 평가한 커뮤니케이션 능력 점수와 SP가 평가한 커뮤니케이션 능력 점수 간에는 매우 낮은 일치도를 보이고 있다는 점을 알 수 있다.



고찰

의료진이 자신의 커뮤니케이션 능력을 이해하는 것은 의료면담을 보다 효과적으로 진행하는 데 도움을 줄 수 있다. 의료진이 자신의 커뮤니케이션 능력을 향상시키기 위해서는 환자가 평가한 의료진의 커뮤니케이션 능력 수준을 분석하여 반영하는 것이 효과적이다[7].


의학전문대학원생의 자가 평가 점수와 SP 평가 점수가 커뮤니케이션 능력의 3가지 하위 요소(인지적 공감 능력, 정서적 공감 능력, 대인관계 커뮤니케이션 능력)에서 모두 불일치하였다.


의학전문대학원생의 자가 평가 점수와 SP 평가 점수의 불일치는 기존에 알려진 자기 고양 편향(self-enhancement bias)으로 설명할 수도 있다. 자기 고양 편향은 전체적으로 자신을 지나치게 긍정적으로 평가하는 경향성을 일컫는 것으로, 자신의 능력을 측정할 때뿐만 아니라 성격을 측정하는 데에서도 매우 일반적으로 일어나는 현상이다[16]. 이러한 현상이 나타나는 이유는 자기 자신을 실제보다 더 낫다고 보는 환상이 개인의 정신 건강 및 심리적 안녕감에 긍정적인 영향을 미치기 때문이다[17]. Epley & Dunning [16]의 연구에서도 타인의 행동을 평가할 때보다 본인이 스스로 자신의 행동을 평가할 때 더 큰 오류를 보이는 경향이 있었다.


한 가지 척도만으로도 측정하고자 하는 목적을 이룰 수 있다면 여러 가지 도구를 모두 사용하는 것보다 연구의 효율성을 높일 수 있다. 특히 본 연구의 결과에서는 공감적 커뮤니케이션 척도와 대인관계 커뮤니케이션 척도는 매우 높은 정적 상관관계를 보이고 있었다. 이러한 사실은 두 도구가 측정하고자 하는 초점이 다름에도 불구하고 실질적으로는 유사한 내용을 측정하고 있다는 점을 보여준다. 그러나 기존 연구에서 의사-환자 간의 대인관계 커뮤니케이션의 핵심 요소로 공감 능력을 꼽고 있다[11]. 그러므로 의학전문대학원생의 커뮤니케이션 능력을 평가함에 있어서도 공감 능력에 초점을 맞추는 것이 중요하다고 할 수 있다. 즉, 의학전문대학원생의 커뮤니케이션 능력을 측정함에 있어 대인관계 커뮤니케이션 척도보다는 인지적 공감 능력과 정서적 공감 능력을 구체적으로 평가하는 공감적 커뮤니케이션 척도를 우선적으로 적용하는 것이 더 효율적이라고 할 수 있을 것이다.


또한 의료진의 커뮤니케이션 능력에 대한 의사와 환자의 인식 차이를 줄이기 위해서는 의학전문대학원생의 교육과정에서부터 커뮤니케이션 능력을 향상시킬 수 있는 실질적인 프로그램 모듈의 개발이 필요하다. 예를 들어, Riess et al. [20]은 레지던트의 공감 능력을 향상시키기 위해 the three 60-minute empathy training modules을 개발하였다. The three 60-minute empathy training modules는 공감에 대한 기본적 개념 교육, 어려운 환자(difficult patient)를 위한 공감 능력, 공감 능력과 나쁜 소식 전하기 등의 3가지 모듈로 구성되어 있다.



















Concordance between Self and Standardized Patient Ratings of Medical Students' Communication Skills
Min Ji Je,1 Su Hyun Lee,1 Chang Hyung Lee,2 and Sung Soo Kim1
1Department of Social Studies of Medicine, Pusan National University School of Medicine, Yangsan, Korea.
2Department of Rehabilitation Medicine, Pusan National University School of Medicine, Yangsan, Korea.

Corresponding Author: Sung Soo Kim. Department of Social Studies of Medicine, Pusan National University School of Medicine, 49 Busandaehak-ro, Yangsan 626-815, Korea. Tel: +82.51.510.8036, Fax: +82.51.510.8026, Email: tigerkss@pnu.edu 
Received October 29, 2012; Revised December 28, 2012; Accepted January 31, 2013.


Abstract

Purpose

The purpose of this study was to examine the concordance between self and standardized patient (SP) ratings of medical students' communication skills.

Methods

Forty-three students interviewed SPs. The students were asked to complete a communication skills questionnaire that comprised 2 measures (empathy and interpersonal communication) before the interview. After each student's interview with the SP, the latter completed the same questionnaire as the students.

Results

Based on Lin's concordance coefficient, there was strong disconcordance between students' self-ratings and the SPs' ratings. With regard to empathic communication, more than 50% of students who considered themselves higher than middle level were regarded by SP as low level. On interpersonal communication, 39% of students who assessed themselves as higher than middle level were scored low level by SPs.

Conclusion

There was strong disconcordance between students' self-ratings and the SPs' ratings-students tended to overevaluate themselves regarding their communication skills. These differences might result in patient dissatisfaction and noncompliance. Further, it could become a serious hindrance to the development of a good doctor-patient relationship. Medical educators should make sincere efforts to reduce this gap by teaching medical students the importance of the patients' perception of his doctors' communication skills.

Keywords: Empathic communicationInterpersonal communicationLin's concordanceStandardized patientsOverevaluation of communication skill


표준화 환자를 이용한 진료수행시험에서 교수와 표준화 환자의 채점 정확도

경희대학교 의학전문대학원 의학교육학교실

박재현, 고진경, 김선미, 유효빈



(http://www.redorbit.com/education/reference_library/health_1/medical_procedures/1112733763/auscultation/)


서론


수행평가에서 채점자의 신뢰도에 관한 문제는 오래된 논쟁거리이다.


중요한 시험에 적합한, 신뢰할 만한 채점관은 누구일까? 첫 번째 후보는 임상교수들이다. 음 후보는 진료수행시험에 참여하는 표준화 환자이다. 이들은 현실적 어려움이 많은 임상교수를 대신해서 ‘표준화된’ 채점을 하기에 적합한 대상들이다. 

그러나 자격시험과 같이 중요한 시험에서 채점관 역할을 하기에 충분한 역량을 갖추고 있는지, 혹시 시험의 신뢰도나 타당도를 떨어뜨리게 되지는 않을지 우려하는 목소리도 적지 않다.


진료수행시험을 먼저 도입한 북미와 유럽에서도 유사한 논란이 있었다. 

임상교수와 표준화 환자 간의 진료수행평가의 채점 결과를 비교하는 연구논문이 여러 편 발표되었다. 

Martin et al. [2]은 의사와 표준화 환자의 채점 결과를 정답기준(golden standard)과 비교한 연구에서 의사채점자의 정확성이 더 높다는 결론을 내렸다. McLaughlin et al. [3]은 학생들은 표준화 환자 채점자에 대해 긍정적인 태도를 가지고 있으나 표준화 환자의 점수는 의사보다 전반적으로 높았고, 다른 측정(MCQ) 결과와의 관련성이 낮았다고 보고하였다.


반면, Kopp & Johnson [4]의 연구에 의하면 의사와 표준화 환자의 채점 결과의 일치도가 81~92% 사이였으며, 시험의 후반부로 갈수록 일치도가 높아졌다. 이들은 표준화 환자가 신뢰할만한 채점자의 역할을 할 수 있다는 결론을 내렸다. MacRae et al. [5]은 병력청취와 신체진찰에서 표준화 환자의 채점표 점수가 의사의 평가결과와 높은 상관관계를 나타냈음을 보고하였다. Kwon et al. [6]도 표준화 환자와 임상교수의 채점결과가 병력과 신체진찰 영역에서의 일치도가 높아 표준화 환자의 채점 결과를 임상교수의 것을 대신해 사용할 수 있다고 논의하였다. 그러나 환자-의사관계에서는 일치율이 크게 떨어졌음을 함께 보고하였다.


상교수와 비교하는 방법을 택하지 않고 표준화 환자의 채점 결과의 신뢰성만 집중적으로 조사한 연구들도 있다. 

Vu et al. [7]에 의하면 표준화 환자의 채점정확도는 ‘좋음’에서 ‘매우 좋음’ 수준을 보였다. 또한 이들의 채점정확도는 채점표의 길이와 문항의 유형 및 명료함에 영향 받았으나 하루 중의 시기나 시험기간 중 날짜에는 영향 받지 않았다고 보고하였다. De Champlain et al. [8]은 표준화 환자와 관찰자의 채점 결과를 정답기준과 비교하고, 표준화 환자와 정답기준과의 높은 일치율을 제시하였다. Heine et al. [9]은 정답기준을 작성하여 비교함으로써 표준화 환자의 채점오류의 유형(누락오류[omission]/첨가오류[commission])과 빈도를 분석하였다. 표준화 환자들은 신체진찰보다는 병력청취에서 더 많은 오류를 범했고, 누락오류보다는 첨가오류를 더 자주 범하였. 전반적으로 표준화 환자의 채점 정확성은 높은 수준이었고, 발생된 오류는 대부분 학생들에게 호의적인 결과로 나타났다.


위에서 제시한 선행연구들의 연구방법과 결과를 비교분석해 보면 임상교수와 표준화 환자의 채점 정확성을 분석하기 위한 최선의 방법을 선택할 수 있다. 

먼저 정확성 판정을 위한 기준을 살펴보면, 먼저 임상교수와 표준화 환자의 채점 결과를 비교하여 일치도를 구하는 방법이 있다.


또는 따로 개발한 정답기준과 비교하여 채점 결과의 정확성을 파악하는 방법도 있다[2,8,9,10]. 방법적인 측면에서 볼 때 오류가능성을 안고 있는 임상교수의 결과를 기준으로 하여 일치도나 상관을 구해 표준화 환자의 채점 정확성을 판정하는 방법보다는 정답기준을 작성하여 이를 근거로 채점 정확성을 판단하는 것이 더 명확한 연구방법으로 판단된다


분석의 수준도 결정해야 한다. 각 문항점수를 분석하는 방법과 사례별로 합산하여 분석하는 방법이 있다. 

분석의 수준이 높아질수록 연구자가 원하는 결과를 얻기 쉽다. 즉, 문항점수보다는 사례점수를, 사례점수보다는 여러 사례의 총점을 비교할 때 신뢰도는 높아지고, 동시에 다면적인 정보를 얻을 수도 있다[11]. 그러나 문항수준의 분석은 점수의 합산을 통해 조정되지 않은 실제 채점 결과의 정확성을 알려준다. 그러므로 번거로울 뿐 아니라 이미 시행된 시험에 대해 낮은 신뢰도를 보고하게 될 수도 있지만 문항수준의 분석은 확인해 볼만한 가치가 있다.


만약 표준화 환자의 채점 정확성이 충분히 높게 나타난다면 이 연구는 국가고시와 같은 대규모 진료수행시험에서 표준화 환자를 채점관으로 선정하는 것에 대한 근거를 제공할 수 있을 것이다.



대상 및 방법

1. 표본과 연구도구

학생들의 진료수행능력 평가는 임상교수와 표준화 환자에 의해 이원적으로 이루어졌다. 임상교수는 시험이 진행되는 동안 시험장 내에 머물면서 학생들의 진료과정을 직접 관찰하고 평가하였다. 채점표는 병력청취, 신체진찰, 임상예절, 환자-의사관계를 평가하는 문항으로 구성되었으며, 사례에 따라 환자교육이나 진단계획 등에 관한 문항이 추가되었다


병력청취와 임상예절은 ‘했음/하지 않았음’의 2단계로, 

체진찰이나 환자교육은 ‘했음/제대로 하지 않았음/하지 않았음’의 3단계로 표시하도록 하였다. 한편 

환자-의사관계는 ‘매우 동의함’부터 ‘전혀 동의하지 않음’ 사이의 5점 척도 내에서 학생의 수준을 평정하도록 하였다


2. 정답기준(answer key)

임상교수와 표준화 환자가 기록한 점수의 정확성을 판정하정답기준은 두 명(SK, HY)의 표준화 환자 트레이너가 개하였다. 이들은 학생 60명이 표준화 환자를 대면하는 장면을 보고 각각 60개의 평가기록표를 작성하였다. 두 사람의 채점자는 각기 다른 장소에서 녹화장면을 보면서 독립적으로 평가기록표를 작성하였으며, 평가를 마친 후 평가기록표의 각 문항을 비교하여 일치하지 않은 결과에 대해서는 대면장면을 다시 확인하고 토의를 통해 합일된 의견을 구하였다. 판정이 모호한 몇 개의 문항에 대해서는 제3의 채점자(JK)가 확인하여 최종판정을 내렸다. 이러한 과정을 통해 개발된 정답기준은 각 학생이 표준화 환자 대면과정에서 보인 행동에 대한 가장 적절한 판정을 담고 있다.


3. 문항수준의 분석

문항수준의 일치도는 일치도 통계(agreement statistics)와 Kappa 계수를 구하여 분석하였다. 

일치도 통계는 채점자가 피험자의 수행을 어떤 유목이나 범주로 분류할 때 사용하는 방법으로, 두 채점자가 일치하게 채점한 피험자의 비율을 산출한다. 

Kappa 계수는 일치도 통계가 우연에 의해서 일치하게 평정된 경우를 포함하고 있어 두 채점자 간의 일치도가 과대 추정되는 문제점을 해결하기 위하여 제안된 방법이다. Kappa 계수는 일치도 통계에서 우연에 의하여 두 채점자의 평정결과가 일치하는 확률을 제거한 수치이므로 일치도 통계보다 항상 낮게 추정된다[12,13].


채점표 영역 중 환자-의사관계는 다른 영역과 달리 5점 척도상에서 문항에 동의하는 정도를 평정하도록 되어있어 위와 같은 일치도(agreement) 분석이 적합하지 않다. 그래서 환자-의사관계 문항들은 서열척도로 평가된 자료에서 채점자 간 신뢰도를 측정하는 대표적인 방법인 급내상관계수(intraclass correlation coefficient, ICC)를 구하여 분석하였다[14]. 

ICC는 자료의 분포가 분산이 아주 적은 경우 결과가 무의미하게 나타나므로 비교하는 두 집단의 분산분석을 선행한 후 해석하였으며, 이차원변량모형(two-way random effects)과 절대동의서(absolute agreement) 방식으로 계산하였다[15].



4. 사례수준의 분석

각 사례에서 학생들이 획득한 점수를 비교하여 임상교수와 표준화 환자, 그리고 정답기준의 사례별 총점이 어떻게 다른지 분석하기 위하여 사례(4개)와 채점자(3수준: 임상교수, 표준화 환자, 정답기준)를 요인으로 하여 반복측정에 의한 이원분산분석을 시행하였다



결과

1. 문항수준의 일치도 분석

Table 4는 임상교수와 정답기준을 비교한 결과와 표준화 환자와 정답기준을 비교한 결과이다. 분석한 문항은 환자-의사 관계를 제외한 문항들이며, 일치율Kappa 계수를 제시하였다. 

일치율의 경우 0.85 이상이면 높은 것으로 해석하고[12], Kappa 계수의 경우 0.41~0.60이면 보통 수준(moderate agreement), 0.61~0.80이면 높은 수준(substantial agreement), 그리고 0.81~1.0이면 거의 완벽하게 일치(almost perfect agreement)하는 것으로 해석한다[16].
분석
결과에 따르면, 표준화 환자와 임상교수는 정답기준과 유사한 일치율을 보였다. 그러나 Kappa 계수를 참조하면 두 평가 그룹은 정답기준과 일치도가 달랐다. 표준화 환자는 모든 사례에서 정답기준과 보통 수준의 일치도를 보였다. 즉, 표준화 환자는 보통 수준의 채점 정확성에 도달하였다. 반면, 임상교수는 사례 2에서 정답과의 일치도가 크게 떨어졌다. 전반적으로 표준화 환자의 채점정확도가 임상교수보다 높은 편이다.


채점표에서 비교적 비중이 큰 병력청취와 신체진찰 영역의 정확도를 Kappa 계수로 비교한 결과를 Table 5에 제시하였다.


Table 6은 환자-의사관계 문항에서 임상교수, 표준화 환자의 평가결과와 정답기준 간의 ICC를 분석한 결과이다. ICC는 일반적으로 0.75 이상이면 높은 것으로 해석한다[17]. 구결과를 살펴보면 임상교수가 채점한 첫 번째 문항의 F 통계량이 유의하지 않은 것을 제외하고 모든 문항이 정답기준과 분산에 차이가 있으므로 ICC의 해석이 가능하다. 그러나 임상교수와 표준화 환자 모두 모든 문항의 ICC가 0.75에 근접하지 않았다. 문항수준의 분석에서 환자-의사관계의 채점 정확성은 채점자를 막론하고 매우 낮았다


2. 사례수준의 일치도 분석

사례와 평가자를 요인으로 사례점수를 반복측정 분산분석한 결과를 Table 7에 제시하였다. 먼저, Mauchly 구형성검정(test of sphericity) 결과를 살펴보면 자료의 구형성을 만족하지 못하므로(chi-square estimate=15.30, df=2, p<0.001)일변량분석결과를 참조하였다. 일반적인 반복측정 분산분석에서는 개체 간 효과가 연구자의 주요 관심사이나 이 연구는 채점자 간 신뢰도를 검정하고자 하기 때문에 동일한 피험자에 대한 채점자 간 차이를 분석한 개체 내 효과에 주목해야 한다. Table 7에 따르면 채점자 간에는 통계적으로 유의미한 차이가 없으며(F=3.28, p>0.05), 채점자와 사례 사이에 상호작용도 없었다(F=1.76, p>0.05). 즉, 임상교수와 표준화 환자의 사례점수(percent-correct scores)는 정답기준의 사례점수와 차이가 없으므로 두 채점자 그룹 모두 정확하게 채점한 것이다.


즉, 교수와 표준화 환자 모두 엄격하게 채점하는 경향(error of harshness)이 있고, 표준화 환자는 교수보다는 더 호의적으로 채점하였다.


단, 위에서 보고한 결과는 환자-의사관계 문항을 제외한 사례점수이다. 환자-의사관계 문항을 포함한 점수로 같은 분석을 해보면 위와는 매우 다른 결과가 나타난다. 채점자 간 차이가 통계적으로 인정되어(F=8.59, p=0.001) 임상교수(60.39±13.02)와 표준화 환자(60.37±14.56)의 채점 결과는 정답기준(65.08±10.18)과 다르므로 두 그룹 모두 채점 정확성을 담보할 수 없다는 결론에 이르게 된다. 그러나 앞서 문항수준의 분석에서 나타난 환자-의사관계 문항과 평정척도의 차별성과 잠재적 문제점을 인정하여 본 연구에서는 환자-의사관계 문항을 제외하고 분석한 결과를 최종결과로 보고하였다.



고찰

이 연구에서도 선행연구와 마찬가지로 사례수준의 분석은 문항수준의 분석보다 신뢰도 판정이 후하게 내려졌다[8].가의 신뢰도를 분석할 때에는 분석자료가 더 많은 정보를 포함할수록, 예를 들어 더 많은 문항을 가진 시험지이거나, 더 많은 피험자를 가진 시험일수록 신뢰도가 높게 평가된다. 같은 원리로 진료수행시험에서 스테이션의 수를 늘리거나 다수의 채점자를 배정하면 시험의 신뢰도가 높아진다[18].


문항수준의 분석결과를 살펴보면 교수 채점자들의 정확성이 표준화 환자들보다 떨어진다(Table 4 Kappa 계수 참조).


그런데 임상교수들에게 익숙한 검사일수록 오히려 검사를 ‘제대로’ 한 경우와 그렇지 않은 경우를 판단하는 기준의 일관성이 떨어지기 쉽다. 왜냐하면 임상교수들은 각자의 필요나 습관에 따른 검사방법에 익숙하기 때문이다.


이러한 현상에 대해De Champlain et al. [8]은 일반적으로 신체진찰의 채점 정확성이 병력청취보다 높게 나타나나 ‘수행을 제대로 한 경우’와 ‘수행을 하긴 했으나 정확히 하지 못한 경우’를 구분해서 평정하도록 되어 있는 채점표를 쓰는 경우 사례에 따라 신체진찰의 채점 정확성이 크게 떨어질 수도 있다고 논의한 바 있다.


문항수준의 분석결과에 따르면 표준화 환자의 채점 정확성이 임상교수보다 더 높다. 이는 정답기준과 비교해서 임상교수의 채점 정확성이 표준화 환자보다 더 높았다고 보고한 Martin et al.[2]의 연구와 상반된 결과이다.


그러나 선행연구를 이 연구와 면밀히 비교한 결과, 연구팀은 중요한 차이점을 발견할 수 있었다. Martin et al.의 연구에서는 정답기준이 임상교수들에 의해 개발된 반면, 이 연구에서는 표준화 환자 트레이너들에 의해 개발되었다. 임상교수가 만든 기준에 임상교수의 채점 결과는 더 잘 들어맞았고, 표준화 환자 트레이너가 만든 기준에는 표준화 환자의 채점 결과가 더 일치하였다.


환자-의사관계 문항은 채점자에 상관없이 매우 낮은 채점 정확도를 보였다. 이는 Kwon et al. [6]이 환자-의사관계 문항에서 채점자 간 낮은 일치도를 보고한 것과 동일한 결과이다. 환자-의사관계 문항의 낮은 신뢰도는 선행연구뿐 아니라 이 연구 내에서 정답기준을 개발한 두 트레이너 간 일치도 분석에서도 재확인할 수 있다. 다른 영역의 문항에서는 매우 높은 수준의 일치도를 보인 트레이너들은 환자-의사관계 문항에서는 매우 낮은 상관을 보였다(Table 3).


한편, 임상교수와 표준화 환자의 환자-의사관계 채점 정확성을 비교해 보면 다른 영역과는 상반된 경향성이 나타난다. 즉, 임상교수와 정답기준의 일치도가 표준화 환자와 정답기준의 일치도보다 더 높은 것이다. 여기에서 연구팀은 또 하나의 중요한 채점자 특성을 발견하였다. 임상교수들과 정답기준을 개발한 트레이너들은 학생들의 진료장면을 직접, 혹은 화면을 통해 관찰한 반면, 표준화 환자들은 진료의 대상자로 학생과의 상호작용에 직접 관여하였다. 즉, 이들은 관찰자와 참여자로서 시험장면을 보는 시점이 달랐다.


사례점수를 가지고 정답기준, 임상교수 채점, 표준화 환자 채점을 개체 내 요인으로 두고, 4개 사례를 개체 간 요인으로 두어 반복측정 분산분석을 한 결과, 정답기준, 임상교수 채점, 표준화 환자 채점 간에는 점수의 차이가 없었다. 즉, 오류로 점수를 더하거나 뺀 문항을 모두 합산한 결과(net score)에 따르면 임상교수와 표준화 환자가 채점한 점수는 정답기준과 점수가 같았다. 이는 표준화 환자 채점과 임상교수 채점의 일치도에 대해서 긍정적인 결론을 내린 많은 선행연구를 지지하는 결과이다[4,5,6,7,8,9].


위의 논의를 종합하면 표준화 환자와 임상교수의 채점 정확성이 확보되었다는 결론을 내릴 수 있다. 이러한 결론을 통해 대규모 진료수행시험에서 표준화 환자가 임상교수를 대신해 학생들의 진료수행능력을 신뢰성 있게 평가할 수 있으리라는 실제적 판단을 내릴 수 있다. 철저한 훈련이 주어진다면 표준화 환자들은 사례개발자가 평가하고자 의도한 행동이나 지식을 일관성 있게 평가할 수 있는, 신뢰할 만한 채점관의 역할을 수행할 수 있을 것이다. 그러나 이러한 주장은 충분한 훈련과 명료한 채점표가 제공된다는 전제 하에 설득력이 있음을 기억해야 한다. 채점자의 오류를 줄이기 위한 채점표와 훈련의 조건에 대해서 Williams et al. [19]은 채점표를 간결하게 구성하고, 평정단계도 가능한 줄여야 하며, 채점자가 사례와 채점문항을 이해하는 것뿐 아니라 수행평가가 가지는 한계점까지도 이해하도록 충분히 훈련할 것을 제안하였다. 또한 채점자에게 시험이 진행되는 과정에서 적절한 피드백을 줄 것도 함께 권고하였다. 실제로 Wallace et al. [10]의 연구에 의하면 표준화 환자에게 무작위(random) 피드백을 주었을 경우에 피드백을 주지 않거나 계획된 피드백을 주었을 때보다 높은 채점 정확성을 보였다.































Faculty Observer and Standardized Patient Accuracy in Recording Examinees' Behaviors Using Checklists in the Clinical Performance Examination
Jaehyun Park, Jinkyung Ko, Sunmi Kim and Hyobin Yoo
Department of Medical Education, Kyung Hee University School of Medicine, Seoul, Korea.

Corresponding Author: Jinkyung Ko. Department of Medical Education, Kyung Hee University School of Medicine, 1 Hoegi-dong, Dongdaemun-gu, Seoul 130-701, Korea. TEL) 02-961-9102, FAX) 02-969-0792,Email: michkay@khu.ac.kr 
Received April 13, 2009; Accepted June 25, 2009.


Abstract

Purpose

The purpose of the study was to examine the recording accuracy of faculty observers and standardized patients (SPs) on a clinical performance examination (CPX).

Methods

This was a cross-sectional study of a fourth-year medical students' CPX that was held at a medical school in Seoul, Korea. The CPX consisted of 4 cases and was administered to 118 examinees, with the participation of 52 SP and 45 faculty observers. For the study we chose 15 examinees per case, and analyzed 60 student-SP encounters in total. To determine the recording accuracy level, 2 SP trainers developed an answer key for each encounter. First, we computed agreement rates (P) and kappa coefficient (K) values between the answer key-SPs and the answer key-faculty observers. Secondly, we analyzed variance (ANOVA) with repeated measures to determine whether the mean percentage of the correct checklist score differed as a function of the rater, the case, or the interaction between both factors.

Results

Mean P rates ranged from 0.72 to 0.86, while mean K values varied from 0.39 to 0.59. The SP checklist accuracy was higher than that of faculty observersat the level of item comparison. Results from ANOVA showed that there was no significant difference between the percentage of correct scores by the answer key, faculty observers and SPs. There was no significant interaction between rater and case factors.

Conclusion

Acceptable levels of recording accuracy were obtained in both rater groups. SP raters can replace faculty raters in a large-scale CPX with thorough preparation.

Keywords: Clinical competenceUndergraduate medical educationObserver variationEducational measurement.


의학전문대학원 신입생 선발에서의 Multiple Mini-Interview

강원대학교 의학전문대학원 1외과학교실, 2약리학교실, 3가정의학교실, 4해부학교실, 5미생물학교실, 6내과학교실, 7진료능력개발센터

노혜린1,7, 이희제2, 박승배1, 양정희3,7, 김대중4, 김상현5, 이승준6, 채기봉1



서론

좋은 학생을 선발하는 것이 좋은 의사를 선발하는 시이기에 의학전문대학원의 선발면접은 매우 중요하다[1].

의학과 학생 선발면접에서는 불명예스러운 전문인이 될 가능성이 있는 사람을 걸러내는 작용도 크다[2]. 이를 통해 대학은 사회에 대한 공정성의 책임을 다하게 된다[3]. 선발면접은 의사가 되기를 원하는 다양한 그룹의 응시자에게도 모두 공정한 평가의 기회를 제공해야 한다[3].


우리나라에서 주로 사용하는 의학과 학생 선발면접 형태는 다수의 면접관이 한 명 또는 다수의 응시자를 10분 내외의 짧은 시간 동안 구술 면접하는 방식이다.


이러한 면접 형태는 평가의 신뢰도를 확보하기 어렵다는 것이 단점이다

  • 평가가 짧은 시간에 이루어지며 면접관이 사전에 충분히 면접 문항을 볼 시간이 부족하기 때문이다. 
  • 면접관은 면접문항의 평가목적을 제대로 파악하지 못하고 면접을 시작할 수도 있다. 
  • 또한 명확한 채점 기준이 없어 같은 응시자에 대한 점수가 면접관마다 다를 수 있다. 
  • 면접관이 질문하는 형태에 따라 질문의 의미가 달라질 수도 있다. 
  • 응시자마다 면접관이 달라지거나 평가문항이 달라져 형평성이 문제될 수 있다. 

따라서 이러한 면접에서는 면접관 간의 점수 차이를 줄이기 어렵고 평가의 신뢰도, 더 나아가 면접의 필요성까지 의심받게 된다. 


면접 평가의 주된 오차 요인 중 하나는 면접관에서 나온다. 

특히 면접의 결과가 선발, 배치의 기능 등 중요한 교육적 의사결정에 사용될 경우 평가자와 관련된 신뢰도는 반드시 고려해야 할 대상이 된다[4].


최근 객관구조화진료시험과 비슷한 형태로 진행되는 면접시험인 Multiple Mini-Interview (MMI)가 개발되었다[5]. 객관구조화진료시험에서 학생들은 주어진 시간 내에 여러 개의 시험방을 차례로 돌면서 부여된 진료 과제를 수행하게 된다[6]. MMI 역시 여러 개의 면접방을 차례로 돌면서 면접관과 함께 부여된 과제에 대해 면접하게 된다[7,8]. Eva et al.[5]은 MMI를 통해 0.65의 신뢰도를 확보할 수 있었다고 보고하였다.


대상 및 방법

1. 대상

2. 면접방과 면접관 배치

본교 입학전형회의에서 정한 가장 중요한 원칙은 기밀 유지였다. 이 원칙에 따라 모든 면접을 하루 내에 끝낼 것, 사례개발교수와 면접문항개발위원이 중심이 되어 기밀을 유지하며 사례를 개발할 것, 기밀 유지를 철저히 하기 위해 사례의 영역 선정이나 보완 등을 위한 자문패널 동원은 피할 것, 면접교수와 면접사례는 면접 전날 결정할 것, 실험적 연구는 면접 전날 저녁에 시행할 것, 모든 면접관은 교수로 할 것, 표준화환자는 활용하지 말 것 등의 세부 원칙을 결정하였다.

3. 평가 영역과 주제 선정

4. 사례 및 채점표 개발

의학적 상황에 익숙하지 않은 학생들을 고려하여, 쉬운 의학적 상황이나 비의학적 상황으로 제시하였다. 미리 준비된 답변보다는 본인이 가지고 있는 본연의 생각과 모습이 드러날 수 있도록 사례와 질문을 구성하였다. 암기된 전문지식을 회상하여 답하기 보다는 활성 지식을 논리적 사고를 바탕으로 이끌어내는 데 주력하였다. 남녀의 차이, 나이, 전공에 따라 더 유리하거나 불리하지 않도록 상황을 만들었다.


이와 함께 면접관들이 추가로 질문할 구조화된 탐색 질문을 사례별로 개발하였다. 핵심 질문이 상황에 대한 질문(situational question)인데 비해, 탐색 질문에는 구체적인 자신의 경험에서의 성과를 묻는 질문(accomplishment question)을 위주로 작성하였다[9].


5. 면접 진행방법

6. 면접 훈련

7. 실험적 연구

각 영역에 개발된 사례들 중 각각 1개씩이 면접 전날 선택되었다. 이 사례들로 면접 전날 실험적 연구(pilot study)를 거쳤다. 2007년 당시 자원한 2학년 학생 8명을 대상으로 하였다.

8. 자료처리 및 분석

신뢰도는 McMaster 대학에서 개발한 urGENOVA의 Windows 프로그램인 g string 4.1.0 (http://www.mcmaster.ca/perd/download)을 이용하여 일반화가능도계수로 구하였다. 오차 요인은 면접방(Station, S), 면접관(Rater, R), 채점항목의 종류(이분법적 채점 또는 총괄채점)(Group, G), 문항(Item, I) 등 4가지로 하였다.


결과

1. 전체 및 영역별 점수

2. 입학전형에 활용된 다른 성적과의 상관관계

3. 면접 영역 간의 상관관계 

면접 총점은 모든 면접 영역의 점수와 보통 수준의 상관관계(0.6~0.7)를 보였다.

4. MMI의 신뢰도

MMI의 신뢰도(Generalizability coefficient)는 0.791이었다. 면접관, 면접관과 문항간의 상호작용, 면접관과 응시자, 그리고 문항형태와의 상호작용 등의 분산성분은 0.0000이었다.

5. 학생들의 반응

1) 5점 척도 설문 결과

학생들은 MMI 형태의 시험에 만족한다(4.21±0.69)고 답하였다. 학생들은 이러한 평가방식이 약간 낯설었으며(3.35±1.03), 다른 면접에 비해 약간 더 긴장하였다(3.35±1.03)고 하였다.

2) 서술식 답변


6. 면접관들의 반응

1) MMI에 대한 면접관들의 5점 척도 설문 결과

면접관들은 면접시간은 적절하였으며(4.50±0.52), 사례는 응시자 수준에 적절하였다(4.14±0.66)고 답하였다.

2) MMI에 대한 면접관들의 서술식 답변


고찰

면접은 면접관과 응시자가 서로 대화를 통해서 얻고자 하는 자료나 정보를 수집하여 평가하는 방법이다[4]. 따라서 면접에 의한 평가는 면접관의 선입견이나, 응시자의 특성과 의사소통능력 등에 의해 좌우될 수 있다[5,10]. 주관적 판단에 의하지 않은, 신뢰 있는 평가가 되기 위해서는 별도의 노력이 필요하다. 모든 응시자에게 표준화된, 똑같은 질문을 하고, 질문에 대한 견본 답변을 제공하며, 면접관을 훈련하고, 다수의 면접관을 사용하는 구조화 면접이 신뢰도를 향상시킨다고 여러 연구에서 보고하고 있다[8,10,11].


MMI는 모든 응시자에게 표준화된, 똑같은 사례를 주고 질문에 대한 견본 답변을 제공하며, 다수의 면접관을 사용하는 구조화 면접의 일종이다. MMI는 기존의 구조화 면접에서 더 나아가 짧은 시간 다수의 사례를 사용함으로써 신뢰도를 더 높인 것이다.


Calgary 의과대학의 경우 9개의 8분짜리 면접방에서 MMI를 시행하였으며, 5개의 평가문항에서 10점 척도로 평가하였다[12]. 일반화가능도 이론에 의한 연구결과, 1개의 면접방에 12명의 면접관이 한꺼번에 들어가는 경우, 신뢰도는 0.55에 그치지만, 12개의 면접방에 각각 1인의 면접관이 들어가는 경우 신뢰도는 0.85였다. 사례를 많이 사용하고 각 사례당 채점자 수를 제한하는 것이 사례를 적게 하고 채점자를 많이 동원하는 것보다 신뢰도가 좋다는 것이다. Eva et al.[5]은 신뢰도를 높이기 위해 사례가 다른 면접방의 수를 늘릴 것을 제안하였다.


MMI의 장점은 응시자의 능력을 다각도에서 평가할 수 있으며, 응시자가 한 방에서 면접관에게 실수를 하였더라도 다른 방에서 만회할 기회가 있다는 것 등이다[5]. 그 외에도 응시자가 면접 받는 시간이 증가한다는 것, 그에 비해 면접관이 면접하는 시간의 증가는 없다는 것, 면접관이 다른 면접관의 영향을 받지 않고 독립적이고 주도적인 평가가 가능하다는 것, 이를 통해 면접관 또한 시간의 부담을 줄이면서도, 신뢰 있고 공정한 평가가 가능해진다는 것 등이 MMI의 장점이다.


중요한 당락이 결정되는 평가의 경우 0.90 이상의 신뢰도가 필요하다[13]. 


나이, 인종 등의 응시자의 특성이 면접 당락에 영향을 미칠 수 있다고 보고되고 있다[14]. 본 연구결과, MMI의 전체 점수는 나이, 전공, 거주지 등에 따른 차이를 보이지 않았다.


MMI 총점은 여자 응시자에서 약간 더 높았다


MMI 점수는 학사과정성적, 공인영어성적, 의학교육입문검사점수와 상관관계가 없었다. 이 결과는 MMI가 성적에 의한 후광효과를 배제하는 데 일조하였음을 알려준다. 응시자의 성적을 면접관에게 공개한 경우 면접관들이 인성 영역 평가에 영향을 받았다고 보고되고 있다[14,15]. 공정한 평가를 위해 면접관에게는 응시자에 대한 어떠한 정보도 주어서는 안 된다[12].


면접의 신뢰도가 높기 위해서는, 채점기준에 표준화된 일관성 있는 면접관의 채점이 필요하다. 기존 연구에서 구조화 면접의 경우 면접관의 일치도가 높다고 보고되고 있다[1,10,11].


면접에서의 평가자들이 자신의 평가에 확신을 갖기가 쉽지 않다. 연구에 따르면 평가에 대한 주관적 확신은 전체 면접시간에 비례하였다[10]. 평가자는 30분 이하의 면접에서는 평가 결과에 확신을 갖지 못하였다. Pendleton & Wakeford[10]는 면접에 최소한 1시간은 필요하다고 하였으며 1시간을 여러 명 이상의 평가자가나누어 써도 된다고 하였다.


외국 사례에서는 교수나 의사, 보건의료종사자, 지역사회인사, 학생 등 다양한 배경의 면접관을 활용하여 면접을 시행하고 있다[7,11].


그동안 면접의 중요성에 비해 면접의 필요성에 대한 믿음은 뚜렷하지 않았다[17]. 기존 연구에서는 면접 점수가 다른 입학전형 영역의 점수와 낮거나 보통의 상관관계를 보였다[5]. 본 연구결과에서 MMI 점수와 학사과정성적, 공인영어성적, 의학교육입문검사점수와 상관관계가 없었는데, 이는 MMI가 면접 이외의 영역에서는 평가하지 못하는 영역을 평가하고 있음을 의미한다.


면접에서는 의학전문대학원에서 가르쳐질 수 없는 영역을 평가해야한다는 인식이 많다[15]

  • Bullimore[18]는 정직성 등의 인적 특성은 18세까지 형성되므로, 의학전문대학원 선발면접에서 중요하게 평가해야한다고 하였다.
  • Lowe et al.[19]은 윤리적 지식이나 도덕적 추론, 윤리적 주제에 대한 신념 등은 의학전문대학원 교육과정을 통해 얼마든지 배울 수 있는 것들이므로, 굳이 평가할 필요는 없다고 하였다. 반면, 윤리적 이슈에 대한 태도나 윤리적 민감성은 타고난 것이며, 잘 변하지 않기에 타당성 있는 검사를 통해 평가되는 것이 바람직하다고 하였다.


본 MMI에서는 의사소통 영역을 평가하기 위해 앞에 가상의 인물이 있다고 가정하고 이야기해보도록 하였다. 외국 사례에서는 의사소통 영역을 평가하기 위해 표준화환자를 사용하기도 한다[5].


MMI에 대한 응시자들의 반응은 매우 긍정적이었다특히 이들은 면접 진행이나 면접 과정에서의 진행요원과 면접관의, 친절하고 응시자를 존중하는 태도를 보고 긴장감이 누그러졌으며, 학교에 대한 호감도 가지게 되었다고 하였다.


Reiter et al.[20]은 MMI를 시행하기 2주 전에 MMI에 대한 정보를 접한 응시자와 그렇지 않은 응시자 간에 평가 결과의 차이가 없었다며, 사례가 미리 공개되어도 평가에는 영향을 주지 않았다고 결론지었. 이러한 연구 결과가 우리나라에서도 일반화될 수 있을지에 대해서는 의문의 여지가 있다.

















Multiple Mini-Interview in Selecting Medical Students
HyeRin Roh,1,7 Hee Jae Lee,2 Sung Bae Park,1 Jeong Hee Yang,3,7 Dae-Joong Kim,4 Sang Hyun Kim,5Seung-Joon Lee,6 and Gibong Chae1
1Department of Surgery, School of Medicine, Kangwon National University, Chuncheon, Korea.
2Department of Pharmacology, School of Medicine, Kangwon National University, Chuncheon, Korea.
3Department of Family Medicine, School of Medicine, Kangwon National University, Chuncheon, Korea.
4Department of Anatomy, School of Medicine, Kangwon National University, Chuncheon, Korea.
5Department of Microbiology, School of Medicine, Kangwon National University, Chuncheon, Korea.
6Department of Internal Medicine, School of Medicine, Kangwon National University, Chuncheon, Korea.
7Clinical Performance Center, School of Medicine, Kangwon National University, Chuncheon, Korea.

Corresponding Author: HyeRin Roh, Gibong Chae. Department of Surgery, Kangwon National University Hospital 17-1 Hyoja-3-dong, Chuncheon 200-701, Korea. TEL) 033-258-2306, CELL) 011-372-3621, FAX) 033-258-2169, Email: hyerinr@kangwon.ac.kr 


Abstract

Purpose

Selecting medical students through interviews seems difficult and the reliability of the results is one of the major concerns. The purpose of this study was to investigate the reliability and acceptability of the Multiple Mini-Interview (MMI) in selecting medical students of Kangwon National University.

Methods

Eighty-four applicants participated in the MMI which consists of 3 8-minute stations that have 9 checklist items and 3 global items. The 3 domains that we chose were motivation to become a doctor, communication and interpersonal skills, and ethical decision-making. We placed 2 interviewers in each room. The interviewers were chosen from our faculty. We analyzed the reliability of the MMI with urGENOVA for PC. We conducted a survey of these applicants and interviewers.

Results

The reliability was 0.791. Students answered that the interview was impressive and enjoyable. Students were also satisfied with the level and quality of the MMI cases. They described that they were evaluated objectively. Interviewers also responded positively. They stated that more stations and more efforts to develop the cases were needed to improve the reliability and validity.

Conclusion

The MMI was acceptable to our applicants and faculty. It is reliable for assessing medical school applicants in Korea. We should develop more stations and better cases to increase the reliability and validity of the MMI.

Keywords: Admission interviewMedical students selectionGeneralizabilityMultiple mini-interview.


일개 의과대학 학생들의 개인적 특성에 따른 팀바탕학습 인식도 조사

가천대학교 의학전문대학원 1의학교육실, 2흉부외과학교실

박귀화1, 최창휴2, 전양빈2, 박국양2, 박철현2




서론


팀바탕학습(team-based learning, TBL)은 문제바탕학습(problem-based learning, PBL)과 달리 경영학에서 시작된 교육방법이지만, 국내외 의과대학에서 점차 그 활용도가 높아지고 있는 교육방법 중 하나이다[1]. TBL은 PBL과 마찬가지로 소그룹 학습을 근간으로 학습자 주도의 적극적 학습 참여가 가능한 교육방법이면서[2], PBL과 달리 대규모 강의실에서 개별 교수가 소그룹 학습을 이끌어 갈 수 있다는 점에서 PBL에 비해 큰 장점이 있다.


의학교육에서 TBL을 주제로 한 기존 연구는 주로 특정 과목에서 TBL을 운영한 후 학생 들의 TBL에 대한 만족도나 인식도를 조사하거나[3,4,5], 학업성취도의 변화[3,5,6,7]를 알아보는 것에 초점을 맞추었다. 이러한 연구 결과에서 TBL은 팀워크를 강화하고[4], 학습 내용의 이해와 장기 기억에 도움이 되며[8], 문제해결능력과 임상추론능력을 향상시키며[4],전문직업성 개발[3]에 유용한 교육방법으로 보고되고 있다. 또한 TBL은 전통적인 교육방법에 비해 학생들의 학업성취도를 향상시키며[5,7], 이는 의사국가시험에서도 의미 있는 좋은 결과가 있는 것으로 보고되고 있다[7]. 


그러나 모든 교육 방법에 장단점이 있듯이 모든 학습자들이 TBL을 긍정적으로 평가하며, 그 과정에서 긍정적인 학습경험을 하는 것은 아니다[9]. TBL을 긍정적인 학습경험으로 인식하고 효과적이고 우수한 수행을 보이는 팀도 있지만[10], 그렇지 않은 팀들도 존재한다[11].


또한 TBL은 팀 활동을 기본으로 하기 때문에 팀 활동 과정을 구성하는 요인인 대인관계 이해도와 팀 과제 해결을 위한 적극적 태도가 TBL을 긍정적인 학습경험으로 인식하는 데 영향을 줄 수 있다[14]. 


정의적 특성 이외에도 학업능력과 같은 지적 수준에 따라 TBL을 인식하는 정도에 차이가 있다. 간호대학생의 경우 학업능력에 따라 TBL 인식에 차이가 없었으며[10], 의과대학생이나 치과대학생의 경우 학업능력이 높은 학생들이 낮은 학생들에 비해 TBL에 대해 긍정적으로 평가하거나[7], 학업능력 상위 집단은 팀바탕학습에 대한 만족도가 높다고 보고한

바 있다[6].


대상 및 방법

1. 대상

2. 연구 도구

1) TBL에 대한 인식도 조사

학생들의 TBL에 대한 인식도를 조사하기 위해 관련 문헌 고찰을 토대로 설문지를 구성하였다. 그리고 이 측정도구의 타당성을 검증하기 위해 실시한 요인 분석 결과에 따라 3개 요인으로 구성된 총 12개 문항을 구성하였다. TBL 인식도는 팀 스킬 향상(I, 5문항), 학습능력 향상(II, 4문항), 팀 학습 향상(III, 3문항)의 3개 요인으로 구성되었으며 전체 변량의 66.01%를 설명하였다.


2) 학업능력

학업능력이란 학과 공부를 성공적으로 수행할 수 있는 어휘적, 수리적 능력 및 논리적 사고력과 노력의 지속성 등을 총괄하는 학문적 경쟁력(academic competitiveness)을 말한다.


3) 팀 효능감

학생들의 팀 효능감은 Marshall [15]의 연구에서 사용된 8문항을 Kwon [14]이 번안한 것을 사용하여 측정하였다. 팀 효능감을 측정하는 설문 문항으로는 “나는 우리 팀이 팀 과제와 팀시험을 훌륭하게 해낼 수 있다고 자신한다,” “나는 우리 팀이 팀 안에서 활동하는 방법에 관한 지식을 갖고 있다고 확신한다” 등으로 구성되어 있다.


4) 대인관계의 이해

대인관계 이해는 Marshall [15]의 연구에서 사용된 대인관계의 이해 11문항을 Kwon [14]이 번안한 것을 사용하여 측정하였다.

대인관계의 이해를 측정하는 설문 문항으로는 “나는 다양한 배경을 가진 팀원들 모두와 팀 활동을 잘한다”와 “나는 우리 팀원들의 생각과 의견을 존중한다” 등으로 구성되어 있다.


5) 문제해결에서의 적극성

문제해결에서의 적극성은 Marshall [15]의 연구에서 사용된 문제해결에서의 적극성 8문항을 Kwon [14]이 번안한 것을 사용하여 측정하였다. 문제해결에서의 적극성을 측정하는 설문 문항으로는 “나는 과제를 해결하기 위한 해결책을 적극적으로 제시한다”와 “나는 팀 과제 수행 중에 문제가 발생하면 적극적으로 대안을 찾으려고 한다” 등으로 구성되어 있다.


결과

1. 성별에 따른 TBL 인식도 차이

2. 학업능력에 따른 TBL 인식도 차이

3. 팀 효능감 수준에 따른 TBL 인식도 차이

4. 대인관계 이해도 수준에 따른 TBL 인식도 차이

5. 문제해결의 적극성 수준에 따른 TBL 인식도 차이

6. TBL 인식도에 영향을 미치는 변인



고찰


본 연구에서는 학생의 개인적 특성에 따라 TBL 효과를 어떻게 인식하고 있으며, 그 차이가 있는지를 분석하여 TBL에서 팀을 구성하고 TBL의 효과를 증진시키는 데 필요한 기초자료를 제공하고자 하였다.


인구학적 특성 중 성별에서는 남학생이 여학생보다 TBL이 학습능력을 향상시키는 데 도움이 되었다고 인식하였다.


학업능력 상위집단의 학생들이 하위집단 학생들보다 TBL이 학습능력 향상에 도움이 되었다고 인식하였다. 이는 학업능력이 높은 학생들이 낮은 학생들에 비해 TBL에 대해 긍정적으로 평가하는 경향이 있다고 보고한 연구 결과와 일치한다[7]. 또한 한 연구에 의하면 학업능력에 따른 수업만족도에서 TBL은 성취도 상위집단에서, 강의방법은 하위집단에서 만족도가 높았다고 보고하였는데[8], 이는 본 연구 결과를 지지해 주는 결과이다.


TBL에서 어떠한 학습자 특성을 고려한 팀 구성이 학습 효과의 극대화에 영향을 미칠 수 있느냐가 관심이 되는데, 그 요인 중에 하나가 팀 효능감이다. 본 연구에서는 팀 효능감 상위집단의 학생들이 하위집단 학생들 보다 TBL이 팀 스킬 향상에 도움이 되었고, 팀으로 학습하는 것이 효과가 있다고 인식하는 것으로 나타났다. 팀 효능감이 높을수록 팀 학습에 적극참여하게 되고[19], 이는 TBL을 긍정적인 학습경험으로 인식하는 데 영향을 주었다고 할 수 있다.

효능감을 증진시키는 원동력에는 구체적인 성공경험이나 긍정적인 피드백 제공이 있다.


대인관계 이해도와 문제해결의 적극성 상위집단의 학생들이 하위집단 학생들 보다 TBL이 팀 스킬 향상에 도움이 되며, TBL을 긍정적인 학습경험으로 인식하는 것으로 나타났다.


회귀분석 결과에서는 문제해결에 적극성을 보이며, 팀 효능감이 높을수록 TBL을 긍정적으로 지각하는 것으로 나타났다. 즉, 여러 요인 중에서도 이 두 요인이 TBL 인식도를 유의미하게 설명해 주는 변인으로 나타났다.

















Students' Perceptions of Team-Based Learning by Individual Characteristics in a Medical School
Kwi Hwa Park,1 Chang-Hyu Choi,2 Yang-Bin Jeon,2 Kook-Yang Park,2 and Chul-Hyun Park2
1Department of Medical Education, Gachon University School of Medicine, Incheon, Korea.
2Department of Cardiothoracic Surgery, Gachon University School of Medicine, Incheon, Korea.

Corresponding Author: Chul-Hyun Park. Department of Cardiothoracic Surgery, Gachon University School of Medicine, 38 Dokjeom-ro 3beon-gil, Namdong-gu, Incheon 405-835, Korea. Tel: +82.70.7120.7902, Fax: +82.32.464.4004, Email: cdgpch@gilhospital.com 
Received December 13, 2012; Revised February 15, 2013; Accepted February 25, 2013.


Abstract

Purpose

The purpose of this study was to examine medical students' perceptions of team-based learning (TBL) according to their individual characteristics: gender, team efficacy, interpersonal understanding, proactivity in problem solving, and academic ability.

Methods

Thirty-eight second-year medical students who took an integrated cardiology course participated in this study; 28 were male and 10 were female. A questionnaire on individual characteristics and a questionnaire on the perception of TBL were administered, and the scores of individual characteristics were grouped into three: high, middle, and low. The data were analyzed by t-test, analysis of variance, and multiple regression analysis.

Results

The TBL efficacy perception scale consisted of 3 factors: team skill, learning ability, and team learning. The group of male students and the group of students with high academic ability recognized the effect of TBL on improvements in learning ability more than females and those with low academic ability. The group of students with high team efficacy reported that TBL was effective with regard to team skill improvement. The group of students with high scores on interpersonal understanding and high proactive problem solving tended to perceive the TBL's effect on team skill improvement. Team efficacy and proactivity in problem solving had a positive effect on the perception of TBL.

Conclusion

Medical students' perceptions of the effectiveness of TBL differ according to individual characteristics. The results of this study suggest that these individual characteristics should be considered in planning of team learning, such as TBL, to have a positive impact and stronger effects.

Keywords: Team efficacyInterpersonal understandingProactivity in problem solvingAcademic ability,Team-based learning.


성격 유형이 임상수행능력시험 결과에 미치는 영향

동국대학교의료원 1내과학교실, 2소아청소년과학교실

신성준1, 김경수1, 이동석2




서론


Myers-Briggs Type Indicator (MBTI)는 전세계적으로 잘 알려져 있으며, 또한 흔히 이용되는 성격유형검사 방법으로 교육, 심리 치료 및 조직 계발 등 다양한 분야에서 이를 사용하고 있다[1].


내향형과 외향형의 구분은 정신적 방향성, 즉 에너지의 근본적 원천이 외부에서 또는 내부에서 비롯되는지에 따른 것으로 내향적인 사람은 내적 세계 및 관념적 사고를 지향하여 내면세계에서 에너지를 얻는 반면, 외향적인 사람은 행동지향적으로 외적 세계에서 에너지를 얻는다. 정신과정(mental processes) 관점에서 보면, 어떻게 인식하는지에 따라 직관형과 감각형으로 나눌 수 있으며, 어떻게 판단을 내리는 지에 따라서는 감각형 및 사고형으로 나눌 수 있다


표적인 방법으로 객관구조화진료시험(objective structured clinical examination, OSCE)임상수행시험(clinical performance examination, CPX)을 들 수 있다. OSCE는 병력 청취, 신체진찰, 정보통합이나 의사소통능력 등에 대한 평가 등을 통해 학습자의 지식, 태도 수기 등을 동시에 측정한다[2]. 이에 반해 CPX는 OSCE와 비슷한 측면이 많지만, OSCE가 술기를 강조하는 데에 반해, CPX는 표준화 환자를 대상으로 실제와 유사한 임상상황에서 이루어진다는 특징이 있으며, 학생들의 진료 능력에 대한 다양한 평가가 이루어진다.


성격유형은 학생들이 자신의 학습과정에 있어 직접 선택하고 자율성을 부여함과 같은 동기 부여[5] 및 면접기술[6] 등과 같은 부분에도 영향을 미친다.


특히 국내에서 발표된 고학년 의과대학생을 대상으로 한 연구에서 학업만족도에 있어 외향형인 경우가 내향형보다 높은 만족도를 나타냈고, 이해 양식 및 생활 양식에 있어 판단형인 경우 학업만족도가 인식형에 비해 유의하게 높았다. 학업성취도에 있어서는 판단과 결정에 있어 사고형 학생이 감정형 학생보다 높았다[7].


이 외에도 성격유형은 의과대학생의 의학관련 전문분야에 대한 관심 정도와도 관련이 있다[9,10].


개개인의 특성 차이는 학생들의 술기에 영향을 줄 수 있다는 연구 결과도 발표된 바 있다[11]. 이 외에도 대학생을 대상으로 시행된 MBTI에서 각 유형에 따라 삶에 대한 만족도, 자신감 및 정신적 안녕감에 있어 차이가 있다는 연구도 있다[12].


결과

2. 성격유형에 따른 임상수행술기시험 결과


임상수행술기시험과 성격유형과의 관계에 있어, 첫 OSCE 시험에서는 외향형, 판단형 및 감각-판단형에서 상대 유형에 비해 유의하게 높은 점수를 보였다(Table 3).러나, 이러한 차이는 2차 시험에서는 나타나지 않았다. 1차와 2차 OSCE 시험 성적을 비교하였을 때, 각각의 모든 성격유형에 있어 모두 2차 시험에서 유의한 향상을 보였다.


CPX에 있어서는 시험 평가자에 따라, 즉 평가가 교수에 의한 경우와 모의환자가 한 경우에 있어 성격유형이 미치는 영향이 다르게 나타났다. 평가자가 교수인 경우 특정 성격유형에 따른 시험점수의 차이는 보이지 않았다. 그러나, 모의환자에 의한 평가에서는 외향형, 감각형, 그리고 판단형인 학생의 점수가 상대 유형에 비해 유의하게 높았다















The Effect of Personal Character on the Results of Clinical Performance Skill Tests
Sung Joon Shin,1 Kyung Soo Kim,1 and Dong Seok Lee2
1Department of Internal Medicine, Dongguk University Ilsan Hospital, Dongguk University College of Medicine, Goyang, Korea.
2Department of Pediatrics, Dongguk University Gyeongju Hospital, Dongguk University College of Medicine, Gyeongju, Korea.

Corresponding Author: Sung Joon Shin. Department of Internal Medicine, Dongguk University Ilsan Hospital, Dongguk University College of Medicine, 814 Siksa-dong, Ilsandong-gu, Goyang 410-773, Korea Tel: +82.31.961.7145 Fax: +82.31.961.7141, Email: shine@duih.org ,Email: shine5010@yahoo.co.kr 
Received October 25, 2010; Revised January 10, 2011; Accepted March 03, 2011.


Abstract

Purpose

Even though many studies have indicated that the personality of medical students affects learning style and academic achievement, the effect of personality types on the performance skill tests has not been well known in the medical field due to the rarity of published papers. Thus, the aim of this study was to reveal the effect of personal traits on clinical skill performance tests.

Methods

Fifty-seven fourth-grade medical students were enrolled in this study. They had all completed clinical performance tests. To assess personality types, we used the Korean version of the Myers-Briggs Type Indicator (MBTI).

Results

Fifty-five of 57 senior medical students responded completely to the MBTI questionnaire. The proportion of four paired MBTI dimensions was Introversion (I)-Extroversion (E) (67.3% vs. 32.7%), Sensing (S)-Intuition (I) (76.4% vs. 23.6%), Thinking (T)-Feeling (F) (61.8% vs. 38.2%), and Judging (J)-Perception (P) (56.4% vs. 43.6%). The dominant personality types were ISTJ (23.6%), ESTJ (14.5%), and ISTP (10.9%). The first objective structured clinical examination (OSCE) test showed higher scores in Extraversion, Judging, and Sensing-Judging types compared to the counterparts (p<0.05), but this effect was not observed in the second OSCE test. On the clinical performance examination, Extraversion, Sensing, and Judging types had a higher score, as measured by standardized patients.

Conclusion

Specific personal traits affect the test scores of the clinical performance skill examinations. So, personality measurement might be a useful tool for understanding a student who has difficulty in performance tests. We hope this study will give valuable information to examiners when they instruct and counsel students about clinical performance tests.

Keywords: PersonalityClinical competenceMedical students.


의과대학․의학전문대학원 학생들의 유급 또는 휴학 경험 정도와 관련 요인

1전남대학교병원 교육연구실, 2전남대학교 의과대학․의학전문대학원 의학교육학교실, 3광주대학교 교수학습연구원

한의령1, 정은경2, 오선아3, 최기오2, 우영종2



서론


유급과 관련된 요인으로 남학생인 경우[1,2,3], 흡연량과 음주량 등이 많을수록[1], 학습방법의 문제, 그리고 무질서한 생활양식과 시간관리 능력 부족[4,5] 등이 보고된 바 있다.


의과대학․의학전문대학원 학생의 학업성취도내적 동기와 관련성이 있는데, 의학공부에 대한 강한 자율적 내적 동기를 갖는 학생은 우수한 학업성적을 보이는 반면 단순히 수능성적에 맞춰서 또는 의사라는 직업의 안정성 때문에 의과대학․의학전문대학원에 진학한 학생들의 경우 학업성취도가 낮았다[4,6,7]. 또한 의과대학․의학전문대학원 학생의 학업성취도는 개인의 성격특성과도 관련성이 있어 성실함이 학업성취도의 가장 중요한 예측인자로 제시되었으며 사회성은 임상수행 능력과 관련성이 높았다[8]. Lievens et al. [9]은 자아실현과 자기훈련을 의미하는 성실함이 강한 학생들이 중도 탈락될 가능성이 낮다고 하였으며 Arulampalam et al. [3]이 보고한 코호트 연구에서는 캠퍼스 내 기숙사에 거주하여 다른 학생들과 잘 어울리는 학생들의 유급률이 낮았다고 보고하였다.


대상 및 방법


의과대학․의학전문대학원 학생들의 특성과 건강행태 및 대학생활에 관한 설문조사를 시행하였고 학생들의 성격특성중앙적성연구소에서 표준화 제작된 총 350개 문항의 인벤토리형 성격진단검사를 사용하였다[11]. 이 검사는 개개인의 비교적 항상적인 성격특성을 측정하는 9개의 기술척도와 정신 병리적 징후를 개략적으로 판단할 수 있는 5개의 임상척도, 그리고 검사 결과의 신뢰성과 타당성을 파악할 수 있는 1개의 타당성척도로 구성되어 있다.


결과

1. 의과대학, 의학전문대학원 학생들의 유급 또는 휴학 경험 정도

유급 또는 휴학을 경험했던 학생들이 유급이나 휴학을 하게 된 가장 큰 이유로는 낮은 학업성취도가 37.5%로 가장 많았고, 그 다음으로 의학공부에 대한 적성상의 문제가 17.2%였다. 유급 또는 휴학 후 가장 힘들었던 점은 심리적인 불안이 32.6%로 가장 많았고 친구들과의 관계가 소원해짐이 17.4%로 그 다음을 차지하였다.


2. 유급 또는 휴학 경험 여부에 따른 의과대학, 의학전문대학원 학생들의 일반적 특성, 성격 특성 및 건강행태

유급 또는 휴학을 경험한 학생은 유급 또는 휴학을 경험하지 않은 학생에 비하여 남학생이거나(p=0.002), 의과대학 학일 경우가(p<0.001) 통계적으로 유의하게 더 많았다


휴학을 경험하지 않은 학생들에 비해 안정성, 지배성, 사회성, 책임성, 남향성, 그리고 우월성 등이 통계적으로 유의하게 낮았으며, 우울, 불안, 편집, 내폐, 신경증적 경향은 통계적으로 유의하게 높았다(Table 2). 유급 또는 휴학을 경험했던 학생들에게서 흡연자 비율이 통계적으로 유의하게 높았으나(p=0.039), 그 외 식습관, 음주, 여가 시간 활용 등 건강생활 행태는 통계적으로 유의한 차이를 보이지 않았다(Table 3).


3. 유급 또는 휴학 경험 여부에 따른 의과대학, 의학전문대학원 학생들의 의학과 진학동기

유급 또는 휴학을 경험했던 학생들은 유급 또는 휴학을 경험하지 않은 학생들에 비해 의학과 진학을 본인 스스로 결정한 경우가 적고, 부모님이나 주위 사람들의 권유를 받아들여 결정한 경우가 더 많았다(p=0.025).


4. 유급 또는 휴학 경험 여부에 따른 의과대학, 의학전문대학원 학생들의 학습방식 및 학교생활 만족도

유급 또는 휴학을 경험한 학생들이 그렇지 않은 학생들에 비해 ‘시험을 앞두고 벼락치기 공부를 한다’가 많았고, 시간관리 방법에서는 ‘시간관리가 잘 안 되고 어떻게 해야 할지 잘 모르겠다’라고 응답한 경우가 유의하게 더 많았다(p=0.006)(Table 5). 그리고 유급 또는 휴학을 경험한 학생들이 그렇지 않은 학생들에 비해 의학에 대한 적성, 재학 만족도, 학업성취 결과에 대한 만족도가 통계적으로 유의하게 낮았다(Table 6).


고찰

Sayer et al. [5]은 학업 실패가 학생 개인의 학습 방법이나 경제적인 문제 그리고 사회적, 정서적 문제 등 다양한 원인의 종합적인 결과로 발생되며 유급과 같은 학업에 취약함을 보인 학생은 적절한 지도와 교육적인 지원 없이는 학업 실패를 다시 반복하므로 학생 개인별 실패의 원인을 찾아 그에 맞는 맞춤형 지원이 필요함을 강조하였다


한편 Malik [14]은 학업 성적이 좋지 않아 재시험이 필요했던 학생들 중 50%는 다른 도움을 찾지 않고 스스로 해결하려는 경향을 보였으나 22.8%는 지도교수나 다른 선생님의 도움을 받았음을 보고하여 저자들의 학교 상황과 상당한 차이를 보였다














Medical Students' Failure Experiences and Their Related Factors
Eui-Ryoung Han,1 Eun-Kyung Chung,2 Sun-A Oh,3 Kee-Oh Chay,2 and Young-Jong Woo2
1Office of Education and Research, Chonnam National University Hospital, Gwangju, Korea.
2Department of Medical Education, Chonnam National University Medical School, Gwangju, Korea.
3Center for Teaching and Learning, Gwangju University, Gwangju, Korea.

Corresponding Author: Eun-Kyung Chung. Department of Medical Education, Chonnam National University Medical School, 160 Baekseo-ro, Dong-gu, Gwangju 501-746, Korea. Tel: +82.62.220.4178, Fax: +82.62.236.3653, Email: ekcmedu@chonnam.ac.kr 
Received March 27, 2012; Revised May 22, 2012; Accepted May 29, 2012.



Abstract

Purpose

A considerable number of medical students drop out due to low academic achievement, and these students have a high probability of repeated failure experiences. This study investigated the personal and academic problems of these students to help develop student support systems.

Methods

First-year (n=146) and second-year (n=119) medical students were asked to complete questionnaires. The questionnaires consisted of personality traits and the students' management of/satisfaction with school life.

Results

Students who had already dropped out accounted for 17.4% of the study subjects. The most common reason for dropping out was low academic achievement, and the most difficult part of taking a leave of absence from school was psychological anxiety. The group who dropped out had significantly lower levels of emotional stability, sociability, responsibility, dominance, masculinity, and superiority and more vulnerable mental states compared with those who did not drop out. They also expressed less motivation with regard to medical science and less satisfaction with school life than did the group that did not drop out. Those who dropped out tended not to prepare for exams, and they managed their time ineffectively. They also tried to resolve their difficulties alone and rarely sought help from teachers.

Conclusion

More intimate student-teacher relationships should be established, and teachers should be encouraged to meet and interact with their students on a regular basis. Additionally, personality inventories should be used to assist in efforts to understand students, especially to identify hidden social and emotional problems.

Keywords: Student dropoutsMedical studentsPersonalityInterpersonal relations


스트레스 대처방식이 의과대학생들의 주관적 안녕감에 미치는 영향

경희대학교 의과대학 의학교육학교실

고진경․윤태영․박재현





서 론

현재의 의학교육 시스템은 학생들의 정신 건강에 심각하게 부정적인 영향을 주고 있다. 학생들은 우울감, 불안, 그리고 많은 스트레스를 경험한다(Guthrie et al., 1998; Mosley et al., 1994). 의대생들이 훈련과정에서 느끼는 스트레스의 수준은 보통 사람들이 경험하는 것보다 크게 높은 것으로 보고되고 있다(Helmers, et al., 1997). 의과대학에 다니는 동안 경험하는 스트레스는 학생의 심리적 태도 변화에 크게 영향을 주며, 졸업 후 직업생활에서의 정서문제로 이어진다. 이는 결국 환자를 다루는 능력의 저하로 나타나게 된다 (Shanafelt et al., 2002; Wolf et al., 1989; Krakowski, 1982).


최근 AAMC (Association of American Medical College, 2004)에서는 의학교육 개선방향 중 하나로서 모든 의학교육기관에서 ‘학습자의 건강과 심리적 안녕’을 반드시 고려할 것을 요청하는 등 제도적인 노력을 시작하였다.


가. 주관적 안녕감

주관적 안녕감 (subjective well-being)은 학자들에 따라 다양하게 정의된다. 

Szalai (1980)는 주관적 안녕을 개인이 생활의 여러 측면에서 느끼는 행복감 혹은 만족감으로 정의하였으며, 

Veenhoven (1991)은 자신의 삶의 질적 수준에 대하여 호의적으로 판단하는 정도로 설명하였다. 

Campbell et al. (1976)에 의하면 자신의 삶의 질에 대한 판단은 정서적 측면과 인지적 측면을 통합하여 내리게 된다. 

정서적 측에서는 자신이 경험하는 정서들의 유쾌한 정도(hedonic level)를, 

인지적 측면에서는 스스로 욕망이 성취되었다고 지각하는 정도를 평가한다. 


주관적 안녕감을 구성하는 정서적 측면인지적 측면은 각각 긍정적/부정적 정서반응생활만족도로 치환될 수 있다. 즉, 주관적 안녕긍정적인 정서 (Positive Affect: PA), 부정적인 정서 (Negative Affect: NA) 그리고, 삶의 만족 (Life Satisfaction: LS)등 세 가지 요인으로 구성된다 (Andrews & Withey,1976).


나. 스트레스 대처방식

대처 (coping)란 자신이나 외부 환경으로부터 오는 스트레스를 최소화하기 위해 행하는 노력이다.

Lazarus와 Folkman (1984b)은 스트레스 대처행동문제중심대처 (problem-focused coping)정서중심대처 (emotion-focused coping)로 구분하였다.


스트레스의 원인이 무엇이든 스트레스 대처가 목표하는 바는 적응이다. 어떤 대처방식을 선택하는가에 따라 상황에 적응하거나 부적응을 겪는 결과로 이어진다. 대처방식에 따른 적응수준의 차이를 분석한 결과에 따르면 문제중심 대처방식을 사용하는 학생들이 가장 잘 적응하며, 회피지향 대처방식을 사용하는 학생들의 적응 수준이 낮다. Billings와 Moos (1984)는 우울한 사람들이 문제해결을 위한 노력을 덜 하며, 정서중심적 대처를 더 많이 택한다는 것을 발견하였다. 


스트레스 대처방식과 주관적 안녕감의 관계를 분석한 Billing과 Moos (1981)는 문제중심대처는 심리적 안녕과 정적인 관계가 있다고 보고하였고, Lazarus와 Folkman (1984a)의 연구에서는 문제중심 대처와 정서중심대처가 모두 긍정적, 부정적 정서의 변화와 관련이 있는 것으로 나타났다.


대상 및 방법

가. 대상

나. 도구

스트레스 대처방식 척도는 Lazarus & Folkman (1984b)이 개발한 스트레스 대처방식 척도 (The Ways of Coping Checklist) 67개 문항을 토대로 Kim 과 Lee (1985)가 요인분석을 통해 재구성한 62개 문항의 척도를 사용하였다. 연구에 사용한 척도는 대처방식을 적극적 대처소극적 대처로 구분하고, 전자에 속하는 유형으로 문제중심대처, 사회적 지지추구 대처후자에 속하는 유형으로 정서중심대처,회피지향대처(소망적 사고)를 제시하였다.


주관적 안녕감 긍정적 정서부정적 정서, 그리고 생활만족도로 구성되어 있다. 긍정적 정서와 부정적 정서는 정서적 안녕감을, 생활만족도는 자신의 삶에 대한 인지적인 평가를 나타낸다. 이 연구에서는 정서적 안녕감을 측정하기 위하여 정서질문지(Positive and Negative Affect Scale: PANAS)를 사용하였고 생활만족도의 측정은 생활만족척도 (Satisfaction with Life Scale: SWLS)를 사용하였다.


정서질문지는 Watson, Clark & Tellegen (1988)이 제작한 척도를 번역하여 사용하였으며, 긍정적인 정서를 나타내는 단어 10개와 부정적인 정서를 나타내는 단어 10개로 구성되어 있다.


생활만족척도는 Diener et al. (1985)이 개발한 것을 번역하여 사용하였다.


다. 분석방법



결 과

가. 스트레스 대처방식의 활용 빈도 분석

나. 의학과의 의전원 학생들의 대처방식 활용양상 비교

다. 주관적 안녕감을 설명하는 스트레스 대처방식 규명




고 찰

의과대학생들이 자주 활용하는 스트레스 대처방식은 회피와 문제중심으로 나타났다. 스트레스 대처방식에 대한 연구에 의하면 문제중심과 회피는 상반된 전략이다. 여러 연구에서 문제중심 대처방식을 사용하는 학생들이 스트레스 상황에 잘 적응하였고, 회피지향 대처방식을 사용하는 학생들의 적응 수준이 낮았다고 보고하고 있으며, 대체로 우울감이 높은 사람들이 회피 전략을 더 많이 선택하는 것으로 알려져 있다 (Billings & Moos, 1984; Coyne, et al.,1981).


주관적 안녕감 인식과 스트레스 대처방식 간 상관분석 결과 유의한 상관관계가 있었다. 이를 전제주관적 안녕감을 높이는 스트레스 대처방식이 무엇인지 알아보기 위하여 주관적 안녕감의 3개 하위항목을 각각 종속변인으로 하여 다중회귀분석을 실시하였다. 분석결과에 따르면...

긍정적 정서는 문제중심과 사회적 지지추구 대처방식을 많이 선택하는 학생들에게서 높게 나타났고, 

생활만족도는 문제중심 대처방식을 자주 선택하는 학생들이 높았다. 

부정적 정서문제중심 대처방식을 더 자주 선택하고, 회피 대처방식을 적게 선택하는 학생들이 높은 것으로 나타났다.


소속에 따른 차이를 분석한 결과에 따르면, 

의학과 학생들은 회피, 문제중심, 사회적 지지추구, 정서완화의 순서로 대처방식을 사용한 반면, 

의전원 학생들은 문제중심, 회피, 사회적 지지추구, 정서완화의 순서로 사용하였다. 

의학과 학생들이 회피지향 대처를 문제해결 대처보다 더 많이 사용한 결과나 

의전원 학생들이 사회적 지지추구 대처를 의학과 학생보다 유의하게 더 많이 사용한 결과는 

의전원 학생들이 의학과 학생들 보다 심리적 안정감이 상대적으로 높음을 의미한다. 

이와 같은 해석은 주관적 안녕감 차이분석에서 의전원 학생들이 의학과 학생들보다 생활만족도가 높고, 부정적 정서가 낮은 것으로 나타난 결과를 통해 다시한번 지지되었다.


다만 의대의 ‘잠재적 교육과정 (hidden curriculum)'속의 냉소주의가 학생들의 주관적 안녕감을 낮춘다는 Hafferty (1998)와 Kassebaum & Cutler (1998)의 주장을 바탕으로 의학과 학생들이 상대적으로 더 오랜 시간 의대의 ‘잠재적 교육과정'에 노출됨으로써 높은 부정적 정서와 낮은 생활만족도를 보이는 것으로 연구진은 조심스럽게 유추하였다.

















Korean J Med Educ. 2007 Sep;19(3):225-233. English.
Published online 2007 September 20.  http://dx.doi.org/10.3946/kjme.2007.19.3.225 
Copyright © 2007 The Korean Society of Medical Education
The Effects of Coping Style on Subjective Well-Being Among Medical Students
Jinkyung Ko, PhD, Tai-Young Yoon, MD, PhD, MHA and Jaehyun Park, MD, PhD
Department of Medical Education, School of Medicine, Kyung Hee University, Seoul, Korea.


Abstract

Purpose

This study aims to explore which coping strategies medical students use more often, and how coping styles account for medical students' subjective well-being.

Methods

Subjects included 249 medical students from undergraduate and Graduate Entry Programme of a medical school in Seoul, Korea. Coping style was measured using the Ways of Coping Checklist. Subjective well-being was measured with Positive / Negative Affect Scale and Satisfaction with Life Scale. Analysis of Variance (ANOVA) was used to compare four coping strategies, and stepwise multiple regression was used to analyze the accountability of each of the coping strategy for subjective well-being.

Results

Medical students used avoidance and problem-focused coping strategy more often than they used emotion-focused coping strategy and seeking social support. Graduate Entry Programme students used avoidance less often and seeking social support more often than undergraduate students. Among subscales of subjective well-being, positive affect can be accounted for by problem-focused coping and seeking social support, and negative affect can be accounted for by problem-focused coping and avoidance. Life satisfaction can be accounted for by problem-focused coping as well.

Conclusion

The results of this study showed that medical students had high adaptability as well as strong anxiety toward stressful situations in medical school. Moreover, three among the four coping strategies accounted for medical students' subjective well-being. These findings should be considered as a baseline for future research looking into additional variables affecting medical students' well-being.

Keywords: StressCopingCoping styleSubjective well-beingMedical educationAdjustment.


+ Recent posts