피드백 제공자로서 환자: 의과대학생의 신뢰 판단 탐색(Perspect Med Educ. 2023)
Patients as Feedback Providers: Exploring Medical Students’ Credibility Judgments

M. C. L. EIJKELBOOM R. A. M. DE KLEIJN W. J. M. VAN DIEMEN C. D. N. MALJAARS M. F. VAN DER SCHAAF J. FRENKEL 

소개
Introduction

환자가 학생들의 학습에 기여할 수 있다는 사실이 널리 인식되면서 의학교육에 환자를 참여시키는 이니셔티브가 증가하고 있습니다[1, 2]. 환자로부터 배우는 한 가지 방법은 환자의 피드백입니다[3]. 의료 서비스의 사용자로서 환자는 의료 성과에 대한 독특한 관점을 제공할 수 있습니다. 따라서 환자의 피드백은 교수진이나 동료의 피드백을 보완할 수 있습니다. 이는 환자들이 동일한 상담에 대해 학생이나 레지던트를 교수진과 다르게 평가한다는 연구 결과에서 잘 드러납니다 [4]. 환자 피드백이 학생의 학습에 기여하기 위해서는 학생이 피드백에 참여해야 하며, 이는 학생이 피드백을 찾고, 이해하고, 행동으로 옮겨야 한다는 것을 의미합니다[5]. 학생이 피드백에 참여할지 여부는 피드백 제공자의 신뢰성에 대한 판단에 따라 부분적으로 결정됩니다[5, 6, 7, 8, 9, 10, 11]. 이에 따라 Baines 등의 연구에 따르면 환자의 피드백이 의사의 성과에 미치는 영향은 환자의 신뢰성에 대한 의사의 판단에 영향을 받는다고 보고했습니다[12]. 그러나 피드백 제공자로서 환자의 신뢰성에 대한 이러한 판단이 어떻게 이루어지고 어떤 논거에 근거하여 이루어지는지에 대해서는 알려진 바가 거의 없습니다. 
It is becoming widely recognized that patients can contribute to students’ learning, and the number of initiatives that involve patients in medical education is growing [1, 2]. One way to learn from patients is through their feedback [3]. As the users of healthcare, patients can provide unique perspectives on medical performance. Therefore, their feedback can be complementary to faculty or peer feedback. This is illustrated by studies in which patients rate students or residents differently on the same consultation compared to faculty [4]. In order for patient feedback to contribute to student learning, students need to engage with this feedback, meaning they should seek it, make sense of it, and act upon it [5]. Whether students engage with feedback is partly determined by their judgment of the feedback provider’s credibility [5, 6, 7, 8, 9, 10, 11]. In accordance with this, a review by Baines et al. reports that the impact of patient feedback on doctors’ performance was influenced by doctors’ judgments of patients’ credibility [12]. However, little is known about how these judgments regarding patients’ credibility as feedback providers are made and on the basis of which arguments.

Molloy와 Bearman에 따라 우리는 신뢰성을 타인의 판단에 의해 정의되는 개인의 속성으로 간주합니다[13]. 이와 관련하여 신뢰성은 개인이 소유하는 절대적인 특성이 아니라 타인의 인식에 따라 달라집니다. 신뢰는 타인과의 관계 속에서 형성되며 관계에 따라 달라집니다 [7, 14, 15]. 따라서 한 학생은 어떤 환자를 매우 신뢰할 수 있다고 생각하지만, 다른 학생은 같은 환자를 신뢰할 수 없다고 판단할 수 있습니다. 신뢰성 판단은 판단이 이루어지는 맥락, 학습 문화 및 이러한 맥락 내에서 형성되는 관계에 의해 형성됩니다 [7, 16, 17]. 따라서 이론적으로 한 학생이 교실 환경에서는 환자를 매우 신뢰할 수 있다고 판단할 수 있지만, 병원 환경에서는 같은 환자를 신뢰할 수 없다고 판단할 수도 있습니다. 따라서 신뢰성은 역동적이고 대인관계에 따라 달라집니다. 환자가 의대생에게 피드백을 제공할 때, 그 맥락에서 그 환자의 신뢰도는 그 학생의 환자에 대한 판단에 의해 정의됩니다.
In line with Molloy and Bearman, we view credibility as an attribute of an individual, which is defined by judgments of others [13]. In this regard, credibility is not an absolute quality someone possesses, rather it depends on the perceptions of others. It is established in relationships with others and varies between these relationships [7, 14, 15]. So, whereas a patient can be seen as highly credible by one student, another student can judge the same patient as not credible. Credibility judgments are shaped by the context in which the judgment takes place, by its learning culture and the relationships that are formed within these contexts [7, 16, 17]. So, in theory, a student could judge a patient as highly credible in a classroom setting, but this same student might judge the same patient as not so credible in a hospital setting. Thus, credibility is dynamic and interpersonal. When a patient provides feedback to a medical student, this patient’s credibility is defined by that student’s judgment of that patient, in that context.

신뢰도를 더 개념화하기 위해 우리는 교사 신뢰도 연구에 일반적으로 적용되는 맥크로스키의 연구를 기반으로 합니다[18, 19]. 맥크로스키는 신뢰성을 역량, 신뢰성, 선의로 구성된 3차원적 구조로 정의하고 운영했습니다[18]. 유능성은 관심 있는 주제에 대한 지식과 전문성을 갖춘 사람을 의미합니다[20]. 신뢰성은 좋은 성품과 정직성을 가진 사람을 의미합니다. 선의는 상대방을 배려하고 좋은 의도를 가지고 있는지를 의미합니다[18]. 따라서 환자-학생 피드백 상호작용에서 이러한 신뢰성의 개념화를 적용하면, 환자의 신뢰성에 대한 학생의 판단은 환자의 유능성, 신뢰성, 선의에 대한 판단으로 구성되어야 합니다.
To further conceptualize credibility we build on the work of McCroskey, which is commonly applied in research on teacher credibility [18, 19]. McCroskey defined and operationalized credibility as a three-dimensional construct consisting of Competence, Trustworthiness, and Goodwill [18]. Competence refers to someone having knowledge of, and expertise in, the subject of interest [20]. Trustworthiness refers to someone being of good character and being honest. Goodwill refers to whether someone cares about the receiver and has good intentions [18]. Thus, using this conceptualization of credibility in patient-student feedback interactions, students’ judgments of patients’ credibility should comprise judgments of patients’ Competence, Trustworthiness and Goodwill.

교육 분야, 특히 최근에는 의학교육 분야의 연구에서 학습자의 교사 또는 감독자에 대한 신뢰도 판단이 여러 요소로 구성된다는 사실이 밝혀졌지만, 환자와 (미래의) 의료인 간의 피드백 상호작용에 대한 경험적 연구는 주로 단일 요소의 신뢰도 판단을 보고하고 있습니다 [7, 19]. 일반적으로 학생들은 (잠재적) 피드백 제공자로서 환자에 대해 긍정적인 판단을 내리는 반면[3, 21, 22, 23, 24], 의사는 피드백 제공자로서 환자에 대해 긍정적인 판단과 부정적인 판단을 모두 내리는 것으로 보고됩니다[25, 26, 27].

  • 성과를 관찰할 수 있는 능력은 환자의 신뢰도에 긍정적으로 기여하는 요인으로 설명됩니다[26, 28, 29].
  • 의사나 학생이 언급하는 신뢰도를 낮추는 요인으로는 의학 지식 부족, 환자의 진정성에 대한 우려, 피드백이 환자의 진단에 영향을 받을 수 있다는 우려 등이 있습니다[8, 24, 27, 30, 31, 32, 33].

Although studies in education, and more recently in medical education, have shown that learners’ credibility judgments of teachers or supervisors are comprised of multiple elements, empirical studies on feedback interactions between patients and (future) healthcare providers mainly report single elements of credibility judgments [7, 19]. In general, students hold positive judgments about patients as (potential) feedback providers [3, 21, 22, 23, 24], whereas doctors report both positive and negative judgments of patients as feedback providers [25, 26, 27].

  • The ability to observe performance is described as an argument positively contributing to patients’ credibility [262829].
  • Arguments for reduced credibility, as mentioned by doctors or students, are: lack of medical knowledge, concerns about the sincerity of patients, and concerns about feedback being influenced by a patient’s diagnosis [8242730313233].

의대생은 강의실, 병원, 환자의 집, 지역사회 등 다양한 환경에서 환자와 함께 그리고 환자로부터 학습합니다. 앞서 언급했듯이 신뢰성 판단은 맥락에 의해 형성됩니다[7, 16, 17]. 의대생들이 환자의 피드백에 참여하여 환자로부터 배우기를 원한다면, 학생들이 환자에 대한 신뢰성 판단을 내리는 과정, 이러한 판단의 근거가 되는 논거, 그리고 이러한 판단이 맥락에 의해 어떻게 형성되는지에 대한 더 나은 이해가 필요합니다. 이를 통해 학생들의 환자 피드백에 대한 참여를 개선할 수 있는 기회를 발견할 수 있습니다. 따라서 이 연구는 다음과 같은 연구 질문에 답하는 것을 목표로 합니다: 의대생들은 임상 및 비임상 맥락에서 피드백 제공자로서 환자의 신뢰도를 어떻게 판단할까요?
Medical students learn with and from patients in various contexts, such as the classroom, the hospital, a patient’s home or the community. As previously mentioned, credibility judgments are shaped by the context [7, 16, 17]. If we want medical students to engage with patient feedback, and thereby learn from patients, we need a better understanding of the process by which students make credibility judgments regarding patients, on which arguments they base these judgments, and how this is shaped by the context. This might reveal opportunities to improve students’ engagement with patient feedback. Therefore, this study aims to answer the following research question: How do medical students judge patients’ credibility as feedback providers in a clinical and in a non-clinical context?

방법
Methods

연구 디자인
Study design

피드백 상호작용에서 환자의 신뢰도에 대한 학생들의 판단을 이해하기 위해 후향적 질적 인터뷰 연구를 수행했습니다. 이 연구에 대한 윤리적 승인은 네덜란드 의학교육협회에서 제공했습니다(NVMO, NERB 파일 번호: 2020.5.8 및 NERB 파일 번호 2021.8.8).  
We undertook a retrospective qualitative interview study to understand students’ credibility judgments of patients in feedback interactions. Ethical approval of this study was provided by the Dutch Association for Medical Education (NVMO, NERB file number: 2020.5.8 and NERB file number 2021.8.8).

연구 배경 및 참여자
Context and participants

우리는 임상적 맥락과 비임상적 맥락에서 환자에 대한 학생들의 신뢰성 판단을 조사했습니다. 두 상황 모두에서 학생들은 (온라인) 일대일 대화를 통해 환자로부터 피드백을 수집했습니다. 
We explored students’ credibility judgments regarding patients in a clinical and a non-clinical context. In both contexts students collected feedback from patients through (online) one-on-one dialogues.

비임상적 맥락에서는 6주간의 선택 과목으로, 6학년 의대생들이 한 조를 이루어 시청각 환자 정보인 지식 클립을 개발했습니다. 지식 클립은 선천성 심장병에 대해 설명하는 짧은 동영상(주로 애니메이션)이었습니다. 학생들은 환자, 그리고 커뮤니케이션 및 정보 과학(CIS) 학생과 협력하여 이러한 지식 클립을 개발했습니다[34]. 의대생의 목표는 환자의 정보 요구를 파악하고, 이해하기 쉬운 정보를 만들고, 환자 및 CIS 학생과 협업하는 방법을 배우는 것이었습니다. 이 과정을 진행하는 동안 두 의대생은 환자와 세 차례 만났습니다. 첫 번째 미팅에서는 의대생과 환자가 서로 친해지고 지식 클립의 주제를 결정했습니다. 2번과 3번 미팅에서 의대생은 지식 클립과 협력 기술에 대한 환자의 피드백을 받았습니다. 의대생 쌍은 시청각 정보 개발 방법에 대한 조언을 제공하고 지식 클립에 대한 피드백을 제공한 CIS 학생과도 세 차례 만났습니다[34]. 2020년 8월, 네덜란드 중심부의 한 대학병원에서 12명의 의대생이 이 선택 과목에 등록했습니다. 이 과정은 코로나19 팬데믹으로 인해 전적으로 온라인으로 진행되었습니다. 이 과정에 등록한 의대생 12명 중 11명이 이 연구에 참여하기 위해 사전 동의를 제공했습니다. 
The non-clinical context was a six-week elective course, in which pairs of sixth-year medical students developed audiovisual patient information, a knowledge clip. The knowledge clips were short (often animated) videos, where for instance a congenital heart disease is explained. Students developed these knowledge clips in collaboration with a patient and a Communication and Information Sciences (CIS) student [34]. The goal for medical students was learn how to identify a patient’s information need, create understandable information, and collaborate with a patient and a CIS student. During the course, the pair of medical students met three times with the patient. In meeting 1, the medical students and the patient got acquainted and determined the subject of the knowledge clip. In meetings 2 and 3, medical students received patient feedback on their knowledge clip and cooperation skills. The medical student pair also met three times with the CIS student, who provided advice on how to develop audiovisual information and gave feedback on the knowledge clip [34]. In August 2020, twelve medical students from an academic hospital in the center of the Netherlands enrolled in this elective course. The course was entirely online, due to the COVID pandemic. Eleven out of twelve medical students who signed up for the course enrollees provided informed consent to participate in this study.

임상 상황은 소아과와 산부인과를 결합한 12주간의 임상 실습이었으며, 4학년 의대생들은 의학 커리큘럼의 필수 과정으로 이 실습에 참여했습니다. 실습 기간 동안 학생들은 두 명의 환자에게 피드백을 요청했습니다. 이에 대비하여 학생들은 대화를 통해 적절한 시기에 적절한 피드백을 요청하는 자기 주도적 피드백 과정을 이수했습니다[35]. 임상 실습이 끝날 무렵, 학생들은 의미 파악과 행동 계획에 초점을 맞춘 촉진된 성찰 세션에 참여했습니다[35]. 2022년 6월부터 8월까지 사무원 과정을 마친 학생들은 이 연구에 참여하도록 요청받았습니다. 54명 중 10명의 학생이 사전 동의를 통해 참여에 동의했습니다. 
The clinical context was a twelve-week clerkship combining Pediatrics and Gynecology, in which fourth-year medical students participated as a mandatory part of their medical curriculum. During the clerkship, students asked two patients for feedback. In preparation, students completed a self-directed feedback course on asking for relevant feedback, at the right time, through dialogue [35]. At the end of the clerkship, students participated in a facilitated reflection session, which focused on sense-making and action-planning [35]. Students who completed their clerkship between June – August 2022, were asked to participate in this study. Ten students out of 54 provided informed consent to participate.

익명성을 보장하고 명확성을 기하기 위해 이 논문에서 모든 학생은 '그녀'로, 모든 환자는 '그'로 지칭합니다. 간결성을 위해 의대생은 '학생'으로 지칭합니다.
To ensure anonymity, and for the sake of clarity, all students in this paper will be referred to as ‘she’, and all patients will be referred to as ‘he’. For the sake of brevity, medical students will be referred to as students.

데이터 수집
Data collection

비임상 분야의 경우, 신뢰성 문헌을 기반으로 반구조화된 인터뷰 가이드를 개발했습니다. 두 명의 학생을 대상으로 인터뷰 가이드를 시범 운영하여 약간의 조정을 거쳤습니다. 그런 다음, 후속 인터뷰가 유사하고 비교 가능한 방식으로 진행될 수 있도록 CE와 NM이 함께 처음 두 번의 인터뷰를 진행했습니다. 나머지 9번의 면접은 NM과 CE가 나누어 진행했습니다. 
For the non-clinical context, we developed a semi-structured interview guide based on credibility literature. We piloted the interview guide with two students, which resulted in minor adjustments. Then, CE and NM conducted the first two interviews together to ensure subsequent interviews were conducted similarly and comparably. The remaining nine interviews were divided between NM and CE.

인터뷰 가이드를 임상 상황에 맞게 조정하고 비임상 상황의 결과를 기반으로 했습니다. 세 번째 연구자(WD)가 임상 맥락에서 대부분의 인터뷰를 수행했습니다. 먼저, CE와 WD가 함께 두 번의 인터뷰를 진행하여 WD가 비임상 상황과 유사한 인터뷰를 수행할 수 있도록 훈련시켰습니다. 그런 다음 나머지 인터뷰는 WD가 진행했습니다. 
We adjusted the interview guide to fit the clinical context and build on the results from the non-clinical context. A third researcher (WD) performed most of the interviews from the clinical context. First, CE and WD conducted two interviews together to train WD in performing the interviews comparably to the non-clinical context. Then, WD conducted the remaining interviews.

인터뷰 가이드에는 환자의 신뢰도, 학생과 환자의 관계, 피드백 메시지에 대한 질문이 포함되어 있었습니다(부록 A 참조). 학생들은 선택 과목 또는 임상실습을 마친 후 개별적으로 인터뷰를 진행했습니다. 화상 통화 또는 대면으로 진행된 인터뷰는 음성으로 녹음하고 그대로 필사했습니다. 인터뷰는 약 60분간 진행되었습니다. 
The interview guide included questions on patients’ credibility, students’ relationship with the patients and the feedback messages (See Appendix A). Students were interviewed individually after completion of the elective course or clerkship. The interviews, which were conducted via video-call or face-to-face, were audio recorded and transcribed verbatim. Interviews lasted approximately 60 minutes.

데이터 분석
Data analysis

학생들이 환자의 신뢰도를 판단하는 방법을 이해하기 위해 신뢰도에 대한 학생들의 추론을 분석했습니다. 우리는 주제별 분석의 한 형태인 템플릿 분석을 수행하여 신뢰도 증가 또는 감소에 대한 학생들의 주장을 파악했습니다[36]. 이 방법을 선택한 이유는 이전의 피드백 신뢰도 문헌을 기반으로 구축할 수 있고, 귀납적으로 환자 신뢰도에 관한 새로운 코드를 개발할 수 있는 여지를 남겨두었기 때문입니다. 학생들이 어떻게 판단을 내리는지, 그리고 이것이 맥락적 요소의 영향을 받는지 이해하기 위해 인과적 네트워크 분석을 수행했습니다. 이 방법을 선택한 이유는 프로세스의 변수 간 일관성을 매핑하기 때문인데, 이는 신뢰성 판단과 같은 인지 프로세스에도 적용될 수 있습니다[37]. 학생들이 환자의 신뢰도를 판단하는 추론의 요소를 이 연구에서는 '논증'이라고 부릅니다. 
To understand how students make credibility judgments of patients, we analyzed their reasoning about credibility. We performed template analysis, which is form of thematic analysis, to identify students’ arguments for increased or reduced credibility [36]. We chose this method because it allowed for building on previous feedback credibility literature, and left room for inductively developing new codes regarding patient credibility. To understand how students built their judgment and how this was impacted by contextual elements, we performed a causal network analysis. We chose this method because it maps the coherence between variables of a process, which can also be applied to cognitive processes such as making a credibility judgment [37]. The elements in students’ reasoning for determining a patient’s credibility are called ‘arguments’ in this study.

템플릿 분석
Template analysis

코딩 템플릿은 귀납적 접근법과 연역적 접근법을 모두 사용하여 세 단계로 개발되었습니다.

  • 첫째, 신뢰성 판단의 근거가 될 수 있는 문헌에 기술된 논거를 구성하는 선험적 코드를 정의했습니다(부록 B)[6, 10, 11, 14, 15, 18, 19, 38].
  • 둘째, 초기 코딩 템플릿을 구성하기 위해 비임상 맥락의 인터뷰를 사용했습니다. CE와 NM은 코딩 템플릿을 인터뷰에 반복적으로 적용하면서 새로운 코드를 추가하고 기존 코드를 개선했습니다. 코드를 더욱 세분화하고 구조화하기 위해 이들은 1-3차, 4-5차 인터뷰 코딩 후, 그리고 5-12차 인터뷰 후 코딩 템플릿에 대해 RK와 논의했습니다. 코드는 세 가지 신뢰성 차원에 따라 구조화되었습니다: 역량, 신뢰성, 선의의 세 가지 차원에 따라 코드를 구조화했습니다[18]. 몇몇 코드는 신뢰성 차원에 맞지 않았습니다. 여기에는 맥락의 요소와 두 가지 새로운 주제, 즉 피드백 메시지와 환자 피드백에 대한 이전 경험이 포함되었습니다.
  • 셋째, CE와 WD는 초기 코딩 템플릿을 임상적 맥락에서 처음 6개의 인터뷰에 적용하고 새로운 코드를 추가하고 기존 코드를 재정의하여 템플릿을 수정했습니다. 이러한 수정 사항은 최종 코딩 템플릿을 정의하기 위해 RK와 논의했습니다.
  • 마지막으로 CE는 최종 코딩 템플릿을 전체 데이터 세트에 적용하고 최종 해석에 대한 합의에 도달할 때까지 전체 연구팀과 결과를 논의했습니다.

The coding template was developed in three steps, using both an inductive and deductive approach.

  • First, a priori codes were defined constituting arguments described in literature on which credibility judgments can be based (Appendix B) [610111415181938].
  • Second, interviews from the non-clinical context were used to construct the initial coding template. CE and NM iteratively applied the coding template to the interviews, whilst adding new codes and refining existing codes. To further refine and structure the codes, they discussed the coding template with RK after coding interviews 1–3, 4–5, and after interviews 5–12. Codes were structured according to the three credibility dimensions: Competence, Trustworthiness, and Goodwill [18]. Several codes did not fit the credibility dimensions. These included elements of the context and two emergent themes: the feedback message and previous experiences with patient feedback.
  • Third, CE and WD applied the initial coding template to the first six interviews from the clinical context and modified the template by adding new codes and redefining existing codes. The modifications were discussed with RK to define the final coding template.
  • Lastly, CE applied the final coding template to the full dataset and findings were discussed with the entire research team until consensus was reached about the final interpretation.

인과 관계 네트워크 분석
Causal network analysis

판단이 어떻게 만들어지고 주장이 어떻게 연관되어 있는지 살펴보기 위해 사례 간 인과 네트워크 분석을 수행했습니다[37]. 

  • 먼저, 학생들이 신뢰성 판단의 근거로 삼은 모든 주장의 목록을 작성했습니다. 이 목록은 템플릿 분석에서 도출된 것으로, 이 코드북의 각 코드는 하나의 논증과 유사했습니다.
  • 둘째, 학생 한 명당 하나씩 21개의 인과 네트워크를 구성하여 이러한 주장과 그 관계를 표시했습니다. 관계를 다음을 통해 식별했습니다.
    • 학생들이 서로 조합하여 언급한 논증(텍스트 조각이 서로 겹치거나 이어지는 것을 의미),
    • 신호어 분석(예: 그렇다면, 그러므로, 그래서, 왜냐하면),
    • 시간성 분석(한 논증이 다른 논증에 영향을 미치는 경우 이 논증이 학생들의 추론에서 먼저 발생해야 함)
  • 셋째, 21개의 개별 인과 네트워크는 개별 논증 간의 모든 상호작용을 포함하는 전체 네트워크로 결합되었습니다. 이 네트워크를 이해하기 쉽게 하기 위해 신뢰도 차원과 맥락, 피드백 메시지, 이전 경험의 요소 간의 상호작용만 설명하여 네트워크를 단순화했으며, 그 결과 그림 1과 같이 나타났습니다.

To explore how judgments were built, and how arguments were related, we performed cross-case causal network analyses [37].

  • First, we constructed a list of all arguments on which students based their credibility judgments. This list was derived from the template analysis, each code of this codebook resembled an argument.
  • Second, we constructed 21 causal networks, one for each individual student, in which we displayed these arguments and their relations. Relations were identified
    • by selecting arguments that students mentioned in combination with each other (meaning text-fragments overlapped or followed-up on each other),
    • by analyzing signal words (for instance: then, therefore, so, because), and
    • by analyzing temporality (if one argument affects the other, this argument must happen first in students’ reasoning).
  • Third, the 21 individual causal networks were combined in an overarching network, that comprised all interactions between individual arguments. To make this network comprehensible, we simplified the network by only illustrating the interactions between dimensions of credibility and the elements of the context, the feedback message, and previous experiences, which resulted in Figure 1.

이 그림은 피드백 제공자인 환자에 대한 학생들의 신뢰도 판단을 시각화한 것입니다. 학생들의 신뢰도 판단은 환자의 선의, 신뢰성 및 역량에 관한 여러 가지 논증으로 구성되었습니다. 각 차원 내 및 차원 간의 논증은 서로 상호작용했습니다. 또한 학생들의 신뢰도 판단은 회색 원으로 표시된 것처럼 맥락, 피드백 메시지, 이전 경험 등의 요소에 의해 영향을 받았습니다. 이러한 요소는 환자의 선의, 신뢰성 및 역량에 관한 논쟁에 영향을 미칠 수 있습니다.
This figure visualizes students’ credibility judgments of patients as feedback providers. Students’ credibility judgments consisted of multiple arguments regarding a patient’s Goodwill, Trustworthiness and Competence. Arguments within and between the dimensions interacted with each other. Moreover, students’ credibility judgments were influenced by elements of the context, the feedback message and previous experiences, which is depicted by the gray circle. These elements could affect arguments regarding a patient’s Goodwill, Trustworthiness, and Competence.

반사성
Reflexivity

연구팀은 의사(CE, JF), 교육 과학자(RK, MS), 학생(WD, NM)으로 구성되었습니다. 연구팀의 다양한 배경과 역할은 데이터에 대한 다양한 관점을 제공했습니다. 우리 팀은 환자를 학습의 중요한 파트너이자 정당한 피드백 제공자라는 관점을 가지고 있습니다. 우리의 관점이 연구 참여자에게 전달되는 것을 제한하고 학생들이 자신의 관점을 공유할 수 있도록 인터뷰 질문을 신중하게 구성했습니다. 일부 저자는 비임상 과정(CE, JF)과 임상 맥락에서의 피드백 교육(CE, JF, RK) 개발에 참여했습니다. 연구 기간 동안 이들은 이러한 교육에 강사로 참여하지 않았습니다. 
The research team consisted of medical doctors (CE, JF), educational scientists (RK, MS), and students (WD, NM). The varied backgrounds and roles of our team provided multiple perspectives on our data. Our team has the viewpoint of patients being important partners in learning, and being legitimate feedback providers. To limit transferring our viewpoint to the study participants, and facilitate students in sharing their own viewpoints, we carefully formulated the interview questions. Some authors were involved in the development of the non-clinical course (CE, JF) and the feedback training in the clinical context (CE, JF, RK). During the study period they did not participate as teachers in these trainings.

또한 데이터 수집 및 분석 기간 동안 반사성을 높이기 위해 격주로 연구 회의를 개최하여 데이터 해석과 기본 가정을 논의했습니다. 
Furthermore, to enhance reflexivity biweekly research meetings were held during data collection and analysis, in which interpretation of the data and underlying assumptions were discussed.

결과
Results

21명의 학생을 인터뷰했으며, 이 중 비임상 환경의 학생은 11명, 임상 환경의 학생은 10명이었습니다. 학생들은 신뢰성의 세 가지 차원을 모두 포함하는 여러 논거를 바탕으로 환자의 신뢰성을 판단했습니다[18]. 학생들은 환자의 신뢰도를 평가할 때 환자의 능력, 신뢰성, 선의에 대해 추론했습니다. 학생들의 추론은 맥락의 지각된 요소에 의해 판단이 형성된다는 것을 보여주었습니다. 맥락적 요소 외에도 지각된 피드백 메시지와 학생의 이전 환자 피드백 경험도 신뢰성 판단에 영향을 미쳤습니다. 
Twenty-one students were interviewed, out of which 11 students in the non-clinical and 10 in the clinical setting. Students based their credibility judgments of patients on multiple arguments, comprising all three dimensions of credibility [18]. In estimating a patient’s credibility, students reasoned about his Competence, Trustworthiness, and Goodwill. Students’ reasoning showed that their judgments were shaped by perceived elements of the context. Besides contextual elements, the perceived feedback message and student’s previous experiences with patient feedback also impacted their credibility judgments.

학생들이 신뢰성 판단을 위해 제공한 논거와 이러한 논거가 맥락에 의해 어떻게 형성되었는지, 그리고 이러한 논거가 피드백 메시지와 이전 경험에 의해 어떻게 영향을 받았는지에 대해 자세히 설명함으로써 학생들이 신뢰성 판단을 어떻게 구축했는지에 대해 논의할 것입니다.
We will discuss how students built their credibility judgments by elaborating on the arguments that students provided for their credibility judgments, how these were shaped by the context, and how these were affected by the feedback message and their previous experiences.

학생이 신뢰도 판단의 근거로 삼은 논거
Arguments on which students based their credibility judgments

환자의 신뢰성에 대한 학생들의 판단에는 환자의 역량, 신뢰성, 선의에 관한 여러 논거가 포함되었습니다(표 1 참조). 학생들은 네 가지 논거를 바탕으로 환자의 유능성을 판단했습니다.

  • 첫째, 학생들은 특정 과제에 대한 지식을 평가했습니다. 비임상적 맥락에서는 시청각적 의사소통에 대한 지식이 될 수 있습니다. 임상적 맥락에서는 의학 지식이 될 수 있습니다. 예를 들어, 학생들은 환자가 의료계에 종사할 때 더 유능하다고 판단했습니다.
  • 둘째, 학생들은 예를 들어 환자가 직접 관찰을 통해 얻을 수 있는 학생의 수행 방식에 대한 지식을 추정했습니다.
  • 셋째, 학생들은 환자가 피드백을 제공하는 데 경험이 많고 숙련되어 있는지를 평가했습니다.
  • 마지막으로 학생들은 환자의 실제 경험을 추정했습니다.
    • 대부분의 학생들은 환자가 경험적 지식이 많을수록 더 유능하다고 생각했습니다.
    • 반대로, 일부 학생들은 '새로운' 환자가 새로운 관점을 가지고 있기 때문에 더 신뢰할 수 있다고 생각했습니다.

Students’ judgments about a patient’s credibility contained multiple arguments regarding a patient’s Competence, Trustworthiness, and Goodwill, see Table 1. Students judged patients’ Competence based on four arguments.

  • First, they estimated their knowledge of the specific task. In the non-clinical context, this could be knowledge about audiovisual communication. In the clinical context, this could regard medical knowledge. For instance, students judged patients as more competent when they were in the medical profession.
  • Second, students estimated patients’ knowledge of how the student performed, which patients for instance could have gained through direct observation.
  • Third, students estimated whether patients were experienced and skilled in providing feedback.
  • Lastly, students estimated patients’ lived experience.
    • Most students regarded patients as more competent when they possessed more experiential knowledge.
    • Conversely, some students reasoned that their ‘new’ patient was actually very credible because he had a fresh perspective.

"그는 병원에 대해 잘 몰랐고 어떻게 운영되는지 등에 대해 잘 몰랐습니다. 그래서 오히려 그의 말이 더 진솔하게 들렸던 것 같아요. 또한 무지에서 비롯된 무지에서 그는 '이건 이해가 안 된다, 저건 이해가 안 된다'는 식의 질문을 많이 했어요. 그렇지만 그는 자신이 느끼는 것을 그대로 말한다는 것을 의미했고, 그래서 더 신뢰가 갔습니다." - St4clinical(실제 경험)
“He was not familiar with the hospital and didn’t know about how things worked and so on. And I think that actually ensured that what he said came out really sincere. Also from this ignorance, he asked many questions like we don’t understand this, or we don’t understand that. That did mean that he really just says what he feels, … I found him more credible because of it.” – St4clinical (Lived experience)

학생들은 두 가지 논거를 바탕으로 환자의 신뢰도를 판단했습니다. 

  • 첫째, 학생들은 환자가 피드백에 성실하고 정직한지 여부를 평가했습니다. 
  • 둘째, 학생들은 환자의 개방성과 개선할 점을 과감하게 언급하는지 여부를 평가했습니다.

Students judged patients’ Trustworthiness on two arguments.

  • First, students estimated whether a patient was sincere and honest in his feedback.
  • Second, students estimated a patient’s openness and whether he dared to mention points for improvement.

"[협업에 대한 피드백]의 경우, 환자의 피드백이 대부분 긍정적이었고 100% 정직했는지는 잘 모르겠기 때문에 조금 낮게 평가했습니다. 추정하기 어렵습니다. 그래서 저는 그가 저에게 피드백을 주는 것에 대해 개인적으로 특별히 신뢰할 수 없다고 생각합니다. 그가 피드백에 완전히 정직하게 임하고 있는지 잘 모르겠어요." -St6비임상(성실성)
“In terms of [feedback on] our collaboration, it’s a bit lower, because his feedback was mostly positive and I am not sure if he was being 100% honest. I find that hard to estimate. And that’s why I don’t find him particularly credible, as a person, to give me feedback. I can’t quite sense whether he is being completely honest in his feedback.” –St6nonclinical (Sincerity)

학생들은 두 가지 논거를 바탕으로 환자의 선의를 판단했습니다. 

  • 첫째, 학생들은 환자가 시간을 내어 피드백을 제공하고 교육 프로젝트에 참여하는 등 학생의 학습을 돕고자 하는 의지가 있는지를 평가했습니다. 
  • 둘째, 학생들은 환자가 학생의 사생활에 관심을 보이고 학생의 존재에 감사를 표하는 등 학생을 인격적으로 돌보는지 여부를 평가했습니다. 후자는 신뢰도를 높이거나 낮출 수 있습니다. 어떤 학생들은 환자가 학생의 감정을 상하게 하지 않기 위해 비판을 피할 것이라고 추론했습니다.

Students judged patients’ Goodwill on two arguments.

  • First, they estimated whether the patient had the intention to help the student learn, for instance by taking time to provide feedback and by being engaged in the educational project.
  • Second, students estimated whether the patient cared for the student as a person, for instance by showing interest in the student’s personal life and by expressing gratefulness for the student’s presence. The latter could both increase and decrease credibility. Some students reasoned that a patient would avoid criticism to avoid hurting the student’s feelings.

"글쎄요, '그냥 학생일 뿐인데 상처 주고 싶지 않아요'라고 생각할 수도 있죠. 네, 그리고 그 학생도 최선을 다하고 있을 뿐이죠. 부정적인 말을 해서 저에게 상처를 주고 싶지 않을 수도 있죠." -St4clinical(돌보는 사람)
“Well, he might think ‘she’s just a student, I don’t really want to hurt her. Yes, and she’s also just trying to do the best she can.’ He may not want to hurt me by saying anything negative.” –St4clinical (Caring for person)

인과 관계 네트워크 분석 결과, 학생들은 여러 주장에 무게를 두어 판단을 내리는 것으로 나타났습니다. 서로 다른 차원의 주장이 서로 상호작용했습니다(그림 1 참조). 예를 들어, 한 학생은 환자가 자신의 학습에 관심을 갖고 있다고 가정했기 때문에(선의) 환자가 성실하고 개방적이라고 추론했습니다(신뢰성). 연구 결과에 따르면 학생들의 환자의 신뢰도에 대한 판단은 '전부 아니면 전무'의 판단이 아니었습니다. 오히려 학생들은 신뢰도에 기여하는 논거와 신뢰도를 떨어뜨리는 논거를 고려하여 환자에게 어느 정도의 신뢰도를 부여했습니다.
Causal network analysis showed that students built their judgments by weighing multiple arguments. Arguments of different dimensions interacted with each other (See Figure 1). For instance, a student reasoned that the patient was sincere and open (Trustworthiness), since she assumed that the patient cared for her learning (Goodwill). Our results suggest that students’ judgments of a patient’s credibility were not ‘all or nothing’ judgments. Rather, students assigned a certain degree of credibility to a patient, taking into consideration arguments that contributed to credibility, and arguments that reduced credibility.

맥락의 요소가 신뢰도 판단에 미치는 영향
How elements of the context affect credibility judgments

학생들은 신뢰도 판단에 영향을 미치는 네 가지 맥락적 요소를 언급했습니다(표 2 참조).
Students mentioned four contextual elements that affected their credibility judgments (See Table 2).


세 가지 맥락 요소는 임상적 맥락에서 학생들이 언급했거나 비임상적 맥락에서 학생들이 언급했습니다.
Three contextual elements were either mentioned by students in the clinical context, or by students in the non-clinical context.

첫째, 임상적 맥락에서 학생들은 자신과 환자 사이에 치료적 관계가 있다고 언급했는데, 환자는 치료가 필요한 상태이고 학생은 치료를 제공하는 팀의 일원이었습니다. 학생들은 환자가 힘의 불균형을 인식하고 자신에게 의존한다고 느낄 수 있기 때문에 피드백 과정에 방해가 될 수 있다고 추론했습니다. 따라서 환자들이 감히 개방적이고 솔직하게 말하지 못해(신뢰성) 신뢰도가 낮아질 수 있다는 것이었습니다.
First, in the clinical context, students mentioned that there was a therapeutic relationship between them and the patient, with the patient being in need of care and the student being part of the team that provides care. Students reasoned that this could have hindered the feedback process, since patients could perceive a power imbalance and feel dependent on them. Therefore, patients might not dare to be open and honest (Trustworthiness), which lowered their credibility.

"나중에 그 환자도 우리에게 의존하고 있기 때문에 치료 관계를 유지하고 싶다고 말했습니다. 그리고 그도 마음 한구석에 우리와 우호적인 관계를 유지해야 한다는 생각을 가지고 있었기 때문에 너무 비판적으로 대하고 싶지 않았던 것 같습니다."-St4clinical
“He said that later on too, that he wants to maintain the treatment relationship, because he does depend on us as well. And I think that’s why he also has in the back of his mind that he has to remain friendly with us, which is perhaps why he didn’t want to be too critical.”-St4clinical

흥미롭게도 한 학생은 시간이 지남에 따라 환자가 학습자로서의 자신의 역할을 더 잘 인식하게 되었고, 이로 인해 치료 관계는 더 뒷전으로 밀려났으며 학습을 돕고자 하는 환자의 의지가 높아졌다고 말했습니다(Goodwill).
Interestingly, one student mentioned that over time the patient became more aware of her role as a learner, which had put the therapeutic relationship more to the background, and increased the patient’s willingness to help the student learn (Goodwill).

"그 덕분에 그는 인턴이 무엇을 수반하는지 더 잘 알았던 것 같아요. 그리고 실제로 더 나은 피드백을 줄 수 있었던 것 같아요. '당신은 정말 배우러 왔고 내 의사가 아니기 때문에 내 치료 계획을 세우지 않을 거야'라고 생각했기 때문이죠. 그래서 저는 그 부분(즉, 학습)을 도와드리고 싶습니다."-St7clinical
“because of that, I think he knew more what an intern entailed. And I think that actually allowed him to give better feedback, because he was more like okay, so you’re really here to learn and you’re not my doctor, so you’re not going to set my treatment plan. So I want to help you with that [ i.e. learning].”-St7clinical

둘째, 임상 맥락에서 학생들은 환자의 감정 상태가 신뢰도에 영향을 미친다고 언급했습니다. 학생들은 피드백 메시지가 환자의 감정에 의해 형성된다고 추론했습니다. 예를 들어 환자가 좋은 소식을 듣고 행복하거나 안심한 상태라면 피드백이 더 긍정적일 것이고, 그 반대의 경우도 마찬가지입니다. 또한, 학생들은 환자가 낯선 환경에 처해 있거나 매우 아프다는 등의 이유로 취약하다고 느끼면 감히 비판적인 피드백(신뢰성)을 제공하지 않을 것이라고 추론했습니다. 또한 학생들은 스트레스를 받거나 긴장한 환자에 비해 차분하고 편안해 보이는 환자를 더 신뢰할 수 있다고 답했는데, 그 이유는 후자의 경우 학생의 학습에 관심을 갖거나(선의) 학생을 관찰하고 수행 능력을 판단할 수 있는 적절한 마음 상태가 아닐 수 있기 때문입니다(유능성).
Second, in the clinical context, students mentioned that the patient’s emotional state impacted his credibility. Students reasoned that feedback messages were shaped by patients’ emotions. For example, if a patient was happy or relieved due to receiving good news, then his feedback would be more positive, and vice versa. Moreover, students reasoned that patients would not dare to provide critical feedback (Trustworthiness) if they felt vulnerable, for instance because they were in an unknown environment or were very sick. Besides, students mentioned that patients who appeared calm and at ease where more credible compared to patients who were stressed or nervous, because the latter might not be in the right state of mind to care about students’ learning (Goodwill) or observe the student and make judgments about her performance (Competence).

"네, [이 환자는] 따라서 덜 긴장하고 덜 감정적이었으며, 이 업무 환경에서 [내가] 어떻게 하고 있는지 생각할 수 있는 여유가 더 많았습니다. 따라서 자신에게 너무 집중하는 대신 상대방을 바라볼 수 있는 여유도 생겼습니다. 제 생각에 그는 더 나은 피드백을 줄 수 있었고 더 신뢰할 수 있었습니다. 그리고 그는 좀 더 객관적이었던 것 같아요." - St6clinical
“Yes [this patient was] therefore less nervous, and therefore less emotional, with more space to think about how [I am] doing in this work environment. There is therefore also more space to look at the other person instead of focusing too much on yourself. In my opinion, he could therefore give better feedback and was more credible. And he was a bit more objective as well, I think.” – St6clinical

셋째, 비임상 환경의 학생들은 시청각 환자 정보(지식 클립)에 대한 다른 제공자의 피드백 메시지가 환자의 신뢰도에 영향을 미친다고 언급했습니다. 교육 과정에서도 학생들은 의료 전문가와 동료로부터 지식 클립에 대한 피드백을 받았습니다. 환자의 피드백이 의료 전문가나 동료의 피드백에 추가되거나 그에 부합하는 경우, 환자는 더 신뢰할 수 있는 것으로 간주되었습니다.
Third, students in the non-clinical context mentioned that feedback messages of other providers on their audiovisual patient information (the knowledge clip) affected the patient’s credibility. In the educational course, students also received feedback on their knowledge clip from healthcare professionals and peers. When the patient’s feedback added to, or was in accordance with, feedback from healthcare professionals or peers, the patient was seen as more credible.

"실제로 [심리학자]가 제공한 조언은 [환자]의 조언과 완전히 같거나 거의 똑같았습니다. 그래서 항상 매우 비슷했습니다. ... 그래서 [그의] 신뢰성이 강화되었습니다." -St9비임상
“Actually, the tips given by [a psychologist] were exactly the same, or almost exactly the same as [the patient’s]. So that was always very similar. … which did reinforce [his credibility].” -St9nonclinical

맥락의 한 가지 요소인 '신뢰 관계'는 두 맥락 모두에서 학생들이 언급했습니다. 상호 존중과 신뢰로 특징지어지는 유대감은 신뢰도를 높이거나 낮출 수 있습니다. 

  • 일부 학생들은 긍정적인 유대감으로 인해 환자가 학습에 더 많은 관심을 갖게 되고(선의), 더 개방적으로 행동하게 된다고 추론했습니다(신뢰성).
  • 그러나 다른 학생들은 긍정적인 유대감 때문에 환자들이 관계의 손상을 두려워하여 개선해야 할 점에 대해 덜 솔직해졌다고 추론했습니다(신뢰성). 

One element of the context, ‘trusting bond’, was mentioned by students in both contexts. A bond, characterized by mutual respect and trust, could both increase or decrease credibility.

  • Some students reasoned that their positive bond made patients care more about their learning (Goodwill) and made them dare to be more open (Trustworthiness).
  • However, other students reasoned that their positive bond made patients less open about points for improvement (Trustworthiness), because they feared damaging the relationship.

"아마도 그 때문에 왠지 신뢰도가 조금 떨어졌을 것 같아요... 우리는 아주 좋은 관계를 유지하고 있는데, 그가 여전히 감히 엄격할 수 있을까, 말하자면 여전히 감히 팁을 제시할 수 있을까 하는 생각이 들었어요." -St3비임상 
“Maybe that somehow made him a little less credible, that I thought … we have a very good relationship, does he still dares to be strict, so to speak, does he still dare to come up with tips.” –St3nonclinical

피드백 메시지와 이전 경험이 신뢰도 판단에 미치는 영향
How the feedback message and previous experiences affect credibility judgments

맥락의 요소 외에도 피드백 메시지와 환자의 피드백에 대한 이전 경험도 학생들의 신뢰성 판단에 영향을 미치는 것으로 나타났습니다. 피드백 메시지와 관련하여, 학생들은 피드백 메시지가 구체적이고 광범위하며 긍정적인 피드백과 개선점을 모두 포함하고 있다고 인식할 때 환자가 자신의 학습에 관심을 갖고(선의), 개방적이고 정직하며(신뢰성), 피드백 제공에 능숙하다고(유능함) 추론했습니다. 이는 그 반대의 경우도 마찬가지였습니다: 
Besides elements of the context, students reasoning also showed that the feedback message, and previous experiences with patient feedback, affected students’ credibility judgments. With regard to the feedback message, when students perceived the feedback message as specific, extensive, and containing both positive feedback and points for improvement, they reasoned that the patient cared for their learning (Goodwill), was open and honest (Trustworthiness), and that he was skilled in providing feedback (Competence). This also worked vice versa:

"그의 피드백은 대부분 긍정적이었지만 그가 100% 정직했는지는 잘 모르겠습니다. 평가하기 어렵습니다. 그래서 저는 그가 저에게 피드백을 주는 것에 대해 인간으로서 특별히 신뢰할 수 없다고 생각합니다. 그가 피드백에 대해 완전히 정직한지 잘 모르겠습니다."-St6nonclinical(성실성) 
“his feedback was mostly positive and I am not sure if he was being 100% honest. I find that hard to estimate. And that’s why I don’t find him particularly credible, as a person, to give me feedback. I can’t quite sense whether he is being completely honest in his feedback.”–St6nonclinical (Sincerity)

개인적 특성과 관련하여 비임상 환경의 일부 학생들은 과거에 환자 피드백에 대한 긍정적인 경험을 가지고 있었습니다. 이 때문에 환자 피드백의 가치를 더 잘 인식하게 되었고, 따라서 환자를 더 신뢰할 수 있다고 판단했습니다. 
With regard to personal characteristics, some students in the non-clinical context had positive past experiences with patient feedback. This made them more aware of the value of patient feedback, and therefore judge patients as more credible.

"환자의 피드백은 궁극적으로 메시지를 전달하고 싶거나 안심시키고 싶은 사람이기 때문에 환자의 피드백에 많은 가치가 있다는 것을 이전의 경험을 통해 알게 된 것 같습니다. 목표를 달성하고자 하는 사람이 바로 환자이기 때문에 목표를 달성했는지 여부와 그 이유 또는 그렇지 않은 이유에 대해 가장 좋은 피드백을 줄 수 있는 사람이기도 합니다." -St1비임상 
“I do think I have learnt through that earlier experience that there is a lot of value in the patient’s feedback, because the patient is ultimately the person you either do want to convey a message to or you want to reassure. That’s the person you want to achieve your objective with, so that’s also the person who can actually give you the best feedback on whether you achieved that goal and why or why not.” –St1nonclinical

신뢰성에 대한 학생들의 추론을 분석한 결과, 환자에 대한 신뢰성 판단은 여러 가지 상호 작용하는 논거를 종합적으로 고려한다는 사실이 명확해졌습니다. 이러한 주장은 맥락, 피드백 메시지 및 이전 경험에 의해 형성됩니다(그림 1 참조). 부록 C에는 한 학생의 인과 네트워크가 표시되어 있는데, 이 학생은 환자에 대한 신뢰성 판단을 어떻게 구축했는지 보여줍니다. 
Analysis of students’ reasoning about credibility clarified that their credibility judgments regarding patients is a weighing of multiple interacting arguments. These arguments are shaped by the context, the feedback message and previous experiences (See Figure 1). Appendix C displays the causal network of a student, which shows how she built her credibility judgment of a patient.

토론
Discussion

이 인터뷰 연구에서는 임상 및 비임상 맥락에서 피드백 제공자로서 환자에 대한 의대생의 신뢰성 판단을 살펴보았습니다. 학생들은 맥락, 피드백 메시지 및 개인적 특성의 영향을 받는 여러 가지 상호 작용하는 논거를 바탕으로 환자에 대한 신뢰도 판단을 내렸습니다. 연구 결과가 문헌에 어떻게 기여하는지, 그리고 그 교육적 함의에 대해 논의합니다.
In this interview study, we explored medical students’ credibility judgments of patients as feedback providers in a clinical and non-clinical context. Students based their credibility judgments of patients on multiple interacting arguments, which were affected by elements of the context, the feedback message and personal characteristics. We will discuss how our results contribute to the literature and we discuss their educational implications

연구 결과에 따르면 학생들의 환자 신뢰도 판단은 맥크로스키의 3차원 신뢰도 모델[18]과 일치하는 것으로 나타났습니다. 학생들은 신뢰도를 판단할 때 환자의 역량, 신뢰성, 학생에 대한 선의 등 다양한 측면을 평가하는 것으로 나타났습니다. 흥미롭게도 '생생한 경험'과 관련하여 학생들이 원하는 피드백이 무엇인지에 따라 생생한 경험의 유무가 신뢰도에 영향을 미칠 수 있었습니다. 많은 학생들은 오랜 병력이 신뢰도에 기여한다고 추론했는데, 그 이유는 경험적 지식을 통해 환자들이 다른 병원 방문과 비교하여 학생의 성과를 판단할 수 있기 때문입니다. 그러나 다른 학생들은 새로운 환자가 치료에 대한 새로운 관점을 제공할 수 있기 때문에 실제로 더 신뢰할 수 있다고 추론했습니다. 따라서 학생과 레지던트 간의 상호작용과 마찬가지로, 연구 결과는 환자의 신뢰도에 대한 결정이 내용에 따라, 즉 학생들이 원하는 피드백 메시지에 따라 달라진다는 것을 시사합니다[7].
Our findings indicate that students’ credibility judgments of patients align with McCroskey’s three-dimensional credibility model [18]. We found that in determining credibility, students estimated various aspects of a patient’s Competence, Trustworthiness, and Goodwill towards the student. Interestingly, regarding the argument ‘lived experience’, depending on what feedback students were looking for, presence or absence of lived experience could both contribute to credibility. Many students reasoned that a prolonged medical history contributed to credibility, because experiential knowledge allowed patients to judge a student’s performance in comparison to other hospital visits. However, other students reasoned that new patients were actually more credible, because they could provide a fresh perspective on care. Similar to student-resident interactions, our results therefore suggest that decisions about patient credibility were content specific, meaning dependent on the feedback message that students were seeking [7].

교육 실습의 경우, 맥크로스키의 3차원 신뢰도 모델을 사용하여 학생들과 신뢰도 판단에 대해 토론하고 학생들이 자신의 주장을 정리하고 이해하는 데 도움을 줄 수 있습니다. 신뢰성에 대한 학생들의 추론에 대한 통찰력은 학생들이 어떤 종류의 학생이 어떤 종류의 피드백을 제공할 수 있는지에 대해 더 많은 피드백을 이해하는 데 도움이 될 수 있습니다. 향후 연구에서는 학생들과 신뢰도 판단에 대해 토론하면 학생들이  환자로부터 피드백 정보를 더 신중하게 찾고 사용할 수 있는지 살펴볼 것을 권장합니다.
For educational practice, McCroskey’s three-dimensional credibility model can be used to discuss credibility judgments with students, and to help them organize and understand their arguments. Insight into their reasoning about credibility might help students to become more feedback literate in terms of which kinds of patients can provide which kinds of feedback. We encourage future research to explore whether discussing credibility judgments with students will enable them to seek and use feedback information from patients more deliberately.

이번 연구 결과는 맥락이 신뢰성 판단을 어떻게 형성하는지 보여줍니다. 학생과 환자의 역할이 다른 임상적 맥락과 비임상적 맥락을 모두 살펴본 결과, 두 관계의 측면이 신뢰도에 어떤 영향을 미치는지 강조되었습니다. 흥미롭게도, 우리의 결과는 슈퍼바이저와 수련의 관계를 설명하고 피드백 과정이 그들의 관계에 의해 어떻게 영향을 받는지 이해하는 데 사용되는 교육적 제휴 프레임워크[39]와 공명하는 것 같습니다[7, 40]. 연구 결과에 따르면 이 프레임워크는 학생-환자 상호작용에도 적용되는데, 두 맥락 모두에서 학생들은 자신과 환자 사이의 교육적 동맹의 요소를 설명했으며, 이는 신뢰성 판단에 영향을 미쳤습니다[39]. 수퍼바이저-레지던트 상호작용에서 볼 수 있듯이, 피드백 제공자(즉, 환자)가 학생에게 인격체로서 관심을 보이고 학생의 학습 과정에 기여하고 싶다는 것을 보여줄 때 신뢰도가 증가했습니다[7]. 그러나 감독자와 레지던트 간의 상호작용과는 달리, 신뢰 관계는 신뢰도를 높이거나 낮출 수 있습니다[7]. 일부 학생들은 환자가 자신의 마음을 자유롭게 말할 것이라고 추론한 반면, 다른 학생들은 환자가 학생의 감정을 상하게 하지 않고 긍정적인 관계를 유지하기 위해 비판적인 피드백을 보류할 수 있다고 추론했습니다. 아마도 이 학생들은 동료 피드백에서 볼 수 있는 현상인 우정 점수 매기기(친구나 동료를 너무 가혹하게 평가하는 것을 불편해하여 과도한 점수 매기기로 이어지는 현상)를 두려워했을 수 있습니다[41]. 
Our results illustrate how context shapes credibility judgments. Exploring both a clinical and non-clinical context, with different roles for students and patients, highlighted how aspects of their relationship affected credibility. Interestingly, our results seem to resonate with the Educational Alliance Framework [39], which is used to describe the supervisor and trainee relationship and to understand how the feedback process is affected by their relationship [7, 40]. Our results suggest that this Framework also applies to student-patient interactions: in both contexts students described elements of an educational alliance between them and the patient, which affected their credibility judgment [39]. As seen in supervisor-resident interactions, credibility increased when the feedback provider (i.e. the patient) showed interest in the student as a person and demonstrated that they wanted to contribute to the student’s learning process [7]. However, in contrast to supervisor-resident interactions, a bond of trust could both increase and decrease credibility [7]. Whereas some students reasoned that patients would feel free to speak their mind, other students reasoned that patients might withhold critical feedback in order to avoid hurting the student’s feelings, and preserve the positive relationship. Possibly, these students feared so called friendship-marking, a phenomenon seen in peer feedback, in which students find it uncomfortable to grade friends or peers too harshly, which leads to over-marking [41].

임상 상황은 비임상 상황과 달랐는데, 학생은 학습자일 뿐만 아니라 의료 제공자이기도 하고 환자가 직접 치료를 필요로 하는 상황이었기 때문입니다. 따라서 학생들은 교육적 동맹 외에도 치료적 동맹도 인정했습니다[42]. 결과적으로 학생과 환자 관계의 주요 목표가 학생의 학습 과정에서 환자의 치료로 바뀌면서 권력의 이동이 감지되었습니다. 이러한 목표와 권력의 변화는 종종 환자의 신뢰도 저하로 이어졌습니다. 학생들은 환자가 자신의 학습을 돕고자 하는 선의를 가지고 있다고 믿었지만, 환자가 향후 의료 서비스에 부정적인 영향을 미칠까 봐 개선할 점에 대해 감히 솔직하게 말하지 못할 것이라고 생각하여 환자의 신뢰성에 의문을 제기했습니다[31]. 
The clinical context differed from the non-clinical context, since as well as being learners, students were also healthcare providers and patients were in the direct need of care. Thus, in addition to an educational alliance, students also acknowledged a therapeutic alliance [42]. Consequently, the primary goal of the student-patient relationship shifted from the student’s learning process to the patient’s care, which created a perceived shift in power. This perceived shift of goals and power often led to reduced patient credibility: although students believed patients were of goodwill since they wanted to help them learn, students questioned patients’ trustworthiness since they reasoned that patients might not dare to be open about points for improvement, out of fear of negatively impacting their future healthcare [31].

연구 결과는 신뢰성 판단이 단순한 것이 아니라 관계와 관련 목표의 맥락에서 여러 요소를 복합적으로 고려한 결과라는 것을 보여줍니다. 임상 맥락에서 학생들은 치료 동맹의 목표(돌봄)와 교육 동맹의 목표(학습) 사이의 상충을 언급했습니다. 한 학생의 사례에서 알 수 있듯이, 학생과 환자 간의 역할 설명과 목표 대화는 열린 피드백 대화의 장을 마련할 수 있습니다[40]. 향후 연구에서는 피드백 대화에서 환자의 역할에 대한 다양한 환자의 관점을 존중하면서 학생-환자 관계에서 목표와 역할을 논의하는 방법과 이것이 신뢰성 판단에 어떤 영향을 미치는지 탐구해야 합니다[43].
Our results illustrate that credibility judgments are not straightforward, but are the result of a complex weighing of multiple factors, within the context of relationships and their associated goals. In the clinical context, students mentioned a conflict between goals of the therapeutical alliance (caring) and goals of the educational alliance (learning). As shown by a student, role clarifications and goal conversations between students and patients can set the stage for open feedback conversations [40]. Future research should explore how goals and roles can be discussed in student-patient relationships, while respecting different patient perspectives on their role in feedback conversations and how this affects credibility judgments [43].

마지막으로, 피드백 메시지에 대한 인식이 신뢰성 판단에 영향을 미친다는 사실을 발견했습니다. 학생들은 피드백 메시지가 정보가 없거나, 구체적이지 않거나, 주로 긍정적인 피드백을 담고 있다고 생각하면 환자를 덜 신뢰할 수 있다고 판단했고, 그 반대의 경우도 마찬가지였습니다. 피드백 메시지와 피드백 제공자의 신뢰도 사이의 연관성은 일반적으로 피드백 제공자의 신뢰도가 메시지의 신뢰도에 영향을 미치는 것으로 설명됩니다[7, 44, 45]. 그러나 우리의 결과는 이것이 고리loop 형태임을 시사합니다. 따라서 우리는 제공자의 신뢰도를 피드백 메시지 참여의 전제 조건으로만 볼 것이 아니라, 피드백 메시지 참여의 결과로도 간주해야 합니다. 
Lastly, we found that perceptions of feedback messages impacted credibility judgments. Students judged patients as less credible when they considered the feedback message uninformative, nonspecific, or containing mainly positive feedback, and vice versa. Associations between the feedback message and the feedback provider’s credibility are usually described as the credibility of the provider influencing the credibility of the message [7, 44, 45]. Our results, however, suggest that it is a loop. Consequently, we should not only view provider credibility as a prerequisite for engagement with feedback messages, but also as a consequence of engagement with feedback messages.

실제로 환자 피드백에 대한 학생의 참여를 높이기 위해서는 환자로부터 유익한 피드백을 수집하는 방법을 교육하여 피드백 메시지의 품질을 높이기 위해 노력해야 합니다. 환자로부터 비특이적이고 주로 긍정적인 피드백을 받는 경우가 종종 보고되므로[23, 46, 47, 48], 구체적인 질문을 구성하고 대화에 참여하여 유익한 피드백을 요청하는 데 이 교육의 초점을 맞출 것을 제안합니다[35, 49]. 또한 환자를 위한 자발적인 피드백 교육과 설문지와 같은 피드백 도구가 이 과정을 지원할 수 있습니다[46, 50, 51]. 향후 연구에서는 이러한 교육 활동이 신뢰성 판단에 어떤 영향을 미치는지 살펴볼 수 있습니다.
In practice, to enhance student engagement with patient feedback, we should strive to increase the quality of patients’ feedback messages by training students to collect informative feedback from patients. Since receiving non-specific and mainly positive feedback from patients is often reported [23, 46, 47, 48], we suggest focusing this training on asking for informative feedback, by formulating specific questions and engaging in a dialogue [35, 49]. Moreover, voluntary feedback training for patients, and feedback tools like questionnaires, could support the process [46, 50, 51]. Future research could explore how these training activities affect credibility judgments.

향후 연구를 위한 제한점 및 제안
Limitations and suggestions for future research

이 연구에서는 학생들의 신뢰도 판단에 대한 인식에 초점을 맞추었기 때문에 필연적으로 한계가 있습니다. 연구 데이터는 회상에 기반한 것이기 때문에 신뢰성에 대한 논거가 숨겨져 있을 가능성이 남아있습니다. 또한 지각을 연구했기 때문에 제도적 문화와 같이 신뢰성 판단에 영향을 줄 수 있는 외적, 무의식적 측면도 숨겨져 있었을 수 있습니다[52, 53]. 이러한 측면을 수정하고 통제하는 실험 설계를 통해 신뢰도 판단에 미치는 영향을 밝힐 수 있습니다.
In this study we focused on students’ perceptions of their credibility judgments, which inevitably brings limitations. The study data is based on recall, which leaves the possibility that arguments for credibility remained hidden. Moreover, since we studied perceptions, external and subconscious aspects that can influence credibility judgments, like institutional culture, might also have remained hidden [52, 53]. Experimental designs that modify and control these aspects could reveal their impact on credibility judgments.

또한, 연구 대상 집단이 숙련된 의료 전문가로 제한되어 있어 데이터의 전달성이 제한될 수 있습니다. 임상 현장에 있는 대부분의 학생들에게는 환자에게 피드백을 요청하는 것이 처음이었기 때문입니다. 연구 결과에 따르면 신뢰성 판단은 피드백을 받는 사람의 과거 경험에 의해 부분적으로 형성됩니다. 따라서 숙련된 의료진은 환자의 신뢰도를 다르게 판단할 수 있습니다. 그러나 우리의 목적은 학생의 환자에 대한 신뢰도 판단에 대해 심층적으로 탐구하는 것이었습니다. 따라서 우리의 연구 결과는 (미래의) 의료 전문가가 환자에 대한 신뢰성 판단을 내리는 복잡한 과정을 밝히기 위한 향후 연구의 출발점이 될 수 있습니다. 
Moreover, our study population might limit the transferability of our data to experienced healthcare professionals. For most students in the clinical context, it was their first time asking patients for feedback. Our results show that credibility judgments are partly shaped by past experiences of the feedback receiver. Therefore, experienced healthcare professionals might judge a patient’s credibility differently. However, our purpose was to conduct an in-depth exploration of students’ credibility judgments regarding patients. Our results therefore serve as a starting point on which future studies can build, to further unravel the complex process by which credibility judgments regarding patients are made by (future) healthcare professionals.

결론적으로, 의대생들은 환자의 역량, 신뢰성, 선의의 측면을 판단하여 환자가 신뢰할 수 있는 피드백 제공자인지 여부를 결정합니다[18]. 학생들의 판단은 관계와 관련 목표라는 맥락에서 여러 가지, 때로는 상충되는 요소들을 종합적으로 고려하여 이루어집니다. 임상적 맥락에서 학생-환자 관계의 치료 목표와 교육 목표 사이에 인식되는 긴장은 신뢰성을 떨어뜨릴 수 있습니다. 향후 연구에서는 학생과 환자 간에 목표와 역할을 논의하여 열린 피드백 대화의 장을 마련할 수 있는 방법을 모색해야 합니다. 
In conclusion, medical students judge aspects of patients’ Competence, Trustworthiness and Goodwill to determine whether they are credible feedback providers [18]. Students’ judgments are a weighing of multiple and sometimes conflicting factors, within the context of relationships and their associated goals. In the clinical context, perceived tensions between therapeutic goals and educational goals of the student-patient relationship can diminish credibility. Future research should explore how goals and roles can be discussed between students and patients to set the stage for open feedback conversations.

 


Perspect Med Educ. 2023 Apr 12;12(1):129-140. doi: 10.5334/pme.842. eCollection 2023.

Patients as Feedback Providers: Exploring Medical Students' Credibility Judgments

Affiliations collapse

1Faculty of Medicine, Utrecht University, the Netherlands.

2Department of Pediatrics, University Medical Center Utrecht, the Netherlands.

3Utrecht Center for Research and Development of Health Professions Education, University Medical Center Utrecht, the Netherlands.

4Freudenthal Institute, Utrecht University, the Netherlands.

PMID: 37064270

PMCID: PMC10103723

DOI: 10.5334/pme.842

Free PMC article

Abstract

Introduction: Patient feedback is becoming ever more important in medical education. Whether students engage with feedback is partly determined by how credible they think the feedback provider is. Despite its importance for feedback engagement, little is known about how medical students judge the credibility of patients. The purpose of this study was therefore to explore how medical students make credibility judgments regarding patients as feedback providers.

Methods: This qualitative study builds upon McCroskey's conceptualization of credibility as a three-dimensional construct comprising: competence, trustworthiness, and goodwill. Since credibility judgments are shaped by the context, we studied students' credibility judgments in both a clinical and non-clinical context. Medical students were interviewed after receiving feedback from patients. Interviews were analyzed through template and causal network analysis.

Results: Students based their credibility judgments of patients on multiple interacting arguments comprising all three dimensions of credibility. In estimating a patient's credibility, students reasoned about aspects of the patient's competence, trustworthiness, and goodwill. In both contexts students perceived elements of an educational alliance between themselves and patients, which could increase credibility. Yet, in the clinical context students reasoned that therapeutic goals of the relationship with patients might impede educational goals of the feedback interaction, which lowered credibility.

Discussion: Students' credibility judgments of patients were a weighing of multiple sometimes conflicting factors, within the context of relationships and their associated goals. Future research should explore how goals and roles can be discussed between students and patients to set the stage for open feedback conversations.

 

새로운 의료인문학(들)과 한국 의료인문학의 자리* (Philosophy of Medicine 2023)
최은경(경북대학교 의과대학 의료인문·의학교육학교실)

 

1. 서론

의료인문학은 아한국에서 생소한 학문이다. 한국에서 의료인문학을 설명할 때 대부분은 이 학문이 설고 지의 학문에 가깝다는 반. 하지만 한국에서 의료인문학 중 중요한 분과학문으로 여겨지는 의사학(醫史學, history of medicine)이 의과대학 내에 자리 잡은 것은 만 75년 전인 1947년이다.1) 방 후 를 정비하는 의 상황에서도 의학의 역사를 설명하고 탐색하는 것이 의학교육에서 설다고 여겨지지 않았다는 것이다

의학이 한국에서 새로운 형태로 형성되어야 할 이 시기에 의사학 (醫史學)학문이 의학 아카데입된 식은 여러 가지로 미롭. 아마도 대다수 의사에게도 의학의 역사를 배워야 하는 물음에 대해 명이 나지는 을 것이다. 의과대학에서 소화해야 한다고 여겨지는 은 과과 비해서는 더욱더 그러하다. 그럼에도 의사학 과목이 오늘날까지 한국 의과대학에서 많이 가르쳐지고, 일종의 중요한 교양과목과 같이 남겨져 있게 된 까닭은 무엇일까.2) 그것은 인문학이 의학이학문에 영향바와 여러모로 관지어 생각하지 을 수 없다. 서양에서는 중세 대학 때부고전과 문구하는 기이 모학문 연구에서 필수였다. 의학 역시 갈스를 비롯한 위대한 이론가들의 원전을 우는 것이. 과거에는 역사학적 문을 고하는 것과 의학은 개가 아니. 역사적 리는 다르나 한의과대학에서 고전 원전을 는 것이 으로 아 있는 것 한 이러한 관적으로 이해수 있다.

의학에서 과학적 법론과 임상 증례 방법론이 부상하기 시작한 19세기 이에도 문화와 문의 비구는 의학의 한 법론으로 남았. 르나르를 중심으로 실험의학 법론이 등장하고 실험실 내 구가 지식 생산 법론이 되으나 질병의 과거 모이 어하였는 지는 실험실에서 재현되기어려. 헌의 비판적 검토를 통해서 질병의 역사 지리적 분포를 탐구하는 것은 초기 의학사의 방법론이었고, 이후 학제로서의 의학사가 되었다.3) 한국에서 의학사는 제국대학 의 영향을 받은 식민지 의학 엘리트들의 교양으로 처음 시작되었다고 볼 수 있다. 일제강점기 제국대학에서 학부와 사를 마친 윤은 해방 후 두종함께 대학의과대학에 의사학실을 설립 하고 대한의사학회 창립을 이하면서 의사학이 의학교육의 분과로 는 데 기여하였다. 여기에는 그가 토제국대학에서 형성한 양주의적 관심이 영향을 것으로 작된다.4)

그럼에도 불구하고 한국 의료인문학의 역사에서 오래된 의사학의 역사는 곧잘 누락된다. 이는 학문으로서의 의료인문학이 의과대학 내에서 등장한 이와 이전의 역사가 절된 . 그러나 으로 한국 의학의 역사에서 의료인문학을 소거시으로써 한국 의학의 성장과 의료인문학을 개로 간주하는 경과도 관없지 . 이러한 경은 한국 의학의 맥락에서 한국 의료인문학의 위치를 사유하기 어게 만. 나아가 의학의 주요한 요소로서 의료인문학의 위상과 역할을 고려하기 난망하게 만.

본 글은 다양한 의료인문학의 맥락과 갈래 속에서 한국 의료인문학의 역할을 탐색하는 것을 적으로 한다. 이를 위해 우‘인문학으로서의 의학’, 의료인문학이 의과대학에서 하나의 학제로 형성되어 온 과정을 추적한다. 특히 전인적 인간 형성을 표로 하는 인문학 부 가 타인에 대한 연공감 등을 요청하는 의과학 반성의 요구와 으면서 의학교육에 강조되는지를 살펴본다. 1990대 이국내에 부상한 의료인문학 도입 경으로서 의학교육의 글로라이제이을 살, 이를 의학을 인문학적 요청이라는 측면에서 비적으로 검토한다. 마지으로 한국 의료인문학의 위상과 역할을 ‘전문성’과 ‘’이라는 역을 로 들며 제하고자 한다.

1) 1947년 서울대학교 의과대학에서 수립된 의사학교실이 수립된 해방 후 최초로 설립된 의사학 전담 부서이다.
2) 2014년 예방의학회에서 전국 의과대학 의료법규와 인문사회의학 교육현황을 조사한 데 에 따르면 60% 이상의 대학에서 해당 명칭으로 개설되어 있다. 의료법규 및 인문사회 의학 교육개선 특별위원회(2014).
3) 최초의 근대적 의미로 의학의 역사에 관한 서적을 남긴 사람은 커트 스프랭글(Kurt Polycarp Joachim Sprengel, 1766-1833)이었다. 그는 실용적 문헌 고찰을 통해 문 화의 역사로부터 의학의 이론을 추론해 낼 수 있다고 믿었다.
4) 홍종욱(2018), 185-204. 홍종욱은 윤일선이 교육을 받은 구제 고등학교와 제국대학 이 ‘교양주의’의 산실이었고, 그 ‘교양주의’는 ‘학력엘리트의 신분문화’를 낳았다고 설명 한다. 윤일선은 해방 후 서울대학교 의과대학 교수이자 초대 대학원장을 역임하며 서울대학교 의과대학에 의사학교실이 설치·운영하는 데에 기여하였다.

2. 의학교육에서의 의료인문학

“인문학으로서의 의학”은 달리 말하면 ‘의생명과학으로서의 의학’이 급부상한 후 만들어진 거울상이다. 과거 의학은 이론과 의학 간의 연결고리가 강하였다. 하지만 과학적 법론이 부상하고 주화되면서 문헌 탐구와 은 의학의 래된 인문학적 법론은 일의 그, 여물로 남았. 우가 '문화'에서 지한 상호 이해 불능한 문화처럼 의과학과 인문학은 상호 다른 두 문화의 지칭처럼 여겨지기도 하였다.5) 그러나 의학에서 인문학적 요소가 완전히 배제된 적은 없다. 도리어, 인문학적 법론이 과학적 법론으로 대체되면 록 오히려 인문학과 의과학은 어더욱 더 긴장된 관계에 여 있다고 수 있다. 1919년 오슬러가 마지대중 강연에서 의과학과 인문학의 ''을 비을 때 그는 과거를 히포크스와 갈스를 아는 것만으로 진료하기에 했던 시간으로 상한다.6) 주의 시대에 접어 과학 법론이 더욱 많성하면서 의과학 법론은 인문학적 위와 무게가 받아들일 만한지, 과학 이론에 비어 효과적인지 물. 반면 인문학은 도리어 의과학의 법론에 비어 인문학의 효용을 고 되리고자(revival) 하였다. 의학 지식이 점차 세분화되고 교육제도가 격하고 과학적 법론이 기를 잡았던 20세기 전반, 도리어 오슬러와 같은 의사들은 의과학에 대비되는 의학의 오랜 이상은 인문학에 있으며, 의학교육의 핵심에 자리를 잡아야 한다고 보았.7) 그것은 질병과 병리로 환원되지 는 인간에 대한 은 이해를 바으로 한 동정과 공감이 인간을 치유할 수 있다는 이상을 전제로 한 것이. 오슬러가 보기에 과학은 상대적으로 냉혹하고, 인간을 전체적인 존재로 간주하지 않으며, 비인간화할 가능성이 높아서 인문학을 갖춘 의학은 이러한 과학의 독성을 치유할 수 있는 해독제와 같은 것이었다.

오슬러 등의 우려 이'의료인문학'이 하나의 별도 영역이자 학제 로서 등장한 것은 1990년대로 접어들고 나서이다. 의료를 형용사로 조합어인 '의료인문학(medical humanities)'이 하나의 간-학문적인 학제로서 와 유을 중심으로 의학교육의 새로운 물결로 도입되 기 시작하였다. 의학의 인문학은 의학의 '비인간화'에 대한 우려, 고령화로 인한 만성 질병 중심의 의료 이용의 시대의 도래 등에 힘입어 의과학에 대한 환희가 잦아든 이후에 본격적으로 중래하기 시작하였다. 물론 1960-70대에도 인문학에 가운 학문으로 생명리학이학제가 새게 등장하였다. 이 학제는 주로 기존에는 생각하지 못했 던 생과 음의 리적 문제를 다루으며, 의료 자원 분와 인간 대상 연구의 리적 이등 주제를 . 한 에드문드 그리나 에은 명망 높은 의사-학자들은 오슬러의 이상을 이어받아 생명리학 학제 내외에서 교류하며 '인문적 의사' 에 대한 이상을 논의해 나. 문학 전공자들을 중심으로 개별적인 의료인문학 교육들이 조금씩 이루어지고 서사의학에 대한 관심이 생 겨난 것도 이때라 할 수 있다.

다면, 의료인문학이학제가 본격 등장하기 이전인 이 시기에서 다의학 내 휴머니즘, 또는 인간학이란 무엇일까. 그리는 르상스와 계주의에서 비롯된 휴머니즘의 이상이 의학의 인간적 가치에서도 숨쉬어야 한다고 보고 합리적이고 과학적인 요소로 자하면 이를 러서는 안 된다고 보.8) 그가 보기에 은 문학적 교육학적 이상이, 교육적 인식론적 이상(그리스 어원으로 paideia)과에 대한 공감''(그리스 어원으 로 philantropia) 가지 요소를 것이. 의학 내 휴머니즘 (humanism in medicine)은 의사가 인식론적으로 언어와 기예를 갖춤과 동시에, 인간으로서의 환자에 대해 의사가 정념적인 감정을 가지는 것 둘 다를 의미하였다. 전자는 자유게 계된 인간이라면 갖추어야 할 기다면 자는 관적 치료라는 위를 어서 인격으로서의 환자가 가지는 유일을 마주하는 것이. 그리전자의 표를 위해 고전 언어의 습득과 문헌의 독해 등 전통적인 인문학 훈련에 반드시 기댈 필요는 없다고 보았. 하지만 구에게도 속되지 교육받은 자유인으로서의 의사는 비판적으로 현상을 바라보고 사고하는 훈련을 거쳐야 했고, 단지 기술자인 동시대인으로 부터 자신을 구분할 수 있어야 하였다. 

5) Snow(1959)/ 오영환 역(2001).
6) Osler(1919), pp.1-7.
7) Osler et al.(2002).
8) Pellegrino(1974), pp.12881294.

그리가 의학교육의 인문학 필요성을 강조한 데에서 수 있 , 의학 내 인문학 전통의 재소환은 20세기 들어서 과학적 기술의 독점과 방법론의 강화에 대한 반발로 제시되었. 의과학 법론의 대는 주로 가지 차원에서 기존의 의사상에 대한 위협처럼 여겨. 과학기술에 대한 으로 인해 한기능인으로 전할 것에 대한 우려의 한으로 환자를 지 기술의 대상으로 소외시킬 것에 대한 우려가 존재. 기간 의학 내 '인문학'용어가 지하는 바는 때로는 교양인으로서 의사가 지녀야 할 품성이었고, 의사가 가져야 할 인간에 대한 이해였다. 의 비적 해을 통한 인 문학적 법론은 전자를 위한 방편자는 고통을 이해하고 동정과 공감을 나는 인문학적 치유 이상이. 그러나 두 가지가 꼭 '인문학'이란 용어로 통합되어야 하는 것인지에 대해서는 불분명한 채로 남아 있었. 왜냐하면 인문학적 법론과 인문학적 치유 이상이 일치하는 것이 아니며, 때로는 갈등적일 수 있기 때문이다. 그리역시 인문학의 특성에서 'paideia'의 요소와 'philantropia' 의 요소를 구분하여 제시으로써 다 의학에서 필요을 설하였 으나, 적은 똑같않았. 하나는 의사가 교육받은 젠틀맨이자 사회의 주요 구성원으로서 지녀야 할 역량과 품성을 위해 필요한 것이었고, 다른 하나는 의사가 환자를 대할 때 발휘해야 할 덕목에 가까웠다.

의사가 기능인 이상의 직업인이 되기 위해서 인문학은 우초 교교육으로서 의사로서의 성장에 기여해야 . 의학교육 영향보고서를 작성하면서 과학적 구 능력을 양하는 것을 강조한 한 인문학은 기초 교교육으로 필수적으로 전제되어야 한다고 보.9) 

9) Doukas(2010), pp. 318–323. 플렉스너는 자신의 보고서를 통해 과학 커리큘럼 중심 으로 미국 의학교육을 재편하는 데에 큰 영향을 끼쳤으나 15년 후 '의학은 오늘날 문화적 철학적 배경을 잃어 가고 있다'라며 후회하였다고 한다. 플렉스너는 의사는 환자 돌봄의 영역에서 특히 인문학적 역량을 갖추어야 한다고 보았다.

그러나 인문학은 양인으로서의 의사를 비하는 기반에만 국한된 것이 아니. 1984년 펠레그리노는 의학 내에서 인문학을 가르쳐야 하는 이유에 대해 더욱 강조하면서 다음과 같은 이유를 들었다. 10) 의사는 인문학을 동반자적 구로 면서

  • 1) 환자와의 관계에서 그리고 과학자 사회에서 언어를 읽고 이해하고 판단하는 사고 능력을 교육하는 교양을 얻고 마음을 자유롭게 할 수 있고
  • 2) 과학적으로 설명 하거나 측정하기 어려운 현상의 심상(imagination)을 자유롭게 하며
  • 3) 인간으로서의 '영혼의 즐거움'을 함양할 수 있었다.

, 초교양인 뿐만 아니라 임상의로 성장하는 데에도 인문학은 임상의로 성장하는 데에 없어서는 안 되는 지속적인 자양분이 될 수 있었, 그 성장 과정에서 더욱 성해질 수 있. 세 가지 모환자의 고통이라는 미망 한가운데에서 의사가 한 명의 계된 자유로운 으로 살아갈 수 있는 해결.

인문학이 의사의 성장에만 도거라 믿은 것은 아니. 초기 의료인문학자들은 실천적 영역에서 인문학은 환자를 단지 기술의 대상으로 축소하지 않고 환자의 고통의 의미를 해석하고 포용하는 것을 도울 거라 보았. 인문학적 양에 대한 강조가 환자에 대한 이해를 이리라는 것에 대해 의문을 제기할 수 있다. 특히 인문학적 양에 대한 강조가 지 자들만의 리트주의적 취향과 이해로만 결된다면 공감 등의 성을 강조하는 것이 무의할 것이다. 이것은 '인문학(humanities)' '인문주의(humanism)'란 단어에 내장이기도 하다. 래전 로마의 시세로(Cicero)가 인문과 부라 는 용어를 결합한 소위 liberal arts, "studia humanities"라는 인문학 을 설한 이래 인문학은 교육의 이상으로 자리 잡았. 하지만 paideia와 philantropia가 같은 인문학(humanities)에 묶일 수 있을지에 관해서는 고대부터 의문의 여지가 있었.

  • 이를테면 로마 저술가 아 울루스 겔리우스(Aulus Gellius)는 humanitas와 philanthropia의 결합이 잘못된 해석이라고 주장했다.11)
  • 독일 교육철학자 프리드리히 니데 머(Friedrich Niethammer) 역시 시세로의 인문학 개념을 재발견하면 서 제2의 인문주의(humanism)운동을 불러일으켰으나 동료 시민의 교양을 부흥시키는 박애주의 교육(philanthropic education)에는 반대했다.12)
  • 그럼에도 불구하고 교양으로서의 인문학의 특징이 희석되면서 오늘날 인문주의는 로크와 루소의 교육의 이상, '인간에 대한 사랑', 즉 박애주의적 교육의 의미에 더 무게를 두는 것으로 이해된다.

서구의 역사에서 교육과 의술은 박애주의라는 전통을 공유한다. 특히 의료에서 각인간에 대한 아가페적 헌신, 주의적 전통에 대 한 강조는 의사-환자 관계치유(healing)라는 이상을 소환한다. 인으로서의 의사가 이러한 치유의 이상과 마나 밀하게 결합할 수 있을지는 운 물음은 아니다. 궁극적으로 신으로부터만 가능하다고 여긴 치유의 이상을 세속 인간의 몫으로 넘기는 순간 긴장은 피할 수 없을지도 모른. 그리를 비롯한 의학-인문학의 구자들은 이 사라진 시대 의술의 모은 의사-환자 관계 속에 있다고 보. 은 치유하는 관계로서 환자-의사 관계가 내하는 본질적 구속에 가, 의과학만으로는 히기 어려운 성질을 고 있.13) 의과학 방법론에 대한 지나친 강조는 치유하는 관계로서의 환자-의사 관계가 소외될 가능성이 있는데, 특히 고통에 대한 적절한 이해력이 훼손될 수 있었. 고통은 지 생물학적 지에서 한 사람의 유기체로서의 조화가 실하는 것만이 아니. 유기체로서의 조화에 별 이상이 없더라도 고통은 겪을 수 있었다. 체적 고통을 어 고통은 한 사람의 자의 인생에서 상실과 훼손의 위협에 을 의하기 때문이. 은 의학교육에서 인문학의 장소를 물으면서 과학으로 국소적이고 제한된 이해만으로는 환자가 가져오는 기대, 이해, 판타지, 의미, 공포, 두려움을 직면할 수 없고 온전히 이해하기 어렵다고 보았다.14) 의료인들은 계속 환자의 고통과 음을 마주할 수에 없다. 이를 받아들이는 법은 인간의 어를 다루고 소화하고 어 이면을 다수 있는 능력을 통해서이다. , 인문학적 이해와 능력은 고통에 관한 과학적 구와 개념화를 지하고 고하 는 데에 도것으로 기대되. 

10) Pellegrino(1984), pp. 253-266
11) Adler(2020).
12) Becker and Becker(1992). p.801.
13) 펠리그리노는 임상의학의 내재적 모럴(internal morality)는 아리스토텔레스식의 ‘좋음’의 목적 속에 내포되어야 하며, 결과주의적 목적과는 구분된다고 본다. 그리고 이것이 의료전문직 윤리의 근간이라고 주장한다. Pellegrino(2011a), p.63 참조.
14) Cassell(1984).

3. 서구의 의료인문학 교육 등장과 글로벌 의료인문학, 한국 의료인문학

국과 등지에서 1990대 들어 의료인문학이 일의 새로운 물결처럼 등장하였을 때 에서 언급한 의료인문학 교육제 모를 다루고 있다고 보.

  • 1972년 문학 전공자가 펜실베이니아 의과대학 교수로 처음 임명된 이후 북미에서는 문학 전공자들 이 주도하여 <문학과 의학> 붐을 주도하였고 의료인문학을 대표하는 흐름으로 자리 잡았. 이 당시 의료인문학은 의사들의 감성적 성장과 환자의 질환과 고통을 하나의 스토리로서, 서사로서 이해하는 것을 목적으로 하였고, 사회적 변화와 그 속의 의사의 위상 변화는 좀 더 다른 이야기였다.
  • 1990년대 들어 환자 중심 권리의 등장과 의료의 시장화, 관료화 등의 변화 속에서 의료계에서도 기존의 견고했던 교육받은 젠틀맨이라는 의사의 위상이나 그의 가부장적인 권위가 쇠퇴하기 시작하였다. 의사라는 전문직업성 교육이 새롭게 등장하였고, 변화하는 사회에 능동적으로 대응하는 전문가 형성을 목표로 하였다. 펠레그리노 등이 덕 공동체로서의 의사 직업공동체를 강조하고 전문직 관계의 덕목을 촉구하였을 때 이는 의료인문학 교육의 얘기에만 국한된 것이 아니었다.15) 미국의 전문직업성 교육 주창은 전미 의과대학 학장협의회, 졸업 후 의학교육 인증위원회, 미국 내과의사회 등 에서 이루어졌으며, 근본적으로 이들 의료계가 사회와 맺고 있는 책무와 깊게 관련지었다.

국내의 맥락좀 더 다르다고 보아야 할 것이다. 한국 의과대학에 서 의료인문학 교육이 어떻게 서구와 다른 영역들을 포괄하게 되는 지에 관해서는 복규, 중의 글에서 잘 다루고 있다.16) 의사학이란 오래된 학제가 있었지만, 한국에서 의료인문학 교과목이 본격 소 개된 것은 2000년 의사 파업 이후였다. 처음으로 단체 행동에 나서면서 의사들은 소위 '사회화'의 과정을 겪었고, 전문직으로서의 의사의 힘을 각성하였다. 인문학 교육은 사회와의 '소통'의 측면에서 강조되었. 이는 의료계가 사회로부터 고립된 측면을 탈피하고 사에서 재차 리을 발하는 데에 도수 있을 것으로 기대하였다. 과거 국에서 교육득한 학생들이 의과대학에 진입으로써 전문으로서 지위를 고히 하는 데에 도수 있을 것이라는 기대가 있다면, 다시 인문학 교육을 통해 사회에 대한 이해와 의사 소통 능력이 향상될 수 있을 것으로 여겼다.

그러나 인문학적 이해와 교육의 토대 위에 분히 이지 한국 의학교육에 도입된 의료인문학 교육, 그동안 생소했던 윤리와 인문학에 관한 갖가지 교육과정이 의과대학에 난무하는 결과로 이어졌. 의료인문학은 기존의 의료와 사에 관한 교육당해 왔예방의학, 의료관리학 등의 학제와의 구분이 불분명한 채로 '인문사회의학'이란 용어로 뭉뚱그린 채 회자되었. 그리고 20년 후 또 의 거대한 의사 이 일어나고 의료시스과학이새로운 교 육과정들을 도입하려는 움직임이 지면서 인문학 교육다시 자의 존재 의를 물어야 할 필요에 . , 주지하다시서구와 한국의 의료인문학교육은 의과학에 대한 반성과 그걸로 소급되지 않은 의학의 가치를 강조하는 일환으로 도입된 것이 아니었. 인문학적 요소가 개화되지 않았던 과거 의학교육에 대한 래된 기을 가지고 도입된 것도 아니. 그것을 도입한 이들은 '' 인재이자 전문인으로서의 의료인이 수 있기를 하였다. 한국 의사들은 노동자성, 즉 일종의 노동자 정체성으로서 파업을 수행하였으나 그 결과로 노동자성과 다른 전문직업인 교육으로서 의료인문학 교육을 도입하였다. 그래서 한국의 의료인문학 교육은 의과학 방법론 강화에 따른 인간 가치의 소외라는 서구의 테제보다는 주로는 의료계에 대한 정부의 인정과 리더십에 대한 불만에 초점을 둔. 그리고 과학 이후 또는 과학 외부에서 학문으로서의 의료인문학이 지니는 특수성-즉, 환자의 관심사나 환자의 이해를 고려하며 의사-환자 관계의 가치를 다루는 특수성이 그다지 많지 않. 한국 의학과 의료계에서는 소위 의과학 중심성에 대한 반성과 한계라는 서구 의료인문학의 주요한 테제가 주류가 되지 못한다.

하지만 이를 한국 의료계의 협소한 이해 때문이라고 국한하는 것은 구조적 측면을 소거한 타자화의 식에 지나지 을 것이다. 해야 할 점은 의생명과학이 글로벌가 된 한으로 의료 인문학 역시 글로가 되다는 점이다. 글로화된 의생명과학의 지식 생산과 환시스에서 의료인문학은 게 논외가 아니며, 전세계적 의학교육인증 시스에서 의료인문학은 "관련 행동 및 사회과학 영역(relevant behavioural and social sciences)"으로 다소 애매하나 주요한 인증 기준으로 자리잡고 있다.17) 여기서 인문학이라고 명시되어 있지 는 데에는 의료인문학의 가치에 대해서는 인정되나 그것이 글로의학교육의 표이자 역으로 정의되기에는 모호과 어려이 있기 때문이 아닌지 의심된다. 의학교육의 글로화의 움직임은 의생명과학 기술이 글로화되고 그에 따른 보건·의료인력 환자, 자원의 이동이 심화하면서 글로벌 보건(global health)이 중요한 화두로 제시되는 데에 비롯된다.

  • 다양한 자원의 환경 속에서 보건인력들은 기존의 의사, 간호사, 기타 치료사 등의 인력 양성 구분을 넘어선 역량 중심 양성에 기반을 둔 협력을 요구받으며 의사소통 및 문화적 역량, 윤리적 행동능력 등을 키울 것을 요구받는다.18)
  • 그리고 글로벌 보건 인력들이 개발되어야 할 역량으로 "유연성, 적응성, 문화적 감수성, 간-문화적 소통 역량" 등이 제시되면서 글로벌 보건 인문학 영역 또한 탐색에 들어서기 시작한다.19)
  • 최근에 한센(Narin Hassan) 등은 COVID-19를 계기로 글로벌 보건 인문학이 전환기에 들어섰다고 주장하며 20) 글로벌 보건의 하위 개념으로 글로벌 보건 인문학이 위치하는 것이 아니라 보건 인문학의 하위 개념으로 글로벌 보건 인 문학이 위치해야 한다고 주장한다.

그러나 개념적인 바람직함개로 오늘날 의료인문학 또는 보건인문학(health humanities)이 글로벌 보건만큼 영향력 있는 개념이 되었다고 보기는 어렵. 의료인문학의 글로화는 필연적으로 의과학기술을 수하고 적용되는 식과 지식 생산식이 이상 하나의 전통과 양태에 국한되지 음을 보여. 전세계적으로 기능인으로서 인으로서 글로보건을 하는 의사 "행동 과학 지식" 역시 득하며 글로세계시으로서 일차의료 역을 수행할 수 있어야 한다. 글로벌화의 지평에서 대두된 의료인문학의 가치는 오늘날 모두에게 건강을 추구하며 초국가적 협력을 강조하는 글로벌 건강 레짐과 별개로 사고하기는 어렵. 그것은 각국의 의학교육의 전통과 인문학교육의 전통이 어떠했는지, 전문직업성의 전통이 어떠했는지와는 큰 관련이 없다. 의 특수성은 자원의 격차와 문화적 차이 속에서 주로 거론되며, 의료인문학 교육의 비전은 글로벌 건강 세계 속 시민으로서의 비전과 좀 더 관련이 있다.

15) Pellegrino(2011b).
16) 권복규(2022); 김택중(2022).
17) World Federation for Medical Education(2020).
18) Frenk(2010), pp.19231958.
19) Stewart & Swain(2016), pp.25862587.
20) Hassan & Howell(2022), pp.133137.

그러므로 국내 의료인문학 교육의 현황을 논하면서 서구의 의료인 문학의 전통에 가음을 논하는 것은 일할 만하나 맥락바르게 이해한 것이라고 보기는 어. 주지하다시, 한국 의과대학이 공고한 기존의 교실 기반 의학교육을 넘어서 의료인문학 교육을 대대적으로 도입한 데에는 1990년대 중반부터 본격화된 한국 의학교육인증원의 의과대학 인정 평가, CanMEDs, 세계의학교육연합회 (World Federation of Medical Education, WFME)를 위시한 글로벌 보건의료교육기관 인증 체계의 도입에 있다.21) 의학교육이 글로스 체계에 입되면서 의료인문학의 도입 역시 강화되. 그러므로, 오늘날 건강 레짐 속에서 로컬의 의료인문학은 글로벌 의료인 문학의 일부로 기능할 수 있기를 기대받는다. 글로건강 속에서 오늘날의 의사는 로컬의 '현장 속에서(in)' 근무할 수 있는 인력으로서 로컬의 '옆에서(by) 로컬의 요구를 다룰 수 있는' '글로벌 관점' 으로 훈련받기를 요구받는다. 글로건강 속 의학교육은 경제성과 이타성을 재할 것을 요구받는다. 22) 그러므로, 한국 사회를 주도하는 인문학적 소양을 갖춘 고급의 의사 인력을 양성할 필요가 있 다는 엘리트주의적인 기대는 글로벌화된 의학교육의 맥락에서는 실현되기 어렵. 한국 의료계가 응당 한국의 의료 전통을 이해해야 하고 새로운 의료인문학 전통, 어쩌면 새로운 의학교육 및 교육의 전통을 쌓아가야 한다는 부름은 존재할 수 있으나, 적어도 최근 한국 의과대학에 도입된 의료인문학은 그런 맥락에서 도입된 것은 아니다. 그것은 한국 의사가 한국의 현장이란 전통 속에서, 그리고 전통을 비판적으로 사유하며 전통 옆에서 일할 수 있기를 요구하나 한국의 전통을 새롭게 창의적으로 건설할 것을 요구하지는 않는다. 글로세계화의 요구가 그러하, '의적으로' 되는 바는 글로의료 시이며, 한국의 의료 전통이 아니다.

21) 2000년대 이후 의과대학 의학교육 평가인증을 주도해 온 한국의학교육평가원에서는 세계의학교육연합회의 2015년 기준을 참고하여 2017년 ASK2019(Accreditation Standards of KIMEE 2019)를 개발, 평가 인증에 활용하기 시작하였다. 이 때 세계 의학교육연합회의 2015년 기준에 걸맞게 평가항목에 의료인문학 항목을 별도 삽입하 여 ‘의과대학은 의료인문학 교육과정을 운영한다’를 평가하고 있다. 다만 의료인문학 은 “행동과학, 사회과학, 의료윤리, 의료법규 등을 포함”한다고 정의하여 의료인문학 의 본래적 의미와 맞지 않는다는 비판이 존재한다.
22) Prideaux(2019), pp.2531.

 

4. 글로벌/로컬의 긴장과 비판적 의료인문학의 가능성

되어 의료인문학이 꼭 글로벌화의 요구에 복무해야 할 것인지에 대해 물음을 질 수 있을 것이다. 를 중심으로 시작된 CanMEDs 이나 World Federation of Medical Education (WFME)의 의학교육 인증 흐름은 정확하게는 의학교육의 경제적 비용 절과 분산적 , 그리고 각국의 의사 지망 엘리트들의 국적 을 가능하게 한다.23) 보건의료의 세계화라는 시대적 흐름은 거스를 수 없다 하더라도 그것이 초래할 결과가 글로벌 복지의 증진일지는 물음을 던질 수 있다. 그것은 로의 의료 수요를 논하지만 그를 통해 받은 로리트가 그에 무하지 게 만들 수 있으며, 과거의 서구 의학교육 전파의 예처럼 광범위한 두뇌 유출로 이어질 수 있다. 무성 교육이 글로의학교육 인증의 주요 기이나 그 결과 양성된 의사는 컬의 의료 수요에 복무하는 책무성 있는 의사가 되기보다는 해외의 의료 수요의 흐름에 따르기 쉽다. 더 나아가 이들은 더 의료 취약 지역의 수요에 따른 인력 배치에 저항한다. 이는 공공의대 설립 움직임에 격히 저항했던 한국의 의사 에서도, 스트일리아의 의료인력 치 문제에서도 전세계가 반적으로 면하고 있는 문제이다.

의학교육의 글로벌화에 직면해서 그것이 과연 현재 의료가 봉착한 문제를 해결하고 로컬의 의료 수요를 충족할 수 있을지에 관해서는 다양한 비판을 할 수 있을 것이다. 한 가지는 현재 의학교육을 주도 하는 역기반 교육이나 표화된 글로교육 방식이 과연 의료가 한 문제의 해결에 바람한지 비하는 것이다. 마가이 가 잘 지적하, 역량 기반 교육(competency-based learning)은 의과학 기술에 대한 단순한 기술 전달(technical knowledge) 에서 벗어나 있다는 점에서 더 우월한 것처럼 여겨지나, 사실상은 지식 습득의 한 가지 방법만을 고수하는 방법이다.24)

  • 역량 기반 교육은 역량을 결과 이자 성과로 객관적으로 측정하고, 계량화하고, 표준화하는 것을 목표로 한다. 이 교육은 전문직의 이해와 행동의 복잡성과 미묘함, 개개인 의 고유함과 독특함을 무시하고 그 결과를 수치로 환원한다고 비판받는다.
  • 그뿐 아니라 의료, 그리고 의료인이 사회와 맺어 온 관계를 알고, 이해하고, 관계를 새로이 맺고자 할 때 필수적인 개별 개체들과의 무수한 상호작용의 맥락과 과정들을 소거한다. 단순한 상처의 봉합이나 술기의 재현은 객관적으로 측정 가능하다. 환자를 대할 때 공감의 표현을 하고 위기 상황을 해결할 수 있는 능력 역시 가능할 수 있다.25)
  • 그러나 복잡한 사회적 환경 속에서 조건을 숙고하고 자신의 가치를 실천적으로 지켜나가는 방법, 한 사람의 전문가이자 시민으로서 의 삶을 영위하고 관계를 맺는 방법을 글로벌의 관점에서 객관적으로 측정하는 것은 어렵거나 불가능하다.
  • 쿠마가이는 역량 기반 학습이 의료인이 될 수 있는 다양한 앎의 방법(ways of knowing)들을 담아 내지 못한다고 주장한다. 26) 이는 오늘날 의학교육이 자율적으로 스스로를 성찰하고 규제하며 가치를 적용할 수 있도록 전문직업성과 윤 리를 함양하는 것을 목표로 함에 있어 치명적이다.
23) Prideaux(2019). pp.25–31.
24) Kumagai(2014), pp.97883.

하나는 글로벌화된 시선이 로컬의 의료 수요를 충족하고 글로벌 건강 평등에 기여할 수 있을지를 질문하는 것이다. 리가 잘 지적하, 글로의학교육에서 가하는 문제 중심 득법, 성과 중심 교육 등의 교육방법론은 자적 개인을 고로 하는 서구의 개인주의를 한다. 그리고 그것이 컬의 의료 문제를 해결할 수 있을지 거의 질문하지 않는다.27) 때때로 이러한 서구식 교육 문화는 이러한 교육 방법을 체내화한 컬의 상층 계급 시민들에게 더 부합하며의 의료 갈등을 더욱 심각하게 착 계급-빈민들의 문화를 타자화한다. 로컬의 의료 질 문제 이면의 의료 자원 교환의 불평등과 의료 붕괴의 양상을 질 좋은 인력 개발의 문제로 가린. 그리고 의학교육의 질이 은 것으로 받는 국의 의료 질이 그다고 치부되는 일본, 한국 등의 나라의 의료보다 효과적이고 효적이지 은지 질문하지 는다. 그 결과 신자유주의 이후 남미, 중앙 아시아 국가들에서는 다양한 의료 붕괴의 현장과 높아진 의료 질 인증 기준이 공존하는 모순을 경험한다. WHO-의 의학교육 인증 기구 등 다양한 국제 체들이 의료 붕괴 과정에 관여 하며, 의 의료와 의학교육이 글로인력 기맞추어 재편될 수 있기를 기대한다.

한국의 의료인문학의 도입은 의학교육의 글로맥락 도입과 무관하지 .28) 그러나 의료인문학 자체가 이들 문제를 무비판적으로 수용할 수 있을? 은 의생명과학이 환자의 증상과 고통을 관화되고 표화된 과학기술의 어로 치환으로써 의사가 환자의 고통 문제를 수 없게 만다고 비하였다. 유사하게, 로컬의 의료 부족과 고통을 글로벌 기준에 따라 평가하고 재단하는 것은 이들 문제 이면의 사회 문화적 맥락들을 소거하고 이해할 수 없게 만들 수 있다. 의학교육의 글로벌화 요구는 로컬의 의료 문화를 외부의 기준에 맞추고 순응하게 만든. 그것은 로의 의료들이 마나 스스로의 요구와 고통에 민감하게 반하고 해결하고자 하였는지를 아내지 으며 인식론적으로 소거한다. 의료 속에 존해 왔으되 지표화 되기 어려운 더더욱 포착하지 는다.

25) 하지만 『병든 의료』의 저자 오마호니는 의료인문학의 공감력 강조를 비판하며 의료인문학이 의사-환자 관계 사이의 소통 기술 등을 평가하고 가르칠 수 있다고 주장하나 실제로는 사적이고 신비스러워서 가르칠 수 없다고 주장한다. 그의 공감 교육 비판 은 경청할 만한 부분이 많다. O'Mahony(2020)/ 권호장 역(2022), 281-299쪽.
26) Kumagai(2014), pp.978983.
27) Bleakley(2008), pp. 266
270.
28) 물론, 글로벌화 흐름이 거세지기 이전에 한국 의료의 모순 속에서 의료인문학의 움직 임을 미리 찾고 희구했던 한국 의료계 주체들을 삭제해서는 안 된다. 그들의 고민은 소중한 씨앗이 되었다.

의료 속의 의료인과 환자들의 주체성을 탐색하고 ''를 지하는 의료인문학은 이러한 경을 비적으로 는다. 물론 의료 인문학이 내재적으로 적 요청에 부한다고 기는 어. 전술하였이 의료인문학은 의료가 보다 환자 중심적으로 환자의 요구에 민감하게 반할 수 있어야 한다는 요청에 라 도입되. 그러나 한국 사회에서 어떠한 행위가 환자 중심적으로, 민감하게 반응하는 행위인지에 대한 내용적 이해는 아직 불충분하다.

  • 현재 한국 에서 의과대학 의료인문학 교육 내용 대부분을 채우는 의료윤리는 서구의 기준인 4원칙-자율성 존중의 원칙, 선행과 악행 금지의 원칙, 정 의의 원칙 등을 제시하며 이들 원칙에 부응하는 것이 보다 윤리적이거나 환자 중심적이라고 믿는다.29) 그러나 이는 환자 중심성을 환자/ 가족의 의사를 형식적으로 확인하는 절차로 치환하는 경향으로 나타난다.30)
  • 또한 초기에 서구의 의료인문학 학자들이 이상으로 생각했던 인간적인 의사상이 서구의 교육받은 중산층 엘리트에 가깝다는 점 역시 무시할 수 없다. 고전적 의료인문학은 인간 중심적 전통에 기대면서 전인성(全人性)을 희구하는 근대 인문학을 유산으로 삼는 경향이 있다.31) 이는 오늘날 인류세 시대를 맞이하여 동물, 무생물 등 비인간 의 존재를 적극 포용하려는 최근의 인문학의 반성(탈식민주의 이론, ANT, 신유물론 등)을 도외시하기 쉽.
  • 이러한 양상을 보면 의료인 문학의 도입은 서구에서 출발한 이상적인 인간상-인문학적 질문과 규 범을 추종하는 것처럼 보인다.
29) 정의의 원칙은 환자중심성 보다는 의료자원 분배 원칙과 관련이 있어 결이 다르다.
30) 강지연(2021), 144-169.
31) 국내에 의료인문학을 종합적으로 소개한 황임경은 현재 의료인문학이 의학의 호르몬 역할을 하며, 그것은 의학의 휴머니즘 전통에 기댄다고 설명한다. 황임경(2021), 482 . 이 경우 의학의 본래성이란 무엇인가에 대해 고민하지 않을 수 없을 것이다.

과연 의료인문학은 외부의 규범에 대한 부응 이상의 것이 될 수 있을? 서구에서는 그간 의과대학 내에 성적으로 안한 의료인문학을 새로운 의료인문학의 흐름이 제기되고 있다.32) 현재 제기 되고 있는 판적 의료인문학(critical medical humanities)/건강 인문학(health humanities) 등의 새로운 의료인문학들은 이러한 의료인문학 내부의 장을 인식한다.

  • 비판적 의료인문학은 주로 의료의 현장 을 다양한 주체들의 얽힘으로 확장시킨다. 의료인문학이 과거 인간중 심적으로 정립해 온 전통적인 구분에 대한 비판적 탐구가 비판적 의료인문학의 주요한 테마가 된다.33) 비판적 의료인문학이 최근의 비판 이론, 퀴어 이론, 장애학 연구, 신유물론 등의 흐름에 기대어 전통적인 의료/비의료/의생명과학의 구분과 규범성에 좀 더 집중한다면,
  • 건강인문학의과대학의 의료인문학을 넘어선 확장을 시도하는 학문이다. 그것은 그간 의사 양성에 초점을 둔 의과대학 의료인문학이 다양한 영역의 건강 관련 주제와 관련된 인문학으로 확장되길 시도한다. 건강과 보건의료를 둘러싼 다양한 학제들의 시도들을 민주적으로 담아내고자 한다.34) 건강인문학의 초점은 그간 의료인문학의 테마였던 인문학적 의사-됨을 넘어서 건강/의료의 인문학적 의제를 확장하고자 하는 데에 있다.
32) 물론, 이들 '새로운' 의료인문학(들)은 주로 영국, 유럽을 중심으로 의과대학 밖에서 진행 중이란 점은 언급해야겠다. 의료인문학을 삽입한 커리큘럼의 전범이 된 미국에서도 의료인문학은 의과대학 커리큘럼을 둘러싼 거대한 전쟁 가운데에 자신들의 효용성을 입증하기 위해 분투 중이다.

33) 비판적 의료인문학을 적극 제기한 비니(Viney) 등은 학문의 특징을 다음과 같이 정의 한다.
(i) '
의료'의 현장과 범위를 임상적 만남 이상의 것으로 넓힌다.
(ii) 
단순히 건강과 질병의 경험과 맥락에만 집중하는 것이 아니라 다층적 차원의 구성을 인지한다.
(iii) 
비판 이론, 퀴어 이론, 장애학 연구, 액티비스트 및 연관 분야와 밀접하게 연관을 맺는다.
(iv) 
예술, 인문학, 그리고 사회과학이 임상 그리고 생명과학의 대척점이 아니라 '의생명과학 문화'와 생산적으로 얽혀 있는 지점을 인식한다 
(v) 
새로운 형태의 간학문적, 부문교차적 협력에 기여한다. Viney(2015), p. 2-7.

34) 건강인문학의 흐름을 주도하는 크로포드(Crawford) 등은 건강인문학이 예술과 인문 학에 대한 간학문적, 포괄적, 응용적, 민주주의적, 그리고 액티비스트적 접근을 채 택하는 학문이며 ‘의료인문학’에서 주변화된 기여들을 적극 수렴한다고 설명한다. Crawford(2010), pp.410.

이들 '새로운' 의료인문학이 제기된 경과 지하는 바는 조다르다. 하지만 이들 의료인문학이 그간 의과대학 내에서 좁은 의미의 규범화된 의사 양성과 그들의 역량 상승에 목표를 두었던 기존의 한계를 넘어서고자 함은 분명하다. 전지구적인 의과학기술 전영 향력 강화, 그리고 건강 의 형성 속에서 건강과 의료는 모, 그리고 인간-의 문제에 접적 관는다. 건강과 의료는 각 개인들이 세계와 관계 구이며 인식론적 토대이다. 지능기술과 과학기술의 발전에서 보이 전통적으로 인간의 것으로 여겨진 역 역시 의과학기술의 대상이 되고 있어 이를 계기로 몰락, 네오, 스트의 부상이 점지기도 한다. 이에 대해 새로운 인문학은 '인간'을 위기로부구원하고 재설 정하는 것을 표로 는다. 건강과 의료를 둘러싼 의사/일반인, 건강/비건강, 인간/기술 등의 전통적인 위계화된 구분이 흔들리 는 시점에 서서 그간의 인식론적 위계에 저항한다. 그것은 의과학기술이 비인간적이라는 그간의 인문학자들의 투덜거림과는 거리를 둔. 그동안 글로건강 에 관계, 협상하며 저하는 소리들을 고 사유의 자원으로 는다. 의사 중심의 의료와 임상 중심 적용을 선 민주적 관계 기의 탐색한다.

를 들어 건강 문해력(health literacy)의 문제를 생각해 보자. 건강 문해력은 날 공중보건과 건강증진정에서 핵심적인 결정 요인으로 이해된다. 히들 건강 정책 담당자들은 건강 문해력의 증진이 어 능력과 의사소통 능력, '무지(illiterate)'로 인한 장고 대중들을 건강 증진을 위한 로 인도할 것을 기대한다. 그러나 건강 문해력은 의사가 생각하기에 바람직한 방향으로 정보를 이해할 능력으로 환원될 수 없다. 혹은 기적인 의료 서비스를 이용하는지 여부로 단될 수 없다. 무지한 대중이 극복해야 할 으로 치부수 없다. 건강 문해력은 의학 관련 정보들을 자신의 상황을 고려하여 맥락화하고 자신의 결정으로 만드는, 자기 성찰력을 갖추어야 한다. 정보가 콘텍스트를 고려하고 수은 정보의 력을 검증하며 그것을 의사, 그리고 건강 정보의 세계와 소통할 수 있어야 한다. 그리고 자의 역한계 내에서 선택할 수 있어야 한다. 루비 (Rubinelli)는 건강 문해력이 아리스토스의 지식 분따른 실용적 지(practical wisdom), 즉 실(, phronesis)여야 한다고 주장한다.35) 그에 르면, 건강 문해력은 외부의 평가에 따라 건강 목 표-준수 여부로 평가되지 않는, 주체의 정보에 관련된 태도로 이해될 필요가 있다. 이러한 건강 문해력의 문제는 의료에 관한 지식들을 이해하고 역량을 갖추고 결정, 행동하는 문제가 더 이상 의사만의 것이 아님을 보여준. 건강의 자기 관리, 자기실현이 더욱 중요해진 의료는 일반인들에게도 하나의 기술이자 실이 된다. 인문학적 능력 함양과 주체적 해방은 일반인에게서도 중요한 과제가 된다. 의료인문학이 좋은 의사-되기에만 국한시키지 않아야 한다는 새로운 의 료인문학(들)의 요청이 설득력을 얻는다. 

물론 은 의사-되기에 의료인문학이 마나 기여할 수 있는지도 분히 검토되지 은 한국 사에서 이들 새로운 의료인문학()마나 유의할 수 있을지 의적일 수 있다. , 한국에서 의료 인문학을 도적으로 탐색한 황임경 등은 이들 건강인문학 적 의료인문학이 질문하는 문제들의 유의미함정하지만 해외 의료인 문학 소개의 일부로 국한시.36) 오랫동안 한국 사회는 이공계의 공부는 단지 지식-기술의 것으로, 인문계의 공부와는 별개로 여겨져 온 탓에, 의료인문학은 여전히 낯선 조합이다. 인성 교육 등 태도에 대한 교육양은 동안 교육이 도구적 단편적 지식의 득에 치중한 현실에서 부차화되어 왔다.37) 의대생 부에 대한 의적인 시각 한 의과대학 내에서 여전히 어야 할 제이다. 지식적 요소만 아니라 실적 요소가 의학교육에서 중요하게 자리매해야 한다는 요청도 아상황에서 태도를 교육을 통해 양한다는 것은 교육에 대한 기존의 위의 붕괴물려 더욱 진다.

35) Rubinelli(2009), p.307-311.
36) 황임경(2021), 30-32.
37) 정창우(2010), 1-33.

그럼에도 한국 사에서 기존의 의료인문학 만 아니라 새로운 의료인문학()이 기여할 수 있는 바는 존재한다. 새로운 의료인문학 (들)은 한국의 식민주의적∙후기 식민주의적 발전국가 경험을 직시한다. 그것은 한국 사회의 의료가 놓인 맥락들-예를 들어, 과도하게 기 중심적이고 침습지향적이며 단기 효과 중심적인 맥락들을 인식하게 해준. 한국 사의 의료가 서구로부이식되다는 단순한 이해, 그리고 서구와 비서구를 단순히 이분화하는 이분법을 지양 할 수 있게 도와. 그리고 한국의 의료가 한국의 물질 문화를 배경으로 하는 부분을 살피며, 한국의 의료 문화를 발전주의적 성공 신 화에서 벗어나 낯설게 보도록 촉구한다. 이를 통해 환자와 의사 등 다양한 의료 주체들이 의생명과학 문화와 비적으로 관계 을 수 있도는다. 은 의사-되기 규범콘텍스트를 통해 비적으로 적용할 수 있게 만. 그것은 동시에 지한국 의료가 여 있는 자리를 는 것이다.

한국 의료에서는 소아청소과의 전의 지원제로 사건 등 에서 수 있위기 론이 발 중이다. 소아청소붕괴에 대한 우려와 함께 필수 의료가 무질 것이라는 소리가 . 의과학 기술의 격한 발전과 성장한 의료 시장 , 은 수의 치료 성등의 화려한 한국 의료의 성공 신화 이면을 지하는 것은 무? 소아청소년과의 붕괴는 한국 사회의 의료적 필요와 의료 산업의 성공과 똑같지는 않을 수 있다는 점이 적나라하게 드러난 것에 가깝다. 마치 과거에 작동해 왔던 (좋은) 의사 되기를 위한 여러 시스템은 더 이상 작동하기를 거부하는 것 같다. 이것은 정로 한국 의료의 위기일? 혹은 이러한 위기에서 의료인문학은 도수 있을? 위기는 일반적으로 정상 상태를 전제로 한다. 그러나 한국의 의료 문화에서 정상 상태(혹은 시스)는 과도한 병원의 전동 의존도에서 수 있, 래를 보로 한 력에의 의존에 가깝다. 위기 론은 한국 의료가 것을 반성하라는 구로 이어질 수 있 으나, 반성은 한국 의료의 만이 되. 여기에는 저출생과 한국 사에서 ''를 유하는 , 숙련 구조의 붕괴, 그리고 과학기술적 성동 가능한 상태로 회복 외의 의료 가치에 대한 경시 등이 겹겹이고 얽혀 있다. 이러한 위기를 견디어 나가는 법은 서구의 인문학 독본이나 교양주의적 이상에 있지는 않다. 그것은 지금 이 자리에서 현재의 위기들을 서로에 대한 이해와 상상의 힘에 빗대 정직하게 보고 살펴나가는 데에 있다. 

5. 한국에서 의료인문학(들)의 질문과 자리들

다시, 한국에서 의료인문학(들)의 자리는 어디일까? 이 글의 서에 한국의 의료인문학은 의사학의 형태로 일본의 제국대학과 일 의학의 경을 경험으로 한 의학 리트들의 양주의적 관심에서 도입되 다고 밝혔. 그것은 어면 문해를 위주로 했던 과거 의학의 전통이 의학 리트들의 관심을 끌었던 것인지도 모. 이러한 전통이 1990대 의학에 대한 역사학적 관심을 지닌 이들에 의해 발 되기 전지 여전히 의학 리트들의 양주의적 관심에 . 1990년대는 본격적으로 의료인문학이 발돋움한 시기이며, 한국 의료가 발전 신화를 넘어 직종 간 갈등에 부딪히기 시작한 시기이다. 한국 의료의 정체성에 대한 탐색이 시작된 이때 의료리 등의 서구 의료인문학 론도 도입되기 시작하였다. 의과대학 인증평가제도의 도입과 2000년 의사 파업은 본격적으로 한국 의학교육이 '사회지향적' 으로 전환해야 한다는 요청에 부응하도록 만들었. 한국 의료 위기의 론들은 의료 외부에서 중요한 해법들을 , 임없이 도입하도록 견인차가 되으며 나름의 으로 이끌었. 이러한 위기 론과 , 그리고 기의 상이 해왔역할을 부정할 수 없을 것이다. 교육이 결국 의과대학 내 의료인문학의 양적 을 가져 왔기 때문이다. 그러나 한국 의료인문학이 제대로 생각하고 질 문할 수 있는 자리를 제대로 찾고 있는지, 비판, 창조로 나아가고 있는지에 대해서는 긍정적으로 응답하기 망설여지는 것도 사실이다.

전술했듯이 한국 의료인문학의 도입 배경이 서구의 의료인문학 도입 배경과 같지 않기에, 의료인문학이 응답할 수 있는 몫 또한 같지 않다. 그럼에도 불구하고 의료인문학을 다에 있어 가장 이 다루 어지는 가지 주제를 한국 의료인문학의 과 관지어 보고자 한다.

  • 하나는 의학교육 개혁과 의료인문학 도입의 직간접적 계기가 된 한국 의사들의 전문직업성 문제이다.
  • 두 번째는 의료인문학 본연의 몫으로 보다 논해지는 환자의 삶과 고통을 이해함으로써 이루어지는 치유이다.

이들 모환자, 의사, 그리고 자를 비롯한 한국 의료와 관계는 다양한 주체들이 얽혀 있는 주제이다. 한 한국 사의 법 제도 역사와 물질 문화적 토대를 함께 살펴보지 을 수 없 다. 그것은 의료인문학의 기원과 역할을 분명하게 구분해내는 것은 아니다. 그것은 한국 의료에서 '인문학적 필요'를 일푸코 식으로 계보학적으로 살펴보는 작이다. , 의료인문학 도입을 의학교육 따른 결과로 역사화하는 것, 는 한국 의료인문학을 서양 고전의 전통으로부기원화하는 것과 다르게 한국 의료에서 인문학적 필요에 대한 무수한 요청들을 어내는 것이다.

1) 전문직업성

한국 의사는 어떻게 정체화하는가? 집단으로서의 의사는 과연 존재 하는가? 이는 2000의사 (혹자에 르면, 권 쟁)에서 경험한 이후 줄곧 제기되는 질문이기도 하다. 발표 원고에서 필자는 의사들 스스로가 의료 시장과 보건의료체계를 스스로 결정 하지 못하고 있다는 의 정동이 '수호'라는 구호 속에서 출로를 정체성이 되, 으로 나원동력이다고 적.38) 잘 알려져 있듯이, 서구의 전문직업성은 중세부터 비롯된 직업 길드의 역사, 질 관리와 훈련의 역사에 기대어 있다. 지식의 습득과 전달이 스스로 외에는 허용되지 않기 때문에 부여된 일종의 독점권이라 할 수 있다. 이는 대에 들어와서 국가와 시장의 력으로부스스로의 한을 보호하기 위한 토대가 되으며, 전문리의 간이 되.

그러나 한국 의사들은 길드에 근간을 둔 자율적 통제의 역사를 갖고 있지 않. 서구 전문역사에서 리 강리트로서 스스로 를 다치유자들과 구분하며 도적 우위를 강제하는 역할을 수행. 그러나 한국 의사들은 식민지 시기 형성된 엘리트이자 기술 테크니션이며, 개항 이후 근대화 이데올로기에 따라 위로부터 형성된 직업군에 가깝다. 기술로부터 분리된 별개의 아카데미즘을 갖지 못하고 국가의 이해에 따라 균점되어왔고, 의사를 위한 자율적 공간이 많지 않. 서구의 의사들이 전통적으로 아카데미즘 정체성에 가까운 내과의테크니션에 가까운 외과의들이 존하다가 일정 시점에 타협한 것과 한국의 의사들에게는 아카데미즘과 테크니션이 혼종의 정체성으로 공존하며, 별개의 것이 아니다. 그리고 병원의 이해에 스스 로를 속시키기 때문에 한국 의사의 정체성은 국가의 이해에 라 계도화된 유사-조합주의 정체성에 가운 측면이 . 한국 의사들은 기술자본이 적된 병원의 이익과 한 보호를 일의 자으로 이해하며, 서구의 의사들처럼 은 분을 통한 조합의 한 행세를 자으로 이해하지 못한다. 이는 1995대한의학협가 대한 의사협로 명이 전환된 시점부강화된 현상이라 할 수 있다. 1990년대 중반부터 한국 의사들은 의료보험제도 도입 이후 보장된 의료시장과 확대된 병원의 이익 속에서 소수의 엘리트 정체성에서 조합주의적 정체성으로 전환하기 시작하였다.39)

38) 이러한 집단의 정동이 집단의 이익에 도움이 되었을지, 유리한 결과를 낳았을지는 또 다른 평가를 필요로 하는 문제이지만 말이다. 캐나다의 역량 기반 교육 CanMED framework 역시 1986년 온타리오 의사 파업을 기점으로 한 의사들에 대한 신뢰 하락에 대한 대응으로 도입되었다. Butt and Duffin(2018), pp.196–98. 2000년대 한국의 의료인문학 도입이나 의학교육개혁도 의사 파업의 영향력을 제외하고는 설명하기 어렵다.

39) 파슨스의 설명에 따르면 노동조합이나 전문가 조직 모두 구성원의 이해를 추구하나 전문가 조직은 한 사회에 규칙을 가져오기 때문에 행동 강령, 자율 분업화 등의 특징을 지니며 노동조합과 구분된다. Parsons(1969). 한국의 경우 길드의 역사 없이 행동 강령, 자율 분업화 등의 요소가 발생하기 전에 조합주의적 정체성을 먼저 갖춘 경우라 할 것이다.

이러한 한국 의료전문의 정체성을 서구 전문의 자적 통제와 질 관리의 역사와 등치시키는 것은 콘텍스트를 무시하는 것에 가깝다. 우리는 한국 의사의 전문직-됨에 대한 이해를 넓힐 것을 요청받는다. 율적 통제의 불/가능성은 한국 의사가 처한 독특한 딜레마이다. 고도로 발달한 의생명과학 지식과 기술을 습득하고 적용할 권한은 갖추었으되 그것을 통제하지 못함에서 오는 이상과 현실의 괴리이다. 시장 경이 격화되면서 과거와 만기술에 대한 을 유지하지 못하는 상황에 여 있음에 라 위기이 자연스라 온다. 그것은 의료를 운용하는 인력보다 관기술 도입에 중해 온 한국 의료의 현주소이기도 하다.

한국 의사들은 외형적으로는 기술을 독점하는 전문직이나 실제로는 내외적으로 그렇게 존중받지 못한다. 여기서 한국 의사들의 전문- 존재론을 다시 구할 필요가 있다. 의 기대와 개인의 도적 정체성이 일치되지 못에서 는 도적 아역시 살펴보아야 한다.40) 산재된 도적 위기은 필수의료 위기에서 수 있한국 사곳곳에서 '의료의 붕괴', '의료의 모라토리'은 재으로 이어지고 있다. 그에 비해 의사 개인을 도적 개인으로 보호할 수 있는 제도는 현재로서는 전무하다. 의사의 윤리를 단지 개인의 윤리가 아닌 집단 도덕의 윤리 가능성, 의협으로 대표되는 조합의 윤리 이상의 가능성을 텍스트와 콘텍스트를 통해 탐색해야 한다.

40) 여기서 의사의 도덕적 위기감, 아노미는 기타 직역들의 생존의 위기감과 구분한다. 뒤르켐은 『직업윤리와 시민도덕』에서 길드가 쇠퇴하면서 자유시장경제 하에서는 과거 길드와 같은 연대와 협동 없이는 직업적 결속감 없이는 도덕적 아노미 상태에 빠지고 만다고 설명한다. 권오상(2021), 1-22쪽. 의사 파업은 강력한 직업적 결속감을 보이는 것 같지만, 이면에는 그러한 연대가 없음이 오히려 드러난 현상에 가깝다.

 

2) 치유와 돌봄

전술하였서구의 의료인문학에서는 테크놀로지에서 소외된 환자-의사 관계라는 테제를 공유한다. 그것은 의과학기술이 개입되기 이전 환자에 대한 치유를 전인적으로 담당했던(또는 한다고 여겼던) 과거의 기억과 무관하지 않. 그리고 의과학기술이 의사들을 지 기능인으로 전시킬 것에 대한 우려와도 관있다. 기에 서사의학처럼 환자에 대한 콘텍스트를 으면서 환자에 대한 해력을 이고 시각을 시키는 법이 은 각을 받을 수 있.

그러나 근대화 과정에서 과학기술의 독점을 통해 스스로를 한의사들과 구분지었던 한국의 의사들에게 있어 의과학기술에 따른 소외라는 주제는 크게 와닿지 않는다. 적어도 이 주제는 통상의 '환자-의사 관계'에는 영향치지 는다. 이것은 의과학기술을 대하는 다수의 환자들에게도 마찬가지이다. 과도한 의과학기술이 스스로의 존엄함을 침해할 것이라는 서구 환자들의 우려에 비해 다수의 한국 환자들은 의과학기술에 열려 있다.41) 사체의 부검에는 부정적이나 체에 을 대는 성형수술 등의 기술에 규범적으로 려 있는 모에서 확인된다. 적어도 고통이 없는 일반인이 의사/의과학기술을 대면하거나 선망하는 간에는 소위 치유보다 자본주의 시장 경제 속 소비의 양상에 실하다. '3분 진료'로 대표되는 공장식 진료 시스템 역시 치유나 공감에 대한 공감대를 넓히기 어렵게 만든. 진료 결과에 대한 환자의 불만은 나은 의료를 위한 인차가 되거나 의과학기술의 불확실성에 대한 인정보다는 의사들에게 공포어 진료로 이어지는 결과를 .

지만 이것을 한국 의료에서 치유나 공감제가 공감받기 어다는 것으로 이해해서는 하다. 한국 의과학기술의 권위는 그것이 더 화려한 시술로 회복가능한 영역에서는 유지된다. 그러나 기술이 회복을 약속할 수 없거나 그 정도가 제한적인, 일례로 장애와 노년의 경우에는 이미 치명적으로 '치유'나 공감이 부재하다. 한국 사에서 장회복을 통해 환할 수 있는 장밋빛 래 자본이 부재하기에, 상상할 수 있는 사역의 여 있다. 그 리고 그 고통은 로지 개인과 가, 그리고 일부 의료진이 당하도 . 한국 병원의 3분 진료를 질타하는 담론은 많으나 3 분 진료에도 오지 못하는 사람들은 담론에서 거론되지 않는다. 이것 은 모사람들이 3분 진료에 접가능해야 한다는 기가 아니다. 의료의 공급이 지처럼 수도의 대형합병원 중심의 일루전에만 치중치는 부분이 훨씬 다는 기이다.

한국에서는 치유라는 제에 대해 논할 때 해당 어에 대한 그간 의 모호한 의들도 고려할 필요가 있다. 영어권에서 "heal"은 오래된 영어 단어 haelen으로부터 왔는데, "전체(wholeness)"라는 의미를 갖고 있으며 상처를 딛고 다시 하나가 된다는 의미를 갖고 있으며, 오늘날에는 심리적 정신적 영적 차원의 통합하는 회복을 의미한다. 반면 "cure" care은 어원인 라어 어원 curare로부온 것으로 주로는 체적 차원의 의학적 치료를 지한다. 일반적으로 영어권에 서 cure는 신체적 질병을 뿌리 뽑는 "근치"의 의미를 가지며 오늘날에는 heal과 대비되는 경우가 많. 그러므로 질병의 cure는 불가능하라도 더 높은 차원의 heal이 가능하다. 그러나 한국에서는 cure나 heal이나 둘 다 완치, 치유로 번역된다. 완치나 치유의 치()가 다스다는 의로서 단순한 질병이 아닌 질서로의 회복을 의하는 이다. 로 한국 사회 회복의 서사가 그사이에 여 있는 장의 고통을 마나 대속해야 할 로 환원하는지를 잘 기술하고 있는 은정(2019)의 원제는 Curative Violence이나 한국어로는 『치유라는 이름의 폭력』이라고 번역하고 있다. 여기서 다시 하나로 회복되는 것은 개인의 이나 전체성이 아니라, 라는 상처와 고통이 가의 생으로 대속된 하나의 가이다. 이 경우 "치유"는 그것에 도하지 못하는 이들에게 력이 된다.42)

한국의 대형종합병원들은 하나의 테크노 산업체로서 보험과 의과학 기술의 독점을 통해 발전해 왔다. 병원과 환자, 기술의 연결체의생명과학기술의 개발과 도입, 적용으로 지속가능하다고 여기는 상상체에 가까웠. 의생명과학기술의 치유 가능성을 하나의 화적 정점으로 은 일의 동맹이라 할 수 있다.43)

  • 여기에는 현재보다 더 저렴한 비용을 들여 영위할 만한 삶을 지탱하는 방법을 묻지 않는다.
  • 기술 이후의 공감, 돌봄 관계의 틈들을 상상에서 배제한다.
  • 기술을 적용한 후 살아가는 신체들을 돌보는 힘에 대해서는 고려하지 않는다.
  • 원하는 방식으로 삶을 마무리하는 방법은 의료 외부의 과제가 된다.

테크놀로지의 적용 자체가 환자를 소외시다는 것이 아니다. 테크놀로지의 적용과 살만한 위하는 것 사이에는 은 연결과 의 과정이 필요하며, 간 다양한 고려가 필요하다. 의사가 병원 밖 환자의 삶에 대한 상상과 이해를 넓혀내지 않는 한, 이러한 과정을 고려하며 의술을 제공하지 않는다. 중요한 의학적 의사결정을 환자의 의 이해를 합적으로 고려하며 할 수도 없다.

41) 이것에 대한 역사적 분석은 DiMoia(2013) 참조.

42) Kim(2017)/ 
강진경, 강진영 역(2022). 김은정은 심청전, 영자의 전성시대 등 근대 한국의 장애 관련 텍스트를 독해하며 이들 서사에서 가족이 젠더 구조 속에서 어떻 게 희생을 통해 장애인의 상처를 치유하는 것으로 나타나는지를 그려낸다. 여성 가 족은 희생을 감당하며 장애 남성을 치유하게 되는데, 이때 회복의 지향은 정상가족 이라 할 수 있다.

43) 김상현과 자사노프는 사회기술적 상상체(sociotechnical imaginaries)를 “과학 기술 의 진전을 통해, 사회적 삶과 질서를 달성할 수 있다는 공유된 믿음으로 움직이는 집 단적으로 가지는, 제도적으로 안정된 바람직한 미래 수행 비젼”으로 정의한다. 김상 현과 자사노프는 이 개념을 한국에만 국한시키지 않으며, 한국의 경우에는 황우석 의 줄기세포 연구가 주로 다루어진다. 연구-기술-병원의 복합체에서 회복을 정점으 로 추구된다는 점에서 한국 상급종합병원 일반으로도 확장 가능할 것이다. Jasanoff & Kim(2015).  

한국 의사들에게 의과학기술 외의 '전체로의 회복'이라는 치유의 이상을 설하거나 공감 커교육리는 것으로 이 문제를 해결할 수 있을? 적어도 한국 사회가 의과학기술을 이용한 질병 치유 이상의 것을 상상하지 못한다면 무의미한 일일 수밖에 없다. 에 질병을 비롯한 다양한 기가 자되면서 질병 치유 이상의 서사를 만들어내는 것은 고무적이다. 히려 환자를 온전한 주체로 만드는 치료의 전인성(全人性)을 논하는 것은 치유보다 논의에서 이루어지는 하다. 에 관한 이야기 역시 새게 한국 사가 경청해야 할 이야기가 되고 있다. 의과대학에서는 이들 서사를 적극 끌어들이지 못하고 있지 못한 이다. 하지만 의료전문가가 질병의 소리를 경청하고 기 위해 필요한 도 있을 것으로 생각된다.

6. 나가며

한국 사에서 의료인문학은 무, 이어야 할? 혹은 그것이 한국 의료에 필요한 실(phorenesis)수 있을 ? 한국의 의료인문학은 한국 의료가 새롭게 갱신되어야 한다는 부름에 따라 과거의 것이 복원되고 유입되었다. 그것은 크게는 전세계적으로 질병 패턴의 변화, 새로운 질병의 등장, 의료 서비스 주체의 다변화, 유전자 시대의 돌입 등에 따라 의생명과학 패러다임이 전환 되기 시작한 것과 흐름을 같이 한다. 의학이 과학기술학, 인문학, 술 등 새로운 학문들과 관계 으면서 간학문적으로 치유와 건강에 기여할 수 있을 것이기대가 존재한다. 물론 전세계적 의생명과학 의 전환과 한국 의료의 위기가 기에, 한국 의료인문학 에는 도의 과제가 있다. 해외의 의료인문학 흐름을 익히고 배우는 것만으로는 충분하지 않다. 한국 의료의 주체와 맥락들을 두껍게 읽어내 야 할 몫이 있다면, 그건 한국 의료인문학의 몫이다.

본 글에서는 전세계적 차원의 의료인문학의 제가 한국의 그것과 을 수 있음을 설명하고자 하였다. 의 이해를 부하게 다는 역할 속에서 한국 의료인문학의 제 역시 다을 필요가 있다. 지정학적 차원의 이해를 사리 증발시키하는 한국 의학의 발전 동력을 생각을 때 한국 차원의 도 과제를 상정하는 것은 운 일이 아니다. 빠르게 리는 기차 안에서는 경을 제대로 관하기 들 수 있다. 위기와 제의 진에 동의하지 을 수도 있으며, 한 가지 차원의 해만 있을 필요도 없다. 다만 격한 의 흐름 속에서도 다양한 소리들에 려 있기를 실적으로 지해야 할 것이 다. 

 

 


【주요어】의료인문학, 로컬의 관점, 글로벌 의학교육, 전문직업성, 치유와 돌봄
【요약문】한국 사회에서 의료인문학은 무엇이었고, 무엇이어야 할까? 본 글은 전 세계적 의료인문학의 역사와 부흥의 맥락 속에서 한국의 의료인문학의 역할과 위상을 점검한다. 한국의 의료인문학은 한국 의료가 새롭게 갱신되어야 한다는 부름에 따라 과거의 것이 복원되고 유입되었다. 그것은 크게는 전세계적으로 질병 패턴의 변화, 새로운 질병의 등장, 의료 서비스 주체의 다변화, 유전자 시대의 돌입 등에 따라 의생명과학 패러다임이 전환되기 시작한 것과 흐름을 같이 한다. 그러나 전세계적 의생명과학의 전환과 한국 의료의 위기가 같지 않으며, 전세계적 차원의 의료인문학 테제가 한국의 그것과 꼭 같지 않을 수 있다. 이를 위해 다양한 의료인문학의 맥락과 갈래 속에서 한국 의료인문학의 역할을 탐구할 필요가 있다. 또한 지정학적 차원의 이해와 로컬의 이해를 풍부하게 다듬는 속에서 한국 의료인문학의 테제 역시 다듬을 필요가 있다. 본 글은 우선 ‘인문학으로서의 의학’, 의료인문학이 의과대학에서 하나의 학제로 형성되어 온 과정을 추적한다. 특히 전인적 인간 형성을 목표로 하는 인문학 공부가 타인에 대한 연민과 공감 등을 요청하는 의과학 반성의 요구와 맞닿으면서 의학교육에 강조되었는지를 살펴 본다. 이후 1990년대 이후 국내에 급부상한 의료인문학 도입 배경으로서 의학교육의 글로벌라이제이션을 살피고, 이를 의학을 둘러싼 인문학적 요청이라는 측면에서 비판적으로 검토한다. 마지막으로 한국 의료인문학의 위상과 역할을 ‘전문직업성’과 ‘돌봄’이라는 영역을 예로 들며 제언하고자 한다.

CanMEDS 2025의 지구보건(Can Med Educ J. 2023)
Planetary Health in CanMEDS 2025

 

소개
Introduction

기후 비상사태가 건강에 미치는 악영향이 점점 더 분명해지고 있습니다. 최근의 문헌 검토에 따르면 지구 보건은 CanMEDS 의사 역량 프레임워크와 관련된 진화하는 개념으로 확인되었습니다.1 의사 역량의 맥락에서 지구 보건은 기후 비상사태에 대한 의료의 영향과 기후 비상사태가 환자 치료에 미치는 영향을 최소화하는 데 관심을 두고 있습니다. 이 원고는 CanMEDS에 지구 보건 관련 내용을 포함하는 것이 얼마나 중요한지 밝히고, 지구 보건 개념을 예시하기 위해 향후 CanMEDS를 반복할 수 있는 기회를 제안하는 것을 목표로 합니다.  
The worsening impact of the climate emergency on health is increasingly apparent. A recent literature review identified Planetary Health as an evolving concept that is relevant to the CanMEDS physician competency framework.1 In the context of physician competencies, planetary health is concerned with minimizing the impact of healthcare on the climate emergency and the impact of the climate emergency on patient care. This manuscript aims to establish the critical importance of including planetary health links in CanMEDS and to propose opportunities for future iterations of CanMEDS to exemplify planetary health concepts.

행성 건강이란 무엇이며 의사의 역량에 중요한 이유는 무엇인가요?
What is planetary health and why is it important to physician competency?

지구 보건 연합은 지구 보건을 "지구의 자연 시스템에 대한 인간의 교란이 인간 건강과 지구상의 모든 생명체에 미치는 영향을 분석하고 해결하는 데 초점을 맞춘 솔루션 중심의 초학제적 분야이자 사회 운동"이라고 정의합니다.2 지구 보건은 기후 비상사태와 토지 파괴, 생물 다양성 손실, 오염 등 기타 생태 위기를 모두 다룹니다.3 기후 비상사태는 금세기 인류 생명에 가장 큰 건강 위협으로 여겨지며 2030년부터 매년 25만 명이 추가로 사망할 것으로 예측됩니다.4
The Planetary Health Alliance defines planetary health as “a solutions-oriented, transdisciplinary field and social movement focused on analyzing and addressing the impacts of human disruptions to Earth’s natural systems on human health and all life on Earth.”2 Planetary health addresses both the climate emergency and other ecological crises, including land destruction, biodiversity loss, and pollution.3 The climate emergency is considered the greatest health threat to human life this century, with predictions of 250,000 additional deaths per year from 2030 onward.4

캐나다 사람들의 건강은 이미 기후 비상사태의 영향을 받고 있습니다.5

  • 2021년에는 섭씨 1.2도의 온난화로 브리티시컬럼비아주(B.C.주)의 열돔 현상으로 700명 이상이 사망했고,6
  • 매니토바와 서스캐처원주의 가뭄으로 농작물이 실패하여 식량 가격이 상승했으며,7
  • 홍수로 B.C.와 뉴펀들랜드의 지역사회 전체가 사라졌고,8
  • 산불이 캐나다 서부9와 온타리오 북부 대부분을 휩쓸고 지나갔습니다.10
  • 극심한 날씨로 인해 주요 인프라가 손상되고 공급망이 중단되면서 의료 서비스 제공에도 차질이 빚어지고 있습니다.11
  • 기후 비상사태는 캐나다 전역의 원주민 건강에 불균형적인 영향을 미치고 있으며,12
  • 환경 파괴는 전통적인 생활 방식을 위협하고 지속적인 식민지화 및 토지 박탈 과정을 악화시키고 있습니다.13

The health of people in Canada is already affected by the climate emergency5:

  • in 2021, at just 1.2 degrees Celsius of warming, over 700 people died in British Columbia's (B.C.) heat dome event,6 
  • crops failed in Manitoba and Saskatchewan droughts contributing to rising food prices,7 
  • flooding took out entire communities in B.C. and Newfoundland,8 and
  • wildfires engulfed large parts of western Canada9 and northern Ontario.10 
  • Healthcare service delivery is also being increasingly disrupted as extreme weather damages critical infrastructure and interrupts supply chains.11 
  • The climate emergency has a disproportionate impact on the health of Indigenous populations across Canada,12 
  • as environmental destruction threatens traditional lifestyles and exacerbates ongoing processes of colonization and land dispossession.13

보건 부문은 이 문제에 크게 기여하고 있습니다. 캐나다 보건 부문은 지구상에서 두 번째로 탄소 집약적인 의료 시스템으로,4 캐나다 온실가스 배출량의 4.6%를 차지하며 이는 캐나다의 항공 산업과 동등한 수준입니다.14 영국 국민보건서비스의 모델링에 따르면 배출량의 거의 70%가 의약품, 장비 및 공급망의 기타 측면에서, 10%가 여행에서, 10%가 건물 에너지에서, 5%가 물과 폐기물에서, 5% 전체가 마취 가스 및 용량 측정 흡입기(15)에서 발생한다고 합니다. 연방 정부는 다른 국가들과 함께 기후에 탄력적인 저탄소 의료 시스템을 제공하겠다고 약속했으며, 이러한 전환이 이루어지려면 의사들의 상당한 지지가 필요합니다.16 지속 가능한 의료 모델이 개발되었으며, 이를 실행해야 할 것입니다. 지속 가능한 의료 시스템을 위한 이러한 프레임워크 중 하나는 세 가지 범주의 개입을 제안합니다.17

  • 건강의 사회적 결정요인을 해결하고 건강 증진 및 질병 예방에 참여함으로써 의료 서비스 수요를 줄인다.
  • 의료 서비스 공급을 수요에 맞춰 적절한 치료를 보장하고 불필요한 검사 및 치료를 피한다.
  • 의료 서비스 공급으로 인한 탄소 배출을 줄인다.

The health sector is a significant contributor to the problem. The Canadian health sector is the second most carbon-intensive health care system on the planet,4 contributing 4.6% of Canada’s greenhouse gas emissions—on par with the country’s aviation industry.14 Modelling from the National Health Service in the United Kingdom suggests that nearly 70% of emissions come from medicines, equipment, and other aspects of the supply chain; 10% comes from travel; 10% comes from building energy; 5% from water and waste; and a full 5% from anesthetic gases and Metered Dose Inhalers (15). The federal government, together with other countries, has pledged to deliver a climate-resilient, low-carbon health care system, and significant advocacy from physicians will be required to ensure this transformation occurs.16 Models of sustainable healthcare have been developed and will need to be implemented. One such framework for sustainable health systems proposes three categories of intervention:

  • reduce demand for health services by addressing the Social Determinants of Health and engaging in health promotion and disease prevention;
  • match the supply of health services to demand, ensuring appropriate care and avoiding unnecessary tests and treatment; and
  • reduce emissions from the supply of health services.17

존경받는 목소리로서 의사는 지구의 건강과 기후 비상사태에서 고유한 역할을 수행해야 합니다.18 의사는 지구 건강을 위한 옹호자가 될 준비가 되어 있어야 합니다. 의사는 미시적(환자), 중시적(진료소, 병원, 지역사회), 거시적(정책) 수준에서 행동할 수 있습니다.19 의사는 기후 행동 및 완화를 옹호하고 의료에 기후 회복력을 구축할 수 있습니다.11,17 의과대학부터 평생 의학 교육을 통해 지구 건강 및 옹호에 대한 교육을 개선하여 의사가 기후 비상사태에서 진료할 수 있도록 준비시켜야 할 것입니다. 
As respected voices, physicians have a unique role to play in planetary health and the climate emergency.18 They must be prepared to be advocates for planetary health. Physicians can act at the micro (patient) level, meso (clinic, hospital, community) level, and macro (policy) level.19 Physicians can advocate for climate action and mitigation and build climate resilience into healthcare.11,17 Improved training in planetary health and advocacy from medical school through Continuing Medical Education will be necessary to prepare physicians to practice in a climate emergency.

2015 CanMEDS 역량 프레임워크에서 지구 건강은 어떻게 표현되어 있나요?
How is planetary health represented in the 2015 CanMEDS competency framework?

2015 CanMEDS 의사 역량 프레임워크에는 지구 건강에 대한 명시적인 언급이 없습니다. 하지만 건강 옹호자 역할에는 건강의 사회적 결정 요인, 질병 예방, 건강 증진, 건강 감시, 지역사회 건강 개선과 관련하여 지구 건강과 관련될 수 있는 몇 가지 역량이 포함되어 있습니다(표 1B). 기후 과학자들은 수십 년 동안 기후 비상사태에 대한 경종을 울려왔지만, 대부분의 보건 전문가들은 최근에야 기후 비상사태를 악화시키는 데 있어 보건 시스템의 역할과 적응 조치를 채택하여 기후 비상사태로 인한 이환율과 사망률을 줄여야 할 필요성을 인식하기 시작했습니다. 
There are no explicit references to planetary health in the 2015 CanMEDS physician competency framework. The Health Advocate role does contain some enabling competencies that could be related to planetary health as it relates to the social determinants of health, disease prevention, health promotion, health surveillance, and improving community health (Table 1B). While climate scientists have been sounding the alarm on the climate emergency for decades, most health professionals have only recently begun to acknowledge the health system’s role in causing the worsening planetary emergency as well as the need to reduce the climate emergency’s associated morbidity and mortality by adopting adaptive measures.

2025년 캔메즈 역량 프레임워크 내에서 지구 건강을 어떻게 더 잘 표현할 수 있을까요?
How can planetary health be better represented within the 2025 CanMEDS competency framework?

표 1C에서는 지구 건강에 대한 우리의 진화하는 이해를 CanMEDS 의사 역량 프레임워크에 통합하는 데 도움이 될 것으로 생각되는 역량을 포함하거나 수정할 것을 제안합니다. 이러한 제안에는 네 가지 주제가 포함됩니다: 
In Table 1C, we propose the inclusion or modification of competencies that we believe would help to integrate our evolving understanding of planetary health within the CanMEDS physician competency framework. These suggestions incorporate four themes:

  • 의료 시스템의 지속가능성 개선. 이 주제는 의료 서비스 제공이 환경에 미치는 막대한 영향과 이를 해결함으로써 의사가 "해를 끼치지 않는다"는 직업적 의무를 다해야 할 필요성을 인식하고 있습니다.17
    Improving the sustainability of our health system. This theme recognizes the enormous environmental impact of healthcare delivery and the need for physicians to meet our professional obligation to “do no harm” by addressing this.17
  • 기후 비상사태로 인한 혼란에 대한 의료 시스템의 회복력 향상. 캐나다의 의료 시스템은 홍수, 산불, 폭염, 폭풍과 같은 극심한 기상 이변으로 인한 혼란에 취약하며, 이는 기후 회복력 있는 의료 시스템의 구현을 가속화하여 중환자 치료 제공을 유지함으로써 줄일 수 있습니다.4 의사는 의료 분야의 환경적 취약성을 인식하고 기후 회복력을 내재화하기 위한 품질 개선 과정에 기여해야 합니다.20
    Improving the resilience of our health system to disruption from the climate emergency. Canadian healthcare systems are vulnerable to disruption by extreme weather events such as floods, wildfires, heatwaves, and storms that could be reduced by accelerating the implementation of climate-resilient healthcare systems to maintain critical care delivery.4 Physicians must recognize environmental vulnerabilities in healthcare and contribute to quality improvement processes to embed climate-resilience.20
  • 환경이 환자 건강에 미치는 영향에 대처하기. 의사가 환자의 사회적 맥락을 고려하는 것처럼, 우리도 환자의 환경적 맥락을 고려해야 합니다. 토착민과 인종차별 인구, 빈곤층, 정치적으로 소외된 사람들은 환경 파괴로 인해 불균형적인 영향을 받습니다. 의사는 환자와 그 가족에게 미치는 환경의 광범위하고 다양한 영향을 이해해야 합니다.
    Addressing the impact of the environment on patient health. Just as physicians consider a patient’s social context, we must also consider their environmental context. Indigenous and racialized populations, those living in poverty, and others who are politically marginalized are disproportionately affected by environmental degradation. Physicians must understand the breadth and variety of environmental impacts on patients and their families.
  • 사회적 책임에서 지구 건강 관점의 중요성사회적 책임이란 "의학이 사회와 맺는 사회적 계약"으로 정의됩니다.21 사회적 책임 의료는 환자, 지역사회, 인구의 건강 요구에 대응합니다.19 사회적 책임을 위하여 의사는 질병, 고통, 사망에 기여하는 사회적, 환경적 조건에 대해 목소리를 내야 합니다.
    The importance of a planetary health lens in social accountability. Social accountability is defined as “the social contract that medicine has with society.”21 Socially accountable healthcare is responsive to patient, community, and population health needs.19 Socially accountable physicians must speak out about the social—and environmental—conditions that contribute to disease, suffering, and death.

 


Can Med Educ J. 2023 Mar 21;14(1):46-49. doi: 10.36834/cmej.75438. eCollection 2023 Mar.

Planetary Health in CanMEDS 2025

Affiliations

1University of Toronto, Ontario, Canada.

2University of Saskatchewan, Saskatchewan, Canada.

3McGill University, Quebec, Canada.

4University of Calgary, Alberta, Canada.

5University of Ottawa, Ontario, Canada.

PMID: 36998490

PMCID: PMC10042797

DOI: 10.36834/cmej.75438

CanMEDS 2025의 적응적 전문성(Can Med Educ J. 2023)
Adaptive Expertise in CanMEDS 2025

소개
Introduction

적응형 전문성은 급변하는 세계에서 효과적이고 혁신적으로 진료하고 학습하는 데 필요한 지식과 기술의 진화, 개선 및 개발과 관련된 역량을 통합합니다. 이 개념은 최근의 문헌 검토에서 CanMEDS 의사 역량 프레임워크에서 잘 드러나지 않는 필수 개념으로 확인되었습니다.1 이 원고는 이 개념과 이전 및 향후 CanMEDS의 반복에 대한 연관성을 요약하는 것을 목표로 합니다. 
Adaptive expertise incorporates competencies related to the evolution, refinement, and development of the knowledge and skills required to practice and learn effectively and innovatively in a rapidly changing world. It was identified as an essential concept that was underrepresented in the CanMEDS physician competency framework in a recent literature review.1 This manuscript aims to summarize the concept and its links to former and future iterations of CanMEDS.

적응형 전문성이란 무엇이며 의사 역량에 중요한 이유는 무엇인가요?
What is adaptive expertise and why is it important to physician competency?

적응적 전문성잘 알려진 문제에 직면했을 때 이전 지식을 효율적이고 효과적으로 적용하는 것이전 지식이 불충분할 때 새로운 지식을 창출하여 해결책을 마련하는 것 사이의 균형을 강조하는 전문가 개발 및 성과 모델입니다. 이와는 대조적으로 일상적 전문성은 적응적 전문성의 효율성 차원만을 반영하는 것으로 이해됩니다. 적응적 전문성의 '효율성'과 '혁신' 사이의 균형 일상적인 문제 해결을 학습과 개선의 기회로 인식하는 접근법으로 보완됩니다.2,3 따라서 이전 지식의 적용이 불충분한 문제에 직면했을 때

  • 적응적 전문성지식을 유연하게 사용하고 새로운 솔루션을 생성하는 능력을 가능하게 하는 반면,
  • 일상적 전문성'알려진 솔루션에 미지의 문제를 맞추려는 시도'를 하다가 실패로 이끌게 됩니다."4

Adaptive expertise is a model of expert development and performance that emphasizes a balance between the efficient and effective application of previous knowledge when facing well-known problems and the creation of new knowledge to generate solutions when previous knowledge is insufficient. In contrast, routine expertise is understood to reflect only the efficiency dimension of adaptive expertise. This balance between ‘efficiency’ and ‘innovation’ in adaptive expertise is complemented by an approach to practice that recognizes daily problem solving as an opportunity to learn and improve.2,3 Thus, when facing problems for which the application of previous knowledge is insufficient,

  • adaptive expertise enables the flexible use of knowledge and the ability to generate new solutions while
  • routine expertise will result in failed attempts to ‘fit unknown problems to known solutions.’4

적응적 전문성은 무엇을 해야 하는지(절차적 유창성)와 왜 해야 하는지(개념적 이해)를 모두 아는 것이 특징입니다.5 이러한 개념적 이해는 새롭고 불확실한 임상 상황의 가변성에 적응할 수 있게 합니다. 즉, 알려진 해결책이 충분하지 않은 경우 적응적 전문가는 근본적인 '이유'를 다루는 새로운 해결책을 생성할 수 있습니다. 적응형 전문성을 키우려면 교육이 효과적인 지식 보유와 적용에만 중점을 두는 것에서 벗어나 학생들이 새로운 지식을 지속적으로 학습하고 생성할 수 있도록 준비시키는 방향으로 전환되어야 합니다. 이러한 역량을 '미래 학습을 위한 준비(PFL)'로 정의할 수 있습니다.6 
Adaptive expertise is characterized by both knowing what to do (procedural fluency) as well as knowing why you’re doing it (conceptual understanding).5 It is this conceptual understanding that permits adaptation to variability in novel and uncertain clinical situations i.e. if known solutions are insufficient, adaptive experts can generate new solutions that still address the underlying ‘why’. To foster the development of adaptive expertise, education must shift beyond a sole emphasis on effective knowledge retention and application towards preparing students to continue to learn and generate new knowledge. This capacity has been defined as ‘preparation for future learning (PFL).6

보건 전문직 교육에서 PFL을 지원하는 교육적 접근법에는 다음이 포함됩니다.7,8

  • a) 임상 징후 및 증상을 근본적인 메커니즘과 명시적으로 통합(예: "왜"라고 묻거나 말하기),
  • b) 학생들에게 의미 있는 변형에 노출(예: "만약에 이렇다면.." 질문하기),
  • c) 학습에서 투쟁과 발견을 활용한 다음, 즉각적인 피드백과 통합이 뒤따르는 것

불가피하게 보건 전문가는 정식 교육을 받지 않은 질환을 가진 환자를 마주하게 될 것입니다. 따라서 새로운 문제에 직면하여 새로운 지식을 창출하고 학습하는 능력은 의사가 환자의 고유한 요구에 대응하고 끊임없이 변화하는 역동적인 의료 종사자 간 네트워크 내에서 치료를 제공할 수 있도록 보장합니다.9
In health professions education, pedagogical approaches that support PFL include

  • a) explicit integration of clinical signs and symptoms with underlying mechanisms (e.g asking or telling “why”),
  • b) exposing students to meaningful variation (e.g asking “what if” questions) and
  • c) leveraging struggle and discovery in learning followed by immediate feedback and consolidation.7,8 

Inevitably, health professionals will face patients presenting with conditions for which they have not received formal training. Thus, the ability to create new knowledge and learn in the face of novel problems ensures that physicians are responsive to the unique needs of their patients, as well as able to provide care within ever-changing, dynamic, interprofessional networks of healthcare workers.9

적응형 전문성은 2015 CanMEDS 역량 프레임워크에서 어떻게 표현되나요?
How is adaptive expertise represented in the 2015 CanMEDS competency framework?

의료 전문가 역할은 환자 중심의 임상 평가 및 관리, 임상 의사결정의 복잡성, 모호성, 불확실성, 의사결정 시 진화하는 지식의 활용 등 적응적 전문성의 여러 측면을 반영합니다. 그러나 2015년 프레임워크에는 이러한 역할과 관련하여 적응적 전문성에 대한 구체적인 언급이 부족하여(표 1A 및 및1B),1B) 교육자가 효과적이고 혁신적으로 실습하고 학습하는 데 필요한 지식과 기술을 의도적으로 배양할 수 있는 환경이 조성되지 않을 수 있습니다. 적응형 전문지식을 CanMEDS의 핵심 의료 전문가 역량으로 명시적으로 통합하면 의료 전문지식과의 관계를 강조하고, 일상적인 진료에서 7가지 CanMEDS 역할을 모두 통합하는 데 핵심적인 기능을 강조하며, 전문 역량 및 지속적인 전문성 개발의 지표로서 진료에서 새로운 지식을 혁신하고 창출하는 역량을 장려할 수 있습니다.
The Medical Expert role reflects many aspects of adaptive expertise: patient-centered clinical assessment and management; complexity, ambiguity, and uncertainty in clinical decision-making; and drawing on an evolving body of knowledge when making decisions. However, the 2015 framework lacks specific reference to adaptive expertise in relation to this role (Table 1A and and1B),1B), which may create an environment where educators are not primed to deliberately cultivate the necessary knowledge and skills required to practice and learn effectively and innovatively. Explicitly incorporating adaptive expertise as a key Medical Expert competency in CanMEDS would highlight its relationship with medical expertise, underscore its central function to the integration of all seven CanMEDS roles in daily practice, and promote the capacity to innovate and create new knowledge in practice as a marker of professional competence and continuing professional development.

2025년 CanMEDS 역량 프레임워크 내에서 적응형 전문성을 어떻게 더 잘 표현할 수 있을까요?
How can adaptive expertise be better represented within the 2025 CanMEDS competency framework?

임상 의사 결정에서 적응형 전문 지식의 중요성을 인식하여 의료 전문가 역할에 새로운 핵심 역량을 통합할 것을 제안합니다(표 1C). 이 역량에는 효율성과 혁신 사이의 균형을 맞추고, 다양한 관점을 수용하며, 임상 진료 전반에 걸쳐 학습할 수 있는 역량이 포함됩니다. 적응형 전문성을 의료 전문가 역할의 핵심 역량으로 설정함으로써, 우리는 CanMEDS 프레임워크에서 의료 전문성의 중심적인 역할과 내재적인 역할을 자신의 업무 범위에 통합하는 방법을 인식하고 있습니다. 또한 커뮤니케이터, 협력자, 리더, 학자 역할에 속하는 역량들이 이러한 영역에서 적응형 전문성의 중요한 요소를 더 잘 통합할 수 있도록 약간의 제안을 했습니다(표 1C). 발달적 관점에서 볼 때, 분야별 교육에 적응적 전문성을 조기에 도입하는 것은 PFL을 포함하는 교육이 지속적인 전문성 개발에서 임상적 의사 결정의 지속적인 역량과 성장을 보장하는 데 도움이 될 수 있음을 인식하는 것입니다. 초심자에서 숙련자로 넘어가는 CanMEDS 마일스톤의 구성은 적응형 전문성과 더욱 연계되어 전문적 역량의 지표로서 실무에서 새로운 지식을 혁신하고 창조하는 역량을 촉진할 수 있습니다. 
Recognizing the importance of adaptive expertise in clinical decision-making, we propose incorporating a new key competency into the Medical Expert role (Table 1C). Its enabling competencies incorporate the capacity to balance between efficiency and innovation, to embrace multiple perspectives, and to learn throughout clinical practice. By situating adaptive expertise as a key competency within the Medical Expert role, we recognize the central role of medical expertise in the CanMEDS framework and how it incorporates the intrinsic roles into one’s scope of practice. Additionally, we have made minor suggestions to enabling competencies under the Communicator, Collaborator, Leader, and Scholar roles to better integrate important elements of adaptive expertise in these areas (Table 1C). From a developmental perspective, the introduction of adaptive expertise early within discipline-specific training recognizes that education that includes PFL can help ensure that sustained competence and growth in clinical decision-making is accounted for in continuing professional development. The progression from novice to mastery in the organization of CanMEDS milestones can further align with adaptive expertise to promote the capacity to innovate and create new knowledge in practice as a marker of professional competence.

 


Can Med Educ J. 2023 Mar 21;14(1):18-21. doi: 10.36834/cmej.75445. eCollection 2023 Mar.

Adaptive Expertise in CanMEDS 2025

Affiliations

1The Wilson Centre, Temerty Faculty of Medicine, University of Toronto, Ontario, Canada.

2University of Toronto, Ontario, Canada.

3College of Family Physicians of Canada, Ontario, Canada.

4McMaster University, Ontario, Canada.

5University of Alberta, Alberta, Canada.

6Glenrose Rehabilitation Hospital, Alberta, Canada.

7University of Ottawa, Ontario, Canada.

8Association of Faculties of Medicine of Canada, Ontario, Canada.

9Royal College of Physicians and Surgeons of Canada, Ontario, Canada.

10McGill University, Quebec, Canada.

11University of Saskatchewan, Saskatchewan, Canada.

PMID: 36998497

PMCID: PMC10042796

DOI: 10.36834/cmej.75445

CanMEDS 2025의 임상추론(Can Med Educ J. 2023)
Clinical Reasoning in CanMEDS 2025

소개
Introduction

임상 추론은 의학교육 연구의 초기 초석 중 하나였으며, 이러한 초기 연구 초점은 의학 교육에서 임상 추론의 중심적인 역할을 반영합니다.1 따라서 임상 추론이 CanMEDS 의사 역량 프레임워크에서 잘 알려지지 않은 개념으로 확인된 것은 놀라운 일이 아닐 수 없습니다.2,3 그러나 프레임워크를 자세히 살펴보면 임상 추론은 그 중심적인 중요성에도 불구하고 CanMEDS에서 명시적으로 언급되거나 통합된 적이 거의 없다는 것을 알 수 있습니다. 임상 추론의 일부 측면이 의료 전문가 역할에 역량으로 포함되어 있기는 하지만, 임상 추론에 대한 우리의 이해는 CanMEDS 2015에서 명시적으로 언급된 몇 가지를 넘어 확장되었습니다. 이 입문서에서는 임상 추론이 CanMEDS 2025의 핵심 개념인 이유, 임상 추론에 대한 우리의 이해가 어떻게 발전해 왔는지, CanMEDS 2015에서 임상 추론이 어떻게 표현되는지, 그리고 임상 추론과 관련된 역량을 보다 신중하고 포괄적으로 통합하기 위해 CanMEDS 2025를 개정할 수 있는 방법을 제안합니다. 
Clinical reasoning was one of the early cornerstones of medical education research, and this early research focus reflects its central role in medical training.1 Therefore, it may be surprising that clinical reasoning was identified as an underrepresented concept in the CanMEDS physician competency framework.2,3 However, a close examination of the framework demonstrates that clinical reasoning, despite its central importance, is rarely explicitly mentioned or integrated in CanMEDS. While some aspects of clinical reasoning are woven within the Medical Expert role as enabling competencies, our understanding of clinical reasoning has expanded beyond these few explicit mentions in CanMEDS 2015. This primer will orient readers to why clinical reasoning is a key concept for CanMEDS 2025, how our understanding of clinical reasoning has evolved, highlight how clinical reasoning is represented in CanMEDS 2015, and suggest ways that CanMEDS 2025 could be revised to more deliberately and comprehensively incorporate competencies related to clinical reasoning.

임상 추론이란 무엇이며 의사의 역량에 중요한 이유는 무엇인가요?
What is Clinical Reasoning and why is it important to physician competency?

임상적 추론은 환자 치료의 모든 측면에서 핵심적인 요소이기 때문에 의료 분야에서 전문적 진료의 핵심으로 묘사되어 왔습니다.1. 또한 추론 오류는 환자와 의료진에게 높은 비용을 초래하기 때문에 환자 안전을 위협하는 요인으로 지목되었습니다.4 이러한 핵심성과 중요성에도 불구하고,5 임상 추론을 정의하는 방법, 효과적인 추론을 개념화하는 방법, 교육, 평가 및 연구 목적으로 이를 운영하는 방법은 크게 나뉘지는 않았지만 여전히 다양합니다.5,6
Clinical reasoning has been described as the core of professional practice in healthcare,1 as it is a key component of all aspects of patient care. Additionally, errors in reasoning have been named as a threat to patient safety given the high cost of errors to patients and practitioners.4 Despite its centrality and importance,5 how we define clinical reasoning, how we conceptualize effective reasoning, and how we operationalize it for the purposes of teaching, assessment, and research remain varied if not deeply divided.5,6

효과적인 임상 추론의 개념은 의학교육 내 여러 커뮤니티에서 다양한 개념화 또는 추론의 요소를 교육 목표, 평가 대상 또는 집중 연구 영역으로 사용함에 따라 다양하게 설명되어 왔습니다. 임상 추론에 대한 이러한 각 사고 방식은 인간의 인지 구조에서 실천의 인식론에 이르기까지 서로 다른 학문, 영역 또는 이론적 기반에서 비롯되며, 이는 임상 추론 과정의 각기 다른 요소에 초점을 맞춘다는 것을 의미합니다. 임상 추론에 접근하는 이러한 다양한 방식은 중요한 면에서 차이가 있습니다.

  • 일부는 추론의 결과에 초점을 맞춥니다.
    • 의료 오류(추론의 불행한 결과7)에서 진단 정확도(바람직한 결과8)까지
  • 일부는 개별 활동으로서의 임상 추론에 초점을 맞춘다.
    • 의사 또는 학습자의 인지 과정
  • 다른 일부는 사회적으로 내재된 활동으로서의 임상 추론을 탐구합니다:
    • 팀의 진료 제공(추론을 상호작용 활동으로 배치9),
    • 상황별 의사 결정(상황 또는 구체화된 활동으로서의 추론10) 또는
    • 공유 의사 결정(파트너로서의 환자11) 등에 주목
  • 어떤 사람들은 의사의 임상 추론에서 발생가능한 한계에 관심을 집중하고 있습니다:
    • 인지적 부하 고려사항(임상 추론 및 작업 수행은 작업 기억 제약에 의해 제한됨12)
    • 편향의 위험성(예: 불평등 및 의료 서비스 격차13)
  • 마지막으로, 일부는 에러에 대한 인적 요인시스템 기여4 및 복잡한 맥락에 개인이 어떻게 적응하는지에 초점을 맞춥니다.16
    • 적응적 전문성,14 집단적 역량,15 복잡성 이론 등

The notions of effective clinical reasoning have been variously described by different communities within medical education—as different conceptualizations or elements of reasoning have been used as objectives for instruction, targets for assessment, or areas of focused research. Each of these ways of thinking about clinical reasoning draw from different disciplines, domains, or theoretical homes—from human cognitive architecture to epistemologies of practice; which means each of these ways of thinking about clinical reasoning focus on different elements of the clinical reasoning process. These numerous ways of approaching clinical reasoning vary in important ways.

  • Some focus on the outcomes of reasoning;
    • from medical error (an unfortunate outcome of reasoning7) to diagnostic accuracy (an aspired outcome8).
  • Some focus on clinical reasoning as an individual activity,
    • focused on the cognitive processes of the practitioner or learner;
  • while others explore clinical reasoning as a socially embedded activity, with attention paid to
    • team provision of care (placing reasoning as an interactional activity9),
    • decisions-in-context (reasoning as a situated or embodied activity10), or
    • shared decision-making (patient-as-partner11).
  • Still other members of the community have focused their attention on the limits of what is possible in a practitioners’ clinical reasoning—from
    • cognitive load considerations (clinical reasoning and task performance are limited by working memory constraints12), to the
    • dangers of bias (e.g. inequities and health care disparities13).
  • Finally, some focus on human factors and system contributions to error4 and how individuals adapt to complex contexts such as
    • adaptive expertise,14 
    • collective competence,15 and
    • complexity theory.16 

이러한 각 관점은 추론 과정의 서로 다른 구성 요소를 강조하고, 추론의 서로 다른 "결과"를 중요시하며, "효과적인" 추론을 만드는 요소에 대해 서로 다른 개념화를 가지고 있습니다. 이러한 가치 있는 구성 요소, 결과, 효과적인 추론에 대한 개념의 차이는 모두 매우 다른 집중 교육 영역, 다른 평가 목표, 다른 연구 접근 방식에 영향을 미칩니다.17
Each of these perspectives highlight different components of the reasoning process, value different “outcomes” of reasoning, and have different conceptualizations of what makes “effective” reasoning. These differences in valued components, outcomes, and notions of effective reasoning all feed into very different areas for focused teaching, different assessment targets, and different approaches to research.17

임상 추론과 같이 크고 복잡한 개념을 의학교육에서 가르치고, 평가하고, 연구할 수 있는 것으로 만들려면 각 상황이나 전문 분야에서 무엇이 효과적인 임상 추론을 구성하는지에 대한 결정이 내려져야 합니다. 효과적인 추론으로 판단되는 요소에 따라 임상 추론 과정의 다른 구성 요소, 다른 맥락적 변수 또는 임상 추론의 다른 결과가 우선시됩니다.18 예를 들어, 효과적인 추론은 다음으로 특징지을 수 있습니다.12

  • 속도,19
  • 정확성,20
  • 비용 영향,21
  • 환자 욕구와 임상적 권고(즉, 공유 의사 결정)의 균형,10
  • 과도한 검사와 (불)확실성에 대한 욕구의 균형,22
  • 맥락적 변수에 대한 인식 및 적응,23
  • 관리 계획의 효과적인 적응adaptation,24
  • 작업 기억 한계 내에서 인지 부하를 효과적으로 관리할 수 있는 것

이러한 효과적인 추론의 특성은 평가, 학습 및 교육의 대상이 되며, 이는 해당 집단의 전문성 수준, 전문 분야 맥락, 치료 맥락(예: 긴급 치료 대 지역사회 치료)에 따라 달라집니다. 
To render a large and complex concept such as clinical reasoning into something that can be taught, assessed, or researched in medical education, decisions about what constitutes effective clinical reasoning in each context or specialty must be made. Depending on what is determined to be effective reasoning, different components of the clinical reasoning process, different contextual variables, or different outcomes of clinical reasoning come to the forefront.18 For example, effective reasoning can be characterized by

  • speed,19 
  • accuracy,20 
  • cost implications,21 
  • balancing of patient desires with clinical recommendation (i.e. shared decision making),10 
  • balancing over-testing with a desire for certainty,22 
  • recognition of and adaptation to contextual variables,23 
  • effective adaptation of a management plan,24 and
  • effectively managing cognitive load within working memory limitations.12 

These characteristics of effective reasoning become the targets of assessment, learning, and teaching that vary depending on the expertise level of the population in question, specialty context, and care context (i.e., urgent care vs. community care).

임상 추론은 2015 CanMEDS 역량 프레임워크에서 어떻게 표현되어 있나요?
How is Clinical Reasoning represented in the 2015 CanMEDS competency framework?

CanMEDS 2015 프레임워크에서 임상 추론의 측면은 주로 의료 수출 역할(표 1A)의 역량으로 나타나며, 일부 요소는 다른 역할(표 1B)에 걸쳐 통합되어 있습니다. 임상 추론의 이론적 및 개념적 이해와 관련된 연구는 CanMEDS 2015 이후 성장해 왔습니다.3 최근의 연구는 개인 인지를 넘어 팀 기반 추론,9 진단적 의사결정에서 관리 추론에 대한 고려,23 그리고 개별 인지 과정에서 복잡한 맥락에 놓인 행동으로서의 임상 추론을 탐구하는 것으로 확장되었습니다.10 훌륭하고 건전한 임상 추론을 구성하는 요소에 대한 우리의 개념은 임상 추론에 대한 이론적 이해의 증가와 진료의 복잡성에 대한 인식의 확대에 따라 확장되어 왔습니다. 임상적 추론은 의료인이 된다는 것의 핵심으로 남아 있지만,1 임상적 추론이 어떤 모습이고 어떻게 교육, 학습 및 평가의 목표로 운영되는지는 확장되었습니다. 임상 추론의 개념은 CanMEDS 2015의 일부 필수 역량에 반영되어 있지만(전문 분야의 맥락에 따라 이러한 역량이 어떻게 구현되는지가 달라질 수 있음을 인식하고 있습니다), CanMEDS 2025에서는 임상 추론이 보다 명시적이고 포괄적으로 표현되어야 한다고 생각합니다.
In the CanMEDS 2015 framework, aspects of Clinical Reasoning are found primarily as enabling competencies within the Medical Export role (Table 1A) with some elements interwoven throughout other roles (Table 1B). Research related to the theoretical and conceptual understanding of clinical reasoning has grown since CanMEDS 2015.3 More recent work extends beyond individual cognition to include team-based reasoning;9 from diagnostic decision-making to consideration for management reasoning,23 and from individual cognitive processes to exploring clinical reasoning as a situated behaviour in complex contexts.10 Our notions of what constitutes good and sound clinical reasoning have broadened in lockstep with our growing theoretical understanding of clinical reasoning, and our growing acknowledgement of the complexity of care. While clinical reasoning remains at the core of what it means to be a healthcare provider,1 what that clinical reasoning looks like and how it is operationalized into targets of teaching, learning, and assessment have expanded. While the concept of clinical reasoning is reflected in some enabling competencies within CanMEDS 2015—recognizing that specialty context will shape how these competencies are enacted - we believe that clinical reasoning should be more explicitly and comprehensively represented within CanMEDS 2025.

 

임상 추론이 2025 CanMEDS 역량 프레임워크 내에서 어떻게 더 잘 표현될 수 있을까요?
How can Clinical Reasoning be better represented within the 2025 CanMEDS competency framework?

임상 추론에 대한 현재의 이해에 더 잘 부합하기 위해 2025 CanMEDS 역량 프레임워크는 양질의 임상 진료를 제공하는 데 기여하는 임상 추론의 여러 측면을 보다 의도적으로 통합할 수 있으며, 통합해야 합니다. 보다 세분화된 의미에서 임상 추론에는 필요한 기본 지식의 통합과 다양한 맥락에서 시기적절하고 효과적인 방식으로 치료를 제공하면서 해당 지식을 동원하는 능력이 포함됩니다. 효과적인 임상 추론의 일부 핵심 요소는 현재 의료 전문가 역할의 중요한 역량이지만, 임상 추론의 측면은 다른 CanMEDS 역할(예, 의사소통자, 협력자, 학자, 전문가; 표 1 참조).필수 지식의 범위, 진료 표준, "좋은" 추론의 기준, 임상 추론에 영향을 미치는 복잡한 맥락적 요인은 CanMEDS 2025에 더 잘 통합될 수 있고 통합되어야 합니다.3 CanMEDS 프레임워크 내에서 임상 추론을 더 잘 반영하기 위해, 우리는 기존의 몇 가지 지원enabling 역량을 조정할 것을 제안하며, CanMEDS 2025에서 중요한 고려 사항이라고 생각하는 역량을 명확히 설명합니다. 제안된 지원enabling 역량(표 1, 섹션 C)은 모호한 개념의 근거를 마련하고 임상 추론이 여러 역할의 맥락에서 관찰, 교육, 평가 및 연구될 수 있다는 개념을 반영합니다. 즉, 의료 서비스를 제공하려면 효과적인 임상 추론이 필요하고, 효과적인 임상 추론에 필요한 여러 가지 역량이 필요하며, 이러한 역량은 여러 CanMEDS 역할에 걸쳐 통합되어 있습니다. 임상적 추론은 효과적인 치료 제공을 위해 여러 CanMED 역할에 걸쳐 필요한 역량을 통합해야 하는 방법을 보여주는 훌륭한 예입니다. 
To better align with current understandings of clinical reasoning, the 2025 CanMEDS competency framework can, and should, more deliberately integrate the many aspects of clinical reasoning that contribute to providing high quality clinical care. In a more granular sense, clinical reasoning includes the integration of necessary fundamental knowledge, and the ability to mobilize that knowledge while delivering care in a variety of contexts in a timely and effective way. While some key components of effective clinical reasoning are important current enabling competencies for the Medical Expert Role, aspects of clinical reasoning are also woven throughout other CanMEDS roles (i.e., communicator, collaborator, scholar, and professional; see Table 1).The scope of requisite knowledge, standards of care, standards of “good” reasoning, and complex contextual factors that influence clinical reasoning could and should be better integrated into CanMEDS 2025.3 In order to better reflect clinical reasoning within the CanMEDS framework, we suggest adapting several existing enabling competencies, and articulate those that we believe are important considerations for CanMEDS 2025. The suggested enabling competencies (Table 1; section C) helps ground an already nebulous concept, and reflect the notion that clinical reasoning can be observed, taught, assessed, and studied in the context of several Roles. Meaning, the delivery of care necessitates effective clinical reasoning, several enabling competencies needed for effective clinical reasoning, and these enabling competencies are integrated across several CanMEDS roles. Clinical reasoning is an excellent example of how enabling competencies across multiple CanMEDs roles need to be integrated to effectively deliver care.

표 1C에서 제안하는 지원enabling 역량은 임상 환경에서 임상 추론이 어떻게 동원되는지에 대한 이해의 증가를 반영하며, 임상 추론 과정과 결과를 형성하는 치료 환경의 복잡성을 인식합니다. '좋은' 임상 추론이 여러 상황과 진료 환경에 걸쳐 어떤 모습인지에 대한 중요한 차이가 존재하기 때문에, 이러한 역량 제안은 각 의료 전문 분야 내에서 맥락화를 계속 요구할 것입니다. 임상 추론이 독립적인 역량으로 명명되어야 한다고 생각하지는 않지만,25 임상 추론의 복잡성은 CanMEDS 프레임워크 전반에 걸쳐 몇 가지 새로운 역량과 몇 가지 조정된 지원 역량에 더 잘 반영될 수 있다고 생각합니다.

The enabling competencies we propose in Table 1C reflect our growing understanding of how clinical reasoning is mobilized in the clinical environment and recognize the complexity of care environments that shape clinical reasoning processes and outcomes. These suggested enabling competencies will continue to require contextualization within each of our medical specialties, as important distinctions do exist regarding what “good” clinical reasoning looks like across contexts and care environments. While we do not believe clinical reasoning should be named as an independent competency,25 we believe the complexity of clinical reasoning can be better reflected in several new, and several adapted enabling competencies across the CanMEDS framework.


Can Med Educ J. 2023 Mar 21;14(1):58-62. doi: 10.36834/cmej.75843. eCollection 2023 Mar.

Clinical Reasoning in CanMEDS 2025

Affiliations 

1Institute of Health Sciences Education, McGill University, Quebec, Canada.

2Queen's University, Ontario, Canada.

3NOSM University, Ontario, Canada.

4University of Saskatchewan, Saskatchewan, Canada.

5McMaster University, Ontario, Canada.

PMID: 36998494

PMCID: PMC10042778

DOI: 10.36834/cmej.75843

CanMEDS 2025의 버추어 케어(Can Med Educ J. 2023)
Virtual Care in CanMEDS 2025

 

소개
Introduction

가상 진료(VC)는 잘 훈련된 의사의 손에 의해 효과적이고 안전합니다.1 그러나 대면 진료의 역량이 반드시 가상 진료의 역량과 동일하지는 않습니다.2 특정 VC 교육에 대한 여러 요구에도 불구하고,3-6 최근 문헌 검토에 따르면 이러한 개념은 2015 CanMEDS 의사 역량 프레임워크7에서 충분히 반영되지 않은 것으로 확인되었습니다.8 이러한 새로운 역량을 반영하여 오늘날의 의사가 환자와 사회의 진화하는 요구를 충족할 수 있도록 CanMEDS 2025를 업데이트해야 합니다. 이 입문서에서는 효과적인 원격 상담 및 환자 치료를 제공하기 위해 환자 및 동료와 가상으로 연결하는 데 필요한 기술에 초점을 맞춘 CanMEDS 역량에 대한 변경 사항을 제안합니다. 
Virtual care (VC) is effective and safe in the hands of well-trained physicians.1 However, competency in in-person care does not necessarily equate to competency in VC.2 Despite multiple calls for specific VC training,3-6 these concepts were identified as being underrepresented in the 2015 CanMEDS physician competency framework7 by a recent literature review.8 CanMEDS 2025 must be updated to reflect these novel competencies, ensuring that today’s physicians are able to meet their patients’ and societies’ evolving needs. For this primer, we propose changes to the CanMEDS competencies that focus on the skills necessary to connect virtually with patients and peers to deliver effective remote consultation and patient care.

가상 의료란 무엇이며 의사의 역량에 중요한 이유는 무엇인가요?
What is VC and why is it important to physician competency?

기술의 발전은 사람들이 관계를 맺고, 소통하고, 생활하는 방식을 바꾸고 있습니다. 의료 분야에서도 연구와 진료의 지형을 바꾸고 있습니다. 이 분야에는 때때로 중복되는 용어가 많이 있습니다(표 1의 정의 참조). 이 백서에서는 기술을 활용한 개별 환자 치료 제공에 초점을 맞추기 위해 가상 치료 Virtual Care 라는 용어를 사용합니다. 의료 정보학 및 데이터 분석과 같은 개념은 이 백서의 범위를 벗어나지만 실제로 중요하며 다른 곳에서 다루고 있습니다.9 
Technological advances are changing how people relate, communicate, and live. In healthcare, they are altering the landscape of research and practice. There are many, sometimes overlapping, terms in this field (see definitions in Table 1). This paper utilizes the term Virtual Care to focus on the provision of individual patient care using technology. Concepts such as health informatics and data analytics are out of the scope of this paper but are indeed important and are addressed elsewhere.9

Term 용어 정의
Definition
Chatbot 챗봇
"자연스러운 대화를 통해 의료 서비스를 제공하고...차례대로 진행되는 대화를 통해 온라인 의료 서비스를 더욱 사용자 친화적으로 만드는"10 전자 "대화형 시스템"입니다.

An electronic “conversational system” that “provides healthcare through natural conversation…making online healthcare more user-friendly…through a turn-taking dialog.”
10
Digital Health 디지털 건강
디지털 건강은 정보 기술 및 전자 통신 도구, 서비스 및 프로세스를 사용하여 의료 서비스를 제공하고 더 나은 건강을 촉진하는 것입니다.9 여기에는 "웨어러블 기기, 모바일 건강, 원격 의료, 건강 정보 기술, 원격 의료... 데이터 분석 및 인텔리전스, 예측 모델링... 의료 소셜 미디어", 전자 의료 기록 및 환자 커뮤니케이션 포털의 사용이 포함됩니다.11

Digital health is the use of information technology and electronic communication tools, services and processes to deliver health care services and facilitate better health.
9 It includes the use of, “wearable devices, mobile health, telehealth, health information technology, and telemedicine… data analytics and intelligence, predictive modelling…medical social media”, electronic medical records, and patient communication portals.11
eHealth e헬스
"의료 서비스, 건강 감시, 건강 문헌, 건강 교육, 지식 및 연구를 포함한 건강 및 건강 관련 분야를 지원하기 위해 정보통신 기술을 비용 효율적이고 안전하게 사용하는 것"12.

“The cost-effective and secure use of information and communications technologies in support of health and health-related fields, including health-care services, health surveillance, health literature, and health education, knowledge and research.”
12
Extended reality 확장 현실
컴퓨터를 사용하여 사용자 환경을 컴퓨터 생성 콘텐츠로 향상(예: 증강 현실[AR])하거나 대체(예: 가상 현실[VR])하는 것.13

Using computers to enhance (ie: augmented reality [AR]) or replace (ie: virtual reality [VR]) a user’s environment with computer generated content.
13
mHealth m헬스
원격 의료를 목적으로 스마트폰 및 웨어러블 디바이스와 같은 모바일 기술을 사용하는 것.5

The use of mobile technology such as smartphones and wearable devices for the purposes of telehealth.
5
Telehealth 원격 보건
"건강 관리 또는 의료 교육의 모든 구성 요소를 원거리에서 제공하는 것"5 여기에는 가상 진료와 의료 전문가 및 환자 교육이 모두 포함됩니다.5

“The delivery of any component of health care or medical education at a distance.”
5 It includes both virtual care and the education of both healthcare professionals and patients.5
Telemedicine 원격 의료
"정보통신 기술을 통해 원격으로 제공되는 의료 서비스"14로, 화상 또는 전화 상담 등이 이에 해당합니다.

A “medical service provided remotely via information and communication technology”
14 such as a video or telephone consultation.
Virtual Care 가상 진료
"환자 치료의 질을 촉진하거나 극대화할 목적으로 모든 형태의 통신 또는 정보 기술을 사용하여 원격으로 발생하는 환자 및/또는 환자 치료 서클 구성원 간의 모든 상호 작용"15 여기에는 원격 진료, mHealth, 원격 모니터링, 전자 의료 기록(EMR)을 통한 보안 메시징이 포함되지만 이에 국한되지는 않습니다.15

“Any interaction between patients and/or members of their circle of care, occurring remotely, using any form of communication or information technologies, with the aim of facilitating or maximizing the quality of patient care.”
15 This includes but is not limited to telemedicine, mHealth, remote monitoring, and secure messaging via electronic medical records (EMRs).15


VC는 고품질 의료 서비스에 대한 접근성을 제공하고 의료 서비스의 도달 범위, 형평성, 효율성, 잠재적 비용 효율성을 향상시킬 수 있는 기회를 제공합니다.1,3 최대 85%의 환자가 VC를 받는 데 관심이 있으며16 여러 의료 분야에서 그 효과가 입증되었습니다.1 명백한 바람직성에도 불구하고 대면 의료 역량이 가상 영역으로 자동 변환되지 않고2 의사가 현장에서 유능하게 진료하기 전에 이해해야 하는 VC의 기술적 및 사회 문화적(예: 정책 및 형평성) 한계가 있기 때문에 특정 교육이 필요합니다.17 실제로 캐나다 의사협회, 캐나다 가정의학회, 캐나다 왕립 의사 및 외과의사 대학은 "[VC] 교육을 의료 서비스 교육에 통합하여 의료 제공자와 관리자가 성숙한 [VC] 생태계에서 기능할 수 있도록 전적으로 준비되도록 해야 한다"고 권고했습니다.17
VC offers the opportunity to provide access to high-quality care and enhance the reach, equity, efficiency, and potentially cost-effectiveness of medical services.1,3 Up to 85% of patients are interested in receiving VC16 and multiple areas of medicine have demonstrated its effectiveness.1 Despite its apparent desirability, VC requires specific training because in-person medical competencies do not automatically translate to the virtual sphere2 and there are technological and sociocultural (eg: policy and equity) limitations to VC that need to be appreciated before a physician can practice competently in the field.17 Indeed, the Canadian Medical Association, College of Family Physicians of Canada, and The Royal College of Physicians and Surgeons of Canada have recommended that “[VC] training must be integrated into health service education so that providers and administrators are wholly prepared to function in a mature [VC] ecosystem.”17

2015 CanMEDS 역량 프레임워크에서 VC는 어떻게 표현되어 있나요?
How is VC represented in the 2015 CanMEDS competency framework?

레지던트3 및 의대생 수준에서 가상 의료에 대한 교육을 강화해야 한다는 요구가 오랫동안 있어 왔습니다.4 이러한 요구를 해결하기 위해 2015 CanMEDS 전자 의료 전문가 실무 그룹은 전자 의료 및 가상 의료 채택을 탐색하기 위한 특정 역량에 대한 권장 사항을 제시했지만,18 이 중 대부분은 최종 역량 프레임워크에 반영되지 않았습니다. 특히, "기술 기반 커뮤니케이션"은 2015 CanMEDS 지원 역량 중 하나에서 찾을 수 있지만(표 2 참조), 디지털 헬스, VC, eHealth 및 기타 관련 용어는 구체적으로 언급되지 않았습니다.7 
There have been long standing calls for increased training in VC at the residency3 and medical student level.4 To address these needs a CanMEDS 2015 expert working group on eHealth made recommendations on specific competencies for navigating eHealth and virtual health care adoption,18 though most of these were not reflected in the final competency framework. Notably, while “technology-enabled communication” can be found within one of the 2015 CanMEDS enabling competencies (see Table 2), digital health, VC, eHealth and other related terms are not specifically mentioned.7

그 이후로 가상 진료는 환자 치료에서 떼려야 뗄 수 없는 부분이 되었으며, 코로나19 팬데믹 기간 동안 공중 보건 조치로 인해 더욱 발전했습니다.16 의사와 의료 시스템이 이러한 전환에 충분히 준비되지 않았기 때문에 가상 진료로의 급격한 변화는 문제가 되었습니다. 곧 발표될 CanMEDS 2025 개정판은 가상 의료를 포함한 21세기 의학에서 요구되는 업무에 맞춰 의사의 역량을 조정할 수 있는 기회입니다.
Since then, VC has become an inextricable part of patient care, with advances precipitated by public health measures during COVID-19 pandemic.16 The rapid change to VC was problematic because physicians and the healthcare system were not fully prepared for this transition. The upcoming CanMEDS 2025 revision is an opportunity to align physician competencies with the tasks required in 21st century medicine including virtual care.

2025년 CanMEDS 역량 프레임워크 내에서 가상 의료가 어떻게 더 잘 표현될 수 있을까요?
How can VC be better represented within the 2025 CanMEDS competency framework?

가상 진료의 성장에 따라 의사는 가상 환경에서 진료하는 데 적응해야 합니다. 이를 위해서는 의사 역량 프레임워크의 상당한 수정이 필요합니다. 환자 중심의 팀 기반 치료를 최적화하기 위해 여러 의료 전문 분야의 질병 진단 및 치료와 P2P 커뮤니케이션에서 이러한 도구에 대한 의존도가 높아짐에 따라 이를 통합할 필요가 있습니다. 
With the growth of VC, physicians must adapt to performing in the virtual environment. This will require substantial modification of the physician competency framework. There is need to incorporate the greater dependence on these tools in the diagnosis and treatment of ailments across medical specialties and in peer-to-peer communication to optimize patient-centred team-based care.

모든 역량을 아우르는 VC를 더 잘 대표할 수 있도록 CanMEDS 의사 역량 프레임워크의 변경을 제안하며, 표 2에서 권장 사항과 그 근거를 CanMED 역할별로 세분화하여 설명합니다. 
We suggest changes to the CanMEDS Physician Competency Framework to better represent VC spanning all competencies and describe our recommendations and their rationale, broken down by CanMEDs role, in Table 2.

전반적으로 의료 전문가 역할에 대한 변화는 안전하고 포괄적인 환자 치료를 제공하기 위해 가상 도구를 사용하여 전문성을 개발하는 데 중점을 둡니다.

  • 커뮤니케이터 역할은 가상 환경에서는 의사소통 기술이 다르다는 점을 인식하고 의사가 기술 사용과 관계없이 훌륭한 커뮤니케이터가 되어야 한다는 점을 강조합니다.
  • 협력자 역할은 다학제 팀의 대면 및 가상 협업을 포함하도록 수정되었습니다.
  • 리더 역할은 의료 시스템이 가상 현실에 의해 어떻게 영향을 받는지, 그리고 가상 현실을 포함한 새로운 치료 모델이 현재의 의료 서비스 제공 방식을 어떻게 개선할 수 있는지를 강조합니다.
  • 건강 옹호자 역할은 VC에 대한 공평한 접근성, 디지털 헬스를 활용하여 지역사회의 필요를 파악하는 방법, 디지털 시대의 미디어 옹호에 대해 다룹니다.
  • 학자 역할은 기술을 최신 상태로 유지하고 사용하는 데 중점을 두며, 인터넷으로 인해 의료 문헌이 전통적인 저널 논문을 넘어 진화하고 있음을 인식합니다.
  • 마지막으로 전문가 역할은 가상 현실의 사용이 증가함에 따라 이제야 필요성이 대두된 기술과 보호 메커니즘을 포함합니다. 

Overall, changes to the Medical Expert role focus on developing expertise using virtual tools to provide safe, comprehensive patient care.

  • The Communicator role recognizes that communication skills are different in a virtual setting and emphasise that physicians need to be excellent communicators regardless of the use of technology.
  • The Collaborator role is modified to include in-person and virtual collaboration in multidisciplinary teams.
  • The Leader role highlights how the healthcare system is impacted by VC, and how new models of care (including VC) can improve upon current approaches to healthcare delivery.
  • The Health Advocate role focuses on equitable access to VC, how digital health can be leveraged to identify community needs, and touches on media advocacy in the digital age.
  • The Scholar role focuses on staying up to date with and using technology and recognizes that due to the internet, healthcare literature is evolving past the traditional journal article.
  • Finally, the Professional role includes the skills and safeguarding mechanisms that have only now become necessary, given the increase in the use of VC.

결론
Conclusion

코로나19 팬데믹으로 인해 VC는 갑작스럽게 환자 치료의 최전선에 서게 되었습니다. 이 기술은 2015년부터 사용되어 왔지만, 당시에는 이 새로운 치료 모델에 대한 역량이 상당히 부족했습니다. 의사들이 사회적 요구와 기대에 부응하는 진료에 진정으로 대비할 수 있도록 기술적으로 개선되었든 그렇지 않든 모든 환경과 관련된 역량을 반영하도록 CanMEDS 2025를 업데이트하는 것이 필수적입니다. 
The COVID-19 pandemic has abruptly forced VC to the forefront of patient care. Although it has been around since CanMEDS 2015, the competencies at the time focused substantially less on this new model of care. It is imperative that CanMEDS 2025 is updated to reflect competencies relevant to all environments, technologically enhanced or otherwise, so that physicians are truly prepared for practice relevant to societal needs and expectations.


Can Med Educ J. 2023 Mar 21;14(1):22-26. doi: 10.36834/cmej.75439. eCollection 2023 Mar.

Virtual Care in CanMEDS 2025

Affiliations collapse

1Department of Medicine, University of Toronto, Ontario, Canada.

2Department of Anesthesiology and Pain Medicine, University of Ottawa, Ontario, Canada.

3Office of Continuing Professional Development, Faculty of Health Sciences, McMaster University, Ontario, Canada.

4University of Saskatchewan, Saskatchewan, Canada.

5Department of Emergency Medicine, UBC Faculty of Medicine, British Columbia, Canada.

PMID: 36998491

PMCID: PMC10042775

DOI: 10.36834/cmej.75439

CanMEDS 2025에서 임상학습환경 (Can Med Educ J. 2023)
The Clinical Learning Environment in CanMEDS 2025

소개
Introduction

임상 학습 환경(CLE)은 현재 CanMEDS 의사 역량 프레임워크에서 잘 드러나지 않는 다면적 개념입니다.1 의료 환경은 사람 및 관계 중심 치료의 기본 원칙을 바탕으로 구축되며, 우리는 환자 치료 제공과 교육 프로그램 실행이라는 동시적 목표가 학습자와 교수진의 관심을 끌기 위해 어떻게 경쟁할 수 있는지에 대해 생각해 보아야 합니다. 이러한 긴장을 탐구하면 학습자를 포함한 환자, 가족, 지역사회, 의료진 등 학습 환경의 모든 구성원의 요구에 부응하는 개입을 설계하고 실행할 수 있습니다.
The Clinical Learning Environment (CLE) is a multi-faceted concept that is currently underrepresented in the CanMEDS physician competency framework.1 Healthcare environments are built on the foundational tenet of person and relationship-centered care, and we must reflect upon how the concurrent objectives of delivering patient care and implementing educational programs may compete for the attention of learners and faculty. Exploration of these tensions will enable the design and implementation of interventions that are responsive to the needs of all citizens in the learning environment including patients, families, communities, and the healthcare workforce, including learners.

위계와 권력 비대칭은 의료 시스템, 더 넓게는 CLE에 만연한 요소로, 더 많은 주의가 필요합니다2. 동전의 양면처럼, CLE 내에서 개입을 어떻게 설계하느냐에 따라 팀과 의료 서비스 제공이 기능적으로 또는 역기능적으로 발전할 수 있습니다. 포용적이고 심리적으로 안전한 의료 환경을 조성하면 환자 안전 및 경험 개선, 팀 역학 지원, 학습자 및 모든 팀원의 전문성 개발이 보장되며, CanMEDS는 이러한 목표를 반영해야 합니다.
Hierarchies and power asymmetries are pervasive elements of healthcare systems, and the CLE more broadly, that require further attention2. Like two sides of the same coin, how interventions are designed within the CLE, can foster functional or dysfunctional teams and healthcare delivery. Creating inclusive, psychologically safe healthcare environments ensures improved patient safety and experience, supportive team dynamics, and professional development for learners and all members of the team; CanMEDS must reflect these objectives.

임상 학습 환경이란 무엇이며 의사의 역량에 중요한 이유는 무엇인가요?
What is the Clinical Learning Environment and why is it important to physician competency?

임상 학습 환경은 "...참여자의 경험, 인식, 학습을 둘러싸고 형성하는 사회적 상호작용, 조직 문화 및 구조, 물리적 및 가상 공간"으로 정의되어 왔습니다.3 다른 정의에서는 "업무 환경과 교육적 맥락 사이의 중첩된 공간"을 언급하기도 합니다. "4

  • 이러한 정의는 학습자 연속체(학부, 대학원 및 평생 의학 교육)와 진료 맥락을 아우르며, 건축적 경계, 디지털 공간, 사회문화적 측면, 교육 커리큘럼, 다양성 및 포용성, 학습의 심리학적 이론, 실천 커뮤니티를 포함한 CLE의 모든 측면을 고려합니다.
  • 5 이러한 정의는 CLE를 복잡하고 중요한 구조, 즉 모든 CanMEDS 역량에 영향을 미치는 규범, 행동, 무언의 행동 강령에 영향을 미치는 구조로 파악합니다.
  • 대인관계는 시스템과 긴밀하게 연결되어 있습니다. 사람은 규범을 알리고 만들고, 시스템은 행동을 가능하게 하고 영향을 미칩니다.

The CLE has been defined as “…social interactions, organizational cultures and structures, and physical and virtual spaces that surround and shape participants’ experiences, perceptions, and learning.”3 Other definitions reference “the overlapping space between the work environment…and the educational context.”4 

  • These definitions span the learner continuum (undergraduate, postgraduate, and continuing medical education) as well as contexts of care, and consider all aspects of the CLE including
    • architectural boundaries, digital spaces, sociocultural aspects, educational curricula, diversity and inclusion, psychological theories of learning, and communities of practice.5 
  • These definitions cast the CLE as a complex overarching structure–one that influences the norms, behaviours, and unspoken codes of conduct that touch on all CanMEDS competencies.
  • The interpersonal is tightly linked with the systemic: people inform and create norms, while systems in turn, enable and influence behaviours.

따라서 개인이 의료 및 의료 교육 프로그램에 어떤 영향을 미칠 수 있는지, 그리고 이러한 프로그램이 의료 인력의 모든 구성원을 어떻게 형성하는지 이해하도록 하기 위해서는 모든 CanMEDS 2025 역량의 원동력으로서 CLE를 인정하는 것이 중요합니다. 
Therefore, acknowledging the CLE as an enabler of all CanMEDS 2025 competencies is critical to ensuring that individuals appreciate how they may influence healthcare and medical training programs, and how these programs, in turn, shape all members of the healthcare workforce.

환자안전, 학습자 경험, 대중의 신뢰 필요성, 의료 시스템(그리고 더 일반적으로는 사회 전반)에서의 책무성 강화 요구는 CLE에 대한 비판적이고 지속적인 검토의 원동력이 되고 있습니다. 환자안전 사고5와 그에 따른 대학원 의학 교육 환경 개선에 대한 옹호,6 지역 사회 기반의 운동은 의료 및 의학교육의 지속적인 불평등에 주목하고 있습니다.
Patient safety, learner experience, the need for public trust, and calls for increased accountability within the healthcare system (and across society, more generally) are the impetuses for a critical and ongoing examination of the CLE. Policy changes have resulted from patient safety incidents5 and subsequent advocacy for improvement in postgraduate medical training environments;6 community-based movements have put a spotlight on persisting inequities in healthcare and medical education.

여러 문헌에서는 의학 커리큘럼7,8,9을 통해 중첩된 억압 시스템이 어떻게 유지되고 있으며, 무례, 배제, 인종차별 및 학대를 허용하고 심지어 가능하게 하는 숨겨진 커리큘럼에 의해 지속되고 있는지에 대해 설명했습니다. 의학 교육의 본질적인 위계적 특성뿐만 아니라 사회적 억압의 축을 통해 학문적 의학에 존재하는 많은 권력 비대칭은 모든 학습자 상호 작용에 영향을 미칩니다. 의학 학습자와 교수진이 직면하는 협박, 차별, 괴롭힘의 높은 유병률11,12은 CLE가 대부분 사회적으로 구성되며, CLE를 형성하고 변화시키는 것은 우리의 도덕적, 신탁적 책임이라는 사실을 상기시켜 줍니다. 학습자와 교수진 모두는 긍정적인 변화의 주체가 될 수 있는 잠재력을 가지고 있으며 CLE에 의미 있는 기여를 할 수 있습니다.
The literature has described how overlapping systems of oppression are upheld directly through medical curricula7,8,9 and are perpetuated by a hidden curriculum that allows and even enables disrespect, exclusion, racism,10 and mistreatment. The many power asymmetries that exist in academic medicine, both through the inherently hierarchical nature of medical training but also through societal axes of oppression, influence every learner interaction. The high prevalence of intimidation, discrimination, and harassment faced by medical learners and faculty11,12 reminds us that the CLE is largely socially constructed, and it is our moral and fiduciary responsibility to shape and change it. Learners and faculty alike have the potential to be positive change agents and contribute meaningfully to the CLE.

CLE에 대한 다양한 증거 기반 척도가 발표되었습니다.4,13 

  • 의학전문대학원 교육 인증위원회에서는 이미 인증 절차에 CLE에 대한 공식적인 검토를 포함시켰는데, 임상 학습 환경 검토(CLER) 프로그램으로 알려진 검토 절차는 미국 인증 기관의 CLE 상태와 졸업생의 향후 진료 스타일에 대한 통찰력을 제공합니다4. 
  • 마찬가지로 캐나다 레지던트 인증 컨소시엄도 형평성, 다양성, 포용성 및 기타 학습 환경 고려 사항을 대학원 의학교육 인증 과정에 직접 인정하고 통합하는 것을 우선시하고 있습니다.14 

이는 CanMEDS 2025 내에서 CLE를 공식적으로 인정하여 의사 역량 프레임워크를 인증 표준과 일치시켜야 할 필요성을 시사하는 것입니다.
Various evidence-based measures of the CLE have been published.4,13 

  • The Accreditation Council for Graduate Medical Education has already incorporated formal review of the CLE into their accreditation processes–a review process, known as the Clinical Learning Environment Review (CLER) Program, provides insight into both the status of American accredited institutions’ CLEs and future practice styles of their graduates4.
  • Similarly, the Canadian Residency Accreditation Consortium has also prioritized acknowledging and integrating equity, diversity, inclusion, and other learning environment considerations directly into the postgraduate medical education accreditation process.14 

This speaks to the need for the CLE to be formally acknowledged within CanMEDS 2025, bringing the physician competency framework into alignment with accreditation standards.

임상 학습 환경은 2015 CanMEDS 역량 프레임워크에서 어떻게 표현됩니까?
How is the Clinical Learning Environment represented in the 2015 CanMEDS competency framework?

실무 그룹은 학자, 리더, 전문가 역할 내에서 CLE 관련 지원 역량을 확인했습니다(표 1A 및 및1B).1B). 2015년 CanMEDS 프레임워크 초안이 작성된 이후 캐나다 사회 전반에서 #미투, #흑인 생명도 소중하다, 진실과 화해 등의 지역사회 기반 운동과 관련된 책임에 대한 요구가 증가했습니다. 이러한 운동은 의료진, 특히 환자, 가족, 커뮤니티의 생생한 경험을 반영하기 때문에 의료와 직접적인 관련이 있습니다. 역사적으로 CLE의 사회적 차원에 대한 고려가 이루어졌지만, CLE를 구성하는 규범을 가능하게 하거나 방해하는 데 있어 권력, 특권, 사회적 위치가 어떤 역할을 하는지에 대한 더 많은 조사가 필요합니다. 의사와 기타 의료 서비스 제공자가 모든 행동(및 무행동)을 통해 CLE를 어떻게 형성하는지 이해하려면 여러 CanMEDS 역할에 걸쳐 역량을 업데이트해야 합니다. 
Our working group identified CLE-specific Enabling Competencies within the Scholar, Leader, and Professional Roles (Table 1A and and1B).1B). Since the 2015 CanMEDS framework was drafted, there have been increased calls for accountability across Canadian society related to community-based movements such as #MeToo, #BlackLivesMatter, and Truth and Reconciliation, among others. These movements have direct relevance to healthcare as they reflect lived experiences of healthcare teams and, importantly, patients, families, and communities. Historically, although consideration has been given to the social dimensions of the CLE, greater interrogation of the role that power, privilege, and social location play in enabling or disrupting the norms that comprise the CLE is required. Understanding the CLE, and how physicians and other health care providers shape it through their every action (and inaction), will require updates to competencies across multiple CanMEDS Roles.

 

임상 학습 환경이 2025 CanMEDS 역량 프레임워크 내에서 어떻게 더 잘 표현될 수 있을까요?
How can the Clinical Learning Environment be better represented within the 2025 CanMEDS competency framework?

다가오는 CanMEDS 2025 개정판(표 1C)에 CLE의 중심이 되는 개념을 보다 직접적으로 통합할 수 있는 여지가 있습니다. CLE는 전통적인 의미의 '기술'이 아니라는 점을 인정하지만, 심리적 안전, 문화적 겸손, 제도적 문화 변화에 대한 개념은 다른 CanMEDS 역량이 뒷받침할 수 있는 틀을 제공합니다. 
There is room to more directly incorporate concepts that are central to the CLE in the forthcoming CanMEDS 2025 revisions (Table 1C). While we acknowledge that the CLE is not a ‘skill’ in the traditional sense, it frames notions of psychological safety, cultural humility, and institutional culture change that other CanMEDS competencies would support.

심리적 안전은 "학습자가...자신의 업무 환경을 개인 내적 위험이 내재된 행동에 참여하는 데 도움이 되는 것으로 인식하는 정도"로 정의할 수 있습니다.15 심리적으로 안전한 학습 환경은 학습, 의사소통, 팀 결속, 협업, 환자 경험 및 결과에 긍정적인 영향을 미칩니다.16,17,18 심리적 안전을 증진하는 것에 대해 명시적으로 언급하는 것은 성장 마인드를 촉진하는 데 매우 중요합니다.8 역량 기반 교육에 필요한 특성이며19 의료계에 만연한 수치심 기반 교육 접근법과 대조되는 특성입니다.8
Psychological safety can be defined as “the degree to which learners…perceive their work environment as conducive to engaging in behaviours that have inherent intrapersonal risk.”15 Psychologically safe learning environments have positive impacts on learning, communication, team cohesion, collaboration, patient experiences, and outcomes.16,17,18 Being explicit about fostering psychological safety is critically important to promoting a growth mindset,8 a characteristic that is necessary in competency-based training19 and contrasts with the shame-based teaching approaches that remain pervasive in medicine.8

문화적 겸손은 자기 성찰과 비판에 대한 평생의 헌신을 반영합니다. 문화적 겸손에는 다음이 포함됩니다.20 

  • 자신의 사회적 위치에 대한 인식을 키우고, 
  • 타인의 경험을 완전히 이해하는 데 있어 자신의 한계를 인식하며, 
  • 타인을 자신의 경험에 대한 전문가로 바라보고
  • 신뢰에 기반한 관계를 조성하는 것

문화적 겸손에는 지속적인 학습과 탈학습에 대한 헌신과 함께 반인종주의 및 트라우마 정보에 기반한 접근법에 기반한 지식, 기술 및 태도를 개발하는 것이 포함됩니다.
Cultural humility reflects a lifelong commitment to self-reflection and critique. It involves

  • cultivating an awareness of one’s social location,
  • recognizing one’s limitations in fully understanding the experiences of others,
  • viewing others as experts of their own experiences, and
  • fostering trust-based relationships.20 

Cultural humility involves developing knowledge, skills, and attitudes grounded in anti-racism and trauma-informed approaches, with commitment to ongoing learning and unlearning.

마지막으로, 우리 모두는 다양한 인구의 요구를 대표하고 이에 대응할 수 있는 의료 인력을 양성하고 지원해야 할 공동의 책임이 있습니다. 이러한 목표를 달성하기 위해서는 모든 의료 서비스 제공자가 현재의 대표성 격차를 해소하고 모두가 소속감을 느낄 수 있는 환경을 조성하기 위한 제도적 문화 변화에 동참해야 합니다.
Finally, we all have a collective responsibility to be intentional about building and supporting a healthcare workforce that is representative of, and responsive to, the needs of our diverse population. This goal requires all healthcare providers to be part of creating institutional culture change to create environments in which the current representation gap is eliminated, and everyone feels like they belong.

CLE를 비정치적인 실체apolitical entity로 보는 경향은 오늘날 우리가 봉사하는 학습자, 교사, 환자, 가족 및 지역사회의 요구를 충족하는 학술 의학의 능력에 해를 끼쳤습니다. CanMEDS 2025는 모두에게 포용적이고 심리적으로 안전한 환경, 그리고 가장 중요한 것은 환자, 가족, 지역사회를 위한 최상의 경험과 결과를 보장하는 데 필요한 역량의 습득과 유지를 적극적으로 지원하는 방법과 CLE에 대해 우리가 생각하는 방식에 필요한 미묘한 차이를 가져올 수 있는 기회를 제공합니다. 광범위한 범위를 고려할 때, CLE는 자연스럽게 CanMEDS의 모든 역량을 다루게 될 것이며, 다른 실무 그룹과 권고 사항이 중복될 것으로 예상됩니다. 선택된 역량의 중요성은 해당 역량이 워킹그룹 활동 전반에서 어떻게 증폭되거나 수렴되는지 관찰함으로써 쉽게 파악할 수 있습니다.
The tendency to view the CLE as an apolitical entity has been to the detriment of academic medicine’s ability to meet the needs of the learners, teachers, patients, families, and communities that we serve today. CanMEDS 2025 offers us an opportunity to bring much needed nuance to how we think about the CLE and how we proactively support the acquisition and maintenance of the competencies needed to ensure inclusive and psychologically safe environments for all and most importantly, the best possible experiences and outcomes for our patients, families, and communities. Given its wide-reaching scope, the CLE will naturally touch on all the CanMEDS competencies, and we anticipate overlap in our recommendations with other working groups. The importance of select competencies will be readily identified by observing how they are amplified or converge across working group efforts.

자율 규제 전문직으로서, 우리는 학습자와 교수진 모두에게 CLE와 관련하여 재구상된 역량에 대한 책임을 부여해야 합니다. 이러한 책임을 다하기 위해서는 이러한 역량을 습득하고, 실행하고, 가르치는 방법을 설계, 구현 및 평가하기 위한 리소스가 필요합니다.
As a self-regulating profession, we must hold both learners and faculty accountable to these re-imagined competencies relating to the CLE. This accountability will require resources for designing, implementing, and evaluating how these competencies are acquired, practiced, and taught.

 

Can Med Educ J. 2023 Mar 21;14(1):41-45. doi: 10.36834/cmej.75537. eCollection 2023 Mar.

The Clinical Learning Environment in CanMEDS 2025

Affiliations

1University of Calgary, Alberta, Canada.

2University of Toronto, Ontario, Canada.

3University of Manitoba, Manitoba, Canada.

4McGill University, Quebec, Canada.

5University of Saskatchewan, Saskatchewan, Canada.

PMID: 36998502

PMCID: PMC10042790

DOI: 10.36834/cmej.75537

CanMEDS 2025에서 복잡-적응적 시스템(Can Med Educ J. 2023 )
Complex adaptive systems in CanMEDS 2025

소개
Introduction

복합적 적응 시스템은 CanMEDS 의사 역량 프레임워크에서 잘 알려지지 않은 개념입니다.1 복합적 적응 시스템환자와 인구를 위한 최적의 의료 결과를 제공하기 위해 복잡한 의료 시스템을 탐색하고 참여하는 것과 관련이 있으며,2 의료 팀이 복합적 적응 시스템으로 기능하는 방식부터 시작합니다.3 이 원고는 이 개념과 현재 및 향후 CanMEDS의 반복에 대한 연관성을 요약하는 것을 목표로 합니다. 
Complex Adaptive Systems are underrepresented in the CanMEDS physician competency framework.1 As a concept, it relates to navigating and engaging with our complex health system in service of optimal health care outcomes for patients and populations,2 starting with how healthcare teams function as complex adaptive systems.3 This manuscript aims to summarize the concept and its links to current and future iterations of CanMEDS.

복잡적 적응 시스템이란 무엇이며 의사의 역량에 중요한 이유는 무엇인가요?
What are Complex Adaptive Systems and why are they important to physician competency?

복잡성이란 사물이 예기치 못한 돌이킬 수 없는 방식으로 상호 작용하는 풍부한 상호 연결성을 말합니다. WHO에 따르면 "보건 시스템은 건강을 증진, 회복 및/또는 유지하는 것을 주된 목적으로 하는 조직, 사람, 행동과 같이 상호 작용하고 상호 의존하는 모든 구성 요소로 이루어져 있다."4 이는 복잡적 적응 시스템의 정의와 일치합니다:

  • 복잡적, 다양한 요소 사이에 수많은 비선형 연결이 있는 다양성을 의미하고,
  • 적응적, 변화하는 맥락 내에서 경험을 통해 학습하고 변화하는 역량을 시사하며,
  • 시스템, 상호 의존적으로 연결된 에이전트의 집합입니다.5,6

Complexity is about rich interconnectivity whereby things interact in unexpected and irreversible ways. According to the WHO, “The health system consists of all interacting and interdependent components, such as organizations, people, and actions, whose primary intent is to promote, restore, and/or maintain health.”4 That aligns with the definition of a complex adaptive system:

  • complex, implying diversity with a great number of non-linear connections between a wide variety of elements;
  • adaptive, suggesting the capacity to learn from experience and change within a changing context;
  • system, a set of interdependently connected agents.5,6

역사적으로 캐나다 의료 시스템은 병원 내 치료를 통한 급성 질환 치료에 중점을 두고 설계되었습니다.7 그 결과, 병원과 의사가 매개하는 치료가 우리 시스템의 조직과 자금에 대한 논의를 지배해 왔습니다. 레지던트 수련은 대부분 이러한 구조에 편입되어 그 틀에 맞춰져 왔습니다. 그러나 건강과 질병 관리의 결정 요인은 다층적이고 상호 의존적인 하위 시스템으로, 서로 지속적으로 상호작용하고 영향을 주고받습니다.8 이러한 시스템의 경계는 반투과적이다. 코로나19 팬데믹 기간 동안 생물학적 조건과 사회적 조건 및 상태가 상호 작용하여 개인의 건강 결과를 악화시키거나 해를 입힐 수 있는 취약성을 증가시킴으로써 이러한 시스템의 상호 연결성이 입증되었습니다.9 
As historically designed, the Canadian healthcare system focuses on curing acute disease with in-hospital care.7 As a result, hospitals and physician-mediated care have dominated the dialogue on our system’s organization and funding. Resident physician training has been largely embedded in and framed by these structures. However, the determinants of health and management of disease are multilayered and interdependent subsystems that continuously interact and influence each other.8 The boundaries of these systems are semipermeable. Their interconnectedness was demonstrated during the COVID syndemic as biologic and social conditions and states interacted to increase a person’s susceptibility to harm or worsen their health outcomes.9

각 의사가 보건 시스템의 모든 요소(예: 식량 안보, 주택, 교육, 기후 변화, 가정 간호, 아동 발달, 불평등 등)에 영향을 미칠 수는 없지만, 의사는 이 생태계를 이해하여 환자 및 이 시스템 내의 다른 에이전트와 어떻게 협력할지 선택할 수 있어야 합니다. 이를 위해서는

  • 시스템에 대한 기본적인 이해가 필요하며, 시스템이 조직 구조와 문화에 미치는 영향을 이해해야 한다
  • 관점의 다양성의 중요성을 강조하고,
  • 명확하고 공유된 목적의 범위 내에서 행동하며,
  • 지속적으로 적응할 수 있는 공간을 만들고,
  • 환경의 새로운 변화로부터 학습해야 한다.

While each physician may not be able to influence all elements of the health system (as for example, food security, housing, education, climate change, home care, child development, inequity, etc.), physicians need to understand this ecosystem in order to make choices about how they will engage with their patients and other agents within this system. This requires

  • a foundational understanding of systems and their influence on organizational structure and culture,
  • emphasizing the importance of diversity of perspective,
  • acting within the boundaries of a clear and shared purpose, and
  • creating spaces for continuous adaptation to, and
  • learning from emergent changes in the environment.10

이러한 이해를 바탕으로 의사는

  • 모든 이해관계자를 참여시키고,
  • 체계적으로 높은 레버리지(티핑 포인트)를 찾아서 트리거하며,
  • 의도하지 않은 결과 및 시스템 구조와 같은 개념을 인식할 수 있는 기술을 개발해야 합니다. 마지막으로, 의사는
  • 예측할 수 없는 급변하고 역설적이며 얽히고설킨 상황을 받아들이고 대처할 수 있는 태도와 기술을 갖추고, 자신의 행동과 건강을 신중하게 관리해야 합니다. 

Building on this understanding, physicians need to 

  • develop the skills to engage all stakeholders,
  • find and trigger systemic high leverage (tipping) points, and
  • be aware of concepts like unintended consequences and system structures. Finally, physicians need to
  • possess the attitudes and skills to accept and deal with rapid, unpredictable, paradoxical, and tangled situations and thoughtfully manage their behaviours, and own wellness.

2015 CanMEDS 역량 프레임워크에서 복합 적응 시스템은 어떻게 표현되나요?
How are Complex Adaptive Systems represented in the 2015 CanMEDS competency framework?

2015 CanMEDS 의사 역량 프레임워크의 주요 변경 사항 중 하나는 '관리자' 역할을 '리더' 역할로 변경한 것입니다.11 이러한 변경은 복잡한 의료 시스템 전반에서 질 향상과 자원 관리에 대한 의사의 역할에 더 초점을 맞추기 위해 이루어졌습니다. 리더 역할에 추가된 핵심 역량 중 두 가지(1, 3번)는 복잡한 시스템에서 기능하는 데 필요한 기술에 가장 큰 기여를 했습니다. 
One of the major changes in the 2015 CanMEDS Physician Competency Framework was the modification of the ‘Manager’ role to the ‘Leader’ role.11 This change was made to bring greater focus on physicians’ role in quality improvement and resource stewardship throughout complex health systems. Two of the key competencies added to the role of Leader (1 and 3) contributed most to the skills needed to function in complex systems.

두 번째 건강 옹호자 핵심 역량은 급성 의료 시스템의 요소를 1차 의료 및 예방 의료의 요소뿐만 아니라 건강과 웰빙에 영향을 미치고 옹호가 필요한 다른 요소와 연결하는 시스템적 사고11와도 관련이 있습니다. 마지막으로, 협력자의 역할에는 '치료의 전환' 및 '지역사회 제공자와의 협력'과 같은 개념을 포함하여 시스템적 사고와 연결되는 몇 가지 요소가 있습니다.11 
The second Health Advocate key competency also touches on systems thinking11 as it connects the elements of the acute healthcare system upstream, not only with those of primary and preventive care, but also with other factors that affect health and wellness and require advocacy. Finally, the role of Collaborator has a few elements that link with systems thinking, including concepts like “transitions of care” and “collaborations with community providers.”11

복잡한 적응형 시스템을 2025 CanMEDS 역량 프레임워크 내에서 어떻게 더 잘 표현할 수 있을까요?
How can Complex Adaptive Systems be better represented within the 2025 CanMEDS competency framework?

최근 CanMEDS 와 LEADS 리더십 프레임워크를 비교한 결과, CanMEDS 역량은 개별 환자 치료에 초점을 맞춘 일부 영역(자기 주도, 타인 참여, 결과 달성)에 상당한 관심을 기울이는 반면, 복합 적응 시스템과 관련된 광범위한 역량(연합 및 시스템 전환 개발)에는 덜 관심을 기울이는 것으로 나타났습니다.12 지난 몇 년 동안, 특히 COVID-19 팬데믹에 대응하여 발생한 빈번한 시스템 중단은 모든 의사가 복합 적응 시스템에 대한 이해를 높여야 할 필요성을 입증했습니다.13 이 분야의 역량은 의사들이 스스로를 의료 시스템 혁신의 적극적인 참여자로 인식하는 데 도움이 될 것이며, 이 개념이 CanMEDS 2025에서 더욱 구체화되어야 할 개념으로 식별되는 데 기여했을 수 있습니다.
A recent comparison of CanMEDS with the LEADS leadership framework found that CanMEDS competencies pay substantial attention to some of the domains focused on the care of individual patients (lead self, engage others, and achieve results), but less attention to broader competencies related to Complex Adaptive Systems (develop coalitions and systems transformation).12 The frequent systemic disruptions that have occurred over the past several years, particularly in response to the COVID-19 pandemic have demonstrated the need for a greater understanding of complex adaptive systems by all physicians.13 Competencies in this area will help physicians to see themselves as active participants in the transformation of the healthcare system and may have contributed to this concept being identified as one which needs to be fleshed out further in CanMEDS 2025.

CanMEDS 2025에 복합 적응형 시스템을 더 잘 통합하기 위해 제안하는 변경 사항은 표 1에 요약되어 있습니다.

  • 리더 역할에서 제안된 수정 사항은 환자별 결정과 시스템 전반의 결정 사이의 복잡한 상호작용에 대한 혁신, 출현 및 이해를 촉진하는 품질 개선과 함께 복잡성에 기반한 리더십 패러다임에 초점을 맞출 것입니다.14
  • 협력자에서는 복잡한 결정을 내릴 때 다양성과 관점의 차이에 대한 필요성을 보다 명확하게 인정하고 환자와 가족을 넘어 협력자의 개념을 확장할 것을 제안합니다.
  • '건강 옹호자'에서는 환자와 건강의 사회적 결정 요인 간의 복잡한 상호 작용을 인정하는 제안을 합니다. 마지막으로,
  • '학자'에서는 교육 활동의 설계 및 제공에 사회 학습 이론의 요소를 통합해야 하는 역량을 포함할 것을 제안합니다.

The changes that we propose to better incorporate Complex Adaptive Systems in CanMEDS 2025 are outlined in Table 1.

  • Within the Leader role, the proposed modifications would increase the focus on complexity-informed leadership paradigms alongside quality improvement that promote greater support for innovation, emergence and understanding of the complex interactions between patient-specific and system-wide decisions.14 
  • Under Collaborator, we propose more explicitly acknowledging the need for diversity and differences of perspective when making complex decisions as well as broadening the notion of who is a collaborator beyond the patient and family.
  • For Health Advocate, we make suggestions that would acknowledge the complex interactions between patients and the social determinants of health.
  • Lastly, under Scholar we suggest including competencies that require the incorporation of elements of social learning theory into the design and delivery of educational activities.

 


Can Med Educ J. 2023 Mar 21;14(1):50-53. doi: 10.36834/cmej.75538. eCollection 2023 Mar.

Complex adaptive systems in CanMEDS 2025

Affiliations

1University of Alberta, Alberta, Canada.

2Canadian Society of Physician Leaders, Ontario, Canada.

3University of Ottawa, Ontario, Canada.

4Royal College of Physicians and Surgeons of Canada, Canada.

5University of Toronto, Ontario, Canada.

6University of Saskatchewan, Saskatchewan, Canada.

PMID: 36998500

PMCID: PMC10042785

DOI: 10.36834/cmej.75538

CanMEDS 2025에서 데이터-기반 의학(Can Med Educ J. 2023 )
Data-Informed Medicine in CanMEDS 2025

 

소개
Introduction

건강 데이터 및 정보 사용에 대한 의사의 역량 강화의 필요성은 널리 인정받고 있습니다. 최근 검토1에 따르면 데이터 정보 의학은 CanMEDS 의사 역량 프레임워크2에서 충분히 반영되지 않은 개념으로 확인되었으며, 왕립대학의 "인공지능 및 신흥 디지털 기술에 관한 태스크포스 보고서"는 관련 역량을 CanMEDS에 통합할 것을 권고했습니다.3 데이터 기반 의학의사가 양질의 환자 의료 서비스를 제공하는 데 필요한 데이터 및 기타 디지털 정보의 수집, 사용, 공유에 필요한 역량과 관련이 있습니다. 이 입문서에서는 데이터 정보 의학의 개념과 이전 및 향후 버전의 CanMEDS와의 연관성을 요약합니다. 가상 진료의 관련 개념은 이번 호의 다른 기사에서 다룹니다.4
The need for enhanced physician competency in the use of health data and information is broadly acknowledged. A recent review1 Identified data-informed medicine as a concept that is underrepresented in the CanMEDS physician competency framework2 and the Royal College “Task Force Report on Artificial Intelligence and Emerging Digital Technologies” recommended incorporating related competencies into CanMEDS.3 Data-informed medicine relates to competencies required for the collection, use, and sharing of data and other digital information that is needed by physicians to deliver quality patient health service. This primer summarizes the concept of data-informed medicine and its links to former and future iterations of CanMEDS. The related concept of virtual care is addressed in another article in this issue.4

데이터 기반 의료란 무엇이며 의사의 역량에 중요한 이유는 무엇인가요?
What is Data-Informed Medicine and why is it important to physician competency?

현대 사회의 많은 부분에서 아날로그 정보 프로세스는 풍부한 데이터를 생성하는 디지털 워크플로우로 대체되었습니다. 이러한 변화는 여행, 상거래, 엔터테인먼트, 정치, 사회적 상호작용 등 대부분의 사회 분야에서 혁신을 가져왔습니다. 그러나 의료 분야에서는 이러한 가치 제안을 활용하는 속도가 느리고 디지털 의료 데이터가 기하급수적으로 증가하고 있음에도 불구하고 제대로 활용되지 않고 있습니다. 데이터 아키텍처를 의도적으로 설계하기보다는 거버넌스, 공공 정책 또는 신기술의 부산물로서 우연히 발생하는 경우가 많기 때문에 의료 데이터 구조가 무질서하게 구성되는 경우가 많습니다. 양질의 의료 서비스를 위한 증거 기반 데이터 아키텍처의 근본적인 중요성에 대한 이해가 널리 부족하다는 점이 이러한 접근 방식의 근간을 이루고 있습니다.  
In much of modern society, analogue information processes have been replaced by digital workflows that are generating an abundance of data. This has been transformative for most sectors of society including travel, commerce, entertainment, politics, and social interaction. However, the health sector has been slow to harness the value proposition, and digital health data are underutilized despite being collected at an exponentially increasing rate. Rather than being intentional in the design of data architecture, our health data construct is frequently disorganized and occurs by happenstance as a byproduct of governance, public policy, or new technologies. A widespread lack of literacy about the foundational importance of evidence-based data architecture to quality health service underlies this approach.

개인 및 인구 수준의 건강 데이터가 의학적 의사 결정 방식을 변화시키면서 의학은 진화하고 있습니다.5

  • 앞으로 의료계는 데이터의 힘을 활용하여 건강 데이터를 일상적으로 수집하고 분석하여 건강 결정 및 시스템 개선에 필요한 지식을 생성하는 학습 의료 시스템을 개발해야 합니다.6
  • 그 결과 환자 치료에 정보를 제공하고 공익을 증진하기 위해 건강 데이터의 수집, 교환, 집계 및 분석을 통합하는 데이터 기반 의학의 실천이 이루어질 것입니다.
  • 데이터 기반 의학은 인간의 인지능력을 대체하는 것이 아니라 의료 서비스 제공자가 의료 데이터를 전문적으로 활용하여 진료를 최적화하도록 요구할 것입니다. 

The practice of medicine is evolving as individual and population-level health data change how medical decisions are made.5 

  • Moving forward, the medical profession will need to harness the power of data to develop learning health systems that routinely collect and analyze health data to generate knowledge to inform health decisions and/or system improvements.6 
  • The result will be the practice of data-informed medicine that incorporates the collection, exchange, aggregation, and analysis of health data to inform patient care and promote public good.
  • Rather than replacing human cognition, data-informed medicine will require health providers to expertly leverage health data to optimize their practice.

'인간과 기계'의 데이터 협력이라는 새로운 패러다임을 뒷받침하기 위해서는 의료 데이터의 수집, 정리, 저장, 교환, 집계, 해석을 통해 양질의 환자 치료를 촉진하는 새로운 의사 역량이 필요합니다.7,8. 현재 의료 정보 시스템의 품질이 다양하고 의료 데이터 아키텍처, 의료 데이터 사용, 양질의 의료 서비스 제공 간의 관계를 보여주는 커리큘럼 콘텐츠가 부족하기 때문에 의사 수련생이 이러한 영역에서 역량을 갖추도록 하는 것은 어려운 일입니다.

  • 학부 의학교육에 보건 데이터 커리큘럼을 의미 있게 통합해야 한다는 요구에도 불구하고8 가시적인 변화는 거의 일어나지 않았으며, 기본적인 보건 데이터 역량이 부족하고 파편화된 디지털 기술 및 공공 정책 환경에서 활동할 것으로 예상되는 의료 전문가 집단이 계속 양성되고 있습니다.
  • 또한 데이터 리터러시 부족과 제대로 통합되지 않은 기술은 의사의 소진에 기여하고 있습니다.9

포괄적인 디지털 의료 데이터의 잠재력을 활용하여 환자 치료와 인구 건강을 개선하려면 의사에게 기초적인 의료 데이터 리터러시와 전문성을 갖추는 것이 필수적입니다.
To support this new paradigm of ‘human and machine’ data cooperation will require new physician competencies;7,8 the collection, organization, storage, exchange, aggregation, and interpretation of health data to facilitate high-quality patient care. Ensuring that physician trainees are competent in these areas is challenging due to current variability in quality of health information systems and a shortfall of curricular content demonstrating the relationship between health data architecture, health data use, and the provision of quality health services.

  • Despite calls for the meaningful integration of health data curriculum in undergraduate medical education8 little tangible change has occurred, and a cohort of medical professionals continues to be trained who lack basic health data competencies, and are expected to function in a fragmented digital technology and public policy environment.
  • Further, the lack of data literacy and poorly integrated technology is contributing to physician burnout.9 

Equipping physicians with foundational health data literacy and expertise is essential to harness the potential of comprehensive digital health data to improve patient care and population health.

여기에서는 의사가 데이터를 수집, 교환, 집계, 분석하여 올바른 데이터 기반 의학을 실천할 수 있도록 핵심 역량을 강화하기 위해 CanMEDS의 업데이트를 제안합니다(표 1).
Herein, we suggest updates to CanMEDS to promote core competencies that will enable physicians to collect, exchange, aggregate, and analyze data to practice sound data-informed medicine (Table 1).

 

데이터 기반 의학은 2015 CanMEDS 역량 프레임워크에서 어떻게 표현됩니까?
How is Data-Informed Medicine represented in the 2015 CanMEDS competency framework?

데이터 기반 의학은 2015 CanMEDS 역량 프레임워크에 포함된 용어가 아니었다.2 의료 정보학은 리더 역할(1.4)에 언급되어 있지만 구체적으로 정의되어 있지는 않습니다. 이러한 역량을 제안하기 위해 캐나다 의학위원회에서 채택한 정의를 활용하는데, 캐나다 의학위원회는 의료 정보학"의료 서비스에서 정보[및 데이터] 설계 및 사용에 대한 연구"로 정의합니다.10 의료 정보학에 대한 정의를 다음과 같이 제안합니다: "양질의 의료 서비스를 증진하기 위해 의사가 의료 정보학 지식을 적용하는 것." 2015년 프레임워크에서는 의료 전문가, 건강 옹호자, 학자의 역할에 따른 정보 활용에 대해 언급하고 있지만, 데이터 기반 의료를 최적화하는 데 필요한 여러 역량은 명시되어 있지 않습니다.
Data-informed medicine is not a term that is acknowledged in the 2015 CanMEDS competency framework.2 Health informatics is mentioned under the Leader role (1.4), but it is not specifically defined. For the purposes of these proposed competencies, we utilize a definition adapted from the Medical Council of Canada, who define health informatics as “the study of information [and data] design and use in health care.”10 In turn we propose the following definition of medical informatics: “the application of health informatics knowledge by physicians to promote quality health services.” While the 2015 framework does mention the use of information under the medical expert, health advocate, and scholar roles, the many competencies required to optimize data-informed medicine are not explicit.

2015 CanMEDS 의사 역량 프레임워크에 이러한 개념이 없다는 점을 고려할 때,2 최근 몇 년간 데이터 기반 의학의 중요성이 강조되면서 의료 정보 교환, 의료 데이터 형평성, 의료 데이터 상호운용성 및 데이터 분석에 대한 관심이 높아진 지난 10년 동안 이 분야에서 일어난 변화를 인식하는 것이 중요합니다.
When considering the absence of this concept within the 2015 CanMEDS physician competency framework,2 it is important to recognize the changes that have occurred in this field over the past decade, marked by an increased focus on health information exchange, health data equity, health data interoperability, and data analytics that have prompted an emphasis on the importance of data-informed medicine over recent years.

데이터 기반 의학이 2025년 CanMEDS 역량 프레임워크 내에서 어떻게 더 잘 표현될 수 있을까요?
How can Data-Informed Medicine be better represented within the 2025 CanMEDS competency framework?

왕립대학의 "인공지능 및 신흥 디지털 기술에 관한 태스크포스 보고서"는 데이터 정보 의학을 지원하기 위한 새로운 역량의 중요성을 강조하면서 '디지털 건강 리터러시'를 8번째 CanMEDS 역할로 추가할 것을 제안했습니다.3 그러나 우리는 이 개념과 관련된 역량(가상 진료에 관한 관련 기사4에서도 다루고 있음)이 기존의 CanMEDS 역할에 포함되어야 한다고 생각합니다. 따라서 고유한 역할을 신설하기보다는 데이터 기반 의료의 핵심 요소를 포함하도록 기존 지원 역량을 수정할 것을 제안합니다. 
Underscoring the importance of new competencies to support data-informed medicine, the Royal College “Task Force Report on Artificial Intelligence and Emerging Digital Technologies” suggested that ‘Digital Health Literacy’ should be added as an eighth CanMEDS role.3 However, we believe that competencies related to this concept (which are also addressed in a related article on virtual care4) should span existing CanMEDS roles. We therefore suggest modification of existing enabling competencies to include key elements of data-informed medicine, rather than the creation of a unique role.

2025 CanMEDS에 통합된 개념에는 다음 등이 포함됩니다. 

  • 의료 서비스에서 환자 데이터의 교환, 집계, 분석 및 활용을 촉진하기 위한 환자 데이터의 수집 및 저장, 
  • 개인 건강 정보에 대한 환자 접근성 개선, 
  • 개인 및 시스템 성과 개선을 위한 건강 데이터 사용 촉진 

Concepts that have been integrated include

  • the collection and storage of patient data to facilitate its exchange, aggregation, analysis, and utilization in medical service;
  • improving patient access to personal health information; and
  • promoting the use of health data for individual and system performance improvement.

이러한 역량을 효과적으로 통합하기 위해서는 의료 교육 및 의료 서비스에 대한 접근 방식에 체계적이고 문화적인 변화를 수용하는 디지털 시대의 의학교육을 체계적으로 재구상해야 합니다. 의사는 데이터 기반 의료 서비스를 제공하는 데 있어 필수적인 파트너입니다. 의사들이 진료 과정에서 생성하는 데이터는 임상 치료와 의료 시스템 계획, 혁신, 인구 건강 및 연구에 필수적입니다. 이 백서에 설명된 역량은 의료 데이터와 관련된 기회와 위험이 증가함에 따라 의사가 포괄적이고 조율된 환자 중심적인 방식으로 기여할 수 있는 역량을 보장하기 위한 것입니다. 
To effectively integrate these competencies, a systematic reimagination of digital-age medical education is required that embraces a systemic and cultural shift in our approach to medical training and health service. Physicians are essential partners in the delivery of data-informed care. The data that their practices generate are essential to clinical care and health system planning, innovation, population health, and research. The competencies described in this paper are intended to ensure the capacity of physicians to contribute in a comprehensive, coordinated and patient-centered way as the opportunities and risks associated with health data grow.


Can Med Educ J. 2023 Mar 21;14(1):54-57. doi: 10.36834/cmej.75440. eCollection 2023 Mar.

Data-Informed Medicine in CanMEDS 2025

Affiliations

1University of Saskatchewan, Saskatchewan, Canada.

2Royal College of Physicians and Surgeons of Canada, Ontario, Canada.

3University of Toronto, Ontario, Canada.

4University of Alberta, Alberta, Canada.

5Canadian VIGOUR Centre, Alberta, Canada.

6University of Ottawa, Ontario, Canada.

7College of Physicians & Surgeons of Alberta, Alberta, Canada.

PMID: 36998504

PMCID: PMC10042776

DOI: 10.36834/cmej.75440

CanMEDS 2025에서 의사 휴머니즘(Can Med Educ J. 2023)
Physician Humanism in CanMEDS 2025

 

 

소개
Introduction

캐나다 의사들은 과중한 의료 시스템에서 일하면서 취약성, 스트레스, 소진에 대한 인식이 부족합니다. 의료 인력 부족, 진료의 복잡성 증가, 코로나19 팬데믹은 이러한 문제를 더욱 심화시켜 환자 치료와 의사의 자기 관리에 영향을 미쳤습니다. 이러한 맥락에서 최근 한 검토에서 의사 휴머니즘이 CanMEDS 의사 역량 프레임워크에서 잘 알려지지 않은 개념으로 확인된 것은 놀라운 일이 아닙니다.1 의사 휴머니즘을 명시적으로 인정하고 존중하는 것은 건강하고 성실한 의사를 개발하고 유지하는 데 필요하며, 이는 환자에게 효과적인 인문학적 치료를 제공할 수 있는 의사의 능력을 뒷받침하는 것입니다.2
Canadian physicians experience underacknowledged vulnerability, stress, and burnout while working in an overburdened healthcare system. Health workforce deficits, increasing complexity of care, and the COVID-19 pandemic have magnified these challenges, impacting patient care and physician self-care. Within this context, it is no surprise that a recent review identified physician humanism as an underrepresented concept in the CanMEDS physician competency framework.1 Explicitly acknowledging and honouring physician humanity is necessary to develop and sustain healthy and wholehearted physicians, which also underpins physicians’ ability to provide effective humanistic care for patients.2

의사 인본주의란 무엇이며 의사의 역량에 중요한 이유는 무엇인가요?
What is Physician Humanism and why is it important to physician competency?

의사 휴머니즘내적 요소와 외적 요소를 모두 포함합니다.

  • 의사가 자신의 인간성을 경험하고 '자기 자신'과의 관계를 발전시키는 것
  • 환자를 인본적으로 돌보고 가족, 동료, 의료 시스템과 상호작용하는 데 기여하는 것

최근 문헌에서 주목받고 있는 주제인 의사의 웰니스는 의사 휴머니즘의 두 가지 측면에 대한 담론과 중요한 연관성을 가지고 있습니다. 역사적으로 의사들은 환자, 팀, 기관 등 타인의 필요를 자신의 필요보다 우선시하는 데 전념해 왔습니다. 의사 사회 계약에 대한 신뢰는 이러한 이타주의에 의해 촉진되며, 이타적인 의사 영웅의 패러다임은 종종 칭송받습니다. 그러나 의사도 개인적인 욕구, 한계, 취약성, 불완전성, 타락성, 사망률을 지닌 인간일 뿐입니다. 의사 휴머니즘의 개념은 의사의 신체적 필요(영양, 수면, 인지적 휴식), 사회적 필요(개인적 안전, 의미 있는 관계), 실존적 필요(가치, 의미)의 정당성과 함께 의사의 고유한 인간성과 인격성을 인정하는 것입니다. 
Physician humanism has both inward and outward facing components;

  • physician experiences of their own humanity and development of relationship with “self,” and
  • physician contributions towards humanistic care of patients and interactions with their families, colleagues, and the healthcare system.

Physician wellness, a prominent topic in the recent literature, has important links to discourse on both facets of physician humanism. Historically, physicians have committed to raise the needs of others—their patients, teams, and institutions - above their own. Trust in the physician social contract is facilitated by such altruism and the paradigm of the selfless physician hero is frequently celebrated. However, physicians are simply human with personal needs, limitations, vulnerabilities, imperfections, fallibility, and mortality. The concept of physician humanism recognizes the inherent humanity and personhood of physicians, along with the legitimacy of their physical needs (nutrition, sleep, cognitive rest), social needs (personal safety, meaningful connection), and existential needs (value, meaning).

실제로 의사가 자신의 인격과 자비로운 관계를 유지하는 것은 환자와 다른 관계에서 인문학적 치료를 확장하는 데 도움이 됩니다. 자기 돌봄은 인간성을 유지하는 데 중요한 기여를 하지만, 휴머니즘은 의사 개인의 필요를 넘어 가치와 관계, 자기와 '존재'가 세상과 타인과의 관계에서 표현되는 방식을 포함합니다.2 타인의 감정에 공감하는 능력인 공감은 의학 교육 과정에서 감소하는 것으로 나타났지만 예술과 인문학에서의 성찰과 경험을 통해 키울 수 있는 휴머니즘의 핵심 요소입니다. 의사가 자기 연민을 발휘하면서 자신의 감정을 파악하고 효과적으로 다룰 수 있는 능력을 유지하는 것은 휴머니즘적 진료의 기본입니다.

In fact, maintaining compassionate connection with their own personhood supports physicians in extending humanistic care to patients and in other relationships. While self-care is an important contributor to maintaining one’s humanity, humanism extends beyond the individual physician’s personal needs to include values and relationships, the ways in which self and “being” are expressed in the world and in relationship with others.2 Empathy, an ability to connect with the emotions of another, is a key element of humanism which has been shown to decline throughout medical training but can be nurtured through reflection and experiences in the arts and humanities. It is fundamental to humanistic care that physicians maintain the ability to identify and effectively navigate their own emotions, while employing self-compassion.

의사의 인간성에 대한 부정은 의사의 건강에 해로운 결과를 초래하며, 이는 의사의 건강 악화, 중독, 소진, 자살, 직업 이탈에 대한 통계에서 잘 드러납니다.3 의사와 환자의 인간성에 대한 무시는 현재 시스템에서 인문학적 치료가 부족하다는 피드백에 반영되어 있습니다.4 의료 및 의학교육 시스템은 과도한 업무량, 수면 부족, 부족한 자원, 경쟁 환경, 낙인, 정신건강을 위한 자원 부족 등 의사의 휴머니즘을 위협하는 수많은 요인이 존재합니다.5 의료 및 의학교육 시스템이 의사의 휴머니즘을 포용하고 육성하지 못하면 의사는 환자를 위한 양질의 인문학적 진료를 지속하는 데 어려움을 겪게 될 것입니다. 모든 리더와 이해관계자는 의사의 지속적인 자기 희생의 위험에 함께 맞서야 합니다. 막대한 개인적, 사회적 비용 없이 의사 휴머니즘을 계속 무시하는 것은 현실적이지 않습니다.4 
Denial of physician humanity has deleterious consequences for physician wellness that are underscored by statistics on physician ill-health, addiction, burnout, suicide, and exodus from the profession.3 Disregard for physician and patient humanity is reflected in feedback on the lack of humanistic care in the current system.4 Healthcare and medical education systems present countless threats to physician humanism including excessive workloads, sleep deprivation, insufficient resources, competitive environments, stigma and lack of resources for mental health.5 If healthcare and medical education systems fail to embrace and nurture physician humanism, physicians will continue to suffer as will their ability to sustain high-quality, humanistic care for patients. All leaders and stakeholders must together confront the dangers of continuous physician self-sacrifice; it is not realistic to perpetually disregard physician humanism without significant personal and societal cost.4

2015 CanMEDS 역량 프레임워크에서 의사 휴머니즘은 어떻게 표현되어 있나요?
How is Physician Humanism represented in the 2015 CanMEDS competency framework?

CanMEDS 의사 역량 프레임워크는 "역동적이고 점점 더 까다로워지는 의료 환경에서 사회적 요구"를 충족하기 위해 의사에게 요구되는 역량을 설명합니다.6 이 프레임워크는 "사람으로서의 의사" 역할에 의사 인본주의를 통합한 기초적인 온타리오 미래 의사 교육 프로젝트(EFPO)에서 파생되었습니다.7 이 역할의 일부 개념이 캔메즈 전문가, 의사소통자, 협력자, 리더 역할에 분산되어 있지만(표 1B), 의사의 사람됨은 CanMEDS 에 명확하게 포함되지 않았습니다. 의사의 인격은 인정된 현실이며 역량으로 정의할 수 있는 역할이 아니라고 주장할 수도 있지만, 우리는 의사의 인격이 의사 역량 프레임워크에서 중요한 위치를 차지할 가치가 있다고 생각합니다. 이에 비해 네덜란드에서 채택한 CanMEDS 프레임워크는 꽃의 줄기로서 ' Reflector' 역할을 우선시하며, 의사 수련과 역량에 대한 담론에서 의사 인본주의의 중요성을 강조합니다.8
The CanMEDS Physician Competency Framework describes the required competencies of physicians to meet “societal needs in a dynamic and increasingly demanding health care environment.”6 It derives from the foundational Educating Future Physicians of Ontario Project (EFPO), which notably incorporated physician humanism in a “Doctor as Person” role.7 While some concepts from this role were distributed among the CanMEDS Professional, Communicator, Collaborator, and Leader roles (Table 1B), physician personhood was not explicitly included in CanMEDS. While it could be argued that physician personhood is an acknowledged reality and not a role to be defined by competencies, we believe it warrants a prominent place in our physician competency framework. Comparatively, the Netherlands’ adaption of the CanMEDS framework prioritizes a “Reflector” role as the stem of the flower, asserting the importance of this aspect of physician humanism in discourse on physician training and competence.8

 

 

CanMEDS 2015의 의사 휴머니즘 관련 역량은 타인(환자, 동료, 기관)의 외형적 요구에만 초점을 맞추고 의사 자신의 인간성에 대한 충분한 관심을 소홀히 한다는 점에서 제한적이며 잠재적으로 해로울 수 있습니다. CanMEDS는 의사가 자신의 인간성을 효과적으로 탐구하고 육성하는 데 필요한 역량과 평생의 개인적, 직업적 정체성 형성을 통해 자아에 대한 인문학적 접근을 적절히 인정하지 않습니다.
The competencies related to physician humanism in CanMEDS 2015 are limited and potentially harmful in that they focus solely on the outward facing needs of others (patients, colleagues, and institutions), while neglecting sufficient attention to physicians’ own humanity. CanMEDS does not adequately acknowledge the competencies required by physicians to effectively explore and nurture their own humanity and a humanistic approach to self through lifelong personal and professional identity formation.

의사 인본주의가 2025 CanMEDS 역량 프레임워크 내에서 어떻게 더 잘 표현될 수 있을까요?
How can Physician Humanism be better represented within the 2025 CanMEDS competency framework?

2025 CanMEDS 프레임워크 업데이트는 의사 휴머니즘을 보다 명시적으로 인정하고 가치를 부여하여 의사, 환자, 의료 시스템의 복지에 필수적인 관련 역량을 강조할 수 있습니다.7-9 그러나 이는 쉽지 않을 것입니다. 복잡한 구조인 의사 휴머니즘은 쉽게 정의하거나 가르치거나 평가할 수 없습니다. 더 큰 문제는 이러한 구조와 관련된 역량을 정의하고 평가하는 것이 애초에 의사의 휴머니즘을 높이는 근본적인 가치와 목표를 훼손할 수 있다는 점입니다.9 예를 들어, 평가를 위해 휴머니즘적 행동을 정의하면 다음의 위험이 따릅니다.

  • 환원주의,
  • 성과 전시,
  • 교과과정에 투자할 가치가 있는 휴머니즘의 관찰 불가능한 측면(예: 감정, 가치) 무시,
  • 자기 관리 및 건강에 대한 개인적인 경험의 부적절한 평가,
  • 평생, 반성, 회복을 목적으로 하는 개발 측면에 대한 총평적 평가 스트레스

The 2025 CanMEDS framework update could more explicitly acknowledge and value physician humanism, underscoring its associated competencies as essential to the wellbeing of physicians, patients, and the healthcare system.7-9 However, this will be challenging. As a complex construct, physician humanism is not easily defined, taught, or assessed. Worse, defining and assessing competencies related to this construct may undermine the fundamental value and goals of elevating physician humanism in the first place.9 For example, defining humanistic behaviours for evaluation risks

  • reductionism,
  • performative display,
  • neglect of non-observable aspects of humanism worthy of curricular investment (i.e., emotions, values),
  • inappropriate evaluation of personal experiences of self-care and wellness, and
  • summative appraisal stress for an aspect of development intended to be lifelong, reflective, and restorative.

이러한 위험을 인식하고 14개의 새로운 핵심 역량을 제안하고 기존의 핵심 역량 1개를 조정하여 의사 휴머니즘이 나아갈 방향을 제시했습니다. 이러한 제안은 전문가 의견과 저자 그룹 간의 합의를 바탕으로 개발되었으며, 의사 휴머니즘을 CanMEDS 2025에 보다 직접적으로 통합할 수 있는 수단으로 제안되었습니다(표 1C). 이러한 역량의 평가로 인한 부정적인 영향을 방지하기 위해, 저자들은 이러한 역량을 평가의 목적으로 규정하지 않고 평생의 개인적 및 전문적 개발, 성찰적이고 협력적인 관행, 성장 마인드 증진을 위한 탐구와 육성을 목적으로 규정할 것을 제안합니다. 목표 설정, 등급별 경험, 건설적인 피드백, '실패'를 통한 학습을 통해 시간이 지남에 따라 자신과 자신의 능력을 개발할 수 있다는 믿음을 수용하는 성장 마인드를 보건 전문직 교육에 도입하면 학습 환경 개선, 학습자 복지, 어려움 속에서도 회복력 향상 등의 이점을 얻을 수 있습니다.10 
Acknowledging these risks, we have outlined a way forward for Physician Humanism by suggesting 14 new key competencies and adapting one existing key competency. These suggestions were developed based on expert opinion and consensus among our author group as a proposed means by which physician humanism could be more directly integrated into CanMEDS 2025 (Table 1C). To prevent adverse impacts from assessment of these competencies, the authors propose they are not delineated for assessment, but instead for exploration and nurturing of lifelong personal and professional development, reflective and collaborative practices, and promotion of a growth mindset. The benefits of employing a growth mindset in health professions education, whereby belief in the ability to develop oneself and one’s abilities over time through goal setting, graded experiences, constructive feedback, and learning through “failure” is embraced, include enhanced learning environments, learner well-being, and resiliency, even in the face of difficulty.10

이러한 역량을 정교화하는 '인간으로서의 의사' 역할에 우선순위를 두도록 CanMEDS를 확장하면 의사 휴머니즘의 중요성을 더욱 뚜렷하게 부각할 수 있습니다. 이 역할에는 전문성과 타인에 대한 개인적 책임을 넘어 의료 시스템의 어려운 제약 속에서 의사들이 자신에 대한 인문학적 접근 방식을 개발할 수 있도록 지원하는 역량이 포함될 것입니다. 의사 휴머니즘은 모든 역량 역할에 걸쳐 의사의 효과성에 영향을 미치므로, CanMEDS의 업데이트된 그림 표현은 '인격체로서의 의사' 역할을 꽃의 줄기, 잎, 뿌리와 같이 지지하고 양육하는 부분으로 상징할 수 있습니다.7,8
Preferably, expanding CanMEDS to prioritize a ‘Doctor as Person’ role in which these competencies are elaborated would more distinctly highlight the importance of physician humanism. This role would include competencies that extend beyond professionalism and personal responsibility to others, to support doctors in developing a humanistic approach towards themselves as well, within the challenging constraints of the healthcare system. As physician humanism influences the effectiveness of physicians across all competency roles, an updated pictorial representation of CanMEDS could symbolize the ‘Doctor as Person’ role as the supporting and nurturing parts of the flower: the stem, leaves and roots.7,8


Can Med Educ J. 2023 Mar 21;14(1):13-17. doi: 10.36834/cmej.75536. eCollection 2023 Mar.

Physician Humanism in CanMEDS 2025

Affiliations

1Department of Family Medicine, McMaster University, Ontario, Canada.

2Department of Medicine, University of Alberta, Alberta, Canada.

3Royal College of Physicians and Surgeons of Canada, Ontario, Canada.

4Department of Pediatrics, McGill University, Quebec, Canada.

5University of Saskatchewan, Saskatchewan, Canada.

6Department of Emergency Medicine, Queen's University, Ontario, Canada.

PMID: 36998505

PMCID: PMC10042789

DOI: 10.36834/cmej.75536

CanMEDS 2025에서 반인종주의 (Can Med Educ J. 2023)
Anti-racism in CanMEDS 2025

 

소개
Introduction

캐나다에서 흑인, 원주민, 유색인종은 인종차별과 억압의 빈번한 표적이 되고 있습니다. 캐나다의 흑인은 수 세기에 걸친 원주민 커뮤니티와 최근 몇 세대에 걸쳐 이민 온 커뮤니티(예: 카리브해 또는 아프리카계) 등 다양한 출신 배경을 가지고 있습니다. 이들은 모두 캐나다의 교육, 의료 및 사법 기관에 뿌리를 둔 신념, 태도, 편견, 고정관념, 차별을 강화하는 정책과 관행으로 인해 억압을 경험했다는 공통점을 가지고 있습니다. 원주민들은 다음에 의한 억압을 받아왔습니다.

  • [권력의 불균형, 제도적 장벽, 불평등한 결과]를 확립, 유지, 영속화시킨 [정착민 식민지 정책과 관행의 유산]에서 비롯된 [인종 기반 차별, 부정적인 고정관념, 불의에 의해 억압]
Black, Indigenous, and people of color are frequent targets of racism and oppression in Canada. Black people in Canada have diverse origins–centuries old communities and communities of recent immigration in the last few generations (such as with those of Caribbean or African descent). All share a common experience of oppression by policies and practices rooted in Canadian educational, healthcare, and justice organizations that reinforce beliefs, attitudes, prejudice, stereotyping, and/or discrimination. Indigenous peoples have been oppressed by
  • the race-based discrimination, negative stereotyping, and injustice stemming from the legacy of settler colonial policies and practices that have established, maintained, and perpetuated power imbalances, systemic barriers, and inequitable outcomes.

유색인종은 다양한 역사와 배경을 가진 무수히 많은 집단에 속하며, 비슷한 방식으로 억압받고 있습니다. 또한 인종, 종교, 능력, 성적 지향, 사회경제적 지위, 성별, 성 정체성 등다양한 정체성이 교차하면서 배제와 차별이 더욱 심해집니다.1
People of color span a myriad of groups with diverse histories and backgrounds that are oppressed in similar ways. Additionally, intersecting identities of race, religion, ability, sexual orientation, socioeconomic status, gender and gender identity exacerbate exclusion and discrimination.1

우리 의료기관에서 널리 인정하지는 않지만, 인종차별적 관행과 이데올로기는 서양의학의 근간을 이루고 있으며2,3 계속해서 해를 끼치고 있습니다. 우리 의료계는 아직 이 사실을 의미 있게 직시하지 못하고 있습니다. 의료 서비스 제공자들이 근무하는 환경을 조사해 보면, 직장 내 학대 및 트라우마 경험에서 인종이 다른 의료 서비스 제공자들이 과대 대표되고 있습니다. 놀랍게도 흑인 의사의 70%4와 흑인 간호사의 88%5가 캐나다에서 직장에서 인종 차별을 경험했다고 보고했습니다. 인종이 다른 환자들을 대상으로 데이터를 강력하게 수집한다면 어떤 결과가 나올지 상상만 해도 알 수 있습니다. 의식적이든 무의식적이든 인종적 편견(예: 흑인 환자는 통증을 느끼지 못한다는 믿을 수 없는 믿음6)은 현재 의사 인력의 일부에 남아 있으며 임상 학습 및 업무 환경에 스며들어 안전성을 떨어뜨리고 건강 불평등을 악화시키며 환자의 신뢰를 약화시킬 수 있습니다.7
Although not widely acknowledged by our medical institutions, racist practices and ideologies are foundational underpinnings of Western Medicine2,3 and continue to cause harm. Our profession has yet to confront this truth in a meaningful way. When we examine the environments in which care providers practice, racialized care providers are overrepresented in the experience of workplace-related mistreatment and trauma. An alarming seventy percent (70%) of Black physicians4 and eighty-eight percent (88%) of Black nurses5 report experiences of racism in workplaces in Canada. One can only imagine what the data would show if robustly collected on racialized patients. Racial biases–conscious or unconscious (i.e. the incredulous belief that Black patients do not feel pain6)–persist in aspects of the current day physician workforce and can permeate the clinical learning and work environment, making it less safe, exacerbating health inequities, and eroding patient trust.7

개인적 차원에서 인종적 편견은 인종이 다른 환자 및 동료와의 상호작용에 영향을 미칠 수 있습니다. 인종적 편견이 학습 및 임상 환경에 스며들면 환자 치료가 손상되고 결과가 나빠집니다.8-14 연구자들은 백인에 대한 암묵적 선호를 가진 백인 수련의가 심근경색 혈전용해술을 할 때 흑인 환자가 아닌 백인 환자를 치료할 가능성이 더 높다는 사실을 발견했습니다.8 이 연구는 의사의 무의식적 편견이 임상 의사 결정에서 인종/민족 격차에 기여하고 의료 시술의 사용을 예측할 수 있음을 보여주었습니다. 백인 의사는 전문 분야에 관계없이 백인을 선호하는 암묵적인 선호를 가지고 있으며 때때로 백인이 아닌 환자를 열등하게 대하는 것으로 나타난 한 체계적 문헌고찰에서 보듯이 이러한 편견을 확인하지 않고 방치하면 편견이 지속될 수 있습니다.9
At an individual level, racial bias can affect interactions with racialized patients and colleagues. When racial bias permeates the learning and clinical environment patient care is compromised and outcomes are worse.814 Researchers found that white trainees with an implicit preference for white individuals were more likely to treat white patients, and not Black patients, with thrombolysis for myocardial infarction.8 This study showed that physicians’ unconscious biases may contribute to racial/ ethnic disparities in clinical decision-making and may predict the use of medical procedures. Left unchecked, such bias persists as shown in a systematic review which found white physicians, regardless of specialty, have an implicit preference of favoring white people and will sometimes treat non-white patients in an inferior fashion.9

제도적 차원에서 인종 편견은 적극적인 인종화로 이어질 수 있으며 흑인, 원주민 및 인종 차별 의사와 환자에게 안전하지 않은 업무 및 규제 환경을 조성할 수 있습니다.15 의료 환경에서 원주민 환자는 건강 결과에 영향을 미치는 심각하고 만연한 반원주민 인종 차별을 계속 경험하고 있습니다.10 최근 증거에 따르면 원주민 신분은 백인 환자에 비해 응급실에서 더 높은 중증도 분류 점수를 받을 확률이 낮고,7 흑인, 원주민, 인종차별 환자는 백인 환자보다 치료를 받기 위해 더 오래 기다리며,11 조직적 인종차별은 사망의 원인으로 입증되었습니다.12 요컨대, 인종차별적 치료는 사망을 초래합니다. 
At the systemic level, racial bias can lead to active racialization and create unsafe work and regulatory environments for Black, Indigenous and racialized physicians and patients.15 Indigenous patients in healthcare settings continue to experience significant and pervasive anti-Indigenous racism which has an impact on their health outcomes.10 Recent evidence demonstrates: that First Nations status is associated with lower odds of receiving higher acuity triage scores in the emergency department in comparison to white patients;7 Black, Indigenous and racialized patients wait longer than white patients to receive care;11 and systemic racism is a proven cause of death.12 In short, racist care kills.

캐나다에서 인종차별이 공중보건 비상사태로 선포되었음에도 불구하고16 의료기관과 규제 기관의 전면적이고 조직적이며 체계적인 조치가 부족합니다.17 우리 의료계는 반인종주의자가 되어야 합니다. 2015년에 개정된 CanMEDS 의사 역량 프레임워크18는 의료계가 반인종주의 의료에 필요한 기술을 반영하고, 알리고, 지원할 수 있는 기회를 제공합니다. 이 원고는 의학교육에서 새롭게 떠오르는 반인종주의 개념을 요약하고 이를 2025년 CanMEDS 의사 역량 프레임워크에 통합하기 위한 권장 사항을 제공하는 것을 목표로 합니다.
Despite racism being declared a public health emergency in Canada16 full-scale, coordinated, and systemic action from our medical institutions and regulatory bodies is lacking.17 Our profession needs to become anti-racist. The revision of the 2015 CanMEDS Physician Competency Framework18 provides an opportunity for the medical community to reflect, inform the skills, and support the conditions needed for anti-racist medicine. This manuscript aims to summarize emerging anti-racism concepts in medical education and to provide recommendations for incorporating them into the 2025 CanMEDS Physician Competency Framework.

반인종주의란 무엇이며 의사의 역량에 왜 중요한가?
What is anti-racism and why is it important to physician competency?

반인종주의는 조직적 인종차별을 포함한 인종차별의 존재를 인식하는 데 뿌리를 둔 프로세스, 체계적인 분석 방법, 사전 예방적 행동 방침입니다. 인종적으로 불평등한 결과와 집단 간 권력 불균형식별, 제거, 예방, 완화하고 불평등을 지속시키는 구조를 바꾸기 위해 적극적으로 노력합니다.13 
Anti-racism is a process, a systematic method of analysis, and a proactive course of action rooted in the recognition of the existence of racism, including systemic racism. It actively seeks to identify, remove, prevent, and mitigate racially inequitable outcomes and power imbalances between groups and change the structures that sustain inequities.13

반인종주의는 여러 가지 이유로 의사의 역량에 중요합니다. 

  • 첫째, 위에서 설명한 바와 같이 인종주의는 학습자, 동료, 환자, 지역사회의 건강과 웰빙에 직접적인 영향을 미칩니다.
  • 둘째, 불균등한 건강 결과, 건강 불평등, 심지어 사망에까지 기여하는 것은 인종이 아니라 인종차별입니다.19-21
  • 셋째, 캐나다 인구의 인종 및 민족적 다양성이 증가함에 따라 의료 전문가들이 변화하는 인구 통계의 요구를 충족하기 위해 새로운 성향과 기술을 개발하고 성장할 수 있는 기회와 책임이 생겼습니다.
  • 마지막으로, 의료계 내 인종차별에 맞서기 위해 캐나다의 모든 의사는 의학교육, 수련, 장학, 진료 등 어떤 분야에 종사하든 불편한 진실을 인식하고 받아들여야 합니다. 서양 의학의 토대는 인종차별적 관행과 이념에 기반을 두고 있으며2,3 이는 오늘날에도 지속되어 환자 치료와 인종차별적 동료와의 상호작용에 영향을 미치고 있다는 사실을 인정하고 받아들여야 합니다.

Anti-racism is important to physician competency for several reasons.

  • First, as outlined above, racism directly impacts the health and wellness of our learners, colleagues, patients, and communities.
  • Second, it is racism—and not race—that contributes to disparate health outcomes, health inequities, and even death.1921 
  • Third, the increasing racial and ethnic diversity of the Canadian population provides an opportunity and a responsibility for medical professionals to grow and develop new dispositions and skills to meet the needs of our shifting demographics.
  • Finally, in order to combat racism in medicine, all physicians in Canada –whether they are engaged in medical education, training, scholarship, or practice—must recognize and accept an uncomfortable truth; the foundation of Western medicine is grounded in racist practices and ideologies2,3 which persist today and affect patient care and interactions with racialized colleagues.


우리는 캐나다의 모든 의사가 인종주의가 환자 치료 결과와 흑인, 원주민 또는 유색인종으로 식별되는 의사 동료에게 미치는 영향을 해결하기 위해 반인종주의, 반억압적 진료에 대한 지속적인 역량을 입증해야 한다고 주장합니다.12 이러한 상황의 심각성은 새로운 진료 기준의 설정을 포함하되 이에 국한되지 않는 의료 전문가의 긴급한 조치와 시정 대응을 요구합니다.10 반인종주의 조치를 취하려면 명확한 언어 사용과 인종주의와 억압의 기원에 대한 확실한 개념적 이해, 이를 없애기 위한 대응이 필요하며 표 1은 자세한 용어집을 제시합니다. 표 1에서 의도적으로 누락된 용어는 의료 기관과 조직이 이 분야에서 달성하고자 하는 목표를 정의하기 위해 자주 사용하는 용어인 형평성, 다양성, 포용성입니다. 이러한 용어는 편안하고 열망을 불러일으키지만, 행동 지향적이지 않고 인종적 형평성이 필요한 집단이 앞으로 나아가는 것을 방해하는 문제인 인종차별과 억압을 명시적으로 언급하지 않기 때문에 인종차별의 맥락에서는 도움이 되지 않는다고 판단했습니다.
We argue that all physicians in Canada must demonstrate ongoing competence in anti-racist, anti-oppressive praxis, to address the impact of racism both on patient outcomes and on their physician colleagues who identify as Black, Indigenous, or people of color.12 The gravity of this situation demands urgent action and corrective responses from medical professionals, including but not limited to the setting of new practice standards.10 Anti-racist action requires the use of explicit language and solid conceptual understanding of the origins of racism and oppression, and counteractions to eliminate these; Table 1 provides a detailed glossary. Intentionally absent from Table 1 are terms that are frequently embraced by health care institutions and organizations to define what they aspire to achieve in this area: equity, diversity, and inclusivity. While these terms are comfortable and aspirational, we find them unhelpful within the context of racism because they are not action-oriented, and they do not explicitly name the issues that prevent racialized equity-deserving groups from moving forward: racism and oppression.

Term 용어 정의
Definition
Anti-Black racism 반흑인 인종 차별
교육, 의료, 사법 등 캐나다 기관에 뿌리를 둔 정책 및 관행으로 아프리카, 흑인, 카리브해 출신에 대한 신념, 태도, 편견, 고정관념 및/또는 차별을 반영하고 강화하는 것을 말합니다.24,25

The policies and practices rooted in Canadian institutions, such as education, healthcare, and justice, which mirror and reinforce beliefs, attitudes, prejudice, stereotyping, and/or discrimination towards people of African, Black, and Caribbean descent.
24,25
Anti-Indigenous racism 반원주민 인종 차별
이는 인디언법 및 기숙사 학교 제도와 같은 차별적인 연방 정책에서 분명하게 드러납니다. 또한 각 주의 형사 사법 및 아동 복지 시스템에서 원주민이 과대 대표되고 교육, 복지, 건강에서 불평등한 결과가 나타나는 것에서도 나타납니다. 원주민에 대한 적대감과 폭력 행위의 증가에서 반원주민 인종차별에 대한 개인의 생생한 경험을 확인할 수 있습니다.24

This is evident in discriminatory federal policies such as the Indian Act and the residential school system. It is also manifested in the overrepresentation of Indigenous peoples in provincial criminal justice and child welfare systems, as well as inequitable outcomes in education, well-being, and health. Individual lived-experiences of anti-Indigenous racism can be seen in the rise in acts of hostility and violence directed at Indigenous people.
24
Anti-oppression 반억압
반억압 접근법은 일부 집단에 혜택을 주고 다른 집단을 배제하는 사회 내 권력 불균형을 인식합니다. 이 접근법은 억압, 인종차별 및 기타 형태의 차별이 없는 환경을 조성하기 위한 전략을 개발하고자 합니다. 인종, 혈통, 출신지, 피부색, 출신 민족, 시민권, 신념, 성별(임신 포함), 성적 지향, 성 정체성, 성 표현, 나이, 범죄 기록, 결혼 여부, 가족 상태, 장애 등 눈에 보이거나 보이지 않는 정체성과 다양성의 교차점을 인정하고 다양한 정체성 간의 형평성을 증진하는 것을 목표로 합니다.24

An anti-oppression approach recognizes the power imbalance within society that attributes benefits to some groups and excludes others. This approach seeks to develop strategies to create an environment free from oppression, racism, and other forms of discrimination. It acknowledges the intersections of identity and diversity, both visible and invisible, including race, ancestry, place of origin, colour, ethnic origin, citizenship, creed, sex (including pregnancy), sexual orientation, gender identity, gender expression, age, record of offences, marital status, family status, and disability, and aims to promote equity between the various identities.
24
Anti-racism 반인종주의
반인종주의는 조직적 인종차별을 포함한 인종차별의 존재를 인식하는 데 뿌리를 둔 과정, 체계적인 분석 방법, 적극적인 행동 방침입니다. 반인종주의는 인종적으로 불평등한 결과와 집단 간의 권력 불균형을 식별, 제거, 예방, 완화하고 불평등을 지속시키는 구조를 바꾸기 위해 적극적으로 노력합니다.13

Anti-racism is a process, a systematic method of analysis, and a proactive course of action rooted in the recognition of the existence of racism, including systemic racism. Anti-racism actively seeks to identify, remove, prevent, and mitigate racially inequitable outcomes and power imbalances between groups and change the structures that sustain inequities.
13
Colonialism 식민주의
한 민족이나 권력이 다른 민족이나 지역을 지배하는 관행 또는 정책으로, 종종 식민지를 설립하고 일반적으로 경제적 지배를 목적으로 합니다. 식민지화 과정에서 식민지 지배자는 자국의 종교, 언어, 경제 및 기타 문화적 관행을 강요할 수 있습니다.26 식민주의는 크게 네 가지 유형으로 분류됩니다: 1) 정착민 식민주의, 2) 착취 식민주의, 3) 대리 식민주의, 4) 내부 식민주의.

A practice or policy of control by one people or power over other people or areas, often by establishing colonies and generally with the aim of economic dominance. In the process of colonization, colonizers may impose their religion, language, economics, and other cultural practices.
26 It is broadly classified into four types: 1) settler colonialism, 2) exploitation colonialism, 3) surrogate colonialism, and 4) internal colonialism.
Critical consciousness 비판적 의식 
파울로 프레이리에 의해 대중화된 개념으로, 현실에 개입하여 현실을 변화시키는 능력으로 정의됩니다. "의식 고양"이라고도 하는 이 개념에는 이러한 이해를 통해 깨달은 자신의 삶에서 억압적인 요소에 대항하는 행동이 포함됩니다.27 현대의 공식은 비판적 의식을 세 가지 요소로 나눕니다.

1) 비판적 성찰은 억압과 불평등이 존재하는 역사적, 제도적 방식에 대한 인식입니다.
2) 비판적 동기는 인지된 불평등을 해결하기 위해 인지된 능력 또는 도덕적 헌신입니다.
3) 비판적 행동은 인지된 불평등을 변화시키고, 도전하고, 이의를 제기하기 위한 개인적 또는 집단적 행동에 참여하는 것입니다.28

A concept, popularized by Paulo Freire, defined as the ability to intervene in reality to change it. Also known as “consciousness raising”, it includes taking action against the oppressive elements in one's life that are illuminated by that understanding.
27 Contemporary formulations divide critical consciousness into three components. 

1) Critical reflection is an awareness of both the historical and systemic ways oppression and inequity exist.
2) Critical motivation is the perceived capacity or moral commitment to address perceived inequalities.
3) Critical action is participation in individual or collective action to change, challenge, and contest perceived inequity.
28
Cultural safety 문화적 안전
문화적 안전은 치료를 받는 사람이 결정하는 결과입니다. 문화적 안전은 의료 서비스 제공자가 자신의 문화적 배경과 지배 문화가 소수 문화권에 서비스를 제공할 때 권력 관계의 본질을 성찰하여 내재된 위계를 해체하기 위해 노력할 것을 요구합니다. 서비스 제공자는 다른 집단의 신념과 문화적 관행을 조사하고 이해할 필요 없이 연령, 직업 또는 사회 계층, 인종적 배경, 성별, 성, 종교적 신념, 장애 등에서 자신과 다를 수 있는 사람들의 강점을 인정하고 장려해야 합니다. 문화적 안전을 위해서는 다수 문화권의 제공자가 소수 문화권에 대한 고정관념에 도전해야 합니다. 이는 다양성에 대한 긍정적인 인식을 촉진합니다.29

Cultural safety is an outcome determined by the recipient of care. It requires healthcare providers to reflect on their own cultural background and the nature of power relations in the provision of services to a minority culture by a dominant culture, so that the providers can work to dismantle the inherent hierarchy. Providers do not need to research and understand other groups’ beliefs and cultural practices; rather, they acknowledge and promote the strengths of those who may differ from them in age, occupation or social class, ethnic background, sex, sexuality, gender, religious belief, and disability. Cultural safety requires providers from the majority culture to challenge their own stereotyped views of a minority culture. It promotes positive recognition of diversity.
29
Epistemic racism 인식론적 인종주의
한 인종 집단의 지식을 다른 인종 집단보다 우월한 것으로 간주하는 것을 말하며, 여기에는 어떤 지식이 가치 있는 것으로 간주되는지뿐만 아니라 지식으로 간주되는지에 대한 판단도 포함됩니다.30

Refers to the positioning of the knowledge of one racial group as superior to another, it includes a judgment of not only which knowledge is considered valuable but is considered to be knowledge.
30
Intersectionality 교차성
사람들의 삶이 다중적이고 중첩된 정체성과 사회적 위치에 의해 형성되는 방식을 인정하는 프레임워크로, 이러한 요소들이 결합하여 추가적인 장벽이나 기회를 창출하는 등 해당 개인이나 집단에게 독특하고 뚜렷한 경험을 만들어낼 수 있습니다. 인종화의 맥락에서 이는 인종차별 또는 특권에 대한 사람들의 경험이 인종화된 한 집단 내를 포함하여 개인 또는 집단의 민족성, 원주민 정체성, 식민주의 경험, 종교, 성별, 시민권, 사회경제적 지위 또는 성적 지향과 같은 개인 또는 집단의 중첩된(또는 "교차하는") 사회적 정체성에 따라 다를 수 있고 달라질 수 있음을 인식하는 것을 의미합니다.31

A framework that acknowledges the ways in which people’s lives are shaped by their multiple and overlapping identities and social locations, which, together, can produce a unique and distinct experience for that individual or group, such as by creating additional barriers or opportunities. In the context of racialization, this means recognizing the ways in which people’s experiences of racism or privilege, including within any one racialized group, may differ and vary depending on the individual’s or group’s overlapping (or “intersecting”) social identities, such as ethnicity, Indigenous identification, experiences with colonialism, religion, gender, citizenship, socio-economic status or sexual orientation.
31
Microaggression 미시적 공격
소외된 집단(예: 성소수자, LGBTQ2S+, 장애)의 구성원에 대한 적대적, 경멸적, 부정적 비하 및 모욕미묘하게 그리고 종종 의도적 또는 비의도적으로 표현하는 일상적인 언어적, 행동적 또는 환경적 모욕, 발언 또는 행동으로, 일상적이고 일상적인 인종차별이라고도 합니다.24

Brief and common daily verbal, behavioral, or environmental indignities, comment or action that subtly and often intentionally or unintentionally expresses a hostile, derogatory, or negative slights and insults toward a member of a marginalized group (such as, but not limited to BIPOC, LGBTQ2S+, disability), also referred to as casual and everyday racism.
24
Positionality 지위
사회적 지위와 권력의 차이가 사회에서 정체성과 접근성을 형성하는 방식을 말합니다.32

Refers to the how differences in social position and power shape identities and access in society.
32
Power 권력
편안하고 안전하며 생산적이고 수익성 있는 삶을 사는 데 필요한 것을 얻을 수 있는 기회를 향상시키는 정보, 지식, 인맥, 경험 및 전문성, 자원, 의사 결정과 같은 특권에 대한 접근성.23

Access to privileges such as information, knowledge, connections, experience and expertise, resources, and decision-making that enhance a person’s chances of getting what they need to live a comfortable, safe, productive, and profitable life.
23
Privilege 특권
사회에서 지배적인 집단의 구성원에게 존재하는 불로소득의 권력, 혜택, 이점, 접근권 및 기회. 다른 집단에 비해 한 집단이 갖는 상대적 특권을 의미하기도 합니다. 페기 매킨토시의 글과 도구 '백인 특권'을 참조하세요: 보이지 않는 보따리 풀기"33를 참조하세요.

Unearned power, benefits, advantages, access, and opportunities that exist for members of the dominant group(s) in society. Can also refer to the relative privilege of one group compared to another. See Peggy McIntosh’s article and tool “White Privilege: Unpacking the Invisible Knapsack.”
33
Race 인종
주로 피부색이나 '내재적' 또는 '변하지 않는' 것으로 인식되는 기타 명백한 차이와 같은 신체적 특성(표현형)을 기준으로 사람들을 그룹으로 분류하는 데 사용되는 용어입니다.34 예를 들어, 사회 집단의 문화나 종교는 때때로 변하지 않고 내재적인 것으로 취급될 수 있습니다. 인종 범주는 과학이나 생물학에 근거한 것이 아니라 사회가 만들어낸 차이(즉, "사회적으로 구성된")에 근거하며, 사람들의 삶에 중대한 영향을 미칩니다. 인종 범주는 시간과 장소에 따라 달라질 수 있으며 민족, 문화 또는 종교적 집단과 겹칠 수 있습니다.

A term used to classify people into groups based principally on physical traits (phenotype), such as skin colour or other apparent differences perceived as “inherent” or “unchanging.”
34 For example, a social group’s culture or religion may sometimes be treated as unchanging and inherent. Racial categories are not based on science or biology but on differences that society has created (i.e., “socially constructed”), with significant consequences for people’s lives. Racial categories may vary over time and place, and can overlap with ethnic, cultural, or religious groupings.
Race Correction 인종 보정
'인종 조정', '인종 수정' 또는 '인종 규범화'라고도 합니다. 이러한 해로운 관행은 의료 서비스 제공자가 다른 기준, 즉 "환자의 인종 또는 민족에 따라 결과를 조정하거나 "수정"하는 진단 알고리즘 및 진료 지침을 사용함으로써 발생합니다."10 이러한 관행의 사용은 환자의 치료 및 지원 접근성에 영향을 미칩니다.

Also referred to as “race adjustment”, “race modification” or “race norming”. This harmful practice results from health care providers using different criteria, “diagnostic algorithms and practice guidelines that adjust or “correct” their outputs on the basis of a patient’s race or ethnicity.”
10 The use of this practice has implications for patient’s access to treatment and support.
Self-determination 자기결정권
각 개인이 스스로 선택하고 자신의 삶을 관리할 수 있는 능력을 말합니다. 이는 심리적 건강과 웰빙에 중요한 역할을 하며, 사람들이 자신의 선택과 삶을 통제할 수 있다고 느끼게 하여 참여 동기와 개인의 결과에도 긍정적인 영향을 미칩니다.35
Refers to each person's ability to make choices and manage their own life. It plays an important role in psychological health and well-being, and allows people to feel that they have control over their choices and lives, which positively impacts motivation to engage and even outcomes for individuals.
35
Settler Colonialism 정착민 식민주의
이러한 형태의 식민주의는 종종 종교적, 정치적 또는 경제적 이유로 식민지에 정착민을 대규모로 이주시키는 것을 포함합니다. 이러한 형태의 식민주의는 캐나다, 미국, 호주와 같은 국가의 원주민들이 정착민들이 기존 인구를 대체하면서 경험했습니다. 이러한 형태의 식민주의는 토지와 번영을 차지하기 위한 목적으로 많은 수의 정착민들이 식민지로 이주하는 것을 포함합니다.
This form of colonialism involves the large-scale immigration of settlers to colonies, often motivated by religious, political, or economic reasons. This form of colonialism has been experienced by Indigenous peoples in countries such as Canada, the United States and Australia as settlers supplant prior existing populations. This form of colonialism involves a large number of settlers emigrating to colonies for the expressed purpose of claiming land and prosperity.
Structural competency 구조적 역량
증상, 태도 또는 질병처럼 임상적으로 정의되는 다양한 문제(예: 우울증, 고혈압, 비만, 흡연, 약물 '비순응', 트라우마, 정신병)가 의료 및 음식 배달 시스템, 구역법, 도시 및 농촌 인프라, 의료화, 심지어 질병과 건강의 정의와 같은 문제에 대한 상위 결정의 하류 영향을 식별하는 훈련된 능력입니다.36
The trained ability to discern how a host of issues defined clinically as symptoms, attitudes, or diseases (e.g. depression, hypertension, obesity, smoking, medication “non-compliance”, trauma, psychosis) also represent the downstream implications of upstream decisions about such matters as health care and food delivery systems, zoning laws, urban and rural infrastructures, medicalization, or even the very definitions of illness and health.
36
Structural racism 구조적 인종차별
공공 정책, 제도적 관행, 문화적 표현 및 기타 규범이 인종화된 집단의 불평등을 강화하고 영속화하는 방식으로 작동하는 시스템. 이는 백인의 특권과 '피부색'과 관련된 불이익이 시간이 지남에 따라 지속되고 적응할 수 있도록 허용한 우리 역사와 문화의 차원을 식별합니다. 구조적 인종차별은 소수의 사람이나 기관이 선택한 것이 아니라 우리 모두가 존재하는 사회, 경제, 정치 시스템의 특징입니다.37
A system in which public policies, institutional practices, cultural representations, and other norms work in ways to reinforce and perpetuate racialized group inequity. It identifies dimensions of our history and culture that have allowed white privilege and disadvantages associated with “colour” to endure and adapt over time. Structural racism is not something that a few people or institutions choose to practice; instead, it has been a feature of the social, economic, and political systems in which we all exist.
37
Systemic racism 시스템적 인종차별
일부 인종 집단을 배제, 이동 또는 소외시키거나 가치 있는 혜택과 기회에 접근하는 데 불공정한 장벽을 만드는 조직 문화, 정책, 지침, 관행 또는 절차. 이는 종종 조직 문화, 정책, 지침, 관행, 절차가 중립적으로 보이지만 일부 그룹에 특권을 부여하고 다른 그룹에 불이익을 주는 영향을 미치는 제도적 편견의 결과입니다.19
Organizational culture, policies, directives, practices, or procedures that exclude, displace, or marginalize some racialized groups or create unfair barriers for them to access valuable benefits and opportunities. This is often the result of institutional biases in organizational culture, policies, directives, practices, and procedures that may appear neutral but have the effect of privileging some groups and disadvantaging others.
19
Trauma-informed care 트라우마 정보에 기반한 치료
치유를 지향하는 효과적인 의료 서비스를 제공하기 위해서는 환자의 과거와 현재 생활 상황에 대한 완전한 그림이 이해되어야 한다는 것을 인정하는 치료 접근법입니다. 이러한 접근 방식은 의료기관의 임상 및 조직 수준에서 모두 구현되어야 효과적입니다.22
An approach to care that acknowledges that a complete picture of a patient’s life situation — past and present — must be understood in order to provide effective health care services with a healing orientation. This approach must be implemented at both the clinical and organizational levels of institutions to be effective.
22
Upstander intervention 방관자Upstander 개입
방관자Upstander는 고위험 또는 유해한 결과를 초래할 수 있는 행동을 목격하고 상황을 개선하기 위해 개입을 선택하는 사람입니다. 업스탠더가 개입하는 상황에는 일상적인 피해 행위(예: 길거리 괴롭힘, 따돌림, 차별적 발언, 성차별적 농담) 또는 고위험 상황(예: 신체적 폭력, 성폭행, 관계 폭력으로 이어질 수 있는 상황)이 포함됩니다.38
An upstander is someone who witnesses a behavior that could lead to something high risk or harmful and makes the choice to intervene to make things better. Situations an upstander intervenes in include daily acts of harm (i.e., street harassment, bullying, discriminatory comments, sexist jokes), or high risk situations (i.e., situations that may lead to physical violence, sexual assault, relationship violence).
38

이 원고에서는 반인종주의적 진료와 관련된 주요 개념을 간략히 검토하고 이를 2025 CanMEDS 의사 역량 프레임워크에 통합하기 위한 권장 사항을 제공합니다. 중요한 것은 이전에 발간된 왕립대학 문서에서 원주민을 특별히 돌보는 데 있어 의료 제공자, 학습자 및 교육자를 위한 주요 접근법, 아이디어 및 배경 지식을 설명하고 있으며22, 이 시리즈의 관련 신흥 개념 원고에서는 다른 억압받는 인구와 관련된 형평성, 다양성, 포용성 및 사회 정의를 다루고 있다는 점입니다.23 우리는 또한 프레임워크 자체가 인종차별을 용인할 수 있음을 시사하는 설득력 있는 논평에 독자들의 주의를 환기시킵니다.15 우리는 이 일련의 문서가 2025년 버전의 CanMEDS로 효과적으로 번역되어 미래에 의사들이 환자와 지역사회를 돌보는 데 있어 행동 지향적이고, 반인종차별적이며, 반억압적이고, 구조적 역량을 갖추고, 문화적으로 안전한 진료에 유능하게 참여할 수 있기를 희망합니다. 

Within this manuscript we briefly review key concepts related to anti-racist praxis and provide recommendations for incorporating them in the 2025 CanMEDS Physician Competency Framework. Importantly, a previously published Royal College document describes the key approaches, ideas and background knowledge for health care providers, learners and educators in caring specifically for Indigenous Peoples22 while a related emerging concepts manuscript in this series addresses equity, diversity, inclusion, and social justice as they relate to other oppressed populations.23 We also draw our readers attention to a compelling commentary which suggest that the Framework, itself, may be permissive of racism.15 We are hopeful that this suite of documents will be effectively translated into the 2025 version of CanMEDS to ensure that — in the future – physicians are able to competently engage in action-oriented, anti-racist and anti-oppressive, structurally competent, and culturally safe praxis in the care of our patients and our communities.

2015 CanMEDS 역량 프레임워크에서 반인종주의는 어떻게 표현되어 있나요?
How is anti-racism represented in the 2015 CanMEDS competency framework?

2015 CanMEDS 의사 역량 프레임워크(표 2A)에는 반인종주의에 대한 명시적인 언급은 없지만, 관련 개념을 다루는 커뮤니케이터, 학자, 건강 옹호자 및 전문가 역량이 있습니다. 가장 근접한 역량인 커뮤니케이터 4.1은 환자와의 문화적으로 안전한 의사소통을 요구합니다(표 2B). CanMEDS에 반인종주의 역량이 없으면 인종이 다른 의료진의 부정적인 경험과 인종이 다른 환자의 예후 악화에 기여할 수 있습니다. 학자들은 인종차별과 관련하여 전문직건강 옹호자 역할 사이의 긴장을 강조하며, 전문직이 인종 형평성과 사회 정의를 옹호하는 인종 차별적 의사에 대해 무기로 사용된다고 지적했습니다.39 따라서 프레임워크 자체가 인종차별을 영속화할 수 있다는 설득력 있는 주장이 제기될 수 있습니다.15
While there are no explicit references to anti-racism within the 2015 CanMEDS Physician Competency Framework (Table 2A), there are Communicator, Scholar, Health Advocate, and Professional competencies that touch on related concepts. The closest enabling competency, Communicator 4.1, calls for culturally safe communication with patients (Table 2B). The absence of anti-racist competencies in CanMEDS may contribute to the negative experiences of racialized health care providers and the worsened outcomes of racialized patients. Scholars have highlighted a tension between the Professional and Health Advocate roles when it comes to racism, with professionalism being weaponized against racialized physicians who are advocating for racial equity and social justice.39 Thus a compelling argument can be made that the Framework may itself perpetuate racism.15

 

 

 

2025 CanMEDS 역량 프레임워크 내에서 인종 차별을 어떻게 표현할 수 있을까요?
How can anti-racism be represented within the 2025 CanMEDS competency framework?

인종주의는 의료 시스템과 더 넓은 사회의 문화와 구조 속에 존재하기 때문에 의료 및 의학교육 시스템 내에서 인종주의를 해결하는 것은 많은 과제를 안고 있습니다. 인종차별을 해결하기 위한 효과적인 접근법으로 조직 전체에 반인종주의적 접근 방식을 도입할 것을 제안합니다. 반인종주의적 접근법은 개인이 비판의식, 문화적, 심리적 안전, 트라우마 정보에 기반한 치료, 업스탠더 개입의 개념을 적절히 활용하여 학습 환경과 임상 치료 환경 모두에서 안전과 소속감의 문화를 조성하는 데 지식과 기술을 갖추고 있을 때 가능합니다.
Since racism exists within the culture and fabric of the health care system and broader society, addressing racism within the healthcare and medical education systems presents many challenges. We propose the incorporation of an anti-racist approach throughout the fabric of our organizations as an effective approach to addressing racism. An anti-racist approach is enabled when individuals are knowledgeable and skilled in appropriately utilizing concepts of critical consciousness, cultural and psychological safety, trauma-informed care, and upstander intervention to create a culture of safety and belonging both within the learning environment and the clinical care environment.

우리는 반인종주의가 의사의 모든 역량을 가로지르고 있으며, 기존의 CanMEDS 역량 프레임워크는 반인종주의, 반억압적 진료와 관련된 의사에 대한 기대치를 명시적으로 명시하여 발전할 필요가 있다고 믿습니다. 우리는 19개의 수정 사항과 24개의 추가 사항을 요구하며, 이를 통해 반인종주의가 CanMEDS의 각 역할에서 중요한 구성 요소가 될 수 있도록 할 것입니다. 이러한 역량과 표 2에 설명된 다른 역량들은 21세기 의사가 건강 형평성을 증진하고 보다 다양하고 포용적인 환경을 적극적으로 지원하는 데 필요한 역량입니다. 
We believe anti-racism is a cross-cutting physician competency, and that the existing CanMEDS competency framework requires evolution with explicit statements for expectations of physicians related to anti-racist, anti-oppressive praxis. We call for nineteen modifications and twenty-four additions that would make anti-racism a prominent component within each of the CanMEDS roles. These competencies, and others described in Table 2, are required for the 21st century physician to promote health equity and actively support more diverse and inclusive environments.

이러한 새로운 역량을 캔메드에 통합하는 것은 작은 진전이지만, 반인종주의 및 반억압적 실천의 근본적인 필요성을 보여주는 더 효과적인 방법은 인종차별적 요소로 오염된 토양에서 자랐다는 인식을 높이기 위해 CanMEDS의 '꽃'을 완전히 새롭게 상상하는 것입니다.2,3 반인종주의 토양에 단단히 뿌리를 내린 꽃의 이미지는 우리 공통의 인류를 대표하는 줄기를 지지하면서 인정과 가능성의 메시지를 전달하고 반인종주의로 가득한 꽃잎을 돋아나게 할 수 있을 것입니다. 우리 시대의 시급한 요구와 높아지는 기대에 부응하기 위해서는 새로운 의사의 정체성15이 필요하며, 반인종주의는 의사의 기본 역량이 되어야 합니다.
While incorporating these new competencies within CanMEDS would be a small step forward, a more effective way to demonstrate the fundamental need for anti-racist and anti-oppressive praxis would be a complete reimagining of the CanMEDS ‘flower’ to raise awareness that it was grown in soil corrupted by racist elements.2,3 The image of a flower with roots firmly established in anti-racist soil would deliver a message of acknowledgement and possibility while supporting a stem representative of our common humanity40 and sprouting petals infused with anti-racism. A new physician identity15 is required to meet the urgent needs and growing expectations of our times, and anti-racism must be a foundational physician competency.

 


Can Med Educ J. 2023 Mar 21;14(1):33-40. doi: 10.36834/cmej.75844. eCollection 2023 Mar.

Anti-racism in CanMEDS 2025

Affiliations

1Cumming School of Medicine, University of Calgary, Alberta, Canada.

2Collège des Médecins du Québec, Quebec, Canada.

3University of Toronto, Ontario, Canada.

4University of British Columbia, British Columbia, Canada.

5University of Saskatchewan, Saskatchewan, Canada.

6University of Ottawa, Ontario, Canada.

PMID: 36998489

PMCID: PMC10042777

DOI: 10.36834/cmej.75844

CanMEDS 2025에서 형평성, 다양성, 포용성, 사회적 정의 (Can Med Educ J. 2023)
Equity, diversity, inclusion, and social justice in CanMEDS 2025

 

소개
Introduction

의료 분야의 사회 정의각 개인이 속한 다양한 공동체에 관계없이 건강, 복지, 기회 및 특권에 대한 권리가 다른 사람과 동일하다는 것을 지지합니다.1 사회 구조의 모든 측면에서 배제는 다수 인구의 권력을 확보하는 수단이 되어 왔으며, 의료 인력 구성2과 다양한 인구 및 지역사회의 환자에게 제공되는 치료의 가용성과 질 모두에 명백한 영향을 미쳤습니다.3,4 의사 인력은 성별 및 젠더, 원주민으로서의 정체성 또는 비주류 인종, 민족, 문화 또는 종교 집단에 속하는 경우, 다양한 능력, 가족의 사회경제적 지위 등 여러 인구집단을 과소 대표하고 있는 것으로 알려져 있습니다.5,6 
Social justice in medicine upholds that each individual, regardless of the diverse communities to which they may belong, has the same right to health, wellbeing, opportunities and privilege as another.1 Exclusions in all aspects of societal structure have been a means to secure power for the majority population in Canada, and have unequivocally impacted medicine both through the composition of the medical workforce2 and the availability and quality of care provided to patients of diverse populations and communities.3,4 The physician workforce is recognized to have underrepresentation of several populations including those defined

  • by their sex and gender;
  • their identity as an Indigenous person or belonging to non-dominant racialized, ethnic, cultural or religious groups;
  • by various abilities; and
  • by familial socioeconomic status.5,6 

이들 및 기타 억압받는 인구집단의 구성원들은 의학 교육 과정에서 불이익, 차별, 배제를 경험하고 있습니다7. 의학교육 시스템은 능력주의를 강화하고, 위계를 지지하며, 인구 집단 간의 차이를 영속화하고, 다른 지식을 배제하는 생물의학 모델을 장려하기 위해 구축되었습니다.8 캐나다 의료 시스템은 보편적 접근의 원칙에 기초하고 있지만, 의료 시스템에서 인종주의, 성차별, 젠더차별, 능력주의, 연령주의 등 여러 형태의 차별과 그 교차점9에서 겪는 피해에 대해 이용 가능한 치료를 받는 것의 이점을 반드시 평가해야 하는 환자들의 실제 경험과는 다른 경우가 많습니다. 이러한 환자들은 다른 환자들과 동일한 수준의 치료를 받지 못하며10 그 결과 더 나쁜 건강 결과를 겪습니다.11 일부 지역에서는 결과의 격차가 더 커지고 있습니다.11
The experiences of members of these and other oppressed populations throughout their medical training are of disadvantage, discrimination, and exclusion 7. Medical education systems have been constructed to reinforce meritocracy, support hierarchy, perpetuate differences between population groups, and promote the biomedical model to the exclusion of other knowledges.8 The Canadian health care system is founded on the principle of universal access, yet this is often not the lived experience of patients who necessarily assess the benefits of seeking available care against the harms of racism, sexism, genderism, ableism, and ageism among other forms of discrimination, and all their intersections,9 they suffer in the healthcare system. These patients are not afforded the same quality of care as others10 and suffer worse health outcomes as a result.11 In some areas, the gap in outcomes is widening.11

의료계의 변화에 대한 오랜 요구가 행동의 우선순위로 떠오른 지금,12 기존의 CanMEDS 의사 역량 프레임워크는 형평성, 다양성, 포용성, 사회 정의의 개념과 관련된 의사에 대한 기대치를 명시적으로 제시하는 방향으로 발전할 필요가 있습니다.13 우리는 여기서 이러한 개념을 검토하고, 의학교육(모든 저자), 연구(CB, ND, KOT), 임상 진료(모든 저자)에서 형평성 및 반인종주의 이니셔티브의 리더로서의 경험과 캐나다의 원주민(CB), 아프리카계 캐나다인(KOT), 소수 인종(JMM, SR, BMW), 의학계 여성(CB, ND), 장애인(ND)으로서 살아온 경험을 바탕으로 CanMEDS 의사 역량 프레임워크에 통합하기 위한 권고사항을 제시합니다. 독자들은 반인종주의에 대해 구체적으로 다룬 원고도 참고하시기 바랍니다.14,15 
With the long call for changes in medicine now prioritized for action,12 the existing CanMEDS physician competency framework requires evolution with explicit statements for expectations of physicians related to concepts of equity, diversity, inclusion and social justice.13 We review these concepts here and provide recommendations for incorporating these in the CanMEDS physician competency framework drawn from our experiences as leaders in equity and anti-racism initiatives in medical education (all authors), research (CB,ND,KOT), and clinical practice (all authors) as well as our lived experiences as persons of Indigenous (CB), African-Canadian (KOT), and racial minorities in Canada (JMM, SR, BMW), women in medicine (CB, ND), and disabled (ND). We direct readers to also refer to the manuscripts that speaks specifically on the topic of anti-racism.14,15

형평성, 다양성, 포용성, 사회 정의란 무엇이며 의사의 역량에 중요한 이유는 무엇인가요?
What are equity, diversity, inclusion, and social justice and why are they important to physician competency?

형평성, 다양성, 포용성, 사회 정의는 차별을 해결한 결과로 간주되어야 합니다.

  • (모든 사람에게 동일한 분배를 제공하는 평등equality과는 구별되는) 형평성equity은 개인이 한 집단 또는 다수의 집단에 속해 있다는 이유만으로 기회가 줄어들 뿐만 아니라 다른 구조적, 제도적 장벽에 직면하기 때문에 공정성fairness을 달성하는 데 필요한 행동에 차이가 있을 수밖에 없음을 인정합니다.16
  • 다양성은 집단 내 모든 인구의 대표성을 높이고, 변화와 가능성이 무한하며, 다양한 지식과 경험에서 비롯된 관점과 혁신의 기회를 제공하는 것을 의미합니다.17
  • 포용성은 집단 내 다양한 인구 구성원의 존재뿐만 아니라 그 경험의 성격을 말하며, 그들이 그 집단에서 지지받고 가치 있는 구성원이라고 평가하는 것을 말합니다.18
  • 사회 정의는 각 개인이 다른 사람과 동일한 건강, 복지, 기회 및 특권을 가져야 한다는 권리 기반 접근 방식에서 개념화됩니다.1

Equity, diversity, inclusion, and social justice are to be considered outcomes of addressing discrimination.

  • Distinct from equality (which is the same distribution for everyone), equity necessarily accepts there will be variations in actions required to attain fairness, as individuals encounter different structural and systemic barriers as well as reduced opportunities simply by virtue of their membership in a or many population(s).16 
  • Diversity refers to enhanced representation of persons from all populations in a collective, limitless in variations and possibilities, and yielding the opportunity for perspectives and innovations arising from multiple knowledges and experiences.17 
  • Inclusion speaks not only to the presence of but also the nature of the experience of members of diverse populations in a collective, and that they assess they are a supported and valued member of that collective.18 
  • Social justice is conceptualized from a rights-based approach, valuing that each individual should have the same health, wellbeing, opportunities and privilege as another.1 

이러한 용어 및 관련 용어에 대한 간략한 정의는 표 1에서 확인할 수 있습니다.
Concise definitions of these and related terms are provided in Table 1.

용어 정의
Term
Definition
Ableism 에이블리즘
모든 형태의 장애(예: 신체적, 지적)를 가진 사람에 대한 차별 및/또는 편견. 장애를 가진 사람을 비장애인에 비해 열등한 존재로 규정하는 것입니다.

Discrimination and/or prejudice against persons with any form of disability (e.g., physical, intellectual). Persons are defined by their disabilities, and are characterized as inferior to the non-disabled.
Ageism 연령 차별
일반적으로 나이가 많은 사회 구성원에 대한 고정관념, 차별 및/또는 편견, 나이를 기준으로 한 사람에 대한 고정관념, 차별 및/또는 편견입니다.

Stereotyping, discrimination and/or prejudice against persons on the basis of their age, typically against older members of society.
Accessibility 접근성
참여의 장벽을 제거하여 모든 사람이 참여할 수 있는 환경을 조성하기 위한 편의 제공.

Accommodations are made to remove barriers to participation, resulting in the ability for all to participate.
Anti-oppression 반억압
억압 체제에 도전하는 전략, 이론, 행동 및 관행

The strategies, theories, actions, and practices that challenge systems of oppression
Cultural Safety 문화적 안전
서비스 제공자와 조직이 불평등을 야기하는 편견과 장벽을 해소하는 성찰적이고 인식 있는 관행과 정책의 결과물입니다. 문화적 안전의 존재 여부를 결정하는 것은 서비스 제공자가 아니라 서비스를 받는 사람입니다.

An outcome of reflective and aware practice and policy, where providers and organizations address bias and barriers contributing to inequities. It is the recipient of care, and not the provider, who determines if cultural safety is present or not.
Decolonization 탈식민지화
사회 구조, 서비스 및 투자에 대한 자결권을 위한 고유한 권리와 권한을 회복합니다.

Regaining inherent rights and power for self-determination of societal structure, services and investments.
Diversity 다양성
집단 내에 가능한 한 다양한 속성이 존재합니다.

The greatest possible representation of attributes are present within the collective.
Equity 형평성
불균형이 해소된 공정성과 정의의 달성.

Attainment of fairness and justice, with imbalances addressed.
Homophobia 동성애 혐오
레즈비언, 게이, 퀴어 또는 양성애자라는 이유로 사람을 향한 고정관념, 차별 및/또는 편견.

Stereotyping, discrimination and/or prejudice against persons on the basis of being lesbian, gay, queer or bisexual.
Inclusion 포용성
모든 사람이 동등하게 환영받고, 지원받고, 가치를 인정받고, 존중받을 수 있도록 보장하는 행동과 접근 방식.

Acts and approaches that ensure that all persons are equally welcomed, supported, valued and respected.
Intersectionality 교차성
불평등에 직면한 여러 인구집단의 일원이 됨으로써 발생하는 상호 작용 또는 시너지 효과로 인해 독특한 경험을 할 수 있습니다.

Interactions or synergies which arise from being a member of multiple populations facing inequities, and which results in a unique experience.
Meritocracy 능력주의
능력과 성과에 따라 기회와 지위를 부여하지만 모든 사회 구성원의 기회를 제한하는 구조적 불평등을 인정하지 않는 시스템.

System of awarding opportunities and status on the basis of ability and performance, but which neglects acknowledging structural inequities that limit opportunities for all members of society.
Racism 인종차별
인종을 이유로 한 사람에 대한 고정관념, 차별 및/또는 편견.

Stereotyping, discrimination and/or prejudice against persons on the basis of their race.
Sexism 성차별
성별에 따른 고정관념, 차별 및/또는 편견 일반적으로 여성으로 식별되는 개인에 대한 편견.

Stereotyping, discrimination and/or prejudice against persons on the basis of their sex typically against those individuals that identify as women.
Genderism 젠더차별
젠더에 근거한 사람에 대한 고정관념, 차별 및/또는 편견.

Stereotyping, discrimination and/or prejudice against persons on the basis of their gender.
Social justice 사회 정의
각 개인이 경제적, 정치적, 사회적 권리와 기회를 모두 누릴 권리가 있다는 것을 장려하는 접근 방식.

Approach promoting that each person has the right to the full spectrum of economic, political, and social rights and opportunities.

의사 인력 및 다양한 배경을 가진 환자에게 제공되는 의료 서비스 모두에서 권력과 특권의 불균형에 대한 인식이 증가하고 있지만, 의사는 기존의 불평등을 식별하거나 사회 정의 목표를 향한 진전을 방해하는 복잡한 요인을 이해하도록 타고나지 않았다.19 의사는 의사 동료와 환자 모두를 위한 동맹allies으로서 정보에 기반한 근거 기반 조치를 취하는 데 필요한 기술을 개발해야 합니다.2 
While there is increasing recognition of the power and privilege imbalances in both the physician workforce and the care provided to patients from diverse backgrounds, physicians are not intrinsically able to identify existing inequities, nor understand the complex contributors impeding progress towards social justice goals.19 Physicians need to develop the necessary skills to take informed and evidence-based action as allies for both physician colleagues and patients.2

형평성, 다양성, 포용성, 사회 정의는 2015 CanMEDS 역량 프레임워크에서 어떻게 표현됩니까?
How are equity, diversity, inclusion, and social justice represented in the 2015 CanMEDS competency framework?

CanMEDS 2015 의사 역량 프레임워크에는 의사 인력 및 환자 치료와 관련된 형평성, 다양성, 포용성 및 사회 정의와 관련된 추론이 있지만(표 2A 및 및2B),2B) 명시적으로 다루고 있는 경우는 드뭅니다. 특히, 이 역량들은 의료계, 더 넓게는 사회에 만연한 차별적 신념 및/또는 관행의 존재를 인정하지 않으며, 의사가 사회 정의를 증진하는 활동을 지원하거나 주도하는 데 유능해야 한다는 명시적인 기대치를 제시하지 않습니다. '리더' 및 '건강 옹호자' 측면의 기존 역량 중 적절하고 권한을 부여하는 의사 교육 및 근무 환경 유지와 관련된 내용은 없습니다. 이는 우리 직업에서 배제를 더욱 영속화하고, 다양하고 포용적인 의료 인력을 확보하기 위해 채용과 유지를 지원하는 데 형평성 이니셔티브가 필요하다는 점을 강조하지 않으며, 의학교육에 내재된 위계질서를 해체하는 데 기여하지도 않습니다.8 
There are inferences relevant to equity, diversity, inclusion and social justice related to both the physician workforce and patient care in the CanMEDS 2015 physician competency framework (Table 2A and and2B),2B), but they are rarely explicitly addressed. Specifically, the competencies do not acknowledge the existence of discriminatory beliefs and/or practices rampant in medicine specifically and more broadly in society, and do not set out explicit expectations for physicians to be competent in supporting or leading activities that promote social justice. None of the existing competencies in ‘leader’ and ‘health advocate’ aspects related to upholding appropriate and empowering physician training and work environments. This further perpetuates exclusions in our profession and does not reinforce that equity initiatives are necessary to support recruitment and retention to achieve a diverse and inclusive medical workforce, nor contribute to dismantling the hierarchy inherent in medical education.8

 

이번 호 캐나다 의학교육 저널에 게재된 논문에서 Adam 외21는 CanMEDS 역할 설명 및 역량에서 '환자'라는 용어가 어떻게 언급되는지를 강조합니다. 역할 설명에서 환자를 치료의 파트너로 포지셔닝하는 경우가 많지만, 건강 옹호자 역량을 제외한 다른 역할의 핵심 및 활성화 역량에서는 환자를 정보와 치료의 수동적인 수신자로 포지셔닝합니다. 이러한 관점에서 볼 때, 이러한 역량은 지속적인 차별을 허용하는 방식으로 기존의 권력 불균형을 악화시키는 것으로 볼 수 있습니다.
In a paper published in this issue of the Canadian Medical Education Journal, Adam et al21 highlights how the term ‘patient’ is referenced in the CanMEDS role descriptions and competencies. While the role descriptions frequently position patients as partners in care, with the exception of the Health Advocate competencies, the key and enabling competencies of the other roles position patients as passive recipients of information and care. Viewed from this perspective, the competencies could be seen to exacerbate existing power-imbalances in a way that allows ongoing discrimination.

2025 CanMEDS 역량 프레임워크 내에서 형평성, 다양성, 포용성, 사회 정의를 어떻게 더 잘 표현할 수 있을까요?
How can equity, diversity, inclusion, and social justice be better represented within the 2025 CanMEDS competency framework?

2025 CanMEDS 역량 프레임워크에 형평성, 다양성, 포용성 및 사회 정의와 관련된 역량을 명시적으로 포함할 것을 권장합니다. 이러한 역량을 포함하면 이 분야의 전문성 개발을 지원하여 의사가 불평등을 적극적으로 식별하고 대처하는 동시에 인력의 다양성과 포용성을 증진하는 데 도움이 될 것입니다. 또한 의사들이 형평성에 취약한 집단에 속하는 환자들과 효과적으로 소통할 수 있는 기술을 개발하여 의료 서비스 제공을 개선하고 체계적이고 구조적인 변화를 위한 옹호 활동을 지원할 수 있도록 하고자 합니다. 이러한 각 측면과 관련된 기존 CanMEDS 역량은 표 2A 및 및2B2B에 요약되어 있으며 표 2C 및 및2D2D에 수정이 제안되어 있습니다.
We recommend competencies explicitly related to equity, diversity, inclusion and social justice for the 2025 CanMEDS competency framework. Including such competencies will support professional development in this area that will help physicians to actively identify and combat inequities while promoting diversity and inclusion in the workforce. We also want to ensure physicians develop skills that allow them to effectively engage with patients belonging to equity-deserving groups to both improve the delivery of healthcare and assist in advocacy efforts for systemic and structural change. Existing CanMEDS competencies related to each of these aspects are outlined in Table 2A and and2B2B with suggested modifications in Table 2C and and2D2D.

의사 인력과 관련하여, 우리는 의사가 변화의 주체로 활동하여 인력의 다양성과 포용성을 지원한다는 기대를 강화하는 협력자 및 리더 역할에 새로운 역량을 추가할 것을 권장합니다. 건강 옹호자 역할에 새로 추가된 내용은 다양한 의사의 중요한 역할과 소외된 지역사회에 대한 의료 서비스 제공에 대한 증거를 반영합니다.22 학자 및 전문가 역할에 대한 수정 사항은 수련 중인 의사의 안전한 학습 환경의사 동료의 안전한 근무 환경을 보장하는 데 필요한 활동을 강화하는 한편, 의사가 학습자나 동료를 평가할 때 개인의 암묵적 편견을 인식하고 완화할 것을 촉구합니다. 
Related to the physician workforce, we recommend new competencies under the Collaborator and Leader roles that reinforce the expectation that physicians act as agents of change to support diversity and inclusion in the workforce. A new addition to the Health Advocate role reflects evidence on the critical role of diverse physicians and care delivery to underserved communities.22 Modifications to the Scholar and Professional roles reinforce necessary activities to ensure safe learning environments for physicians in training and safe working environments for physician colleagues, while also calling on physicians to recognize and mitigate their personal implicit biases when assessing learners or peers.

또한 사회 정의를 위해 노력하는 의사의 책임을 강화하고 의료 서비스에서 공평하고 문화적으로 안전한23 환자 경험의 결과를 지원하는 전략을 제정하는 새로운 역량에 대한 권장 사항을 제시합니다. 특히, 우리는 심리사회적 평가와 건강의 사회적 결정요인 및 구조적 요인에 대한 불평등 해결을 포함하도록 치료 상호작용에서 의사의 책임을 확대하는 수정을 제안했습니다. 이를 위해서는 차별을 중단하고, 의사와 환자 간 상호작용에서 권력 불균형을 최소화하며, 지역사회 참여와 파트너십을 구축하고, 각 환자의 현실에 맞게 치료를 맥락화하기 위한 구체적인 기술 개발이 필요합니다. 마지막으로, 아담 외21가 설명한 유형의 의사-환자 상호작용의 틀을 해결하고 환자를 의료 서비스의 능동적 주체 및 파트너로 인식하는 언어를 통합하는 방향으로 전환하는 것이 중요합니다.
We also make recommendations for new competencies that reinforce the responsibility of physicians to strive for social justice and enact strategies that support outcomes of equitable and culturally safe23 patient experiences in healthcare. Specifically, we have suggested modifications that broaden the responsibility of physicians in care interactions to include psychosocial assessment and addressing inequities in the social determinants of health and structural factors. This will require specific skill development in interrupting discrimination, minimizing power imbalances in the physician-patient interaction, community engagement and partnership, and contextualizing care to the realities of each patient. Lastly, it will be important to address the framing of physician-patient interactions of the type described by Adam et al21 and shift towards incorporating languages that recognizes patients as active agents and partners in their healthcare.

형평성, 다양성, 포용성, 사회 정의를 증진하기 위해 기존 CanMEDS 프레임워크에 제안된 추가 및 수정 사항은 의학교육에 필요한 중요한 개선 사항을 다루는 것을 목표로 합니다. 이러한 변화는 의료 인력의 대표성을 강화하는 동시에 의료진에게 지원적이고 안전한 근무 환경을 제공하는 동시에 환자 치료에 도움이 되는 향상된 기술을 명시적으로 요구할 것입니다.
The proposed additions and revisions to the existing CanMEDS framework to promote equity, diversity, inclusion, and social justice aim to address critical improvements needed in medical education. These changes will strengthen representation in the medical workforce while providing a supportive and safe work environment for practitioners, while also explicitly requiring enhanced skills to benefit patient care.


Can Med Educ J. 2023 Mar 21;14(1):27-32. doi: 10.36834/cmej.75845. eCollection 2023 Mar.

Equity, diversity, inclusion, and social justice in CanMEDS 2025

Affiliations

1University of Calgary, Alberta, Canada.

2University of Ottawa, Ontario, Canada.

3McGill University, Quebec, Canada.

4University of Toronto, Ontario, Canada.

5University of Saskatchewan, Saskatchewan, Canada.

6Collège des médecins du Québec, Quebec, Canada.

PMID: 36998498

PMCID: PMC10042795

DOI: 10.36834/cmej.75845

CanMEDS 의사 역량 프레임워크에서 새로 등장하는 개념들  (Can Med Educ J. 2023)
Emerging concepts in the CanMEDS physician competency framework (Can Med Educ J. 2023)

 

소개
Introduction

CanMEDS 역량 프레임워크는 1996년에 발표되어 2005년과 2015년에 업데이트되었습니다.3 캐나다4,5 및 국제적으로 의학교육에 큰 영향을 미쳤으며,6-8 커리큘럼 및 프로그램 설계를 변화시켜 과거에는 의학교육에서 충분히 다루지 않았던 역량에 초점을 맞추도록 했습니다. 캐나다 왕립 의사 및 외과의 대학에서 내부적으로 추적한 결과, 현재 전 세계 50개 이상의 관할 지역에서 최소 12개 전문 분야에서 CanMEDS를 사용하고 있으며 수백만 명의 수련생과 환자에게 영향을 미치고 있는 것으로 추산됩니다.
The CanMEDS competency framework was published in 19961 with updates in 20052 and 2015.3 It has had a major impact on medical education both in Canada4,5 and internationally,68 transforming curricular and program design to increase the focus on competencies that were historically not addressed adequately within medical education. Internal tracking by the Royal College of Physicians and Surgeons of Canada estimates that CanMEDS is now used in over 50 jurisdictions around the world by at least 12 professions, impacting millions of trainees and patients.

의학교육에서 의사의 역량 프레임워크가 수행하는 중심적인 역할을 고려할 때, 2025년에 계획된 개정판은 새로운 역량을 추가하고 오래된 역량을 제거함으로써 진화하는 사회적 요구에 부응해야 합니다. 이는 특히 코로나19 팬데믹으로 인해 의료 및 의학교육이 계속 차질을 빚고 있고,9-15 건강 및 행동 모니터링에 기술이 점점 더 많이 사용되고 있으며,16,17 식민주의,18 제도적 차별,19 성차별,20 인종차별,21 기후변화22가 건강에 미치는 영향이 점점 더 많이 인식되고 있는 현재 환경과 관련이 있습니다. 
Given the central role that the CanMEDS physician competency framework plays within medical education, the planned 2025 revision must respond to evolving societal needs through the addition of new competencies and the removal of outdated competencies. This is particularly relevant in the current environment as healthcare and medical education continue to be disrupted by the COVID-19 pandemic,915 technology is increasingly used to monitor health and behavior,16,17 and the impacts of colonialism,18 systemic discrimination,19 sexism,20 racism,21 and climate change22 on health are increasingly acknowledged.

2015년 개정된 CanMEDS 역량 프레임워크3는 저자 팀원(Van Melle)이 수행한 문헌 검색 및 주제별 분석을 통해 정보를 얻었습니다.23 이 분석은 7가지 새로운 개념(직업적 자아 정체성, 역량의 한 형태로서의 감정, 시스템 기반 실무/실무 기반 학습 및 개선, 인수인계, 글로벌 보건, 소셜 미디어, 의료 분야의 재정적 인센티브)을 확인하고 설명했습니다. 문헌에 초점을 맞추다 보면 발표되지 않은 개념을 놓칠 수 있지만,24 우리는 2025년 CanMEDS 역량 프레임워크의 개정을 위한 광범위한 환경 조사의 일환으로 이 작업을 복제하고 확장하고자 했습니다.  
The 2015 revision of the CanMEDS competency framework3 was informed by a literature scan and thematic analysis performed by a member of our authorship team (Van Melle).23 Their analysis identified and described seven emerging concepts (professional self-identity, emotion as a form of competence, systems-based practice/practice-based learning and improvement, handover, global health, social media, and financial incentives in health care). While focusing on the literature may miss concepts that have not been published,24 we sought to replicate and expand upon this work as part of a broader environmental scan that will inform the revision of the 2025 CanMEDS competency framework.

2015년 방법론을 기반으로,23 우리는 분석에 광범위한 이해관계자 그룹을 포함하여 방법론을 자세히 설명하고, 의학교육 커뮤니티의 검토와 논평을 위해 결과를 공개적으로 게시함으로써 검색 및 검토 프로세스의 엄격성, 포용성, 투명성을 높이는 것을 목표로 합니다. 
Using the 2015 methodology as a base,23 we aim to increase the rigor, inclusiveness, and transparency of the search and review process by outlining our methodology in detail, including a broad group of stakeholders in the analysis, and openly publishing our results for review and commentary from the medical education community.

 

방법론
Methodology

문헌 검색, 제목 및 초록 검토, 일반 주제별 분석25을 통해 문헌을 종합하여 CanMEDS 역할과 관련된 새로운 개념을 파악했습니다. CanMEDS 내에서 더 잘 표현되어야 할 개념을 식별하는 광범위한 작업 목표를 고려할 때, 일반적인 문헌 검토 전략으로는 우리의 목표를 달성할 수 없다는 사실을 발견했습니다. 그 대신 2015년 CanMEDS 개정 이전에 Van Melle 23에서 사용했던 실용적인 접근 방식을 기반으로 포함할 문헌을 결정하고 분석에 정보를 제공했습니다. 
We synthesized the literature using a literature scan, title and abstract review, and generic thematic analysis25 to identify emerging concepts related to the CanMEDS roles. Given the broad-based goal of our work to identify concepts that needed to be better represented within CanMEDS, we did not find that any common literature review strategies would meet our goals. Rather, we built upon the pragmatic approach previously used by Van Melle 23 prior to the 2015 CanMEDS revision to determine the literature to be included and inform its analysis.

2015년 신개념 검토는 한 명의 저자가 수행했지만,23 이 검토를 위해 2025년 CanMEDS 개정을 주도하는 기관/단체인 캐나다 왕립 의사 및 외과의사 대학, 캐나다 퀘벡 의과대학, 캐나다 가정의학과 대학, 캐나다 의학부 협회에서 회원 추천을 받아 실무 그룹을 구성했습니다. 검토의 목적상, 새로운 개념은 의사의 역할 및 역량과 관련된 동료 검토 문헌에서 논의된 아이디어 중 2015 CanMEDS 의사 역량 프레임워크에 없거나 과소 대표되는 개념으로 정의했습니다.3 
While the 2015 emerging concepts review was conducted by a single author,23 for this review we created a working group by soliciting nominations for members from the institutions/organizations steering the 2025 CanMEDS revisions: the Royal College of Physicians and Surgeons of Canada, Collège des Médecins du Québec, College of Family Physicians of Canada, and Association of Faculties of Medicine of Canada. For the purpose of our review, an emerging concept was defined as an idea discussed in the peer reviewed literature related to the role and competencies of physicians that is either absent or underrepresented in the 2015 CanMEDS physician competency framework.3

논문 포함 기준
Article inclusion criteria

Van Melle이 이전 검토에서 사용한 방법과 유사하게 우리는 CanMEDS와 관련된 새로운 개념을 논의할 가능성이 높은 의학 저널을 선택했습니다. 여기에는 저널 임팩트 팩터 기준 가장 영향력이 높은 의학교육 저널 3종(Academic Medicine, Medical Education, Medical Teacher)과 캐나다(Canadian Medical Education Journal) 및 대학원(Journal of Graduate Medical Education) 의학교육과 관련된 콘텐츠를 게재하는 저널이 포함되었습니다. 이러한 접근 방식은 영향력이 가장 높은 의학교육 저널을 중심으로 한 Van Melle의 연구와는 다소 차이가 있지만,23 캐나다 및 대학원 의학교육에 특별히 초점을 맞춘 저널을 포함시키는 것이 중요하다고 생각했습니다. 2018년 10월 1일부터 2021년 10월 1일 사이에 이러한 저널에 게재된 모든 논문이 포함 대상으로 고려되었습니다. 이 3년의 기간은 실현 가능한 범위 내에서 현재와 관련된 개념에 초점을 맞추기 위해 실용적으로 선택되었습니다.  
Paralleling the methods used by Van Melle in the prior review.23 we selected medical journals that would be likely to discuss emerging concepts related to CanMEDS. They included the three highest impact medical education journals by Journal Impact Factor (Academic Medicine, Medical Education, and Medical Teacher) and journals that publish content specifically related to Canadian (Canadian Medical Education Journal) and postgraduate (Journal of Graduate Medical Education) medical education. This approach differed somewhat from Van Melle’s work which was based specifically on the highest impact medical education journals,23 but we felt it was important to include journals focused specifically on Canadian and postgraduate medical education. All articles published within these journals between October 1st, 2018, and October 1st, 2021 were considered for inclusion. This three-year time period was pragmatically selected to focus on currently relevant concepts while still being feasible.

데이터 추출
Data extraction

제목과 초록 검토를 용이하게 하기 위해 선택한 저널에서 검토 기간 내에 출판된 모든 논문에 대해 저널 제목, 논문 제목, 인용 데이터를 포함한 메타데이터를 PubMed에서 추출했습니다. 이러한 데이터를 Zotero26으로 가져와서 각 논문의 초록을 포함한 추가 메타데이터를 추가했습니다. 그런 다음 확장된 메타데이터를 Zotero에서 Google 시트로 내보냈습니다. 토마는 예비 검토를 수행하여 새로운 개념에 초점을 맞추지 않을 것 같은 몇 가지 기사 유형을 제외했습니다. 이러한 기사에는 기관 보고서, 작가 성명서, 정정 및 정오표, 에세이 콘테스트 기사, 편집자에게 보내는 편지, 저널에 초점을 맞춘 사설, 다른 기사 목록을 요약한 기사, 심사자 및/또는 기획위원회 위원에게 감사를 표하는 기사 등이 포함되었습니다. 나머지 기사는 표준화된 형식으로 정리하여 개별 실무 그룹 구성원에게 검토를 맡겼습니다. 
To facilitate the title and abstract review, metadata including the journal title, article title, and citation data were extracted from PubMed for all articles published within the review period in the selected journals. These data were imported into Zotero26 which added additional metadata including each article’s abstract. The expanded metadata were then exported from Zotero into a Google Sheet. Thoma performed a preliminary review and excluded several article types because they were unlikely to focus on emerging concepts. These articles included institutional reports, artist’s statements, corrections and errata, essay contest articles, letters to the editor, editorials focused on the journal, articles summarizing lists of other articles, and articles focused specifically on thanking reviewers and/or planning committee members. The remaining articles were arranged in a standardized format and assigned for review to individual working group members.

논문 검토
Article review

15명의 리뷰어 각각은 2021년 10월 10일부터 2021년 11월 30일까지 검토할 기사를 배정받았습니다. 토마는 팀 또는 개별 가상 회의에서 각 리뷰어에게 방향을 제시했습니다. 각 검토자는 자신의 문서에 대해 다음 질문에 답변했습니다: 
Each of 15 reviewers was assigned articles for review between October 10, 2021 and November 30, 2021. Thoma oriented each reviewer in a team or individual virtual meeting. Each reviewer responded to the following questions for their articles:

  1. 이 기사가 CanMEDS 역할과 관련이 있습니까? (예/아니오/아마도)
  2. 이 문서가 위에서 정의한 새로운 개념을 설명하는가? (예/아니오/아마도)
  3. 예/아니요/아마도 해당한다면, 이 기사가 관련된 주요 역할은 무엇인가요? (의료 전문가, 커뮤니케이터, 협력자, 학자, 건강 옹호자, 리더, 전문가)
  4. 해당 역할과 관련된 추가적인 CanMEDS 역할이 있나요? (의료 전문가, 커뮤니케이터, 협력자, 학자, 건강 옹호자, 리더, 전문가)
  5. 새로운 개념을 간단한 제목으로 설명해 주세요. (자유 텍스트)
  6. 필요한 경우, 새로운 개념에 대한 간략한 설명을 제공하세요. (자유 텍스트)
  7. 이 개념은 2015년 버전의 CanMEDS에 (가) 없거나 (나) 과소 대표되는 개념인가요? (A 및 B 옵션이 있는 드롭다운)
  8. 이 글은 새로운 개념을 잘 요약한 예시적인 글인가요? (예, 아니오, 아마도)

 

  1. Does this article relate to the CanMEDS roles? (Yes/No/Maybe)
  2. Does this article describe an emerging concept as defined above? (Yes/No/Maybe)
  3. If yes/maybe, what is the primary role that it relates to? (Medical Expert, Communicator, Collaborator, Scholar, Health Advocate, Leader, Professional)
  4. Are there any additional CanMEDS roles that it relates to? (Medical Expert, Communicator, Collaborator, Scholar, Health Advocate, Leader, Professional)
  5. Please describe the emerging concept as a brief title. (free text)
  6. If necessary, provide a brief description of the emerging concept. (free text)
  7. Is this a concept (a) absent from or (b) underrepresented in the 2015 iteration of CanMEDS? (dropdown with A and B options)
  8. Is this an exemplar article that summarizes the emerging concept well? (Yes, No, Maybe)


질문 1 또는 2에 대한 답변이 '아니오'인 경우, 질문 3~8에 대한 답변이 없는 것으로 간주하여 추가 검토 대상에서 제외합니다. 검토자가 질문 1 또는 2에 대해 '아마도'로 표시한 기사는 두 번째 검토자(토마)가 검토한 후 응답에 따라 포함 또는 제외했습니다. 
If the response to questions 1 or 2 was ‘no,’ questions 3-8 were not answered and these articles were excluded from further review. Articles that the reviewer tagged as ‘maybe’ for question 1 or 2 were reviewed by a second reviewer (Thoma) and included or excluded based upon their responses.

주제별 분석
Thematic analysis

제목과 초록 검토가 완료된 후, 나머지 논문은 하나의 Google 스프레드시트에 통합되었습니다. 그런 다음 두 명의 저자(토마, 반 멜레)가 질문 5에 대한 검토자의 답변, 검토자가 파악한 새로운 개념, 필요한 경우 논문의 메타데이터를 바탕으로 주제별 분석25,27을 수행했습니다. 이 분석은 주제 분석의 단계를 따랐습니다.28

  • 예비 검토(숙지)를 거친 후 코드북을 개발하고 공동으로 다듬었습니다.
  • 그런 다음 필요한 경우 코드북을 수정하여 모든 기사를 코딩했습니다(코딩).
  • 모든 기사가 코딩된 후, 토마는 코드를 통합한 예비 주제 세트를 개발하고 정의했습니다(주제 검색).
  • 이렇게 만들어진 주제별 프레임워크는 Van Melle이 각 주제를 명확히 하고 정의하기 위해 수정하여 검토, 수정, 승인했습니다(주제 정의 및 이름 지정).
  • 그런 다음, 전체 워킹 그룹에게 피드백 및 수정을 위해 제시되어 구성원 점검(테마 검토)의 첫 번째 단계로 진행되었습니다.
  • 후속 조치로, 구성원 점검(테마 검토)의 두 번째 단계로 Google 설문조사를 통해 워킹그룹 구성원을 대상으로 설문조사를 실시했습니다. 이 설문조사에서는 각 테마에 대한 검토팀의 지지를 요청하고 테마를 어떻게 더 구체화할 수 있는지 물습니다. 이러한 제안은 분석에 반영되었습니다.


After the title and abstract reviews were completed, the remaining articles were amalgamated into a single Google Sheet. Two authors (Thoma and Van Melle) then conducted a thematic analysis25,27 of the reviewers’ responses to question 5, the emerging concept identified by the reviewing author and, when necessary, the article’s metadata. This analysis followed the phases of thematic analysis.28 

  • Following a preliminary review (familiarization), we developed and collaboratively refined a codebook.
  • We then coded all the articles with refinements to the codebook when necessary (coding).
  • Once all articles were coded, Thoma developed and defined a preliminary set of themes incorporating the codes (searching for themes).
  • The resulting thematic framework was reviewed, modified, and endorsed by Van Melle with modifications to clarify and define each theme (defining and naming themes).
  • It was then presented to the full working group for feedback and revision as the first part of the member check (reviewing themes).
  • In follow-up, a survey of the working group members was conducted via a Google Forms survey as the second part of the member check (reviewing themes). The survey requested endorsement for each of the themes from the review team and asked how the themes could be further refined. These suggestions were incorporated into the analysis.

분석 내내 토마스와 반 멜레는 각자의 위치를 고려했습니다. 토마는 응급 및 외상 전문 의사로, 기술 기반 의학교육(시뮬레이션, 온라인 교육 리소스, 학습 분석)에 중점을 둔 의학교육 연구를 수행하고 있습니다. Van Melle은 프로그램 평가 및 변화, 특히 역량 기반 의학교육 맥락에 대한 전문성을 갖춘 교육 과학 박사 학위자입니다. 두 사람 모두 캐나다 왕립 의사 및 외과의 대학과 계약을 맺고 캐나다 전역의 전문 의사 양성을 위한 교육 개발에 관한 자문을 제공하고 있습니다. 우리는 가상 회의와 다양한 의료 전문 분야 및 CanMEDS 이해관계자의 관점을 담은 저자 그룹과의 후속 설문조사를 통해 각자의 위치로 인한 편견을 완화하기 위해 노력했습니다.
Throughout the analysis, Thoma and Van Melle considered their positionality. Thoma is a practicing emergency and trauma physician who conducts medical education research with a focus on technology-enhanced medical education (simulation, online educational resources, and learning analytics). Van Melle is a PhD education scientist with expertise in program evaluation and change, particularly in competency-based medical education contexts. Both are contracted by the Royal College of Physicians and Surgeons of Canada to provide advice regarding educational developments in the training of specialty physicians across Canada. We attempted to mitigate the biases introduced by their positionality through member checks conducted both in a virtual meeting and a follow-up survey with an authorship group that contained perspectives from a range of medical specialties and CanMEDS stakeholders.

삼각측량
Triangulation

출판 지연과 의학 저널의 게이트키핑으로 인해 일부 새로운 개념이 문헌에 나타나지 않았을 수 있다는 점을 인식하고24, 문헌 검색과 병행하여 수행한 온라인 검색 및 주제별 분석의 결과와 결과를 상호 참조했습니다. 이 검색 및 분석의 전체 방법론과 결과는 보고되지 않았고 본 연구의 공식적인 부분은 아니었지만, 저자 중 한 명(Snell)은 새로운 개념을 식별하고 주제별로 분석하기 위해 여러 키워드로 Google 검색 엔진을 사용하여 회색문헌을 검색했습니다. 이 분석 결과를 자체 분석 결과와 상호 참조하여 검색에서 발견되지 않은 회색 문헌에서 떠오르는 개념을 식별함으로써 결과를 삼각측량했습니다.
Acknowledging that publication delays and the gatekeeping of medical journals could have prevented some emerging concepts from appearing in the literature24, we cross-referenced our results with the findings of an online search and thematic analysis that was conducted in parallel to our literature scan. While the full methodology and results of this search and analysis have not been reported and were not a formal part of our study, one of our authors (Snell) searched the grey literature using the Google search engine with multiple key words with the goal of identifying and thematically analyzing emerging concepts. We triangulated our results by cross-referencing the findings of this analysis with our own to identify emerging concepts from the grey literature that were not found in our scan.

전문가 검토
Expert review

앞서 설명한 분석이 완료된 후, 토마는 워킹 그룹 멤버와 캐나다 왕립 의사 및 외과의사 임상의사 교육자들에게 10가지 새로운 개념 각각에 대해 전문가를 추천해 달라고 요청했습니다. 이 원고의 저자 팀원과 설문조사에서 추천된 전문가를 결합하여 집필 그룹을 구성했습니다. 각 집필 그룹은 2022년 3월부터 2022년 7월까지 각 개념을 정의하는 간략한 원고를 작성하고, 2015 CanMEDS 의사 역량 프레임워크에서 어떻게 표현되는지 설명하고,3 CanMEDS 2025의 변경 사항을 제안하는 것을 목표로 2~4회 모임을 가졌습니다. 집필 그룹이 각 개념의 이름에 대해 제안한 변경 사항은 검토 및 승인을 위해 실무 그룹에 이메일로 전송되었습니다.
Following the completion of the described analysis, Thoma asked the working group members and the Royal College of Physicians and Surgeons of Canada Clinician Educators to nominate experts for each of the ten emerging concepts. Writing groups were formed, combining members of the authorship team for this manuscript and the experts that were nominated in the survey. Each writing group met 2-4 times from March 2022 through July 2022 with the goal of writing a brief manuscript defining each concept, outlining how it is represented in the 2015 CanMEDS physician competency framework,3 and proposing changes for CanMEDS 2025. The changes proposed by the writing groups to the name of each concept were emailed to the working group for review and approval.

결과
Results

그림 1에 요약된 바와 같이 관심 기간 동안 포함된 저널에 4973편의 논문이 게재되었습니다. 이 중 505개 논문은 기관 보고서, 저자의 성명서, 정정 또는 오타, 에세이 콘테스트 논문, 편집자에게 보내는 편지, 저널에 초점을 맞춘 사설, 논문 목록이 포함된 논문, 심사자에게 감사하는 논문, 위원회 위원에게 감사하는 논문으로 간주되어 예비 검토에서 제외되었습니다. 4468편의 논문이 제목 및 초록 심사를 받았습니다. 각 심사자는 142~385편의 논문을 검토했습니다(평균 = 298편). 두 차례의 검토를 거친 후 나머지 4468편의 논문 중 1017편(22.8%)이 주제별 분석에 포함되었습니다. 
As outlined in Figure 1, 4973 articles were published in the included journals during the period of interest. 505 of these articles were excluded in the preliminary review because they were deemed to be institutional reports, artist’s statements, corrections or errata, essay contest articles, letters to the editor, editorials focused on the journal, articles containing lists of articles, articles thanking reviewers, or articles thanking committee members. 4468 articles underwent title and abstract review. Each of the reviewers reviewed between 142 and 385 articles (mean = 298 articles). Following both rounds of review, 1017 of the remaining 4468 articles (22.8%) were included in the thematic analysis.

질적 분석에서는 81개의 코드를 9개의 예비 테마로 통합했습니다. 저자 검토자들과의 대규모 그룹 회의에서 나온 피드백을 바탕으로, 하나의 주제(형평성, 다양성, 포용성)를 두 개의 주제(1. 의사 형평성, 다양성, 포용성 및 2. 환자 접근성, 형평성, 포용성, 사회 정의)로 나눴다. 모든 워킹그룹 구성원이 구성원 점검 설문조사를 완료했습니다. 설문조사 피드백을 바탕으로 몇 가지 주제 제목의 문구를 수정했지만, 삭제되거나 통합된 주제는 없었습니다. 
Our qualitative analysis incorporated 81 codes into nine preliminary themes. Based upon feedback at the large group meeting with the author reviewers, one additional theme was created by splitting one of the themes (Equity, Diversity, and Inclusion) into two (1. Physician Equity, Diversity, Inclusion and 2. Patient Access, Equity, Inclusion, and Social Justice). All working group members completed the member check survey. Modifications in wording were made to several of the theme titles based upon survey feedback, but no themes were removed or amalgamated.


10명의 워킹 그룹 멤버와 9명의 임상 교육자가 설문조사를 완료하여 새로운 개념 각각에 대한 집필 그룹에 참여할 전문가를 추천했습니다. 각 개념에 대해 글쓰기 그룹을 구성하여 해당 개념이 CanMEDS에 보다 효과적으로 통합될 수 있는 방법을 설명하는 임무를 맡겼습니다. 환자와 의사의 형평성, 다양성, 포용성에 초점을 맞춘 두 개의 집필 그룹은 이 개념이 단일 원고를 작성하기에는 너무 광범위하다고 판단했습니다. 따라서 초기 분석에서처럼 환자와 의사 중심의 원고로 나누기보다는 반인종주의에 초점을 맞춘 원고와 형평성, 다양성, 포용성, 사회 정의에 초점을 맞춘 두 번째 원고로 나눌 것을 권장했습니다. 이 권고에 따라 집필 그룹은 수정되었고, 이후 집필팀의 승인을 받았습니다. 집필 그룹의 수정에 따른 주제별 분석 결과는 표 1에 제시되어 있습니다. 

Ten working group members and nine clinician educators completed the survey nominating experts to participate in a writing group on each of the emerging concepts. A writing group was formed for each concept and tasked with describing how it could be more effectively integrated into CanMEDS. The two writing groups focused on patient and physician equity, diversity, and inclusion determined that this concept was too broad for a single manuscript. However, rather than splitting it into patient and physician focused manuscripts as was done in the initial analysis, they recommended dividing it into one manuscript focused on anti-racism and a second manuscript focused on equity, diversity, inclusion, and social justice. The writing groups were modified in keeping with this recommendation which was subsequently endorsed by our authorship team. The results of the thematic analysis following modification by the writing groups are presented in Table 1.

 

표 1에는 각 주제에서 논의된 의사의 잠재적 역량에 대한 설명과 1차 구성원 점검 시 각 주제를 새로운 개념으로 지지한 실무 그룹 구성원의 비율도 포함되어 있습니다. 17명의 실무 그룹 구성원 중 최소 14명(82.4%)이 각 주제를 새로운 개념으로 지지했습니다. 주제를 지지하지 않은 이유에 대해서는 해당 주제가 참신하지 않다고 생각하거나, CanMEDS 역량과 어떻게 관련될 수 있는지 알지 못하거나, 주제를 분할하거나 확장하는 것을 선호하는 등 다양한 제안이 있었습니다. 회색 문헌 검색에서는 추가로 떠오르는 개념이 발견되지 않았습니다. 
Table 1 also includes a description of the potential physician competencies discussed within each theme and the proportion of working group members who endorsed each theme as an emerging concept during the first member check. At least fourteen (82.4%) of the 17 working group members endorsed each of the themes as an emerging concept. There were a variety of suggestions provided for why a member did not endorse a theme such as not identifying the theme as novel, not seeing how it could relate to a CanMEDS competency, or preferring themes be split or expanded. The grey literature search did not identify any additional emerging concepts.

10개 작성 그룹 중 6개 그룹은 개념을 더 정확하게 설명하기 위해 개념의 제목을 변경할 것을 제안했습니다. 새로운 개념의 이름과 정의에 대한 변경과 반인종주의 개념의 추가는 집필 그룹의 만장일치 동의로 승인되었습니다. 
Six of the 10 writing groups proposed changes to the title of their concept to describe it more accurately. The changes to the names and definitions of the emerging concepts, as well as the addition of the anti-racism concept, were approved by the authorship group with unanimous consent.

토론
Discussion

본 연구에서는 의학 문헌에서 CanMEDS 2025에 기술된 의사 역량에 통합될 수 있는 10가지 새로운 개념을 확인했습니다. 이러한 각 개념은 범위가 상당히 광범위하며, 대부분 현재 의학교육 문헌에서 논의되고 있는 여러 트렌드 또는 문제를 포괄하고 있습니다. 조사 결과 중 몇 가지 주제는 지난 3년간 광범위한 사회적, 경제적, 정치적, 환경적 담론에서 두드러진 현재 주제를 반영하고 있어 주목할 만합니다. 
Our study identified ten emerging concepts in the medical literature that could be incorporated into the physician competencies described by CanMEDS 2025.2938 Each of these concepts is quite broad in scope, with most encompassing several trends or issues currently being discussed in the medical education literature. Several themes within our results are notable as they mirror current themes of prominence in the broader social, economic, political, and environmental discourse over the past three years.

접근성, 형평성, 다양성, 포용성, 사회 정의, 반인종주의29,30와 관련된 주제가 분석에서 가장 많이 나타났습니다. 이 큰 주제는 궁극적으로 반인종주의에 초점을 맞춘 두 가지 주제로 분리되었습니다.30 의학 문헌에서 이러한 주제가 두드러진 것은 대중 담론에서 제도적 차별의 부정적인 영향에 대한 인식과 유사합니다.19 이 검토의 캐나다적 맥락, 캐나다 의료 시스템에서 원주민 건강의 중심적 중요성,39 그리고 캐나다 진실과 화해 위원회 최종 보고서에 발표된 건강 관련 7가지 행동 촉구를 고려할 때 원주민 건강에 초점을 맞춘 별도의 테마가 독립적으로 나타나지 않았다는 점이 주목할 만합니다. 이는 포함된 학술지들이 국제적인 초점(캐나다 의학교육 저널만이 캐나다 의학교육에 더 중점을 두었음)과 형평성, 다양성, 포용성, 사회 정의,29 및 반인종주의라는 주제 아래 많은 관련 구성 요소를 자주 코딩했기 때문인 것으로 생각됩니다.30 특히 원주민 건강과 관련된 제안 역량은 이러한 주제를 자세히 설명하는 두 원고의 중심입니다.29,30  
Themes relating to access, equity, diversity, inclusion, social justice, and anti-racism29,30 were prevalent in the analysis. This large theme was ultimately separated into two themes, with one focused specifically on anti-racism.30 The prominence of these themes in the medical literature parallels the acknowledgement of the negative impact of systemic discrimination in the public discourse.19 Given the Canadian context of this review, the central importance of Indigenous health in the Canadian healthcare system,39 and the seven calls to action related to health published in the final report of the Truth and Reconciliation Commission of Canada,40 it is notable that a separate theme focused on Indigenous health did not emerge independently. We suspect this is due to both the international focus of the included journals (only the Canadian Medical Education Journal focused more closely on Canadian medical education) as well as the frequent coding of many relevant constructs under the themes of equity, diversity, inclusion, social justice,29 and anti-racism.30 Notably, proposed competencies related to Indigenous health are central to both manuscripts further describing these themes.29,30

기후변화가 건강에 미치는 급격한 영향에 대한 과학적 공감대가 형성되고 있는 상황에서 '지구 보건' 주제38 의 존재는 놀라운 일이 아닙니다.22 특히 의사와 의료 수련생들은 기후변화가 인구의 건강과 복지에 미치는 영향에 관한 교육 및 옹호에서 두드러진 목소리를 내왔습니다.41-43 그러나 일부 저자는 개별 의사와 관련된 역량 틀 내에서 이러한 구조를 동원하는 것이 어려울 것이라는 우려를 표명했습니다.
The presence of the ‘Planetary Health’ theme38 is unsurprising given the scientific consensus building on the drastic impacts of climate change on health.22 Notably, physicians and medical trainees have had a prominent voice in education and advocacy relating to the impacts of climate change on the health and wellbeing of the population.4143 However, some authors were concerned that it would be challenging to mobilize this construct within a competency framework relevant to individual physicians.

데이터 및 기술 사용과 관련된 추가 역량의 필요성에 대해서는 폭넓은 공감대가 형성되었습니다.32,35 정밀 의학을 둘러싼 논의가 증가하는 가운데, '가상 진료' 및 '데이터 정보 의학' 테마로 통합된 이 코드는 신흥 기술의 보급16,17 과 개인 및 건강 데이터를 윤리적이고 안전하게 사용해야 할 필요성에 대한 사회적 인식의 증가와 병행합니다.44 
There was broad consensus regarding the need for additional competencies related to the use of data and technology.32,35 Beyond the growing dialogue surrounding precision medicine, the codes consolidated into the ‘Virtual Care’ and ‘Data-Informed Medicine’ themes parallel growing societal awareness of the pervasiveness of emerging technologies16,17 and the need for personal and health data to be used ethically and securely.44

코로나19 팬데믹의 영향은 여러 테마에서 확인할 수 있었습니다. 특히 '가상 치료' 주제35는 팬데믹 기간 동안 여행 및 모임 제한으로 인해 상당한 영향을 받은 개념인 가상 교육 및 가상 의료와 밀접한 관련이 있습니다.15,45 코로나19 팬데믹의 영향을 받은 다른 개념으로는 의료 시스템에 대한 복잡하고 지속적인 영향으로 인한 '복합 적응 시스템'33,46과 의사와 기타 의료 제공자에게 미치는 부담으로 인한 '의사 휴머니즘'31,47이 있습니다.
The influence of the COVID-19 pandemic was seen in numerous themes. In particular, the ‘Virtual Care’ theme35 relates strongly to virtual education and virtual healthcare, concepts that were substantially impacted by travel and gathering restrictions during the pandemic.15,45 Other concepts that were likely influenced by the COVID-19 pandemic included ‘Complex Adaptive Systems’33,46 due to its complex ongoing impacts on the healthcare system and ‘Physician Humanism’31,47 due to its strain on physicians and other healthcare providers.

'적응적 전문성'37 및 '임상적 추론'36 주제는 복잡한 임상 진료 영역에서 얼마나 빠른 변화가 일어나고 있는지를 인정합니다.48 의사가 이러한 과제를 해결하기 위해 진료 방식을 발전시킬 수 있는 역량이 있지만, 진화하는 의사의 역량을 적시에 CanMEDS에 통합하는 방법도 고려해야 합니다. 과거에는 약 10년에 한 번씩 개정을 실시하는 것이 CanMEDS에 도움이 되었지만, 이 원고의 발행과 CanMEDS 2025의 시행 사이에 새로운 역량이 등장할 것으로 예상할 수 있습니다. 정기적인 업데이트에서 지속적인 반복 프로세스로 전환하는 것을 고려해야 합니다. 이는 레지던트 수련 프로그램에서는 물류적으로 어려울 수 있지만, 미국심장협회와 같은 기관에서 지침을 지속적으로 업데이트하는 최신 프로세스에 부합하며, 더 작은 규모의 더 빈번한 업데이트가 가능할 수 있습니다.49 
The ‘Adaptive Expertise’37 and ‘Clinical Reasoning’36 themes acknowledge how rapidly changes are occurring within the complex realm of clinical practice.48 While there are competencies that enable physicians to evolve their practices to meet these challenges, it will also be important to consider how evolving physician competencies are integrated into CanMEDS in a timely manner. While performing revisions approximately once per decade has served CanMEDS well in the past, it is conceivable that new competencies will emerge between the publication of this manuscript and the implementation of CanMEDS 2025. Consideration should be given to transitioning CanMEDS from periodic updates to an ongoing iterative process. While this may be logistically challenging for residency training programs, it is in keeping with modern processes for the continuous updating of guidelines by organizations like the American Heart Association and could allow for smaller, more frequent updates.49

새롭게 등장한 각 개념이 CanMEDS 2025에 어떻게 통합될 수 있는지 설명하기 위한 추가 작업이 진행되었습니다. 집필 그룹은 각 개념을 정의하는 원고의 초안을 작성하고, CanMEDS 2015에 어떻게 표현되었는지 설명하고, CanMEDS 2025에 어떻게 통합할 수 있는지 제안했습니다.29-38 이 작업은 이 논문과 함께 캐나다 의학교육 저널 특별호에 게재되었으며, CanMEDS 2025 의사 역량 프레임워크 업데이트를 담당하는 전문가 실무 그룹에 정보를 제공할 것입니다. 이러한 새로운 개념이 공개됨으로써 캐나다 및 국제 의료계가 이 작업에 대해 논의하고 의견을 제시할 수 있는 기회가 될 것입니다.
Further work has been conducted to describe how each of the emerging concepts can be incorporated into CanMEDS 2025. Writing groups have drafted manuscripts that define each concept, outlined how it was represented in CanMEDS 2015, and proposed how it could be incorporated into CanMEDS 2025.2938 This work has been published along with this paper in this special issue of the Canadian Medical Education Journal and will inform the CanMEDS 2025 Expert Working Groups responsible for updating the CanMEDS physician competency framework. The open publication of these emerging concepts should provide Canadian and international medical communities with an opportunity to discuss and comment on this work.

강점과 한계
Strengths and limitations

이 검토의 강점은 상세하고 투명한 방법과 이해관계자 단체의 폭넓은 참여에 있습니다. CanMEDS 2015 개정 이전에 관련 문헌 검토가 수행되었지만,23 그 방법론이 자세히 설명되거나 동료 검토를 거치지 않았습니다. 저희는 상세한 방법론을 발표하고 동료 검토 과정을 거침으로써 이 작업을 개선했습니다. 또한 캐나다 왕립 의사 및 외과의사 대학, 퀘벡 의과대학, 캐나다 가정의학과 대학, 캐나다 의과대학 학부 협회의 대표를 포함한 광범위한 이해관계자 그룹에 의해 논문 검토가 수행되었습니다. 저자 팀의 다양성으로 인해 중요한 개념이 누락될 가능성이 줄어듭니다.
The strength of this review rests in the detailed, transparent methods and the broad engagement of stakeholder organizations. While a related literature review was conducted prior to the CanMEDS 2015 revision,23 its methodology was not described in detail or peer reviewed. We have improved on this work by publishing a detailed methodology and by putting our work through the peer review process. Additionally, the article review was conducted by a broader group oof stakeholders (including representatives from the Royal College of Physicians and Surgeons of Canada, Collège des Médecins du Québec, College of Family Physicians of Canada, and Association of Faculties of Medicine of Canada). The diversity of our authorship team decreases the chance that important concepts were missed.

이 리뷰에는 몇 가지 한계가 있었습니다. 

  • 첫째, 포함 기간을 3년으로, 출처를 5개 저널로, 특정 논문 유형을 제한하여 검토 범위를 제한했습니다. 이러한 제한은 새로운 개념을 파악하는 동시에 타당성을 유지하기 위해 내린 의도적이고 실용적인 결정이라고 생각합니다. 일부 주제를 놓쳤을 가능성에도 불구하고 회색 문헌 스캔을 통한 삼각 측량으로 추가 개념을 식별하지 못했다는 점은 안심할 수 있습니다.
  • 둘째, 수많은 리뷰어가 문헌 검색에 참여했기 때문에 새로운 개념 기준과 라벨링의 일관성을 보장하기 어려웠습니다. 또한, 대부분의 초록 검토는 추가 검토를 위한 플래그가 지정되지 않는 한 독립적으로 수행되었습니다. 멤버 점검을 통해 이러한 문제가 결과에 미치는 영향을 완화할 수 있을 것으로 기대합니다.
  • 마지막으로, 확인된 수많은 개념을 테마로 통합하는 것이 어려웠습니다. 우리의 분석은 일부 테마 내에서 광범위한 수의 코드를 집계했다는 비판을 받을 수 있습니다. 일부 워킹그룹 참가자들은 일부 테마가 새로운 개념이 아니거나 지나치게 광범위하다고 느꼈습니다. 이러한 도전은 연구 단계에 걸쳐 형평성, 다양성, 포용성과 관련된 주제가 진화하는 과정에서 잘 드러났습니다. 그럼에도 불구하고 대다수(실무 그룹 구성원의 82.4% 이상)는 각 주제가 더 깊이 탐구할 가치가 있는 중요한 새로운 개념이라고 생각했습니다.

This review had several limitations. First, we restricted the scope of our review by limiting the inclusion period to three years, the source to five journals, and specific article types. We see these limitations as intentional, pragmatic decisions that we made to maintain feasibility while identifying emerging concepts. Despite the potential to have missed some themes, it is reassuring that triangulation with the grey literature scan did not identify any additional concepts. Second, with numerous reviewers participating in the literature scan, it was difficult to ensure consistency in emerging concept criteria and labelling. Further, most abstract reviews were done independently unless flagged for additional review. We anticipate that the member checks mitigated the impact of this challenge on the results. Finally, consolidating the numerous identified concepts into themes was difficult. Our analysis could be criticized for aggregating a broad number of codes within some of the themes. Some of the working group participants felt that some themes were either not emerging concepts or were overly broad. This challenge is well-represented by the evolution of the themes related to equity, diversity, and inclusion throughout the phases of the study. This said, a large majority (≥82.4% of working group members) felt that each theme represented an important emerging concept that deserved further exploration.

결론
Conclusion

이 검토 및 분석을 통해 CanMEDS 2025의사 역량 프레임워크에 통합하기 위해 고려해야 할 10가지 새로운 개념이 확인되었습니다. 이 작업의 결과는 이번 특별호에 자세히 설명되어 있으며, 여기에는 각 개념에 대한 확장된 기사와 함께 CanMEDS 2025.29-38에 통합할 수 있는 방법에 대한 제안이 포함되어 있습니다. 이 작업의 공개를 통해 CanMEDS의 개정을 알리는 것 외에도, 개정 과정에 대한 투명성을 높이고 의사 역량에 관한 학술 문헌에서 조기 대화를 촉진할 수 있기를 바랍니다.
This review and analysis identified ten emerging concepts that should be considered for incorporation into the 2025 CanMEDS physician competency framework. The results of this work are elaborated upon in this special issue, which contains an expanded article on each concept along with suggestions for how it could be incorporated into CanMEDS 2025.2938. We hope that in addition to informing the revision of CanMEDS, the open publication of this work will create greater transparency around the revision process while facilitating an early dialogue in the academic literature on physician competence.

 


 

Can Med Educ J. 2023 Mar 21;14(1):4-12. doi: 10.36834/cmej.75591. eCollection 2023 Mar.

Emerging concepts in the CanMEDS physician competency framework

Affiliations collapse

1University of Saskatchewan, Saskatchewan, Canada.

2Royal College of Physicians and Surgeons of Canada, Ontario, Canada.

3University of Ottawa, Ontario, Canada.

4Association of Faculties of Medicine of Canada, Ontario, Canada.

5Université de Montréal, Quebec, Canada.

6Collège des médecins du Québec, Quebec, Canada.

7McMaster University, Ontario, Canada.

8University of Toronto, Ontario, Canada.

9McGill University, Quebec, Canada.

10College of Family Physicians of Canada, Ontario, Canada.

11NOSM University, Ontario, Canada.

12Queen's University, Ontario, Canada.

PMID: 36998506

PMCID: PMC10042782

DOI: 10.36834/cmej.75591

Free PMC article

Abstract 

Background: The CanMEDS physician competency framework will be updated in 2025. The revision occurs during a time of disruption and transformation to society, healthcare, and medical education caused by the COVID-19 pandemic and growing acknowledgement of the impacts of colonialism, systemic discrimination, climate change, and emerging technologies on healthcare and training. To inform this revision, we sought to identify emerging concepts in the literature related to physician competencies.

Methods: Emerging concepts were defined as ideas discussed in the literature related to the roles and competencies of physicians that are absent or underrepresented in the 2015 CanMEDS framework. We conducted a literature scan, title and abstract review, and thematic analysis to identify emerging concepts. Metadata for all articles published in five medical education journals between October 1, 2018 and October 1, 2021 were extracted. Fifteen authors performed a title and abstract review to identify and label underrepresented concepts. Two authors thematically analyzed the results to identify emerging concepts. A member check was conducted.

Results: 1017 of 4973 (20.5%) of the included articles discussed an emerging concept. The thematic analysis identified ten themes: Equity, Diversity, Inclusion, and Social Justice; Anti-racism; Physician Humanism; Data-Informed Medicine; Complex Adaptive Systems; Clinical Learning Environment; Virtual Care; Clinical Reasoning; Adaptive Expertise; and Planetary Health. All themes were endorsed by the authorship team as emerging concepts.

Conclusion: This literature scan identified ten emerging concepts to inform the 2025 revision of the CanMEDS physician competency framework. Open publication of this work will promote greater transparency in the revision process and support an ongoing dialogue on physician competence. Writing groups have been recruited to elaborate on each of the emerging concepts and how they could be further incorporated into CanMEDS 2025.

근거중심의학과 공유의사결정의 연결(JAMA, 2014)
The Connection Between Evidence-Based Medicine and Shared Decision Making

Tammy C. Hoffmann, PhD1,2; Victor M. Montori, MD, MSc3; Chris Del Mar, MD, FRACGP1

 

근거 기반 의학(EBM)과 공유 의사 결정(SDM)은 모두 양질의 의료 서비스를 제공하는 데 필수적이지만, 이 두 접근법 간의 상호 의존성은 일반적으로 잘 알려져 있지 않습니다. 근거 기반 의학은 환자로부터 시작하여 환자로부터 끝나야 합니다. 임상의는 근거를 찾아 평가하고 그 추론을 자신의 전문 지식과 통합한 후 환자의 가치와 상황을 반영한 결정을 내립니다. 환자의 가치, 선호도, 상황을 통합하는 것은 아마도 가장 어렵고 제대로 매핑되지 않은 단계일 것이지만, 가장 적은 관심을 받고 있습니다.1 이로 인해 EBM이 환자의 가치와 선호도를 무시한다는 비판이 제기되었는데, 이는 명백히 의도가 아닙니다.2 
E
vidence-based medicine (EBM) and shared decision making (SDM) are both essential to quality health care, yet the interdependence between these 2 approaches is not generally appreciated. Evidence-based medicine should begin and end with the patient: after finding and appraising the evidence and integrating its inferences with their expertise, clinicians attempt a decision that reflects their patient’s values and circumstances. Incorporating patient values, preferences, and circumstances is probably the most difficult and poorly mapped step—yet it receives the least attention.1 This has led to a common criticism that EBM ignores patients’ values and preferences—explicitly not its intention.2

공유 의사 결정임상의와 환자가 옵션, 이점과 해로움에 대해 논의하고 환자의 가치, 선호도, 상황을 고려한 후 공동으로 건강 결정에 참여하는 과정입니다. 이는 환자 중심의 의사소통 기술과 EBM의 교차점이며, 좋은 환자 치료의 정점입니다(그림).
Shared decision making is the process of clinician and patient jointly participating in a health decision after discussing the options, the benefits and harms, and considering the patient’s values, preferences, and circumstances. It is the intersection of patient-centered communication skills and EBM, in the pinnacle of good patient care (Figure).

 

 
 

하나만으로는 부족할까요?
One Without the Other?

이러한 접근 방식은 대부분 병행하여 발전해 왔지만, 어느 쪽도 다른 쪽 없이는 그 목표를 달성할 수 없습니다. SDM 없이는 진정한 EBM이 이루어질 수 없습니다.3 SDM은 근거를 상담에 명시적으로 가져와 환자와 논의할 수 있는 메커니즘입니다. 임상의가 환자의 선호도를 의사 결정에 반영하려고 해도 때때로 잘못 추측하는 경우가 있습니다. 그러나 근거에 기반한 숙고를 통해 환자는 정보에 입각한 선호도를 구축할 수 있습니다. 결정을 실행하고 그 결과를 감당해야 하는 환자의 입장에서는 이 과정을 통해 임상의의 근거와 전문성, 그리고 자신의 가치와 선호도를 의사 결정에 통합한다는 점을 인식하는 것이 더 적절할 수 있습니다. SDM이 없으면 EBM은 증거 폭압으로 변질될 수 있습니다. SDM이 없으면 근거가 실제 진료와 개선된 결과로 제대로 이어지지 않을 수 있습니다.
These approaches, for the most part, have evolved in parallel, yet neither can achieve its aim without the other. Without SDM, authentic EBM cannot occur.3 It is a mechanism by which evidence can be explicitly brought into the consultation and discussed with the patient. Even if clinicians attempt to incorporate patient preferences into decisions, they sometimes erroneously guess them. However, it is through evidence-informed deliberations that patients construct informed preferences. For patients who have to implement the decision and live with the consequences, it may be more pertinent to realize that it is through this process that patients incorporate the evidence and expertise of the clinician, along with their values and preferences, into their decision-making. Without SDM, EBM can turn into evidence tyranny. Without SDM, evidence may poorly translate into practice and improved outcomes.

마찬가지로, EBM의 원칙에 주의를 기울이지 않으면 SDM의 여러 단계가 근거와 불가분의 관계에 있기 때문에 한계가 있습니다. 예를 들어, 질환의 자연력, 가능한 옵션, 각각의 이점과 해로움에 대해 환자와 논의하고 이를 정량화할 때는 반드시 최상의 연구 증거를 기반으로 해야 합니다. SDM에 이러한 근거가 포함되지 않은 경우, 환자가 표현하는 선호도는 옵션의 위험과 이점에 대한 신뢰할 수 있는 추정치에 근거하지 않을 수 있으며, 그 결과 진정한 정보를 바탕으로 한 결정이 이루어지지 않을 수 있습니다.
Likewise, without attention to the principles of EBM, SDM becomes limited because a number of its steps are inextricably linked to the evidence. For example, discussions with patients about the natural history of the condition, the possible options, the benefits and harms of each, and a quantification of these must be informed by the best available research evidence. If SDM does not incorporate this body of evidence, the preferences that patients express may not be based on reliable estimates of the risks and benefits of the options, and the resulting decisions not truly informed.

단절이 있는 이유는 무엇인가요?
Why Is There a Disconnect?

EBM과 SDM 사이에 존재하는 단절의 원인 중 하나는 EBM의 리더, 연구자, 교사와 SDM의 리더, 연구자, 교사가 서로 다른 클러스터 출신이며, 역사적으로 서로 다른 클러스터에서 진료, 연구, 출판, 협업하는 경향이 있기 때문일 수 있습니다. 일부 형태의 SDM은 환자 커뮤니케이션에서 비롯되었으며, 이 분야의 컨퍼런스와 저널에서 많은 연구가 발표되었습니다. 1997년에 발표된 한 중요한 논문에서는 SDM을 치료 의사 결정의 모델이자 환자-임상의 간 의사소통 기술로 개념화했습니다. 그러나 이 논문은 EBM과 아무런 연관성이 없었는데, 그도 그럴 것이 EBM은 초기 단계였기 때문입니다.2
A contributor to the existing disconnect between EBM and SDM may be that leaders, researchers, and teachers of EBM, and those of SDM, originated from, and historically tended to practice, research, publish, and collaborate, in different clusters. Some forms of SDM have emerged from patient communication, with much of its research presented in conferences and journals in this field. A seminal paper in 19974 conceptualized SDM as a model of treatment decision making and as a patient-clinician communication skill. However, it did so without any connection to EBM—perhaps not surprisingly, because EBM was in its infancy.2

반대로 임상 역학에서 시작된 EBM은 증거를 찾고, 평가하고, 종합하는 것을 용이하게 하는 방법과 리소스에 중점을 두었습니다. 이러한 근거를 환자와 논의하고 그 사용에 환자와 함께 참여하는 것에는 훨씬 덜 집중해 왔습니다 (때로는 '소프트' 기술이라고 폄하되기도 함) . EBM에 대한 대부분의 관심은 스캔들(예: 미공개 데이터, 결과 '스핀', 이해관계 충돌)과 첨단 기술(예: EBM을 더 쉽고 편리하게 만드는 시스템)에 관한 것이었습니다. 환자와의 의사 결정에 근거를 사용하는 것에 대한 정보는 부족합니다.
Conversely, with its origins in clinical epidemiology, much of the focus of EBM has been on methods and resources to facilitate locating, appraising, and synthesizing evidence. There has been much less focus on discussing this evidence with patients and engaging with them in its use (sometimes even disparagingly referred to as “soft” skills). Most of the EBM attention has involved scandals (eg, unpublished data, results “spin,” conflicts of interest) and the high technology milestones (eg, systems to make EBM better and easier). Information about using evidence in decision-making with patients has been scant.

두 접근법 사이의 단절은 임상의와 학생에게 제공되는 교육에서도 분명하게 드러나며, 이 역시 교사의 배경을 반영하는 경우가 많습니다. EBM 교육을 수강할 수 있는 기회는 주로 질문을 형성하고 근거를 찾아 비판적으로 평가하는 데 초점을 맞춘 내용으로 가득합니다.5 근거를 적용하고 통합하는 방법을 배우는 것은 일반적으로 없거나 기술 훈련 없이 통과하는 과정으로 언급됩니다.
Disconnect between the 2 approaches is also evident in, and maintained by, the teaching provided to clinicians and students, again often reflecting the backgrounds of their teachers. Opportunities to attend EBM teaching abound with content largely focused on forming questions and finding and critically appraising evidence.5 Learning how to apply and integrate the evidence is usually absent, or mentioned in passing without skill training.

EBM과 SDM의 연결성 실현하기
Realizing the Connection Between EBM and SDM

논리적으로 시작할 수 있는 방법은 SDM 스킬 트레이닝을 EBM 트레이닝에 통합하는 것입니다. 이는 앞서 언급한 EBM 교육의 결함뿐만 아니라 현재 이용 가능한 SDM 교육 기회의 부족을 해결하는 데 도움이 될 것입니다. 또한 SDM의 활용을 촉진하고 더 넓게는 증거 번역을 촉진할 수 있습니다. 최근 의학교육에 SDM을 일상적으로 통합해야 한다는 요구는 두 접근법을 밀접하게 연계하여 활용할 수 있는 즉각적인 기회를 제공합니다. 
A logical place to start is by incorporating SDM skill training into EBM training. This will help to address not only the aforementioned deficits in EBM training but also the lack of SDM training opportunities presently available. Additionally, it may facilitate the uptake of SDM and, more broadly, evidence translation. Recent calls for SDM to be routinely incorporated into medical education present an immediate opportunity to capitalize on closely aligning the approaches.

EBM과 SDM을 통합하기 위한 또 다른 시작점은 임상 진료 지침의 개발과 실행입니다. 대부분의 가이드라인은 권고안을 수립할 때 환자의 선호도를 고려하지 않는 반면,6 일부 가이드라인은 임상의에게 환자와 옵션에 대해 이야기하라고 조언하지만, 이를 수행하는 방법과 환자가 이해할 수 있는 방식으로 근거를 전달하는 방법에 대한 지침은 제공하지 않습니다. 다음의 경우에 가이드라인에서 공동 의사 결정을 강력히 권장할 수 있습니다.

  • 옵션의 장단점이 거의 대등한 경우,
  • 근거의 불확실성으로 인해 명백히 우월한 접근법을 결정하기 어려운 경우,
  • 환자의 행동에 따라 혜택과 위험의 균형이 달라지는 경우(와파린을 사용하는 환자의 복약, 모니터링, 식이요법 준수 등)


Another place to start to bring EBM and SDM together is the development and implementation of clinical practice guidelines. Whereas most guidelines fail to consider patients’ preferences in formulating their recommendations,6 some advise clinicians to talk with patients about the options but provide no guidance about how to do this and communicate the evidence in a way patients will understand. Shared decision making may be strongly recommended in guidelines

  • when the options are closely matched in their advantages and disadvantages,
  • when uncertainty in the evidence impairs determination of a clearly superior approach, or
  • when the balance of benefits and risks depends on patient action, such as adherence to medication, monitoring, and diet in patients using warfarin.

결론
Conclusions

최근까지 EBM과 SDM 간의 연관성은 거의 없거나 기껏해야 암시적인 수준이었습니다. 그러나 상호 작용의 고무적인 징후가 나타나고 있습니다. 예를 들어, 두 접근법을 일부 통합하여 가르치거나,7 가이드라인을 SDM을 촉진하기 위해 어떻게 조정할 수 있는지에 대한 탐구,8,9 두 접근법을 모두 인정하는 연구 및 리소스 도구가 등장하고 있습니다. 후자의 예로는 의사결정에 적절한 근거를 제공하기 위해 환자 및 임상의와 협력하여 연구 의제 및 우선순위 설정, 체계적으로 수집된 최신 근거를 인용하고 그 신뢰성을 평가하는 국제 환자 의사결정 지원 표준의 새로운 근거 기준 등이 있으며,10 이를 통해 SDM 도구의 개발이 근거 기반 가이드라인의 수립에 대한 현대적 요구사항에 부합하도록 조정하고 있습니다. 또한, 근거 기반 의료의 실천과 공유 의사 결정의 과학에 초점을 맞춘 독립적인 대표 학회들이 공동 회의를 소집하고 있습니다.
Links between EBM and SDM have until recently been largely absent or at best implied. However, encouraging signs of interaction are emerging. For example, there has been some integration of the teaching of both,7 exploration about how guidelines can be adapted to facilitate SDM,8,9 and research and resource tools that recognize both approaches. Examples of the latter include research agenda and priority setting occurring in partnership with patients and clinicians to help provide relevant evidence for decision making; and a new evidence criterion for the International Patient Decision Aids Standards requiring citation of systematically assembled and up-to-date bodies of evidence, with their trustworthiness appraised,10 thus aligning the development of SDM tools with contemporary requirements for the formulation of evidence-based guidelines. Also, independent flagship conferences focused on the practice of evidence-based health care and on the science of shared decision making are now convening joint meetings.

의학은 최신 근거 없이 시행될 수 없고, 시행되어서도 안 됩니다. 또한 정보에 입각한 환자의 선호도를 파악하고 존중하지 않고 의학을 시행할 수도 없습니다. 임상의, 연구자, 교사, 환자는 이러한 접근법의 상호 의존적 관계를 인식하고 적극적으로 촉진해야 합니다. EBM에는 SDM이 필요하고, SDM에는 EBM이 필요합니다. 환자에게는 이 두 가지가 모두 필요합니다.
Medicine cannot, and should not, be practiced without up-to-date evidence. Nor can medicine be practiced without knowing and respecting the informed preferences of patients. Clinicians, researchers, teachers, and patients need to be aware of and actively facilitate the interdependent relationship of these approaches. Evidence-based medicine needs SDM, and SDM needs EBM. Patients need both.


JAMA. 2014 Oct 1;312(13):1295-6. doi: 10.1001/jama.2014.10186.

The connection between evidence-based medicine and shared decision making

Affiliations collapse

1Centre for Research in Evidence-Based Practice, Faculty of Health Sciences and Medicine, Bond University, Queensland, Australia2University of Queensland, Brisbane, Australia.

2Knowledge and Evaluation Research (KER) Unit, Mayo Clinic, Rochester, Minnesota.

3Centre for Research in Evidence-Based Practice, Faculty of Health Sciences and Medicine, Bond University, Queensland, Australia.

PMID: 25268434

DOI: 10.1001/jama.2014.10186

졸업후의학교육에서 공유의사결정을 위한 EPA 식별하기: 국가 델파이 연구(Acad Med, 2021)
Identifying Entrustable Professional Activities for Shared Decision Making in Postgraduate Medical Education: A National Delphi Study 
Anouk Baghus, MD, MSc, Esther Giroldi, PhD, Jean Muris, MD, PhD, Anne Stiggelbout, PhD, Marjolein van de Pol, MD, PhD, Angelique Timmerman, PhD, and Trudy van der Weijden, MD, PhD 

공유 의사 결정(SDM)은 현재 환자를 의료 의사 결정에 참여시키기 위해 선호되는 접근 방식이며 좋은 환자 치료의 정점으로 간주됩니다.1-6 이 대화형 프로세스에서 임상의와 환자는 함께 환자의 정보에 입각한 선호도와 임상 증거를 바탕으로 신중한 결정을 내리기 위해 협력합니다.7 
Shared decision making (SDM) is the current preferred approach to involve patients in medical decision making and is considered the pinnacle of good patient care.1–6 In this interactive process, clinicians and patients work together to make deliberate decisions based on the patient’s informed preferences and clinical evidence.7

임상의와 환자 모두 SDM의 중요성을 인식하고 있지만,8,9 SDM은 임상에서 일상적으로 적용되지 않습니다.10,11 이러한 성과 격차로 인해 전 세계적으로 SDM 교육이 더욱 강조되고12,13 중요한 의료 역량 프레임워크에 SDM이 포함되었습니다.14,15 일상적인 임상에서 SDM 적용의 낮은 일관성은 SDM 기술 학습과 실행 사이의 전이가 복잡하다는 것을 반영하는 것일 수 있습니다.12,13,16 
Although the importance of SDM is recognized by both clinicians and patients,8,9 SDM is not routinely applied in clinical practice.10,11 This performance gap has resulted in more emphasis on training in SDM worldwide12,13 and including SDM in important medical competency frameworks.14,15 The low consistency in application of SDM in routine clinical practice may reflect the complexity of transfer between learning and practicing SDM skills.12,13,16

우리는 이러한 전이transfer를 지원함으로써 전문적 실무에서 SDM의 지속 가능한 구현을 강화할 수 있을 것으로 기대합니다. 이러한 전이는 실제 임상 환경에서 복잡한 기술을 학습하고, 강력한 경험에 의해 촉발되고, 임상 성과에 대한 성찰에 의해 주도될 때 가장 효과적이라고 가정합니다.17-19 우리는 자기 주도적 직장 학습에 SDM을 통합하는 것이 효과적일 것으로 기대하지만, 임상 실습에서 SDM에 필요한 역량에 대한 합의가 부족하면 원하는 교육 결과에 부정적인 영향을 미칠 수 있습니다.20,21 
We expect that supporting this transfer will enhance sustainable implementation of SDM in professional practice. This transfer is assumed to be most effective when complex skills are learned within the authentic clinical environment, triggered by powerful experiences and driven by reflection on clinical performance.17–19 Although we expect that integrating SDM in self-directed workplace learning will be effective, the lack of consensus on the needed competencies for SDM in clinical practice may negatively affect desired training outcomes.20,21

졸업후 의학 교육은 복잡한 역량의 자기주도적 직장 학습을 위한 이상적인 학습 환경으로 여겨집니다.22 복잡한 역량을 임상 실무로 이전하는 것은 많은 졸업후 의학 교육 프로그램에서 위탁 가능한 전문 활동(EPA)을 공식화함으로써 최적화됩니다.23-26 역량은 태도, 지식, 행동을 결합하는 일반적인generic 성격이지만, EPA는 이러한 역량을 임상 실무로 전환하는 전문직의 언어로 공식화됩니다. EPA는 집중적인 관찰과 피드백을 지원하는 데 사용되므로 학습자의 레퍼토리에 복잡한 SDM 행동을 통합하는 데 사용할 수 있습니다.18,19 이 연구의 목적은 졸업후 의학 교육 중에 가르쳐야 하는 SDM 및 관련 행동 지표에 대한 EPA에 대한 합의를 도출하는 것이었습니다.
Postgraduate medical education is believed to be the ideal learning environment for self-directed workplace learning of complex competencies.22 The transfer of complex competencies to clinical practice is optimized in many postgraduate medical training programs by formulating entrustable professional activities (EPAs).23–26 While competencies are generic in nature—combining attitude, knowledge, and behavior—EPAs are formulated in the language of the profession that translates these competencies into clinical practice. EPAs are used to support focused observation and feedback and can therefore be used to foster the integration of complex SDM behavior into the learner’s repertoire.18,19 The aim of this study was to reach consensus on EPAs for SDM and associated behavioral indicators that need to be taught during postgraduate medical education.

방법
Method

배경
Context

우리는 모든 의학 전문과에서 사용할 수 있는 SDM을 위한 EPA를 개발하는 것을 목표로 했습니다. 네덜란드에서는 네덜란드 왕립 의학협회에서 정한 국가적 요구사항에 따라 의학 전문 부서가 네덜란드 졸업후 의학 교육의 커리큘럼을 조정합니다. 교육 기간은 전문 분야에 따라 2년에서 7년까지 다양하며, 프로그램은 직장 기반 교육과 정규 교육이 균형을 이루고 있습니다. 2015년부터 네덜란드의 졸업후 의학 전문 교육 프로그램에서는 CanMEDS 역량 프레임워크에 따라 레지던트를 교육해야 합니다. 대부분의 전문과목에서 이러한 역량은 레지던트의 개발과 필요한 감독 수준을 결정하는 데 사용되는 특정 EPA로 변환됩니다.24,27 일부 졸업후 커리큘럼에서는 임상에서 필요한 구체적인 업무와 행동이 명시되어 있지 않지만 SDM이 중요한 주제 또는 커뮤니케이션 역량 중 하나로 언급됩니다. 

We aimed to develop EPAs for SDM that can be used in all medical specialties. In the Netherlands, medical specialty departments coordinate the curricula of Dutch postgraduate medical education, based on national requirements set by the Royal Dutch Medical Association. The duration of the training programs varies between 2 and 7 years, depending on the specialty, and the programs balance workplace-based training and formal education. Since 2015, postgraduate medical specialty training programs in the Netherlands have been required to train residents according to the CanMEDS competency framework. For most medical specialties, these competencies are translated into specific EPAs used to determine the development of the resident and the level of supervision needed.24,27 In some postgraduate curricula, SDM is mentioned as an important theme or as one of the communication competencies although the specific tasks and behaviors that are needed in clinical practice are not spelled out.

디자인
Design

우리는 2017년 4월부터 8월까지 네덜란드 전문가들을 대상으로 수정된 온라인 델파이 연구를 실시하여 졸업후 의학교육을 위한 SDM EPA 및 기본 행동 지표에 대한 합의를 도출했습니다.

  • 델파이 기법은 의학교육 연구에 널리 사용되는 합의 방법입니다.28-31 이 기법은 특정 주제에 대한 합의에 도달하기 위해 설문지 또는 "라운드"를 여러 번 반복하여 사용하며, 각 연속 라운드마다 연구자는 이전 라운드의 결과를 피드백합니다. 합의에 도달하려면 최소 2번의 라운드가 연속적으로 진행되어야 합니다.32-34

We conducted a modified online Delphi study among Dutch experts between April and August 2017 to reach consensus on SDM EPAs and underlying behavioral indicators for postgraduate medical education.

  • The Delphi technique is a widely used consensus method for medical education research.28–31 This technique uses multiple iterations of questionnaires or “rounds” to reach agreement on a specific topic; for each successive round, the researcher feeds back the results of the previous round. At least 2 successive rounds must be carried out to reach consensus.32–34 

우리는 기존 문헌과 인터뷰 연구를 통해 첫 번째 델파이 라운드에서 사용된 EPA 및 행동 지표 목록을 개발했습니다.

  • 첫째, A.B.는 SDM 프레임워크, 역량 및 행동을 설명하는 주요 출판물을 검토하고13,21,35-37 스노우볼 방법과 웹 오브 사이언스에서 관련 인용을 통해 보완했습니다.
  • 둘째, 네덜란드의 SDM, 의사-환자 커뮤니케이션, 의학교육 전문가를 대상으로 인터뷰 연구(다른 곳에 보고될 예정)를 실시했습니다. A.B.는 17회의 반구조화된 대면 인터뷰를 실시했습니다. 모든 인터뷰는 데이터 수집 및 분석의 반복적인 과정을 통해 오디오 녹음, 전사, 주제별 분석이 이루어졌습니다.
  • 문헌 검토와 인터뷰 결과를 종합하여 ten Cate의 가이드라인에 따라 EPA와 행동 지표를 공식화했습니다.24
  • 우리는 이 목록을 SDM 전문가로 구성된 국가 자문위원회와 논의하고 다양한 배경(의사, SDM 연구자, 교육자)을 대표하는 연구팀이 설문지의 내용과 형식에 대해 합의에 도달할 때까지 이 목록을 편집했습니다. 

We developed the list of EPAs and behavioral indicators used in the first Delphi round by using existing literature and an interview study.

  • First, A.B. reviewed key publications describing SDM frameworks, competencies, and behaviors,13,21,35–37 complemented by the snowball method and relevant citations from the Web of Science.
  • Second, we conducted an interview study (which will be reported elsewhere) with Dutch experts in SDM, doctor–patient communication, and medical education. A.B. conducted 17 semistructured face-to-face interviews. All interviews were audiotaped, transcribed, and thematically analyzed during an iterative process of data collection and analysis.
  • Combining the findings of the literature review and interviews, we then formulated the EPAs and behavioral indicators according to ten Cate’s guidelines.24 
  • We discussed this list with our national advisory board, consisting of SDM experts, and edited this list until our research team, representing a variety of backgrounds (medical doctors, researchers in SDM, and educationalists), reached consensus regarding the content and formatting of our questionnaire.

참여자
Participants

우리는 의도적 표본 추출을 통해 잠재적 전문가 패널의 명단을 작성했으며,38 SDM, 의사-환자 커뮤니케이션, 의학 교육에 대한 전문성과 특별한 관심을 기준으로 삼았습니다. 가정의학과 직업 교육에는 의료 커뮤니케이션 교육이 포함된 오랜 전통이 있기 때문에 이 분야에서 일하는 전문가를 우선적으로 고려했습니다. 전체 목록에는 다음 등이 포함되었습니다. 

  • (1) 일상적인 환자 진료에 종사하는 임상의,
  • (2) SDM에 특별한 관심이 있는 환자 대표,
  • (3) 의료 커뮤니케이션, SDM 또는 근거 기반 의학(EBM) 분야의 트레이너, 코디네이터, 교육 개발자,
  • (4) SDM, 의료 커뮤니케이션, 환자 참여 분야의 연구자

연구 목적, 절차, 시간 투자에 대한 정보를 담은 이메일을 통해 57명의 잠재적 전문가 패널을 초대했습니다. 그런 다음 사전 동의를 얻은 후 참여에 동의한 사람들을 첫 번째 델파이 라운드에 초대했습니다(네덜란드 의학교육협회 윤리심의위원회, 파일 번호 894). 연구 기간 동안 이전 라운드를 완료한 모든 전문가 패널은 다음 델파이 라운드에 초대되었습니다. 연구 조교가 전문가들의 익명성을 유지하기 위해 분석 전에 모든 설문조사 데이터를 가명 처리했습니다.
We compiled a list of potential expert panel members using purposive sampling,38 based on expertise and special interest in SDM, doctor–patient communication, and medical education. Because family medicine vocational training has a long tradition of including training in medical communication, experts working in this field were preferred. The full list included

  • (1) clinicians active in routine patient care;
  • (2) patient representatives with a special interest in SDM;
  • (3) trainers, coordinators, and educational developers in medical communication, SDM, or evidence-based medicine (EBM); and
  • (4) researchers in SDM, medical communication, and/or patient participation.

We invited 57 potential expert panel members via an email with information about the purpose of the study, procedure, and time investment. We then invited those who agreed to participate to the first Delphi round after obtaining informed consent (Ethical Review Board of The Netherlands Association for Medical Education, file number 894). During the study, all expert panel members who finished a previous round were invited to participate in the next Delphi round. A research assistant pseudonymized all survey data before analysis to maintain the experts’ anonymity.

데이터 수집
Data collection

웹 기반 서비스 도구인 Qualtrics(미국 유타주 프로보 소재)를 사용하여 3라운드의 수정된 온라인 델파이 연구를 수행했습니다. 그림 1은 각 라운드의 중점 사항과 그 결과를 요약한 것입니다. 델파이 1, 2, 3라운드는 각각 2주, 3주, 6주 동안 진행되었습니다(1라운드, 4월 19일~5월 2일, 2라운드, 5월 29일~6월 19일, 3라운드, 7월 13일~8월 25일). 연구에 참여하지 않은 전문가 7명을 대상으로 1차 설문지를 시범 실시한 후 설문지의 텍스트와 레이아웃을 수정했습니다. 

We performed a 3-round modified online Delphi study using the web-based service tool Qualtrics (Qualtrics, Provo, Utah). Figure 1 summarizes the focus of each round and their outcomes. The first, second, and third Delphi rounds lasted 2, 3, and 6 weeks, respectively (Round 1, April 19 to May 2; Round 2, May 29 to June 19; Round 3, July 13 to August 25). After piloting the first-round questionnaire with 7 experts who did not participate in the study, we modified the text and layout of the questionnaire.

우리는 졸업후 교육을 마친 후 전공의들이 수행할 수 있는 EPA에 대한 합의를 도출하는 것을 목표로 했습니다. 각 EPA와 행동 지표에 대해 다음 두 가지 문항을 제시했습니다:

  • "나는 이 EPA/행동 지표를 교육 커리큘럼에 포함시키고 싶다",
  • "이 EPA/행동 지표는 임상에서 적용할 수 있다".

전문가들은 7점 리커트 척도(1=강력히 동의하지 않음~7=강력히 동의함)로 EPA와 행동 지표를 평가하도록 요청받았습니다. 첫 번째 탐색 라운드에서 응답자들은 이 두 가지 문항에 대해 EPA 및 행동 지표 목록을 평가했습니다. 각 라운드에서 의견과 피드백(예: 점수 설명, 텍스트 변경에 대한 제안, 추가 EPA 및 행동 지표)을 위한 열린 텍스트 상자를 제공했습니다. 첫 번째 라운드에서는 참가자의 인구통계학적 특성을 평가했습니다.
We aimed to achieve consensus on EPAs that residents are able to carry out after completing their postgraduate education. We presented these 2 statements for each EPA and behavioral indicator:

  • “I do like to include this EPA/behavioral indicator in the educational curriculum” and
  • “this EPA/behavioral indicator is applicable in clinical practice.”

Experts were asked to rate the EPAs and behavioral indicators on a 7-point Likert scale (1 = strongly disagree to 7 = strongly agree). In the first exploratory round, respondents rated a list of EPAs and behavioral indicators on these 2 statements. In each round, we provided open text boxes for comments and feedback (e.g., clarification of scores and suggestions for textual changes and additional EPAs and behavioral indicators). We assessed the demographic characteristics of the participants during the first round.

각 설문 항목에 대한 1차 결과의 개인 절대 점수와 그룹 평균 점수에 대한 개요를 제공하고, 1차 분석 후 EPA 및 행동 지표에 대한 수정 사항을 반영한 새로운 버전의 설문지를 제공하는 것으로 2차 조사를 시작했습니다. 다시 한 번 전문가들에게 1차에서 사용된 2개의 문항에 대해 각 EPA와 행동 지표를 평가해 달라고 요청했습니다. 이번 라운드에서는 다음을 목표로 삼았습니다.

  • (1) 최종 목록에 포함해야 할 EPA 및 행동 지표에 대한 합의를 도출하고,
  • (2) 여전히 합의가 이루어지지 않은 EPA 및 행동 지표를 다시 수정하는 것

We started the second round by providing an overview of the absolute personal scores and mean group scores resulting from the first round, for each questionnaire item, and a new version of the questionnaire, reflecting revisions we had made to the EPAs and behavioral indicators after our analysis of the first round. Again, we asked experts to rate each EPA and behavioral indicator on the 2 statements used in the first round. In this round, we aimed

  • (1) to reach consensus on which EPAs and behavioral indicators needed to be included in a near-final list and
  • (2) to revise again those EPAs and behavioral indicators for which there was still not consensus.

3차 회의는 두 부분으로 진행되었습니다. 

  • 먼저, 2차 라운드에서 전문가들이 합의에 이르지 못한 행동 지표2차 라운드 분석 후 재구성한 행동 지표를 제시했습니다. 전문가들에게 재구성한 행동 지표에 대한 평가를 요청하고, 이번 라운드에서 합의에 도달하면 새로운 버전이 최종 EPA 및 행동 지표 목록에 추가될 것임을 알렸습니다.
  • 둘째, 두 번째 라운드에서 합의에 도달한 EPA 및 행동 지표의 목록을 제시했습니다. 전문가들에게 다음과 같은 질문을 던졌습니다: "졸업후 의학교육을 위한 거의 최종 단계에 이른 이 SDM EPA 및 행동 지표 목록에 동의하십니까?" 응답 옵션은 "예"와 "아니오"였습니다.

The third round had 2 parts.

  • First, we presented the behavioral indicators on which our experts had not reached consensus in the second round and which we had reformulated after the analysis of the second round. We asked the experts to rerate the reformulated behavioral indicators, informing them that the new versions would be added to the final list of EPAs and behavioral indicators if they reached consensus during this round.
  • Second, we presented a list of EPAs and behavioral indicators on which they had reached consensus in the second round. We asked the experts this question: “Do you agree with this near-final list of SDM EPAs and behavioral indicators for postgraduate medical education?” Response options were “yes” and “no.”

데이터 분석
Data analyses

설문지의 정량적 구성요소는 Windows용 SPSS 24(IBM Corp., Armonk, New York)의 기술통계 프로그램을 사용하여 분석했습니다. 델파이 연구에서 합의에 대한 표준 정의가 없기 때문에2 연구팀은 첫 번째 두 라운드에서 개별 EPA 및 행동 지표에 대한 합의를 중앙값이 6점 이상이고 전문가 패널의 75% 이상이 "나는 이 EPA/행동 지표를 교육 과정에 포함시키고 싶다"는 문항에 6점 이상을 부여하는 것으로 정의하기로 합의했습니다. 우리는 교육 커리큘럼에 포함되어야 하는 SDM EPA 및 행동 지표에 대한 전체 개요를 개발하는 것을 목표로 했기 때문에 이 문항에 중점을 두었습니다. 우리는 3라운드에서 거의 최종 단계에 이른 EPA 및 행동 지표 목록에 대한 합의를 전문가 패널의 80% 이상 동의로 정의했습니다. 
We analyzed the quantitative components of the questionnaires using descriptive statistics in SPSS 24 for Windows (IBM Corp., Armonk, New York). Since there are no standard definitions for consensus in a Delphi study,2 the research team agreed to define consensus on individual EPAs and behavioral indicators in the first 2 rounds as a median score of ≥ 6 and ≥ 75% of the expert panel assigning a score of ≥ 6 to the statement, “I do like to include this EPA/behavioral indicator in the educational curriculum.” We focused on this statement since we aimed to develop a complete overview of SDM EPAs and behavioral indicators that need to be included in the education curriculum. We defined consensus on the near-final list of EPAs and behavioral indicators as ≥ 80% agreement of the expert panel in Round 3.28

A.B.는 열린 텍스트 상자에 제공된 모든 정성적 피드백을 그룹화하여 반복되는 주제를 식별했으며, 연구팀은 각 라운드가 끝난 후 EPA와 행동 지표를 재구성해야 하는지, 그렇다면 어떻게 재구성해야 하는지 논의하는 데 사용했습니다. 전문 번역가가 최종 EPA와 행동 지표를 영어로 번역한 다음, 영어와 SDM 및 의학교육 관련 용어에 능통한 네덜란드 원어민이 이를 다시 네덜란드어로 번역하여 번역의 정확성을 검증했습니다. 연구팀은 최종 영어 번역본을 승인했습니다. 
A.B. grouped all the qualitative feedback provided in the open text boxes to identify recurring themes, which the research team used after each round in discussing whether the EPAs and behavioral indicators should be reformulated and if so, how. A professional translator translated the final EPAs and behavioral indicators into English, and then a native Dutch speaker proficient in English and terms specific to SDM and medical education translated them back into Dutch to verify the accuracy of the translations. The research team approved the final English translation.

결과
Results

델파이 절차
Delphi procedure

초청된 57명의 잠재적 전문가 패널 중 35명이 참여에 동의했습니다(응답률 61%). 32명의 전문가 패널이 1차 설문을 완료했습니다(응답률 91%). 2명의 전문가가 시간 부족으로 설문지를 작성하지 않았고, 1명의 전문가가 의학교육에 대한 지식 부족으로 불참을 결정했습니다. 1차 설문을 완료한 전문가 32명 전원이 2차 및 3차 설문에도 참여했습니다. 전문가들의 연령은 31세에서 61세(평균 47세)였으며, 여성이 21명(66%)이었습니다. 전문가 패널에는 관련성이 있다고 판단되는 모든 직업적 배경이 포함되었습니다(참가자 특성은 표 1 참조). 
Of the 57 invited potential expert panel members, 35 consented to participate (a response rate of 61%). The first round was completed by 32 expert panel members (a response rate of 91%). Two experts did not complete the questionnaire due to a lack of time, and 1 expert decided not to participate due to a lack of knowledge of medical education. All 32 experts who completed the first round also completed the second and third rounds. The experts’ ages ranged from 31 to 61 years (a mean of 47 years), and 21 were women (66%). All professional backgrounds that we considered relevant were represented in our expert panel (see Table 1 for participant characteristics).

델파이 결과
Delphi results

1라운드: 1라운드에서는 전문가 패널에게 6개의 EPA와 26개의 행동 지표를 제시했습니다(라운드 요약은 그림 1과 디지털 부록 1(https://links.lww.com/ACADMED/A997)을 참조하세요). 전문가들의 피드백을 바탕으로 5개의 EPA를 수정했습니다. 

  • 2개의 EPA("레지던트는 환자의 개인적 상황에 맞게 의사소통을 조정한다" 및 "레지던트는 환자에게 공유 의사 결정의 바람직성에 대해 알린다")와 관련 행동 지표가 중복되어, 이 두 개의 EPA를 "레지던트는 환자와 공유 의사 결정의 바람직성에 대해 논의한다"로 통합하고 관련 행동 지표를 이 새로운 EPA에 따라 재배치했습니다.
  • 전문가들은 다른 두 가지 EPA의 중복에 대해서도 언급했습니다: "레지던트는 환자의 선호도를 탐색한다" 및 "레지던트는 환자가 옵션을 숙고하는 데 도움을 준다"와 관련된 행동 지표가 중복된다는 점을 언급했습니다. 따라서 새롭게 구성된 이 EPA에 따라 모든 행동 지표를 재정렬했습니다: "레지던트는 환자의 선호도와 숙고를 탐색한다."
  • 전문가들은 "레지던트가 환자에게 관리 옵션에 대해 알려준다"는 EPA가 너무 지시적이라고 평가했기 때문에, "레지던트가 환자와 관리 옵션에 대해 논의한다"로 다시 공식화했습니다.
  • "전공의는 환자와 함께 충분한 논의를 거쳐 결정을 내린다"는 EPA는 전문가들이 긍정적으로 평가하고 수정 제안을 하지 않아 변경하지 않았습니다. 

Round 1. In the first round, we presented 6 EPAs and 26 behavioral indicators to the expert panel (for a summary of the rounds, see Figure 1 and Supplemental Digital Appendix 1 at https://links.lww.com/ACADMED/A997). We revised 5 EPAs using the experts’ feedback.

  • Due to overlap between 2 EPAs (“The resident tailors the communication to the patient’s personal context” and “the resident informs the patient about the desirability of shared decision making”) and their associated behavioral indicators, we combined those 2 EPAs into “the resident discusses the desirability of shared decision making with the patient” and rearranged their associated behavioral indicators under this new EPA.
  • Experts also mentioned overlap between 2 other EPAs: “The resident explores the patient’s preferences” and “the resident assists the patient in deliberating the options” and their associated behavioral indicators. Therefore, we rearranged all behavioral indicators under this newly formulated EPA: “The resident explores the patient’s preferences and deliberations.”
  • Because the experts evaluated the EPA “the resident informs the patient about the options for management” as too directive, we reformulated this EPA as “the resident discusses the options for management with the patient.”
  • We did not change the EPA “the resident takes a well-argued decision together with the patient” because the experts evaluated it positively and made no suggestions for revision.

acadmed_2020_10_28_baghus_acadmed-d-19-02400_sdc1.pdf
0.07MB



제시된 26개의 행동 지표 중 전문가의 질적 피드백을 바탕으로 2라운드 전에 15개를 수정했습니다(보충 디지털 부록 1: https://links.lww.com/ACADMED/A997 참조). 

  • "레지던트는 환자의 선호도가 환자의 관점, 개인적 목표 및 가치와 어떻게 관련되는지 명확히 설명한다"와 "레지던트는 환자가 선택지를 고려할 때 관점, 개인적 목표 및 가치를 고려하여 상담한다"라는 두 가지 행동 지표를 새로운 행동 지표로 통합했습니다: "레지던트는 환자의 선호도가 환자의 관점 및 개인적 목표와 가치에 충분히 부합하는지 논의한다."
  • 또한 15개의 개정된 행동 지표 중 13개의 문구를 약간 변경했습니다. 나머지 11개 행동 지표는 긍정적으로 평가되었거나 전문가들이 수정에 대한 제안을 하지 않았기 때문에 변경하지 않고 그대로 두었습니다. 

Of the 26 behavioral indicators presented, we revised 15 before Round 2, using the experts’ qualitative feedback (see Supplemental Digital Appendix 1 at https://links.lww.com/ACADMED/A997).

  • We combined the 2 behavioral indicators “the resident clarifies how the patient’s preferences relate to their perspective and personal goals and values” and “the resident counsels the patient in deliberating the options, taking perspectives and personal goals and values into account” into a new behavioral indicator: “The resident discusses whether the patient’s preferences fit in sufficiently with their perspective and personal goals and values.”
  • Furthermore, we made minor textual changes to 13 of the 15 revised behavioral indicators. We left the remaining 11 behavioral indicators unchanged because they were evaluated positively and/or the experts offered no suggestions for revision.

2라운드. 2라운드에서는 1라운드의 결과물인 4개의 EPA와 25개의 행동지표를 제시했습니다(그림 1 및 디지털 부록 1 참조: https://links.lww.com/ACADMED/A997). 2라운드에서 합의가 이루어졌고 전문가들이 4가지 EPA에 대해 관련 정성적 피드백을 제공하지 않았기 때문에, 변경되지 않은 EPA를 최종 목록에 포함시켰습니다. 17개의 행동 지표에 대한 합의가 이루어졌습니다. 전문가들이 변경에 대한 관련 제안을 하지 않았기 때문에 이러한 지표는 변경하지 않고 최종 목록에 포함시켰습니다. 합의가 이루어지지 않은 8개 행동 지표 중 전문가들의 정성적 피드백을 바탕으로 2개 지표를 재구성했습니다.

  • "전공의가 중립적인 태도로 자신의 선호도를 심의에 반영한다"는 행동 지표는 "입주자가 표시된 경우 자신의 선호도를 반영한다"로 재구성했습니다.
  • 행동 지표 "레지던트는 (환자의) 선호도에 대한 다른 관련 의료 전문가, 친척, 친구의 정보가 의사 결정 과정에 도움이 되는 경우 심의에 포함한다"를 "레지던트는 선호도 심의에 관련성이 있는 경우 관련 제3자(의료 전문가, 친척, 친구 포함)가 제공한 정보를 포함한다"로 재구성했습니다.
  • 나머지 6개 행동 지표는 전문가들이 합의에 이르지 못했고 관련 수정 제안을 하지 않았기 때문에 삭제했습니다.

Round 2. We presented the 4 EPAs and 25 behavioral indicators resulting from Round 1 in the second round (see Figure 1 and Supplemental Digital Appendix 1 at https://links.lww.com/ACADMED/A997). Because consensus was reached and the experts provided no relevant qualitative feedback on the 4 EPAs during Round 2, we included the unchanged EPAs in the near-final list. Consensus was reached on 17 behavioral indicators. Because the experts did not provide any relevant suggestions for change, we included these indicators unchanged in the near-final list. Of the 8 behavioral indicators on which no consensus was reached, we reformulated 2 using the experts’ qualitative feedback.

  • The behavioral indicator “the resident introduces own preferences into the deliberation in a neutral manner” was reformulated as “the resident introduces own preferences where indicated.”
  • The behavioral indicator “the resident involves information from other concerned health care professionals, relatives, and friends about the (preferences of the) patient in the deliberations, if contributing to the decision-making process” was reformulated as “the resident includes the information provided by involved third parties (including health care professionals, relatives, and friends) if this is relevant for the deliberation of preferences.”
  • We removed the remaining 6 behavioral indicators because the experts did not reach consensus and did not provide any relevant suggestions for revision.

3라운드. 3라운드에서는 2라운드의 결과로 재구성한 2개의 행동 지표와 2라운드에서 전문가들이 합의에 도달한 4개의 EPA와 17개의 행동 지표의 거의 최종적인 목록을 제시했습니다. 그림 1 및 보충 디지털 부록 1 참조(https://links.lww.com/ACADMED/A997)). 
Round 3. In the third round, we presented the 2 behavioral indicators we had reformulated as a result of Round 2 and the near-final list of 4 EPAs and 17 behavioral indicators on which the experts had reached consensus in Round 2. See Figure 1 and Supplemental Digital Appendix 1 at https://links.lww.com/ACADMED/A997).

전문가들은 재구성된 2개의 행동 지표를 평가했습니다. 

  • "레지던트는 지시된 경우 자신의 선호도를 소개한다"는 행동 지표에 대해서는 합의에 이르지 못했는데, 이는 "이 행동 지표를 교육 과정에 포함시키고 싶다"는 문항에 대해 56%의 전문가만이 6점 이상을 부여했기 때문입니다. 선호도를 중립적으로 진술하기 어렵기 때문에 레지던트의 선호도가 의사 결정 과정에서 환자에게 지나치게 영향을 미칠 수 있다는 의견이 주를 이뤘습니다.
  • "레지던트는 선호도 심의와 관련이 있는 경우 관련 제3자(의료 전문가, 친척, 친구 등)가 제공한 정보를 포함한다"는 행동 지표를 최종 목록에 추가했는데, 중간값이 6점으로 합의가 이루어졌고 전문가의 81%가 6점 이상이었기 때문입니다(표 2 참조).

The experts rated the 2 reformulated behavioral indicators.

  • No consensus was reached on the behavioral indicator “the resident introduces own preferences where indicated” because only 56% of the experts scored ≥ 6 on the statement “I do like to include this behavioral indicator in the educational curriculum.” The main argument given was that the resident’s preference might influence the patient too much in the decision-making process since it is hard to state a preference in a neutral manner.
  • We added the behavioral indicator “the resident includes the information provided by involved third parties (including health care professionals, relatives, and friends) if this is relevant for the deliberation of preferences” to the final list since consensus was reached with a median score of 6, and 81% of the experts had a score ≥ 6 (see Table 2).

세 차례의 델파이 라운드 끝에 졸업후 의학교육을 위한 4개의 SDM EPA와 18개의 행동 지표에 대한 합의가 이루어졌습니다(표 2 참조). 32명의 전문가 중 30명(94%)이 이 SDM EPA 및 행동 지표 목록에 동의했습니다. 이 목록에 동의하지 않은 2명의 전문가는 어떠한 질적 피드백도 제공하지 않았습니다. 합의에 도달한 4개의 EPA는 모두 "이 EPA/행동 지표는 임상 실무에 적용 가능하다"는 문항에서 높은 평가를 받았지만, 합의에 도달한 18개의 행동 지표 중 11개에 대해서만 75% 이상의 전문가 패널이 이 문항에 6점 이상을 부여했습니다(표 2 참조). 
After 3 Delphi rounds, consensus was reached on 4 SDM EPAs and 18 behavioral indicators for postgraduate medical education (see Table 2). Of the 32 experts, 30 (94%) agreed on this list of SDM EPAs and behavioral indicators. The 2 experts who did not agree with this list did not give any qualitative feedback. All 4 EPAs on which consensus was reached also received high ratings on the statement “this EPA/behavioral indicator is applicable in clinical practice”; however, this statement was scored ≥ 6 by ≥ 75% of the expert panel on only 11 of the 18 behavioral indicators on which consensus was reached (see Table 2).

토론
Discussion

주요 결과 요약
Summary of main findings

이 델파이 연구에서 네덜란드의 다학제 전문가 32명으로 구성된 패널은 SDM의 일상적 적용을 늘리기 위해 전공의가 졸업후 의학교육 과정에서 교육받아야 하는 4개의 EPA와 18개의 관련 행동 지표에 대해 합의에 도달했습니다. 최종 목록에 대한 94%(n = 30)의 동의는 높은 수준의 합의가 이루어졌음을 나타냅니다. 
In this Delphi study, a multidisciplinary Dutch panel of 32 experts reached consensus on 4 EPAs and 18 associated behavioral indicators for SDM that residents should be trained in during postgraduate medical education to increase the routine application of SDM. The 94% (n = 30) agreement on the near-final list indicates a high degree of consensus.

주요 결과에 대한 반성
Reflection on main findings

개발된 EPA는 잘 알려진 SDM 모델과 일치하며,35,36 졸업후 의학 교육의 최종 숙련도 수준에 맞게 공식화된 SDM 행동을 설명하고 적절한 SDM을 일상적으로 적용할 수 있는 임상의를 배출하는 것을 목표로 합니다.23 기본 행동 지표는 직장 학습 중 개별 학습 요구에 따라 EPA의 구성 요소를 해결할 수 있는 여지를 제공함으로써 맞춤형 학습 과정을 지원합니다. 개발된 EPA의 의도는 이론과 실무를 연계하고 전문적 실무 단위를 설명하여 역량을 연결하는 것입니다.24 2015 CanMEDS 의사 역량 프레임워크에서 SDM의 운영은 일반적으로 3가지 역량에 설명되어 있습니다. 이는 다음에 중점을 둡니다.14

  • 각 환자의 고유한 요구와 선호도, 임상 상태와 상황에 맞게 SDM을 적용하는 것,
  • 환자 및 그 가족을 존중하고 비판하지 않으며 문화적으로 안전한 방식으로 논의하는 것,
  • 환자의 건강에 관한 정보에 입각한 결정을 지원하기 위한 의사소통 기술과 전략을 사용하는 것

The developed EPAs, which are in line with well-known SDM models,35,36 describe SDM behaviors formulated for the end-stage proficiency level of postgraduate medical training, and aim to deliver clinicians that are able to routinely apply adequate SDM.23 The underlying behavioral indicators support tailored learning processes by providing room to address the building blocks of the EPAs, depending on individual learning needs during workplace learning. The intention of the developed EPAs is to align theory and practice and bridge competencies by describing units of professional practice.24 In the 2015 CanMEDS physician competency framework, the operationalization of SDM is generic and described in 3 enabling competencies. These focus on

  • adapting SDM to the unique needs and preferences of each patient and to his or her clinical condition and circumstances;
  • facilitation of discussions with patients and their families in a respectful, nonjudgmental, and culturally safe manner; and
  • use of communication skills and strategies to support informed patient decisions regarding their health.14 

SDM EPA는 여러 임상적 만남에서 발생할 수 있는 의사 결정의 기본 과정을 설명하기 위해 고안되었습니다. 여기에는 의학 지식, 커뮤니케이션, 협업, EBM과 같은 역량 영역이 통합되어 있습니다. 이러한 방식으로 진행하면서 우리는 2014년 Warm 등이 레지던트를 위한 관찰 가능한 실습 활동의 매핑에 관한 연구에서 프로세스 지향으로 분류한 EPA를 개발하고자 했습니다. 이러한 EPA는 의료 분야(예: 비뇨기과 의료 분야의 요실금 평가)에 특화된 내용 중심 EPA와 구별되어야 합니다.39 2019년 EPA에 대한 범위 검토에서 Shorey와 동료들은 이러한 전문 분야별 EPA 개발에 초점을 맞춘 12개의 연구를 살펴봤는데, 대부분 의학 졸업후 교육에 관한 것이었습니다.26 SDM은 의학적 요구와 환자의 가치 및 선호도를 고려하여 의료 분야의 구체적인 임상 업무에 매핑된 역량을 상황에 맞게 적용해야 하므로, 이 연구에서 개발된 SDM EPA는 그 실행을 지원할 수 있습니다.40 
Our SDM EPAs are intended to describe the underlying process of decision making, which may take place over several clinical encounters. They integrate competency domains, such as medical knowledge, communication, collaboration, and EBM. In proceeding in this manner, we intended to develop EPAs that Warm et al categorized in their 2014 study on the mapping of observable practice activities for residents as process oriented. These EPAs must be distinguished from content-oriented EPAs, which are specific for the medical discipline (e.g., evaluating urinary incontinence in the medical discipline of urology).39 In a 2019 scoping review of EPAs, Shorey and colleagues looked at 12 studies that all focused on the development of these specialty-specific EPAs, mostly for medical graduate education.26 The SDM EPAs developed in this study may support their implementation, as SDM requires a context-specific application of competencies mapped to concrete clinical tasks of the medical discipline, taking the medical needs and the values and preferences of the patient into consideration.40

시사점
Implications

다음 단계는 기존의 역량 기반 직장 커리큘럼에 SDM EPA를 구현하는 것입니다. SDM 교육의 효과에 관한 문헌을 검토한 결과, 의료 전문가를 대상으로 한 대부분의 개입은 단일 교육 세션으로 구성되었으며, 시간이 지남에 따라 임상에서 SDM의 지속 가능한 적용이 감소하는 것으로 나타났습니다.12,41-43 임상에서 학습과 지속 가능한 적용 사이의 전달 격차를 해소하고 미래 임상의의 전문 레퍼토리에 SDM EPA를 통합하는 것을 지원하기 위해 종단적 직장 교육이 필요합니다.22 확인된 EPA는 임상에서 SDM 과정을 관찰하고 이러한 관찰을 기반으로 의미 있는 피드백을 제공하기 위한 도구로 사용될 수 있습니다. SDM EPA가 전문성 개발을 지원하려면 개별 학습 과정이 시작점이 되어야 하며, 이를 통해 EPA를 박스 체크 연습으로 사용하는 것을 방지할 수 있습니다. 현재 전문의 수련에서 EPA가 사용되는 방식에 따라, 확인된 EPA는 레지던트의 역량 수준을 평가하는 데 지침이 될 수도 있습니다. 또한, 적절한 역할 모델링은 직장 기반 학습에 필수적이므로 임상 수퍼바이저의 지속적인 전문 교육에 EPA를 통합하여 SDM 역량을 강화할 수 있습니다. SDM은 EBM의 핵심 구성요소이며, 문헌에 따르면 레지던트들이 환자 중심 의사소통과 같은 복잡한 기술을 의료 전문 지식과 통합할 때 가장 효과적으로 학습하는 것으로 나타났기 때문에,18,19 졸업후 EBM 커리큘럼에 SDM EPA를 통합할 것을 제안합니다.17,19 추가 연구를 통해 SDM 학습에 대한 잠재적 장벽 및 촉진 요인을 해결하고 학습자에게 임상에서 SDM을 실천할 수 있는 구체적인 언어의 예를 제공할 필요가 있습니다.
A next step is the implementation of the SDM EPAs in existing competency-based workplace curricula. A review of the literature on the effects of training SDM showed that most interventions with health professionals consisted of single training sessions and that sustainable application of SDM in clinical encounters diminished over time.12,41–43 Longitudinal workplace training is necessary to bridge the transfer gap between learning and sustainable application in clinical practice and to support integration of the SDM EPAs into the professional repertoire of future clinicians.22 The identified EPAs can be used as a tool for observing the SDM process in clinical encounters and for providing meaningful feedback based on these observations. For the SDM EPAs to support the development of expertise, individual learning processes should be a starting point to prevent using the EPAs as a box-checking exercise. In line with how EPAs are currently used in medical specialty training, the identified EPAs may also guide the assessment of the resident’s level of competence. Additionally, the EPAs can be incorporated into the continuous professional education of clinical supervisors to enhance their SDM competence since adequate role modeling is essential in workplace-based learning. Because SDM is a key component of EBM and literature shows that residents learn complex skills such as patient-centered communication optimally when these skills are integrated with medical expertise,18,19 we suggest integrating SDM EPAs into the postgraduate EBM curricula.17,19 Further research needs to address potential barriers to and facilitators for learning SDM and to provide learners with examples of concrete language to practice SDM during their clinical encounters.

강점과 한계
Strengths and limitations

저희가 알기로는 SDM에 대한 EPA와 행동 지표에 대한 연구는 이번이 처음입니다. 델파이 기법은 EPA와 행동지표에 대한 합의를 도출하는 데 적합한 접근법이라고 생각하며, 전문가들이 익명으로 개별적으로 설문지를 작성하도록 하여 다른 패널의 직접적인 영향을 제한하고 개별 의견에 동등한 가중치를 부여했습니다.29-31 이전 라운드의 결과를 다음 라운드에 피드백함으로써 다른 전문가들의 평가와 관련하여 초기 의견을 재고하도록 장려하고자 했습니다. 
To our knowledge, this is the first study on EPAs and behavioral indicators for SDM. We believe the Delphi technique is a suitable approach to gain consensus on EPAs and behavioral indicators; we limited direct influence of other panel members and weighted individual opinions equally by having the experts fill in questionnaires anonymously and individually.29–31 By feeding back the results of the previous round to the next, we intended to promote reconsideration of initial opinions in relation to other experts’ ratings.

참여자의 배경이 다양하고 관련성이 있다고 판단되는 모든 배경이 참여함으로써 개발된 EPA의 품질이 향상되었다고 생각합니다. 이러한 EPA의 품질은 졸업후 의학 교육에 적용하기가 더 쉬워질 수 있습니다. 첫 번째 라운드를 완료한 32명의 전문가 패널은 모두 델파이 프로세스 전체를 완료했는데, 이는 주제에 대한 전문가들의 관심, 연구의 중요성, 그리고 라운드의 빠른 연속성을 반영하는 결과입니다. 첫 번째 델파이 라운드에서는 포괄적인 사전 작업을 바탕으로 개발한 EPA와 행동 지표를 사용했습니다. 전통적인 델파이 연구에서는 전문가들이 직접 EPA와 행동 지표를 생성할 수도 있었지만, 이러한 접근 방식은 전문가들에게 너무 많은 시간이 소요될 수 있다고 생각했습니다. 전문가들이 질적 피드백을 제공하도록 장려하여 이러한 영향을 최소화하고자 했지만, 이러한 선택이 EPA 및 행동 지표 목록의 구성에 영향을 미쳤을 수 있습니다. 전문가들의 의견을 분석한 결과, EPA 및 행동지표의 내용에 큰 변화가 필요하지 않다고 판단했으며, 이 결과는 연구를 위해 개발한 EPA 및 행동지표의 적절성을 확인한 것으로 보입니다. 
We believe the quality of the developed EPAs was improved by the differences in the participants’ backgrounds and by the presence of all backgrounds we considered relevant. The quality of these EPAs may make it easier to implement them in postgraduate medical education. All 32 expert panel members who completed the first round completed the entire Delphi process, which reflects experts’ interest in the theme, the importance of the study, and the quick succession of the rounds. For the first Delphi round, we used EPAs and behavioral indicators that we had developed based on our comprehensive preliminary work. Although in a traditional Delphi study, experts could have generated EPAs and behavioral indicators themselves, we believe that this approach would have been too time consuming for the experts. Our choice may have influenced the composition of the list of EPAs and behavioral indicators although we intended to minimize such influence by encouraging the experts to give qualitative feedback. Based on our analysis of the experts’ input, we determined no substantial changes to the content of the EPAs and behavioral indicators were needed; this result seems to confirm the appropriateness of the EPAs and behavioral indicators that we developed for the study.

이 델파이 연구는 언어와 문화에 매우 민감하기 때문에 네덜란드의 국가 단위로 한정하여 실시했습니다. 그럼에도 불구하고 EPA에는 다른 국가에서도 각자의 국가적 필요에 맞게 적용할 수 있는 일반적인 요소가 포함되어 있습니다. 졸업후 의학 교육에 적용하려고 했음에도 불구하고 이 델파이 연구에 레지던트를 참여시키지 않은 이유는 EPA와 SDM의 개념이 레지던트에게 너무 복잡하다고 생각했기 때문입니다. 하지만 전공의를 포함시켰다면 SDM 교육을 받을 때 전공의가 직면하는 전이 격차에 대해 더 많은 인사이트를 얻을 수 있었을 것입니다. 
We limited our implementation of this Delphi study to the national level, in the Netherlands, because SDM is very sensitive to language and culture. Nonetheless, the EPAs include generic elements that other countries can adapt to their national needs. We decided not to invite residents to participate in this Delphi study despite the intended implementation in postgraduate medical training because we believe that the concepts of EPAs and SDM are too complex for residents. However, including residents might have given us more insight into the transfer gap they face when being trained in SDM.

결론
Conclusions

우리는 SDM 교육의 질과 임상에서 SDM의 적용을 개선하기 위해 졸업후 의학 교육을 위한 SDM의 EPA와 관련 행동 지표를 개발하는 데 성공했습니다. 
We succeeded in developing EPAs and associated behavioral indicators for SDM for postgraduate medical education to improve the quality of SDM training and the application of SDM in clinical practice.

 


Acad Med. 2021 Jan 1;96(1):126-133. doi: 10.1097/ACM.0000000000003618.

Identifying Entrustable Professional Activities for Shared Decision Making in Postgraduate Medical Education: A National Delphi Study

Affiliations collapse

1A. Baghus is a PhD student and resident, Department of Family Medicine, Care and Public Health Research Institute, Maastricht University, Maastricht, the Netherlands; ORCID: http://orcid.org/0000-0002-6481-9256 .

2E. Giroldi is assistant professor, Department of Family Medicine, Care and Public Health Research Institute and Department of Educational Development and Research, School of Health Professions Education, Maastricht University, Maastricht, the Netherlands; ORCID: http://orcid.org/0000-0003-3254-4849 .

3J. Muris is professor, Department of Family Medicine, Care and Public Health Research Institute, Maastricht University, Maastricht, the Netherlands; ORCID: http://orcid.org/0000-0002-8780-476X .

4A. Stiggelbout is professor, Department of Biomedical Data Sciences, Leiden University Medical Center, Leiden, the Netherlands; ORCID: http://orcid.org/0000-0002-6293-4509 .

5M. van de Pol is associate professor, Department of Primary and Community Care, Radboud University Medical Center, Nijmegen, the Netherlands; ORCID: http://orcid.org/0000-0002-0977-7954 .

6A. Timmerman is assistant professor, Department of Family Medicine, Care and Public Health Research Institute, Maastricht University, Maastricht, the Netherlands; ORCID: http://orcid.org/0000-0002-8114-8802 .

7T. van der Weijden is professor, Department of Family Medicine, Care and Public Health Research Institute, Maastricht University, Maastricht, the Netherlands; ORCID: http://orcid.org/0000-0002-7469-3781 .

PMID: 32739926

PMCID: PMC7769188

DOI: 10.1097/ACM.0000000000003618

Free PMC article

Abstract

Purpose: Although shared decision making (SDM) is considered the preferred approach in medical decision making, it is currently not routinely used in clinical practice. To bridge the transfer gap between SDM training and application, the authors aimed to reach consensus on entrustable professional activities (EPAs) for SDM and associated behavioral indicators as a framework to support self-directed learning during postgraduate medical education.

Method: Using existing literature on SDM frameworks and competencies; input from an interview study with 17 Dutch experts in SDM, doctor-patient communication, and medical education; and a national SDM expert meeting as a starting point, in 2017, the authors conducted a modified online Delphi study with a multidisciplinary Dutch panel of 32 experts in SDM and medical education.

Results: After 3 Delphi rounds, consensus was reached on 4 EPAs-(1) the resident discusses the desirability of SDM with the patient, (2) the resident discusses the options for management with the patient, (3) the resident explores the patient's preferences and deliberations, and (4) the resident takes a well-argued decision together with the patient. Consensus was also reached on 18 associated behavioral indicators. Of the 32 experts, 30 (94%) agreed on this list of SDM EPAs and behavioral indicators.

Conclusions: The authors succeeded in developing EPAs and associated behavioral indicators for SDM for postgraduate medical education to improve the quality of SDM training and the application of SDM in clinical practice. These EPAs are characterized as process EPAs for SDM in contrast with content EPAs related to diverse medical complaints. A next step is the implementation of the SDM EPAs in existing competency-based workplace curricula.

복잡성 보기: 공유의사결정의 렌즈로서 문화-역사적 활동이론(CHAT) (Acad Med, 2021)
Seeing Complexity: Cultural Historical Activity Theory (CHAT) As a Lens for Shared Decision Making 
Catherine T. Witkop, MD, MPH, Lauren A. Maggio, PhD, Emily J. Harvey, MA, and Dario M. Torre, MD, PhD

과학적 근거와 더불어 환자의 가치와 선호도를 고려하는 환자와 의료진 간의 협력적 접근 방식인 공유 의사 결정은 아직 그 잠재력을 충분히 실현하지 못한 복잡한 임상 활동입니다. 공유 의사 결정은 '환자 중심 치료의 정점'으로 묘사되어 왔지만,1 이를 광범위하게 시행하거나 이를 통해 선택한 치료법을 준수하는 등 환자 치료 결과가 개선된다는 증거는 제한적입니다. 2,3 교육 및 훈련의 격차 4,5가 공유 의사 결정의 장애물로 지적되어 왔으며, 효과적인 교육적 개입에 대한 증거가 일관되지 않아 6-8 보건 전문직 교육자들은 이 복잡한 활동을 가장 잘 처리하는 방법에 대한 지침이 부족합니다. 우리는 개별 에이전트가 자신의 사회적 및 행동적 맥락에서 결정을 공동 구성하는 공유 의사결정을 위해서는 환자의 주체성과 사회문화적 영향을 통합하는 접근 방식이 필요하다고 주장합니다. 이 글에서는 연구자와 교육자가 공유 의사결정의 복잡성을 조사하고, 교육 전략을 개발하기 위한 프레임워크를 제공하며, 다른 보건 전문직 교육 과제를 해결할 때 고려할 수 있는 렌즈로서 문화역사활동이론(CHAT)을 제안합니다. 
Shared decision making, a collaborative approach between patient and provider that takes into account the patient’s values and preferences in addition to the scientific evidence, is a complex clinical activity that has not realized its full potential. Although shared decision making has been described as the “pinnacle of patient-centered care,” 1 there is limited evidence of its widespread implementation or that its use leads to improved patient outcomes, such as adherence with the chosen treatment. 2,3 Gaps in education and training 4,5 have been cited as barriers to shared decision making and evidence is inconsistent on effective educational interventions, 6–8 leaving health professions educators with insufficient guidance on how to best address this complex activity. We argue that shared decision making, in which individual agents co-construct the decision from within their own social and behavioral contexts, requires an approach that incorporates patient agency and sociocultural influences. In this article, we propose cultural historical activity theory (CHAT) as a lens for researchers and educators to examine the complexity of shared decision making, to provide a framework for developing instructional strategies, and to consider in solving other health professions education challenges.

공유 의사 결정의 복잡성을 설명하기 위해 다음과 같은 가상의 사례를 제시합니다. 
To demonstrate the complexity of shared decision making, we present the following fictitious case.

상황 1: 21세의 환자가 피임을 위해 담당 주치의인 레지던트 의사에게 진찰을 받으러 왔습니다. 이 환자는 피임을 해본 적이 없으며, 여동생이 피임약을 복용한다는 사실 외에는 피임 방법에 대해 거의 알지 못합니다. 그녀의 병력은 복잡하지 않습니다. 진료에 늦은 레지던트는 여러 가지 피임법의 상대적 효과를 나열한 차트를 보여주며 피임법을 설명합니다. 환자는 어떤 방법이 최선인지 불확실하다고 말합니다. 레지던트는 단호하게 "피임약에 대해 가장 잘 아시는 분이시니 피임약부터 시작하겠습니다. 약을 챙겨서 오늘부터 복용하시면 됩니다."라고 말합니다. 
Encounter 1: A 21-year-old patient presents to her provider, a resident physician, for birth control. She has never been on contraception and, other than knowing her sister takes birth control pills, understands little about her options. Her medical history is uncomplicated. The resident, who is behind in his clinic, runs through the options, sharing a chart listing relative effectiveness of different methods. The patient expresses uncertainty about which would be best. The resident states conclusively, “Since you know the most about the pill, we can start with that. You can pick them up and start today.”
사례 2: 환자가 2개월 후 다시 병원을 찾았습니다. 그녀는 임신을 피하고 싶어서 피임약에 감사했지만, 야간 근무를 하다 보니 피임약 복용을 잊어버리는 일이 잦았습니다. 한 친구가 피임법 선택에 도움이 되는 의사 결정 보조 도구를 추천했습니다. 그녀가 일련의 교육 모듈을 살펴보고 몇 가지 질문에 답한 후, 의사 결정 지원 도구는 그녀의 선호도에 가장 적합한 3가지 방법을 제안했습니다. 그녀는 최근 공유 의사 결정에 관한 워크숍을 수료한 레지던트와 의사 결정 지원의 결과를 공유했습니다. 레지던트는 그녀의 월경 이력과 치료 목표에 대해 자세히 물어봅니다. 그는 의사결정 지원 결과물을 바탕으로 그녀가 중요하게 생각하는 피임 방법과 선호도를 공유하도록 독려합니다. 두 사람은 결국 생리 주기가 길고, 임신을 피하고자 하는 그녀와 남편의 현재 욕구, 교대 근무를 고려할 때 자궁 내 장치(IUD)가 좋은 선택이라는 공통된 결론에 도달합니다. 그는 그녀에게 시술의 위험과 이점에 대해 상담하고 주치의의 감독 하에 IUD를 삽입합니다. 
Encounter 2: The patient returns to the clinic 2 months later. She was thankful for the pills because she wants to avoid pregnancy, but she works the night shift and finds she frequently forgets to take them. A friend recommended a decision aid designed to help select a birth control method. After she had gone through a series of educational modules and answered several questions, the decision aid suggested 3 methods most suited to her preferences. She shares the output of the decision aid with the resident, who recently completed a workshop on shared decision making. The resident asks more about her menstrual history and goals for treatment. He encourages her to share what she values in a contraceptive method and her preferences based on the output of the decision aid. They ultimately come to a shared conclusion that an intrauterine device (IUD) is a good option, given her heavy menstrual cycles, her and her husband’s current desire to avoid pregnancy, and her shift work. He counsels her about the risks and benefits of the procedure and, under the supervision of his attending physician, places the IUD.

환자에게 매번 피임법을 제공하지만, 두 번의 방문 사이에는 현저한 차이가 있습니다. 가부장적이라고 할 수 있는 만남 1에서는 의사가 건강 관리 결정의 일차적 주체로서 역할을 합니다. 이러한 전통적인 역할에서 의사는 환자보다 건강 상태와 의료 옵션에 대해 더 많은 정보를 가지고 있습니다. 9 첫 번째 만남과 달리 두 번째 만남은 공유 의사 결정을 묘사하며 환자 주체성의 중요성과 사회문화적 요소의 영향력을 강조합니다. 환자는 자신의 가치와 선호도에 대해 더 많은 지식을 가지고 있으며, 건강한 행동과 긍정적인 건강 결과에 대한 잠재적 장애물에 대해 생생하고 직접적인 지식을 가지고 있습니다. 기든스가 정의한 대로, 개인이 주체성agency을 가지려면 의도적으로 행동해야 하고, 자신의 의도에 따라 행동할 수 있는 능력이 있어야 하며, 새로운 사건을 만들거나 기존 사건에 개입할 수 있는 힘이 있어야 합니다. 10 의사가 환자에게 선호도와 가치관에 대해 질문하는 장면 2에서 볼 수 있듯이, 주체성은 개인의 불활성 특성이 아니라 사회 구조에 의해 형성되거나 촉진되거나 제약을 받습니다. 공유 의사결정을 이해하려면 이러한 내재적 복잡성을 가시화할 수 있는 이론적 렌즈가 필요합니다. 
Although the patient is provided contraception in each encounter, there is a striking difference between the visits. In Encounter 1, which could be described as paternalistic, the physician acts as the primary agent in the health care decision. In this traditional role, the physician has more information regarding health status and medical options than the patient does. 9 Unlike the first encounter, Encounter 2 depicts shared decision making and highlights both the importance of patient agency and the influence of sociocultural elements. The patient has more knowledge about her own values and preferences and a lived, first-hand knowledge of potential obstacles to healthy behaviors and positive health outcomes. As defined by Giddens, to have agency the individual must act intentionally, have the capacity to act on his or her intentions, and have the power to create a new event or intervene in an existing event. 10 Agency is not an inert characteristic of a person but, rather, shaped, facilitated, or constrained by social structures, 10 as exemplified in Encounter 2 when the physician asks the patient about her preferences and values. An understanding of shared decision making requires a theoretical lens that can make visible this inherent complexity.

환자의 주체성과 사회문화적 영향이 공유 의사결정에 미치는 영향을 다루기 위해, 우리는 복잡한 활동을 분석하고 교육적 개입을 설계하는 데 도움이 되는 프레임워크를 제공할 수 있는 이론으로 CHAT을 확인했습니다. CHAT이 유일한 관련 이론은 아니지만, 공유 의사 결정의 다자간 특성을 보다 명확하게 이해할 수 있는 적절한 렌즈를 제공합니다. 또한 의학교육 내 다른 복잡한 인간 및 시스템 상호작용 분석에도 성공적으로 적용된 바 있는 CHAT은11,12 보건 전문직 연구자와 교육자가 도전적인 긴장을 발견 및 식별하고 직장 내 맥락에 기반한 새로운 교육 및 관리 전략을 개발하여 변화를 이끌어내는 데 도움을 줄 수 있습니다. 
To address the impact of patient agency and sociocultural influences on shared decision making, we identified CHAT as a theory that can provide a framework for analysis of complex activities and assist in the design of educational interventions. Although certainly not the only relevant theory, CHAT offers an appropriate lens through which the multivoiced nature of shared decision making can be more clearly appreciated. Additionally, CHAT, which has been successfully applied to analysis of other complex human and system interactions within medical education, 11,12 can help health professions researchers and educators bring about change by uncovering and identifying challenging tensions and developing new educational and management strategies grounded in the workplace context.

이론: CHAT과 확장적 학습
The Theory: CHAT and Expansive Learning

CHAT은 인간은 행동함으로써 학습하고, 학습을 위해 도구를 사용하며, 커뮤니티가 인간 활동에 중요한 역할을 한다고 제안합니다. 러시아의 심리학자 비고츠키와 레온테브는 인간의 행동이 문화적 유물(도구)에 의해 매개된다는 개념을 발전시켰습니다. 13 엥게스트룀은 규칙, 공동체, 분업과 그것이 사람(주체)과 그 사람의 매개된 행동(객체)에 미치는 영향을 이론에 통합하여 모든 활동에 대한 공동체기타 외부 요인의 기여를 확장했습니다. 13 이 활동 시스템은 활동 이론에서 분석의 기본 단위로 간주됩니다(그림 1).
CHAT proposes that humans learn by doing, that they use tools to learn, and that community plays an important role in human activity. Russian psychologists Vygotsky and, then, Leont’ev developed the concept that a human’s actions are mediated by cultural artifacts (tools). 13 Engeström expanded on the contribution of community and other outside factors to all activities by incorporating in the theory rules, community, and division of labor and their influence on a person (subject) and that person’s mediated action (object). 13 This activity system is considered the basic unit of analysis in activity theory (Figure 1).


활동 시스템은 주체, 객체, 도구, 규칙, 커뮤니티, 분업으로 구성됩니다. 13 이는 하나의 행동이나 두 개인 간의 선형적인 상호작용이 아니라 서로 다른 관점이 상호작용하는 과정이며, 각 상호작용은 활동의 결과에 영향을 미칠 수 있습니다.

  • 활동 시스템의 한 예로 의사(주체)가 환자를 병원에 입원시킬지 여부를 결정하는 것(객체)을 들 수 있습니다.
  • 의사는 병력 및 신체 검사 결과와 청진기 또는 엑스레이 결과와 같은 도구(모두 도구로 분류됨)를 사용하여 목표를 달성합니다.
  • 의사는 임상 진료 지침(규칙)을 참조하고, 다른 전문가(커뮤니티)와 상의하고, 치료 계획을 수립할 수 있으며, 입원 의사, 응급실 간호사, 방사선 전문의(분업)가 책임을 분담할 수 있습니다.
  • 활동 시스템의 모든 구성 요소는 환자 입원에 대한 최종 결정(결과)에 기여합니다.

그림 1에서 활동 시스템의 각 구성 요소 사이의 화살표는 활동 시스템 내의 잠재적 긴장을 나타냅니다. 보건 전문직 교육의 예를 들어 CHAT의 활동 시스템 구성 요소에 대한 설명은 표 1을 참조하세요.

An activity system consists of a subject, object, tools, rules, community, and division of labor. 13 It is not a single behavior or a linear interaction between 2 individuals but, rather, a process in which different perspectives interact, and each interaction can influence the outcome of the activity.

  • An example of an activity system might be a physician (subject) deciding whether to admit a patient to the hospital (object).
  • The physician uses history and physical exam findings and tools, such as a stethoscope or X-ray results (all categorized as tools), to achieve the object.
  • The physician may reference clinical practice guidelines (rules), consult other specialists (community), and develop the treatment plan, with responsibilities to be divided between the admitting physician, the emergency department nurse, and the radiologist (division of labor).
  • All components of the activity system contribute to the final decision to admit the patient (outcome). 

In Figure 1, the arrows between each of the components of the activity system represent potential tensions within the activity system. See Table 1 for a description of the components of an activity system in CHAT with examples from health professions education.

시간이 지남에 따라 CHAT은 객체를 공유하거나 공동으로 구성하는 상호 작용하는 활동 시스템을 다루도록 진화했습니다. 14 다양한 관점을 가진 여러 활동 시스템의 상호 작용은 많은 긴장과 함께 큰 혁신의 잠재력을 만들어냅니다. 활동 시스템의 대상은 개인에서 팀 또는 전체 시스템에 이르기까지 다양하기 때문에 복잡한 적응 시스템뿐만 아니라 개인 간의 상호 작용을 연구할 수 있습니다. 문화와 역사성은 CHAT의 또 다른 두 가지 핵심 요소입니다

  • 활동 시스템 안팎에서 일어나는 사건(예: 임상적 만남)은 그 사건이 발생하는 문화의 규범과 가치에 의해 형성되고 그 안에 내재되어 있습니다. 예를 들어, 어떤 문화권에서는 의사가 항상 환자를 대신하여 행동해야 하는 반면, 다른 문화권에서는 환자가 더 적극적인 역할을 수행할 수 있습니다.
  • 역사성을 고려할 때는 활동의 시간적 차원, 즉 활동이 서로 다른 역사적 맥락에서 발생하는 경우에 주목해야 합니다. 임상 환경(예: 의료 시스템 또는 병원)과 의료 기술, 절차 및 지식의 역사는 모두 활동(임상적 만남)을 형성할 수 있습니다.

Over time, CHAT evolved to address interacting activity systems in which the object is shared or constructed jointly. 14 The interaction of multiple activity systems, each with varied perspectives, creates many tensions and the potential for great innovation. The subjects of activity systems vary, from individuals to teams or to entire systems, allowing for the study of interactions between individuals as well as of complex adaptive systems. Culture and historicity are 2 other key components of CHAT.

  • The events that take place within and across activity systems (e.g., a clinical encounter) are embedded within and shaped by the norms and values of the culture in which they occur. For example, in some cultures, the physician may be expected to always act on behalf of the patient, while in others, the patient may play a more active role.
  • Consideration of historicity brings attention to the temporal dimension of an activity, that is, when the activity takes place in different historical contexts. The history of the clinical environment (e.g., health care system or clinic) and of the medical technology, procedures, and knowledge can all shape the activity (clinical encounter).

확장적 학습은 활동 시스템 내부와 시스템 사이에서 참여자가 취하는 일련의 행동이 새로운 대상과 관행, 궁극적으로는 새로운 문화나 행동 방식의 개발로 이어질 수 있는 확장적 순환을 형성할 수 있다는 개념을 기반으로 합니다. 특히, 두 개 이상의 상호 작용하는 활동 시스템의 대상objects이 서로 다른 경우, 모순을 해결해 나가는 과정에서 확장 학습으로 이어질 수 있습니다. 서로 다른 활동 체계의 상호작용을 통해 확장 학습이 어떻게 일어날 수 있는지 이해하는 것은 의료 전문가 교육에 적용할 수 있습니다. 예를 들어, Larsen 등은 임상 교육에서 학생의 학습 목표를 연구하기 위해 CHAT을 적용했습니다. 15 이 연구에서는 교육자와 학생의 활동 체계가 환자 치료라는 공통된 목표를 가지고 상호작용하지만, 자료 숙달과 안전한 환자 치료라는 추가적인 목표가 만들어내는 긴장이 존재합니다. 
Expansive learning builds on the concept that a series of actions taken by participants within and between activity systems can form an expansive cycle that may lead to the development of novel objects and practices and, ultimately, a new culture or way of acting. In particular, when the objects of 2 or more interacting activity systems are different, the evolving resolution of the contradictions may lead to expansive learning. Understanding how expansive learning can occur through interactions of different activity systems is applicable to the education of health professionals. For example, Larsen et al applied CHAT to study student learning goals in clinical education. 15 In this study, the activity systems of educator and student interact, with a shared goal of patient care but with tensions produced by the additional objects of mastering the material and safe patient care.

CHAT을 공동 의사 결정에 연결하기
Linking CHAT to Shared Decision Making

공유 의사 결정에 대한 우리의 접근 방식을 알리기 위해 CHAT을 사용하는 방법을 설명하기 위해 우리의 사례를 참조합니다. 그림 2는 두 가지 만남에 대한 가상의 상호 작용 활동 시스템을 보여줍니다. 상호 작용하는 활동 시스템의 요소를 대조하여 성공적인 공유 의사 결정의 핵심이 될 수 있는 기능을 시각화할 수 있습니다. 
To illustrate the use of CHAT in informing our approach to shared decision making, we refer to our case. Figure 2 demonstrates hypothetical interacting activity systems for the 2 encounters. In contrasting the elements of the interacting activity systems, we can visualize those features that may be key to successful shared decision making.

그림 2A에서는 인카운터 1의 의사 및 환자 활동 시스템을 개념적으로 표현한 것입니다.

  • 의사의 활동 시스템(왼쪽)에서 의사는 피임 방법에 대한 빠른 결정을 내리고자 합니다. 의사는 자신의 지식을 활용하여 방법을 추천하지만, 진료 시간이 제한되어 있기 때문에 환자를 의사 결정에 참여시키지 않으며 주치의와 상의하거나 치료 계획에 다른 사람을 참여시키지 않습니다.
  • 환자 활동 시스템(오른쪽)에서 환자의 목표는 자신의 필요에 맞는 피임법을 선택하는 것이지만, 여동생으로부터 피임법에 대한 최소한의 지식만 얻었습니다. 그녀는 자신의 필요를 표현할 기회가 주어지지 않았고, 의사 결정에 참여하는 능력은 사회문화적 규범의 영향을 받아 더 잘 알고 있다고 인식하는 의사의 자신감 있는 권유에 의문을 제기하지 못할 수 있습니다. 이전에 학습된 경험으로는 어머니와 함께 소아과 의사를 방문했을 때 항상 의사의 조언을 따르라고 지시한 것이 있을 수 있습니다.

In Figure 2A, we present a notional representation of the physician and patient activity systems in Encounter 1.

  • In the physician activity system (on the left), the physician seeks to make a quick decision about a contraceptive method. He uses his knowledge to recommend a method, but because time for the visit is constrained, he does not engage the patient in decision making, and he does not consult his attending physician nor involve others in the treatment plan.
  • In the patient activity system (on the right), the patient’s object is selection of a contraceptive method that meets her needs, although she has only minimal knowledge of options from her sister. She is not given the opportunity to express her needs, and her ability to engage in decision making may be affected by sociocultural norms that prevent her from speaking up and questioning the confident recommendation of the physician, whom she perceives as more knowledgeable. Previous learned experiences may have included visiting a pediatrician with her mother, who instructed her to always follow the advice of a doctor.

두 활동 시스템 간의 상호 작용에서 가장 주목할 만한 점은 각 활동 시스템의 객체 1유사하지만 동일하지는 않다는 것입니다. 엔게스트룀이 "활동 시스템에 의해 구성된 집합적으로 의미 있는 객체"로 정의한 객체 2는 환자나 의사 모두 원래의 객체 1을 의미 있게 변경하지 않았기 때문에 이 시나리오에서 누락되었습니다. 또한 공유 객체(객체 3)도 없습니다. 
Most notable about the interaction between the 2 activity systems is that, while Object 1 of each activity system is similar, they are not the same. Object 2, defined by Engeström as a “collectively meaningful object constructed by the activity system,” 14 is missing in this scenario because neither the patient nor the physician has meaningfully altered their original Object 1. Further, there is no shared object (Object 3).

그림 2B에서는 인카운터 2의 의사 및 환자 활동 시스템을 보여줍니다. 인카운터 1의 상황과 달리 의사는 이 인카운터 이전에 공유 의사 결정에 대한 경험이 있고, 환자는 방문 전에 의사 결정 보조 도구를 사용한 적이 있습니다. 의사의 활동 체계(왼쪽)에서 의사는 이제 환자의 가치와 선호도를 이끌어내는 것이 일차적인 목표이며두 번째 목표는 환자의 선택권agency을 촉진하는 것입니다(목표 2). 상황 2의 의사는 자신의 의학적 지식을 공유하고 대안을 논의하는 것 외에도 환자의 가치와 선호도를 이끌어내야 할 필요성을 인식하고 있으며, 의사결정 지원 도구를 환자가 치료에서 주체성을 갖도록 돕는 도구로 사용합니다. 그는 공동 의사 결정에 대한 교육을 받았기 때문에 환자 중심 치료의 원칙이 가부장주의보다 우선하며, 아직 스스로 IUD를 삽입할 권한이 없으므로 주치의의 도움/감독을 요청하여 목적을 달성합니다.
In Figure 2B, we show physician and patient activity systems in Encounter 2. Unlike the situation in Encounter 1, the physician has had experience with shared decision making before this encounter, and the patient has used a decision aid before the visit. In the physician’s activity system (on the left), his primary object is now to elicit the patient’s values and preferences, and he has a second object, which is facilitating agency in the patient (Object 2). In addition to sharing his medical knowledge and discussing alternatives, the physician in Encounter 2 appreciates the need to elicit the patient’s values and preferences, and he uses the decision aid as a tool to help the patient achieve agency in her care. Because he had received training on shared decision making, the principles of patient-centered care now overshadow paternalism, and not yet privileged to insert an IUD on his own, he requests the help/supervision of his attending to achieve the object.

그림 2B의 오른쪽에 표시된 환자 활동 시스템에서 환자는 친구가 추천한 의사 결정 보조 도구를 사용했으며, 이 결정과 관련하여 자신의 가치와 선호도에 대해 생각해 보았습니다. 첫 번째 방문 결과에 대한 불만족을 고려할 때, 이제 환자의 주요 목표는 피임에 대한 자신의 가치관과 선호도를 명확하게 표현하는 것입니다. 환자가 의사를 거부하는 환자-의사 상호작용의 사회적 규범은 여전히 존재할 수 있지만, 역사적으로 널리 퍼진 행동과 의사 결정 지원의 존재 사이에는 긴장이 존재하며, 이는 그녀의 가치와 선호도가 실제로 중요하다는 것을 나타냅니다. 의사는 환자의 가치관과 선호도에 대해 질문함으로써 환자의 역할을 강화하고 환자의 주체성agency을 높이는 데 기여할 수 있습니다(대상 2). 이제 환자와 의사는 공동의 의사 결정이라는 공유 대상을 갖게 되었습니다(대상 3).
In the patient activity system depicted on the right side of Figure 2B, the patient has used the decision aid recommended by her friend and has thought about her values and preferences around this decision. Given her dissatisfaction with the outcome of the first visit, the patient’s primary object is now to articulate her values and preferences about contraception. The social norms of a patient–physician interaction in which the patient defers to the physician may still exist, but there is a tension between the historically prevalent behaviors and the existence of a decision aid, which indicates that her values and preferences do indeed matter. By asking about her values and preferences, the physician also reinforces the patient’s role and will likely contribute to increased agency in the patient (Object 2). The patient and physician now have a shared object, which is shared decision making (Object 3).

공유된 의사 결정이 이루어지지 않은 상황 1의 활동 체계상황 2의 활동 체계의 풍부하고 의미 있는 상호 작용을 비교하면 연구자와 교육자는 활동 체계에서 나타나는 긴장을 파악하고 교육적 개입의 목표를 가리킬 수 있습니다. CHAT의 확장 학습 개념은 활동 시스템 참여자가 긴장을 극복할 때 학습이 일어나고 시간이 지남에 따라 강화될 수 있음을 나타냅니다. 의사가 이러한 긴장을 극복하면서 원래는 피임 방법을 빨리 결정하는 것이 목표였던 의사의 목표는 이제 환자의 선호도와 가치관도 고려해야 합니다
Comparing the activity systems of Encounter 1, in which a shared decision was not achieved, with the rich and meaningful interaction of the activity systems in Encounter 2 can help researchers and educators identify the tensions that appear in the activity systems and can point to targets for educational interventions. The concept of expansive learning in CHAT indicates that as participants in activity systems work through tensions, learning can take place and be reinforced over time. As the physician works through these tensions, his object, which was originally to quickly decide on a contraceptive method, now also needs to account for the patient’s preferences and values.

의사가 공동의 의사 결정에 성공적으로 도달한 경험을 바탕으로 이 공동의 만남을 해쳐 나온다면 학습이 이루어진 것이며, 다음 환자와의 공유 의사 결정에 참여할 가능성이 높아질 것입니다. 마찬가지로 환자도 자신의 목소리가 있고 자신의 선호도와 가치가 중요하다는 것을 알게 될 것입니다. 시간이 지남에 따라 환자의 참여도가 높아지고, 환자 중심 치료를 진정으로 대표하는 환자 주체성과 공동 결정 문화를 포용하는 문화가 형성되면 환자는 다음 방문 시 다른 의료 문제에 대해 더 많은 권한을 부여받을 수 있습니다. 
If the physician emerges from this co-constructed encounter reflecting on successfully reaching a shared decision, learning has taken place, and he may be more likely to engage in shared decision making with his next patient. Similarly, the patient will have learned that she does have a voice and her preferences and values matter. She may be empowered to enter into her next visit, for another medical concern, with greater agency—leading to increased engagement over time and a culture that embraces increased patient agency and co-constructed decisions that truly represent patient-centered care.

토론
Discussion

지금까지 살펴본 바와 같이 CHAT은 공유된 의사 결정을 분석하는 데 유용한 프레임워크를 제공할 수 있습니다. 이 섹션에서는 교육 설계를 안내하기 위한 업무 기반 활동과 관련된 연구에서 CHAT을 사용하는 방법과 다른 복잡한 교육 주제와 관련된 CHAT의 잠재력에 대해 설명합니다. 업무 기반 활동에 대한 질적 연구에서 CHAT을 렌즈로 사용하면 활동 시스템 내의 긴장을 시각화하고 어떤 요소가 성공적인 공유 의사 결정과 확장된 학습에 기여하는 것으로 보이는지 생각해 볼 수 있습니다. 가상의 사례 2에서 상호 작용하는 활동 시스템을 분석함으로써(그림 2B)

  • 의사 결정 지원, 환자의 커뮤니티, 의사 결정에 기여하는 사람에 대한 변화하는 규칙이 환자의 주체성agency을 확보하는 데 도움이 된다는 것을 알 수 있습니다.
  • 또한 의사는 적절한 질문을 통해 환자의 주체성을 촉진하고, 환자와 함께 결정을 내린 후 즉각적인 조치를 통해 환자의 결정을 지원하는 역할을 한다는 사실도 알게 되었습니다.

가상의 사례에서 벗어나, 연구자들이 활동 이론을 사용하여 캐나다의 장기 이식 병동에서 직원들 간의 팀워크를 관찰하고 분석한 발표된 연구를 살펴보면, 전문직 종사자들이 문제를 해결하는 사례를 분석하고 환자 치료 외에 다른 목표(예: 후배 의사에게 교육을 제공해야 하는 경우)가 등장하여 환자 치료와 경쟁할 수 있음을 관찰할 수 있습니다. 12 
As we have demonstrated, CHAT can provide a useful framework to analyze shared decision making. In this section, we describe ways to use CHAT in research involving work-based activities to guide instructional design and CHAT’s potential in relation to other complex education topics. By using CHAT as a lens in qualitative studies of work-based activities, we can visualize the tensions within the activity systems and contemplate which elements seem to contribute to successful shared decision making and to expansive learning. By analyzing the interacting activity systems in Encounter 2 of our hypothetical case (Figure 2B),

  • we perceive that the decision aid, the patient’s community, and the changing rules about who contributes to decisions help the patient gain agency.
  • We also learn that the physician has a role in facilitating the patient’s agency by asking appropriate questions and, after co-constructing a decision with the patient, supporting her decision with immediate action.

Moving away from hypothetical examples, we can examine a published study in which researchers used activity theory to observe and analyze teamwork among staff in an organ transplant unit in Canada; they were able to analyze examples of the interprofessional staff working through problems and observed that other objects besides patient care may emerge (e.g., need to provide training to junior physicians) and compete with patient care. 12

CHAT을 사용하여 업무 기반 활동을 분석한 연구 결과는 적절한 교육 전략의 개발을 안내하는 데 사용할 수 있습니다. 가상의 예에서, 연구 연구의 일환으로 유사한 시나리오를 관찰한 연구자는 환자의 주체성agency이 공유 의사 결정의 중요한 요소로 관찰되었으므로 의료진은 의료 전문가로서뿐만 아니라 환자의 주체성agency을 촉진하는 역할도 한다고 결론을 내릴 수 있습니다. 공유 의사 결정을 위한 교육 전략으로는 특정 언어를 성공적으로 사용하여 환자의 개별적인 가치와 선호도를 이끌어내는 의료진의 비디오를 보여준 다음, 학생들이 이러한 의사소통 기술을 연습하는 역할극을 실시하는 것이 있습니다. 공유 의사 결정은 단순히 두 개인 간의 상호작용으로 생각해서는 안 되며, 사회 구조 내에 존재하는 환자와 의료 제공자의 개별적인 복잡한 활동 체계의 상호작용으로 보아야 합니다. 굴브란센 등은 공유 의사결정의 목표 환자의 자율성을 높이는 것으로 설명하며, 여기에는 환자의 취약성과 과학적 불확실성을 해결하는 전략 등이 핵심 요소로 포함됩니다. 16 공동 의사 결정에는 기본적인 커뮤니케이션 역량 이상의 것이 필요하며, CHAT은 성공적인 교육 개입에서 강조해야 할 임상적 상호작용의 특성을 파악하는 데 적합한 프레임워크를 제공합니다.

Findings from research studies using CHAT to analyze work-based activities can be used to guide the development of appropriate instructional strategies. In our hypothetical example, a researcher observing similar scenarios as part of a research study may conclude that, because patient agency was observed to be a critical component of shared decision making, the provider has a role not only as a medical expert but also as a facilitator of the patient’s agency. An instructional strategy for shared decision making could include presenting videos of providers successfully using specific language to elicit patients’ individual values and preferences, followed by role play in which students practice those communication skills. Shared decision making cannot be thought of as simply an interaction between 2 individuals; rather, it must be seen as the interaction of the individual complex activity systems of a patient and a provider—each existing within social structures. Gulbrandsen et al describe the aim of shared decision making as boosting patient autonomy, which involves strategies that address the patient’s vulnerability and scientific uncertainty, among other key elements. 16 Shared decision making requires more than basic communication competencies, and CHAT provides a suitable framework for identifying the characteristics of a clinical interaction to emphasize in a successful educational intervention.

CHAT을 복잡한 보건 전문직 교육 주제에 적용할 때, 우리는 학습에 대한 수많은 촉진자와 장벽을 식별할 수 있으며, 이를 통해 해결해야 할 임상 교육 문제의 실제 복잡성을 포괄하는 새로운 교육 접근법을 구상할 수 있습니다. 교육자는 개인이나 팀이 활동 시스템 내부 및 시스템 간의 긴장을 극복하는 데 도움이 되는 촉진자를 조사함으로써 촉진자를 강화하는 새로운 개입을 개발할 수 있습니다. 예를 들어, 담화(언어) 또는 기타 도구(의사 결정 보조 도구 또는 기타 임상 지원 도구 등)는 확장적 학습을 위한 잠재적 촉진제로서 필요에 따라 교육 환경에서 구체화하여 적용할 수 있습니다. 특히, 교육생이 환자를 대면하는 동안 환자의 선택권을 강화하고 의사결정 보조 도구를 사용하는 표현phrase을 배우고 사용한다면 그러한 행동이 표준이 되어 환자와 의료진의 목표가 더욱 일치할 수 있습니다. 또 다른 예로는 모의 코드나 응급 제왕절개 분만과 같은 시뮬레이션을 분석하는 데 CHAT을 적용할 수 있습니다. 특히 분업, 규칙, 커뮤니티가 상호 작용하는 활동 시스템에 어떤 영향을 미치는지 분석하면 보다 효과적인 팀 기반 치료의 발전으로 이어질 수 있습니다. 마찬가지로 변화와 학습을 가로막는 장벽에는 학습 환경의 역사적 맥락에서 고착화된 규칙이 포함될 수 있으며, 이를 해결하고 완화해야 할 필요가 있습니다. 이는 보건 전문직 교육에 존재할 수 있는 촉진 요인과 장벽 중 일부에 불과하며, 이러한 요인과 다른 장벽을 해결하면 교육적 개입을 통해 복잡한 학습 문제를 성공적으로 해결할 수 있습니다.
In applying CHAT to complex health professions education topics, we can identify numerous facilitators for and barriers to learning and thereby envision new approaches to instruction that encompass the actual complexity of the clinical educational problem being addressed. By examining the facilitators that can help individuals or teams work through tensions within and between activity systems, educators can develop novel interventions that boost the facilitators. As an example, discourse (language) or other tools (like decision aids or other clinical support tools)—potential facilitators for expansive learning—can be shaped and applied in educational settings where needed. Specifically, if trainees learn and use phrases that enhance patient agency and use decision aids during patient encounters, such behaviors will be the norm, and patient and provider objects may become more aligned. Another example is the application of CHAT to analyze simulations, such as mock codes or emergency cesarean deliveries. Specifically, analysis of how division of labor, rules, and community affect interacting activity systems may lead to the evolution of more effective team-based care. Similarly, barriers to change and learning may include rules that are entrenched in the historical context of the learning environment and that need to be addressed and mitigated. These are but a few of the facilitators and barriers that may exist in health professions education; if these, and others, are addressed, educational interventions may be successful in addressing complex learning issues.

보건 전문직 교육 연구자들은 CHAT을 민첩하게 활용함으로써 다른 여러 복잡한 교육 영역에 대한 잠재적 적용 가능성을 인식하기 시작할 것입니다. 예를 들어, 팀 기반 진료, 질 향상 및 환자 안전 주제, 전문가 간 교육 등 시스템 기반 진료 또는 더 넓게는 의료 시스템 과학의 범주에 속하는 역량에 대한 보건 전문가 교육에서 CHAT의 잠재적 역할이 있습니다.

  • 최근 CHAT 프레임워크를 적용한 연구에서 Varpio 등은 "전문가 간 의사소통이 여러 활동 시스템에 의해 어떻게 영향을 받는지 이해함으로써 연구를 통해 전문가 간 의사소통에 관련된 행동과 상호작용에 영향을 미치는 개인적, 전문적, 조직적, 사회적, 물리적 맥락의 층위를 밝혀낼 수 있습니다."라고 설명했습니다. 17
  • 최근의 또 다른 연구에서는 문제 기반 학습의 문화적 차이와 문화 간 적용 가능성을 더 잘 이해하기 위해 활동 이론을 조직 원리로 사용했습니다. 18
  • 또한 자폐 스펙트럼 장애 판별을 둘러싼 사회적으로 복잡한 실무 영역에 대한 연구에서 저자들은 두 개의 의학교육 시스템에서 활동 시스템을 매핑하여 이 장애를 진단받은 아동을 효과적이고 포괄적으로 치료하는 데 장애가 되는 몇 가지 장벽을 파악했습니다. 19

By becoming nimble with CHAT, health professions education researchers will begin to appreciate its potential applicability in several other complex educational areas. For example, there is a potential role for CHAT in the education of health professionals in competencies under the umbrella of systems-based practice or, more broadly, health systems science, including team-based care, quality improvement and patient safety topics, and interprofessional education.

  • In a recent application of the CHAT framework, Varpio et al stated, “By understanding how interprofessional communications are influenced by multiple activity systems, research can uncover the layers of personal, professional, organizational, social, and physical contexts that influence the actions and interactions involved in interprofessional communication.” 17 
  • Another recent study used activity theory as an organizing principle to better understand cultural differences and cross-cultural applicability of problem-based learning. 18 
  • And, in a study of the socially complex zone of practice around identification of autism spectrum disorder, the authors mapped activity systems in 2 medical education systems to identify some of the barriers to effective, comprehensive care for children diagnosed with this disorder. 19

CHAT은 공동 의사 결정 및 기타 교육 주제와 관련된 학습과 교육을 연구하는 데 유용한 렌즈를 제공하지만, 잠재적인 한계가 있습니다. 

  • 첫째, 주체, 대상, 도구의 상호작용과 사회문화적 영향에 초점을 맞춘 이론인 CHAT의 특성상 더 많은 대상에게 일반화하기 어려울 수 있습니다. Frambach 등 18은 연구에서 이러한 우려에 대해 연구 대상과 다른 상황으로 반드시 일반화할 수는 없지만 다른 환경에 적용할 수 있는 요소를 식별할 수 있었다고 언급했습니다.
  • 둘째, CHAT은 여러 활동 시스템을 동시에 성공적으로 처리하는 데 자주 사용되지만, 의사-환자 가족의 공유 의사 결정 개발을 연구할 때 연구자는 조사 범위를 제한할 수 있습니다. 상호 작용하는 여러 활동 체계는 분석의 기본 단위이자 교육자가 긴장의 근원을 가장 쉽게 파악할 수 있는 활동 체계에 집중하는 데 방해가 될 수 있습니다. 이 글에서 설명한 의사-환자 쌍둥이와 상호 작용하는 활동 시스템은 교육적 개입에서 다룰 수 있는 분석에 대한 몇 가지 긴장을 제시합니다.
  • 마지막으로, CHAT은 학습자가 일상적인 교육 활동에서 공유 의사 결정을 숙달하는 것보다 연구자 및 교육자가 공유 의사 결정의 복잡성을 분석하는 데 더 유용할 수 있습니다.

Although CHAT provides a useful lens to study learning and instruction related to shared decision making and other education topics, it has potential limitations.

  • First, the very nature of CHAT as a theory that focuses on the interactions of the subject, object, and tools, as well as sociocultural influences, may make it less generalizable for a broader audience. Frambach et al 18 addressed this concern in their study, stating that, although they could not necessarily generalize to contexts other than what was studied, they were able to identify elements that could be applied to other settings.
  • Second, although CHAT is often used to successfully address many activity systems simultaneously, in studying the development of shared decision making in the physician–patient dyad, researchers may want to limit the scope of the inquiry. Several interacting activity systems may distract from focusing within activity systems, where the foundational unit of analysis lives—and where educators may most readily identify the root of tensions. The physician–patient dyad and the interacting activity systems explained in this article present several tensions for analysis—areas that can be addressed in educational interventions.
  • Finally, CHAT may be more useful to researchers and educators for analyzing the complexity of shared decisions than to learners for trying to master shared decision making in their daily educational activities.

이 글에서는 CHAT이 의학교육자에게 공유 의사 결정의 복잡성을 고려할 수 있는 렌즈를 제공하는 방법에 대해 설명했습니다. 이 주제와 다른 많은 의료 전문직 교육 주제의 복잡성을 더 잘 이해하는 것은 효과적인 교육 개입을 개발하는 데 매우 중요합니다. 또한 공유 의사 결정에 내재된 다양한 관점과 긴장에 초점을 맞추는 데 도움이 되는 CHAT을 제안하고, 교육 전략 설계에 도움이 되는 분석 도구 및 프레임워크로 CHAT을 활용하는 의료 교육자를 위한 권장 사항을 제시했습니다. 마지막으로, 향후 연구에서는 다른 보건 전문직 교육 분야의 교육 방법 설계 및 평가에 CHAT을 보다 광범위하게 적용할 수 있는 방법을 밝히는 데 초점을 맞춰야 한다고 제안했습니다.

In this article, we have described how CHAT provides medical educators a lens to consider the complexities of shared decision making. A better appreciation of the complexity of this topic, and many other health professions education topics, is critical to developing effective educational interventions. We have also proposed CHAT to help bring into focus the variety of perspectives and tensions inherent in shared decision making and suggested recommendations for medical educators harnessing CHAT as an analytical tool and framework to assist with the design of instructional strategies. Lastly, we proposed that future work should focus on revealing the ways in which CHAT can be more broadly applied to the design and evaluation of instructional methods in other areas of health professions education.


Acad Med. 2021 Nov 1;96(11):1540-1545. doi: 10.1097/ACM.0000000000004157.

Seeing Complexity: Cultural Historical Activity Theory (CHAT) As a Lens for Shared Decision Making

Affiliations

1C.T. Witkop is professor of preventive medicine and obstetrics/gynecology and associate dean for medical education, Uniformed Services University of the Health Sciences, Bethesda, Maryland; ORCID: http://orcid.org/0000-0001-5366-2663 .

2L.A. Maggio is professor of medicine and associate director of scholarly communication, Center for Health Professions Education, Uniformed Services University of the Health Sciences, Bethesda, Maryland; ORCID: http://orcid.org/0000-0002-2997-6133 .

3E.J. Harvey is research and teaching associate, Graduate Programs in Health Professions Education, Uniformed Services University of the Health Sciences, and contractor, Henry M. Jackson Foundation for the Advancement of Military Medicine, Bethesda, Maryland; ORCID: http://orcid.org/0000-0002-3685-6279 .

4D.M. Torre is professor of medicine and associate director of evaluation and long-term outcomes, Graduate Programs in Health Professions Education, Uniformed Services University of the Health Sciences, Bethesda, Maryland; ORCID: http://orcid.org/0000-0002-4924-4888 .

PMID: 33983138

DOI: 10.1097/ACM.0000000000004157

Abstract

Shared decision making, a collaborative approach between patient and provider that considers the patient's values and preferences in addition to the scientific evidence, is a complex clinical activity that has not realized its full potential. Gaps in education and training have been cited as barriers to shared decision making, and evidence is inconsistent on effective educational interventions. Because individual agents with their own social and behavioral contexts co-construct a shared decision, the educational approach may need to consider the role of patient agency and sociocultural influences. To address the inherent complexity in shared decision making, the authors identified cultural historical activity theory (CHAT) as a framework for analysis. Although certainly not the only relevant theory, CHAT offers an appropriate lens through which the multivoiced nature of shared decision making can be more clearly appreciated. In this article, the authors demonstrate the application of CHAT as a lens for researchers and educators to examine the complexity of shared decision making. The fictitious case presented in this article describes the use of CHAT with a patient who experiences 2 clinical encounters; during the second, shared decision making takes place. Elements of the case are threaded through the article, demonstrating a sample analysis of the interacting activity systems of the patient and physician and highlighting inherent tensions and contradictions. The authors propose CHAT as a tool for future research around the role of agency in shared decision making and other complex topics and as a framework for design of novel instructional strategies. Although not applicable to all topics and settings, CHAT has significant potential within health professions education.

공유의사결정을 가르치는 열두가지 팁(Med Teach, 2023)
Twelve Tips for teaching shared decision making
Matthew Zegareka,b, Rebecca Brienzaa,b and Noel Quinnb

 

소개
Introduction

환자 치료에서 공유 의사 결정(SDM)을 활용하는 것은 임상 결과를 개선하고 의료 낭비를 줄이며 환자 만족도를 향상시키는 방법으로 제안되어 왔습니다. 환자에게 위험과 이점을 제시하고 결정을 내리도록 요청하는 단순 정보 제공 동의나 의료진이 위험과 이점에 대한 해석을 바탕으로 치료를 추천하는 온정주의적 치료와 달리, SDM은 임상의가 환자의 가치와 선호를 이끌어내 의사 결정에 반영해야 합니다(Elwyn 외. 2017; Spatz 외. 2017). SDM은 환자의 가치관에 대한 환자의 의견뿐만 아니라 환자의 상황과 맥락이 의사 결정에 어떤 영향을 미칠 수 있는지를 강조하는 접근 가능한 방식으로 위험과 이점에 대한 명확한 의사소통이 필요하다는 데 폭넓은 동의가 있습니다. 중요한 것은 SDM이 '선호도에 민감한' 결정이라고도 하는, 옵션 간에 어느 정도 균형이 있는 특정 임상 결정에만 적합하다는 것입니다. 예를 들어, 금연 노력을 약물 요법, 상담 또는 이 두 가지를 결합하여 지원할지 여부에 대한 결정은 공유하는 것이 합리적이지만, 금연 여부에 대한 결정은 공유해서는 안 됩니다. 금연이 건강 결과 개선에 도움이 된다는 명백한 증거가 있으므로 금연을 권장해야 하며, 의료진은 금연을 합리적인 옵션으로 제시하기보다는 환자가 금연을 결정하도록 동기를 부여하는 것을 목표로 삼아야 합니다.
Utilizing shared decision making (SDM) in patient care has been suggested as a way to improve clinical outcomes, reduce healthcare waste, and improve patient satisfaction. In contrast to simple informed consent, in which patients are presented with risks and benefits and asked to make a decision, or paternalistic care, in which the provider recommends a treatment based on their interpretation of the risks and benefits, SDM requires clinicians to elicit and incorporate patient values and preferences into decision making (Elwyn et al. 2017; Spatz et al. 2017). There is broad agreement that SDM requires not only input from patients about their values, but also clear communication of risks and benefits in an accessible way that highlights how patient circumstances and contexts may influence their decision making. Importantly, SDM is appropriate only in certain clinical decisions in which there is some degree of equipoise between options, also known as ‘preference-sensitive’ decisions. For instance, while it is reasonable to share the decision on whether to assist smoking cessation efforts with pharmacotherapy, counseling, or a combination of both, the decision of whether to quit smoking should not be a shared one. There is unequivocal evidence that quitting smoking is beneficial to improve health outcomes and, therefore, it should be recommended — providers should aim to motivate their patients to make the decision to quit smoking, rather than offer not quitting as a reasonable option.

SDM은 여러 그룹에서 의료 결정에 권장되거나 의무화되었습니다. SDM의 역량은 미국 의과대학 협회의 위탁 전문 활동, 여러 전문 분야의 의학전문대학원 교육 인증 위원회의 이정표, 유럽 내과 교육과정 및 미국 전문간호사 학부 조직과 같은 기타 전문 기관의 핵심 역량에 포함되어 있습니다. 이러한 요건을 충족하기 위해서는 수련생에게 SDM에 효과적으로 참여하는 방법에 대한 접근 방식과 전략을 가르쳐야 합니다. 교훈적인 세션, 소그룹 세션, 표준화된 환자, 웹 기반 튜토리얼, 역할극 등 다양한 중재를 사용하여 SDM 교육의 효과를 평가해 왔습니다(Singh Ospina 외. 2020). 아시아, 호주, 유럽, 북미, 남미에서 SDM을 가르치기 위한 중재가 개발되었습니다(Diouf 외. 2016). 이러한 커리큘럼은 확실히 가치가 있고 연수생의 SDM 지식을 향상시키는 것으로 나타났지만, 모든 임상 교육은 SDM의 역량을 통합할 수 있으며(Thériault 외. 2019), 역량 교육 및 평가에 대한 이러한 접근 방식은 개별 커리큘럼보다 연수생의 행동과 임상 결과에 더 지속적인 영향을 미칠 것으로 생각합니다(Touchie와 ten Cate 2016). 대체로 수퍼바이저는 관계 역량(치료 임상의-환자 관계 구축)과 위험 커뮤니케이션 역량을 모두 개발하여 SDM에서 수련의 역량을 구축할 수 있도록 지원해야 합니다(Legare 외. 2013). 이 글에서는 교육생이 이러한 교육 기대치를 충족할 수 있도록 SDM을 가르치기 위한 12가지 전략에 대해 설명합니다. 이 모든 팁이 모든 학습 환경에 적합한 것은 아니지만, 교사는 교육 및 임상 환경에서 이러한 제안 중 적어도 몇 가지를 통합할 수 있습니다. 
SDM has been recommended or mandated for healthcare decisions by multiple groups. Competencies in SDM are included in entrustable professional activities from the Association of American Medical Colleges, in milestones from the Accreditation Council for Graduate Medical Education in multiple specialties, and in core competencies from other professional organizations such as the European Curriculum of Internal Medicine and National Organization of Nurse Practitioner Faculties. In order to meet these requirements, trainees need to be taught approaches and strategies for how to engage in SDM effectively. The effect of teaching SDM has been evaluated using a wide variety of interventions including didactic sessions, small group sessions, standardized patients, web-based tutorials, and role playing (Singh Ospina et al. 2020). Interventions to teach SDM have been developed in Asia, Australia, Europe, North America, and South America (Diouf et al. 2016). While these curricula are certainly valuable and have been shown to increase trainee knowledge in SDM, all clinical teaching can integrate competencies in SDM (Thériault et al. 2019) – and we suspect this approach to teaching and assessment of competencies will have a more durable effect on trainee behaviors and clinical outcomes than discrete curricula (Touchie and ten Cate 2016). Broadly, supervisors need to support the development of both relational competencies (building a therapeutic clinician-patient relationship) and risk communication competencies to build trainee competency in SDM (Legare et al. 2013). In this article, we discuss twelve strategies for teaching SDM to assist trainees in meeting these training expectations. While not all of these tips will be appropriate for every learning encounter, teachers can integrate at least some of these suggestions in both didactic and clinical settings.

 

팁 1 공유 의사 결정의 가치를 강조하고 이를 사용하기에 적합한 임상 상황을 강조하세요.
Tip 1 Emphasize the value of shared decision making and highlight appropriate clinical situations for its use

SDM 역량 개발의 가치에 대해 교육생들의 동의buy-in를 얻는 것이 중요합니다. 일부 교육생은 이미 SDM을 수행하고 있다고 생각하거나 개선의 여지가 없다고 생각할 수 있습니다. 그러나 SDM 행동을 평가하는 연구에 따르면 SDM은 임상 실습에서 일반적이지 않은 것으로 나타났습니다(Legare and Thompson-Leduc 2014). 교육자는 SDM의 가치를 강조함으로써 교육생이 SDM 역량을 개발하도록 동기를 부여할 수 있습니다. SDM은 예를 들어 선호도에 민감한 심장 수술의 비율을 줄임으로써 비용을 절감하는 것으로 나타났습니다(James 2013; Stacey 외. 2017). SDM과 환자 의사결정 보조 도구의 사용은 옵션에 대한 환자의 지식을 향상시키고, 의사결정 갈등을 줄이며, 환자 만족도를 높이고, 정확한 위험 인식을 개선하고, 환자의 선택이 자신의 가치와 일치할 가능성을 높이는 것으로 나타났습니다(Stacey 외 2017). 따라서 SDM은 우수한 환자 중심 진료를 넘어 과학적 정보에 대한 환자의 참여를 높여 증거 기반 진료를 지원합니다(Adams and Drake 2006). 또한 SDM이 치료 순응도를 높이고 천식 중증도와 같은 결과를 개선한다는 증거도 있습니다(Wilson 외. 2010). 또한 저선량 CT 스캔을 통한 폐암 검진, 뇌졸중 예방을 위한 심방세동 환자의 좌심방 부속기 폐쇄술, 미국 내 심부전 환자의 제세동기 시행 등 특정 검사 및 치료에 대한 보험급여를 지급하기 위해 보험사는 SDM 및 환자 의사 결정 보조 도구의 사용을 요구하고 있습니다. 요약하면, SDM은 치료의 질을 개선하고, 비용을 절감하며, 일부 상황에서는 환급이 의무화되어 있습니다. 감독자는 교육생에게 이러한 이점을 강조하고, 환자가 선택할 수 있는 합리적인 옵션이 여러 개 있는 상황을 알려주며, 교육생이 SDM 역량을 실천하도록 장려할 수 있습니다. 
It is vital to get buy-in from trainees to value development of SDM competencies. Some trainees may feel like they are already doing SDM, or there is no room for improvement. However, studies that assess SDM behaviors have shown that SDM is not common in clinical practice (Legare and Thompson-Leduc 2014). Educators can motivate trainees to develop competencies in SDM by highlighting its value. SDM has been shown to reduce cost, for example by reducing the rate of preference-sensitive heart surgeries (James 2013; Stacey et al. 2017). Use of SDM and patient decision aids have been shown to improve patient knowledge about options, reduce decisional conflict, increase patient satisfaction, improve accurate risk perception, and increase the likelihood that patients’ choices are consistent with their values (Stacey et al. 2017). Thus, beyond good patient-centered care, SDM supports evidence-based practice by increasing patient engagement with scientific information (Adams and Drake 2006). There is also evidence that SDM increases adherence and improves outcomes such as asthma severity (Wilson et al. 2010). In addition, payors require use of SDM and patient decision aids to reimburse for certain tests and treatments, such as Medicare reimbursement for lung cancer screening with low dose CT scan, left atrial appendage closure in patients with atrial fibrillation for stroke prophylaxis, and implementation of cardioverter-defibrillators in patients with heart failure in the United States. In sum, SDM improves quality of care, reduces cost, and is mandated for reimbursement in some circumstances. Supervisors can highlight these benefits with trainees, alert them to situations in which there are multiple reasonable options for patients to choose from and encourage them to practice SDM competencies.

팁 2 프레임워크를 사용하여 교육생이 공유 의사 결정의 구성 요소를 이해하도록 돕습니다. 
Tip 2 Use a framework to help trainees understand the components of shared decision making 

교육생이 SDM 역량을 개발하는 데 도움이 될 수 있는 두 가지 프레임워크는 미국 의료연구품질국(AHRQ)의 SHARE 접근법과 3-토크 모델입니다(The SHARE 접근법, Elwyn 외. 2017). 프레임워크는 학습자가 시각적 연상을 통해 새로운 지식을 공고히 하고, 교사가 향후에 개념을 쉽게 복습하여 기술을 강화하는 데 도움을 줄 수 있다는 점에서 프레임워크 사용의 가치를 강조합니다(Al-Eraky 2012). 이 두 가지 프레임워크는 시각적 다이어그램으로 표시할 수 있습니다(그림 1 및 2 참조). 개념을 시각적으로 표현하는 프레임워크를 가르치면 시각적 학습을 선호하는 학습자의 참여를 높일 수 있습니다(Evans 외. 2016). 
Two frameworks that can assist trainees in developing competencies in SDM are the SHARE approach from the Agency for Healthcare Research and Quality (AHRQ) and the three-talk model (The SHARE Approach; Elwyn et al. 2017). Gagne’s Nine Events of Instruction highlights the value of using frameworks – they can help learners to solidify new knowledge by making visual associations and allow teachers to easily revisit concepts in the future to help reinforce skills (Al-Eraky 2012). These two frameworks can be displayed as visual diagrams (see Figures 1 and 2). Teaching a framework that offers a visual representation of concepts can better engage learners with preferences for visual learning (Evans et al. 2016).

 

 

share-approach_factsheet.pdf
0.74MB



AHRQ의 SHARE 접근 방식은 5단계로 구성됩니다:

  • 환자의 참여 구하기,
  • 환자가 치료 옵션을 탐색하고 비교하도록 돕기,
  • 환자의 가치와 선호도 평가하기,
  • 환자와 함께 결정에 도달하기,
  • 환자의 결정 평가하기

이러한 단계는 치료 결정에 대한 논의를 지원하기 위해 선형적인 프로세스로 제시됩니다.

The AHRQ’s SHARE approach consists of five steps: 

  • Seek your patient’s participation, 
  • Help your patient explore and compare treatment options, 
  • Assess your patient’s values and preferences, 
  • Reach a decision with your patient, and 
  • Evaluate your patient’s decision.

These steps are presented as a linear process to support discussion around treatment decisions.

SDM을 위한 3-토크 모델은 보다 유동적인 접근 방식으로 제시됩니다. 이 모델은 팀 토크, 옵션 토크, 결정 토크의 세 단계로 구성됩니다.

  • '팀 대화'는 의료진이 환자와 협력하고, 지원을 제공하고, 선호도와 목표에 대해 논의할 의사가 있음을 표시함으로써 이루어집니다. 환자가 혼자서 결정을 내리도록 내버려두지 않을 것임을 명시적으로 강조하는 것이 도움이 될 수 있습니다.
  • '옵션 대화'옵션의 존재를 강조하고 위험 커뮤니케이션 원칙을 사용하여 옵션에 대해 논의하는 것을 포함합니다.
  • '결정 대화'는 '당신에게 가장 중요한 것은 무엇입니까'와 같은 문구를 사용하여 환자가 정보에 입각한 선호도를 바탕으로 옵션을 선택하도록 안내하는 것을 말합니다(Elwyn 외. 2016).

이 세 단계는 반드시 이 순서대로 수행할 필요는 없습니다. 세 단계 모두에서 적극적인 경청과 숙고가 핵심적인 역할을 합니다(Elwyn 외. 2017). 따라서 관계 역량은 세 단계 모두에서 중요하지만, 위험-편익 의사소통 역량은 '옵션 대화' 단계에서 가장 핵심적입니다

The three-talk model for SDM is presented as a more fluid approach. It consists of three stages: team talk, option talk, and decision talk.

  • ‘Team talk’ is accomplished by providers indicating that they intend to work collaboratively with a patient, provide support, and discuss preferences and goals. It can be helpful to highlight explicitly that patients will not be abandoned to make decisions alone.
  • ‘Option talk’ involves highlighting the presence of options and discussing them using risk communication principles.
  • ‘Decision talk’ refers to guiding the patient to select an option using informed preferences, using phrases such as ‘what matters most to you?’ (Elwyn et al. 2016).

These three stages need not be done in this order. In all three stages, active listening and deliberation play a central role (Elwyn et al. 2017). Thus, relational competencies are important in all three stages, though risk-benefit communication competencies are most central to the ‘Option talk’ stage.

경험상 수련 초기의 학생과 레지던트는 SHARE 모델의 보다 체계적이고 선형적인 지도가 가장 도움이 되는 반면, 시니어 레지던트는 실습 경험과 자신감이 쌓일수록 3-토크 모델이 더 도움이 된다는 것을 알게 됩니다.
In our experience, students and residents earlier in their training find the more structured and linear guidance of the SHARE model to be most helpful, while senior residents find that the three-talk model is more helpful as they build experience and confidence in their practice.

팁 3 공유 의사결정 대화를 맞춤화하기 위해 환자 개개인의 요인, 가치관, 선호도를 고려하도록 수련의를 안내합니다.
Tip 3 Guide trainees in considering individual patient factors, values, and preferences in order to tailor shared decision-making conversations

환자들은 자신의 건강에 대한 결정을 내리는 방식에 있어 서로 다른 선호도를 가지고 있습니다(Levinson 외. 2005). 이러한 선호도는 가치관, 문화, 종교 및 영적 신념, 교육, 감정 상태 등 다양한 환자 특성에 의해 영향을 받습니다. 환자와 의료진의 파트너십을 돕기 위해 임상의는 먼저 환자의 치료 결정에 대한 욕구를 평가해야 합니다. 따라서 처음에는 SDM 프로세스에 적극적으로 참여하는 환자가 있는 반면, 의료진의 의견을 따르는 것을 선호하는 환자도 있을 수 있습니다. 평균적으로 젊은 환자, 교육 수준이 높은 환자, 여성은 의료진과 함께 의사 결정에 더 적극적으로 참여하는 것을 선호할 수 있습니다(Arora and McHorney 2000). 문화는 원하는 가족의 참여 정도와 환자-임상의 관계에서 역할에 대한 기대치를 포함하여 의사 결정 스타일에 대한 선호도에 상당한 영향을 미칠 수 있습니다(Charles 외. 2006; Sepucha와 Mulley 2009; Keij 외. 2021). 예를 들어, 많은 문화권에서 환자 자율성의 가치는 우선순위가 높지 않으며, 환자가 아닌 가족이 주요 의사 결정권자가 될 것으로 기대할 수 있습니다(Charles 외. 2006). 동양 문화권의 환자가 가족 참여에 대한 욕구가 더 높다고 보고되는 경우가 많지만, 이는 서양과 동양 모두에서 나타나는 현상이므로 임상의는 가족 참여에 대한 욕구를 가정하지 않아야 합니다(Alden 외. 2018). 임상의, 환자, 동반자가 모두 중요한 역할을 하는 삼자간 의사 결정은 가족의 의견을 중시하는 환자와 인지 장애가 있는 환자처럼 환자의 의사 결정이 손상된 상황에 더 적합한 프레임워크입니다(Laidsaar-Powell 외. 2013). 

Patients have different preferences in how they make decisions about their health (Levinson et al. 2005). These preferences are informed by a vast array of patient characteristics including values, culture, religious and spiritual beliefs, education, and emotional states. To assist in the patient-provider partnership, clinicians must first assess a patient’s desire to make decisions in their care. As such, there will be patients who are initially highly engaged in the SDM process, while others would prefer to default to the provider’s opinion. On average, younger patients, those with more education, and women may prefer to take a more active role in decision making with their clinicians (Arora and McHorney 2000). Culture can significantly influence preferences for the style of decision making, including the degree of desired family involvement and the expectations for roles in the patient-clinician relationship (Charles et al. 2006; Sepucha and Mulley 2009; Keij et al. 2021). For example, the value of patient autonomy is not as prioritized in many cultures, and family members may be expected to be the primary decision maker rather than the patient (Charles et al. 2006). While it is often reported that patients from Eastern cultures have higher desire for family involvement, clinicians should avoid making assumptions about desire for family involvement since this falls along a spectrum in both Western and Eastern countries (Alden et al. 2018). Triadic decision-making, in which the clinician, patient, and a companion all play important roles, is a more appropriate framework for patients that value input of the family and for situations in which the patient’s decision making is compromised, such as in patients with cognitive impairment (Laidsaar-Powell et al. 2013).

학습자에게 환자의 의사 결정 욕구의 연속성에 대해 가르치면 환자와 의료진 모두의 좌절감을 줄일 수 있습니다. 이러한 평가는 SDM 참여 방법을 결정하는 데 매우 중요하지만, SDM에 대한 환자의 관심은 정적인 것이 아니며, 환자는 의사 결정에 보다 적극적인 역할을 하도록 동기를 부여받을 수 있습니다(Sepucha and Mulley 2009). 실제로 대부분의 환자가 자신의 건강 상태에 대해 더 많은 정보를 원하고 자신의 건강과 관련된 의사 결정에서 더 적극적인 역할을 선호한다는 증거가 있습니다. 가장 취약한 환자들은 처음에는 SDM에 참여하기를 꺼려할 수 있지만, 교육생들이 이러한 환자들을 의사 결정에 참여하도록 유도하기 위해 접근 방식을 조정하도록 장려해야 합니다(Legare and Thompson-Leduc 2014). 가장 중요한 것은 학습자에게 환자 선호도를 평가하는 방법을 교육하는 것은 라뽀와 임상의의 신뢰를 바탕으로 구축된다는 점입니다. 이러한 관계적 역량은 SDM 대화의 토대이며 의학적 결정이 일상생활에 미치는 영향에 대한 토론을 위한 도구입니다(Legare 외. 2013).
Teaching learners about the continuum of patient desire to make decisions can result in less frustration for both patient and provider. While making this assessment is vital to determine how to engage in SDM, patient interest in SDM is not static, and patients can be motivated to take a more active role in decision making (Sepucha and Mulley 2009). In fact, evidence suggests that most patients desire more information about their health conditions and would prefer a more active role in decisions concerning their health. Our most vulnerable patients may initially express reticence to engage in SDM, but we must encourage trainees to adjust their approach to invite these patients to share in decision making (Legare and Thompson-Leduc 2014). Most importantly, training learners on how to assess patient preferences is built from a foundation of rapport and clinician trust. These relational competencies are the bedrock of SDM conversations and instrumental for discussions about the impact of medical decisions on daily life (Legare et al. 2013).

학습자에게 SDM에 대한 관심을 평가하고 환자의 의사 결정에 영향을 미치는 가치와 선호도를 이끌어내는 방법을 가르칠 때는 의제 설정, 개방형 질문 및 성찰 사용과 같이 접근성이 높은 기술을 보여주는 것이 좋습니다. 학습자는 의제 설정으로 시작하여 환자에게 임상적 상호작용에서 시간을 어떻게 사용할 것인지에 대해 협력하도록 유도합니다. '유도-제공-유도''묻고-말하기'와 같은 프레임워크는 환자가 현재 내려야 하는 결정에 대해 무엇을 알고 있는지 평가하는 것으로 시작하여, 정보를 제공하고, 논의된 내용에 대해 궁금한 점을 질문하는 것으로 이어진다. 학습자는 해당 결정이 환자의 일상 생활(또는 가족 생활, 영적 생활, 여가 활동)에 어떤 영향을 미칠지, 그리고 환자에게 가장 중요한 것이 무엇인지에 대해 개방형 질문을 하도록 권장합니다. 상담을 시작할 때 caregiver가 의사 결정에서 담당할 역할을 명확히 하고 동의하면 교육생이 상담 구조와 방문에 대한 기대치를 조정할 수 있습니다(Laidsaar-Powell 외. 2013). 환자 결정 보조 도구는 학습자가 개별 결정과 관련된 환자의 가치와 선호도를 이끌어내는 데 도움을 줄 수 있지만, 환자와 관련된 모든 가치와 선호도를 평가하지는 못할 수 있으며, 특히 비 서구 문화적 배경을 가진 환자에게는 더욱 그렇습니다(Charles 외. 2006). 수련의에게 자신과 가족이 의사 결정에 참여하는 방식에 대한 환자 선호도를 묻고 이를 의사 결정 스타일에 반영하도록 교육하는 등 다문화 진료에 대한 수련의 교육은 수련의가 문화적으로 적절한 방식으로 의사 결정을 보다 효과적으로 공유할 수 있도록 할 수 있습니다(Blumenthal-Barby 2017). 이러한 핵심 전략(규정된 단계와 비교)을 종합하면 학습자는 환자의 특성, 가치, 선호도를 평가할 수 있습니다.
When teaching learners to assess interest in SDM and to elicit values and preferences that influence a patient’s decision making, we recommend showcasing skills that are highly approachable, such as agenda-setting and the use of open-ended questions and reflections. By starting off with an agenda, the learner invites the patient to collaborate on how time will be spent in the clinical interaction. Frameworks like ‘elicit-provide-elicit’ and ‘ask-tell-ask’ start by assessing what the patient currently knows about the decision that needs to be made, provides information, and queries for questions about the material discussed. Learners are encouraged to ask open ended questions about how the decision will impact the patient’s daily life (or family life, spiritual life, leisure activities) and what matters most to them. Clarifying and agreeing on the roles that caregivers will have in decision-making at the start of the consultation can allow trainees to adjust how they structure their counseling and expectations for the visit (Laidsaar-Powell et al. 2013). Patient decision aids can also assist learners in eliciting patient values and preferences as they pertain to individual decisions, though these may not evaluate all values and preferences that are relevant to patients, perhaps especially for those with non-Western cultural backgrounds (Charles et al. 2006). Trainee education in cross-cultural care, including teaching trainees to ask about patient preferences for how they want themselves and their families to be involved in decision-making and then incorporating this into their decision-making style, can enable trainees to be more effectively share decisions in a culturally appropriate way (Blumenthal-Barby 2017). Taken together, these core strategies (versus prescribed steps) enable learners to assess patient characteristics, values, and preferences.

팁 4 교육생이 공동 의사 결정에 참여하기에 적절한 시간과 장소를 결정하도록 돕기
Tip 4 Help trainees determine the right time and place to engage in shared decision making

각 임상 상황에 대한 요구 사항이 이미 상당하기 때문에 SDM이 어렵게 느껴질 수 있습니다. 실제로 임상의와 환자 모두 SDM의 가장 큰 장애물로 가장 많이 언급하는 것은 시간입니다(Pieterse 외. 2019). 수련의가 이러한 요구에 직면하고 부담을 느낄 때, 수퍼바이저는 두 가지 원칙을 강조하여 수련의를 도울 수 있습니다. 
SDM can feel challenging due to the already significant demands on each clinical encounter. Indeed, the most commonly cited barrier to SDM by both clinicians and patients is time (Pieterse et al. 2019). As trainees inevitably encounter and feel burdened by these demands, supervisors can assist them by highlighting two principles.

  • 첫째, SDM은 종종 '분산된' 방식으로 여러 차례 방문에 걸쳐 진행될 수 있습니다(Rapley 2008). 환자는 종종 새로운 정보를 처리하고 자신의 선호도와 가치관을 명확히 하기 위해 사랑하는 사람들과 논의할 시간이 필요합니다. 마찬가지로 임상의사도 이러한 가치를 이해하기 위해 여러 번의 만남이 필요할 수 있습니다. 선호도에 민감한 많은 의사 결정의 경우, 임상의와 환자 모두 해당 결정이 자신의 가치관에 부합한다는 확신을 가질 수 있도록 의사 결정 과정에서 한 번 이상의 만남을 갖는 것이 임상적으로 허용되며, 또한 바람직합니다. 이러한 시간을 허용하는 것은 SDM의 기초가 되는 관계적 역량을 구축하는 것으로, 임상의는 다양한 환자의 고유한 의사결정 스타일을 존중하고 의사소통에 대한 접근 방식을 유연하게 가져야 합니다(Kiesler and Auerbach 2006; Legare 외. 2013).
  • 둘째, SDM에 참여하는 데 걸리는 시간이 실제보다 더 길다고 인식될 가능성이 높습니다. 일반적인 진료에 비해 의사결정 보조 도구를 사용하면 평균적으로 진료 시간이 2.6분 연장되었습니다(Stacey 외. 2017). 일부 환자 의사결정 보조 도구는 최초 의료진 방문 전후에 환자에게 제공되어 사용할 수 있으며, 이후 후속 방문 시 검토 및 추가 논의가 이루어질 수 있습니다. 간호 및 심리학과 같은 다른 전문 분야와 협력하여 환자를 지원하고 환자의 목표와 선호도를 명확히 하는 데 도움을 주면 임상의가 SDM에 소요되는 시간을 더욱 줄일 수 있습니다.
  • First, SDM can often take place over multiple visits, in a ‘distributed’ fashion (Rapley 2008). Patients often need time to process new information and discuss with their loved ones to help clarify their preferences and values. Similarly, clinicians may need multiple encounters to understand these values. For many preference-sensitive decisions, it is clinically acceptable (and preferable) for the decision-making process to take more than one encounter, so that both the clinician and patient are confident that the decision is in line with their values. Allowing for this time builds on the relational competencies that are foundational for SDM – requiring clinicians to respect the unique decision-making style of different patients and be flexible in their approach to communication (Kiesler and Auerbach 2006; Legare et al. 2013).
  • Second, the time it takes to engage in SDM is likely perceived to be longer than in reality. Use of a decision aid compared to usual care extended a visit by 2.6 min on average (Stacey et al. 2017). Some patient decision aids can be given to patients to use before or after the initial clinician visit, and then can be reviewed and further discussed at a follow-up visit. Collaborating with other professions, such as nursing and psychology, to support the patient and assist them in clarifying their goals and preferences can enable clinicians to engage in SDM by further reducing the demands of time.

팁 5 교육생에게 적절한 환자 의사결정 보조 도구를 안내하고 사용법을 교육합니다.
Tip 5 Guide trainees to appropriate patient decision aids and instruct on how to use them

환자 의사 결정 보조 도구(PDA)는 환자가 선호도에 기반한 결정을 내리는 데 도움을 주기 위해 고안된 근거 기반 도구입니다.

  • PDA는 결정 사항을 명시하고, 혜택, 위험, 확률, 불확실성에 대한 정보를 제공하며, 환자의 가치와 선호도가 결정에 어떤 영향을 미치는지 강조해야 합니다.
  • 일반적인 건강 교육 자료와는 달리, PDA는 환자가 의사 결정에 직접 참여할 수 있도록 도와줍니다. 위에서 설명한 바와 같이, 환자의 만족도, 선택지에 대한 이해도, 선택이 가치관과 일치할 가능성을 향상시키는 것으로 나타났습니다(Stacey 외. 2017).

Patient decision aids (PDAs) are evidence-based tools designed to assist patients in making preference-based decisions.

  • PDAs should explicitly state the decision, provide information about benefits, harms, probabilities, and uncertainties, and highlight how patient values and preferences impact the decision.
  • As opposed to general health education materials, PDAs directly assist patients in participating in decision making. As discussed above, they have been shown to improve patient satisfaction, understanding of their options, and the likelihood that their choice is consistent with their values (Stacey et al. 2017).

감독자는 환자 의사결정 보조 도구가 도움이 될 수 있는 임상 시나리오를 파악하여 교육생이 이를 사용할 수 있도록 지원할 수 있습니다. 환자가 선호도에 민감한 결정에 직면해 있다는 점을 강조한 후, 감독자와 교육생은 오타와 병원 연구소에서 수집한 A to Z 목록과 같은 데이터베이스를 사용하여 적절한 PDA를 검색할 수 있습니다(https://decisionaid.ohri.ca/AZlist.html(환자 의사 결정 보조 도구)). 빈번하게 사용되는 PDA는 작업실에 쉽게 접근할 수 있도록 보관할 수 있습니다. PDA가 SDM에 도움을 줄 수는 있지만, SDM에 필요한 복잡한 커뮤니케이션 역량을 대체할 수는 없다는 점을 강조하는 것이 중요합니다. 특히, PDA에서 평가되지 않는 문화적 가치와 선호도를 가진 환자에게는 더 적합하지 않을 수 있습니다(Charles 외, 2006). 환자에게 가장 중요한 가치를 정의하도록 요청하는 오타와 개인 의사결정 가이드(https://decisionaid.ohri.ca/decguide.html)와 같은 개방형 PDA는 이러한 상황에 더 적합할 수 있습니다(환자 의사결정 보조 도구). 따라서 임상 진료 중 또는 진료 전후에 PDA를 도구로 사용할 수 있지만, 수련의는 의사 결정 과정에 전적으로 의존하기보다는 이를 진료에 통합할 수 있도록 지도받아야 합니다(Legare and Thompson-Leduc 2014).
Supervisors can assist trainees in their use by identifying clinical scenarios in which a patient decision aid would be helpful. After highlighting that a patient faces a preference-sensitive decision, supervisors and trainees can search for appropriate PDAs using databases such as the A to Z inventory collated by the Ottawa Hospital Research Institute, available at https://decisionaid.ohri.ca/AZlist.html (Patient Decision Aids). Commonly used PDAs can be kept readily accessible in workrooms. While PDAs can assist in SDM, it is important to emphasize that they are not a replacement for the complex set of communication competencies that are required in SDM. In particular, they may not be less well suited to patients with cultural values and preferences that are not assessed in the PDA (Charles et al. 2006). Open-ended PDAs, such as the Ottawa Personal Decision Guide available at https://decisionaid.ohri.ca/decguide.html, which ask patients to define the values that are most important to them, may be better suited to these situations (Patient Decision Aids). Thus, PDAs can be used as a tool during or around clinical encounters, but trainees should be coached to incorporate them into their care rather than rely on them entirely for the decision-making process (Legare and Thompson-Leduc 2014).

팁 6 수련의가 환자 의사결정 지원 도구의 질을 평가할 수 있도록 지원합니다.
Tip 6 Assist trainees in evaluating the quality of patient decision aids

국제 환자 의사결정 지원 표준(IPDAS) 협력체에서 PDA 품질 평가 기준을 발표했습니다. PDA마다 이러한 기준을 충족하는 정도가 다르기 때문에 수련의는 특정 도구의 품질이 우수하고 임상 실습에 사용할 가치가 있는지를 파악하는 것이 중요합니다. 오타와 병원 연구소의 인벤토리는 이러한 기준(환자 의사 결정 보조 도구)에 따라 PDA를 평가하는 데 도움이 됩니다. 이 기준은 다음과 같은 차원으로 요약할 수 있습니다:

  • 정보(예: 결정 사항을 명시하고 옵션의 긍정적, 부정적 특징을 편견 없이 설명),
  • 확률(예: 옵션의 위험 및 이득 가능성을 포함하며, 이상적으로는 동일한 기간과 분모를 사용하고, 다양한 방법으로 확률을 볼 수 있음),
  • 가치(예. 예: 환자에게 가장 중요한 것이 무엇인지 고려하도록 장려),
  • 지침(예: 결정을 내리기 위한 구조 제공),
  • 개발(예: 환자와의 요구 평가, 현장 테스트 수행),
  • 근거(예: 근거의 출처 및 품질 설명),
  • 공개(예: 연구비 지원 및 저자 관련),
  • 평이한 언어 사용(Joseph-Williams 외. 2014)

연수생이 품질을 평가하는 역량을 키우기 위해 동일한 의사결정에 대해 여러 개의 PDA를 비교하는 것이 도움이 될 수 있습니다. 
The International Patient Decision Aids Standards (IPDAS) Collaboration has published criteria to evaluate PDA quality. Since PDAs vary in meeting these criteria, it is important for trainees to have a grasp of whether a particular tool is of high quality and worthwhile to use in their clinical practice. The Ottawa Hospital Research Institute inventory helpfully assesses PDAs based on these criteria (Patient Decision Aids). The criteria can be summarized into the following dimensions:

  • information (e.g. explicitly stating the decision and describing positive and negative features of their options in an unbiased fashion),
  • probabilities (e.g. includes likelihood of risks and benefits of the options, ideally using the same time period and denominator, with multiple ways of viewing the probabilities),
  • values (e.g. encouraging patients to consider what matters most to them), guidance (e.g. providing a structure to come to a decision),
  • development (e.g. using a needs assessment with patients, conducting field testing),
  • evidence (e.g. describes sources and quality of evidence),
  • disclosure (e.g. regarding funding and authors), and
  • use of plain language (Joseph-Williams et al. 2014).

It can be helpful for trainees to compare multiple PDAs for the same decision to develop competencies in assessing their quality.

팁 7 교육생이 전문가 간 팀원들과 협업하도록 장려하기
Tip 7 Encourage trainees to collaborate with interprofessional team members

대부분의 SDM 모델은 임상의-환자 DYAD에 초점을 맞추고 있습니다. 그러나 레가레와 동료들이 개발한 전문직 간 SDM 모델은 다른 의료 분야의 팀원이 중요한 역할을 할 수 있다는 점을 강조합니다(레가레 외, 2011). 이 모델에 포함된 팀원은 일반적으로 기존 모델에 포함된 임상의와 환자를 제외한 '첫 번째 접촉자', 의사 결정 코치, 가족 및 기타 의료 전문가입니다. 의대생과 간호대생을 대상으로 한 롤플레잉 워크숍과 같이 공유 의사결정 역량을 개발하기 위해 고안된 일부 커리큘럼에서는 전문가 간 모델을 성공적으로 활용하고 있습니다(Grey 외. 2017). 
Most models for SDM are focused on the clinician-patient dyad. However, the interprofessional SDM model developed by Legare and colleagues highlights that team members from other health care disciplines can play crucial roles (Legare et al. 2011). Team members included in this model are the ‘first contact,’ decision coach, family, and other healthcare professionals apart from the clinician and patient typically included in traditional models. Some curricula designed to develop competencies in shared decision making have successfully utilized an interprofessional model, such as in a role-playing workshop for medical and nursing students (Grey et al. 2017).

교육생이 선호도에 민감한 결정을 위해 환자를 공동 의사 결정에 참여시키는 옵션을 고려할 때, 교육자는 교육생이 팀원을 참여시킬 수 있는 방법을 고려하도록 유도할 수 있습니다. 전문가 간 팀과의 협업은 환자 의사결정 지원 도구의 사용을 장려할 때 특히 도움이 될 수 있습니다. 모든 직원 간의 '응집성coherence'은 환자 의사결정 지원 도구를 옹호하고 채택을 지원하는 데 도움이 될 수 있습니다(Joseph-Williams 외. 2021). 예를 들어, 

  • 수련의가 환자와 전립선암 검진에 대해 논의할 준비를 하는 경우, 의료 보조원은 방문 전에 환자에게 연락하여 수련의와 논의할 환자 의사결정 보조 도구를 공유하여 환자가 치료 결정에 참여할 수 있는 계기를 마련할 수 있습니다.
  • 결정을 내리기 전에 환자의 가치관과 선호도에 대한 추가 설명이 필요한 경우, 교육생은 환자(및 가족)가 의사 결정 코치 역할을 통해 환자를 지원할 수 있는 팀 간호사, 사회 복지사 또는 심리학자와 후속 조치를 취하도록 권장할 수 있습니다. 

교육생은 전문가 간 모델에 참여함으로써, 시간이 너무 많이 소요될 것이라는 믿음과 같은 공동 의사 결정의 장벽을 극복할 수 있습니다.
As a trainee considers options to engage a patient in shared decision making for a preference-sensitive decision, educators can prompt trainees to consider ways to involve team members. Collaborating with an interprofessional team can be particularly helpful when trying to encourage use of a patient decision aid – ‘coherence’ among all staff can help to champion a patient decision aid and assist in its adoption (Joseph-Williams et al. 2021). For example,

  • if a trainee is preparing to discuss prostate cancer screening with a patient, the medical assistant could contact the patient in advance of the visit to share a patient decision aid that will be discussed with the trainee in order to set the stage for participation in treatment decisions.
  • If the patient’s values and preferences need further clarification prior to making a decision, the trainee can encourage the patient (and family members) to follow up with the team nurse, social worker, or psychologist who can support a patient by acting as a decision coach.

By engaging in an interprofessional model, trainees can overcome barriers to shared decision making, such as the belief that it will take too much of their time.

팁 8 교육생에게 위험과 이익을 설명할 때 정량적 언어를 사용하도록 권장하세요.
Tip 8 Recommend trainees use quantitative language to describe risk and benefit

SDM은 근거 기반 의학에서 파생된 환자와의 명확한 위험 및 혜택 커뮤니케이션을 필요로 합니다(호프만 외. 2014). 임상의는 환자가 의사 결정에 반영하기 위해 이러한 요소의 규모를 이해할 수 있도록 의사소통을 할 수 있어야 합니다. 따라서 위험과 이점에 대한 모호한 정성적 설명은 일반적으로 SDM에 부적합합니다. 실제로 위험에 대한 정성적 설명은 정량적 위험 설명보다 정확도, 만족도가 낮고 위험 인식이 높은 것으로 나타났습니다(Zipkin 외. 2014).
SDM requires clear communication of risks and benefits with patients, which is derived from evidence-based medicine (Hoffmann et al. 2014). Clinicians must be able to communicate so that patients can appreciate the magnitude of these factors in order to incorporate them into decision making. Thus, vague qualitative statements about risks and benefits are generally inadequate for SDM. In fact, qualitative descriptions of risk have been shown to have lower accuracy, satisfaction, and higher risk perception than quantitative risk descriptions (Zipkin et al. 2014).

교육생은 정량적 위험 설명에 대한 모범 사례를 사용하도록 지도받을 수 있습니다. 여기에는 상대적 위험 감소 또는 치료에 필요한 수보다는 절대적 위험 감소를 사용하고 위험과 이점을 맥락에 맞게 배치하는 것이 포함됩니다. 절대적 위험 감소는 상대적 위험 감소나 치료에 필요한 횟수보다 이해의 정확도를 높입니다. 임상의는 환자가 더 흔히 접하는 다른 빈도(예: 가정 내 사고로 인한 연간 사망 위험 1만 명 중 1명)와 비교하여 위험과 이득을 맥락에 맞게 배치할 수 있습니다.
Trainees can be coached to use best practices for quantitative risk description. These include use of absolute risk reduction rather than relative risk reduction or number needed to treat and placing risks and benefits in context. Absolute risk reduction leads to greater accuracy of understanding than either relative risk reduction or number needed to treat. Clinicians can place risk and benefit in context by comparing them to other frequencies that patients more commonly encounter – for example, the 1 in 10,000 annual risk of death from accidents in the home.

또한 교육생은 위험과 이득에 대한 의사소통에 참여할 때 환자의 수리력을 평가하도록 권장해야 합니다. 수리 능력이 낮은 환자의 경우, 의사 결정에 가장 중요한 정보('적은 것이 더 많다')만 제공하여 계산의 필요성을 줄이도록 교육생에게 권장할 수 있습니다. 예를 들어, 위험이나 이득에 대해 동일한 분모를 사용하면 환자가 더 쉽게 비교할 수 있습니다(예: 100분의 7과 100분의 2는 50분의 1과 100분의 7보다 더 명확합니다). 다음 팁에서 설명하듯이 시각적 표시는 모든 환자, 특히 수리 능력이 낮은 환자에게도 도움이 될 수 있습니다(Peters 외. 2007).
Trainees also need to be encouraged to assess patient numeracy when engaging in communication about risk and benefit. For patients who have lower numeracy skills, trainees can be encouraged to provide only the most crucial information (‘less is more’) to make the decision and to reduce the need for calculations. For example, using the same denominator for risks or benefits allows patients to more easily compare them (e.g. 2 in 100 compared to 7 in 100 is clearer than 1 in 50 compared to 7 in 100). As discussed in the next tip, visual displays can also be helpful for all patients, especially those with lower numeracy skills (Peters et al. 2007).

팁 9 수련의가 환자와 상담할 때 위험과 이득을 시각적으로 표시하도록 권장합니다.
Tip 9 Encourage trainees to use visual displays of risk and benefit to counsel patients

데이터를 시각적으로 표시하면 환자가 위험과 이득에 대한 수치적 질문에 답하는 능력이 향상되고 위험과 이득이 어떻게 비교되는지에 대한 전반적인 이해도가 높아집니다(Zipkin 외. 2014). 근거 기반 의학에서 비롯된 이러한 이해는 SDM에 필수적입니다(Hoffmann 외. 2014). 교사는 교육생에게 시각적 디스플레이의 품질을 평가하는 방법과 SDM 대화에 포함되는 시각적 디스플레이의 가치를 평가하는 방법을 가르칠 수 있습니다. 
Visual displays of data increase the ability of patients to answer numerical questions about risk and benefit and increase their general understanding of how risks and benefits compare (Zipkin et al. 2014). This understanding that comes from evidence based medicine is vital for SDM (Hoffmann et al. 2014). Teachers can instruct trainees how to assess the quality of visual displays and to value their inclusion in SDM conversations.

환자 의사결정 지원 자료에서 가장 많이 사용되는 시각적 데이터 표시는 막대 그래프아이콘 배열 또는 픽토그램입니다. 연구 결과에 따르면 두 형식 모두 환자의 이해도에는 차이가 없는 것으로 나타났습니다. 그러나 일부 연구에 따르면 아이콘 배열이 환자에게 더 유용하고 효과적이라고 여겨지는 것으로 나타났습니다. 아이콘 배열은 분자가 작은 위험이나 이점에 더 적합하고 막대 그래프는 분자가 중간 또는 큰 위험이나 이점에 더 적합할 수 있습니다(McCaffery 외. 2012; Zipkin 외. 2014). 또한 연구에 따르면 두 가지 관련 위험(예: 스타틴을 사용할 때와 사용하지 않을 때의 심장마비 위험)을 동일한 아이콘 배열에 표시할 경우 위험 인식과 걱정이 줄어든다고 합니다. 따라서 교사는 환자의 의사 결정 보조 도구를 선택할 때 막대 그래프와 아이콘 배열을 사용하는 것의 가치를 강조할 것을 권장합니다. 
The most used visual displays of data in patient decision aids are bar graphs and icon arrays or pictographs. Studies show no difference in patient understanding with either format. However, some studies have found that icon arrays are viewed as more helpful and effective by patients. Icon arrays may be better suited to risks or benefits with smaller numerators while bar graphs may be better suited to risks or benefits with medium or larger numerators (McCaffery et al. 2012; Zipkin et al. 2014). Studies also show that risk perception and worry are reduced when two related risks (e.g. risk of heart attack with and without use of a statin) are displayed on the same icon array. Thus, we recommend that teachers highlight the value of using bar graphs and icon arrays when selecting a patient decision aid.

팁 10 수련의가 임상 의사 결정에서 불확실성을 받아들이도록 돕고 환자에게 불확실성의 존재에 대해 상담할 수 있도록 지도합니다.
Tip 10 Help trainees to accept uncertainty in clinical decision making and coach them in counseling patients about its presence

불확실성은 임상의학에 내재되어 있습니다.

  • 추계적 불확실성특정 환자에 대한 알 수 없는 결과(예: 환자가 개인적으로 암에 걸릴지 여부)를,
  • 개연적 불확실성은 경험적 데이터가 부족하거나 상충되는 경우(예: 암 검진의 혜택 정도)를,
  • 정보적 불확실성은 특정 임상 상황에 대한 유용한 정보의 부족(예: 석면 노출에 따라 내 환자의 폐암 위험이 이 시험에 참여한 평균 사람보다 얼마나 큰가?)을 의미합니다.

Uncertainty is intrinsic to clinical medicine.

  • Stochastic uncertainty refers to unknown outcomes for a particular patient (e.g. whether or not they personally will develop cancer),
  • probabilistic uncertainty refers to lack of or conflicting empirical data (e.g. the degree of benefit of cancer screening), while
  • informational uncertainty refers to lack of usable information for a particular clinical situation (e.g. how much greater is my patient’s risk for lung cancer than the average person in this trial based on her asbestos exposure?).

일부 데이터에 따르면 환자 의사 결정 보조 도구를 사용하면 환자의 의사 결정에 대한 불확실성을 줄일 수 있으며, 이는 SDM의 목표입니다. 그러나 어느 정도의 불확실성은 수정할 수 없습니다(Politi 외. 2016). 이러한 모든 형태의 불확실성은 의사 결정에 영향을 미칠 수 있으며, 많은 사람들이 환자에게 불확실성을 명시적으로 인정할 것을 권장합니다(Politi and Street 2011; Berger 2015). 그러나 임상에서 불확실성은 거의 논의되지 않는데, 이는 많은 레지던트가 자신감을 표현하도록 훈련받았고 불확실성에 대해 논의하는 것이 환자의 혼란과 불안으로 이어질 것을 우려하기 때문일 수 있습니다(Politi and Street 2011).
Some data suggests that use of patient decision aids can reduce patient uncertainty in their decision making, which is a goal of SDM. However, some degree of uncertainty is not modifiable (Politi et al. 2016). All of these forms of uncertainty may affect decision making, and many recommend that uncertainty is explicitly acknowledged with patients (Politi and Street 2011; Berger 2015). However, uncertainty is rarely discussed in clinical practice, perhaps because many residents are trained to display confidence and are worried that discussing uncertainty will lead to patient confusion and anxiety (Politi and Street 2011).

레지던트들은 경험이 많은 주치의에 비해 불확실성을 전달할 때 불안감을 더 많이 느낍니다(Politi and Legare 2010). 이러한 불안을 직접적으로 인정하고 불확실성을 논의하는 접근 방식을 제안하고 롤모델을 제시할 수 있습니다. 버거는 환자와의 불확실성을 해결하기 위한 전략의 '툴킷'을 제시합니다(Berger 2015).

  • 불확실성의 존재에 대한 정직함과 개방성
  • (예측할 수 없는 질병의 특성에도 불구하고 긍정적인 결과에 대한) 희망
  • (환자의 임상 상황이나 새로운 임상시험 데이터에 대한) 새로운 정보가 입수되면 기꺼이 결정을 재검토하겠다는 의지

불확실성에 대한 솔직한 표현은 많은 수련의들이 생각하는 것처럼 불안과 실망으로 이어지기보다는 환자 만족도를 향상시킬 수 있다는 점에 주목할 필요가 있습니다(Gordon 외. 2000). 수련의는 환자가 기대한 대로 혜택을 받고 있는지 확인하기 위해 언제 결정을 재검토할 것인지에 대한 계획을 세우도록 권장해야 합니다(Politi and Street 2011).
Residents have increased anxiety in communicating uncertainty when compared to experienced attending physicians (Politi and Legare 2010). This anxiety can be directly acknowledged and approaches to discussing uncertainty can be suggested and role modeled. Berger offers a ‘toolkit’ of strategies to address uncertainty with patients, including

  • using honesty and openness about the presence of uncertainty,
  • hope (for positive outcomes despite unpredictable nature of disease), and
  • a willingness to readdress the decision as new information is obtained (about the patient’s clinical situation or new trial data) (Berger 2015).

It is notable that honest expressions of uncertainty can improve patient satisfaction (Gordon et al. 2000), rather than lead to anxiety and disappointment, as many trainees assume. Trainees should be encouraged to make a plan for when to readdress the decision to see if the patient is benefiting as hoped (Politi and Street 2011).

팁 11 표준화 환자를 사용하여 공동 의사 결정 역량 개발하기
Tip 11 Use standardized patients to develop competencies in shared decision making

표준화 환자(SP)를 사용하면 교육생의 평가 및 평가에 도움이 될 뿐만 아니라 SDM의 역량을 개발하는 데도 도움이 됩니다(Elwyn 외. 2016). SDM을 가르치기 위해 출판된 교육 프로그램의 약 절반이 어떤 형태로든 표준화 환자를 활용합니다(Singh Ospina 외. 2020). 표준화 환자를 교육자로 활용하면 학습자의 지식, 역량, 태도에 긍정적인 영향을 미칠 수 있습니다. SDM의 경우, SP를 사용하면 핵심 커뮤니케이션 역량의 채택이 증가하고 SDM에 대한 태도가 개선되었습니다(Rusiecki 외. 2018; Amell 외. 2022). SP를 사용하면 학습자는 SDM 역량을 실천에 옮기고 이를 실제 환자와의 업무에 적용할 수 있는 능력에 대한 자신감을 키울 수 있습니다. 우리는 교육자들이 새로운 역량 개발에 필수적인 이러한 경험을 개발할 때 학습 환경을 조성하는 데 특히 주의를 기울일 것을 권장합니다(Knowles 1975). 학습자가 언어를 '가지고 놀면서' 자신의 개인적 및 실무적 선호도에 맞는 것이 무엇인지 확인할 수 있도록 연습이 설계되었다는 점을 인정하면, 특히 학습자가 그룹으로 연습하는 경우 위험을 감수하는 것을 정상화normalize하는 데 도움이 됩니다.

Use of standardized patients (SPs) can assist not only in the assessment and evaluation of trainees, but also serves to develop competencies in SDM (Elwyn et al. 2016). Approximately half of published educational programs to teach SDM utilize standardized patients in some form (Singh Ospina et al. 2020). When SPs are used as educators, they can positively impact learner knowledge, competencies, and attitudes. In the case of SDM, use of SPs has led to increased adoption of core communication competencies and improved attitudes towards SDM (Rusiecki et al. 2018; Amell et al. 2022). Use of SPs allows learners to put SDM competencies into practice and build confidence in their ability to apply this to their work with real patients. We encourage educators to pay particular attention to setting the learning climate when developing these experiences, which is essential for new competency development (Knowles 1975). Acknowledging that exercises are designed for learners to ‘play with’ language to see what fits their personal and practice preferences helps normalize risk-taking, especially if learners are in groups.

팁 12 교육생과 협력하여 공동 의사 결정을 관찰하고 행동 체크리스트를 사용하여 목표를 개발하고 피드백을 제공하세요.
Tip 12 Partner with trainees to observe shared decision making and consider using behavior checklists to develop goals and provide feedback

교육생과 교육자가 공동 의사 결정 역량을 키우겠다는 목표를 공유하는 경우, 구체적인 피드백을 제공하려면 직접 관찰하는 것이 중요합니다. 관찰에 앞서 교육생과 교육자는 SDM 교육생이 집중하고 싶은 측면을 정의하는 목표를 설정하는 데 협력할 수 있습니다(Ajjawi와 Regehr 2019). 피드백은 협력적이고 공동 건설적인 과정으로 유지하는 것이 중요하지만, 교육자는 OPTION 척도(Elwyn 외. 2003, 2013) 및 SHARE 모델(Hargraves 외. 2020)과 같은 행동 체크리스트를 사용하여 구체적이고 행동적인 피드백을 제공할 수 있습니다. 추가 도구로는 환자가 교육생에게 피드백을 제공할 수 있는 이원적 OPTION 도구가 있습니다(Melbourne 외. 2010). 교육자는 SHARE 또는 '세 가지 대화' 프레임워크와 이러한 행동 체크리스트를 함께 검토하여 교육생이 SDM 역량 개발을 위한 목표를 개발하는 데 도움을 줄 수 있습니다. 이를 통해 교육생과 교육자는 피드백을 위한 공유 계획을 가지고 관찰에 들어갈 수 있습니다.
When trainees and educators share a goal of building competencies in shared decision making, direct observation is vital to providing specific feedback. In advance of observation, trainees and educators can collaborate on constructing goals that define what aspect of SDM trainees want to focus on (Ajjawi and Regehr 2019). While it is important that feedback remain a collaborative and co-constructive process, educators can use behavior checklists such as the OPTION scale (Elwyn et al. 2003; 2013) and SHARE model (Hargraves et al. 2020) to assist in giving specific and behavioral feedback. An additional tool is the dyadic OPTION instrument, which allows patients to provide feedback to the trainee (Melbourne et al. 2010). Educators can assist trainees in developing goals for developing competencies in SDM by reviewing the SHARE or ‘three-talk’ frameworks and these behavior checklists together. This allows trainees and educators to go into observation with a shared plan for feedback

결론
Conclusions

SDM은 접근 가능한 방식으로 위험과 이득을 논의하고 관계를 구축하는 역량이 필요한 복잡한 프로세스입니다. 시간과 교육생 참여 등 SDM을 가르치는 데는 여러 가지 장벽이 있지만, 이 팁이 모든 형태의 임상 교육에 통합할 수 있는 전략을 제공할 수 있기를 바랍니다. SDM의 가치와 참여 기회, 가장 효과적인 방법을 강조함으로써 교사는 학생들이 수련 프로그램의 목표를 달성하고 환자 중심의 고가치 진료를 제공할 수 있는 능력을 향상하도록 도울 수 있습니다. 

SDM is a complex process that requires competencies in relationship-building and discussion of risk and benefit in an accessible way. While there are a number of barriers to teaching SDM including time and trainee engagement, we hope that these tips provide strategies that can be integrated into all forms of clinical teaching. By highlighting the value of SDM, opportunities to engage in it, and ways to do so most effectively, teachers can help students meet the goals of their training program and enhance their ability to provide patient-centered and high-value care.

 

 


Med Teach. 2022 Jul 6:1-7. doi: 10.1080/0142159X.2022.2093700. Online ahead of print.

Twelve Tips for teaching shared decision making

Affiliations collapse

1Department of Internal Medicine, Yale School of Medicine, New Haven, CT, USA.

2Center of Education in Interprofessional Primary Care, VA Connecticut Healthcare System, West Haven, CT, USA.

PMID: 35793200

DOI: 10.1080/0142159X.2022.2093700

Abstract

Shared decision making (SDM) is a process in which preference-sensitive decisions are discussed with patients in a collaborative and accessible format so that patients can select an option that integrates their values and preferences into the context of evidence-based medicine. While SDM has been shown to improve some metrics of quality of care and is now included in many competencies developed by accreditation bodies, it can be challenging to successfully incorporate competencies in SDM into clinical teaching. Multiple interventions and curricula that build competency in SDM have been published, but here we aim to suggest ways to integrate teaching competencies in SDM into all forms of clinical teaching. These twelve tips provide strategies to foster trainee development of the relational and risk-benefit communication competencies that are required for successful shared decision making.

Keywords: Decision-making; PDAs; communication skills.

보건의료전문직교육에서 학생선발 도구와 학생 다양성: 다기관 연구 (Adv Health Sci Educ Theory Pract. 2023)
Selection tools and student diversity in health professions education: a multi‑site study
S. Fikrat‑Wevers1 · K. M. Stegers‑Jager1 · P. M. Afonso2,3 · A. S. Koster4 · R. A. Van Gestel4 · M. Groenier5 · J. H. Ravesloot6 · A. Wouters7,8 · W. W. Van Den Broek1 · A. M. Woltman1 

소개
Introduction

의과대학 및 기타 보건 전문직 교육(HPE) 학교는 자격을 갖춘 학생을 선발할 뿐만 아니라 이들이 미래에 복무하게 될 다양한 사회를 반영하는 학생 집단을 만들어야 할 책임이 있습니다(General Medical Council, 2015). 형평성과 공정성 문제 외에도 다양한 의료 인력은 의료 서비스 제공자의 문화적 역량을 향상시키는 것 외에도, 다양한 인구 집단에 대한 양질의 의료 서비스에 대한 접근성을 높이고 균등화하는 데 중요합니다(Cohen et al., 2002; Morgan et al., 2016). 그러나 학부 HPE 프로그램의 선발 절차는 지원자 하위 그룹에 선발 기회가 불균등하게 분배되기 때문에 학생의 다양성이 영향을 받을 수 있습니다(Fielding 외, 2018; Mathers 외, 2016). 선발 절차에는 국가 수준 또는 개별 학교에서 정의한 매우 다양한 도구가 포함될 수 있을 뿐만 아니라 동일한 도구가 다른 방식으로 구현될 수도 있습니다. 이는 서로 다른 도구가 학생 다양성에 차별적인 영향을 미치는지, 그리고 일부 도구가 학생 다양성에 미치는 영향과 관련하여 다른 도구보다 맥락에 더 독립적인지 의문을 제기합니다(Patterson et al., 2016). 본 다중 사이트 연구에서는 다양한 맥락에서 지원자 하위 그룹의 선발 기회와 다양한 선발 도구에 대한 성과를 조사했습니다.
Medical schools and other health professions education (HPE) schools are responsible for selecting qualified students, as well as generating student populations that reflect the diverse society they will serve in the future (General Medical Council, 2015). A diverse healthcare workforce, aside from issues of equity and fairness, is important to improve the cultural competency of healthcare providers, and increase and equalize access to high-quality healthcare for different population groups (Cohen et al., 2002; Morgan et al., 2016). However, student diversity can be affected by the use of selection procedures for undergraduate HPE programs, as selection chances are unequally distributed across subgroups of applicants (Fielding et al., 2018; Mathers et al., 2016). Selection procedures cannot only include a great variety of tools, either defined at a national level or by an individual school, but the same tool can also be implemented in different ways. This raises the question if different tools have differential effects on student diversity (Patterson et al., 2016), and if some tools are more context-independent than others concerning their impact on student diversity. In the present multi-site study, we examined the selection chances of applicant subgroups and their performance on different selection tools in multiple contexts.

지금까지의 연구에 따르면 선발 절차는 주로 사회경제적 지위(SES)가 낮고 소수 민족 출신 지원자의 선발 기회에 부정적인 영향을 미치는 것으로 나타났습니다(Fielding 외, 2018; Mathers 외, 2016; Mulder 외, 2022; Stegers-Jager 외, 2015; Steven 외, 2016). 그러나 절차에 사용된 도구의 조합에 따라 하위 그룹 간의 성과 차이가 달라질 수 있기 때문에 이러한 효과가 항상 단순하지는 않을 수 있습니다(Stegers-Jager, 2018). 전통적으로 미국과 유럽의 선발 절차에는 주로 지적 능력을 측정하기 위한 사전 교육 평점 평균(pre-GPA)과 인지 테스트가 포함되었습니다. 지난 수십 년 동안 기존 도구에서 얻은 정보를 추가하고 종종 개인의 자질을 평가하려는 목적으로 광범위한 선발 기준을 포함하는 방향으로 변화해 왔습니다(Niessen & Meijer, 2017; Stegers-Jager, 2018). 이력서(CV)와 상황 판단 테스트(SJT)가 그 예입니다. 이 백서에서는 이러한 구분을 전통적 기준확장된 기준이라는 용어로 지칭할 것입니다. 
So far, literature has shown that selection procedures mainly negatively affect the selection chances of applicants with lower socio-economic status (SES) and from ethnic minorities (Fielding et al., 2018; Mathers et al., 2016; Mulder et al., 2022; Stegers-Jager et al., 2015; Steven et al., 2016). However, this effect may not always be straightforward, as performance differences between subgroups can depend on the combination of tools used in the procedures (Stegers-Jager, 2018). Traditionally, selection procedures in the United States and Europe mainly included prior education grade point average (pre-GPA) and cognitive tests, aimed at measuring intellectual ability. In the past decades, there has been a shift towards the inclusion of broadened selection criteria, which aim to add to the information derived from traditional tools, and often intend to evaluate personal qualities (Niessen & Meijer, 2017; Stegers-Jager, 2018). Examples include curriculum vitae (CV) and situational judgement tests (SJT). In this paper, we will refer to this distinction with the terms traditional and broadened criteria.

선행 연구에 따르면, 전통적인 기준에서는 높은 사회경제적 지위와 다수인종 지원자에게 유리하게 작용하는 것으로 나타났습니다(Girotti 외, 2020; Juster 외, 2019; Lievens 외, 2016; Stegers-Jager 외, 2015). 학생 다양성에 대한 이러한 부정적 영향을 완화하기 위해 부분적으로 확대된 선발 기준이 도입되었지만, 지금까지의 결과는 일관되지 않습니다(Stegers-Jager, 2018). 예를 들어,

  • Lievens 등(2016)은 영국에서 SJT를 도입하면 저소득층 지원자의 대표성은 높아지지만 소수민족 지원자의 대표성은 높아지지 않는다는 사실을 발견했습니다.
  • 그러나 미국에서 실시한 유사한 연구에서는 SJT를 추가하는 것이 저소득층과 소수민족 지원자 대표성 모두에 유리한 것으로 나타났습니다(Juster et al., 2019).

Prior research demonstrated performance discrepancies on traditional criteria, favoring higher SES and ethnic majority applicants (Girotti et al. 2020; Juster et al., 2019; Lievens et al., 2016; Stegers-Jager et al., 2015). Although broadened selection criteria were partly introduced to mitigate these adverse effects on student diversity, results so far are inconsistent (Stegers-Jager, 2018). For instance,

  • Lievens et al (2016) found that the inclusion of an SJT in the United Kingdom could increase the representation of lower SES applicants, but not of ethnic minority applicants.
  • However, a similar study in the United States found that adding an SJT was advantageous for the representation of both lower SES and ethnic minority applicants (Juster et al., 2019).

이는 선발 도구가 다양성에 미치는 영향이 적어도 확대된 기준의 경우 상황에 따라 달라질 수 있음을 시사합니다. 커리큘럼 샘플링 테스트는 국제적인 맥락에서 점점 더 많이 사용되고 있으며 학업 성취도를 예측하는 데 효과적인 것으로 입증된 확장된 기준을 평가하는 또 다른 도구입니다(Niessen et al., 2018). 커리큘럼 샘플링 시험은 학업 프로그램 과목의 대표적인 부분을 모방합니다. 일반적으로 지원자는 입문 과정의 소규모 버전에서 문헌을 공부하거나 동영상 강의를 시청한 후 시험을 치릅니다(Niessen 외, 2018). 커리큘럼 샘플링 시험은 지식, 동기 부여, 학습 시간 등 다양한 속성을 측정하는 데 목적이 있습니다(Niessen & Meijer, 2017). 또한 이러한 테스트는 지원자의 프로그램 '적합성'(예: 시험 및 학습 방식)을 평가하는 데 목적이 있습니다. 저희가 아는 한, 이 특정 도구에 대한 하위 그룹별 성과 차이는 아직 조사되지 않았습니다.
This implies that the effects of selection tools on diversity can be context-dependent, at least in the case of broadened criteria. The curriculum-sampling test is another tool assessing broadened criteria that is increasingly used in international contexts and proved effective in terms of predicting academic achievement (Niessen et al., 2018). Curriculum-sampling tests mimic representative parts of a subject of the academic program. Generally, applicants study literature or watch video lectures from small-scale versions of an introductory course, followed by an exam (Niessen et al., 2018). Curriculum-sampling tests are aimed at measuring a mixture of attributes such as knowledge, motivation, and time spent studying (Niessen & Meijer, 2017). Additionally, these tests intend to assess the applicants’ ‘fit’ with the program (e.g., the way of testing and studying). To our knowledge, subgroup performance differences on this specific tool have not yet been investigated.

국가마다 학생 선발 및 입학에 관한 법률과 규정은 물론 학생 다양성에 관한 고유한 맥락이 있습니다. 네덜란드의 경우, 수년간의 추첨 방식이 사라지고 이제는 프로그램에서 자체적으로 선발 절차를 설계하는 것이 일반적입니다. 프로그램은 자체 개발 및 표준화된 도구 중 어떤 도구를 포함할지, 얼마나 많은 도구를 포함할지(최소 2개 이상)를 독립적으로 결정합니다. 그 결과 매우 다양한 절차와 도구가 등장했습니다. 전국적인 후향적 연구 결과에 따르면 추첨제 폐지 이후 지원자 하위 그룹 간 선발 기회의 불평등이 증가한 것으로 나타났습니다(멀더 외, 2022). 저자들은 여성, 다수민족 지원자, 사회경제적 지위가 높은 지원자가 다른 지원자에 비해 입학 확률이 더 높다는 사실을 발견했습니다. 그러나 이 연구에서는 다양한 선발 절차와 도구의 역할은 고려하지 않았습니다. 이전의 한 단일 사이트 연구에서 이 문제를 밝히려고 시도한 결과, 소수 민족과 낮은 SES 지원자는 학업 기준에서는 낮은 점수를 받았지만 비학업 기준에서는 그렇지 않았다는 결론을 내렸습니다(Stegers-Jager 외., 2015). 연구진은 조사 대상 기관의 경우 남성이 여성에 비해 선발 가능성이 더 높다는 사실을 발견했는데, 이는 다시 학업 기준의 성적과만 관련이 있었습니다. 이는 앞서 언급한 국가적 연구 결과와 모순되는 결과입니다(멀더 외, 2022). 이는 선발이 학생의 다양성에 미치는 영향이 맥락에 따라 달라진다는 가설을 강화합니다. 단일 사이트 연구에서 추가로 관찰된 것은 이민 1세대라는 사실이 더 열악한 선발 결과와 관련이 있다는 점입니다(Stegers-Jager 외., 2015). 이는 국가 코호트 연구에서는 고려되지 않은 변수입니다. 두 연구 모두에 포함되지 않은 잠재적으로 관련성이 있는 마지막 변수는 사전 교육입니다. 최근 보고서에 따르면 외국 교육 경험이 있는 지원자는 '전통적인' 대학 전 과정 지원자에 비해 선발 기회가 더 적었습니다(Van Den Broek et al., 2018).  
Every country has its own laws and regulations for selection and admission, as well as a unique context regarding student diversity. Typical for the Netherlands is that, after years of lottery, programs are now responsible for designing their own selection procedures. Programs independently decide which tools they include (both self-developed and standardized), and how many they include (with a minimum of two). This results in a great variety of procedures and tools. Results from a national retrospective study indicate that since the abolishment of lottery, inequality in selection chances between subgroups of applicants has increased (Mulder et al., 2022). The authors found that women, ethnic majority applicants, and applicants with higher SES had a higher probability of admission compared to their peers. However, this study did not take into account the role of the extensive range of possible selection procedures and tools. One previous single-site study attempted to unravel this matter, and concluded that ethnic minority and lower SES applicants had lower scores on academic criteria, but not on non-academic criteria (Stegers-Jager et al., 2015). The researchers discovered that for the institution under consideration, men had higher selection chances compared to women, which was again only related to performance on academic criteria. This contradicts the findings of the aforementioned national study (Mulder et al., 2022). This strengthens the hypothesis that the effects of selection on student diversity are context-dependent. An additional observation of the single-site study was that being a first-generation immigrant was correlated with poorer selection outcomes (Stegers-Jager et al., 2015), a variable that was not accounted for in the national cohort study. A final potentially relevant variable that was included in neither of the studies, is prior education. A recent report indicated that applicants with prior foreign education had smaller selection chances compared to applicants from the ‘traditional’ pre-university track (Van Den Broek et al., 2018).

요컨대, 다양한 선발 도구가 서로 다른 맥락에서 학생의 다양성에 어떤 영향을 미칠 수 있는지는 명확하지 않습니다. 네덜란드의 HPE 프로그램은 선발 절차를 자유롭게 설계할 수 있기 때문에 다양한 선발 도구를 사용하여 여러 절차에서 학생 다양성에 미치는 선발 효과를 비교할 수 있는 독특한 기회를 제공합니다. 본 전향적 다중 사이트 연구는 성별, 이주 배경(인종 지표), 부모 교육(SES 지표), 이전 교육에 따라 지원자 하위 그룹을 대상으로 5개의 학부 HPE 프로그램에 선발될 확률을 평가하는 것을 목표로 했습니다. 또한 두 가지 전통적인 선발 도구(사전 GPA, 생물의학 지식 테스트)와 두 가지 확장된 기준(커리큘럼 샘플링 테스트, 이력서)을 평가하는 도구에 대한 성과 차이를 조사했습니다. 
In short, it is not clear how different selection tools can affect student diversity across different contexts. The freedom of Dutch HPE programs to design their selection procedures creates the unique opportunity to compare the effects of selection on student diversity across different procedures with a variety of selection tools. The present prospective multi-site study aimed to evaluate the probability of selection into five undergraduate HPE programs for subgroups of applicants based on gender, migration background (as an indicator of ethnicity), parental education (as an indicator of SES), and prior education. Additionally, we examined performance differences on two traditional selection tools (pre-GPA, biomedical knowledge test), and two tools assessing broadened criteria (curriculum-sampling test, CV).

방법
Method

연구 설계 및 맥락
Design and context

본 연구는 전향적 다중 사이트 코호트 연구에 관한 것입니다. 네덜란드의 5개 대학 수준의 학부 HPE 프로그램에서 데이터를 수집했는데, 여기에는 3개의 의학 프로그램(A, B, C로 표시), 1개의 기술-의료(임상 기술) 프로그램(D로 표시), 1개의 약학 프로그램(E로 표시)이 포함되었습니다. 포함된 프로그램은 네덜란드의 도시와 농촌 등 각기 다른 지역에 위치해 있으며, 모두 학생 선발 과정의 다양성을 높이는 데 중점을 두고 있습니다. 
The present research concerns a prospective multi-site cohort study. We collected data from five university-level undergraduate HPE programs in the Netherlands, including three medical programs (labeled A, B, and C), one technical-medical (clinical technology) program (labeled D), and one pharmacy program (labeled E). The included programs were located in different parts of the Netherlands, both in urban and rural areas, and were all concerned about enhancing diversity in their selection processes.

네덜란드의 독특한 점은 다양한 유형의 HPE 학부 프로그램의 입학 요건이 동일하다는 점입니다. 입학 자격을 얻으려면 지원자는 물리, 화학, 생물학 등 수강 과목과 교육 수준에 관한 엄격한 요건을 동일하게 충족해야 합니다. 결과적으로 지원자 풀은 학력 면에서 비교적 동질적이며, 대학 수준의 학부 HPE 프로그램에 지원하는 학생들은 이미 고도로 선택적인 중등 교육으로 인해 학업 능력에 따라 강력하게 사전 선발됩니다(Niessen & Meijer, 2016). 지원자는 자신이 선택한 프로그램에 지원할 때 하나의 특정 교육기관에 지원하게 됩니다. 각 교육기관에는 미리 정해진 정원이 있습니다. 법에 따라 교육기관은 최소 두 가지 이상의 선발 기준을 포함해야 하지만, 앞서 언급했듯이 도구의 내용 및 품질과 같은 추가 요건은 없습니다. 따라서 기관마다 서로 다른 유형의 HPE 프로그램 간에 또는 프로그램 내에서 사용하는 선정 절차에 매우 다양한 차이가 존재합니다. 저희는 두 개 이상의 프로그램에서 사용하는 도구를 연구하여 프로그램 간에 효과가 비슷하거나 다른지 평가했습니다. 
Uniquely to the Netherlands is that admission requirements of different types of undergraduate HPE programs are identical. To be eligible, applicants need to meet the same stringent requirements regarding subjects taken (e.g., physics, chemistry, and biology) and educational level. Consequently, the applicant pools are relatively homogeneous in terms of academic background; students who apply to a university-level undergraduate HPE program are already strongly preselected based on academic skills due to highly selective secondary education (Niessen & Meijer, 2016). When applicants apply to their program of choice, they apply to one specific institution. Each institution has a predetermined fixed number of spots. By law, institutions are required to include at least two selection criteria, but as previously mentioned, there are no additional requirements concerning, for instance, the content and quality of the tools. Consequently, great variety exists in the selection procedures that programs employ, both between and within different types of HPE programs at different institutions. We studied tools used by more than one program, to evaluate whether effects were similar or different across programs.

5개 프로그램의 선발 절차는 표 1에 설명되어 있습니다. 여러 프로그램에서 사용한 도구는 사전 GPA, 생물의학 지식 테스트, 커리큘럼 샘플링 테스트, 이력서였습니다.

  • 사전 GPA는 일반적으로 수학, 물리, 생물, 화학 등 필수 과목에 대한 지원자의 평균 학교 성적으로 구성되었습니다.
  • 생물의학 지식 테스트는 별도의 준비 없이 지원자의 생물의학 과목에 대한 일반적인 지식을 평가했습니다.
  • 커리큘럼 샘플링 시험은 대부분 지원자가 시험일 몇 주 전에 받은 강의 및/또는 독서 자료 형태의 준비 자료를 기반으로 진행되었습니다.
  • 이력서는 (자발적인) 직업, 인턴십, 특별한 문화 또는 운동 능력에 대한 증거와 같은 과외 활동에 대한 평가로 구성되었습니다.

The selection procedures of the five programs are described in Table 1. The tools used by multiple programs were pre-GPA, biomedical knowledge test, curriculum-sampling test, and CV.

  • Pre-GPA comprised of applicants’ average school grades on required subjects, usually mathematics, physics, biology, and/or chemistry.
  • Biomedical knowledge tests assessed applicants’ existing general knowledge about biomedical subjects, without requiring any preparation.
  • Curriculum-sampling tests were (largely) based on preparatory materials in the form of a lecture and/or reading materials that applicants had received some weeks prior to the testing day.
  • CVs consisted of an assessment of extracurricular activities, such as (voluntary) jobs, internships, or evidence of extraordinary cultural or athletic skills.

한 프로그램(D)에서 시행한 바이오메디컬 입학시험(BMAT)의 바이오메디컬 지식 하위 테스트인 표준화된 도구가 포함되었습니다. 샘플에 포함된 다른 모든 선발 도구는 개별 프로그램에서 자체 개발한 것입니다. 따라서 도구의 구체적인 적용은 프로그램마다 달랐으며, 예를 들어 pre-GPA에 포함되는 특정 과목과 시험 문제 유형이 달랐습니다. BMAT를 제외한 모든 선발 도구는 네덜란드어로 시행되었습니다. 프로그램에서 자체적으로 품질 보증을 담당했으며, 저희는 심리측정 정보에 접근할 수 없었습니다. 
One standardized tool was included, the biomedical knowledge subtest of the BioMedical Admissions Test (BMAT), which was administered by one program (D). All other selection tools in our sample were self-developed by the individual programs. Consequently, the specific application of the tools differed between the programs, e.g., the specific subjects included in pre-GPA and the types of questions in tests. All selection tools, except for the BMAT, were administered in Dutch. Programs were responsible for their own quality assurance, and we did not have access to psychometric information.

 

참가자 및 절차
Participants and procedure

2020년 9월에 진행된 선발 절차에 참여한 모든 지원자(N = 3280명)가 참여하도록 초대되었습니다. 프로그램 A, D, E의 경우 현장 테스트 당일에 지원자를 초대했습니다. 프로그램 B와 C는 코로나19 팬데믹 조치로 인해 현장 테스트를 실시하지 않았으며, 선발 과정에서 이메일을 통해 지원자를 모집해야 했습니다. 
All applicants engaged in the selection procedures for entry in September 2020 (N = 3280) were invited to participate. For programs A, D, and E, applicants were invited during the on-site testing days. Programs B and C did not perform on-site testing due to COVID-19 pandemic measures, necessitating recruitment via e-mail during the selection procedure.

지원자들은 인구통계학적 설문지를 작성하도록 요청받았습니다. 이 설문조사에서 지원자들은 학번, 성별, 이주 배경, 부모 학력 및 이전 교육에 대해 보고하도록 요청받았습니다. 선발 절차에 대한 성과 데이터는 관련 대학 학생 관리 시스템에서 추출했습니다. 학생 번호는 인구 통계 설문지의 데이터를 성과 데이터와 연결하는 데 사용되었습니다. 
Applicants were requested to complete a demographics questionnaire. In this survey, applicants were asked to report their student number, gender, migration background, parental education and prior education. Data on performance on the selection procedures were derived from the related university student administration systems. Student number was used to connect the data from the demographics questionnaire with performance data.

모든 참가자로부터 사전 동의를 얻었습니다. 지원자에게는 참여가 자발적인 것이며 선발 결과에 영향을 미치지 않는다는 사실을 알렸고, 연구진은 선발 위원회와 독립적으로 운영된다는 점을 명시했습니다. 지원자는 연구 참여에 대한 인센티브를 받지 않았습니다. 모든 데이터는 인구통계학적 데이터와 성과 데이터를 결합한 후 즉시 가명 처리되었습니다. 에라스무스 MC의 의료윤리심의위원회는 이 연구가 윤리적 승인 면제 대상임을 선언했습니다. 
Informed consent was obtained from all participants. Applicants were informed that participation was voluntary and would not influence their selection outcomes, and we made explicit that the researchers operated independently from the selection committees. Applicants did not receive incentives for participation in the study. All data were pseudonymized immediately after the demographics and performance data were combined. The Medical Ethical Review Committee of Erasmus MC declared the study exempt from ethical approval.

변수
Variables

예측 변수에는 성별, 이주 배경, 이전 교육, 부모 교육이 포함되었습니다. 
Predictors included gender, migration background, prior education, and parental education.

본 연구에서는 성별의 다양성을 인정하여 지원자가 '남성', '여성', '기타(자유 텍스트 상자)'의 세 가지 범주 중에서 선택할 수 있도록 했습니다. 
Gender diversity was acknowledged in the present study, and applicants had the option to choose between three categories: ‘man’, ‘woman’, and ‘other, namely [free text box]’.

이주 배경은 민족의 다차원적 특성을 완전히 포착하지 못한다는 점을 고려하여 민족의 대용어로 사용되었습니다. 이주 배경은 네덜란드 통계청(CBS)에 따라 정의되었습니다. 부모 중 한 명 이상이 네덜란드 밖에서 태어난 경우 개인은 이주 배경을 갖게 됩니다. CBS의 분류법에 따라 서구와 비서구의 이주 배경을 구분했습니다. 

  • 모든 유럽(터키 제외), 북미, 오세아니아 국가, 인도네시아, 일본을 서구 국가로 간주했습니다. 
  • 비서양 국가에는 아프리카, 아시아(인도네시아, 일본 제외), 라틴 아메리카, 터키의 모든 국가가 포함되었습니다. 

또한 이민 1세대와 이민 2세대를 구분했습니다. 1세대 이민자는 네덜란드 이외의 지역에서 태어났습니다. 네덜란드에서는 이주 배경과 CBS 분류법을 사용하는 것이 민족을 운영하는 표준으로 간주되며, HPE의 연구에서도 마찬가지입니다(예: Mulder 외., 2022; Stegers-Jager 외., 2015).
Migration background was used as a proxy for ethnicity, recognizing that this does not completely capture the multidimensional character of ethnicity. Migration background was defined in alignment with Statistics Netherlands (CBS). Individuals have a migration background when at least one of their parents was born outside of the Netherlands. Based on the taxonomy of CBS, we distinguished between a Western and non-Western migration background.

  • All European (excluding Turkey), North American, and Oceanian countries, Indonesia, and Japan were considered Western.
  • Non-Western countries included all countries in Africa, Asia (excluding Indonesia and Japan), Latin America, and Turkey.

Additionally, we distinguished between first-generation and second-generation immigrants. First-generation immigrants were born outside the Netherlands. In the Netherlands, the use of migration background and CBS taxonomy are considered the standard for operationalizing ethnicity, also in research in HPE (e.g., Mulder et al., 2022; Stegers-Jager et al., 2015).

네덜란드에서 HPE 프로그램에 입학하는 일반적인 교육 경로는 보건/과학을 전공하는 중등학교의 예비 대학 과정입니다. 그러나 지원자는 다른 형태의 사전 교육을 받은 후에도 HPE 프로그램에 지원할 수 있습니다. 우리는 다음으로 구분했습니다.

  • 네덜란드의 표준 대학 예비 교육, 
  • 대학, 
  • 고등 직업 교육, 
  • 모든 형태의 외국 교육, 
  • 기타 형태의 사전 교육(예: 입시 및 성인 교육)

In the Netherlands, the typical educational route to an HPE program is the pre-university track of secondary school with a health/science profile. However, applicants can apply to HPE programs from alternative forms of prior education. We distinguished between

  • standard Dutch pre-university education,
  • university,
  • higher vocational education,
  • all forms of foreign education, and
  • other forms of prior education (e.g., entrance exams and adult education).

마지막으로, 부모 교육은 SES를 조작화하기 위해 사용할 수 있는 여러 지표 중 하나에 불과하다는 점을 인정하여 SES의 대리 지표로 사용되었습니다. 부모 교육은 지원자 부모의 교육 수준에 따라 결정되었습니다. 지원자의 부모 중 누구도 고등 교육, 즉 대학 이상의 직업 교육을 받은 적이 없는 경우 지원자를 1세대 대학 지원자로 분류했습니다. 1세대 대학 지원자는 이전 연구에서 의대에 입학할 확률이 낮다는 사실이 입증되었기 때문에 관심 하위 그룹으로 분류되었습니다(Mason 외., 2021; Stegers-Jager 외., 2015). 또한, 이들은 의과대학에 지원할 때 입학 절차에 대한 지식 부족과 재정적 장벽 등 수많은 장애물에 직면합니다(Romero 등, 2020).
Finally, parental education was used as a proxy for SES, acknowledging that this is only one of the many indicators that can be used to operationalize SES. Parental education was determined by the educational level of applicants’ parents. Applicants were categorized as first-generation university applicants when none of their parents had attended higher education, i.e., university or higher vocational education. First-generation university applicants were a subgroup of interest, because previous research has demonstrated that their odds of being selected into medical school are lower (Mason et al., 2021; Stegers-Jager et al., 2015). Additionally, they face numerous obstacles when applying to medical school, including a lack of knowledge about the admission process and financial barriers (Romero et al., 2020).

결과 측정
Outcome measures

다섯 가지 결과 측정이 포함되었습니다. 첫 번째 이분법적 결과 측정은 지원자의 순위 번호에 따라 지원자가 선발되었는지 여부(예/아니오)를 나타냅니다. 나머지 네 가지 결과 측정은 연속적인 것으로 사전 GPA, 커리큘럼 샘플링 테스트, 생물의학 지식 테스트, 이력서의 네 가지 도구에 대한 성과를 반영했습니다. 각 도구에 대해 담당 프로그램은 자체 채점 방식에 따라 원시 점수를 계산했습니다. 그런 다음 각 프로그램은 이 원시 점수를 표준화된 Z 점수로 변환하여 트랙 간 도구 비교를 가능하게 했습니다. 이 Z 점수는 연구진에게 제공되어 분석에 사용되었습니다. 
Five outcome measures were included. The first—binary—outcome measure indicated whether an applicant was selected (yes/no), determined by their ranking number. The other four outcome measures were continuous and reflected performance on the four tools: pre-GPA, curriculum-sampling test, biomedical knowledge test, and CV. For each tool, the responsible program calculated a raw score based on its own scoring method. Subsequently, each program transformed these raw scores into standardized Z-scores to enable comparisons of tools between tracks. These Z-scores were made available to the researchers and used for the analyses.

통계 분석
Statistical analyses

다단계 로지스틱 회귀 분석을 수행하여 다양한 예측 변수가 선발 확률에 미치는 영향에 대한 오즈비(OR)를 계산했습니다. OR이 1을 초과하면 선발 가능성이 높아진다는 것을 의미합니다. 프로그램마다 선발 절차의 내용이 다르기 때문에 이 모델에서는 지원자가 지원한 프로그램을 무작위 절편으로 사용했습니다. 프로그램 E는 96%의 높은 선발률로 평균 선발률이 47%인 다른 프로그램과 큰 대조를 이루었기 때문에 분석에서 제외했습니다(부록 1: 표 6). 이 프로그램의 선발률이 이렇게 높았던 이유는 선발 가능 인원에 비해 지원자 수가 적었기 때문입니다. 
Multilevel logistic regression analysis was performed to calculate odds ratios (OR) for the effect of the different predictors on the probability of selection. An OR of > 1 indicates an increased likelihood of selection. Since the content of the selection procedure differed between programs, we used the program to which the applicants applied as a random intercept in this model. Program E was excluded from this analysis, given the high selection rate of 96%, which was in large contrast with other programs having an average selection rate of 47% (Appendix 1: Table 6). The selection rate of this program was this high due to the small number of applicants compared to the number of available spots.

다양한 도구의 성능을 비교하기 위해 참여 프로그램에서 제공한 Z 점수를 사용했습니다. 다단계 선형 회귀분석을 수행하여 중복되는 4개의 도구에 대한 Z점수 간의 성능 차이를 평가했습니다. 프로그램 C는 입학정원 제한이 있는 두 개의 독립적인 선택 트랙에 대해 서로 다른 채점 방법을 적용하여(표 1), 두 개의 서로 다른 트랙에 대한 Z점수를 산출했습니다. 따라서 네 가지 도구의 분석을 위해 '프로그램' 대신 '트랙'이라는 변수를 무작위 절편으로 사용했습니다. 앞서 언급했듯이 각 도구의 구체적인 적용이 설정에 따라 다르기 때문에 이러한 무작위 효과를 포함했습니다. 
To compare performance on different tools, we used Z-scores that were provided by the participating programs. We performed multilevel linear regression to assess performance differences between Z-scores on the four overlapping tools. Program C applied different scoring methods for two independent selection tracks with intake restriction (Table 1), resulting in Z-scores for the two different tracks. Therefore, we used the variable ‘track’ instead of ‘program’ as a random intercept for the analyses of the four tools. This random effect was included because, as mentioned earlier, the specific application of each tool differed across settings.

'프로그램' 또는 '트랙'을 무작위 절편으로 포함했을 때 절편이 없는 모델에 비해 유의미하게 더 많은 변수를 설명하는지 평가하기 위해 경계 보정을 적용한 확률 비율 테스트를 적용했습니다.
We applied likelihood ratio tests with the boundary correction to assess whether the inclusion of ‘program’ or ‘track’ as a random intercept explained significantly more variance compared to the model without the intercept.

분석은 R 버전 4.0.4의 LME4 1.1.26 및 NLME 3.1.152 패키지를 사용하여 실행되었습니다. 모든 통계 분석에서 가정을 확인했습니다. OR이 1.68 이상 0.60 미만이면 작은 효과, OR이 3.47 이상 0.29 미만이면 중간 효과, OR이 6.71 이상 0.15 미만이면 큰 효과로 해석했습니다(Chen et al., 2010).
Analyses were executed using the LME4 1.1.26 and NLME 3.1.152 packages in R version 4.0.4. For all statistical analyses, assumptions were checked. We interpreted OR of > 1.68 or < 0.60 as a small effect, OR of > 3.47 or < 0.29 as a medium effect, and OR of > 6.71 or < 0.15 as a large effect (Chen et al., 2010).

결과
Results

지원자 특성
Applicant characteristics

총 1935명의 지원자가 연구에 참여했습니다(응답률 59%, 개별 프로그램의 경우 34-81% 범위). 성별은 응답자의 30%가 남성으로 나타났으며, '기타'로 응답한 지원자는 1명이었습니다. 이 지원자는 하위 그룹 분석에서 제외되었기 때문에 결과에는 남성과 여성의 범주만 설명되어 있습니다. 또한 38%는 이주 배경이 있었고, 20%는 다른 형태의 이전 교육을 받은 경험이 있었으며, 25%는 1세대 대학 지원자였습니다. 성별과 연령 측면에서 모든 샘플은 전체 지원자 풀을 대표했습니다. 두 가지 프로그램(C와 E)의 경우, 참여 지원자들이 비참여 지원자들에 비해 선발에서 약간 더 좋은 성적을 거두었습니다(순위 기준).
|In total, 1935 applicants participated in the study (response rate 59%, range 34–81% for individual programs). With respect to gender, 30% of the respondents identified as men, and one applicant identified as ‘other’. This individual was excluded from the subgroup analyses, and therefore only the categories of men and women are described in the results. Furthermore, 38% had a migration background, 20% applied from alternative forms of prior education, and 25% were first-generation university applicants. In terms of gender and age, all samples were representative of the complete applicant pool. For two programs (C and E), participating applicants performed slightly better on the selection (in terms of ranking number) compared to non-participating applicants.

지원자들은 일부 중복되는 도구와 일부 고유한 도구에 노출되었고, 한 프로그램은 선발 확률 분석에서 제외되었기 때문에 지원자 특성 분포는 다단계 분석에서 차이를 보였습니다(표 2). 주목할 만한 점은 생물의학 지식 테스트의 경우 이민 배경을 가진 지원자의 비율이 다른 프로그램에 비해 상대적으로 낮았다는 점입니다(28% 대 36~43%). 또한 사전 학력 평가의 경우, 다른 형태의 사전 교육을 받은 지원자 비율이 상대적으로 적었습니다(10% 대 19~23%). 이는 사전 내신 성적이 지원자 선발 도구에 항상 포함되는 것은 아니기 때문인 것으로 보입니다.
Since applicants were exposed to some overlapping tools, but also to some unique tools, and one program was excluded from the analyses on the probability of selection, the distribution of applicant characteristics differed between the multilevel analyses (Table 2). Noteworthy is that for the biomedical knowledge test, the proportion of applicants with a migration background was relatively low compared to the other programs (28% vs 36–43%). Additionally, for pre-GPA, the proportion of applicants from alternative forms of prior education was comparatively small (10% vs 19–23%). This is probably caused by the fact that pre-GPA is not always included as a selection tool for those applicants.


개별 프로그램마다 관심 있는 지원자의 특성 분포에 차이가 있었습니다(부록 1: 표 6, 7). 가장 눈에 띄는 차이점은 다른 프로그램과 비교했을 때, 표본에서 유일한 지방 프로그램인 프로그램 D는 이민 배경을 가진 지원자(13% 대 32-53%)와 대학 1세대 지원자(15% 대 24-32%)의 비율이 낮았다는 점입니다. 인구통계학적 구성의 차이는 입학 요건의 차이로 인한 것이 아니며, 이는 프로그램 간에 모두 비슷하기 때문입니다. 그러나 위치 및 선발 절차 등 기타 기관 관련 요인으로 인해 특정 프로그램이 특정 하위 그룹에게 더 매력적으로 느껴졌을 가능성이 있습니다(Wouters et al., 2017b).
The individual programs differed in their distribution of the applicant characteristics of interest (Appendix 1: Tables 6, 7). The most notable difference is that compared to the other programs, Program D—the only rural program in the sample—had a lower representation of applicants with a migration background (13% vs 32–53%) and first-generation university applicants (15% vs 24–32%). Differences in demographic composition are not caused by differences in admission requirements, since these were all comparable across programs. However, it is possible that other institutional-related factors made certain programs more attractive to specific subgroups, including location and selection procedure (Wouters et al., 2017b).

선발 확률
Probability of selection

서구 이민 1세대는 이민 배경이 없는 지원자에 비해 선발될 확률이 현저히 낮았으며(23% 대 49%), 조정된 OR은 0.45(95% 신뢰구간[CI] [0.20, 0.99]; 표 3)에 해당합니다. 또한, 외국 교육을 받은 지원자는 표준 대학 전 교육을 받은 지원자보다 선발 확률이 더 낮았습니다(24% vs 49%, 조정된 OR = 0.46, 95% CI [0.22, 0.94]). 둘 다 효과가 작은 것으로 해석할 수 있습니다(즉, OR <0.60). '다른 형태의 사전 교육' 범주는 중간 정도(즉, OR <0.29)이지만 유의하지 않은(수준 0.05) 부정적인 효과(18% 대 49%, 조정된 OR = 0.28, 95% CI [0.08, 1.00])를 보였는데, 이는 이 그룹의 규모가 작았기 때문일 수 있습니다(N = 17). 성별과 부모 교육 정도는 선택 확률과 유의미한 관련이 없었습니다. 프로그램의 무작위 효과는 유의하지 않았으며(SD = 0.00, 95% CI [0.00, 0.21], p = 0.50), 이는 고정된 구조(즉, 성별, 이주 배경, 사전 교육 및 부모 교육 변수)를 고려했을 때 선택 확률의 하위 그룹 차이가 프로그램 간에 유사하다는 것을 나타냅니다.
First-generation Western immigrants were significantly less likely to be selected compared to applicants without a migration background (23% vs 49%), corresponding to an adjusted OR of 0.45 (95% confidence interval [CI] [0.20, 0.99]; Table 3). Additionally, foreign-educated applicants had smaller selection odds than those from standard pre-university education (24% vs 49%, adjusted OR = 0.46, 95% CI [0.22, 0.94]). Both can be interpreted as small effects (i.e., OR < 0.60). The category ‘other forms of prior education’ demonstrated a medium (i.e., OR < 0.29), but non-significant (level 0.05) negative effect (18% vs 49%, adjusted OR = 0.28, 95% CI [0.08, 1.00]), which could be due to the small size of this group (N = 17). Gender and parental education were not significantly associated with the probability of selection. The random effect of program was not significant (SD = 0.00, 95% CI [0.00, 0.21], p = 0.50), indicating that subgroup differences in the probability of selection were similar across programs, given the fixed structure considered (i.e., the variables of gender, migration background, prior education and parental education).

기존 기준에서의 성과
Performance on traditional criteria

Pre-GPA
Pre-GPA

사전 GPA는 4개 프로그램(B, C, D, E)에서 사용되었으며, 이 중 한 프로그램은 두 개의 독립적인 선발 트랙을 사용하여 분석에 다섯 개의 트랙(B, C1, C2, D, E)이 사용되었습니다. 1세대 대학 지원자들은 기존 지원자들에 비해 사전 GPA가 유의미하게 낮았습니다(B = - 0.17, 95% CI [- 0.30, - 0.03]; 표 4, 5). 모든 기준에 대해 Z 점수가 사용되었으므로 표준화되지 않은 B는 SD의 차이를 나타냅니다. 예를 들어, 1세대 대학 지원자의 사전 GPA는 비 1세대 대학 지원자보다 0.17 SD 낮았습니다. 대학 학력 및 '기타 형태의 사전 교육'을 받은 지원자는 일반 대학 1세대 지원자에 비해 사전 GPA가 유의하게 낮았으며(각각 B = - 0.41, 95% CI [- 0.63, - 0.18], B = - 0.76, 95% CI [- 1.42, - 0.11]), 외국 교육을 받은 지원자의 사전 GPA는 유의하게 높았다(B = 1.13, 95% CI [0.54, 1.72]). 성별과 이주 배경은 사전 GPA와 관련이 없었습니다. 트랙의 무작위 효과는 유의하지 않았으며(SD = 0.005, 95% CI [0, 506553], p = 0.50), 이는 고정된 구조를 고려했을 때 사전 GPA에서 발견된 성과 차이가 트랙 간에 유사하다는 것을 나타냅니다.
Pre-GPA was used by four programs (B, C, D, and E), of which one program used two independent selection tracks, resulting in five tracks in the analysis (B, C1, C2, D, and E). Compared to traditional applicants, first-generation university applicants had significantly lower pre-GPAs (B = − 0.17, 95% CI [− 0.30, − 0.03]; Tables 4, 5). As Z-scores were used for all criteria, the unstandardized Bs indicate the difference in SD. Thus, for example, pre-GPAs of first-generation university applicants were 0.17 SD lower than those of non-first-generation university applicants. Applicants with university-level and with ‘other forms of prior education’ had significantly lower pre-GPA (respectively, B = − 0.41, 95% CI [− 0.63, − 0.18]; B = − 0.76, 95% CI [− 1.42, − 0.11] compared to standard pre-university applicants, while pre-GPAs of applicants with foreign education were significantly higher (B = 1.13, 95% CI [0.54, 1.72]). Gender and migration background were not associated with pre-GPA. The random effect of track was not significant (SD = 0.005, 95% CI [0, 506553], p = 0.50), indicating that the performance differences found on pre-GPA were similar across tracks, given the fixed structure considered.

 

생의학 지식 테스트
Biomedical knowledge test

생의학 지식 테스트는 두 가지 프로그램(A와 D)에서 사용되었습니다. 남성과 대학 수준에서 공부한 지원자는 여성과 표준 대학 이전 교육을 받은 지원자에 비해 생물의학 지식 테스트에서 유의미하게 더 높은 점수를 받았습니다(각각 B = 0.21, 95% CI [0.06, 0.37]; B = 0.32, 95% CI [0.11, 0.52]; 표 6, 7). 이주 배경과 부모 교육은 시험 점수와 관련이 없었으며, 트랙의 무작위 효과는 유의하지 않았습니다(SD = 0.01, 95% CI [0, 12114,82], p = 0.46). 이는 고정된 구조를 고려했을 때 하위 그룹의 성과 차이가 프로그램 간에 유사하다는 것을 나타냅니다.
Biomedical knowledge tests were used by two programs (A and D). Men and applicants who were studying at university-level performed significantly better on biomedical knowledge tests compared to women and applicants from standard pre-university education (respectively, B = 0.21, 95% CI [0.06, 0.37]; B = 0.32, 95% CI [0.11, 0.52]; Tables 6, 7). Migration background and parental education were not associated with test scores, and the random effect of track was not significant (SD = 0.01, 95% CI [0, 12114,82], p = 0.46), indicating that subgroup differences in performance were similar across programs, given the fixed structure considered.

확장된 기준에서의 성과
Performance on broadened criteria

커리큘럼 샘플링 테스트
Curriculum-sampling test

세 가지 프로그램에 커리큘럼 샘플링 테스트(A, B, E)가 포함되었습니다. 비서구권 이주 배경을 가진 지원자(1세대와 2세대 모두)는 기존 지원자에 비해 커리큘럼 샘플링 테스트에서 낮은 점수를 받았습니다(각각 B = - 0.43, 95% CI [- 0.67, - 0.20], B = - 0.21, 95% CI [- 0.34, - 0.10]; 표 6, 7). 이미 대학 수준에서 공부하고 있는 지원자는 일반 예비 대학 지원자에 비해 훨씬 더 우수한 성적을 거둔 반면(B = 0.37, 95% CI [0.21, 0.53]), 외국 교육을 받은 지원자는 시험 점수가 더 낮았습니다(B = - 0.56, 95% CI [- 0.91, - 0.22]). 시험 점수는 성별이나 부모의 학력에 영향을 받지 않았습니다. 고정된 구조를 고려했을 때, 트랙의 무작위 효과는 유의미했습니다(SD = 0.09, 95% CI [0.03, 0.32], p = 0.01). 이는 전반적인 결과가 프로그램마다 다르다는 것을 의미합니다. 커리큘럼 샘플링 테스트를 사용한 개별 프로그램의 설명 통계(부록 1: 표 8)에 따르면 프로그램 E의 경우에만 비 서구권 1세대 배경을 가진 지원자가 이주 배경이 없는 지원자에 비해 평균 Z 점수가 현저히 낮았습니다(M = - 0.86 vs M = 0.29). 이 차이는 프로그램 B의 경우 더 작았고(M = - 0.13 vs M = 0.18), 프로그램 A의 경우 존재하지 않았습니다(M = 0.02 vs M = - 0.01). 주목할 만한 점은 프로그램 E에서 다른 두 프로그램보다 상대적으로 더 많은 지원자가 비서구권 1세대 배경을 가지고 있었다는 점입니다.
Three programs included curriculum-sampling tests (A, B, and E). Applicants with a non-Western migration background, both first-generation and second-generation, scored lower on curriculum-sampling tests compared to their traditional counterparts (respectively, B = − 0.43, 95% CI [− 0.67, − 0.20]; B = − 0.21, 95% CI [− 0.34, − 0.10]; Tables 6, 7). Applicants who were already studying at university-level performed significantly better compared to standard pre-university applicants (B = 0.37, 95% CI [0.21, 0.53]), while applicants with foreign education had lower test scores (B = − 0.56, 95% CI [− 0.91, − 0.22]). Test scores were not influenced by gender or parental education. Given the fixed structure considered, the random effect of track was significant (SD = 0.09, 95% CI [0.03, 0.32], p = 0.01), implying that our overall findings differed between programs. Descriptive statistics of the individual programs employing curriculum-sampling tests (Appendix 1: Table 8) indicate that only for program E, applicants with a first-generation non-Western background had notable low mean Z-scores compared to those without a migration background (M = − 0.86 vs M = 0.29). This difference was smaller for program B (M = − 0.13 vs M = 0.18) and non-existent for program A (M = 0.02 vs M = − 0.01). Noteworthy is that in program E relatively more applicants had a first-generation non-Western background than in the other two programs.

이력서
CV

두 개의 서로 다른 프로그램에서 파생된 세 가지 트랙에는 이력서(B, C1, C2)가 포함되었습니다. 여성 또는 일반 지원자에 비해 남성(B = - 0.17, 95% CI [- 0.31, - 0.02]; 표 6, 7), 서구 이민 1세대(B = - 0.43, 95% CI [- 0.85, - 0.00]), 고등 직업 교육, 외국 교육, '기타 형태의 사전 교육'을 받은 지원자의 CV 점수가 유의하게 낮았습니다(B = - 0.61에서 - 0.81 사이). 부모 교육은 이력서 점수와 관련이 없었습니다. CV에 대한 트랙의 유의미한 효과(SD = 0.25, 95% CI [0.08, 0.76] p <0.001)가 있었으며, 이는 고정된 구조를 고려했을 때 앞서 언급한 효과가 트랙에 따라 다르다는 것을 나타냅니다. 기술 통계(부록 1: 표 9)에 따르면 성별에 따른 성과 격차는 다른 트랙에 비해 트랙 B에서 더 작았습니다(트랙 B: M = 0.04(남성) vs M = 0.17(여성), 트랙 C1: M = - 0.29 vs M = - 0.06, 트랙 C2: M = - 0.11 vs M = 0.25). 전반적으로 서구 이민 1세대가 이민 배경이 없는 지원자보다 점수가 낮았다는 결과는 트랙 B(M = - 0.75 vs M = 0.22)와 트랙 C2(M = - 0.42 vs M = 0.09)에서 나타났지만, 트랙 C1(M = - 0.03 vs M = - 0.14)에서는 나타나지 않았습니다. 이주 배경이 없는 지원자와 비교했을 때, 비 서구권 2세 지원자의 경우 트랙 B(M = - 0.28 vs M = 0.22)에서는 CV 점수가 낮았고, 트랙 C1(M = - 0.17 vs M = - 0.14)에서는 비슷했으며, 트랙 C2(M = 0.45 vs M = 0.09)에서는 CV 점수가 더 높았습니다. 트랙 B의 경우, 다양한 형태의 사전 교육 간에 더 큰 차이가 관찰되었지만, 이는 프로그램 C의 경우 사전 교육에 따라 트랙이 구분되어 트랙 C1에는 표준 대학 전 교육이 집중되고 트랙 C2에는 다른 형태의 사전 교육이 집중된 것과 관련이 있는 것으로 보입니다. 
Three tracks derived from two different programs included a CV (B, C1, and C2). Compared to women or traditional applicants, CV scores were significantly lower for men (B = − 0.17, 95% CI [− 0.31, − 0.02]; Tables 6, 7), first-generation Western immigrants (B = − 0.43, 95% CI [− 0.85, − 0.00]), and applicants with higher vocational education, foreign education, and ‘other forms of prior education’ (Bs between − 0.61 and − 0.81). Parental education was not associated with CV scores. There was a significant effect of track for CV (SD = 0.25, 95% CI [0.08, 0.76] p < 0.001), indicating that the aforementioned effects differed across tracks, given the fixed structure considered. Descriptive statistics (Appendix 1: Table 9) suggest that the gender-based performance gap was smaller for track B compared to the other tracks (track B: M = 0.04 (men) vs M = 0.17 (women); track C1: M = − 0.29 vs M = − 0.06, track C2: M = − 0.11 vs M = 0.25). The overall result that first-generation Western immigrants had lower scores than applicants without a migration background was found for track B (M = − 0.75 vs M = 0.22) and track C2 (M = − 0.42 vs M = 0.09), but not for track C1 (M = − 0.03 vs M = − 0.14). Compared to those without a migration background, applicants with a second-generation non-Western background had lower CV scores in track B (M = − 0.28 vs M = 0.22), similar CV scores in track C1 (M = − 0.17 vs M = − 0.14) and higher CV-scores in track C2 (M = 0.45 vs M = 0.09). For track B, larger differences were observed between different forms of prior education, but this is probably related to the fact that for program C, the tracks were distinguished based on prior education, resulting in a large concentration of standard pre-university education in track C1 and a large concentration of other forms of prior education in track C2.

토론
Discussion

학부 HPE 프로그램에서 독특한 선발 절차가 학생 다양성에 미치는 영향을 밝히기 위해서는 성별, 이주 배경(민족성 지표), 부모 교육(SES 지표), 선행 교육에 따른 하위 그룹이 다양한 맥락에서 적용된 선발 도구에서 어떻게 수행되는지에 대한 통찰이 필요합니다. 연구 결과, 전통적이지 않은 배경을 가진 지원자의 선발 확률은 일반적으로 더 낮았지만, 서구 이민 1세대 지원자와 외국 교육을 받은 지원자의 경우에만 유의미한 차이를 보였습니다. 이러한 결과는 프로그램별로 차이가 없었습니다. 그러나 자세히 살펴보면 하위 그룹별 성과에 더 큰 차이가 있고 효과의 가변성이 더 큰 것으로 나타났습니다. 연구 결과, 커리큘럼-샘플링 테스트와 이력서 등 확장된 기준은 SES 관련 성과 차이를 줄일 수 있지만 지원자 인종에 따른 격차는 줄일 수 없다는 결론을 내렸습니다. 또한 하위 그룹별 성과 차이는 확장된 기준에서는 상황에 따라 달라졌지만, 기존 기준에서는 그렇지 않았습니다. 

Unraveling the impact of distinctive selection procedures on student diversity in undergraduate HPE programs requires an insight into how subgroups based on gender, migration background (as an indicator of ethnicity), parental education (as an indicator of SES), and prior education perform on the applied selection tools in different contexts. Our results demonstrated that selection chances of applicants with non-traditional backgrounds were generally smaller, but only significantly for applicants with first-generation Western migration backgrounds and applicants with foreign education. These findings did not differ between programs. However, when taking a closer look, we found larger differences in subgroup performance and more variability in effects. We conclude that the broadened criteria under research—curriculum-sampling tests and CVs—may reduce SES-related performance differences, but not disparities based on applicant ethnicity. Furthermore, subgroup performance differences were context-specific for broadened criteria, but not for traditional criteria.

기존 기준 대신 확장된 선발 기준을 적용하면 SES에 따른 성과 격차는 줄일 수 있지만 인종에 따른 성과 격차는 완화하지 못할 수 있다는 첫 번째 주요 결과는 Lievens 등(2016)의 이전 연구를 확인시켜줍니다.

  • 연구 대상인 전통적인 기준과 관련하여, 1세대 대학 지원자들은 전통적인 배경을 가진 지원자들에 비해 사전 GPA가 낮다는 사실을 발견했으며, 이는 이전 연구(Griffin & Hu, 2015; Juster 외, 2019; Puddey 외, 2011)에서도 확인되었습니다. 그럼에도 불구하고, 사전 GPA는 다수 민족과 소수 민족 지원자 간에 차이가 없었는데, 이는 소수 민족 그룹 간에 사전 GPA가 매우 다양하기 때문일 수 있습니다(Puddey et al., 2011). 생물의학 지식 테스트에서 SES 기반과 인종 기반에 따른 유의미한 성적 차이는 확인되지 않았습니다. 그러나 이 결과 측정 도구의 표본은 다른 도구에 비해 작고 다양하지 않았으며, 이러한 도구에 대한 국제적인 연구에서도 이러한 차이가 지속적으로 드러나고 있습니다(Girotti 외. 2020; Griffin & Hu, 2015; Juster 외., 2019; Lievens 외., 2016; Puddey 외., 2011).
  • 확장된 기준과 관련하여, 본 연구는 다중 기관 환경에서 커리큘럼 샘플링 시험이력서에 대한 하위 그룹 성과를 조사한 최초의 연구입니다. 연구 대상인 두 가지 확장된 기준 모두에서 SES에 따른 성과 차이는 발견되지 않았으며, 이는 이전 연구(Griffin & Hu, 2015; Juster 외, 2019; Lievens 외, 2016; Stegers-Jager 외, 2015)와 일치하는 결과입니다. 그럼에도 불구하고, 이전 연구에서는 두 도구 모두에서 이주 배경을 가진 지원자가 불리한 결과를 보인 반면, 본 연구에서는 이주 배경을 가진 지원자가 불리한 결과를 보인 것으로 나타났습니다(Juster et al., 2019; Lievens et al., 2016; Stegers-Jager et al., 2015). 

Our first key finding that the implementation of broadened selection criteria instead of traditional criteria potentially reduces performance disparities based on SES, but may not mitigate an ethnicity-related performance gap, confirms the previous work of Lievens et al. (2016).

  • With respect to the traditional criteria under research, we found that first-generation university applicants had lower pre-GPAs than applicants from traditional backgrounds, also confirming previous research (Griffin & Hu, 2015; Juster et al., 2019; Puddey et al., 2011). Nevertheless, pre-GPAs did not differ between ethnic majority and ethnic minority applicants, which may be explained by a great variety in pre-GPAs between different ethnic minority groups (Puddey et al., 2011). We did not identify significant SES-based and ethnicity-based performance differences on biomedical knowledge tests. However, the sample for this outcome measure was smaller and less diverse compared to the other tools, and international research on such tools persistently reveals such disparities (Girotti et al. 2020; Griffin & Hu, 2015; Juster et al., 2019; Lievens et al., 2016; Puddey et al., 2011).
  • With respect to broadened criteria, our study is the first to investigate subgroup performance on curriculum-sampling tests and CVs in a multi-institutional setting. On both broadened criteria under research, we did not find performance differences based on SES, which resonates with previous research (Griffin & Hu, 2015; Juster et al., 2019; Lievens et al., 2016; Stegers-Jager et al., 2015). Nevertheless, we found that applicants with a migration background were disadvantaged on both tools, whereas previous studies reported mixed findings (Juster et al., 2019; Lievens et al., 2016; Stegers-Jager et al., 2015).

SES에 관한 연구 결과에 대한 한 가지 가능한 설명은 확장된 기준은 표준화되지 않고 프로그램별 특성으로 인해 일반적으로 높은 SES 지원자에게 더 많이 제공되는 코칭을 덜 취약하다는 것입니다(Stemig 외., 2015). 반면에 전통적인 기준은 예를 들어 지원자가 사전 내신 성적을 높이기 위해 개인 과외를 받을 수 있기 때문에 잠재적으로 코칭에 더 취약할 수 있습니다. 동시에 확장된 기준의 표준화가 이루어지지 않으면 문화적 편견의 위험이 증가할 수 있습니다. 예를 들어, 문화적 편견은 소수 민족 그룹의 구성원이 특정 질문을 다르게 해석할 때 발생할 수 있으며, 이는 이주 배경을 가진 지원자의 낮은 점수를 설명할 수 있습니다(Kim & Zebelina, 2015). 모든 이민 1세대에서 일관되게 효과가 관찰되지 않았기 때문에 언어 편향이 이민 배경에 따른 퍼포먼스 격차에 중요한 역할을 하지는 않았을 것입니다. 또한 이전 연구 결과에 따르면 네덜란드어권 국가 출신 이민자에게도 격차가 존재하는 것으로 나타났습니다(Stegers-Jager 외., 2015).  

A possible explanation for our findings regarding SES is that broadened criteria are less prone to coaching—which is generally more available to high SES applicants (Stemig et al., 2015)—due to their unstandardized and program-specific nature. Traditional criteria, on the other hand, are potentially more susceptible to coaching, as applicants can, for instance, purchase private tutoring to increase their pre-GPA. Simultaneously, the lack of standardization of broadened criteria could increase the risk of cultural bias. Cultural bias can, for instance, occur when certain questions are interpreted differently by members from ethnic minority groups, and may explain the lower scores of applicants with migration backgrounds (Kim & Zebelina, 2015). Language bias probably did not play a significant role in performance disparities based on migration background, because effects were not consistently observed amongst all first-generation immigrants. Additionally, results from previous research suggest that disparities also exist for immigrants from Dutch-speaking countries (Stegers-Jager et al., 2015).

두 번째 주요 결과는 확장된 선발 기준의 경우 하위 그룹의 성과 차이가 상황에 따라 달라지는 반면, 기존의 선발 기준은 프로그램 전반에 걸쳐 일관된 효과를 보였다는 것입니다. 이는 두 가지 유형의 기준에 대한 하위집단 성과 차이에 대한 현재 증거에 따른 것으로, 확장된 기준의 사용에 관한 선행 연구 결과는 엇갈리는 반면(Juster 외., 2019; Lievens 외., 2016; Stegers-Jager, 2018; Stegers-Jager et al, 2015), 전통적인 기준의 결과는 소수 민족과 저소득층 지원자에게 불이익을 준다는 점에서 다소 일관성이 있습니다(Griffin & Hu, 2015; Juster 외., 2019; Lievens 외., 2016; Puddey 외., 2011; Stegers-Jager 외., 2015). 또한, 서구 이민 1세대 배경을 가진 남성과 지원자의 이력서 점수가 낮다는 전반적인 결과는 이전의 네덜란드 단일 기관 연구와 일치하지 않았습니다(Stegers-Jager 외., 2015). 이 연구는 겉보기에 비슷해 보이는 도구가 서로 다른 프로그램에서 하위 그룹 성과에 차별적인 영향을 미칠 수 있음을 직접적으로 입증한 최초의 연구입니다. 일반적으로 기준이 넓어지면 더 많은 변수를 허용하고 특정 프로그램 내용에 맞게 조정할 수 있으며, 이는 이러한 도구의 하위 그룹 성과에 대한 상황 의존적 효과가 더 강해지는 원인이 될 수 있습니다. 예를 들어, 커리큘럼 샘플링 테스트는 과목, 준비 자료, 준비 시간이 다양합니다. 또한 이전 연구에 따르면 언어의 복잡성(Lievens 외., 2016)과 문제 형식(Edwards & Arthur, 2007)이 시험 성과의 하위집단 차이에 영향을 미칠 수 있다고 합니다. 마찬가지로, 의료 경험은 다양한 배경을 가진 지원자들이 불평등하게 접근할 수 있는 것으로 간주되기 때문에 채점 방법 이력서 점수에서 고려되는 과외 활동 유형이 중요한 역할을 할 수 있습니다(Wouters, Croiset, Isik 외., 2017).

A second key finding is that for the broadened selection criteria, subgroup performance differences were context-specific, whereas the traditional selection criteria had consistent effects across programs. This is in accordance with the current evidence for subgroup differences in performance on the two types of criteria: results from prior research regarding the use of broadened criteria are mixed (Juster et al., 2019; Lievens et al., 2016; Stegers-Jager, 2018; Stegers-Jager et al., 2015), while the outcomes from traditional criteria are rather consistent in disadvantaging ethnic minority and lower SES applicants (Griffin & Hu, 2015; Juster et al., 2019; Lievens et al., 2016; Puddey et al., 2011; Stegers-Jager et al., 2015). Additionally, the overall finding that men and applicants with a first-generation Western migration background had lower CV scores was not in line with a previous Dutch single-institution study (Stegers-Jager et al., 2015). Our study is the first to directly demonstrate that seemingly comparable tools can have differential effects on subgroup performance across different programs. Typically, broadened criteria allow for more variation and can be further adjusted to the specific program contents, which may be the cause of stronger context-dependent effects on subgroup performance for these tools. For instance, curriculum-sampling tests vary in their subject, preparatory materials, and preparation time. Additionally, previous research suggests that the complexity of the language (Lievens et al., 2016), and question format (Edwards & Arthur, 2007), may contribute to subgroup differences in test performance. Likewise, the scoring method and the type of extracurricular activities that are considered in CV scores may play a role, since healthcare experiences are considered to be unequally accessible to applicants from different backgrounds (Wouters, Croiset, Isik, et al., 2017).

세 번째 주요 결과는 개별 도구에 대한 하위 그룹의 성과 차이가 항상 해당 하위 그룹의 선발 확률에 영향을 미치지는 않는다는 것입니다. 우리는 서구 이민 1세대 배경을 가진 지원자와 외국 교육을 받은 지원자, 즉 이전 연구에서 주목하지 않았던 두 하위 그룹에 대해서만 선발 가능성이 유의미하게 작다는 것을 발견했습니다. 절차 내 및 절차 간 하위집단의 성과에 차이가 있는 도구를 결합하면 전체 효과의 균형이 깨질 수 있으며, 서로 다른 도구의 가중치가 영향을 미쳤을 수 있습니다(Lievens et al., 2016; Stegers-Jager, 2018). 이러한 연구 결과는 네덜란드의 모든 학부 HPE 프로그램 지원자를 대상으로 한 최근의 후향적 연구 결과에 의해 완전히 뒷받침되지는 않습니다(Mulder et al., 2022). 저자들은 통계적 효과 크기 측면에서 무시할 수 있는 수준이었지만 소수 민족, 남성, 사회경제적 지위가 낮은 그룹에서 선발 확률이 유의미하게 낮다는 사실을 발견했습니다(Chen et al., 2010). 본 연구는 일부 프로그램의 전향적 데이터를 사용했으며, 고령 지원자 및 외국 교육을 받은 지원자 등 보다 이질적인 지원자 그룹을 포함했기 때문에 결과 간의 차이는 대상 그룹 간의 차이로 설명할 수 있습니다.
A third key finding is that subgroup differences in performance on individual tools did not always have consequences for the probability of selection of those subgroups. We found that selection chances were only significantly smaller for applicants with a first-generation Western migration background and applicants with foreign education, two subgroups that were left unnoticed by previous research. Combining tools with differential subgroup performance within procedures and across procedures may have counter-balanced the overall effect, and the weightings of different tools may have played a role (Lievens et al., 2016; Stegers-Jager, 2018). Our findings are not fully supported by the results from a recent retrospective study that included applicants to all Dutch undergraduate HPE programs (Mulder et al., 2022). The authors found significantly lower selection probability for additional ethnic minority groups, men and lower SES groups, although the results were negligible in terms of statistical effect size (Chen et al., 2010). The discrepancy between findings may be explained by differences between target groups: the present study used prospective data of a subset of programs and included a more heterogenous group of applicants, including older applicants and those with foreign education.

본 연구의 강점은 여러 프로그램에서 데이터를 수집하고 다단계 분석 접근법을 사용하여 맥락적 차이를 보정하고 조사할 수 있는 기회를 제공했다는 점입니다. 학교가 자체적으로 선발 절차를 설계할 수 있는 네덜란드의 전형적인 입시 시스템 덕분에 다양한 (활용) 도구를 비교할 수 있었습니다. 결과적으로 모든 프로그램에서 모든 도구를 사용하는 것은 아닙니다. 따라서 서로 다른 결과 측정을 직접 비교하거나 서로 다른 도구 간의 성과 상관관계를 조사할 수 없었습니다. 또 다른 한계는 본 연구가 우리가 알기로는 다양한 유형의 학부 HPE 프로그램의 선발 절차를 포함한 최초의 연구이지만, 모든 전공과 기관을 포괄할 수 없었다는 점입니다. 이는 연구 결과의 일반화 가능성에 영향을 미칠 수 있습니다. 또한, 1세대 대학 지원자들이 고등교육으로 전환하는 과정에서 장벽에 직면하는 것으로 나타났기 때문에 부모의 학력을 SES 관련 지표로 포함했지만, 부모의 소득 및 직업과 같이 잠재적으로 관련된 다른 SES 관련 효과를 간과했을 수 있습니다(Girotti 외, 2020; Mulder 외, 2022; Steven 외, 2016). 마찬가지로, 이주 배경은 민족성을 나타내는 안정적이고 객관적인 지표이지만 민족 정체성을 설명하지는 못합니다(Ross et al., 2020; Stronks et al., 2009). 또 다른 한계는 특정 하위 그룹의 경우 표본 크기가 작기 때문에 이러한 결과를 신중하게 해석해야 한다는 것입니다. 마지막으로, 두 가지 선정 절차가 코로나19 조치에 의해 부분적으로 영향을 받아 연구 결과의 일반화 가능성을 떨어뜨릴 수 있습니다. 그럼에도 불구하고 선택 확률의 효과는 해당 분석의 4개 프로그램 간에 큰 차이가 없었으며, 이 중 2개 프로그램이 코로나19의 영향을 받았습니다.
Strengths of our study include that we collected data from multiple programs and that we used a multilevel analytical approach, creating the opportunity to correct for and examine contextual differences. The typical Dutch admissions system, which allows schools to design their own selection procedure, allowed us to compare a variety of (applications of) tools. As a consequence, not all tools were used by all programs. Therefore, direct comparison across different outcome measures and examination of the correlation of performance between different tools were not possible. Another limitation is that although the present study is, to our knowledge, the first to include the selection procedures of a range of different types of undergraduate HPE programs, it was not possible to cover all specialties and institutions. This may have consequences for the generalizability of our findings. Furthermore, we included parental education as a relevant indicator for SES, since first-generation university applicants have been shown to face barriers during the transition into higher education (Stephens et al., 2014), but we may have overlooked other potentially relevant SES-related effects, such as parental income and profession (Girotti et al. 2020; Mulder et al., 2022; Steven et al., 2016). Likewise, migration background is a stable and objective indicator of ethnicity, but does not account for ethnic identity (Ross et al., 2020; Stronks et al., 2009). Another limitation is that for certain subgroups, sample sizes were small, thus those results should be interpreted with caution. Finally, two selection procedures were partly affected by COVID-19 measures, potentially reducing the generalizability of our findings. Nevertheless, the effects of the probability of selection did not differ significantly between the four programs in that analysis, of which two were affected by COVID.

도구 간, 도구 내 하위집단의 차이가 다양하다는 것은 향후 연구에서 도구의 특정 특성이 다양성에 미치는 영향을 조절하는 역할을 할 수 있는지 여부를 결정해야 함을 의미합니다. 이를 통해 모범 사례를 파악할 수 있습니다. 또한, 이번 연구 결과만으로는 도구의 다양한 가중치가 미치는 영향에 대한 결론을 도출할 수 없습니다. 따라서 우리는 도구의 다양한 가중치가 학생의 다양성에 미치는 영향을 조사하자는 이전 제안을 지지합니다(Stegers-Jager, 2018). 향후 연구에서는 선발 도구가 하위 그룹별로 학업 성취도를 다르게 예측하는지 여부를 조사하여 우리가 발견한 성취도 격차가 편향성(특정 하위 그룹에 대한 과소 예측 또는 과대 예측)과 일치하는지 여부를 확인해야 합니다. 마지막으로, 향후 연구에서는 HPE 선발의 맥락에서 비전통적 배경을 가진 지원자 하위 그룹의 구체적인 기본 특성과 요구 사항을 파악하여 선발 과정과 선발 후에도 더 나은 지원을 제공할 수 있도록 해야 합니다(Lievens, 2015; Wouters, 2020). 예를 들어, 다른 형태의 사전 교육을 받은 지원자는 이전 교육 경험과 크게 다를 수 있는 HPE 선발에서 기대하는 바를 관리하는 데 어려움을 겪을 수 있습니다(Katartzi & Hayward, 2020; Rienties & Tempelaar, 2013). 
The variety in subgroup differences between and within tools implies that future research should determine whether specific characteristics of tools can play a moderating role in their effects on diversity. This could lead to the identification of best practices. Furthermore, based on our results we cannot draw conclusions with respect to the effect of different weightings of tools. Therefore, we endorse a previous suggestion to investigate the effects of different weightings of tools on student diversity (Stegers-Jager, 2018). Future studies should also examine whether selection tools differentially predict academic performance for different subgroups, to determine whether the performance disparities we found correspond with bias (i.e., underprediction or overprediction for certain subgroups). Finally, future research should identify the specific underlying characteristics and needs of subgroups of applicants with non-traditional backgrounds within the context of HPE selection, to provide better support during and, as suggested by others (Lievens, 2015; Wouters, 2020), also after selection. For instance, applicants from alternative forms of prior education may face difficulties managing the expectations in HPE selection that can strongly differ from their previous educational experiences (Katartzi & Hayward, 2020; Rienties & Tempelaar, 2013).

실용적인 관점에서 볼 때, 하위 그룹 간 성과 차이의 맥락별 특이성은 HPE 프로그램이 다른 맥락의 기존 연구에만 의존하지 않고 선발 절차가 학생 다양성에 미칠 수 있는 영향에 대한 지속적인 평가를 수립해야 한다는 것을 나타냅니다. 또한, 당사는 프로그램이 상황에 따라 효과가 달라질 수 있다는 점을 염두에 두고 SJT(Juster et al., 2019) 및 다중 미니 인터뷰(Griffin & Hu, 2015)와 같이 부정적인 영향을 줄이고 필요한 다양성을 명시적으로 증진할 수 있는 대체 도구를 양심적으로 포함하거나 개발할 것을 권장합니다. 학교별 선발 절차가 교육과정과 일치하는 선발 절차는 높은 예측 가치를 가질 수 있기 때문에 학교별 선발 절차를 적용하고자 하는 욕구를 인정합니다(Schreurs et al., 2020). 동시에, 이는 프로그램이 부정적인 영향을 포함하여 선발 절차의 타당성에 대한 다양한 측면을 평가할 책임이 있음을 의미합니다(Schreurs, 2020). 또한 프로그램은 다양한 규범화 그룹을 통해 도구를 검증하는 것도 고려할 수 있습니다(Padilla & Borsato, 2008). 
From a practical viewpoint, the context-specificity of subgroup differences in performance indicates that HPE programs need to establish continuous evaluation of the possible effects of their selection procedures on student diversity, rather than only relying on existing research in other contexts. Additionally, we encourage programs to conscientiously include and/or develop alternative tools that can reduce adverse impact and explicitly promote well-needed diversity, such as SJTs (Juster et al., 2019) and multiple mini-interviews (Griffin & Hu, 2015), while keeping in mind that effects can be context-specific. We acknowledge the desire to apply school-specific selection procedures, as selection procedures that align their contents with the curriculum can have high predictive value (Schreurs et al., 2020). Simultaneously, this creates a responsibility for programs to evaluate different aspects of the validity of their selection procedure, including adverse impact (Schreurs, 2020). Additionally, programs could consider validating their tools with diverse norming groups (Padilla & Borsato, 2008).

결론적으로, 학부 HPE 프로그램 선발은 의도치 않게 학생의 다양성에 영향을 미쳐 공평한 입학을 저해할 수 있습니다. 기존 기준에 비해 확장된 기준은 SES 관련 성과 차이를 줄일 수 있지만 인종에 따른 격차는 줄일 수 없습니다. 확장된 기준의 경우, 하위 그룹의 성과 차이도 상황에 따라 달라집니다. 따라서 우리는 다양성에 대한 선발의 지속적인 평가 효과, 기존 도구 내에서 모범 사례의 식별, 학생 다양성에 긍정적이거나 중립적인 영향을 미치는 도구의 포함, 충분한 품질 관리가 필요하다고 촉구합니다.

In conclusion, selection into undergraduate HPE programs can unintentionally impact student diversity, hindering equitable admission. Compared to traditional criteria, broadened criteria can reduce SES-related performance differences, but not disparities based on ethnicity. For broadened criteria, subgroup differences in performance also vary across contexts. We, therefore, call for continuous evaluation effects of selection on diversity, the identification of best practices within existing tools, the inclusion of tools with a positive or neutral impact on student diversity, and sufficient quality control.

 


 

Adv Health Sci Educ Theory Pract. 2023 Oct;28(4):1027-1052. doi: 10.1007/s10459-022-10204-9. Epub 2023 Jan 18.

Selection tools and student diversity in health professions education: a multi-site study

Affiliations collapse

1Institute of Medical Education Research Rotterdam, Erasmus MC, University Medical Center Rotterdam, Room AE-207, PO Box 2040, 3000 CA, Rotterdam, The Netherlands. s.fikrat-wevers@erasmusmc.nl.

2Institute of Medical Education Research Rotterdam, Erasmus MC, University Medical Center Rotterdam, Room AE-207, PO Box 2040, 3000 CA, Rotterdam, The Netherlands.

3Department of Biostatistics, Erasmus MC University Medical Center Rotterdam, Rotterdam, The Netherlands.

4Department of Epidemiology, Erasmus MC University Medical Center Rotterdam, Rotterdam, The Netherlands.

5Department of Pharmaceutical Sciences, Utrecht University, Utrecht, The Netherlands.

6Technical Medical Centre, Technical Medicine, University of Twente, Enschede, The Netherlands.

7Department of Medical Biology, Amsterdam UMC, University of Amsterdam, Amsterdam, The Netherlands.

8Faculty of Medicine VU, Amsterdam UMC Location Vrije Universiteit Amsterdam, Boelelaan 1117, Amsterdam, The Netherlands.

9LEARN! Research Institute for Learning and Education, Faculty of Psychology and Education, VU University Amsterdam, Amsterdam, The Netherlands.

PMID: 36653557

PMCID: PMC9848043

DOI: 10.1007/s10459-022-10204-9

Free PMC article

Abstract

Student diversity in health professions education (HPE) can be affected by selection procedures. Little is known about how different selection tools impact student diversity across programs using different combinations of traditional and broadened selection criteria. The present multi-site study examined the chances in selection of subgroups of applicants to HPE undergraduate programs with distinctive selection procedures, and their performance on corresponding selection tools. Probability of selection of subgroups (based on gender, migration background, prior education, parental education) of applicants (N = 1935) to five selection procedures of corresponding Dutch HPE undergraduate programs was estimated using multilevel logistic regression. Multilevel linear regression was used to analyze performance on four tools: prior-education grade point average (pe-GPA), biomedical knowledge test, curriculum-sampling test, and curriculum vitae (CV). First-generation Western immigrants and applicants with a foreign education background were significantly less likely to be selected than applicants without a migration background and with pre-university education. These effects did not vary across programs. More variability in effects was found between different selection tools. Compared to women, men performed significantly poorer on CVs, while they had higher scores on biomedical knowledge tests. Applicants with a non-Western migration background scored lower on curriculum-sampling tests. First-generation Western immigrants had lower CV-scores. First-generation university applicants had significantly lower pe-GPAs. There was a variety in effects for applicants with different alternative forms of prior education. For curriculum-sampling tests and CVs, effects varied across programs. Our findings highlight the need for continuous evaluation, identifying best practices within existing tools, and applying alternative tools.

Keywords: Admission; Adverse impact; Selection; Student diversity; Undergraduate education.

네덜란드 보건의료전문직 교육 선발은 기회의 불평등을 유발하고 학생 다양성을 감소시키지만, 추첨은 해답이 아니다: 후향적 멀티코호트 연구 (Med Teach, 2022)
Selection for health professions education leads to increased inequality of opportunity and decreased student diversity in The Netherlands, but lottery is no solution: A retrospective multi-cohort study 
Lianne Muldera,b , Anouk Woutersa,b , Jos W. R. Twiskc , Andries S. Kosterd , Eddymurphy U. Akwiwuc , Jan H. Ravesloote, Gerda Croisetf and Rashmi A. Kusurkara,b 

 

소개
Introduction

보건 전문직 교육(HPE) 학생과 의료 전문가 사이의 다양성은 보건 교육 및 진료의 우수성을 증진하는 데 있어 근본적으로 중요합니다(Marrast 외. 2014; Saha 2014). 다양성은 HPE 학생들이 다양한 사회에서 의료 서비스 제공자로서의 역할을 수행할 수 있도록 준비시킵니다(Steven 외. 2016; Clayborne 외. 2021). 이는 모든 학생의 교육 경험을 개선하고(Grafton-Clarke 2016; Alexander 외 2017; Clayborne 외 2021), 인지 및 정서 발달에 기여하며(Clayborne 외 2021), 다양성 관련 문제에 대한 학생의 태도에 긍정적인 영향을 미칩니다(Steven 외 2016). 의료계의 다양한 인력환자 만족도 향상(클레이본 외 2021), 의료진과 환자 간의 의사소통 및 이해 증진(Grafton-Clarke 2016; Parker 외 2017; 클레이본 외 2021), 문화적으로 민감한 치료 개선(Parker 외 2017; 클레이본 외 2021)과 관련이 있습니다. 또한 소수 집단에 주로 영향을 미치는 질병에 대한 연구 의제 강화(Cohen 외 2002), 소외된 지역사회에 대한 의료 접근성 개선(Marrast 외 2014; Clayborne 외 2021), 건강 형평성 증진(Marrast 외 2014; Parker 외 2017)과도 연관되어 있습니다. 따라서 HPE 학생들 사이의 다양성은 사회에 매우 중요합니다. 그러나 보건 전문가가 되기 위해 훈련받은 코호트는 종종 그들이 봉사하는 인구를 대표하지 못합니다(Bowes 외. 2013; Alexander and Cleland 2018; Van den Broek 외. 2018). 많은 국가에서 이들은 주류 민족에 속하는 경우가 많으며, 의료 분야에서 일할 가능성이 높은 고학력, 고소득 부모를 둔 경우가 많습니다(Puddey 외. 2011; Ferguson 외. 2012). 일반 대학생 인구와 비교할 때, 의대생 인구는 사회경제적 지위(SES)가 높은 배경을 가진 사람들도 불균형적으로 많습니다(Van den Broek 외. 2018). 
Diversity amongst health professions education (HPE) students and healthcare professionals is of fundamental importance for promoting excellence in health education and care (Marrast et al. 2014; Saha 2014). Diversity prepares HPE students for their role as care providers in a diverse society (Steven et al. 2016; Clayborne et al. 2021). It results in an improved educational experience for all students (Grafton-Clarke 2016; Alexander et al. 2017; Clayborne et al. 2021), contributes to their cognitive and affective development (Clayborne et al. 2021), and has positive effects on students’ attitudes regarding diversity-related issues (Steven et al. 2016). A diverse workforce in the health professions is linked to improved patient satisfaction (Clayborne et al. 2021), better communication and understanding between care provider and patient (Grafton-Clarke 2016; Parker et al. 2017; Clayborne et al. 2021) and improved culturally-sensitive care (Parker et al. 2017; Clayborne et al. 2021). It is also associated with a strengthened research agenda into diseases which primarily affect minority groups (Cohen et al. 2002), improved access to healthcare for underserved communities (Marrast et al. 2014; Clayborne et al. 2021), and the promotion of health equity (Marrast et al. 2014; Parker et al. 2017). Diversity amongst HPE students is therefore of great importance for society. However, the cohorts trained to become health professionals are often not representative of the populations they serve (Bowes et al. 2013; Alexander and Cleland 2018; Van den Broek et al. 2018). In many countries, they often belong to the ethnic majority, and often have highly educated and high-income parents who are more likely to work in the medical field (Puddey et al. 2011; Ferguson et al. 2012). When compared to the general university student population, the medical student population is also disproportionally from higher socio-economic status (SES) backgrounds (Van den Broek et al. 2018).


자체 선발 및 입학 절차의 편견으로 인해 모든 자격을 갖춘 학생에게 HPE 프로그램에 등록할 기회가 균등하게 제공되지 않는다는 증거가 있습니다(Sianou-Kyrgiou 및 Tsiplakides 2011, Kelly 외. 2014, Simmenroth-Nayda 및 Görlich 2015, Wouters 외. 2018). 자기 선택은 학생이 실제 및 인지된 장벽과 촉진 요인에 비추어 자신의 성공 가능성을 어떻게 추정하는지에 따라 지원 여부를 결정하는 것을 말합니다. SES 배경이 낮은 학생들지원 시 수많은 장벽에 직면할 수 있습니다. 

  • 선발될 가능성이 낮을 것이라는 인식(Greenhalgh 외. 2004; Southgate 외. 2015; Ball 외. 2020; Wouters 2020),
  • 배경 때문에 적응하지 못할 것이라는 두려움(Greenhalgh 외. 2004; Mathers and Parry 2009; Martin 외. 2018),
  • 재정적 장벽(Cleland 외. 2015),
  • 고등학교 교사들의 적극적인 만류(McHarg 외. 2007) 

Evidence suggests that opportunities to enrol in HPE programs are not equally available to all eligible students, due to self-selection and/or bias in the admissions procedures (Sianou-Kyrgiou and Tsiplakides 2011; Kelly et al. 2014; Simmenroth-Nayda and Görlich 2015; Wouters et al. 2018). Self-selection refers to students making a decision to apply or not based on how they estimate their chance of success in light of actual and perceived barriers and facilitators. Those from a lower SES background may face numerous barriers to apply (Steven et al. 2016; Niven et al. 2019), such as

  • the perception that they will have lower chances of being selected (Greenhalgh et al. 2004; Southgate et al. 2015; Ball et al. 2020; Wouters 2020),
  • fear of not fitting in because of their background (Greenhalgh et al. 2004; Mathers and Parry 2009; Martin et al. 2018),
  • financial barriers (Cleland et al. 2015), or
  • active discouragement by high school teachers (McHarg et al. 2007).

의료 분야 네트워크가 부족한 학생들은 HPE 프로그램이 올바른 학업 선택이라는 확신을 갖거나 관련 업무 경험을 쌓거나 의대 지원 절차를 준비하는 데 어려움을 겪을 수 있습니다(Southgate 외 2015; Hadinger 2017; Bassett 외 2019; Ball 외 2020). 또한 불평등으로 인해 의욕이 저하될 수 있습니다(Wouters 외. 2017). 소수 민족 학생들은 불충분한 제도적 지원과 자원, 제한된 개인적 자원, 적절한 정보, 멘토링, 조언에 대한 접근성 부족, 다양한 사회적 장벽에 직면할 수 있습니다(Freeman 외. 2016). 또한 선발 절차가 특정 지원자 그룹에 의도치 않게 편향될 수도 있습니다(Kelly 외. 2014; Steven 외. 2016; Niven 외. 2019). 예를 들어, 남성은 특정 선발 도구에서 실적이 저조한 경향이 있습니다(Schripsema 외. 2017). 따라서 전 세계 대학들은 이러한 불평등을 해소하고 사회적 책무성을 증진하기 위해 다양한 조치를 취하고 있습니다. 예를 들어, 참여 확대 프로그램 및 접근성 확대 정책(Powis 외 2007; Cleland 외 2015; Alexander 외 2017; Martin 외 2018), 쿼터제(Becak and Cirino 2018; Curtis 2018), 소외계층 학생에게 불이익을 주지 않는 것으로 알려진 선발 도구 사용(Jerant 외 2015; Razack 외 2015; Taylor 외 2015) 등이 그 예입니다.  
Students who lack a network in the medical field may face barriers in developing the confidence that the HPE programme is the right study choice, in getting relevant work experience, or preparing for the medical school application process (Southgate et al. 2015; Hadinger 2017; Bassett et al. 2019; Ball et al. 2020). They can also become demotivated by the inequality they perceive (Wouters et al. 2017). Ethnic minority students may face inadequate institutional support and resources, limited personal resources, lack of access to adequate information, mentoring, and advising, and different societal barriers (Freeman et al. 2016). Selection procedures may also be biased unintentionally against certain groups of applicants (Kelly et al. 2014; Steven et al. 2016; Niven et al. 2019). For example, men tend to underperform on certain selection instruments (Schripsema et al. 2017). Universities across the world therefore take different measures to attempt to address these inequities and promote social accountability, for example by using Widening Participation programs and/or Widening Access policies (Powis et al. 2007; Cleland et al. 2015; Alexander et al. 2017; Martin et al. 2018), quota systems (Becak and Cirino 2018; Curtis 2018), and using selection tools which are known to not disadvantage underrepresented students (Jerant et al. 2015; Razack et al. 2015; Taylor et al. 2015).

추첨 시스템이 입학 절차에서 발생할 수 있는 기회의 불평등을 줄이는 수단이 될 수 있는지에 대한 학계의 논쟁이 있습니다(Hubbeling 2018, Mazer 2021, ten Cate 2021). 이론적으로 무작위 추첨에서는 지원자의 배경 특성이 입학 결과에 영향을 미치지 않습니다. 그러나 대부분의 국가에서 두 가지 입학 절차를 비교할 가능성이 없기 때문에 어떤 입학 절차가 사회에 가장 공평한 결과(즉, 일반 인구의 다양성을 반영하는 HPE 전문 인력)를 가져올지에 대한 확실한 대규모 정량적 증거는 제한적입니다.
There is academic debate about whether a lottery system could also be an instrument to reduce the possible inequality of opportunity in admission procedures (Hubbeling 2018; Mazer 2021; ten Cate 2021). Theoretically, in a random lottery, the background characteristics of applicants would have no influence on the outcome of admissions. However, solid large-scale quantitative evidence about which admission procedure would produce the most equitable outcome for society (i.e. an HPE professional workforce which reflects the diversity in the general population) is limited, because in most countries, there is no possibility to compare the two procedures.

네덜란드의 사례는 이 문제를 조사하고 두 가지 다른 입시 제도 하에서 HPE 학생의 다양성 수준과 입시 기회 불평등 가능성을 비교할 수 있는 특별한 기회를 제공합니다. 네덜란드는 이전 학업 성적에 가중치를 두는 추첨 입학 제도를 운영해왔지만(Cohen-Schotanus 외, 2006), 공정성이 부족하고 입학 대상자에 대한 통제력이 부족하다는 인식(Wouters 외, 2018)으로 인해 정부는 2000년부터 점진적으로 선발 방식을 전환하기로 결정했습니다. 2017년부터는 100%의 학생이 선발을 통해 입학하고 있습니다(그림 1). 선발 절차는 대학이 자체적으로 설계하며, 이전 학업 성취도, 적성, 과외 활동 등 최소 두 가지 기준을 활용합니다(Stegers-Jager 2018). 
The case of The Netherlands offers a unique opportunity to investigate this matter and compare the level of HPE student diversity and possible unequal opportunities in admissions under two different admissions systems. The country used to have a lottery admission system weighted for previous academic performance (Cohen-Schotanus et al. 2006), but due to a perceived lack of fairness and lack of control of who gains admission (Wouters et al. 2018), the government decided on a gradual transition in the direction of selection from 2000 onwards. Since 2017, 100% of HPE students are admitted through selection (Figure 1). Selection procedures are designed by universities themselves, and make use of at least two criteria, such as previous academic achievement, aptitude, or extracurricular activities (Stegers-Jager 2018).

네덜란드에서 HPE 학생이 되기 위한 일반적인 교육 경로는 여러 단계로 구성됩니다. 초등학교에서 고등학교로 진학하는 학생들은 11~12세 무렵에 직업(4년), 고등 일반(5년) 또는 예비 대학(6년) 트랙에 배치됩니다예비대학생이 과학 중심 트랙(자연과 건강 및/또는 자연과 기술)에서 4가지 과학 중심 과목(생물, 물리, 화학, 수학)을 이수하면 마지막 해에 HPE 프로그램에 지원할 자격이 주어집니다. 다른 교육 배경을 가진 지원자는 동등한 교육 수준을 충족한다는 것을 증명해야 합니다(Wouters 외, 2018). 일단 지원한 학생은 HPE 프로그램에서 한정된 자리를 놓고 경쟁해야 합니다. HPE 프로그램에 입학하는 각 단계에서 다양성이 상실될 수 있으며, 이는 HPE의 과소 대표성을 초래할 수 있습니다. 그러나 이것이 어느 정도인지, 그리고 이 경로의 각 단계에서 다양성의 어떤 측면이 영향을 받는지는 알려지지 않았습니다. 따라서 이 연구에서는 다음과 같은 질문에 답하고자 했습니다: 

  • 1) 어떤 인구통계학적 배경 변수가 지원자의 HPE 입사 가능성과 관련이 있는가?
  • 2) 입학 절차가 추첨과 선발의 혼합 방식에서 100% 선발로 점진적으로 전환되는 동안 HPE 학생 집단의 대표성이 a) 같은 또래, b) 적격 학생 풀, c) 지원자 풀과 비교하여 변화했는가?

In The Netherlands, the typical educational route to become an HPE student consists of several steps. In the transition from elementary to high school, pupils are placed in either the vocational (4 years), higher general (5 years), or pre-university (6 years) track around ages 11–12. If pre-university pupils follow the science-focused track (Nature and Health and/or Nature and Technology) with four science-focused subjects (Biology, Physics, Chemistry, and Mathematics) they are eligible to apply to HPE programs in their final year. Applicants with other educational backgrounds must prove that they meet equivalent educational levels (Wouters et al. 2018). Once students apply, they need to compete for the limited places available in the HPE programme. In each of these steps on the route to an HPE programme, diversity may be lost, which could result in underrepresentation in HPE. However, it is unknown to what extent this is the case, and which aspects of diversity are affected at different stages on this route. Therefore, this study aimed to answer the following questions:

  • 1) Which demographic background variables are associated with an applicant’s odds of admission into HPE?
  • 2) Has the representativeness of HPE student populations changed during the gradual transition in admissions procedures from hybrid lottery and selection to 100% selection, compared to: a) their age peers; b) the eligible student pool; and c) the applicant pool?

우리의 목표는 가중치 추첨에서 선발로 전환하는 과정에서 발생한 다양한 입학 상황, 즉 선발 기반 입학의 비율이 다른 상황에서 지원자의 입학 가능성에 영향을 미치는 배경 변수를 조사하는 것이었습니다.
Our goal was to investigate which background variables influenced applicants’ odds of admission under different admissions situations, with different proportions of selection-based admission, which occurred during the transition from weighted lottery to selection.

연구 방법
Methods

연구 설계
Study design

2008년 10월 1일, 2012년, 2015년에 네덜란드에 등록된 모든 16세 청소년(이하 '연령 코호트'라 함)을 대상으로 네덜란드 통계청의 익명화된 비공개 마이크로데이터를 사용하여 후향적 다중 코호트 연구를 수행했습니다. 이 연령 코호트 내에서 과학 중심의 예비 대학 교육 프로필을 가진 학생들을 '적격 학생 풀'로 정의했습니다. 학생들이 연구 프로그램 지원서를 제출하는 네덜란드 기관인 Studielink의 익명화된 데이터를 사용하여 의학, 약학, 임상 기술 또는 치의학에 지원한 사람들을 '지원자 풀'로 정의했습니다. 이 연구에 포함된 4개의 HPE 프로그램에 지원할 수 있는 자격은 고등학교 내신성적, 의대 입학시험 점수, 또는 이와 유사한 형태의 사전 학력에 의해 결정되지 않습니다. 그러나 지원자가 고등학교 최종 시험에서 불합격하여 그 해에 고등 교육에 등록하지 못할 수도 있습니다. 따라서 네덜란드 통계청의 마이크로데이터에 따르면 고등학교 시험에 통과하여 이론적으로 입학 자격이 있는 지원자를 대상으로 분석을 수행했습니다. 지원한 해에 고등학교 시험에 불합격한 지원자는 로지스틱 회귀 분석에서 제외했습니다. 마지막으로, 배치 자격이 있는 지원자 중 3년 후(2011년, 2015년 또는 2018년) 19세가 되었을 때 네덜란드 대학에 의학, 약학, 임상 기술 또는 치의학 학생으로 등록되어 있는 지원자를 'HPE 학생'이라고 불렀습니다. 
We did a retrospective multi-cohort study using anonymised non-public microdata from Statistics Netherlands of all 16-year-olds who were registered in The Netherlands on 1 October 2008, 2012, and 2015, hereafter referred to as ‘age cohorts’. Within these age cohorts, we defined those with a science-focused pre-university education profile as the ‘eligible student pool’. Using anonymised data from Studielink – the Dutch organization where students submit their application for a study programme – we defined those who had applied to Medicine, Pharmacy, Clinical Technology or Dentistry as the ‘applicant pool’. Eligibility to apply to the 4 HPE programs in this study is not determined by high school GPA, score in a medical admissions test, or similar form of prior attainment. However, an applicant may fail their final high school exams and thus be unable to enrol in higher education that year. We have therefore performed our analyses on the applicants who, according to Statistics Netherlands microdata, had passed their high school exams and thus, in theory, were eligible for placement. Applicants who failed their high school exam in the year in which they applied, were excluded from our logistic regression analyses. Finally, out of these applicants who were eligible for placement, those who were registered as Medicine, Pharmacy, Clinical Technology or Dentistry students at a Dutch university three years later (in 2011, 2015, or 2018), at the age of 19 were termed ‘HPE students’.

샘플
Sample

2008년, 2012년, 2015년 10월 1일에 16세였던 네덜란드에 거주하는 것으로 등록된 모든 어린이가 조사 대상에 포함되었습니다. 10월 1일은 각 교육 단계의 학생 등록이 이루어지는 기준일이기 때문에 10월 1일을 선택했습니다. 16세가 되면 대부분의 네덜란드 청소년은 아직 고등학교에 재학 중입니다. 2008년부터 2018년까지 학사 1학년 학생의 평균 연령은 18.6세였습니다(Leijen 외. 2019). 이는 HPE 학생을 포함한 네덜란드 대학생의 대다수가 17세, 18세 또는 19세에 대학에 입학한다는 것을 의미합니다. 따라서 연구 설계에서는 코호트의 대상 학생들이 아직 고등학교에 재학 중이고 3년 후인 19세에 고등학교를 졸업하고 고등교육에 입학했을 가능성이 가장 높다고 판단했습니다. 네덜란드 통계청 마이크로데이터에서 필수 변수를 사용할 수 있는지 여부와 학생들이 고등교육에 입학할 당시의 입학 상황(그림 1)을 고려하여 세 코호트의 연도를 선택했습니다. 
All children, registered as living in The Netherlands, who were 16 years old on 1 October 2008, 2012, and 2015 were included. October 1st was chosen because this is the reference date at which student enrolment at each level of education is registered. At age 16, the majority of Dutch youth is still in high school. The average age of first-year bachelor students between 2008 and 2018 was 18.6 years old (Leijen et al. 2019). This means that the majority of university students in The Netherlands, including HPE students, enter university at age 17, 18, or 19. Therefore, in our research design, we had the highest likelihood that eligible students in the cohorts were still in high school, and that three years later, at age 19, they would have left high school and entered tertiary education. We selected the years of the three cohorts based on the availability of essential variables in Statistics Netherlands microdata, and the admissions context (Figure 1) at the time students entered higher education.

변수
Variables

연구의 변수는 표 1에 설명되어 있습니다. SES를 대신하여 부모의 소득 백분위수, 자산 백분위수, 사회복지 수급자 상태를 사용했습니다. 소득 백분위수와 자산 백분위수는 전체 인구에 비해 상대적인 위치를 나타내기 때문에 유로로 환산한 값 대신 소득과 자산 백분위수를 포함했습니다. 네덜란드 통계청에서 정의한 네덜란드인 이외의 인종 그룹(이주 배경이 없는)은 이후 터키, 모로코, 수리남, 네덜란드 카리브해 이주 배경(TMSD) 또는 기타 이주 배경(OMB)을 가진 인종 그룹으로 지칭합니다. 
Variables in the study are described in Table 1. As proxy for SES, we used parental income percentiles, wealth percentiles, and social welfare recipient status. Income and wealth percentiles, rather than their values in euros, were included because percentiles indicate the relative position one occupies compared to the rest of the population. Statistics Netherlands-defined ethnic groups other than Dutch (without a migration background) are hereafter referred to as having either a Turkish, Moroccan, Surinamese, or Dutch Caribbean migration background (TMSD); or other migration background (OMB).

통계 분석
Statistical analysis

먼저 단변량 로지스틱 회귀 분석을 수행하여 표 1에 설명된 독립변수 중 어떤 것이 HPE 학생이 되는 것과 관련이 있는지 조사했습니다. 통계적 유의 수준은 .05로 설정했습니다. 독립 변수 간에 다중공선성의 증거가 있는지 데이터를 조사했습니다. 둘째, 다변량 로지스틱 회귀를 사용하고 단계적 전진 선택을 적용하여 각 코호트 연도(2008년, 2012년, 2015년)에 대한 모델을 구축했습니다. 그 결과 총 3개의 모델이 만들어졌습니다. 또한 상호작용 조건(가능한 모든 조합)을 추가하면 이러한 모델이 개선되는지도 조사했습니다. 
We first performed univariable logistic regression analyses to examine which of the independent variables described in Table 1 were associated with becoming an HPE student. Statistical level of significance was set at .05. We examined data for evidence of multicollinearity amongst the independent variables. Second, we used multivariable logistic regressions and applied stepwise forward selection to build a model for each cohort year (2008, 2012, and 2015). This resulted in three models in total. We also examined whether adding interaction terms (any possible combination) improved these models.

하이브리드 가중치 추첨 및 선발 절차에서 100% 선발 절차로 전환하는 동안 HPE 학생 집단의 대표성을 확인하기 위해 빈도표를 사용하여 모든 변수에 대한 각 코호트 및 각 기준 그룹의 학생 분포를 비교했습니다. 코호트 간 비율의 변화를 조사하기 위해 두 가지 유형의 로지스틱 회귀 분석을 사용했으며, 2008년 연령 코호트를 참조 범주로 사용했습니다. 성별과 같은 이항 변수의 경우 이항 로지스틱 회귀 분석을, 이주 배경과 같이 두 가지 이상의 범주가 있는 변수의 경우 다항 로지스틱 회귀 분석을 사용했습니다. 모든 분석은 Windows용 IBM SPSS 소프트웨어 버전 25.0(IBM Corp, 뉴욕주 애몬크)을 사용하여 수행되었습니다. 
To determine the representativeness of HPE student populations throughout the transition from a hybrid weighted lottery and selection procedure to a 100% selection procedure, we used frequency tables to compare the distribution of students in each cohort and each reference group on all variables. To investigate the changes in proportions between cohorts, we used two different types of logistic regression analyses, where age cohort 2008 was used as a reference category. For binary variables such as gender, we used binary logistic regression analysis; for variables with more than two categories, such as migration background, we used multinomial logistic regression analysis. All analyses were performed using IBM SPSS software for Windows version 25.0 (IBM Corp, Armonk, NY).

윤리적 고려 사항
Ethical considerations

암스테르담 UMC의 윤리위원회는 이 연구(파일 번호 2019.719)가 세계보건기구(WHO)의 인간 대상 의학 연구법에 따라 승인 면제 대상임을 선언했습니다. 통계 결과는 네덜란드 통계청의 비공개 익명 마이크로데이터를 사용한 LM과 JWRT(암스테르담 UMC)의 계산을 기반으로 하며, 네덜란드 통계청의 모든 개인정보 보호 규정과 비공개 마이크로데이터 사용에 관한 네덜란드 법률을 준수합니다. 지원자 풀의 Studielink에서 선별된 데이터는 네덜란드 통계청에 의해 익명화되었습니다. 연구자들은 식별 가능한 정보에 접근할 수 없었습니다. 
The Ethics Committee at Amsterdam UMC, location VUmc declared the study (File no. 2019.719) exempt from approval under the Medical Research Involving Human Subjects Act (WMO). The statistical results are based on calculations by LM and JWRT (Amsterdam UMC) using non-public anonymised microdata from Statistics Netherlands and comply to all Statistics Netherlands privacy regulations and the Dutch law regarding use of their non-public microdata. Selected data from Studielink of the applicant pool was anonymised by Statistics Netherlands. The researchers had no access to identifiable information.

결과
Results

HPE 학생이 되는 것과 관련된 인구통계학적 변수
Demographic variables associated with becoming an HPE student

단변량 로지스틱 회귀 분석 결과(보충 부록의 표 1 참조), 모든 변수가 적어도 하나의 코호트 내에서 HPE 학생이 되는 것과 연관성이 있는 것으로 나타났습니다. 다중공선성의 증거가 있는지 데이터를 조사했습니다. '이주 배경'과 '해외 출생 부모 수' 간의 피어슨 계수 상관관계가 각 연령 코호트에서 0.82를 초과하여 강한 것으로 간주될 수 있기 때문에 이전에 데이터 세트의 일부였던 한 변수(해외 출생 부모 수)를 제외했습니다(Schober et al. 2018). 따라서 '해외에서 태어난 부모 수'는 추가 분석에서 제외했으며 이 글에서는 포함하지 않았습니다. '이주 배경' 변수를 유지함으로써 100% 선발로의 전환이 이주 배경이 있는 그룹과 없는 그룹에 다른 방식으로 영향을 미치는지 조사할 수 있었습니다. 나머지 변수에서는 다중공선성에 대한 증거를 찾을 수 없었습니다. 따라서 모든 독립변수는 각 지원자 집단에 대해 독립적으로 다변량 회귀 모형에 포함되었습니다(전체 모형은 부록의 표 2, 최종 모형은 본 원고의 표 2 참조). 유의미한 상호작용은 발견되지 않았습니다.
Results from the univariable logistic regression (see Table 1 in Supplementary Appendix) showed that all variables were associated with becoming an HPE student within at least one cohort. We examined data for evidence of multicollinearity. This led us to exclude one variable (number of parents born abroad) which was previously a part of our dataset, because the Pearson coefficient correlations between ‘migration background’ and ‘number of parents born abroad’ were >0.82 in each age cohort, which can be considered strong (Schober et al. 2018). We therefore excluded ‘number of parents born abroad’ from further analyses and did not include it in this article. Keeping the variable ‘migration background’ enabled us to investigate whether the transition to 100% selection impacted groups with or without a migration background in different ways. No evidence was found for multicollinearity in the remaining variables. All independent variables were, therefore, included in multivariable regression models for each applicant cohort independently (see Table 2 in Supplementary Appendix for the full models and Table 2 in this manuscript for the final models). No significant interactions were found.

지원자 풀 모델
Applicant pool models

표 2는 2008년 코호트와 2015년 코호트 사이의 최종 모델 변화를 보여줍니다. 가중치 추첨을 통해 50~100%의 학생이 입학한 2008년 코호트에서는 여성 성별(OR 1.15 [1.01~1.30])과 최고 부유층에 속하는 것(OR 1.29 [1.10~1.51])만이 HPE 학생이 되는 것과 유의미한 양의 상관관계를 보였습니다. 2012년 코호트에서는 가계 자산이 더 이상 이 모델에 유의미한 영향을 미치지 않았습니다. 대신, 부모 소득에 대한 효과가 발견되었으며, 상위 10분위에서 긍정적인 연관성이 나타났습니다(OR 1.37 [1.18-1.60]). 여성 성별은 여전히 긍정적인 연관성을 보였으며(OR 1.49 [1.28-1.73]), 이주 배경은 TMSD 이주 배경을 가진 경우 음의 연관성을 보이며 모델을 개선했습니다(OR 0.68 [0.52-0.89]). 2015년 코호트(100% 선택) 모델에서는 부모 중 한 명 이상의 HP가 있는 경우(OR 1.27 [1.10-1.47]), 여성인 경우(OR 1.35 [1.19-1.53]), 자산 상위 10분위에 속하는 경우(OR 1.28 [1.10-1.49])가 긍정적인 연관성이 있는 것으로 나타났습니다. TMSD 이주 배경(0.72 [0.57-0.91])은 음의 연관성이 발견되었습니다. 다른 변수들은 표 2의 모델에 기여하지 않았기 때문에(p > .05) 포함되지 않았습니다(전체 모델, 즉 단계적 전진 로지스틱 회귀를 수행하기 전의 결과는 부록의 표 2 참조).
Table 2 shows that the final models change between cohort 2008 and 2015. In cohort 2008, where 50–100% of students were admitted through weighted lottery (depending on each HPE faculty), only female gender (OR 1.15 [1.01–1.30]) and belonging to the highest wealth decile (OR 1.29 [1.10–1.51]) were significantly positively associated with becoming an HPE student. In cohort 2012, household wealth no longer contributed significantly to the model. Instead, an effect for parental income was found, with a positive association for the top-10 decile (OR 1.37 [1.18–1.60]). Female gender remained positively associated (OR 1.49 [1.28–1.73]), and migration background improved the model, with a negative association for having a TMSD migration background (OR 0.68 [0.52–0.89]). The model of cohort 2015 (100% selection) showed that having at least one HP as a parent (OR 1.27 [1.10–1.47]), female gender (OR 1.35 [1.19–1.53] and belonging to the top-10 wealth decile (OR 1.28 [1.10–1.49]) were positively associated. Negative associations were found for a TMSD migration background (0.72 [0.57–0.91]). Other variables did not contribute to the models in Table 2 (p > .05) and were therefore not included (see Table 2 in Supplementary Appendix for the result of the full model, that is before performing a stepwise forward logistic regression).

이주 배경과 관련된 결과가 SES의 차이로 설명될 수 있는지 조사하기 위해 각 이주 배경 범주(네덜란드, TMSD, OMB)에 대한 소득 및 부의 빈도 분포를 분석했습니다. 소득과 재산이 세 가지 범주 간에 매우 불균등하게 분포되어 있었기 때문에, 지원자 풀에 대한 추가 분석을 수행하여 소득과 재산 그룹을 재코딩하여 균형을 극대화했습니다. 

  • 소득이 가장 낮은 그룹(백분위수 0-60)에서는 2012년과 2015년 코호트에서 TMSD 배경에 대한 음의 연관성이 유의미하게 유지되었습니다(보충 부록의 표 3 참조). 
  • 소득 백분위수 0-70 그룹에서는 2015년 코호트에서 TMSD 배경에 대한 음의 연관성이 유의미했습니다. 2012년 코호트에서는 소득 백분위수 71-100 그룹에서도 마찬가지였습니다. 

이는 동일한 소득/부유층에서 이주 배경이 없는 네덜란드 기준 범주와 비교했을 때에도 여전히 음의 연관성을 보였기 때문에 TMSD 이주 배경에 대한 음의 연관성은 SES로 설명할 수 없음을 보여주었습니다.
To investigate whether results related to migration background could be explained by differences in SES, we analysed the frequency distribution of income and wealth deciles for each migration background category (Dutch, TMSD and OMB). As income and wealth were distributed highly unequally between the three different categories, we performed additional analyses on the applicant pool, using recoded income and wealth groups to maximize balance.

  • Within the lowest wealth group (percentiles 0–60), the negative association for a TMSD background remained significant in cohort 2012 and 2015 (see Table 3 in Supplementary Appendix).
  • In income percentiles group 0–70, the negative association for a TMSD background was significant in cohort 2015. In cohort 2012, this was true for income percentile group 71–100.

This showed that the negative associations for TMSD migration background cannot be explained by SES: they remained negative even when compared to the Dutch reference category without a migration background from the same income/wealth groups.

HPE 학생의 대표성
Representativeness of HPE students

표 3은 모든 (하위) 코호트에서 변수별 학생 분포를 보여줍니다. 여성은 모든 연령 코호트 및 적격 학생 풀의 약 절반을 차지했지만, 지원자 풀과 HPE 학생 인구에서는 그 비율이 훨씬 높았습니다(표 3). 2008년과 2015년 코호트 사이에 HPE 학생 인구에서 남성의 비율은 34.1%에서 28.6%로 16.1% 감소했습니다.
Table 3 shows the distribution of students per variable in all (sub)cohorts. Women represented approximately half of all age cohorts and eligible student pools, but their proportion is significantly higher in the applicant pool and the HPE student population (Table 3). A 16.1% decrease was seen in the proportion of men in the HPE student population between cohort 2008 and 2015 (from 34.1 to 28.6%).

2008년과 2015년 코호트 사이에 HP 부모가 1~2명인 HPE 학생의 비율은 크게 감소했지만, 연령 코호트, 적격자 풀, 지원자 풀과 비교하면 이러한 부모를 둔 학생은 여전히 HPE 학생 중에서 과대 대표되고 있습니다.
The proportion of HPE students with 1 or 2 HP parents decreased significantly between cohort 2008 and 2015, but compared to the age cohort, eligible pool, and applicant pool, students with such parents are still overrepresented amongst HPE student students.

2008년 코호트와 2015년 코호트 사이에 HPE 학생의 소득 그룹별 분포는 큰 변화가 없었지만, 자산 그룹별 분포는 하위 70% 백분위수 학생의 비율은 증가하고 상위 10% 백분위수 학생의 비율은 감소한 것으로 나타났습니다. 그러나 소득 및 자산이 가장 높은 그룹의 학생들은 지원 자격 및 지원자 풀과 비교했을 때, 특히 연령 코호트와 비교했을 때 HPE 학생들 사이에서 여전히 과대 대표되었습니다. 
The distribution of HPE students over the different income groups has not undergone major changes between cohort 2008 and 2015, but their distribution over the different wealth groups shows an increase in the proportion of students from the lowest 70 percentiles, and a decrease of the proportion of students from the top 10 decile. However, students from the highest income and wealth groups remained overrepresented amongst HPE students compared to the eligible and applicant pools, but especially compared to their age cohorts.

부모 중 한 명 이상이 사회복지 혜택을 받는 학생은 적격자 풀에서는 과소 대표되지만, 각 코호트에서 지원자 풀에서 차지하는 비율이 적격자 풀에서 차지하는 비율보다 상대적으로 높은 비율로 지원했습니다. 그러나 입학률은 더 낮기 때문에 HPE 학생의 연령 코호트에 비해 과소 대표됩니다.
Those with at least one parent who receives social welfare are underrepresented in the eligible pool, but they do apply at relatively high rates: in each cohort, their proportion in the applicant pool is higher than their proportion in the eligible pool. However, they are admitted at lower rates, resulting in underrepresentation amongst HPE students compared to their age cohorts.

연령 코호트에 비해, TMSD 학생은 모든 코호트의 적격 풀, 지원자 풀, HPE 학생 집단에서 과소 대표되는 반면, OMB 학생은 지원자 및 HPE 학생 집단에서 과대 대표되는 것으로 나타났습니다.
Relative to the age cohorts, TMSD students are underrepresented in the eligible pool, applicant pool, and HPE student populations for all cohorts, while OMB students are overrepresented amongst applicants and HPE students.

토론
Discussion

후향적 다중 코호트 연구 결과에 따르면 하이브리드 추첨 및 선발에서 100% 선발로 전환하면서 다변량 로지스틱 회귀 모델에서 지원자의 입학 가능성에 유의미한 영향을 미치는 배경 변수의 수가 2개(성별 및 자산 백분위수)에서 4개(성별, 자산 백분위수, HP 부모 수 및 이주 배경)로 증가했습니다. 부록의 표 3에서 볼 수 있듯이, 주로 또는 100% 선발 기반 절차에서 TMSD 이주 배경을 가진 지원자의 낮은 확률은 SES로 설명할 수 없었으며, 동일한 소득 또는 자산 범주에 속하는 네덜란드 동료에 비해 TMSD 지원자의 확률 비율도 현저히 낮았습니다. 이는 연령 코호트, 적격자 풀, 지원자 풀과 비교하여 선발로 전환하는 동안 변화한 HPE 학생 인구의 대표성에 영향을 미쳤습니다. 연구 결과는 HPE 프로그램에 진학하는 각 단계에서 어떤 일이 일어나는지, 각 학생 집단의 대표성 수준에 어떤 영향을 미치는지 미묘한 그림을 제공합니다. 
The results of our retrospective multi-cohort study show that in the transition from hybrid lottery and selection to 100% selection, the number of background variables which significantly influenced applicants’ odds of admission increased from 2 (gender and wealth percentile) to 4 (gender, wealth percentile, number of HP parents, and migration background) in our multivariable logistic regression models. The lower odds of applicants with a TMSD migration background in a predominantly or 100% selection-based procedure, could not be explained by SES, as evidenced by Table 3 in the Supplementary Appendix: odds ratios for TMSD applicants were also significantly lower compared to their Dutch peers belonging to the same income or wealth categories. This influenced the representativeness of HPE student populations, which changed during the transition to selection in comparison to the age cohorts, eligible pool, and applicant pool. Our results provide a nuanced picture of what happens in each step on the route to an HPE programme, affecting the level of representation of different student groups.

첫째, 초등학교에서 중등학교로 진학하는 단계에서 학생들을 직업, 고등 일반 또는 예비 대학 트랙에 배치하는 것은 다양한 배경을 가진 학생들에게 다른 방식으로 영향을 미치는 과정입니다(네덜란드 교육부 감사관실 2021). 따라서 16세가 되었을 때, 높은 SES 가정에 속해 있고 TMSD 이주 배경이 없는 학생은 대학 예비 과정과 향후 적격 학생 풀에서 불균형적으로 대표됩니다(표 3). 그 결과 HPE 프로그램의 적격 학생 풀은 해당 연령대를 대표하지 못합니다. 이 단계에서 발생하는 인종적, 사회경제적 다양성의 손실 HPE 입학이 혼합 추첨과 선발로 이루어지든 100% 선발로 이루어지든 상관없이 지원 또는 입학 단계에서 발생하는 다양성의 손실보다 훨씬 더 큽니다. 이는 네덜란드 HPE 프로그램에서 하위 SES 및 TMSD 학생이 과소 대표되는 주요 원인이라는 것을 시사합니다. 이 결과는 미국 의과대학의 다양성 부족의 근원이 저소득층 소수 학생의 초등 및 중등 교육 기회에 대한 불평등한 접근에 있다고 주장한 Cohen 등(2002)의 주장과 일치합니다. 
First, in the step from primary school to secondary school, the placement of pupils into either vocational, higher general or pre-university tracks is a process which affects pupils of different backgrounds in a different way (Dutch Inspectorate of Education 2021). Hence, at age 16, students who belong to high SES families, and have no TMSD migration background, are disproportionally represented in the pre-university track and thus in the future eligible student pool (Table 3). The resulting eligible student pools for HPE programs are far from representative of their age cohorts. The loss of ethnic and socio-economic diversity which occurs in this step, is much greater than the loss on these aspects of diversity which takes place in the step towards applying or being admitted, regardless of whether HPE admissions consist of hybrid lottery and selection or 100% selection. This suggests that it is the primary cause for the underrepresentation of lower SES and TMSD students in Dutch HPE programmes. This finding corresponds with the argument of Cohen et al. (2002), who argued that the unequal access to educational opportunities in primary and secondary education for minority students of lower SES backgrounds was at the root of the lack of diversity in U.S. medical schools.

둘째, HPE 프로그램 지원 단계에서는 대상자 풀에 비해 남성과 보건 전문직에 종사하는 부모가 없는 학생이 지원자 풀에서 과소 대표되는 것으로 나타났습니다. 예를 들어 2015년 코호트에서 남성은 대상자 풀의 약 절반을 차지하지만 지원자 풀에서는 32% 미만에 그쳤습니다. HP 부모가 없는 학생은 대상자 풀의 83%를 차지하지만 지원자 풀의 78.1%를 차지합니다. 이는 지원 결정에 있어 자의적 선택이 작용하여 이러한 배경 특성에 대한 다양성과 대표성을 잃고 있음을 시사합니다. 이러한 결과는 고등학생이 HPE 프로그램을 선택하고 선발 절차를 준비하는 데 있어 의료 분야의 네트워크가 근본적으로 중요하다는 연구팀의 질적 연구(제출)를 뒷받침합니다. 남성과 의료계 부모가 없는 학생이 스스로 선택하는 패턴은 Simmenroth-Nayda와 Görlich(2015)에 의해서도 발견되었습니다. 그러나 2001년부터 2015년까지 의과대학에 지원하는 여성 비율이 49.7%에서 46.5%로 소폭 감소한 미국의 상황과는 다릅니다(Zhang 외, 2021). 
Second, in the step to applying for an HPE programme, the results show that compared to the eligible pool, men and students without parents in the health professions are underrepresented in the applicant pool: in cohort 2015 for example, men represent about half of the eligible pool, but less than 32% of the applicant pool. Students without HP parents represent 83% of the eligible pool, but 78.1% of the applicant pool. This suggests self-selection in the decision to apply, resulting in a loss of diversity and representativeness on these background characteristics. These findings support qualitative research by our research team (submitted), which suggested that a network in the medical field was of fundamental importance for high school students in making the study choice for an HPE programme and in preparing for the selection procedure. A pattern of self-selection by men and students without medical parents was also found by Simmenroth-Nayda and Görlich (2015). It differs however with the U.S. context, in which between 2001 and 2015, the percentage of female applicants to medical school slightly declined from 49.7 to 46.5% (Zhang et al. 2021).

이주 배경을 가진 학생들은 적격 풀에서 차지하는 비율보다 더 높은 비율로 지원했습니다. 이는 지원 단계에서의 자의적 선택이 HPE 인구에서 이들이 과소 대표되는 이유가 아님을 시사합니다. 이러한 연구 결과는 소수 민족 및 저소득층 학생의 자가 선택에 대한 질적 연구와 대조적으로, HPE 프로그램 지원(준비)의 장벽과 관련이 있습니다(Greenhalgh 외. 2004; Mathers and Parry 2009; Freeman 외. 2016). 그렇다고 이주 배경을 가진 네덜란드의 적격 학생들이 제도적 장벽에 직면하지 않는다는 것은 아니지만, 이러한 장벽이 적격자 풀에 비해 지원자 풀에서 과소 대표되는 것으로 해석되지는 않습니다. 
Students with a migration background applied at a higher rate than their share in the eligible pool. This suggests that self-selection in the step towards applying is not a reason for their underrepresentation in HPE populations. Our findings are in contrast with qualitative research into self-selection by ethnic minorities and/or lower SES students, relating to barriers in (preparing for) applying to an HPE programme (Greenhalgh et al. 2004; Mathers and Parry 2009; Freeman et al. 2016). This is not to say that Dutch eligible students with a migration background do not face systemic barriers, but these barriers do not translate to an underrepresentation in the applicant pool compared to the eligible pool.

부모의 소득, 재산 또는 사회복지 수급자 지위를 기준으로 측정한 사회경제적 배경이 낮은 학생은 지원 자격이 있는 학생 집단에서 차지하는 비율에 비해 비슷하거나 더 높은 비율로 지원했습니다(자세한 데이터는 표시되지 않음). 이는 지원 단계에서의 자의적 선택이 HPE 인구에서 이들이 과소 대표되는 주된 이유가 아님을 시사합니다. 이는 Zhang 외(2021)의 연구 결과에 따르면 미국의 저소득층 카운티에 비해 고소득층 카운티의 지원자 비율이 증가한 것과는 대조적입니다. 그러나 고등학교에서 기말고사에 불합격한 지원자 집단에서는 SES가 낮은 지원자가 약간 과대 대표되었습니다. 따라서 이들은 그 해에 배치되는 경우가 적었습니다. 이러한 지원자들은 더 많은 안내와 맞춤형 지원을 통해 고등학교 시험에 합격하여 지체 없이 배정 자격을 얻을 수 있습니다. 배정 자격이 있는 지원자 풀은 전체 지원자 풀과 유사한 SES 배경을 가지고 있었습니다.
Students from a lower SES background (measured on the basis of parental income, wealth, or social welfare recipient status) applied in similar or higher rates (detailed data not shown) compared to their proportion in the eligible student population. This suggests that self-selection in the step towards applying is not a main reason for their underrepresentation in HPE populations. This is in contrast with the increased ratio of applicants from high-income counties versus low-income counties in the United States, as found by Zhang et al. (2021). However, lower SES applicants were slightly overrepresented in the population of applicants which failed their final exams in high school. Therefore, they were less often eligible for placement that year. These applicants could benefit from more guidance and targeted support, to ensure they pass their high school exams and thereby become eligible for placement without delay. The pool of applicants which was eligible for placement had a SES background which was more similar to that of the total eligible pool.

셋째, 지원자 풀에서 HPE 학생 풀로 넘어가는 단계에서 배치 자격이 있는 지원자의 합격 확률이 동일하지 않아 다양성이 손실되었습니다. 이는 주로 선발 기반 입학이 0~50%(각 학부에 따라 다름)에서 100%로 증가한 기간 동안 입학 확률에 영향을 미치는 변수의 수가 2개에서 4개로 증가했기 때문인 것으로 보입니다. 

  • 2008년 코호트(추첨과 선발 방식 혼합)에서는 여성이고 최고 부유층에 속하는 학생이 입학할 확률이 훨씬 더 높았습니다.
  • 2015년 코호트(100% 선발)에서는 여성이고, TMSD 이주 배경이 없고, 부모가 등록된 의료 전문가이거나, 최고 부유층에 속하는 학생이 HPE 학생이 될 확률이 훨씬 더 높았습니다. 이는 특히 연령 코호트와 비교할 때 HPE 학생 인구의 대표성에 부정적인 영향을 미쳤습니다.

Third, in the step from applicant pool to HPE student pool, diversity is lost as applicants who were eligible for placement did not have the same odds of successful admission. We mainly attribute this to the use of selection, as the number of variables which influenced odds of admission increased from 2 to 4 in the period that the use of selection-based admission increased from 0-50% (depending on each faculty) to 100%.

  • In cohort 2008 (hybrid lottery and selection procedure), students who are women and belong to the highest wealth groups had a significantly higher chance to be admitted.
  • In cohort 2015 (100% selection), students who are women, have no TMSD migration background, whose parents are registered healthcare professionals, or who belong to the highest wealth groups, had a significantly higher chance to become HPE students. This negatively influenced the representativeness of the HPE student population, especially in comparison to the age cohorts.

남성의 HPE 등록률이 낮은 것은 대학 진학률을 반영하지 않습니다. 2015년 코호트에서 16세에 과학 중심 예비 대학 프로필에 등록한 16세 학생들 중 대학에 진학한 학생들의 성별 분포는 거의 동일합니다(남성 49.5%, 여성 50.5%, 데이터는 표시되지 않음). 따라서 조사 대상 학생 집단에서 남학생이 다른 대학 프로그램을 선택하는 비율은 조사 대상의 4개 HPE 프로그램보다 더 높았습니다.
The lower enrolment of men in HPE does not reflect their rates of university enrolment. Out of the 16-year-olds in cohort 2015 who were enrolled in the science-focused pre-university profile at age 16, their gender distribution in university is almost equal (49.5% men and 50.5% women, data not shown). Men in the eligible student population thus choose other university programs in greater proportions than the four HPE programs in our study.

연구 결과는 네덜란드 HPE 학생들이 이전에 생각했던 것보다 훨씬 더 불균형적인 수준에서 고학력 배경을 가지고 있다는 것을 보여줍니다. 가구 소득을 SES 지표로 사용한 Van den Broek 외(2018)의 연구에 따르면 네덜란드 의대생의 30%가 가구 소득 상위 10%에 속하는 것으로 나타났습니다. 저희 코호트에서는 HPE 학생의 60% 이상이 부모 중 한 명 이상이 개인 소득 상위 10% 분위에 속했고(연령 코호트에서는 30~33%), 36% 이상이 가구 자산 상위 10% 분위에 속했습니다(연령 코호트에서는 15~16%). 반 덴 브룩과 우리 연구 결과의 차이는 부모 중 한 쪽의 개인 소득이 가장 높은 소득 분위수를 선택하고, 다른 쪽 부모의 소득이 더 낮을 수 있는 분위수를 평균화하지 않는 방식에 기인할 수 있습니다. 소득 분위수와 자산 분위수 간 결과의 차이는 자산 분위수가 가계 소득과 가계 자산의 조합이라는 사실에 기인합니다. 모기지 부채와 같은 요인은 가계 자산 수준을 낮춥니다. 
Our results demonstrate that Dutch HPE students come from high-SES backgrounds at a more disproportionate level than previously thought. Van den Broek et al. (2018), who used household income as a SES indicator, found that 30% of Dutch medical students came from the top-10 household income decile. In our cohorts, more than 60% of HPE students had at least one parent in the top-10 personal income decile (compared to 30–33% in the age cohorts), and more than 36% came from the top-10 household wealth decile (compared to 15–16% in the age cohorts). The differences in results between Van den Broek and our work could be attributed to our method of selecting the highest personal income decile of either parent, which is not averaged out by the possibly lower income decile of the other parent. The differences in our results between income and wealth deciles are caused by the fact that wealth percentiles are a combination of household income and household assets. Factors such as mortgage debts reduce household wealth levels.

지원자 그룹에 따라 입학 확률이 다르게 나타난 것은 HPE 입학에 사용되는 여러 절차가 편견의 위험을 내포하고 있어 모든 지원자에게 균등한 기회를 제공하지 못한다고 주장한 Prideaux 외(2011)의 오타와 합의문과 일치합니다. 100% 선발로 전환하면서 합격 확률과 유의미한 관련이 있는 배경 변수의 수가 2개에서 4개로 증가했다는 사실은 우려스러운 부분입니다. 이는 특히 중위소득 이하 및 저소득층 학생의 기회 불평등 수준이 높아졌음을 시사합니다. 이러한 학생들은 HPE 프로그램에 진학하는 과정, 즉 초등학교에서 고등학교 예비 대학 과정으로 진학하는 단계에서 이미 불이익을 받고 있습니다. 우리의 연구 결과는 특정 사회 집단이 직면하는 장애와 그들이 충분한 학문적 우수성을 입증하는 데 제한이 될 수 있는 사회적 요인을 고려할 때, 우수성excellence 측정에 의해 지배되는 선발 시스템은 '엘리트로서의 의학교육의 재생산적 성격'을 영구적으로 유지한다고 주장한 패터슨 외(Patterson et al. 2018, 1095)의 주장을 뒷받침합니다.

The different odds of admission we found for different groups of applicants align with the Ottawa consensus statement by Prideaux et al. (2011), which argued that several procedures used for HPE admission carry a risk for bias, and thus a lack of equal opportunity for all applicants. The finding that in the transition to 100% selection, the number of background variables which were significantly associated with the odds of admission increased from two to four, is concerning. It points to an increased level of inequality in opportunity, especially for lower SES and TMSD students. These students are already disadvantaged early on the route to an HPE programme, namely in the step from primary school to the pre-university track in high school. Our findings support Patterson et al., who argued that considering the impediments which certain social groups face, and the societal factors which may limit them from demonstrating sufficient academic excellence, selection systems which are dominated by measures of excellence perpetually maintain ‘the reproductive nature of medical education as elite’ (Patterson et al. 2018, 1095).

시사점
Implications

이번 연구 결과는 추첨 또는 선발이 지원자에 대한 공정성 및 사회에 대한 공평한 결과를 가져올 수 있는지에 대한 국제적 논쟁에 새로운 차원을 제공할 수 있습니다. 이는 HPE 지원자 풀과 학생 인구의 다양성 또는 대표성이 부족한 모든 국가 및 상황과 관련이 있습니다. 이 보고서는 추첨과 선발에 대한 논쟁이 벌어지고 있는 국제 HPE 커뮤니티에, 초등 및 중등 교육에서 특정 그룹에 대한 누적된 불이익으로 인해 지원자 풀이 해당 연령대를 대표하지 못하는 한 무작위 또는 가중치 추첨은 입학의 공정성 또는 형평성을 달성하기 위한 쉬운 해결책이 아니라는 점을 강조합니다(Hubbeling 2018, Mazer 2021, ten Cate 2021). 따라서 전 세계 HPE 프로그램은 지원자 풀의 다양성을 연령대 및 지원 자격이 있는 학생 인구와 비교하여 파악할 것을 권장합니다. 
Our conclusions can provide a new dimension in the international debate on whether lottery or selection would result in fairness towards applicants and/or equitable outcomes for society. This is relevant to all countries and contexts in which there is a lack of diversity or representativeness in the HPE applicant pool and student population. It emphasises to the international HPE community, in which there is debate about lottery versus selection (Hubbeling 2018; Mazer 2021; ten Cate 2021) that a random or weighted lottery is not an easy solution to achieve fairness or equity in admissions as long as the applicant pool is not representative of their age cohort, due to accumulated disadvantage for certain groups in primary and secondary education. We therefore recommend HPE programmes around the world to gain insight into the diversity of the applicant pool in comparison to their age cohort and the eligible student population.

결국, HPE 프로그램의 지원자 풀이 전체 인구를 대표하지 못한다는 점에서 네덜란드가 유일한 것은 아닙니다(Steven 외, 2016). Cohen 등(2002)은 대학 전 단계의 교육 시스템을 근본적으로 개혁하는 것이 대표적인 보건 전문직 인력을 확보하기 위한 장기적인 해결책이지만, 그러한 개혁이 이루어질 때까지는 HPE 프로그램에서 소수집단 우대 조치 도구가 중요하다고 주장했습니다. 우리의 연구는 이러한 주장을 뒷받침하지만, 이러한 도구 또는 일반적으로 접근성 확대 정책은 현재 네덜란드의 선발 절차에서 사용되지 않고 있으며 법적으로도 허용되지 않습니다. 최근 정부는 추첨 입학을 다시 합법화했지만, 추첨 시스템에는 낮은 사회경제적 지위나 TMSD 이주 배경 등으로 인해 이미 적격 학생 풀이나 지원자 풀에서 상당히 과소 대표되는 사람들을 위한 공평한 경쟁의 장을 만들 수 있는 메커니즘이 마련되어 있지 않습니다. 교육 시스템의 낮은 기대치(네덜란드 교육감찰청 2021), 차별(네덜란드 교육감찰청 2021), 양질의 자원이 풍부한 학교에 대한 차별적 접근(Grafton-Clarke 2016, Kumwenda 외. 2017, 네덜란드 교육감찰청 2021)과 같은 이러한 장벽은 초등 및 중등 교육에 관련된 모든 당사자가 해결해야 할 과제입니다. 그러나 이러한 문제는 이 글의 범위를 벗어납니다. 연구 결과와 교육 불평등에 대한 이러한 광범위한 맥락을 바탕으로, 우리는 HPE 프로그램 대상자 풀이 해당 연령대를 대표하지 않는 한 100% 추첨으로 돌아가는 것이 HPE의 다양성 부족 문제를 해결하는 데 도움이 되지 않는다고 주장합니다.

After all, The Netherlands is not unique in that eligible pools for HPE programmes are not representative for the population as a whole (Steven et al. 2016). Cohen et al. (2002) argued that fundamental reforms of the education system at the pre-college stage are the long-term solution to achieving a representative health professions workforce, but that until those reforms take place, affirmative action tools in HPE programmes are critical. Our study supports that argument, but such tools, or Widening Access policies in general, are currently not being used in the selection procedure in The Netherlands, nor are they permitted by law. Recently, the government made lottery-admission legal again, but a lottery system does not have a mechanism in place to create a level playing field for those who are already significantly underrepresented in the eligible student pool or applicant pool due to the known barriers resulting from a lower SES status or a TMSD migration background. These barriers, such as lower expectations being placed upon them by the education system (Dutch Inspectorate of Education 2021), discrimination (Dutch Inspectorate of Education 2021), and differential access to high-quality and highly resourced schools (Grafton-Clarke 2016; Kumwenda et al. 2017; Dutch Inspectorate of Education 2021), need to be addressed by all parties involved in primary and secondary levels of education. They are however beyond the scope of this article. Based on our findings and this broader context of educational inequality, we argue that a return to 100% lottery will not help in solving the problem of a lack of diversity in HPE, as long as eligible pools for HPE programmes are not representative of their age cohorts.

우리의 연구 설계는 전 세계적으로 복제될 수 있으며, 대표성 있는 학생 집단을 입학시키는 것을 목표로 하는 HPE 프로그램은 이 목표를 달성하는 데 가장 적합한 입학 절차 유형을 결정할 때 연령 집단, 적격 풀, 지원자 풀의 다양성을 고려할 수 있습니다. 각 지역 상황에 따라 해당 연령 코호트(즉, (미래) 환자 집단)를 대표하는 학생 집단을 입학시키기 위해 취해야 할 단계가 다를 수 있습니다. 무작위 추첨은 기껏해야 지원자 풀을 대표하는 HPE 학생 모집단을 구성할 수 있지만, 지원자 풀의 다양성이 부족한 상황에서는 추첨이 해결책이 될 수 없습니다. 이러한 상황에서는 공평한 입학을 우선시하는 명시적인 목표를 가진 선발 절차를 시행할 수 있습니다. 다음을 연구하고 적절한 경우 실행할 수 있을 것입니다. 

  • 접근성 확대 정책(포위스 외 2007, 클랜드 외 2015, 알렉산더 외 2017, 마틴 외 2018),
  • 쿼터제(베칵과 시리노 2018, 커티스 2018),
  • 상황별 입학(의과대학협의회 선발 연합 2018),
  • 소외된 학생에게 불이익을 주지 않는 것으로 알려진 선발 도구 사용(제란트 외 2015, 라잭 외 2015, 테일러 외 2015),
  • 기타 대표성 있는 보건 전문 인력을 확보할 수 있는 도구의 성공적인 국제 사례

Our study design can be replicated globally, where HPE programmes aiming to admit a representative student population could consider the diversity of the age cohort, eligible pool, and the applicant pool when deciding on the most suitable type of admissions procedure to achieve this goal. Depending on each local context, different steps can be taken to admit a student population which is representative for their age cohort (i.e. the (future) patient population). Random lottery at best results in an HPE student population which is representative of the applicant pool, but in contexts where the applicant pool lacks diversity, lottery is not a solution. In such contexts, selection procedures could be implemented which have the explicit goal to prioritise equitable admissions. Successful international examples of

  • Widening Access policies (Powis et al. 2007; Cleland et al. 2015; Alexander et al. 2017; Martin et al. 2018),
  • quota systems (Becak and Cirino 2018; Curtis 2018),
  • contextualised admissions (Medical Schools Council Selection Alliance 2018),
  • using selection tools which are known to not disadvantage underrepresented students (Jerant et al. 2015; Razack et al. 2015; Taylor et al. 2015), and other
  • instruments that can ensure a representative health professional workforce,
    • could be studied and implemented where appropriate.

또한, 연령 코호트에 비해 적격자 풀의 다양성이 충분하지 않은 경우, 초중등 교육에 관련된 모든 당사자가 가능한 한 빠른 시일 내에 이 문제를 해결하기 위한 정책을 개발해야 합니다. 지원자 풀의 다양성이 충분하지 않은 경우, 대학 및 기타 당사자가 설계할 수 있는 파이프라인 프로그램 및 기타 참여 확대 노력(Martin 외. 2018; Clayborne 외. 2021)과 같은 채용 영역에 대한 개입이 필요합니다. 
Additionally, if there is insufficient diversity in the eligible pool compared to the age cohort, policies need to be developed to address this problem at the earliest possible stages by all parties involved in primary and secondary education. Where there is insufficient diversity in the applicant pool, interventions are necessary in the area of recruitment, such as pipeline programs and other Widening Participation efforts (Martin et al. 2018; Clayborne et al. 2021), which could be designed by universities and other parties.

조사 결과를 바탕으로 네덜란드의 맥락에서 HPE 프로그램에 대해 다음과 같은 제안을 합니다: 공평한 입학 절차를 개발하여 저소득층 가정 학생, TMSD 이주 배경을 가진 학생, HP 부모가 없는 학생, 남학생의 입학을 우선적으로 늘릴 수 있도록 해야 합니다. 이러한 입학 절차는 법적으로 허용되어야 HPE 프로그램에서 시행할 수 있습니다. 공평한 입학 정책 개발자는 지원자가 소수 민족 및 저소득층 배경을 가진 남성 등 여러 소수자 집단에 속할 수 있으며, 이로 인해 HPE 프로그램에 입학하는 과정에서 누적된 불이익에 직면할 수 있다는 교차성(Crenshaw 1991)을 인식할 것을 권장합니다. 예를 들어 의료 네트워크에 대한 접근성을 제공하는 등 남성과 HP 부모가 없는 학생들이 더 많이 HPE 프로그램에 지원하도록 장려하고 지원하려면 대학 전 단계에서 추가적인 정책적 개입이 필요합니다(Wouters 2020). 또한, 초중등학교는 SES가 낮은 아동과 TMSD 배경을 가진 아동이 과학 중심의 예비 대학 트랙에 성공적으로 등록할 수 있도록 조기에 지원하여 향후 HPE 프로그램에 지원할 수 있는 자격을 만들어야 합니다.
On the basis of our findings, we advance the following suggestions for HPE programmes in the Dutch context: Equitable admissions procedures should be developed to prioritise increasing the admission of students from lower SES families, students with a TMSD migration background, students without HP parents, and men. Such admissions procedures need to become legally permitted, so HPE programs can implement them. We recommend developers of equitable admissions policies to be aware of intersectionality (Crenshaw 1991): applicants can belong to multiple underrepresented groups, e.g. a man with an ethnic minority and lower SES background and may thereby face accumulated disadvantages in the route to an HPE programme. Additional policy interventions at the pre-university stage are necessary to encourage and support men and those without HP parents to apply to HPE programmes in greater numbers, for example by providing them with access to a medical network (Wouters 2020). Furthermore, primary and secondary schools should support lower SES children and children with a TMSD background at an early stage to successfully enrol in the science-focused pre-university track, which would make them eligible to apply for an HPE programme in the future.

제한 사항
Limitations

본 표본은 2008년, 2012년 또는 2015년 10월 1일에 16세였던 60만 명 이상의 개인으로 구성되었습니다. 이 표본의 설계와 규모는 이 연구의 주요 강점입니다. 또 다른 강점은 비슷한 배경을 가진 지원자들을 대상으로 로지스틱 회귀분석을 수행했다는 점입니다. 지원자들은 모두 같은 나이였고, 이들 중 98%(데이터는 표시되지 않음)가 이공계 예비대학 트랙 시험에 합격했습니다(이 코호트의 2%만이 다른 경로(예: 고등직업교육 경로)를 통해 지원했음을 의미함). 이렇게 하면 교란 요인의 위험을 줄일 수 있습니다. 또한, 배정 자격을 갖춘 세 개의 지원자 풀을 2009~2018학년도의 전체 지원자 데이터 세트와 비교했으며, 여기에는 지원했지만 코호트에 속하지 않은 학생들도 포함되었습니다. 연구에 포함된 모든 변수에 대해 이들을 비교하여 코호트 내 지원자 풀이 9년간의 통합 지원자 풀에 대해 얼마나 대표성을 갖는지 확인했습니다. 지원자 풀은 2009~2018년 기간의 전체 지원자(각각 71%, 55%)에 비해 이주 배경이 없는 네덜란드인(78%)과 소득 상위 10%에 속하는 부모를 둔 지원자(60%)가 더 많았지만, 다른 변수에서는 비교적 비슷했습니다. 
Our sample consists of more than 600,000 individuals who were 16 years old on 1 October 2008, 2012, or 2015. The design and size of this sample are major strengths of the study. Another strength is that logistic regression was performed on those applicants who all had similar backgrounds: they were of the same age, and 98% of them (data not shown) had passed the examination of the science-focused pre-university track (meaning only 2% of this cohort applied through a different route (e.g. the higher vocational educational route). This reduces the risk of possible confounders. Additionally, we compared our three applicant pools who were eligible for placement with the combined applicant dataset of the 2009–2018 academic years, including the students who applied and were not part of our cohorts. We compared them on all variables included in the study, to see how representative the applicant pools within our cohorts were for the combined applicant pool of these nine years. Our applicant pools consisted more often of those who were Dutch without a migration background (78%) and with parents who belonged to the top-10 income decile (60%), compared to all applicants in the 2009-2018 period (71%, respectively, 55%), but were relatively comparable on the other variables.

일부 변수에 대한 데이터가 제공되지 않아 100% 추첨을 통해 입학한 학생(2000년 이전)과는 비교할 수 없었습니다. 그러나 2008년 코호트 HPE 학생의 50~100%는 특정 프로그램과 대학에 따라 가중치 추첨을 통해 입학했으므로 100% 선발 절차와 비교할 수 있는 충분한 근거를 제공합니다. 
We could not make a comparison with the students admitted through 100% lottery (before 2000), as data for several variables was not available. However, 50–100% of the HPE students of cohort 2008 was admitted through weighted lottery (depending on the specific programme and university), which does provide sufficient ground for comparison with a 100% selection procedure.

네덜란드의 여러 대학에서 제공하는 의학, 약학, 임상 기술, 치의학 등 개별 프로그램 간에 HPE 학생 집단의 대표성을 비교할 수는 없었습니다. 이는 네덜란드 통계청 규정에 따라 기관 차원의 마이크로데이터 연구가 허용되지 않기 때문입니다. 이러한 한계를 극복하기 위해 2018~2019학년도 각 HPE 프로그램의 국가별 총 정원 수를 데이터 세트의 분포에 대한 대리치로 추가했습니다(Studiekeuze123, 2017): 의학: 2835명(78,9%); 약학: 270명(7.5%); 치의학: 259명(7.2%); 임상 기술: 230명(6.4%); 총: 3594명(100%). 이러한 국가별 비율은 데이터 세트 내의 비율을 가장 잘 대변합니다. 
We could not compare the representativeness of HPE student populations between individual programs of Medicine, Pharmacy, Clinical Technology, and Dentistry offered at different Dutch universities. This is because Statistics Netherlands regulations do not allow for microdata research on the institutional level. To address this limitation, we hereby add the total number of seats in the academic year 2018–2019 for each HPE program on a national level (Studiekeuze123, 2017) as a proxy for their distribution in our dataset: Medicine: 2835 (78,9%); Pharmacy: 270 (7.5%); Dentistry: 259 (7.2%); Clinical Technology: 230 (6.4%); Total: 3594 (100%). These national proportions are the best proxy for the proportions within our dataset.

마지막으로, 부모의 교육 수준은 이 데이터가 표준화되지 않았고 표본의 일부에서 사용할 수 없었기 때문에 포함할 수 없었습니다. 이러한 한계를 극복하기 위해 세 가지 다른 SES 지표를 사용하여 이 문제를 해결했습니다.
Finally, parental education levels could not be included due to this data being unstandardised, and unavailable for a part of the sample. We addressed this limitation by having three other indicators for SES.

추가 연구
Further research

데이터는 입학 정책의 변화가 필요함을 시사할 수 있지만, 증거만으로는 충분하지 않습니다. 각국의 사회적, 정치적, 법적 맥락에 따라 입법적 조정과 사회적 지지 기반 조성이 필요할 수 있습니다. 후속 연구에서는 입법 및 제도적 변화 가능성을 알리기 위해 접근성 확대 정책에 대한 제도적, 사회적 지원 수준을 조사했습니다.
Although data may indicate a need for change in admissions policies, evidence alone does not suffice. Depending on countries’ societal, political, and legal context, legislative adaptations and creating societal support may be needed. In a follow-up study, we investigated the level of institutional and societal support for widening access policies, to inform possible legislative and institutional changes.

대표성 있는 학생 집단을 우선시하는 입학 절차에 가장 적합한 설계에 대한 연구와 더불어, 개별 선발 도구와 도구의 조합이 학생 다양성에 미치는 영향에 대한 추가 연구가 필요합니다.
Next to research into the most suitable designs for admissions procedures which would prioritise a representative student population, further research is required into the effects of individual selection tools, as well as combinations of tools, on student diversity.


Med Teach. 2022 Jul;44(7):790-799. doi: 10.1080/0142159X.2022.2041189. Epub 2022 Mar 2.

Selection for health professions education leads to increased inequality of opportunity and decreased student diversity in The Netherlands, but lottery is no solution: A retrospective multi-cohort study

Affiliations

1Amsterdam UMC, Research in Education, Faculty of Medicine, Vrije Universiteit, Amsterdam, The Netherlands.

2LEARN! Faculty of Psychology and Education, Vrije Universiteit, Amsterdam, The Netherlands.

3Department of Epidemiology and Data Science, Amsterdam UMC, Vrije Universiteit Amsterdam, Amsterdam Public Health, Amsterdam, The Netherlands.

4Department of Pharmaceutical Sciences, Utrecht University, Utrecht, The Netherlands.

5Department of Medical Biology, Amsterdam UMC, Faculty of Medicine, University of Amsterdam, Amsterdam, The Netherlands.

6Wenckebach Institute for Education and Training, University Medical Center Groningen, Groningen, The Netherlands.

PMID: 35236235

DOI: 10.1080/0142159X.2022.2041189

Abstract

Background: Concerns exist about the role of selection in the lack of diversity in health professions education (HPE). In The Netherlands, the gradual transition from weighted lottery to selection allowed for investigating the variables associated with HPE admission, and whether the representativeness of HPE students has changed.

Method: We designed a retrospective multi-cohort study using Statistics Netherlands microdata of all 16-year-olds on 1 October 2008, 2012, and 2015 (age cohorts, N > 600,000) and investigated whether they were eligible students for HPE programs (n > 62,000), had applied (n > 14,000), and were HPE students at age 19 (n > 7500). We used multivariable logistic regression to investigate which background variables were associated with becoming an HPE student.

Results: HPE students with ≥1 healthcare professional (HP) parent, ≥1 top-10% income/wealth parent, and women are overrepresented compared to all age cohorts. During hybrid lottery/selection (cohort-2008), applicants with ≥1 top-10% wealth parent and women had higher odds of admission. During 100% selection (cohort-2015) this remained the case. Additionally, applicants with ≥1 HP parent had higher odds, those with a migration background had lower odds.

Conclusions: Odds of admission are increasingly influenced by applicants' backgrounds. Targeted recruitment and equitable admissions procedures are required to increase matriculation of underrepresented students.

Keywords: Selection; admission; diversity; inequality of opportunity.

의과대학의 운동선수: 운동 유경험자의 수행능력에 대한 체계적 문헌고찰(Med Educ, 2023)
Athletes in medicine: A systematic review of performance of athletes in medicine
Kathryn G. Anderson1 | Jacie Lemos2 | Samantha Pickell3 | Christopher Stave1 | Michael Sgroi1

 

1 소개
1 INTRODUCTION

의료계에 대한 관심은 최근 몇 년 동안 꾸준히 증가하고 있습니다. 2002년부터 2020년까지의 입학 주기 동안 의대 지원자 수는 50% 이상 증가했습니다.1 의료계에 대한 관심이 증가함에 따라 입학 위원회와 관계자들은 점점 더 경쟁이 치열해지는 지원자 풀을 검토하여 의대, 레지던트 프로그램 및 의학교육 이후의 경력에 가장 적합한 지원자를 식별해야 하는 과제를 안고 있습니다. 의과대학 및 레지던트 지원서에는 학부 평점, 의과대학 입학시험(MCAT) 또는 미국 의사면허시험(USMLE)과 같은 표준화된 객관적 지표뿐만 아니라 경험, 과외 활동 및 개인적 특성에 대한 보다 총체적 검토가 포함됩니다. 입학 관련 문헌의 방대한 연구에 따르면 정량적 학업 지표와 의과대학에서의 미래 성공 사이에 상관관계가 있는 것으로 나타났습니다.2-5 입학 위원회는 전통적으로 이러한 정량적 학업 지표에 더 중점을 두었지만, 총체적 검토는 입학생의 다양성 증가와 같은 이점을 부여하는 것으로 나타났습니다.6, 7 따라서 최근 몇 년 동안 미국의과대학협회는 의과대학이 "지원자의 경험, 특성 및 학업 지표뿐만 아니라 지원자가 학습, 실습 및 교육에 기여할 수 있는 가치를 고려하는 선발 과정"으로 정의하는 총체적 검토를 사용하도록 권장하고 있습니다. AAMC에 따르면, 현재 미국의 거의 모든 의과대학에서 일부 요소에 대해 총체적 평가를 활용하고 있다고 합니다.8 총체적 검토의 채택이 증가한 것 외에도 코로나19 팬데믹으로 인해 대학 성적 옵션, MCAT 연기 및 취소, 연구 및 임상 기회 제한 등 여러 가지 변화가 발생했습니다. 이러한 혼란으로 인해 입학 위원회는 의학 분야의 성공을 예측할 수 있는 다른 지표에 더 많이 의존하게 되었을 가능성이 높습니다. 이처럼 지원자의 경험을 고려하는 총체적 평가로의 전환이 증가하고 있음에도 불구하고, 운동 경력을 포함한 학업 외 경험과 의대에서의 성과 사이의 질적 연관성은 아직 완전히 밝혀지지 않았습니다.
Interest in the medical profession has been steadily growing in recent years. From the 2002 to 2020 admissions cycles, the number of applicants to medical school increased by over 50%.1 As interest in the medical profession grows, admissions committees and stakeholders are tasked with reviewing an increasingly competitive pool of candidates to identify those best suited for medical school, residency programmes and a career beyond medical education. Medical school and residency applications include standardised objective measures, such as undergraduate GPA, the Medical College Admission Test (MCAT) or the United Stated Medical Licensing Examination (USMLE), as well as a more holistic review of experiences, extracurriculars and personal attributes. A vast amount of research in the admissions literature has shown a correlation between quantitative academic measures and future success in medical school.2-5 While admissions committees traditionally have placed greater emphasis on these quantitative academic measures, a holistic review has been shown to confer benefits such as increased diversity of matriculants.6, 7 As such, in recent years the Association of American Medical College has encouraged medical schools to use a holistic review, which they define as a “selection process which takes into consideration applicants' experiences, attributes, and academic metrics as well as the value an applicant would contribute to learning, practice, and teaching.” According to the AAMC, nearly all medical schools in the United States now report using some elements of holistic review.8 In addition to an increased adoption of holistic reviews, the COVID-19 pandemic led to several changes in university grading options, MCAT postponements and cancellations, and limited research and clinical opportunities. These disruptions have likely forced admissions committees to rely even more heavily on alternative predictors of success in medicine. Despite this increasing shift to holistic review that considers applicant experiences, many qualitative associations between non-academic experiences, including prior participation in athletics, and performance in medical school have yet to be fully established.


총체적 검토 프레임워크는 의대 입학을 넘어 현재 많은 레지던트 프로그램과 의대 교수직에서 지원자 선발에 적용되고 있습니다.9 또한, 2022년 1월에 USMLE 1단계 시험이 수치 점수에서 합격-불합격 채점 방식으로 변경되었습니다. 전통적으로 이 시험은 레지던트 입학 과정에서 상당한 비중을 차지해 왔습니다. 이러한 변화가 레지던트 프로그램에 어떤 영향을 미칠지는 아직 확인되지 않았지만, 레지던트 성공에 대한 새로운 예측 변수를 확립해야 할 것입니다. 중요한 기술과 특성을 평가하기 위해 레지던트 입학 과정에서 레지던트 지원자의 경험을 더 중요하게 고려할 가능성이 높습니다. 따라서 이전에 운동에 참여한 경험과 레지던트 또는 주치의로서의 성과 사이의 관계를 이해하는 것이 도움이 될 수 있습니다. 
The holistic review framework is expanding beyond medical school admissions and is now being applied for applicant selection at many residency programmes and medical school faculty positions.9 Furthermore, the USMLE Step 1 exam changed from a numerical score to pass-fail scoring in January 2022. Traditionally, this exam has carried significant weight in the residency admissions process. While we have yet to see how this change will affect residency programmes, new predictors of success in residency will need to be established. To assess important skills and traits, residency applicant experiences will likely be considered more heavily in the admissions process. As such, understanding the relationship between prior participation in athletics and performance as a resident or attending physician may be beneficial.

문헌은 제한적이지만, 연구에 따르면 높은 수준의 운동 경기에서 경쟁하는 데 필요한 기술과 의사가 되는 길에서 성공하는 데 필요한 기술 사이에 유사점이 발견되었습니다. 이러한 연관성은 운동선수와 의사 경력 모두에서 성공을 결정하는 유사한 자질에서 비롯된 것으로 보입니다. 가장 우수한 성과를 내는 의대생, 레지던트, 주치의는 쉽게 적응하고, 팀 환경에서 잘 일하며, 비판에 잘 대응하고, 자제력이 뛰어나고, 시간 관리를 잘합니다. 우수한 운동선수로 활동하는 것도 이러한 자질을 많이 요구하므로 의과대학과 레지던트 과정의 혹독한 훈련에 대비하는 데 유리할 수 있습니다.10, 11 이전 문헌에 따르면 운동선수 출신은 의대 재학 중 소진을 덜 경험하고 여가를 위한 시간을 더 많이 가지며, 운동선수가 아닌 동료들에 비해 의학교육을 더 협력적이고 자율성을 지지하는 것으로 간주할 수 있습니다.12, 13 이러한 유사점으로 인해 일부 의과대학에서는 이미 의대 지원서 검토 시 운동 참여 여부를 고려하고 있습니다. 예를 들어, 일부 의과대학의 2차 지원서에는 대학 재학 중 운동에 참여했는지, 참여했다면 대표팀 또는 클럽 수준인지 여부를 묻는 항목이 포함되어 있습니다.
Although the literature is limited, studies have drawn parallels between the skills necessary to compete in high-level athletics and those necessary to succeed in the path to becoming a physician. These associations may come from the similar qualities that determine success in both athletics and a career in medicine. The highest performing medical students, residents and attending physicians adapt easily, work well in team settings, respond well to criticism, are self-disciplined and manage their time well. Performing as a high-level athlete also requires many of these qualities and may therefore provide advantageous preparation for the rigour of medical school and residency.10, 11 Previous literature has also found that former athletes experience less burnout, make more time for leisure during medical school and may view their medical education as more collaborative and supportive of their autonomy compared to their non-athlete peers.12, 13 Due to these parallels, some medical schools already consider participation in athletics when reviewing medical school applications. For example, the written secondary application for some medical schools includes a portion that asks students whether they have participated in athletics during college and, if so, to specify whether it was at the varsity or club level.

의학 이외의 분야에서도 운동 기술이 업무에 도움이 된다는 연구 결과가 많이 있습니다. 이러한 분야의 고용주는 지원자가 팀워크, 회복탄력성, 규율 등과 같은 기술을 배웠다면 스포츠를 했던 지원자를 선호할 수 있습니다. 특히 매우 중요한 기술인 리더십과 관련하여, 한 연구에 따르면 운동선수는 리더십 능력과 같은 척도에서 비운동선수를 능가하는 것으로 나타났으며,14 또 다른 연구에서는 대표팀 수준의 스포츠에 참여한 남성은 궁극적으로 직장 내에서 더 높은 수준의 리더십을 보인 것으로 나타났습니다.15 마찬가지로, ESPNW의 2015년 연구에 따르면 포춘 500대 기업 여성 임원 중 80%가 인생의 어느 시점에서 경쟁 스포츠를 한 것으로 나타났습니다.16 의학에서 리더십과 앞서 언급한 다른 특성의 중요성을 감안하면 운동 선수 경험과 의학에서의 성공 사이에 상관관계가 존재할 수 있습니다. 
Considerable research details the transferability of athletic skills to the workforce in fields aside from medicine. Employers in these fields may favour applicants who played sports if candidates learned skills such as teamwork, resilience, discipline and more. Particularly regarding leadership, a highly important skill, one study demonstrated that athletes outscored non-athlete peers on measures such as leadership ability,14 while another demonstrated that men who had participated in varsity-level sports ultimately showed higher levels of leadership within the workplace.15 Likewise, a study in 2015 by ESPNW discovered that 80% of female Fortune 500 executives played competitive sports at some point in their lives.16 Given the importance of leadership and other aforementioned traits in medicine, a correlation between prior athletic experience and success in medicine may exist.

의대 입학 위원회가 의학계에서의 성공 예측 인자를 파악해야 할 필요성이 커지고 있음에도 불구하고, 운동 참여와 의대, 레지던트, 의사로서의 성공 사이의 관계에 대한 현재 문헌에 대한 체계적인 검토는 아직 수행되지 않았습니다. 본 체계적 문헌고찰은 운동 참여가 의학교육과 그 이후의 성공에 대한 좋은 예측 인자인지에 대한 질문에 답하기 위해 기존 문헌에서 이러한 관계를 더 탐구하는 것을 목표로 합니다. 이를 통해 의학교육 기관, 입학 위원회, 지원자 및 기타 이해관계자들에게 의학 분야에서 지원자의 성공 가능성을 검토할 때 운동 참여가 어느 정도 고려될 수 있는지를 더 잘 알려주고자 합니다. 
Despite the growing need for medical school admissions committees to identify predictors of success in medicine, a systematic review of the current literature on the relationship between participation in athletics and success in medical school, residency and as a physician has yet to be performed. By further exploring this relationship in the current literature, the present systematic review aims to answer the question of whether participation in athletics is a good predictor of success in medical education and beyond. In doing so, this study seeks to better inform medical education institutions, admissions committees, applicants and other stakeholders of the extent to which participation in athletics could be considered while reviewing a candidate's potential for success in medicine.

2 방법
2 METHODS

데이터 검색 프로토콜은 PRISMA(체계적 문헌고찰 및 메타분석을 위한 선호 보고 항목) 가이드라인에 따라 개발되었습니다.17 2021년 2월 9일에 검색 엔진 PubMed, EMBASE, Web of Science, ERIC 및 Google Scholar를 사용하여 온라인 데이터베이스를 종합적으로 검색했습니다. 검색에는 다음 쿼리가 사용되었습니다: 
A data search protocol was developed per PRISMA (Preferred Reporting Items for Systematic Reviews and Meta-analyses) guidelines.17 We performed a comprehensive search of online databases on 9 February 2021 using the search engines PubMed, EMBASE, Web of Science, ERIC and Google Scholar. The following query was used for the search:

(성공* 또는 수행* 또는 예측* 또는 "임상 역량") 및 (레지던트* 또는 레지던트* 또는 "의학 대학원 교육" 또는 인턴* 또는 인턴십* 또는 "의대생*" 또는 "임상 펠로우*") 및 (스포츠 또는 스포츠 또는 운동선수* 또는 올림픽*) NOT "스포츠 의학" 
(success* OR perform* OR predict* OR “clinical competence”) AND (residency* OR resident* OR “graduate medical education” OR interns OR internship OR “medical student*” OR “clinical fellow*”) AND (sports OR sport OR athlete* OR olympic*) NOT “sports medicine”

데이터베이스의 구문에 따라 검색어의 형식이 결정되었습니다. 날짜 범위에는 제한을 두지 않았습니다. 그 후, 각 적격 논문에 대해 참고 문헌 검토를 수행하여 1차 검색에 포함되지 않은 관련 문헌을 찾아냈습니다. 
The syntax of the database determined the format of the search terms. No limitations on date range were implemented. Subsequently, reference review was performed on each qualifying article to uncover relevant literature that did not populate in the primary search.

2.1 자격 기준
2.1 Eligibility criteria

이 리뷰에 포함되려면 연구가 다음 기준을 충족해야 했습니다: (1) 의대생, 레지던트 또는 주치의를 정량적으로 평가하고, (2) 운동 참여 경력을 예측 변수 또는 설명 변수로 사용하며, (3) 영어로 된 동료 심사를 거친 전문이고, (4) 미국 또는 캐나다의 인구를 대상으로 평가한 연구여야 합니다. 연구를 미국과 캐나다로 제한한 이유는 미국과 캐나다 의과대학 모두 의과대학 입학 요건(MSAR)을 따르고 있으며, 두 나라 모두 일반적으로 학생들이 의사 면허를 취득하기 전에 유사한 과정을 이수하도록 요구하기 때문입니다 (학사 학위 취득, 의과대학 입학 및 수료, 의과대학 레지던트 수료). 미국과 캐나다 의과대학의 평균 합격률은 모두 낮습니다(2020년 각각 7% 및 5.5%).18 우리는 미공개 데이터만 포함된 참고 문헌과 운동 참여가 아닌 활동 수준을 예측 변수로 사용한 참고 문헌은 제외했습니다. 모든 참고 문헌은 최소 두 명의 검토자(JL, KA 또는 SP)가 심사했습니다. 의견이 일치하지 않는 경우 다른 검토자(MS)에게 자문을 구했으며, 모든 검토자의 합의와 합의를 통해 해결했습니다. 
To be included in this review, a study had to meet the following criteria: (1) Quantitatively assessed medical students, residents or attending physicians, (2) used prior participation in athletics as a predictor or explanatory variable, (3) peer-reviewed full-text available in English and (4) assessed a population in the United States or Canada. Studies were limited to the United States and Canada because both U.S. and Canadian medical schools follow the Medical School Admissions Requirements (MSAR), both countries typically require students to complete a similar path prior to obtaining medical licensure (i.e. earn a bachelor's degree, attend and complete medical school and then complete a medical residency), and both U.S. and Canadian medical schools have low average acceptance rates (7% and 5.5% in 2020, respectively).18 We excluded references that contained only unpublished data and references that used activity level as a predictor rather than participation in athletics. All references were screened by at least two reviewers (JL, KA or SP). Another reviewer (MS) was consulted in cases of disagreement, which were resolved through consensus and agreement among all reviewers.

2.2 품질 분석
2.2 Quality analysis

두 명의 독립적인 검토자(JL, SP)가 사례대조군 및 코호트 연구에 대해 뉴캐슬-오타와 척도(NOS)를 사용하여 각 연구의 질을 평가했습니다.19 NOS는 참가자 선정, 그룹의 비교 가능성, 결과의 질에 따라 세 가지 영역으로 구성됩니다. 품질 점수는 횡단면 연구의 경우 0~10점(이전에 활용된 NOS 척도를 적용20), 코호트 연구의 경우 0~9점이며, 점수가 높을수록 질이 높음을 나타냅니다. 7점 이상이면 연구의 질이 높은 것으로, 7점 미만이면 질이 낮은 것으로 평가했습니다. 2명의 독립적인 검토자 간의 카파값은 0.6으로 계산되어 평가자 간 일치도가 양호한 것으로 나타났습니다. 의견이 일치하지 않는 경우 제 3의 평가자(KA)에게 자문을 구했으며, 모든 평가자의 합의와 합의를 통해 해결했습니다. 
Two independent reviewers (JL, SP) used the Newcastle-Ottawa Scale (NOS) for case–control and cohort studies to assess the quality of each study.19 The NOS has three domains based on the selection of participants, comparability of the groups, and quality of the outcomes. Quality scores range from 0 to 10 points for cross-sectional studies (adapted NOS scale as previously utilized20) and 0 to 9 points for cohort studies, with higher scores indicating higher-quality. Studies were graded as high quality if they achieved a score of ≥7 and low quality if they achieved a score of <7. A kappa value of 0.6 between the 2 independent reviews was calculated, indicating acceptable inter-rater agreement. A third reviewer (KA) was consulted in cases of disagreement, which were resolved through consensus and agreement among all reviewers.

2.3 데이터 추출 및 분석
2.3 Data extraction and analysis

포함된 연구에서 저자, 연구 연도, 연구 설계, 표본 크기, 대상 집단(예: 의대생, 레지던트 등), 운동 참여 수준(예: 대학생, 프로 등), 참여 수준 확인 방법(예: 자가 보고, 레지던트 지원서 등), 성과 평가에 사용된 결과, 운동 참여와 성과 간에 발견된 연관성(p값 포함) 등의 데이터를 공유 스프레드시트로 추출했습니다. 포함된 연구는 노출 정의와 결과 정의에 따라 범주별로 분류되었습니다. 노출 범주에는 다음이 포함되었습니다.

  • (1) 참가자의 운동 참여 기술 수준에 따라 평가된 참가자 결과
  • (2) 개인 대 팀 스포츠 참여에 따라 평가된 참가자 결과

결과 범주에는 다음 등이 포함되었습니다.

  • (1) 의과대학에서의 학업 성취도,
  • (2) 레지던트 과정에서의 성과,
  • (3) 수술 술기 성과,
  • (4) 동기 부여/소진 

이 범주들은 상호 배타적이지 않았습니다. 보고된 연관성의 유의성을 평가하기 위해 p값을 기록했습니다. 두 명의 검토자가 추출된 모든 데이터의 정확성을 교차 확인했습니다.
The following data were extracted from included studies into a shared spreadsheet: author, study year, study-design, sample size, target population (i.e. medical students, residents, etc.), the athletic participation level (i.e. collegiate, professional, etc.), method of ascertaining participation level (i.e. self-report, residency application file, etc.), outcomes used to assess performance and the associations detected between athletic participation and performance (with p-values). Included studies were categorically grouped based on their exposure definition and their outcome definition. Exposure categories included

  • (1) assessed participant outcomes based on participants' skill level of athletic participation and
  • (2) assessed participant outcomes based on individual versus team sport involvement.

Outcome categories included

  • (1) academic performance in medical school,
  • (2) performance in residency,
  • (3) surgical skills performance and
  • (4) motivation/burnout.

The categories were not mutually exclusive. p values were recorded to assess the significance of reported associations. Two reviewers cross-checked all extracted data for accuracy.

3 결과
3 RESULTS

그림 1에서 볼 수 있듯이 제목, 초록 및 전문을 검토한 결과 1044개의 중복되지 않는 참고 문헌을 확인했습니다. 이 중 89개의 연구를 제외한 모든 연구가 포함 기준을 충족하지 못했거나 이 체계적 문헌고찰의 제외 기준을 충족하지 못했다고 판단했습니다. 다음으로, 89개 참고 문헌의 전문을 검토했습니다. 이 중 18개의 문헌이 체계적 문헌고찰의 포함 기준을 충족했습니다.10-13, 21-33 포함된 18개의 연구 중 14개(78%)는 의대생, 5개(28%)는 레지던트 또는 레지던트 지원자, 1개(6%)는 주치의에 대한 평가였습니다. 5건(28%)의 연구는 개인이 아닌 팀 스포츠에 참여한 경력을 평가했고, 12건(67%)의 연구는 참가자의 최고 수준의 운동 참여도(예: 대학 운동 대표팀 및 프로 운동)를 기준으로 평가했습니다. 3개의 연구(17%)는 캐나다의 의대생을 평가한 반면, 나머지 15개의 연구는 미국 내 인구를 분석했습니다. 
As shown in Figure 1, we identified 1044 non-duplicate references for which we reviewed titles, abstracts and/or full texts. Of these, we determined all but 89 studies failed to meet inclusion criteria or met exclusion criteria for this systematic review. Next, we reviewed the full text of these 89 references. Eighteen of these references met inclusion criteria for the systematic review.10-1321-33 Of the 18 included studies, 14 (78%) evaluated medical students, five (28%) evaluated residents or residency applicants, and one (6%) evaluated attending physicians. Five (28%) studies specifically assessed prior participation in team sports (versus individual), and 12 (67%) studies specifically assessed participants based on their highest level of athletic participation (i.e. varsity collegiate athletics and professional athletics). Three studies (17%) evaluated medical students in Canada, whereas the remaining 15 studies analysed a population in the United States.

3.1 품질 평가
3.1 Quality assessment

단면 연구의 NOS 점수는 6~10점 범위였습니다. 코호트 연구 1건이 포함되었으며, 두 평가자 모두 7점으로 평가했습니다. 15건(83%)의 연구가 7점 이상(즉, 질이 높음)을 획득하여 전반적으로 질이 높았습니다. 횡단면 연구의 평균 NOS 점수(및 표준편차[SD])는 7.6 ± 1.2점이었습니다. 표 1에 연구별 NOS 등급이 나와 있습니다. 

NOS scores for cross-sectional studies ranged from 6 to 10 points. There was one cohort study included, and both raters scored it as 7. Studies were generally high quality with 15 (83%) achieving a score of ≥7 (i.e. high quality). The average NOS score for cross-sectional studies (and standard deviation [SD]) was 7.6 ± 1.2. NOS grades are listed by study in Table 1.

 

3.2 포함된 연구 요약
3.2 Summary of included studies

포함된 18개 연구 중 16개(89%) 연구에서 운동선수(즉, 운동 경험이 있는 참가자)가 비운동선수보다 유의하게 더 나은 수행 능력을 보인 것으로 나타났습니다(p <0.05). 1건(6%)의 연구에서는 운동선수가 비운동선수보다 성적이 현저히 낮았으며, 1건(6%)의 연구에서는 결론을 내릴 수 없는 결과가 나왔습니다(표 1). 포함된 연구의 결과는 아래에 범주별로 요약되어 있습니다.
Out of the 18 studies included, 16 (89%) found that athletes (i.e. participants with prior athletic experience) performed significantly better than their counterparts (p < 0.05). One (6%) study found that athletes performed significantly worse than their counterparts, and one study (6%) had inconclusive results (Table 1). The results of included studies are summarised categorically below.

3.3 이전 운동 참여 수준 및 수행 능력
3.3 Level of prior athletic participation and performance

12개(67%) 연구는 운동 참여의 기술 수준에 따라 참가자를 구체적으로 평가했습니다. 8건(44%)은 등급별 척도(예: 무참가부터 올림픽 수준의 대회까지 선택지에 따라 스스로 보고한 최고 수준의 대회)를 사용했으며, 4건(22%)은 대학 대표팀 선수 출신과 비대표팀 대학 선수 출신을 비교했습니다. 등급을 매겨 참가자를 계층화한 8건의 연구 중 7건은 운동 참여도가 높을수록 의과대학 및 레지던트 과정에서의 성과 지표 개선, 소진 감소, 치프 레지던트로 선발될 가능성 및 수술 성과 증가와 관련이 있는 것으로 나타났습니다.12, 13, 24, 26, 29, 32, 34 이 중 한 건(Lodewyk 등)은 이러한 등급별 반응이 개인이 아닌 팀 스포츠 선수에게만 나타난다는 사실을 밝혀냈습니다. 한 연구는 운동 참여 수준이 구조화된 임상 시험 점수에 미치는 영향에 대해 결론을 내리지 못했습니다.23 
Twelve (67%) studies specifically assessed participants based on skill level of athletic participation. Eight (44%) used a graded scale (i.e. self-reported highest level of competition with options from no participation to Olympic level competition) and 4 (22%) compared former varsity collegiate athletes to non-varsity collegiate athletes. Seven of the eight studies that stratified participants based on a graded scale found that higher levels of athletic involvement correlated to improved performance metrics in medical school and residency, including decreased burnout, increased likelihood of being selected as a chief resident and surgical performance.12, 13, 24, 26, 29, 32, 34 One of these (Lodewyk et al.) found that this graded response only occurred in team sport athletes (versus individual). One study was inconclusive on the impact of level of athletic participation on structured clinical exam scores.23

대표팀 선수 출신과 비대표팀 선수 출신을 구체적으로 비교한 4건의 연구에서는 모두 대표팀 선수 출신이 의과대학과 레지던트 과정의 성과 지표에서 유의하게 높은 결과(p <0.05)와 관련이 있으며, 여기에는 더 높은 수준의 그릿과 외과 레지던트 과정에서의 unsatisfactory 결과 감소가 포함되었습니다. 
All four studies that specifically compared former varsity athletes to non-varsity athletes found that participation in prior varsity athletics was associated with significantly higher outcomes (p < 0.05) in performance metrics in both medical school and residency, including higher levels of grit and fewer unsatisfactory outcomes in surgical residency.

전반적으로 이러한 연구는 운동 능력 수준이 높을수록 의학 분야의 성과가 증가한다는 것을 보여줍니다. 이러한 수준 의존적 반응은 높은 수준의 운동 참여가 의학에서의 성공에 대한 강력한 예측 인자가 될 수 있음을 시사합니다. 
Overall, these studies indicate that performance in medicine increases with higher levels of athletic performance. This level-dependent response suggests participation in high-level athletics may be a strong predictor of success in medicine.

3.4 이전 운동 참여 및 성과 유형
3.4 Type of prior athletic participation and performance

5편(28%)의 연구는 팀 스포츠 참여 경력과 팀 스포츠 참여 경력이 없는 경우를 구체적으로 평가했습니다.

  • 이 중 3편의 논문은 팀 스포츠에 참여한 경험이 있을 때 유리한 결과를 보여주었습니다. 이 연구들에 따르면 팀 스포츠에 참여한 이력이 있는 학생들은 의과대학에서 다른 학생들과 더 유대감을 느끼고, 이비인후과 레지던트 프로그램에서 교수 평가가 더 높았으며, 외과 레지던트 프로그램에서 불만족스러운 결과가 더 적었습니다.13, 24, 30
  • 한 연구에서는 개인 스포츠 경력이 있는 사람들이 의과대학에서 모호함과 불확실성에 대한 내성이 더 높다는 것을 발견했으며(스포츠 경력이 없는 경우와 팀 스포츠 경력이 있는 경우 모두),34
  • 한 연구에서는 팀 스포츠 경력이 없는 의대생들이 표준화된 산부인과 레지던트 면접에서 더 낮은 점수를 받았다고 보고했습니다.21 

Five (28%) studies specifically assessed a history of participation in team sports versus no history of participation in team sports.

  • Of these, three articles had outcomes favouring prior participation in team sports. These studies found that students with a history of participating in team sports felt more connected to others during medical school, had higher faculty ratings in an otolaryngology residency programme and had fewer unsatisfactory outcomes in a surgical residency programme.132430 
  • One study found that those with a history of individual sports had higher levels of tolerance to ambiguity and uncertainty in medical school (over both no history of sports and a history of team sports),34 and
  • one study had outcomes favouring no history of team sports, reporting that medical students with a history of team sports scored lower on standardised obstetrics and gynaecology residency interviews.21

3.5 의과대학에서의 학업 성취도
3.5 Academic performance in medical school

포함된 연구 중 3건(17%)은 의과대학에서의 학업 성취도를 평가했습니다.

  • 441명의 의대생을 대상으로 한 후향적 검토에 따르면, 대학 시절 운동선수 출신과 그렇지 않은 학생의 MCAT 점수는 차이가 없었지만(p = 0.62), 운동선수 출신은 USMLE 1단계 시험, NBME 3학년 선반 시험, USMLE 2단계 시험에서 유의미하게 높은 점수(p <0.05)를 받았습니다. 3년차 임상 실습에서 선수들은 임상 점수, 평균 우등상 수, 3년차 평균 점수, 알파 오메가 알파(AOA) 상태에서 유의미하게 더 나은 성적을 거두었습니다(p <0.05). 선수와 비선수 골드 휴머니즘 어워드 수상자 간에는 차이가 발견되지 않았습니다(p = 0.52). 저자들은 대학 대표팀 운동선수로 활동한 경험이 있는 의대생이 의대 재학 중 표준화된 시험과 임상 실습에서 모두 동료 학생들보다 우수한 성적을 거둔다고 결론지었습니다.11
  • 반면, 산부인과 레지던트 프로그램에 지원하는 104명의 의대생을 대상으로 한 전향적 연구에서는 팀 스포츠 경험이 있는 지원자가 팀 스포츠 경험이 없는 지원자보다 표준화된 행동 면접에서 낮은 점수를 받은 것으로 나타났습니다(p = 0.02).21
  • 2015년 265명의 의대생을 대상으로 한 또 다른 연구에서는 스포츠 참여 경험과 객관적 구조화 임상시험(OSCE) 결과 사이에 유의미한 관계가 없는 것으로 나타났습니다.23
  • 이 논문들은 모두 의과대학에서의 운동 경험과 학업 성적 사이의 관계에 대해 결정적인 결과를 제시하지 못했습니다. 

Three (17%) of the included studies evaluated academic performance in medical school.

  • A retrospective review of 441 medical students found that, while MCAT scores did not differ between former collegiate athletes and their counterparts (p = 0.62), athletes scored significantly higher (p < 0.05) on the USMLE step 1 exam, the NBME year 3 shelf exam and the USMLE step 2 exam. In year 3 clinical clerkships, athletes performed significantly better (p < 0.05) on clinical scores, average number of honours, average year 3 score and Alpha Omega Alpha (AOA) status. No difference was found between athlete and non-athlete Gold Humanism Award status (p = 0.52). The authors concluded that medical students with experience as a varsity collegiate athlete outperform their peers in both standardised tests during medical school and clinical clerkships.11 
  • In contrast, a prospective study of 104 medical students applying to an obstetrics-gynaecology residency programme found that applicants with prior experience playing team sports scored lower on the standardised behavioural interviews than those with no experience with team sports (p = 0.02).21 
  • Another study in 2015, which assessed 265 medical students, found no significant relationship between prior participation in sport and objective structured clinical examination (OSCE) results.23 
  • Together, these articles demonstrate inconclusive results on the relationship between prior athletic experience and academic performance in medical school.

3.6 레지던트 생활에서의 성과
3.6 Performance in residency

5건(28%)의 연구에서 이전 운동 경험과 레지던트 과정에서의 성과 사이의 관계를 평가했습니다.

  • 한 이비인후과 레지던트 프로그램 졸업생 46명을 대상으로 한 후향적 연구에서 팀 스포츠 참여와 교수 평가 점수 간에 유의미한 양의 상관관계가 있는 것으로 나타났습니다(R2 = 0.32, p <0.001). USMLE 점수, AOA 자격, 임상 로테이션에서 우등 비율, 추천서, 연기 인턴 경험은 임상 교수 평가와 유의미한 상관관계가 없었으며, 면접 점수와 의과대학 순위는 약한 양의 상관관계를 보였습니다(R2 = 0.1, p = 0.04 및 R2 = 0.18, p = 0.03)24
  • 마찬가지로 정형외과 레지던트 119명을 대상으로 한 후향적 검토에서는 올림픽 또는 대표 선수로 참여한 경험이 주관적인 레지던트 성과 점수가 높은 것과 관련이 있다는 사실이 밝혀졌습니다(p = 0.018). 10
  • 또 다른 연구에서는 의대 출신이 응급의학과 레지던트 졸업생의 성공에 대한 가장 강력하고 일관된 예측인자 중 하나이지만, 챔피언십급 선수로 출전한 경험이 있는 '독특한 요인'이 전반적인 레지던트 성과에 대한 유의미한 예측인자임을 발견했습니다(p <0.05). 28
  • 영상의학과 레지던트 프로그램 지원자 157명을 대상으로 한 후향적 검토에서 스포츠 참여 경험이 있는 레지던트가 치프 레지던트가 될 가능성이 유의하게 높은 것으로 나타났습니다(p = 0.04).29
  • 마지막으로 외과 레지던트 111명을 대상으로 한 후향적 검토에서는 대학에서 팀 스포츠를 한 레지던트가 그렇지 않은 레지던트에 비해 레지던트 프로그램에서 이탈하거나 미국 외과 전문의 시험에 합격하지 못하는 등의 불만족스러운 결과가 유의하게 적다는 것을 확인했습니다(p = 0.02).30

Five (28%) studies evaluated the relationship between prior athletic experience and performance in residency.

  • A retrospective review of 46 graduates from an otolaryngology residency programme found a significant, positive correlation between participation in a team sport and faculty rating score (R2 = 0.32, p < 0.001). USMLE score, AOA status, percentage of honours in clinical rotations, letters of recommendation and experience as an acting intern showed no significant correlation with clinical faculty ratings, while interview score and medical school rank showed a weak positive correlation (R2 = 0.1, p = 0.04 and R2 = 0.18, p = 0.03)24 
  • Similarly, a retrospective review of 119 orthopaedic residents found that prior participation as an Olympic or varsity athlete was associated with a higher subjective residency performance score (p = 0.018).10 
  • Another study found that while medical school attended was one of the strongest and most consistent predictors of success in emergency medicine residency graduates, having “distinctive factors,” which included competing as a championship-level athlete, was a significant predictor of overall performance in residency (p < 0.05).28 
  • In a retrospective review of 157 applications for a radiology residency programme, it was found that residents with sports participation were significantly more likely to be chief residents (p = 0.04).29 
  • Finally, a retrospective review of 111 surgical residents found that residents who played team sports in college had significantly fewer unsatisfactory outcomes such as attrition from residency programme or failure to pass the American Board of Surgery examinations compared to those who did not (p = 0.02).30

사전 운동 경험과 레지던트 과정에서의 성과 사이의 관계를 평가한 5개의 연구 모두 사전 운동 참여가 레지던트 과정 중 다양한 지표에서 성공의 유의미한 예측 인자라는 결론을 내렸습니다.
All five studies evaluating the relationship between prior athletic experience and performance in residency concluded that prior participation in athletics was a significant predictor of success on various metrics during medical residency.

3.7 수술 술기 성과
3.7 Surgical skills performance

6건(33%)의 연구에서 이전의 운동 경험과 수술 술기 수행 능력 간의 관계를 평가했습니다.
Six (33%) studies evaluated the relationship between prior athletic experience and surgical skills performance.

  • 43명의 의대생을 대상으로 한 2019년 연구에 따르면 일반적인 스포츠 참여는 초기 관절경 수술 수행 능력과 상관관계가 없었지만, 손과 눈의 협응이 필요한 스포츠에 정기적으로 참여했다고 보고한 참가자는 그렇지 않은 참가자에 비해 수행 시간이 크게 향상(182초 대 78초, p = 0.025)되었습니다.25
  • 또한 의대생 12명, 레지던트 9명, 이비인후과 전문의 5명을 대상으로 한 평가에서 연구자들은 스포츠 참여 수준 증가와 내시경 부비동 수술 글로벌 평가 척도 점수 사이에 유의미한 연관성을 발견했습니다(p = 0.033).26
  • Zeng 등은 4학년 의대생 65명을 평가한 결과 운동 경험과 봉합 작업 수행 사이에 통계적으로 유의미한 관계가 있다는 것을 발견했습니다(p = 0). 048) 및 한 손으로 매듭 묶기(p = 0.042)에서 유의미한 관계를 발견했습니다.33
  • 의대생 242명을 대상으로 한 전향적 연구에서 연구자들은 4년 이상 스포츠를 한 참가자가 그렇지 않은 참가자에 비해 기계적 오류(p = 0.04)가 훨씬 적고 봉합을 덜 끊으며(p = 0.01) 총 오류가 더 적다는 것을 발견했습니다(p = 0.01).27
  • 2016년의 또 다른 연구에서는 의대생 30명을 대상으로 로봇 수술 시뮬레이터에서 수행 능력을 평가한 결과, 이전의 운동 능력 수준과 과제 1(p = 0.0002) 및 과제 2(p = 0.009)의 수행 능력 간에 유의미한 양의 상관관계가 있는 것으로 나타났습니다. 이러한 연관성은 과제를 세 번 반복한 후에도 지속되지 않았습니다. 악기 또는 비디오 게임 기술 수준은 수행 능력과 유의미한 상관관계가 없었습니다.32
  • 마지막으로, 2020년에 49명의 의대생을 평가한 연구에서는 운동 경험이 많은 참가자가 관절경 수술 시뮬레이터에서 숙련도를 달성할 가능성이 유의미하게 높았으며(p = 0.006), 관절경 수술 시뮬레이터의 수행 능력도 향상되었습니다(p = 0.008).31
  • A 2019 study evaluating 43 medical students found that while general sports participation was not correlated with initial arthroscopic performance, participants who reported they had regularly participated in sports requiring hand-eye coordination demonstrated significant improvement in performance time (182 versus 78 seconds, p = 0.025) compared with those who were not involved in sports.25 
  • Additionally, in an assessment of 12 medical students, nine residents and five attending otolaryngologists, researchers found a significant association between increasing levels of sports participation and endoscopic sinus surgery global rating scale score (p = 0.033).26 
  • Zeng et al. evaluated 65 fourth-year medical students and found a statistically significant relationship between athletic experience and performance on suturing tasks (p = 0.048) and one-handed knot tying (p = 0.042).33 
  • In a prospective study of 242 medical students, researchers found that participants who played sports for at least 4 years made significantly fewer mechanical errors (p = 0.04), broke fewer sutures (p = 0.01) and committed fewer total errors (p = 0.01) compared with others.27 
  • Another 2016 study assessed 30 medical students on their performance on a robotic surgery simulator, and found a significant positive correlation between previous athletic skill level and performance on task 1 (p = 0.0002) and task 2 (p = 0.009). This association did not persist after the third repetition of the task. Musical instrument or video game skill level was not significantly correlated with performance.32 
  • Finally, a study in 2020 assessed 49 medical students and found participants with high levels of athletic experience were significantly more likely to achieve competence on an arthroscopic surgical simulator (p = 0.006), as well as have an improved performance on the arthroscopic surgical simulator (p = 0.008).31

운동 경력과 수술 술기 수행 능력 간의 관계를 평가한 6개의 연구 모두에서 운동 경력이 있는 사람이 운동 경력이 없는 사람보다 수술 술기 수행 능력의 일부 측면에서 유의하게 우수한 것으로 나타났습니다. 손과 눈의 협응력은 수술 술기뿐만 아니라 많은 스포츠에서 손과 눈의 협응력이 필요하기 때문에 많은 논문에서 이 관계를 조절할 수 있는 잠재적 요인으로 제시되었습니다. 
All six studies evaluating the relationship between prior athletic experience and surgical skills performance found that individuals with prior experience in athletics significantly outperform those with no athletic experience in some aspect of surgical skills performance. Hand-eye coordination was suggested in many of the articles as a potential moderator of this relationship, as hand-eye coordination is needed for many sports as well as surgical skills.

3.8 번아웃과 동기 부여
3.8 Burnout and motivation

4건의 연구(22%)에서 이전의 운동 경험과 번아웃/동기부여 지표 간의 관계를 평가했습니다.

  • 의대생 267명을 대상으로 한 횡단면 연구에 따르면 과거 스포츠 참여 경험이 많은 학생일수록 번아웃 수준이 낮은 것으로 나타났습니다(r = -0.15, p = 0.014). 이 연구자들은 또한 스포츠 참여 수준과 타인의 인식에 초점을 맞춘 심리적 접근 방식(예: "나는 내가 얼마나 잘하고 있는지 다른 사람들이 알아줄 때 즐겁다", r = -0.20, p <0.001) 간에 유의미한 음의 상관관계(p ≤ 0.001)가 있음을 발견했습니다.12
  • 마찬가지로 캐나다의 한 대학 의대생 200명을 대상으로 한 설문조사에서는 팀 스포츠 경험이 있는 학생들이 의대 재학 중 타인과의 관계 또는 관련성 수준에 대해 훨씬 더 만족하는 것으로 나타났습니다(p <0.05). 또한 스포츠 참여 수준과 의과대학에서의 자율성 만족도(p = 0.041), 의과대학 중 여가 시간 운동량(p <0.001) 사이에는 유의미한 양의 상관관계가 있었습니다.13
  • 의과대학 3학년 학생 61명을 대상으로 한 횡단면 조사에서는 개인 스포츠 경력이 있는 학생이 없는 학생에 비해 의과대학에서의 모호성과 불확실성에 대한 내성이 더 높은 것으로 나타났습니다(p <0.05).
  • 마지막으로, 2019년 정형외과 레지던트 지원자 455명을 대상으로 한 횡단면 연구에 따르면 대학 운동선수 출신은 비대학 운동선수 출신에 비해 그릿(p <0.001), 관심의 일관성(p = 0.007), 인내(p = 0.006), 자제력(p = 0.019)이 더 높은 것으로 나타났습니다.22

Four studies (22%) evaluated the relationship between prior athletic experience and burnout/motivation metrics.

  • A cross-sectional study of 267 medical students found that students with higher levels of past sport involvement were found to have lower levels of burnout (r = −0.15, p = 0.014). These researchers also found significant negative correlations (p ≤ 0.001) between level of involvement in sport and psychological approaches that focus on others' perception of them (e.g. “I enjoy when others in my program are aware of how well I am doing”; r = −0.20, p < 0.001).12 
  • Similarly, a survey of 200 medical students at a Canadian university found that students with prior background in team sports were significantly more satisfied with the level of relatedness, or connection to others, during medical school (p < 0.05). There was also a significant positive correlation between level of sport involvement and satisfaction with autonomy in medical school (p = 0.041) and amount of leisure-time exercise during medical school (p < 0.001).13 
  • A cross-sectional survey of 61 third-year medical students found that students with a history of individual sports had a higher tolerance for ambiguity and uncertainty in medical school compared to those without a history of sports (p < 0.05).
  • Finally, a 2019 cross-sectional study on 455 orthopaedic surgery residency applicants revealed that former collegiate athletes demonstrated more grit (p < 0.001), consistency of interest (p = 0.007), perseverance (p = 0.006) and self-control (p = 0.019) than their non-collegiate athlete peers.22

소진/동기를 평가한 네 가지 연구 모두 운동에 미리 참여하면 내재적 동기 증가 및 소진 감소와 같은 학업 외적인 성공 지표를 크게 향상시킨다는 것을 시사합니다.
All four studies that assessed burnout/motivation suggest prior participation in athletics significantly improves non-academic indicators of success in medicine such as increased intrinsic motivation and decreased burnout.

4 논의
4 DISCUSSION

이 체계적 문헌고찰에서 저희는 사전 운동 참여와 의료 성과(예: 의대, 레지던트 또는 매듭 묶기와 같은 특정 의료 업무에서의 성과) 사이의 관계를 평가한 18건의 동료 검토 연구를 확인했습니다. 검토한 18개의 연구 중 대다수(89%)에서 운동 경험이 있는 참가자가 그렇지 않은 참가자보다 훨씬 더 나은 성과를 보인 것으로 나타났습니다(p <0.05). 이러한 관계는 USMLE 1단계 점수 및 수술 술기 숙련도 점수와 같은 객관적인 채점 방법에서 관찰되었으며, 교수 평가 및 번아웃과 같은 객관적인 주관적 척도에서는 관찰되지 않았습니다. 특히 의대생과 레지던트의 운동 선수 경력과 소진/동기 부여 사이의 연관성을 평가한 4건의 연구 모두 운동 선수 출신이 내재적 동기 부여 수준이 높고 소진이 감소하는 것으로 나타났습니다. 또한, 운동 선수 경력과 수술 술기 수행 능력 간의 관계를 평가한 6개의 연구 모두에서 운동 선수 경력이 있는 사람이 운동 경력이 없는 사람보다 수술 술기 수행 능력의 일부 측면에서 유의미하게 우수한 것으로 나타났습니다. 의료계에 대한 관심이 계속 증가함에 따라 이러한 연구 결과는 입학 위원회와 예비 지원자 모두 의사 결정을 내릴 때 운동 참여 여부를 고려하는 것이 중요할 수 있음을 시사합니다.  
In this systematic review, we identified 18 peer-reviewed studies that assessed the relationship between prior participation in athletics and medical performance (i.e. performance in medical school, residency or on specific medical tasks such as knot-tying). Out of the 18 studies reviewed, the majority (89%) found that participants with prior athletic experience performed significantly better than their counterparts (p < 0.05). This relationship was observed on objective scoring methods, such as USMLE Step 1 score and surgical skill proficiency scores, as well as less on objective subjective measures, such as faculty ratings and burnout. Notably, all four studies that assessed the association between prior athletic experience and burnout/motivation in medical students and residents found that former athletes experienced higher levels of intrinsic motivation and decreased burnout. Additionally, all six studies evaluating the relationship between prior athletic experience and surgical skills performance found that individuals with prior experience in athletics significantly outperform those with no athletic experience in some aspect of surgical skills performance. As interest continues to grow in the medical profession, these findings suggest it may be important for both admissions committees and prospective applicants take athletic participation into account while making decisions.

전국적으로 의사들의 소진이 계속 증가함에 따라 소진을 줄일 수 있는 방법을 찾는 것이 중요합니다. 운동 경력이 이러한 증가를 상쇄할 수 있는 한 가지 방법이 될 수 있습니다. 이는 이전 연구 결과와 일치하며,12,13 운동 경력이 있는 수련 중인 의사는 번아웃을 예방하는 효과가 있는 추가적인 대처 전략이 있을 수 있음을 시사합니다. 현재 25%에서 60%의 의사가 소진을 경험했다고 보고하고 있으며, 소진을 유발하는 스트레스 요인은 계속 증가하고 있습니다.35-38 어떤 특성과 경험이 학생들이 어려운 의학교육 과정에 대처하는 데 도움이 될 수 있는지 평가하는 것이 중요합니다. 교육 기관은 예비 의대 지원자들이 효과적인 대처 전략과 출구를 개발하여 소진을 최소화할 수 있도록 운동과 같은 학교 밖에서 경험과 흥미를 추구하도록 지속적으로 장려해야 합니다. 
As physician burnout continues to rise across the country, finding ways to reduce burnout is critical. A history of athletics may be one way to offset this increase. This is consistent with previous findings,12, 13 and suggests that physicians-in-training with prior athletic experience may have additional coping strategies that have a protective effect against burnout. Currently between 25% and 60% of physicians report experiencing burnout, and the stressors leading to burnout are only growing.35-38 It is important to assess what traits and experiences may help students cope with the challenging medical education process. Educational institutions should continue to encourage prospective medical school applicants to pursue experiences and interests outside of school, such as athletics, so that they can develop effective coping strategies and outlets and therefore minimise burnout.

표준화된 시험 점수와 기타 정량화할 수 있는 학업 성공의 척도는 의사 지망생을 평가하는 주요 기준으로 사용되어 왔습니다.6 그러나 사람들과 잘 소통하는 능력, 팀워크 능력, 시간 관리 및 회복탄력성과 같은 덜 객관적인 기술은 의학계에서 성공의 중요한 지표로 알려져 있습니다. 많은 연구에서 입증된 바와 같이, 이러한 특성을 많이 갖춘 것으로 추정되는 운동선수들은 표준화된 시험과 수술 기술부터 의과대학 및 레지던트 과정의 전반적인 성공에 이르기까지 다양한 수준의 의료 과정에서 성공했습니다.10, 11, 22, 24-26 표준화된 시험이 합격/불합격으로 계속 변화함에 따라, 입학위원회는 의학교육 과정에서 지원자를 평가할 때 운동선수들이 보유한 이러한 "특별한 기술"을 유사하게 유익한 활동에 참여하는 다른 학생들과 함께 잠재적으로 더 고려해야 합니다. 
Standardised test scores and other quantifiable measures of academic success have served as staple criteria for assessing aspiring physicians.6 However, less objective skills such as the ability to interact well with people, ability to work on a team, time management and resilience are known critical indicators of success in medicine. As demonstrated by many studies, athletes who presumably encompass many of these traits have gone on to succeed in various levels of the medical process from standardised tests and surgical skills to overall success in medical school and residency.10, 11, 22, 24-26 As standardised tests continue to change to pass/fail, admissions committees should further consider these “special skills” that athletes possess, potentially along with other students engaged in similarly beneficial activities, when assessing candidates during the medical education process.

객관적인 학업 지표 외에 지원자의 특성과 경험에 초점을 맞춘 총체적인 입학 기준은 학업 지표에 주로 초점을 맞춘 기준보다 면접 풀과 입학생 풀을 더 다양하게 만드는 것으로 나타났습니다.39, 40 의학계의 다양성을 높일 수 있는 요소를 고려하는 것은 여전히 중요합니다. 의과대학 내 다양성을 개선하기 위한 수십 년간의 노력으로 흑인 여성과 같은 인구통계학적 요소에서는 진전이 있었지만, 흑인 남성과 같은 다른 그룹은 1978년 이후 상대적으로 변화가 없었습니다.41 의학과 달리 흑인 남성은 대학 운동에서 상대적으로 잘 대표되고 있습니다. 흑인 남성은 상위 5개 대학 운동회의 65개 대학 학부생의 2.4%를 차지하지만 축구와 농구 팀의 절반 이상을 차지합니다.42 따라서 의학에 관심이 있는 운동선수들을 지원하면 의과대학의 다양성을 높일 수 있습니다. 예를 들어, 역사적으로 많은 흑인 대학에는 의과대학뿐만 아니라 매우 강력한 디비전 II 스포츠 팀이 있습니다.43 이러한 스포츠 팀에 참여하는 관심 있는 운동선수들을 의과대학의 자원과 연결하려는 노력은 의학에 관심 있는 학생 운동선수들을 격려하는 한 가지 방법을 제공할 수 있습니다. 
Holistic admissions criteria which focuses on the attributes and experiences of applicants in addition to objective academic metrics has been shown to result in a more diverse interview pool and matriculant pool than criteria that focus primarily on academic metrics.39, 40 Considering factors that can increase diversity in medicine remains critical. Decades of effort to improve diversity within medical school has made progress with demographics such as Black women, but other groups such as Black men have remained relatively unchanged since 1978.41 In contrast to medicine, Black men are relatively well represented in college athletics. Black men represent 2.4% of undergraduate students at 65 universities in the top five athletic conferences, yet comprise more than half of the football and basketball teams.42 Thus, supporting athletes interested in medicine could potentially lead to increased diversity in medical school. For example, many historically Black universities have very strong Division II sports teams as well as schools of medicine.43 Efforts to connect interested athletes participating on these sports teams with the resources at their schools of medicine could provide one avenue for encouraging student-athletes interested in medicine.

또한 입학 위원회는 많은 스포츠가 대학 입학 전부터 엘리트 수준에서 막대한 자금과 재원을 필요로 한다는 점을 고려해야 합니다. 이는 다양한 소득 수준의 학생들의 접근성을 떨어뜨릴 수 있습니다. 따라서 소득 수준과 기타 인구통계학적 요인을 함께 고려하지 않고 고성능 운동 종목을 지나치게 강조하면 재정적으로 더 유리한 배경을 가진 지원자에게 불공정하게 유리할 수 있습니다. 그러나 동시에 대학 운동선수의 약 86%가 빈곤선 이하에 살고 있습니다.44 재정적 어려움을 겪고 있는 학생 운동선수의 많은 비율을 고려할 때, 운동이 일부 고소득층에게 어떤 이점을 줄 수 있는지 검토하는 동시에 이러한 학생 운동선수를 지원할 수 있는 방법을 모색하기 위한 추가 연구가 필요합니다. 입학 위원회는 다른 질적 입학 전 데이터와 함께 운동 참여의 이점을 평가할 때 이러한 요소를 종합적으로 고려해야 합니다. 
Admissions committees also should consider that many sports require tremendous funding and financial resources at the elite level, even before entrance to college. This can decrease accessibility of students at various income levels. Placing excessive emphasis on high performance athletics without looking at income levels and other demographic factors in tandem could therefore unfairly advantage applicants with more financially privileged backgrounds. Simultaneously, however, approximately 86% of college athletes live below the poverty line.44 Given the large proportion of student athletes experiencing financial hardship, further research is necessary to explore ways to support these student athletes while also weighing how athletics may advantage some high-income individuals. Admissions committees should consider these factors holistically when weighing the benefits of athletic participation alongside other qualitative pre-matriculation data.

이 문헌고찰에 포함된 대부분의 연구는 운동 참여 경력이 의학 수행 능력에 긍정적인 영향을 미치는 것으로 나타났지만, 2개(11%)의 연구는 운동 참여 경력이 의학 수행 능력에 긍정적인 영향을 미친다는 결과를 보고하지 않았습니다.

  • 브레이트코프(Breitkopf) 등은 팀 스포츠 경력이 있는 의대생이 표준화된 산부인과 레지던트 면접에서 낮은 점수를 받는다는 사실을 발견했습니다. 이 논문은 또한 이전 직장 경험이 면접 점수의 성공 예측 인자임을 발견했습니다.21
  • Chan 등은 의대생의 첫 번째 객관적 구조화 임상시험(OSCE)에서 운동 경력이 성적에 미치는 이점을 발견하지 못했지만 하위 그룹의 표본 크기가 작아 결과가 결정적이지 않다고 간주했습니다.23 이 논문은 또한 언어적 공개 수행 이력(예: 학생회 및 토론에서 대중 연설)에 대해 평가했으며 언어적 공개 수행 이력이 있는 사람들의 OSCE 점수가 향상되었다고 보고했습니다.

두 연구 모두 전문적이고 표준화된 환경에서 참가자의 수행 능력을 평가했습니다. 대학생 운동선수들은 종종 인턴십이나 과외 직업 기회에 참여하지 못하거나 제한을 받기 때문에 표준화된 면접과 같은 과제에서 뛰어난 능력을 발휘하는 데 필요한 전문 기술을 키우는 것이 더 어려울 수 있습니다. 향후 연구에서는 의학에 관심이 있는 학생 운동선수를 위한 경력 개발 프로그램에 정보를 제공하기 위해 운동선수들이 놓치고 있을 수 있는 잠재적인 전문 역량을 평가해야 합니다. 
While the majority of the studies included in this review favoured a history of participation in athletics on performance in medicine, 2 (11%) included studies did not report outcomes favouring prior participation in athletics.

  • Breitkopf et al. found that medical students with a history of team sports scored lower on standardised obstetrics and gynaecology residency interviews. This paper also found that prior work experience was a predictor of success for interview scores.21 
  • Chan et al. found no benefit to prior athletic participation on performance in medical students' first objective structured clinical examination (OSCE), but given the low sample size of the subgroup, considered the results inconclusive.23 This paper also assessed for a history of verbal public performance (i.e. public speaking in student council and debate) and reported improved OSCE scores in those with a history of verbal public performance.

Both studies assessed participants' ability to perform in professional, standardised settings. As college athletes are often discouraged or limited in their ability to participate in internships or extra-curricular professional opportunities, it may be more difficult for them to grow the professional skillset needed to exceed in tasks such as standardised interviews. Future research should assess for potential professional competencies that athletes may be missing, with the goal of informing career development programmes for student-athletes interested in medicine.

이 리뷰는 의학에 관심이 있는 운동선수들을 지원하고 격려해야 할 필요성을 강조합니다. 의사가 되고자 하는 엘리트 선수들은 종종 두 가지 목표를 모두 이룰 수 없다고 생각합니다.43 그러나 운동선수들은 의대에 진학할 수 있을 뿐만 아니라, 이 리뷰는 운동선수들이 의학에 뛰어나다는 것을 시사합니다. 의대 지원자를 평가할 때 많은 입학 위원회는 이미 팀워크, 의사소통, 시간 관리 등 운동선수가 보유할 수 있는 역량을 중요하게 평가합니다. 따라서 교육 기관이 입학 과정에서 운동 선수의 참여를 계속 고려하는 동시에 운동 선수가 의학 분야에서 경력을 쌓도록 장려하는 것이 유리할 수 있습니다. 학생 운동선수들에게 영감을 주고 스포츠를 통해 습득한 기술이 의학 분야로 이어질 수 있다는 것을 보여주기 위해 더 많은 노력을 기울여야 합니다. 학문적 능력에 대한 객관적인 측정과 함께 성공적인 의사가 되기 위한 자질의 중요성을 폭넓게 강조하는 것은 의학의 미래를 위한 좋은 징조입니다. 
This review emphasises the need to support and inspire athletes with an interest in pursuing medicine. Elite-level athletes with aspirations to become physicians often believe they cannot achieve both goals.43 However, athletes are not only able to enter medicine, but this review suggests they excel in medicine. When evaluating medical school candidates, many admissions committees already weigh competencies that athletes may possess such as teamwork, communication and time management. As such, it may be advantageous for educational institutions to continue considering participation in athletics in the admissions process while also encouraging athletes to pursue a career in medicine. More work should be done to inspire student-athletes and show them that the skills they are acquiring through sport are transferable to a career in medicine. Broadly emphasising the importance of qualities that make successful physicians along with objective measures of academic prowess bodes well for the future of medicine.

4.1 한계점
4.1 Limitations

이 연구에는 몇 가지 주목할 만한 한계가 있습니다. 보고된 연구에 통계적으로 유의미한 결과가 포함되지 않은 경향은 출판 편향으로 인한 것일 수 있습니다. 검토된 대부분의 연구에는 후향적 연구 설계가 포함되어 있습니다. 또한, 포함된 연구들에서 스포츠 참여 여부를 확인하는 가장 일반적인 방법은 자가 보고 설문지 또는 설문조사였습니다. 이는 사회적 선호도 편향 또는 회상 편향을 유발할 수 있습니다. 일부 연구에서는 수준별(예: 대표팀 선수 대 올림픽 선수) 또는 종목별(예: 개인 종목 대 팀 종목)로 운동 참여를 평가했지만, 어떤 유형의 운동 참여가 향후 의학 분야에서 성공하는 데 필요한 기술을 부여하는지 이해하려면 더 많은 연구가 필요할 수 있습니다. 또한 이러한 연구의 대부분은 의대생의 성과에 초점을 맞췄습니다. 레지던트 및/또는 주치의가 포함된 평가 대상 연구는 주로 외과 분야에 초점을 맞추고 있으며 표본 규모가 상대적으로 작습니다. 
This study has some notable limitations. The tendency of the reported studies to include statistically significant findings is likely due to publication bias. A majority of the studies reviewed included a retrospective study design. Additionally, the most common method of ascertaining prior sports participation within the included studies was through self-reported questionnaires or surveys. This may introduce social-desirability bias or recall bias. While some included studies evaluated participation in athletics by level (i.e. varsity athlete versus Olympian) or type of sport played (i.e. individual sport versus team sport), more research may be necessary to understand what type of athletic participation confers skills needed for future success in medicine. Additionally, most of these studies focused on the performance of medical students. The studies evaluated which include residents and/or attending physicians focus primarily on surgical disciplines and include a relatively small sample size.

향후 연구에서는 운동과 의학에서의 성공 사이의 잠재적 상관관계에 기여하는 특정 요소를 정의하기 위해 노력해야 합니다. 이러한 기본 기술을 더 확립하면 입학 위원회는 운동선수든 비운동선수든 의학 분야에서 나중에 성공할 가능성이 가장 높은 기술과 경험을 가진 지원자를 선발할 수 있습니다. 또한 이 주제에 대한 연구는 인종, 성별, 사회경제적 지위, 장학금 여부와 같은 인구통계학적 정보도 수집하고 통제해야 합니다. 데이터의 가용성이 제한적이라는 점을 고려할 때, 과거 운동선수 참여와 의학 분야에서의 성공 사이의 관계를 더 잘 이해하기 위해서는 향후 조사가 필요합니다. 
Future research should also work to define the specific elements that contribute to the potential correlation between athletics and success in medicine. Further establishing these underlying skills would allow admissions committees to select candidates, whether athletes or non-athletes, that possess the skillsets and experiences most predictive of later success in medicine. Additionally, research on this topic should likewise collect and control for demographic information such as race, gender, socioeconomic status and scholarship status. Given the limited availability of data, future investigation is needed to better understand the relationship between former participation in athletics and success in medicine.

4.2 결론
4.2 Conclusions

이 연구는 의대, 레지던트, 전공의 시절 운동선수의 성과에 관한 현재 문헌을 종합했습니다. 의학에서의 성과에 관한 방대한 양의 문헌과 의학교육, 의학의 다양성 및 의대 입학 과정을 개선하기 위한 제안된 개입에도 불구하고, 이전 운동 경험과 의학에서의 성과 사이의 관계를 평가하는 문헌은 제한적입니다. 제한적이기는 하지만, 현재의 문헌에 따르면 운동선수 경력이 의과대학 및 레지던트 과정에서의 성공을 예측하는 요인이 될 수 있습니다. 특히, 여러 연구에 따르면 운동선수 출신이 의대생과 레지던트가 되었을 때 수술 기술 숙련도가 증가하고 번아웃이 감소하는 것으로 나타났습니다. 이러한 관계는 팀워크, 의사소통, 회복탄력성, 시간 관리 등 많은 운동선수들이 가지고 있는 여러 가지 기술 때문일 수 있습니다. 교육 기관과 입학 위원회는 의학에 관심이 있는 운동선수들을 지원하고 지원자를 평가할 때 이러한 기술의 시연을 고려해야 합니다. 
This study synthesises the current literature on the performance of athletes in medical school, residency and as attending physicians. Despite the vast amount of literature on performance in medicine and proposed interventions to improve medical education, diversity in medicine and medical admissions processes, there is limited literature evaluating the relationship between previous experience in athletics and performance in medicine. Though limited, the current literature suggests former participation in athletics may be a predictor of success in medical school and residency. Specifically, multiple studies indicate that former athletes demonstrated increased surgical skill proficiency and decreased burnout as medical students and residents. The observed relationship may be due to a number of skills many athletes possess—such as teamwork, communication, resilience and time management. Educational institutions and admissions committees should support athletes interested in medicine and consider the demonstration of these skills when evaluating candidates.

 


 

 

Med Educ. 2023 Sep;57(9):807-819. doi: 10.1111/medu.15033. Epub 2023 Mar 3.

 

 

Athletes in medicine: A systematic review of performance of athletes in medicine

Affiliations collapse

1Stanford University School of Medicine, Stanford, California, USA.

2University of Michigan Medical School, Ann Arbor, Michigan, USA.

3Department of Human Biology, Stanford University, Stanford, California, USA.

PMID: 36807607

DOI: 10.1111/medu.15033

Abstract

Introduction: As interest in medicine grows, admissions committees must review an increasingly competitive pool of medical school and residency candidates. Nearly all admissions committees have moved towards a holistic review, which considers an applicant's experiences and attributes in addition to academic metrics. As such, identifying nonacademic predictors of success in medicine is necessary. Parallels between skills necessary to succeed in athletics and in medicine have been drawn, including teamwork, discipline and resiliency. This systematic review synthesises the current literature to evaluate the relationship between participation in athletics and performance in medicine.

Methods: The authors searched five databases to conduct a systematic review following PRISMA guidelines. Included studies assessed medical students, residents or attending physicians in the United States or Canada and used prior athletic participation as a predictor or explanatory variable. The review examined associations between prior athletic participation and outcomes in medical school, residency and/or as an attending physician.

Results: Eighteen studies evaluating medical students (78%), residents (28%) or attending physicians (6%) met inclusion criteria for this systematic review. Twelve (67%) studies specifically assessed participants based on skill level, and five (28%) studies specifically assessed participants based on type of athletic participation (team versus individual). Sixteen studies (89%) found that former athletes performed significantly better than their counterparts (p < 0.05). These studies found significant associations between prior athletic participation and better outcomes in multiple performance indicators, including exam scores, faculty ratings, surgical errors and burnout.

Conclusions: Current literature, although limited, suggests that prior participation in athletics may be a predictor of success in medical school and residency. This was demonstrated through objective scoring methods, such as USMLE, and subjective outcomes, such as faculty ratings and burnout. Specifically, multiple studies indicate that former athletes demonstrated increased surgical skill proficiency and decreased burnout as medical students and residents.

보건의료전문직교육을 위한 선발 방법에 대한 지원자 인식: 논리와 하위그룹별 차이 (Med Educ, 2023)
Applicant perceptions of selection methods for health professions education: Rationales and subgroup differences 
Suzanne Fikrat-Wevers1 | Karen Stegers-Jager1 | Marleen Groenier2 | Andries Koster3 | Jan Hindrik Ravesloot4 | Renske Van Gestel3 | Anouk Wouters5,6 | Walter van den Broek1 | Andrea Woltman1 

 

1 서론
1 INTRODUCTION

학부 보건 전문직 교육(HPE)에 대한 선발은 관련된 높은 이해관계로 인해 공개적인 논쟁의 주제입니다.1 그럼에도 불구하고 다양한 선발 방법에 대한 대부분의 연구는 예측 타당성과 학생 다양성에 미치는 영향에 초점을 맞춘 반면, 지원자의 인식에 대해서는 거의 관심을 기울이지 않았습니다.2 지원자 인식이 기회균등선발(WA)의 맥락에서 관련성이 있다고 주장되어 왔기 때문에 이는 놀라운 일입니다.1 사회경제적 수준이 낮고 소수인종인 집단의 과소대표는 복잡하고 다양한 원인에 의한 문제이지만, 이러한 집단은 선발에 대한 부정적인 인식의 결과에 특히 취약한 것으로 여겨집니다.1, 3 그러나 지금까지 지원자의 여러 하위 집단 간의 인식을 비교하여 실제로 그러한지 조사한 연구는 없었습니다. 본 연구에서는 학부 HPE의 다양한 선발 방식에 대한 지원자의 인식과 이러한 인식이 지원자의 배경 특성과 어떤 관련이 있는지 조사하여 이러한 지식 격차를 해결했습니다.
Due to the high stakes involved, selection into undergraduate health professions education (HPE) is a topic of public debate.1 Nevertheless, most research into different selection methods has focused on predictive validity and effects on student diversity, while little attention has been paid to applicant perceptions.2 This is surprising, as it has been argued that applicant perceptions are relevant within the context of widening access (WA).1 Although the underrepresentation of lower socio-economic and ethnic minority groups is a complex and multicausal problem, these groups are thought to be particularly vulnerable to the consequences of negative perceptions regarding selection.1, 3 However, thus far, no research has compared perceptions between different subgroups of applicants to investigate whether this is really the case. In the present study, we addressed this knowledge gap by investigating applicant perceptions of different selection methods in undergraduate HPE and how these perceptions are related to applicants' background characteristics.

선발 방법에 대한 지원자의 인식을 이해하는 것은 여러 가지 이유로 중요합니다.

  • 첫째, 지원자 인식은 광범위한 타당성 프레임워크에서 증거의 원천으로 사용되는 정치적 타당성의 구성 요소입니다.4 정치적 타당성은 이해관계자들이 어떤 방법을 선발에 사용하기에 적절하고 수용 가능한 것으로 간주하는 정도로 정의됩니다.4 실제로 선발 절차를 설계할 때 정치적 타당도를 고려하는데, 이는 전통적인 면접과 같이 제한된 예측 타당도가 입증된 선발 방법이 여전히 일반적으로 사용되고 있다는 사실에서 잘 드러납니다.1
  • 둘째, 지원자의 인식은 다양한 실제 결과를 초래할 수 있으므로 특히 중요합니다(선발 방법의 구성 타당도와 지원자의 동기 부여, 성과 및 이탈에 미치는 영향 등).2, 5-7 주목할 만한 점은 지원자가 선발 위원회의 기대에 대한 이해를 통해 이러한 숨겨진 기대에 '부합'하기 위해 선발을 준비하는 방식을 형성할 수 있다는 점입니다.8-10
  • 또한 지원자의 인식은 WA와 관련이 있습니다.1 이전 연구에 따르면 사회경제적 수준이 낮고 소수 민족 배경을 가진 예비 학생들은 전형에 대해 부정적인 인식을 더 자주 보이며, 성공적으로 입학할 수 있다는 자신감이 떨어집니다.3, 11 이러한 지원자 하위 그룹은 일반적으로 전형 결과가 더 좋지 않은 것으로 나타났습니다.12, 13 이는 부정적인 인식으로 인한 동기 부여 저하로 부분적으로 설명될 수 있습니다.14

Understanding applicant perceptions of selection methods is important for multiple reasons.

  • First, applicant perceptions are a component of political validity, which is used as a source of evidence in broader validity frameworks.4 Political validity is defined as the extent to which stakeholders consider a method as appropriate and acceptable for use in selection.4 In practice, political validity is taken into consideration when designing selection procedures, which is exemplified by the fact that selection methods with proven limited predictive validity, such as traditional interviews, are still commonly used.1 
  • Second, perceptions of applicants are of particular interest, as they can have numerous practical consequences, including effects on construct validity of selection methods, and on applicant motivation, performance and withdrawal.2, 5-7 Noteworthy is that applicants' understanding of the expectations of selection committees can shape the way they prepare for selection in order to ‘fit’ these hidden expectations.8-10 
  • Moreover, applicant perceptions are relevant with respect to WA.1 Previous research suggests that prospective students with lower socio-economic and ethnic minority backgrounds more often demonstrate negative perceptions of selection and are less confident in their ability to be successfully admitted.311 These subgroups of applicants are shown to have poorer selection outcomes in general,1213 which may be partially explained by poorer motivation due to more negative perceptions.14

지원자의 선발에 대한 인식은 일반적으로 분배적 정의절차적 정의를 구분하는 조직 정의 이론15을 사용하여 설명합니다.

  • 분배적 정의는 선발 절차 결과의 분배가 공정한지에 대한 인식인 반면,
  • 절차적 정의는 선발 절차 및 이러한 결과를 생성하는 데 사용되는 방법이 공정한지에 대한 인식을 말합니다.15 절차적 정의는 세 가지 구성 요소로 이루어집니다.
    • 절차의 형식적 특성,
    • 절차 및 의사 결정에 대한 설명,
    • 대인적 대우

Applicant perceptions of selection are commonly described using organisational justice theory,15 which distinguishes between distributive and procedural justice.

  • Distributive justice describes the perceived fairness of the distribution of the outcome of the selection procedures, while
  • procedural justice refers to the perceived fairness of the selection procedure and methods that are used to generate this outcome.15 Procedural justice consists of three components:
    • the formal characteristics of procedures,
    • explanation of procedures and decision-making and
    • interpersonal treatment.

조직 정의 이론에 따르면, 이 세 가지 절차적 정의 구성 요소는 선발 절차의 다양한 측면에 대한 인식에 영향을 미칩니다. 

  • 본 연구에서는 절차적 정의 구성요소 중 선발의 형식적 특성에 초점을 맞췄는데, 이는 길리랜드(Gilliland)에 따르면 본 연구의 주요 관심사인 특정 선발 방법에 대한 인식이 주로 이 구성요소의 영향을 받기 때문입니다. 이러한 형식적 특성의 예로는 선택 방법의 관련성 및 인지된 타당성이 있습니다.
  • 다른 두 가지 구성 요소인 절차 및 의사 결정에 대한 설명대인 관계는 각각 선발 정책과 선발 담당자에 대한 인식에 영향을 미칩니다.

According to organisational justice theory, the three procedural justice components affect perceptions of different aspects of selection procedures.

  • The present study focuses on the procedural justice component formal characteristics of selection, because according to Gilliland,15 perceptions of specific selection methods—the main interest of the present study—are mostly affected by this component. Examples of such formal characteristics include relevance and perceived validity of selection methods.
  • The other two components, explanation of procedures and decision-making and interpersonal treatment, influence perceptions of the selection policy and the selection personnel, respectively.

교육 기관은 선발 절차에서 매우 다양한 방법을 사용합니다. 그러나 이러한 방법에 대한 지원자의 인식에 대한 지식은 여전히 부족합니다.2 체계적 문헌고찰에 따르면 면접과 상황판단검사(SJT)는 지원자의 높은 지지를 받는 반면 적성검사는 덜 수용적이라고 인식하고 있습니다.1 이 문헌고찰에는 많은 수의 연구(71편)가 포함되어 있지만 대부분 단일 기관에서 특정 선발 방법에 대한 노출 후 수행된 연구였습니다. 이전 연구에 따르면 선발 절차가 연구 선택에 영향을 미치는 것으로 나타났기 때문에,2 이러한 16개의 연구 결과는 제한적으로만 비교 및 일반화할 수 있습니다. 또한 Kelly 등1은 특정 선발 방식이 특히 소외계층과 소수자 집단에 의해 장벽으로 인식된다고 제안했지만, 검토 대상 연구 중 서로 다른 지원자 하위 집단의 인식을 직접 비교한 연구는 없었습니다. 
Educational institutions use a great variety of methods in their selection procedures. However, knowledge about perceptions of applicants regarding these methods is still scarce.2 A systematic review concluded that interviews and situational judgement tests (SJTs) are highly supported by applicants, while aptitude tests are perceived as less acceptable.1 Although this review included a large number of studies (71), most were conducted in single institutions after exposure to one specific selection method. Because previous research indicates that the selection procedure plays a role in study choice,2, 16 results of such studies are only limitedly comparable and generalisable. Additionally, while Kelly et al.1 suggested that certain selection methods are specifically perceived as barriers by underrepresented and minority groups, none of the studies under review directly compared perceptions of different applicant subgroups.

지금까지 지원자 인식의 하위 그룹별 차이를 직접 조사한 연구는 거의 없었습니다. 우리가 아는 한, HPE 분야에서 단일 사이트 연구가 수행된 것은 단 한 건뿐입니다. 이 연구는 SJT에 초점을 맞춘 것으로, 소수민족 학생과 1세대 대학생이 기존 전형에 비해 SJT 전형에 대해 다른 선호도를 보인다는 결론을 내렸습니다.14 학부 심리학 프로그램에서 수행된 또 다른 단일 사이트 연구는 다양한 전형 방법을 포함했지만 배경 변수로서 성별에만 초점을 맞추었습니다.2 추첨과 고등학교 성적은 낮은 선호도를 보인 반면 시험과 면접은 높은 수용성을 보인 것으로 나타났지만 제공된 평가의 근거는 탐구되지 않았습니다. 저자들은 동기 부여 설문지에 대해서만 여성이 남성보다 더 긍정적으로 평가했으며, 다른 선발 방법에 대한 인식은 성별에 따라 차이가 없음을 발견했습니다. 
Thus far, only few studies have directly investigated subgroup differences in applicant perceptions. To our knowledge, only one single-site study was executed in the field of HPE. This research focused on SJTs and concluded that ethnic minority students and first-generation university students had other preferences in SJT format compared with their traditional counterparts.14 Another single-site study that was conducted at an undergraduate psychology programme included a wide range of selection methods but only focused on gender as a background variable.2 Low favourability ratings were found for lottery and high school grades, while tests and interviews were perceived as highly acceptable, but the rationales behind the provided ratings were not explored. The authors found that only motivation questionnaires were rated more positively by women than by men, while perceptions of other selection methods under research did not differ by gender.

따라서 다양한 방법을 포함하고 다양한 관련 배경 특성을 포함하는 다중 기관 환경에서의 연구와 관련하여 지원자 인식 문헌에는 격차가 존재합니다. 본 연구에서는 지원자들이 학부 HPE 입학을 위한 다양한 선발 방법을 어떻게 인식하는지, 그리고 그러한 인식의 근거는 무엇인지 조사했습니다. 또한 지원자의 성별, 이주 배경(민족성 지표), 부모 교육(SES 지표), 이전 교육 등 선발 결과와 관련된 배경 변수에 따라 지원자 하위 그룹 간에 이러한 인식이 다른지 평가했습니다.12, 13, 17, 18 
Thus, there is a gap in the applicant perceptions literature with respect to research in multi-institutional settings, that includes a variety of methods and that includes numerous relevant background characteristics. In the present study, we investigated how applicants perceive different selection methods for admission into undergraduate HPE and the rationales behind their perceptions. Additionally, we assessed whether these perceptions differ across subgroups of applicants based on background variables that are associated with selection outcomes: applicants' gender, migration background (as an indicator of ethnicity), parental education (as an indicator of SES) and prior education.12, 13, 17, 18

 2 방법
2 METHOD

2.1 설정 및 절차
2.1 Setting and procedure

본 연구는 네덜란드에 있는 3개의 의학 프로그램, 1개의 기술-의료 프로그램, 1개의 약학 프로그램을 포함한 5개의 학부 HPE 프로그램에서 수행되었습니다. 5개 프로그램 모두 자체적으로 설계한 선발 절차가 달랐으며, 최소 두 가지 선발 방법으로 구성되었습니다. 
The present study was conducted at five undergraduate HPE programmes in the Netherlands, including three medical programmes, one technical-medical programme and one pharmacy programme. All five programmes had different self-designed selection procedures, composed of at least two selection methods.

네덜란드에서는 다양한 유형의 학부 HPE 프로그램의 입학 요건이 비슷합니다. 입학 자격을 얻으려면 모든 지원자는 이수 과목(예: 물리, 화학, 생물학) 및 교육 수준(대학 예비 교육 졸업 수준)과 관련하여 동일한 엄격한 요건을 충족해야 합니다. 지원자는 다양한 교육 경로를 통해 지원할 수 있지만, 모두 앞서 언급한 요건을 충족한다는 증거를 제출해야 합니다. 결과적으로 지원자 풀은 비교적 동질적이며, 대학 수준의 학부 HPE 프로그램에 지원하는 학생들은 이미 고도로 선택적인 중등 교육으로 인해 학업 능력에 따라 강력하게 사전 선발됩니다.19 그러나 pu-GPA와 관련된 입학 요건은 없습니다. 지원자는 자신이 선택한 프로그램에 지원할 때 하나의 특정 교육기관에 지원하게 됩니다. 각 기관마다 미리 정해진 정원이 있습니다. 법에 따라 교육기관은 선발 절차의 일부로 구현할 수 있는 개별 도구인 선발 방법을 사용하여 평가되는 최소 두 가지 이상의 선발 기준을 포함해야 합니다. 그러나 선발 방법의 내용과 품질, 그리고 어떤 방식으로 결합할 것인지에 대한 추가 요건은 없습니다. 따라서 각 기관의 여러 유형의 HPE 프로그램 간 또는 프로그램 내에서 채택하는 선발 절차는 매우 다양합니다. 현재 프로그램에서 선발 절차의 일부로 (가중치 및 비가중치) 추첨을 선발 방법으로 포함할 수 있도록 하는 법안이 계류 중입니다.
In the Netherlands, admission requirements of different types of undergraduate HPE programmes are comparable. To be eligible, all applicants need to meet the same stringent requirements regarding subjects taken (e.g. physics, chemistry and biology) and educational level (graduation level of pre-university education). Although applicants can apply from different educational routes, they all need to provide proof that they meet aforementioned requirements. Consequently, the applicant pools are relatively homogeneous; students who apply to a university-level undergraduate HPE programme are already strongly preselected based on academic skills due to highly selective secondary education.19 There are no admission requirements, however, with respect to pu-GPA. When applicants apply to their programme of choice, they apply to one specific institution. For each institution, there is a predetermined fixed number of places. By law, institutions are required to include at least two selection criteria, which are assessed using selection methods—the individual tools that can be implemented as part of a selection procedure. However, there are no additional requirements with respect to, for instance, the contents and quality of the selection methods, and in which way they would be combined. Consequently, there is great variety in the selection procedures that programmes employ, both between and within different types of HPE programmes at different institutions. Currently, a bill is pending that should allow programmes to also include (weighted and unweighted) lottery as a selection method as part of their selection procedure.

2020년 9월에 입학 선발 절차에 참여한 모든 지원자(N=3280)는 지원자 인식에 관한 온라인 설문조사에 참여하도록 초대되었습니다. 또한 지원자들은 현장 테스트 당일 또는 이메일을 통해 인구통계학적 설문지를 작성하도록 요청받았습니다.
All applicants engaged in the selection procedures for entry in September 2020 (N = 3280) were invited to participate in an online survey on applicant perceptions. Additionally, applicants were asked to complete a demographics questionnaire either during an on-site testing day or via e-mail.

모든 참가자로부터 사전 동의를 얻었습니다. 지원자에게는 참여가 자발적인 것이며 선발 결과에 영향을 미치지 않는다는 사실을 알렸습니다. 어떠한 인센티브도 제공되지 않았습니다. 에라스무스 MC의 의료윤리심의위원회는 이 연구의 심의 면제를 선언했습니다.
Informed consent was obtained from all participants. Applicants were informed that participation was voluntary and would not influence their selection outcomes. No incentives were provided. The Medical Ethical Review Committee of Erasmus MC declared the study exempt from review.

2.2 측정 방법
2.2 Measures

지원자의 인식은 조직 정의 이론에 기반한 7가지 항목이 포함된 이전에 보고된 설문지를 사용하여 측정했습니다.14 각 항목은 7점 리커트 척도를 사용하여 평가했습니다. 이전 연구에 따라2, 14 일반적 호감도는 두 가지 항목을 사용하여 평가했습니다.

  • 인지된 예측 타당도
  • 인지된 공정성

나머지 5개 항목은 절차적 정의 차원을 반영했습니다.

  • 안면 타당도,
  • 지원자 변별력,
  • 학업 관련성,
  • 수행 기회,
  • 부정행위의 용이성


Applicant perceptions were measured using a previously reported questionnaire including seven items based on organisational justice theory.14 Each item was judged using a 7-point Likert scale. In accordance with previous studies,2, 14 general favourability was assessed using two items:

  • perceived predictive validity and
  • perceived fairness.

The other five items reflected the following procedural justice dimensions:

  • face validity,
  • applicant differentiation,
  • study relatedness,
  • chance to perform and
  • ease of cheating.

각 정의 차원에 대한 구체적인 항목(즉, 응답자에게 제공된 정의)과 평가 척도는 표 S1에서 확인할 수 있습니다. 응답자들은 일반적으로 사용되는 11가지 전형 방법, 즉 인지능력 검사, 커리큘럼 샘플링 검사, 이력서(CV), 면접, 지원동기서, 인성 설문, 대학 전 학년 평점(pu-GPA), SJT, 기술 테스트, 무가중 추첨 및 가중 추첨에 대해 지원자 인식 항목을 개별적으로 평가하도록 요청받았습니다. 무가중 추첨과 가중 추첨의 경우, 다른 항목은 해당 방법과 관련이 없는 것으로 간주하여 일반적 호감도와 안면 타당도만 평가했습니다. 각 선발 방법에 대한 간략한 설명(표 S2)과 함께 SJT 및 인성 설문지의 예시 항목이 제공되었습니다. 각 선발 방법(추첨 포함)에 대해 지원자들은 '[방법]을 선발 방법으로 사용하는 것에 대해 하고 싶은 말이 있습니까?"라는 개방형 질문에 답하도록 요청받았습니다. 선발 방법은 순서 효과를 완화하기 위해 무작위 순서로 제시되었습니다.
The specific items (i.e. definitions provided to respondents) and rating scales of each justice dimension can be consulted in Table S1. Respondents were asked to rate the applicant perception items separately for 11 commonly used selection methods: cognitive capacity test, curriculum-sampling test, curriculum vitae (CV), interview, motivation letter, personality questionnaire, pre-university grade-point average (pu-GPA), SJT, skills test, unweighted lottery and weighted lottery. For unweighted and weighted lottery, only general favourability and face validity were assessed, as the other items were considered irrelevant for those methods. A short description of each selection method was provided (Table S2), along with example items for the SJT and personality questionnaire. For each method (including lottery), applicants were also asked to answer the following open-ended question: ‘Do you have any remarks about using [insert method] as a selection method?’ The selection methods were presented in a random order to mitigate order effects.

인구통계학적 설문에는 성별, 이주 배경, 이전 교육, 부모 교육 등의 변수가 포함되었습니다. 본 연구에서는 성별의 다양성을 인정하여 지원자가 '남성', '여성', '기타(자유 텍스트 상자)'의 세 가지 범주 중에서 선택할 수 있도록 했습니다. 이주 배경은 네덜란드 통계청(CBS)에 따라 정의되었습니다. 지원자는 다음으로 분류되었습니다. 

  • (i) 부모 모두 네덜란드에서 태어난 경우 이주 배경 없음, 
  • (ii) 부모 중 한 명 이상이 유럽(네덜란드 및 터키 제외), 북미, 오세아니아, 일본 또는 인도네시아에서 태어난 경우 서구 이주 배경, 
  • (iii) 부모 중 한 명 이상이 아프리카, 아시아(일본 및 인도네시아 제외), 라틴 아메리카 또는 터키에서 태어난 경우 비 서구 이주 배경

사전 교육과 관련해서는 네덜란드의 표준 대학 전 교육, 대학 및 기타 형태의 사전 교육(예: 고등 직업 교육, 외국 교육)을 구분했습니다. 마지막으로, 부모 교육과 관련하여 지원자의 부모 중 누구도 고등 교육(대학 또는 고등 직업 교육)을 받은 적이 없는 경우 지원자를 1세대 대학 지원자로 분류했습니다.
The following variables were included in the demographics questionnaire: gender, migration background, prior education and parental education. Gender diversity was acknowledged in the present study, and applicants had the option to choose between three categories: ‘man’, ‘woman’ and ‘other, namely [free text box]’. Migration background was defined in accordance with Statistics Netherlands (CBS). Applicants were categorised in three groups:

  • (i) no migration background when both parents were born in the Netherlands;
  • (ii) a Western migration background when at least one parent was born in Europe (excluding the Netherlands and Turkey), North America, Oceania, Japan or Indonesia; and
  • (iii) a non-Western migration background when at least one parent was born in Africa, Asia (excluding Japan and Indonesia), Latin America or Turkey.

With respect to prior education, we distinguished between standard Dutch pre-university education, university and other forms of prior education (e.g. higher vocational education, foreign education). Finally, for parental education, applicants were categorised as first-generation university applicants when none of their parents had attended higher education (university or higher vocational education).

2.3 분석
2.3 Analyses

다양한 선발 방식에 대한 지원자의 인식을 조사하기 위해 서술적 통계를 사용했습니다. 내적 일관성을 확인한 후, 각 방식에 대한 각 응답자의 일반적 선호도는 두 가지 일반적 선호도 항목의 평균 점수로 계산했습니다. 일반적 호감도 및 기타 항목에 대해서는 각 선택 방법에 대한 평균 점수와 95% 신뢰 구간을 계산했습니다. 또한 절차적 정의 차원 간의 관계를 조사하기 위해 각 전형 방법별 일반적 호감도 점수와 다른 항목 간의 상관관계를 계산했습니다. 
In order to investigate applicant perceptions of different selection methods, we used descriptive statistics. After checking for internal consistency, general favourability of each method for each respondent was calculated as the mean score on the two general favourability items. For general favourability and the other items, the mean score and 95% confidence interval for each selection method were calculated. Additionally, we calculated correlations between scores on general favourability and the other items for each method to examine relationships between the procedural justice dimensions.

지원자 하위 그룹에 따라 지원자의 인식이 다른지 알아보기 위해 선형 혼합 모델을 사용했습니다. 혼합 모형은 부분적으로 누락된 데이터를 보정하고 개인 및 상황 관련 차이를 통제할 수 있었습니다. 이 모형의 종속변수는 평균 일반 호감도 점수였습니다. 고정 효과에는 선발 방법과 각 선발 방법과 관심 있는 인구통계학적 변수(성별, 이주 배경, 이전 교육 및 부모 교육) 간의 상호작용 효과가 포함되었습니다. 무작위 요인에는 지원자 ID와 지원자가 지원한 프로그램이 포함되었으며, 구조화되지 않은 공분산 구조를 사용했습니다. 공분산 구조에 대한 결정은 카이케 정보 기준에 따라 이루어졌습니다. 이 분석을 위해 개별 지원자의 데이터는 11가지 선발 방법 중 10개 이상이 일반적인 호감도로 평가된 경우에만 사용되었습니다.
To study whether applicant perceptions differed for subgroups of applicants, we used a linear mixed model. The mixed model compensated for partially missing data and allowed us to control for individual and context-related differences. The dependent variable in this model was the mean general favourability score. Fixed effects included the selection method, as well as the interaction effects between each selection method and the demographic variables of interest (gender, migration background, prior education and parental education). Random factors included applicant id and the programme to which the applicant applied, using an unstructured covariance structure. The decision on the covariance structure was based on the Akaike information criterion. For this analysis, data of individual applicants were used only when at least 10 of the 11 selection methods were rated on general favourability.

개방형 질문에 대한 답변은 구성주의 패러다임에서 지원자의 인식 이면에 있는 근거를 보다 심층적으로 파악하는 데 사용되었습니다. 본 연구에서는 지시적 접근법을 사용하여 내용에 대한 질적 분석을 사용했습니다.20 지시적 접근법에서는 이론적 틀을 검증하고 확장하기 위한 목적으로 이론을 코드 형성을 위한 초기 지침으로 사용합니다. 본 연구에서는 조직 정의 이론의 이론적 개념이 코드화 과정의 기초를 형성했습니다. 장과 와일더무스가 설명한 분석 절차를 따랐습니다.21 제1저자(SFW)는 데이터에 익숙해지고 코딩 매뉴얼을 개발했습니다.

  • 상위 코드는 설문지의 이론적 개념인 안면 타당도, 지원자 차별화, 연구 관련성, 수행 기회, 부정행위의 용이성을 기반으로 미리 결정되었습니다.
  • 또한 우리가 실시한 설문지에서 다루지 않은 조직 정의 이론의 다른 개념들, 즉 분배 정의, 채용 중 반응, 채용 후 반응, 자기 인식은 물론 절차적 정의와 관련하여 이전에 보고된 설문지에서 사용된 다른 항목들인 과학적 증거, 대인관계의 따뜻함, 사용할 권리, 사생활 침해, 광범위한 사용, 노력 기대치, 알려진 정보, 재고 기회, 피드백, 관리의 일관성, 개방성, 대우, 양방향 커뮤니케이션 등이 코딩 매뉴얼의 상위 코드로 포함되었습니다.2, 22
  • 하위 코드는 코딩 과정에서 개발되었습니다.

The answers to the open-ended questions were used to get a more in-depth view of the rationales behind applicant perceptions, from a constructivist paradigm. We used qualitative analysis of content, employing a directed approach.20 With a directed approach, a theory is used as initial guidance for the formation of codes with the goal of validating and extending the theoretical framework. In the present study, theoretical concepts of organisational justice theory formed the foundation for the coding process. We followed the analytical procedure described by Zhang and Wildemuth.21 The first author (SFW) familiarised herself with the data and developed a coding manual.

  • Higher order codes were predetermined and were based on the theoretical concepts of the questionnaire:
    • face validity, applicant differentiation, study relatedness, chance to perform and ease of cheating.
  • Additionally, other concepts of organisational justice theory that were not covered by the questionnaire we administered were included as higher order codes in the coding manual, including
    • distributive justice, reactions during hiring, reactions after hiring and self-perceptions, as well as other items used in previously reported questionnaires referring to procedural justice: scientific evidence, interpersonal warmth, right to use, invasion of privacy, wide-spread use, effort expectancy, information known, reconsideration opportunity, feedback, consistency of administration, openness, treatment and two-way communication.222 
  • Lower order codes were developed during the coding process.

따라서 먼저 공개 답변이 어떤 이론적 개념을 참조하는지 파악한 다음(상위 코드), 지원자가 제공한 구체적인 논거를 코딩했습니다(하위 코드). 또한 분석의 모든 단계에서 비판적인 대화를 나누고 이론의 사각지대를 인식함으로써 이론적 틀을 벗어난 잠재적으로 관련성이 있는 결과를 식별하기 위해 반사성을 활용하고자 했습니다. 제1저자(교육학 박사과정, 교육학 전공)와 제2저자(한국교육개발원 선임연구원, 교육학 전공, 다양성 연구 경험)는 각 선택 방법에 대해 두 개의 답변을 함께 코딩한 후, 각 선택 방법에 대해 10개의 무작위 샘플을 독립적으로 코딩했습니다. 일치도가 높았기 때문에 나머지 답변은 SFW가 코딩한 후 KMSJ가 일관성 검사를 실시했습니다. 일관성 점검은 각 코드에 대해 댓글의 하위 샘플이 해당 코드가 다루는 주제에 실제로 적용되는지 여부를 비판적으로 검토하는 것을 수반했습니다. SFW는 전체 연구팀과 논의한 데이터에서 결론을 도출했습니다. 
Thus, we first identified to which theoretical concept an open answer referred (higher order codes) and subsequently coded the specific argument the applicant provided (lower order codes). We also aimed to employ reflexivity to identify potentially relevant findings that were outside of our theoretical framework, by having critical dialogues throughout all stages of the analyses and being aware for blind spots in the theory. SFW (PhD candidate, background in educational sciences) and the second author (KMSJ; senior researcher, background in educational sciences, experienced in research on diversity) coded two answers for each selection method together and then coded a random sample of 10 answers for each selection method independently. Because there was a high level of agreement, SFW coded the remaining answers, after which KMSJ conducted a consistency check. The consistency check entailed that for each code, it was critically reviewed whether a subsample of the comments did indeed apply to the subject covered by that specific code. SFW drew conclusions from the data that were discussed with the full research team.

3 결과
3 RESULTS

3.1 참가자 특성
3.1 Participant characteristics

총 704명의 지원자가 연구에 참여했습니다(응답률 = 21%). 응답자 중 71%가 여성으로 확인되었고, '기타'로 확인된 지원자는 1명이었습니다. 이 지원자는 하위 그룹 분석에서 제외되었으므로 결과에는 남성과 여성의 범주만 설명되어 있습니다. 또한 35%는 이주 배경을 가지고 있었고(비서양 26%, 서양 9%), 25%는 1세대 대학 지원자였습니다. 사전 교육과 관련하여 77%는 표준 대학 전 교육, 15%는 대학, 8%는 기타 형태의 사전 교육을 통해 직접 지원했습니다. 성별, 부모 교육 및 사전 교육과 관련하여 본 연구의 인구통계학적 분포는 남성과 1세대 대학 지원자가 과소 대표되는 네덜란드에서 수행된 다른 연구와 비슷했습니다.12, 17, 18 이주 배경을 가진 지원자는 네덜란드에서도 과소 대표되지만,12 본 연구에서는 상대적으로 큰 하위 그룹을 구성했으며, 이는 포함된 대부분의 프로그램이 도시에 위치하기 때문일 수 있습니다. 
In total, 704 applicants participated in the study (response rate = 21%). Amongst the respondents, 71% identified as woman, and one applicant identified as ‘other’. This individual was excluded from the subgroup analyses and therefore only the categories men and women are described in the results. Furthermore, 35% had a migration background (26% non-Western, 9% Western), and 25% were first-generation university applicants. With respect to prior education, 77% applied directly from standard pre-university education, 15% from university and 8% from other forms of prior education. With respect to gender, parental education and prior education, demographic distributions in the present study were comparable with those of other research conducted in the Netherlands, where men and first-generation university applicants are underrepresented.12, 17, 18 Applicants with a migration background are also underrepresented in the Netherlands,12 but composed a relatively large subgroup in the present study, which may be due to the urban setting of most of the included programmes.

3.2 일반적 호감도
3.2 General favourability

두 가지 일반적 호감도 항목은 충분하거나 양호한 내적 일관성을 보였습니다(인지능력 검사: α = 0.84, 커리큘럼 샘플링 검사: α = 0.74, 이력서: α = 0.83, 면접: α = 0. 77, 지원동기서: α = 0.79, 인성 설문: α = 0.79, pu-GPA: α = 0.85, SJT: α = 0.81, 기술 테스트: α = 0.79, 가중치 없는 추첨: α = 0.79, 가중치 없는 추첨: α = 0.86). 
The two general favourability items showed a sufficient to good internal consistency (cognitive capacity test: α = 0.84, curriculum-sampling test: α = 0.74, CV: α = 0.83, interview: α = 0.77, motivation letter: α = 0.79, personality questionnaire: α = 0.79, pu-GPA: α = 0.85, SJT: α = 0.81, skills test: α = 0.79, unweighted lottery: α = 0.79, unweighted lottery: α = 0.86).

지원자들은 

  • 커리큘럼 샘플링 시험(평균[M] = 5.32, 95% 신뢰구간[95% CI; 5.24, 5.40], 표 1)에 대해 가장 높은 호감도를 보인 반면,
  • 가중치 추첨(M = 3.05 [2.93, 3.17])과 무가중 추첨(M = 2.97 [2.83, 3.10])에 대해서는 가장 낮은 호감도를 보인 것으로 인식하고 있었습니다.

Applicants provided the highest general favourability ratings for curriculum-sampling tests (mean [M] = 5.32, 95% confidence interval [95% CI; 5.24, 5.40]; Table 1), while weighted lottery (M = 3.05 [2.93, 3.17]) and unweighted lottery (M = 2.97 [2.83, 3.10]) were perceived least favourable.

일반 호감도 점수와 다른 지원자 인식 항목 간의 모든 상관관계는 통계적으로 유의미했지만(p <0.05), 상관관계의 강도는 매우 다양했습니다(표 3 참조). 일반적인 호감도와 가장 강력한 상관관계를 보인 정의성 차원은 안면 타당성이었으며, 부정행위의 용이성과 일반적인 호감도 간의 음의 상관관계는 가장 작았습니다.
All correlations between the general favourability score and other applicant perception items were statistically significant (p < 0.05), but there was a great range in the strengths of the correlations (see Table 3). The justice dimension that was most strongly related with general favourability was face validity, while the negative correlation between ease of cheating and general favourability was the smallest.

지원자의 인식은 프로그램마다 차이가 있는 것으로 나타났습니다(표 2). 일반적으로 지원자들은 자신이 지원한 프로그램에서 사용한 선발 방식에 대해 사용하지 않은 방식에 비해 더 긍정적인 인식을 가지고 있었습니다.
Applicant perceptions appear to differ between different programmes (Table 2). Generally, applicants had more positive perceptions towards selection methods used by the programme they applied to compared with methods that were not used.

 

3.3 정의의 차원
3.3 Justice dimensions

다음 섹션에서는 인식 점수의 정량적 결과와 지원자의 추론에 대한 정성적 결과를 통합하여 다양한 정의의 차원에 대한 결과를 제시할 것입니다. 가장 두드러진 결과만 논의하며, 정량적 및 정성적 결과에 대한 전체 개요는 각각 표 3과 표 4를 참조하시기 바랍니다. 
In the next sections, the results for the different justice dimensions will be presented by integrating the quantitative findings of perception scores and the qualitative findings of applicants' reasoning. Only the most salient findings are discussed, and for a complete overview of the quantitative and qualitative findings, we refer to Tables 3 and 4, respectively.

3.3.1 안면 타당도
3.3.1 Face validity

커리큘럼 샘플링 테스트스킬 테스트는 안면 타당도에서 가장 높은 평가를 받았지만(각각 M = 5.46, 95% CI [5.37, 5.54], M = 5.27 [5.18, 5.36]), 지원자들은 이 차원과 관련하여 이 방법들에 대해 언급하지 않았습니다. 이는 다른 차원에서도 지원자들이 주로 부정적인 측면에 초점을 맞춰 댓글을 달았다는 점을 잘 보여줍니다. 면접은 안면 타당도 척도에서도 높은 평가를 받았습니다(M = 5.17 [5.07, 5.27]). 지원자들은 동기 부여, 성격, 사회적 기술 등의 속성을 중요하게 생각했지만 이러한 속성에 대한 서면 평가보다 구두 면접을 선호했습니다. 이는 인성 설문지의 상대적으로 낮은 평가도 설명할 수 있습니다(M = 3.87 [3.75, 3.99]). 내신성적 역시 낮은 평가를 받았는데(M = 3.70 [3.58, 3.82]), 지원자들은 입학 요건이 이미 프로그램에 입학할 수 있는 능력을 충분히 입증하기 때문에 내신성적은 부가적인 가치가 없다고 언급했습니다. 가중 추첨과 무가중 추첨에 대한 평가가 가장 낮았습니다(각각 M = 2.99 [2.87, 3.12], M = 2.50 [2.37, 2.63]). 지원자들은 두 가지 유형의 추첨이 모두 지원자의 스트레스와 압박감을 줄일 수 있다는 점을 인정했지만, 자신을 차별화하려는 강한 열망을 드러냈으며 추첨이 가장 우수하고 의욕적인 학생을 선발하지 못할 것이라고 믿었습니다. 
Curriculum-sampling tests and skills tests received the highest ratings on face validity (respectively, M = 5.46, 95% CI [5.37, 5.54], M = 5.27 [5.18, 5.36]), but applicants did not comment on these methods with respect to this dimension. This is illustrative of the observation that, also for other dimensions, applicants mainly focused on negative aspects in their comments. Interviews were also rated highly on the scale of face validity (M = 5.17 [5.07, 5.27]). Applicants considered attributes such as motivation, personality and social skills important but preferred an oral interview over a written assessment of these attributes. This may also explain the relatively low rating of personality questionnaires (M = 3.87 [3.75, 3.99]). Pu-GPA also received a low rating on face validity (M = 3.70 [3.58, 3.82]), and applicants mentioned that pu-GPA was not of added value as the admission requirements would already provide enough evidence of their capacity to enter the programme. The lowest ratings were provided for weighted and unweighted lottery (respectively, M = 2.99 [2.87, 3.12], M = 2.50 [2.37, 2.63]). Although applicants acknowledged that both types of lottery can reduce stress and pressure for applicants, they communicated a strong desire to distinguish themselves and believed that lotteries would not select the best and most motivated students.

3.3.2 지원자 변별
3.3.2 Applicant differentiation

스킬 테스트와 인터뷰는 지원자 변별에서 상대적으로 높은 점수를 받았습니다(각각 M = 5.25 [5.16, 5.34], M = 5.23 [5.13, 5.33]). 지원자들이 변별 능력을 평가하고 평가자가 지원자의 역량을 적절히 파악할 수 있다고 언급한 유일한 전형 방식이었습니다. 그러나 대부분의 선발 방식에 대해 지원자들은 해당 방식이 평가 목적이 아닌 다른 기술을 기준으로 지원자를 구별한다고 지적했습니다. 예를 들어, 지원자들에 따르면

  • 지원동기서는 순수한 동기 대신 글쓰기 능력을 평가하고,
  • 선발시험은 목표한 지식이나 기술 대신 시험에 대한 현명함과 준비 시간을 측정합니다.
  • 인성 문항SJT는 지원자의 실제 성격이나 상황에 대한 반응보다는 매우 기본적인 지식이라고 생각되는 사회적 기대에 대한 지식에 따라 지원자를 구분한다는 비판을 받았습니다.
  • Pu-GPA는 지원자들은 같은 학점이라도 지원자의 동기, 노력, 난이도에 따라 차이가 크다고 언급해 가장 낮은 점수(M = 3.25 [3.13, 3.36])를 받았습니다.

Skills tests and interviews received relatively high scores on applicant differentiation (respectively, M = 5.25 [5.16, 5.34], M = 5.23 [5.13, 5.33]). These were the only methods for which applicants mentioned that distinguishing skills are assessed and assessors can get an adequate overview of applicants' competencies. For most of the selection methods, however, applicants indicated that the methods distinguish candidates based on other skills than the methods are intended to assess. For instance, according to applicants,

  • motivation letters assess writing skills instead of pure motivation, and
  • selection tests measure test wiseness and preparation time instead of the targeted knowledge or skills.
  • Personality questionnaires and SJTs received the criticism that applicants are distinguished based on their knowledge of social expectations—which they expected to be very basic knowledge—rather than their actual personality or reactions to situations.
  • Pu-GPA received the lowest scores (M = 3.25 [3.13, 3.36]), as applicants mentioned that the same grade is the result of a wide range in motivation, effort and degree of difficulty.

3.3.3 학업 관련성
3.3.3 Study relatedness

일반적인 호감도에 비해 학업 관련성에 대한 평균 점수는 모든 전형 방법에서 상대적으로 낮았습니다(범위 M = 2.93-4.43). 한 가지 가능한 설명은 각 선발 방법에서 지원자들이 특정 관련 기술만 평가하고 다른 중요한 속성에 대한 정보는 누락되었다고 응답했기 때문입니다. 예를 들어, 지원자들에 따르면 인지 능력 테스트는 정보 처리 및 문제 해결과 같은 관련 기술을 평가할 수 있지만, 사회성 및 의사소통 능력은 고려되지 않습니다. 따라서 지원자들은 어떤 방법도 학습 성과를 완벽하게 예측할 수 없다고 생각했으며, 여러 가지 선발 방법을 조합하는 것을 선호했습니다. 지원자들은 광범위한 기술을 평가하는 것을 선호했지만, 프로그램 과정에서 이러한 기술 을 개발할 수 있는 여지가 있어야 한다고 말하며 딜레마에 빠졌습니다.
Compared with general favourability, the mean scores on study relatedness were relatively low for all selection methods (range M = 2.93–4.43). A possible explanation is that for each selection method, applicants indicated that only certain relevant skills are assessed, while information on other important attributes is missed. For instance, while cognitive capacity tests can, according to applicants, assess relevant skills such as information processing and problem-solving, social and communicative skills are not taken into account. Thus, applicants believed that none of the methods can fully predict study performance and they preferred a combination of selection methods. Although applicants preferred assessment of a broad range of skills, they also stated that there should be room to develop those skills over the course of the program, introducing a dilemma.

스킬 테스트커리큘럼 샘플링 테스트는 학습 관련성에서 가장 높은 점수를 받았습니다(각각 M = 4.43 [4.33, 4.53], M = 4.38 [4.28, 4.48]). 지원자들은 두 가지 방법 모두 광범위한 기술을 평가할 수 있다고 언급했습니다. 또한, 이 두 가지 방법의 경우에만 지원자들이 프로그램과 교재에 대해 더 잘 알 수 있어 지원자가 프로그램 내용에 관심이 있고 대처할 수 있는지를 평가할 수 있는 기회를 제공한다고 답했습니다. 가장 낮은 점수를 받은 방법인 평점과 이력서(각각 M = 3.11 [3.00, 3.22], M = 2.93 [2.82, 3.04])의 경우, 지원자들은 평가된 기술이 너무 일반적이며 이전 성과가 미래의 성공을 예측할 수 없다고 말했습니다. 
Skills tests and curriculum-sampling tests received the highest scores on study relatedness (respectively, M = 4.43 [4.33, 4.53], M = 4.38 [4.28, 4.48]). Applicants mentioned that both methods can assess a broad range of skills. Moreover, only for these methods, applicants stated that they can become more acquainted with the programme and its course materials, creating an opportunity for applicants to assess whether they are interested in and able to cope with the programme content. For the lowest scoring methods—pu-GPA and CV (respectively, M = 3.11 [3.00, 3.22], M = 2.93 [2.82, 3.04])—applicants stated that the assessed skills are too generic and that previous performance is not predictive of future success.

3.3.4 수행 기회
3.3.4 Chance to perform

수행 기회에 대한 평균 점수도 상대적으로 낮았습니다(범위 M = 3.09~4.90). 정성적 결과는 이 결과에 대한 몇 가지 잠재적인 설명을 제공합니다.

  • 첫째, 지원자들은 수행 기회와 관련하여 몇 가지 딜레마를 언급했습니다. 예를 들어, 지원자들은 이전 성과보다 현재 지식과 기술에 대한 평가를 선호했으며 스냅샷 평가의 단점을 지적했습니다.
  • 둘째, 각 선발 방식에 대해 지원자들은 특정 하위 그룹의 수행 기회를 방해할 수 있는 불평등의 원인을 발견했습니다. 예를 들어, 의료 분야 내 네트워크의 존재는 이력서를 작성하는 데 유용한 것으로 간주되었으며, 충분한 재정적 자원이 있는 지원자는 더 나은 시험 결과를 위해 상업적 코칭을 받거나 더 높은 학점을 위해 과외를 받을 수 있었습니다.

기술 테스트면접은 수행 기회에서 더 높은 점수를 받았으며(각각 M = 4.90 [4.80, 5.00], M = 4.77 [4.66, 4.89]), 지원자들은 이러한 방식이 다양한 자질을 보여줄 수 있는 더 많은 공간을 제공한다는 인상을 받았다고 언급했습니다. Pu-GPA는 가장 낮은 점수(M = 3.09 [2.97, 3.21])를 받았는데, 이는 지원 전에 데이터가 수집되었기 때문에 지원자들이 이 선발 방법에 대한 통제력이 부족하다고 느꼈기 때문으로 설명할 수 있습니다.
The mean scores on chance to perform were also relatively low (range M = 3.09–4.90). The qualitative results provide some potentially relevant explanations for this finding.

  • First, applicants mentioned some dilemmas with respect to chance to perform. For instance, they preferred assessment of current knowledge and skills over previous achievements and pointed out drawbacks of snapshot assessments.
  • Second, for each selection method, applicants noticed sources of inequality that can interfere with the chance to perform on a method for certain subgroups. For example, the existence of a network within the medical field was considered useful for building a CV, and applicants with enough financial resources could take commercial coaching for better test results and tutoring for a higher pu-GPA.

Skills test and interview scored higher on chance to perform (respectively, M = 4.90 [4.80, 5.00], M = 4.77 [4.66, 4.89]), and applicants noted that they got the impression that these methods allow for more space to show a broad range of qualities. Pu-GPA received the lowest scores (M = 3.09 [2.97, 3.21]), which can be explained by the fact that applicants experienced a lack of control for this selection method, as data had been collected before application.

3.3.5 부정행위의 용이성
3.3.5 Ease of cheating

부정행위의 용이성에서 가장 높은 점수를 받은 네 가지 전형 방법인 인성검사, 지원동기서, SJT, 면접(각각 M = 6.06 [5.96, 6.16], M = 5.72 [5.62, 5.82], M = 4.72 [4.57, 4.86], M = 4.62 [4.50, 4.74])에 대해 지원자들은 사회적 바람직성이 중요한 역할을 할 수 있다고 언급했습니다. 지원 동기 편지에 대한 또 다른 의견으로는 지원자가 다른 사람에게 편지를 쓰게 함으로써 쉽게 부정행위를 할 수 있다는 것입니다. 이력서 역시 상대적으로 부정행위를 저지르기 쉬운 것으로 간주되었습니다(M = 4.42 [4.28, 4.56]). 지원자들은 이력서 위조가 쉽고, 소수의 이력서 샘플만을 대상으로 정확성 여부를 확인한다고 설명했습니다. 지원자들은 낮은 점수의 선발 방식에서 부정행위가 더 어려운 이유에 대해 별다른 언급을 하지 않았습니다. 
For the four selection methods scoring highest on ease of cheating—personality questionnaire, motivation letter, SJT and interview (respectively, M = 6.06 [5.96, 6.16], M = 5.72 [5.62, 5.82], M = 4.72 [4.57, 4.86], M = 4.62 [4.50, 4.74])—applicants mentioned that social desirability can play a major role. An additional remark about motivation letters is that applicants can easily cheat by letting others write their letter. CV was also considered relatively easy to cheat on (M = 4.42 [4.28, 4.56]). Applicants explained that it is easy to forge documents, and only a small sample of CVs is checked on correctness. Applicants did not have any remarks about why it is harder to cheat on the lower scoring selection methods.

3.3.6 추가 차원
3.3.6 Additional dimensions

설문지에서 다루었던 정의의 차원 외에도 주관식 질문에 대한 답변에서 여러 가지 추가 차원을 확인했습니다.

  • 첫 번째 정의의 차원은 행정의 일관성으로, 결정 절차가 사람에 따라 그리고 시간에 따라 편견 없이 일관되게 적용되는 정도를 의미합니다.22 이력서, 지원동기서, 인터뷰, 기술 테스트는 보다 주관적인 방법으로 간주되어 평가자의 개인적인 의견에 많은 여지를 주고 결과적으로 평가자 간 평가에 잠재적인 차이가 발생할 수 있습니다.
  • 지원자들은 또한 pu-GPA 관리의 일관성에 대해서도 언급했습니다. 현재 pu-GPA는 학교별 시험을 기반으로 합니다. 지원자들은 학교마다 평가 방법, 난이도, 평가 방식에 큰 차이가 있어 다른 학교의 pu-GPA를 비교할 수 없다고 언급했습니다. 

Besides the justice dimensions that were covered by the questionnaire, we identified a number of additional dimensions in the answers to the open-ended questions.

  • A first justice dimension was consistency of administration, which refers to the extent to which decision procedures are consistent and without bias across people and over time.22 CVs, motivation letters, interviews and skills tests were considered as more subjective methods, giving a lot of space to the personal opinion of assessors and consequently creating potential differences in ratings between assessors.
  • Applicants also commented on the consistency of administration for pu-GPA. Currently, pu-GPA is based on school-specific examinations. Applicants mentioned that there is a great difference between schools in assessment methods, difficulty level and way of rating, making pu-GPA from different schools incomparable.

둘째, 설문에서는 학업 관련성에만 초점을 맞춘 반면, 지원자들은 학업 관련성과 직무 관련성을 구분하는 경향이 있었습니다. 예를 들어, 지원자들은 학업 관련성과 관련하여 커리큘럼 샘플링에 대해 대체로 긍정적인 의견을 보인 반면, 성공적인 의료 전문가가 되기 위해서는 사회성 및 의사소통 능력과 같은 다른 기술도 중요하다고 언급했습니다. 지원자들은 기술 테스트, 인터뷰, SJT, 인성 설문지는 미래 직업에 중요한 속성을 평가할 수 있다고 답한 반면, 학점, 인지 테스트, 이력서, 커리큘럼 샘플링 테스트는 그렇지 않다고 답했습니다.
Second, while the questionnaire only focused on study relatedness, applicants tended to make a distinction between study relatedness and job relatedness. For instance, while applicants had generally positive comments about curriculum sampling with respect to study relatedness, they mentioned that other skills are relevant to become a successful health professional, such as social and communicative skills. They stated that skills tests, interviews, SJTs and personality questionnaires can assess important attributes for the future profession, while this was not so much the case for pu-GPA, cognitive tests, CVs and curriculum-sampling tests.

일부 의견은 절차적 정의보다는 선발 절차 결과의 공정성과 관련된 분배적 정의에 관한 것이었습니다.15 지원자들은 무가중 추첨의 장점으로 입학 기회가 균등해져 더 다양한 학생들이 입학할 수 있다는 점을 언급했습니다. 다른 방법을 적용할 경우 앞서 언급한 불균등한 기회로 인해 학생의 다양성이 감소할 수 있다고 답했습니다. 합격한 학생들이 비슷한 의견을 갖게 되고 학생 집단에서 관점의 다양성이 줄어들 수 있다는 점도 SJT에 불리한 결과로 언급되었습니다. 
Some comments were not related to procedural justice, but rather to distributive justice, relating to the fairness of the outcomes of the selection procedure.15 Applicants mentioned that an advantage of unweighted lottery is that the equal chances to be admitted would lead to a more diverse student population. The application of other methods could result in a decrease of student diversity, because of the aforementioned inequal chances to perform. An additional unfavourable outcome was mentioned for SJTs: accepted students would have similar opinions and there would be less diversity in perspectives in the student cohorts.

마지막으로, 선발에 대한 인식의 결과로 여겨지는 개인의 태도 및 행동과 관련된 조직 정의 이론의 '결과' 부분에 대해 많은 언급이 있었습니다.15 특히 우려되는 주제 중 하나는 선발 방식이 지원자들에게 많은 스트레스와 압박을 줄 수 있다는 것이었습니다. 지원자들은 이력서 작성, 커리큘럼 샘플링 시험 공부 등 많은 준비가 필요한 선발 방식이 학업 및 기타 책임과 병행해야 하기 때문에 스트레스를 받을 수 있다고 언급했습니다. 스트레스의 또 다른 원인으로 언급된 것은 시험 당일에 지원자가 느끼는 높은 부담감입니다. 지원자들은 또한 여러 전형 방법을 병행할 경우 스트레스를 받는다는 점을 단점으로 인식했습니다.

Finally, numerous remarks were made about the ‘outcomes’ part of organisational justice theory, which relates to the attitudes and behaviours of individuals that are thought to be a result of perceptions of selection.15 One particular topic of concern was that selection methods can cause a lot of stress and pressure amongst applicants. Applicants mentioned that selection methods that require a lot of preparation, such as building a CV and studying for a curriculum-sampling test, can be stressful as they have to combine this with school and other responsibilities. Another source of stress that was mentioned was the pressure that applicants experience during testing days due to the high stakes involved. Applicants also recognised stress as a drawback of combining multiple selection methods.

3.4 지원자 하위 그룹에 따른 인식의 차이
3.4 Differences in perceptions for subgroups of applicants

각 전형 방법에 대한 전반적 호감도의 하위 그룹별 차이에 대한 선형 혼합 모형의 결과는 표 5에 나타나 있으며, 각 하위 그룹에 대한 기술 통계는 보충 표 S3-S6에 나와 있습니다. 여성에 비해 남성은 가중치 없는 추첨을 유의하게 덜 선호한다고 인식했으며(B = -0.55, 95% CI [-0.84, -0.26]), 이는 1-7점 척도에서 평균적으로 남성은 가중치 없는 추첨을 0.55점 더 낮게 평가했음을 나타냅니다. 성격 설문조사도 남성이 훨씬 덜 호의적으로 인식했습니다(B = -0.23, [-0.47, -0.00]). 다른 선택 방법에서는 성별 차이가 발견되지 않았습니다. 흥미롭게도 개방형 질문에 대한 답변에서 이력서와 pu-GPA가 여성에게 유리하다는 언급이 여러 번 나왔는데, 이는 남성이 일반적으로 미래의 학업 방향을 늦게 시작한다는 것을 설명하는 것입니다. 이러한 우려는 정량적 조사 결과에는 반영되지 않았습니다.
The results of the linear mixed model for subgroup differences in general favourability ratings for each selection method are depicted in Table 5, and the descriptive statistics for each subgroup are provided in supplemental Tables S3–S6. Compared with women, men perceived unweighted lottery as significantly less favourable (B = −0.55, 95% CI [−0.84, −0.26]), indicating that on average, men rated unweighted lottery 0.55 units lower on a scale from 1–7. Personality questionnaires were also perceived as significantly less favourable by men (B = −0.23, [−0.47, −0.00]). No gender differences were found for other selection methods. Interestingly, in the answers to open-ended questions, multiple remarks were given about CV and pu-GPA favouring women, describing that men generally start later with their future study orientation. This concern was not reflected in the quantitative findings.

비 서구권 이주 배경을 가진 지원자들은 이력서(B = 0.50 [0.22, 0.77])와 커리큘럼 샘플링 테스트(B = 0.25 [0.06, 0.44])에 대해 상당히 높은 호감도를 보인 반면, 기술 테스트와 면접은 상당히 낮은 호감도를 나타냈습니다(각각 B = -0.29 [-0.50, -0.09], B = -0.42 [-0.64, -0.20]). 비 서구권 이주 배경을 가진 지원자의 면접 및 기술 테스트 점수가 더 낮게 나온 것은 이러한 방법의 주관적인 특성으로 인해 편견에 더 취약하기 때문일 수 있습니다. 서구권 이주 배경을 가진 지원자에 대한 인식은 이주 배경이 없는 지원자와 다르지 않았습니다. 
Applicants with a non-Western migration background provided significantly higher favourability ratings for CVs (B = 0.50 [0.22, 0.77]) and curriculum-sampling tests (B = 0.25 [0.06, 0.44]), while skills tests and interviews were perceived significantly less favourable (respectively, B = −0.29 [−0.50, −0.09], B = −0.42 [−0.64, −0.20]). The lower scores on interviews and skills tests for applicants with a non-Western migration background may be explained by remarks about the subjective nature of these methods, making them more susceptible to bias. Perceptions of applicants with a Western migration background did not differ from those without a migration background.

대학 예비 교육 마지막 해에 지원하는 지원자들에 비해 이미 대학 수준에서 공부하고 있는 지원자들은 면접과 무가중 추첨을 훨씬 더 긍정적으로 평가했습니다(각각 B = 0.33 [0. 07, 0.58], B = 0.54 [0.17, 0.92]). 반면, pu-GPA(B = -0.83 [-1.14, -0.52]), 인지 테스트(B = -0.31 [-0.59, -0.04]) 및 가중치 추첨(B = -0.41 [-0.74, -0.08])에 대한 호감도는 유의미하게 낮았습니다. 다른 형태의 사전 교육을 받은 지원자들은 대학 교육을 받은 지원자들에 비해 인성 설문과 면접을 훨씬 더 긍정적으로 평가했습니다(각각 B = 0.49 [0.09, 0.89], B = 0.46 [0.12, 0.80]). 지원자들은 pu-GPA에 대해서만 대학 이전 교육의 역할에 대해 언급했는데, 대학 이전 교육 마지막 해에 지원하지 않은 지원자의 pu-GPA는 이미 과거의 성취이며outdated, 지원자의 현재 실력을 정확하게 나타내지 못한다는 의견을 제시했습니다. 
Compared with applicants applying during their final year of pre-university education, applicants who were already studying at university-level rated interviews and unweighted lottery significantly more positive (respectively, B = 0.33 [0.07, 0.58], B = 0.54 [0.17, 0.92]), while their favourability ratings were significantly lower for pu-GPA (B = −0.83 [−1.14, −0.52]), cognitive tests (B = −0.31 [−0.59, −0.04]) and weighted lottery (B = −0.41 [−0.74, −0.08]). Applicants from alternative forms of prior education rated personality questionnaires and interviews significantly more favourable compared with applicants from pre-university education (respectively, B = 0.49 [0.09, 0.89], B = 0.46 [0.12, 0.80]). Only with respect to pu-GPA, applicants commented on the role of prior education, indicating that pu-GPAs for applicants not applying during their final year of pre-university education are outdated and do not accurately represent applicants' current skills.

1세대 대학 출신 여부에 따른 지원자 인식의 차이는 발견되지 않았습니다.
No differences in applicant perceptions were found based on first-generation university status.

4 논의
4 DISCUSSION

본 연구의 목적은 학부 HPE의 맥락에서 지원자들이 다양한 선발 방법을 어떻게 인식하는지에 대한 심층적인 이해를 얻는 것이었습니다. 연구 결과에 따르면

  • 지원자들은 커리큘럼 샘플링 시험과 기술 시험에 대한 선호도가 가장 높은 반면, 가중치 추첨과 무가중 추첨을 가장 선호하지 않는 것으로 나타났습니다.
  • 또한 선발 방식에 대한 지원자의 인식은 성별, 인종, 사회경제적 지위, 학력에 따른 지원자 하위 그룹에서 전반적으로 유사하게 나타났습니다.
  • 마지막으로, 지원자들은 한 가지 방법만으로는 충분하다고 생각하지 않고 여러 가지 선발 방법을 조합하는 것을 선호한다는 결과가 나타났습니다.  

The aim of the present study was to gain a deeper understanding of how applicants perceive different selection methods within the context of undergraduate HPE. Our findings indicate that

  • applicants have the strongest preference for curriculum-sampling tests and skills tests, while they consider weighted and unweighted lotteries the least favourable.
  • Furthermore, applicant perceptions of selection methods are overall similar across subgroups of applicants based on gender, ethnicity, SES and prior education.
  • Finally, the results show that applicants do not think one single method is sufficient, but instead prefer a combination of selection methods.

첫 번째 주요 결과는 지원자들이 '폭넓은' 선발 기준과 자신이 더 '통제할 수 있다'고 느끼는 선발 방법을 선호한다는 것입니다. 가장 높은 평가를 받은 세 가지 선발 방법인 커리큘럼 샘플링 테스트, 기술 테스트, 면접은 모두 확장된 기준을 반영하며, 이는 내신성적과 같은 전통적인 방법에 포함되는 인지적 능력을 넘어서는 자질을 평가하는 것을 목표로 합니다.23 본 연구에 참여한 지원자들은 엄격한 입학 요건으로 인해 이미 인지적 특성에 따라 강하게 사전 선발되었기 때문에 다른 영역에서 자신을 차별화하는 것을 선호하는 것은 놀라운 일이 아닙니다. 실제로 지원자들은 입학 요건보다 pu-GPA와 인지능력 테스트의 부가가치에 의문을 제기했습니다. 또한 조직 정의 이론15과 의대 선발에 관한 이전 연구에 따르면,24 지원자들은 선발 과정에서 '자신을 표현하고 싶은' 욕구를 가지고 있으며, 이는 더 넓은 기준을 반영하는 방법을 통해 더 잘 가능하다고 주장할 수 있습니다. 우연에 맡기는 추첨과 선발 전 획득하는 pu-GPA의 낮은 평점은 지원자들이 '통제된 상태'를 선호한다는 것을 나타냅니다. 앞서 주장한 바와 같이,1,2 이는 조직 정의 이론을 통해서도 설명할 수 있는데, 지원자들은 결정 과정에 영향을 미칠 수 있는 기회가 있을 때 그 방법을 더 공정하다고 인식하기 때문입니다.15 이 결과는 또한 성공과 실패가 자신의 노력과 재능에 기인할 수 있다는 능력주의적 가치에 대한 광범위한 사회적 인식과 관련이 있습니다.25 결과적으로 HPE 선발 지원자들은 자신이 통제할 수 없는 거부감을 받아들일 수 있습니다.26

A first key finding is that applicants have a preference for ‘broadened’ selection criteria and selection methods on which they feel to be more ‘in control’. The three highest rating selection methods – curriculum-sampling tests, skills tests and interviews—all reflect broadened criteria, which aim to assess qualities that go beyond the cognitive abilities that are included in traditional methods such as pu-GPA.23 Applicants in the current study were already strongly preselected based on cognitive characteristics due to the stringent admission requirements; thus, it is not surprising that they prefer to distinguish themselves in other areas. In fact, applicants questioned the added value of pu-GPA and cognitive capacity tests over the admission requirements. Additionally, according to organisational justice theory,15 as well as previous research in medical school selection,24 applicants have the desire to ‘express themselves’ during a selection procedure, and it can be argued that this is better possible with methods that reflect broadened criteria. The low ratings of lotteries—leaving it to chance—and pu-GPA—obtained prior to selection—indicate that applicants prefer to be ‘in control’. As previously argued,1, 2 this can also be explained through organisational justice theory, because applicants perceive methods as fairer when they have an opportunity to influence the decision process.15 This finding can furthermore be related to a broader societal appreciation of meritocratic values, implying that success and failure can be attributed to one's own efforts and talent.25 Consequently, applicants for selection into HPE can find rejections that feel beyond their control difficult to accept.26

둘째, 연구 결과에 따르면 지원자의 배경은 다양한 선발 방식에 대한 인식에 큰 영향을 미치지 않는 것으로 나타났습니다. 성별, 이주 배경, 학력에 따라 지원자 하위 그룹 간에 통계적으로 유의미한 인식 차이가 발견되었지만, 이러한 차이가 갖는 실질적인 의미는 무시할 수 있는 수준이며, 전반적으로 지원자들의 인식은 매우 유사했습니다. 성별에 따른 인식 차이가 크지 않은 것은 심리학 지원자를 대상으로 실시한 이전 연구 결과와 일치하는 결과입니다.2 그러나 인종 및 사회경제적 지위(SES)와 관련된 연구 결과는 예상치 못한 것이었는데, 이전 연구에 따르면 인종적으로 소수이거나 사회경제적 배경이 낮은 학생들이 선발에 대해 더 부정적으로 인식하는 것으로 나타났습니다.1, 3, 11 잠재적으로 지원자들은 선발의 형식적 특성(즉, 선발 방법)은 배경에 관계없이 비슷하게 인식하는 반면 사회 인구학적 소수 배경을 가진 지원자들은 대인 대우와 같은 절차적 정의의 다른 요소에 대해 더 부정적인 인식을 가질 수 있기 때문입니다. 실제로 소수 민족 학생들이 의과대학에 재학 중일 때 불공정한 대우에 대해 더 많이 인식한다는 연구 결과가 있습니다.27, 28 소수 민족 배경을 가진 지원자들이 특정 선발 방법에 대해 더 부정적인 인식을 갖지 않았다는 결과에 대한 다른 이유는 이전 연구에서 주로 아직 지원하지 않은 예비 대학생을 대상으로 했기 때문에 부정확하거나 불완전한 정보에 근거하여 인식했을 수 있습니다.3, 11 반대로 본 연구의 참가자들은 선발에 대한 경험이 있고 이에 대해 더 잘 이해하고 있었을 가능성이 높습니다. 따라서 소수 배경을 가진 학생들은 주로 지원 전 기간에 선발 절차에 대한 정확한 정보에 대한 접근성이 떨어질 수 있습니다.29 그럼에도 불구하고, 이전 연구와 마찬가지로 질적 연구 결과는 지원자들이 선발 방법이 공평한 의대 입학을 방해할 수 있다고 생각한다는 것을 보여주었는데, 예를 들어 소수 배경을 가진 지원자들은 의료 분야의 코칭, 과외 및 소셜 네트워크에 대한 접근성이 낮기 때문입니다.3, 11, 29
Second, our findings suggest that applicants' background does not play a substantial role in their perceptions of different selection methods. Although we did find some statistically significant differences in perceptions between applicant subgroups based on gender, migration background and prior education, the practical meaning of these differences is negligible, and their perceptions were overall very similar. For gender, this lack of difference in perceptions is in accordance with findings of a previous study conducted with psychology applicants.2 However, our findings with respect to ethnicity and SES were unexpected, as previous research suggested that students with an ethic minority or lower socio-economic background have more negative perceptions towards selection.1, 3, 11 Potentially, applicants perceive the formal characteristics of selection (i.e. selection methods) similar regardless of their background, while applicants with sociodemographic minority backgrounds may have more negative perceptions regarding other components of procedural justice, such as interpersonal treatment. Indeed, research has indicated that ethnic minority students have more perceptions of unfair treatment when they are in medical school.27, 28 An alternative reason for the finding that applicants with minority backgrounds did not have more negative perceptions towards certain selection methods is that previous studies mainly included eligible pre-university students who have not yet applied and could have based their perceptions on inaccurate or incomplete information.3, 11 Contrarily, participants in the present study had experience with selection and probably had a better understanding of it. Thus, students with minority backgrounds possibly experience less access to accurate information about the selection procedure mainly in the period prior to application.29 Nevertheless, corresponding with previous studies, the qualitative findings did provide indications that applicants believe selection methods can hinder equitable admission to medical education, for instance, because applicants with a minority background have less access to coaching, tutoring and a social network in the medical field.3, 11, 29

세 번째 주요 발견은 지원자들에 따르면 궁극적인 해결책은 없으며 모든 선발 방법에는 특정한 장단점이 있다는 것입니다. 이는 정성적 결과에서 확인된 여러 가지 상반된 선호도에 잘 반영되어 있습니다. 우리가 발견한 가장 두드러진 딜레마는 다음 등이었습니다. 

  • (1) 지원자가 현재 제공할 수 있는 것을 측정하는 것과 스냅샷 평가의 부정적인 결과에 대응하는 것,
  • (2) 기존 지식과 기술을 측정하는 것과 프로그램 기간 동안 기술을 성장시키고 개발할 공간을 제공하는 것,
  • (3) 최고의 학생 선발과 최고의 미래 전문가 선발,
  • (4) 포괄성을 위해 여러 선발 방법을 결합하는 것과 지나친 스트레스와 압박을 방지하는 것 

첫 번째 딜레마는 분명 기회의 공정성 차원을 반영하고 있으며, 앞서 언급한 지원자들이 선발 과정을 통제할 수 있다고 느끼고자 하는 욕구를 강조하고 있습니다. 두 번째와 세 번째 딜레마는 학업 및 직무 관련성과 관련이 있으며 학계에서도 논쟁의 대상이 되고 있습니다.23 마지막 딜레마는 조직 정의 이론의 다른 부분, 즉 지원자의 인식과 개인 및 조직 결과 사이의 관계와 더 관련이 있습니다.15 이 이론에 따르면 공정성에 대한 인식은 동기부여, 자존감, 자기효능감('채용 시 반응')과 같은 변수에 영향을 미칠 수 있습니다.15 본 연구에서는 스트레스와 압박감이 관심사로 제기되었는데, 지원자들은 주로 준비 과정의 양과 관련된 높은 위험과 관련된 것으로 나타났습니다. 또한, HPE에 재학 중인 학생들 사이에서 심리적 스트레스가 상당히 만연한 것으로 확인되었습니다.30 그럼에도 불구하고 지금까지 채용과 관련한 연구들은 지원자의 복지에 거의 또는 전혀 관심을 기울이지 않았으며, 스트레스라는 특정 개념은 조직 정의 이론에 포함되지 않았습니다. 본 연구의 결과는 이를 검증하기 위해서는 추가 연구가 필요하겠지만, '채용 중 반응'의 추가 하위 범주로 이를 이론에 추가하는 것이 적절할 수 있음을 시사합니다. 
A third key finding is that according to applicants, there is no ultimate solution; all selection methods are accompanied by certain advantages and disadvantages. This is well reflected by a number of conflicting preferences that we identified in the qualitative results. The most distinctive dilemmas we found were

  • (1) measuring what applicants can offer at the present versus countering negative consequences of snapshot assessments,
  • (2) measuring existing knowledge and skills versus providing space to grow and develop skills during the program,
  • (3) selecting the best students versus selecting the best future professionals and
  • (4) combining multiple selection methods for comprehensiveness versus preventing too much stress and pressure.

The first dilemma evidently reflects the justice dimension of chance to perform and stresses the aforementioned desire of applicants to feel in control of the selection process. The second and third dilemmas relate to study and job relatedness and are also topic of debate within the academic field.23 The final dilemma relates more to another part of organisational justice theory, namely, the relationship between applicants' perceptions and individual and organisational outcomes.15 According to the theory, perceptions of fairness can affect variables such as motivation, self-esteem and self-efficacy (referred to as ‘reactions during hiring’).15 Feelings of stress and pressure were brought up as a topic of concern in the present study, which applicants mainly related to the amount of preparation and the high stakes involved. A review also identified considerable prevalence of psychological stress amongst students in HPE.30 Nevertheless, thus far, studies have paid little to no attention to applicant well-being with respect to selection and the particular concept of stress is not included in organisational justice theory. Results of the present study indicate that it may be relevant to add this to the theory as an additional subcategory of ‘reactions during hiring’, although further research would be required to validate this.

본 연구의 강점은 우리가 알기로는 다양한 사회인구학적 하위 집단의 인식을 비교하고 다양한 선발 방법에 대한 지원자의 인식에 대한 근본적인 논거를 모색한 최초의 연구라는 점입니다. 또한 여러 프로그램에서 데이터를 수집했습니다. 그 결과, 지원자들은 자신이 접해보지 못한 전형 방식에 대해서도 의견을 제시했습니다. 이러한 방식으로 지원자가 선택한 프로그램에 따라 선발 절차가 영향을 미칠 수 있다는 점을 고려할 때, 연구 결과는 자의적 선택의 영향을 덜 받았습니다.16 그러나 이러한 강점에도 불구하고 응답자들이 설문지의 일부 방법에 대해서는 경험이 있는 반면, 다른 방법에 대해서는 선발 방법에 대한 짧은 설명만을 바탕으로 인식을 평가했다는 한계가 있었습니다. 일부 방법은 어떤 프로그램에서도 사용되지 않았습니다. 지원자가 지원한 프로그램을 통제하여 이러한 문제를 최대한 완화했습니다. 또한 실시된 설문조사는 포괄성, 방어 가능성, 프로세스의 역할 등 지원자의 인식에 영향을 미칠 수 있는 모든 요소를 파악하지 못했습니다.31 본 연구의 또 다른 한계는 표본 규모가 비교적 컸음에도 불구하고 초청된 지원자 중 21%만이 설문에 응답했다는 점입니다. 따라서 이들의 인식이 전체 지원자 풀을 완전히 대표하지 못할 수도 있습니다. 그럼에도 불구하고 본 연구의 표본은 인구통계학적 특성 측면에서 이전 연구의 지원자 풀과 비슷했습니다.12, 17 마지막 한계는 개방형 질문의 자발적 성격과 하위 그룹의 불균등한 분포로 인해 본 연구에서 다양한 지원자 하위 그룹의 논증을 직접 비교할 수 없다는 것입니다. 따라서 정량적 데이터로 포착할 수 없는 특정 하위 그룹의 인식 차이가 발견되지 않았을 수 있습니다. 
A strength of the present study is that, to our knowledge, it is the first to compare perceptions of different sociodemographic subgroups and seek for the underlying argumentation behind applicant perceptions for a great range of selection methods. Additionally, we collected data from multiple programmes. Consequently, applicants also provided their opinions for methods that they had not been exposed to. This way, our results were less influenced by self-selection, given that the selection procedure can play a role in applicants' programme of choice.16 However, this strength was also accompanied by the limitation that the respondents did have experience with some of the methods in the questionnaire, while for other methods, their perceptions were based solely on a short description of the selection method. Some of the methods were not employed by any of the programmes. We mitigated this as much as possible by controlling for the programme to which applicants had applied. Furthermore, the survey that was administered did not capture all factors that could influence applicant perceptions, such as comprehensiveness, defensibility and the role of the process.31 Another limitation of the present study was that, although the sample size was relatively large, only 21% of invited applicants responded to the survey. Consequently, their perceptions may not be fully representative for the complete applicant pool. Nevertheless, our sample was comparable with applicant pools in previous studies in terms of demographic characteristics.12, 17 A final limitation is that the present study could not directly compare the argumentation of different subgroups of applicants due to the voluntary nature of the open-ended questions and the unequal distribution of subgroups. Consequently, certain subgroup differences in perceptions that could not be captured by the quantitative data may have remained undiscovered.

현재의 연구는 절차적 정의의 한 측면(즉, 형식적 특성)에 초점을 맞추었지만, 향후 연구에서는 대인적 대우와 같은 다른 정의 요소에도 관심을 기울일 수 있습니다.15 또한, 신청자 인식에 관한 보다 근본적인 질문은 아직 조사되지 않았습니다: 이러한 인식의 발달에 어떤 메커니즘이 작용하는가? 지원자들의 인식의 기반이 되는 근본적인 가치는 무엇인가? 또한, 본 연구에서 지원자들은 여러 가지 방법을 조합하여 선호했기 때문에 다양한 방법을 조합하여 선발 절차를 어떻게 인식하는지 조사하는 것도 가치가 있을 수 있습니다. 총체적 접근법에 대한 지원자의 인식을 평가하는 것은 특히 흥미로운데, 이 접근법은 포괄성과 WA 모두에 주의를 기울이기 때문입니다.32 또한 본 연구의 결과에 따르면 지원자들은 자신이 지원한 프로그램과 자신이 준비한 프로그램에서 사용하는 방법을 더 선호하는 것으로 나타났습니다. 향후 연구에서는 숨겨진 커리큘럼에 대한 지원자의 인식이 이러한 선호도에 영향을 미치는지 여부를 조사할 수 있습니다. 향후 연구의 또 다른 흥미로운 방향은 지원자의 배경에 따라 선발 시 인식과 성과 간의 관계가 달라지는지에 대한 질문과 관련이 있습니다. 이전 연구에 따르면 지원자의 인식과 성과는 양의 상관관계가 있으며,2, 5, 6 특정 인구통계학적 하위 그룹은 선발 과정에서 성과가 저조한 반면,12, 13, 17, 18 지원자의 배경에 관계없이 인식은 비슷하다는 사실이 밝혀졌습니다. 또한 아직 지원하지 않은 자격을 갖춘 학생들을 대상으로 하위 그룹에 대한 인식을 조사하는 것도 의미가 있을 수 있습니다. 마지막으로, 연구자들은 지원자들이 관련성이 있는 것으로 간주한 행정의 일관성 및 직무 관련성, 지원자 복지에 대한 항목을 포함하는 것을 고려할 수 있습니다.

The current study focused on one aspect of procedural justice (i.e. formal characteristics), but future studies can also pay attention to other justice components, such as interpersonal treatment.15 Additionally, more fundamental questions regarding applicant perceptions have not been investigated yet, such as: What mechanisms play a role in the development of these perceptions? What are the underlying values of applicants on which their perceptions are based? Furthermore, in the present study, applicants preferred a combination of different methods, so it could be valuable to examine how they perceive selection procedures with different combinations of methods. It would be particularly interesting to evaluate applicant perceptions regarding a holistic approach, as this approach pays attention to both comprehensiveness and WA.32 Furthermore, results of the present study suggest that applicants have a stronger preference for the methods employed by the programmes to which they have applied and for which they have prepared. Future research could examine whether applicant perceptions of the hidden curriculum play a role in this preference. Another interesting direction for future research relates to the question of whether the relationship between perceptions and performance during selection differs based on applicants' background. Previous studies have indicated that applicant perceptions and performance are positively correlated,2, 5, 6 and that certain demographic subgroups perform less well during selection,12, 13, 17, 18 while we found that perceptions were similar for applicants regardless of their background. Additionally, it can be relevant to investigate subgroup perceptions for eligible students who have not applied yet. Finally, researchers can consider including items on consistency in administration and job relatedness, as well as applicant well-being, because these topics were considered relevant by applicants.

실무적인 관점에서 볼 때, 이번 조사 결과는 지원자들이 선호하는 선발 방법을 고려함으로써 선발 위원회가 절차를 설계하는 데 도움이 될 수 있는 통찰력을 제공합니다. 그러나 선발 방법(정치적 타당성의 요소)에 대한 지원자의 인식과 다른 타당성 지표 사이에는 마찰이 있을 수 있습니다.1, 2 예를 들어, 지원자들은 선발 방법으로 pu-GPA를 사용하는 것에 대해 부정적인 인식을 가지고 있지만, pu-GPA는 미래의 학업 성과를 강력하게 예측합니다.33 마찬가지로, 본 연구의 결과에 따르면 커리큘럼 샘플링 시험을 포함하면 비 서구권 배경을 가진 지원자를 더 많이 유치할 수 있지만, 제출한 연구에서 이 하위 그룹의 지원자는 그러한 시험에서 성적이 낮다는 사실을 발견했습니다.34 따라서 어떤 선발 방법을 포함할지 결정할 때 지원자의 인식을 고려하는 동시에 넓은 의미에서 타당성의 다른 측면도 고려할 수 있습니다.35 그럼에도 불구하고, 우리의 연구 결과는 어떤 선발 방법이 덜 매력적이고 더 나은 설명이 필요한지 식별하는 데 도움이 될 수 있습니다.2 선발 방법에 대한 명확하고 투명한 커뮤니케이션은, 특히 더 '주관적'으로 인식되고 때로는 부정확한 정보에 기반하여 인식되는 광범위한 기준의 경우, 지원자의 인식을 개선할 수 있습니다. 예를 들어, 지원자들은 이력서 작성에 의료 분야 소셜 네트워크가 필요하다고 생각한 반면, 본 연구에 참여한 프로그램에서는 의료 분야 외의 다른 관련 경험도 중요하게 여겼습니다. 지원자의 인식을 이해하는 것이 프로그램에 어떤 선발 방법을 포함해야 하는지에 대한 명확한 해결책을 제시할 수는 없지만, 우리의 질적 연구 결과는 프로그램이 동기 부여와 성과를 개선하거나 중도 탈락을 방지하기 위해 지원자의 요구를 고려하여 선발 방법의 실행을 조정할 수 있는 방법에 대한 귀중한 통찰력을 제공합니다. 예를 들어, 지원자들은 선발이 자신의 복지에 미치는 영향을 우려하기 때문에 프로그램은 커리큘럼 샘플링 시험의 준비 자료의 양을 제한할 수 있습니다. 
From a practical viewpoint, our findings provide insights that can help selection committees design their procedures, by considering selection methods that are preferred by applicants. However, there can be frictions between applicant perceptions of selection methods (an element of political validity) and other indicators of validity.1, 2 For instance, while applicants hold negative perceptions towards the use of pu-GPA as a selection method, pu-GPA is strongly predictive of future academic performance.33 Likewise, the findings of the present study suggest that the inclusion of curriculum-sampling tests can attract more applicants with a non-Western background, but we found in a submitted study that this subgroup of applicants performs less well on such tests.34 Thus, when deciding which selection methods to include, applicant perceptions can be taken into account, while also considering other aspects of validity in a broad sense.35 Nevertheless, our findings can help identify which selection methods are less attractive and require better explanation.2 Clear and transparent communication about selection methods may improve applicant perceptions, especially in the case of broadened criteria that are perceived as more ‘subjective’ and for which perceptions were sometimes based on inaccurate information. For instance, applicants believed that a social network in the medical field is necessary for building a CV, while the programmes in our study also value other relevant experience outside of the medical field. Although understanding applicant perceptions cannot provide clear-cut solutions about which selection methods programmes should include, our qualitative findings provide valuable insights into how programmes can adjust the implementation of their selection methods to take applicants' needs into account to improve motivation and performance or prevent withdrawal. For example, because applicants were concerned about the impact of selection on their well-being, programmes could limit the volume of preparatory materials for curriculum-sampling tests.

결론적으로, 학부 HPE 선발에 참여하는 지원자들은 자신이 통제할 수 있다고 인식하고 인지능력 이외의 다른 자질을 평가하는 선발 방식을 선호합니다. 또한, 본 연구에 따르면 개별 선발 방법에 대한 지원자의 인식은 일반적으로 다수 배경을 가진 지원자와 소수 배경을 가진 지원자 간에 유사합니다. 지원자의 상반된 요구와 지원자의 인식과 다른 타당성 지표 간의 마찰로 인해 선발 방법과 방법 내 수정 사항에 대한 보다 명확하고 투명한 커뮤니케이션이 필요합니다.

In conclusion, applicants participating in selection for undergraduate HPE prefer selection methods for which they perceive to be in control and which assess other qualities than cognitive ability. Additionally, the present study indicated that applicant perceptions of individual selection methods are generally similar between applicants with majority and minority backgrounds. Due to contradictory needs of applicants and frictions between applicant perceptions and other indicators of validity, we call for a clearer and more transparent communication of selection methods and modifications within methods.


Med Educ. 2023 Feb;57(2):170-185. doi: 10.1111/medu.14949. Epub 2022 Oct 23.

Applicant perceptions of selection methods for health professions education: Rationales and subgroup differences

Affiliations collapse

1Institute of Medical Education Research Rotterdam, Erasmus MC, University Medical Center Rotterdam, Rotterdam, The Netherlands.

2Technical Medical Centre, Technical Medicine, University of Twente, Enschede, The Netherlands.

3Department of Pharmaceutical Sciences, Utrecht University, Utrecht, The Netherlands.

4Department of Medical Biology, Amsterdam UMC, University of Amsterdam, Amsterdam, The Netherlands.

5Faculty of Medicine VU, Amsterdam UMC location Vrije Universiteit Amsterdam, Amsterdam, The Netherlands.

6LEARN! Research Institute for Learning and Education, Faculty of Psychology and Education, VU University Amsterdam, Amsterdam, The Netherlands.

PMID: 36215062

PMCID: PMC10092456

DOI: 10.1111/medu.14949

Free PMC article

Abstract

Context: Applicant perceptions of selection methods can affect motivation, performance and withdrawal and may therefore be of relevance in the context of widening access. However, it is unknown how applicant subgroups perceive different selection methods.

Objectives: Using organisational justice theory, the present multi-site study examined applicant perceptions of various selection methods, rationales behind perceptions and subgroup differences.

Methods: Applicants to five Dutch undergraduate health professions programmes (N = 704) completed an online survey including demographics and a questionnaire on applicant perceptions applied to 11 commonly used selection methods. Applicants rated general favourability and justice dimensions (7-point Likert scale) and could add comments for each method.

Results: Descriptive statistics revealed a preference for selection methods on which applicants feel more 'in control': General favourability ratings were highest for curriculum-sampling tests (mean [M] = 5.32) and skills tests (M = 5.13), while weighted lottery (M = 3.05) and unweighted lottery (M = 2.97) were perceived least favourable. Additionally, applicants preferred to distinguish themselves on methods that assess attributes beyond cognitive abilities. Qualitative content analysis of comments revealed several conflicting preferences, including a desire for multiple selection methods versus concerns of experiencing too much stress. Results from a linear mixed model of general favourability indicated some small subgroup differences in perceptions (based on gender, migration background, prior education and parental education), but practical meaning of these differences was negligible. Nevertheless, concerns were expressed that certain selection methods can hinder equitable admission due to inequal access to resources.

Conclusions: Our findings illustrate that applicants desire to demonstrate a variety of attributes on a combination of selection tools, but also observe that this can result in multiple drawbacks. The present study can help programmes in deciding which selection methods to include, which more negatively perceived methods should be better justified to applicants, and how to adapt methods to meet applicants' needs.

삼중 목적에서 사중 목적으로: 환자 돌봄은 의료인 돌폼을 필요로 한다(Ann Fam Med. 2014)
From Triple to Quadruple Aim: Care of the Patient Requires Care of the Provider
Thomas Bodenheimer, MD1
Christine Sinsky, MD2,3

 

소개
INTRODUCTION

돈 버윅과 동료들이 의료 서비스 용어집에 트리플 목표를 도입한 이후, 이 개념은 의료 서비스 시스템의 모든 영역으로 확산되었습니다. 트리플 목표는 의료 시스템 성과를 최적화하기 위한 접근법으로, 의료 기관이 다음 세 가지 차원의 성과를 동시에 추구할 것을 제안합니다.1

  • 인구의 건강 개선,
  • 환자의 치료 경험 향상,
  • 1인당 의료 비용 절감

트리플 목표의 주요 목표는 인구의 건강 개선이며, 환자 경험 개선과 비용 절감이라는 두 가지 보조 목표는 1차 목표 달성에 기여하는 것입니다. 
Since Don Berwick and colleagues introduced the Triple Aim into the health care lexicon, this concept has spread to all corners of the health care system. The Triple Aim is an approach to optimizing health system performance, proposing that health care institutions simultaneously pursue 3 dimensions of performance:

  • improving the health of populations,
  • enhancing the patient experience of care, and
  • reducing the per capita cost of health care.1 

The primary Triple Aim goal is to improve the health of the population, with 2 secondary goals—improving patient experience and reducing costs—contributing to the achievement of the primary goal.

저자들은 전국의 일차 의료기관을 방문하면서2 "우리는 트리플 목표를 프레임워크로 채택했지만 임상의와 직원들의 스트레스가 많은 직장 생활이 3가지 목표를 달성하는 데 영향을 미칩니다."라는 말을 반복해서 들었습니다. 이러한 의견은 인구 건강 개선에 성공하기 위해 환자 경험 및 비용 절감 목표와 마찬가지로 반드시 달성해야 하는 네 번째 목표, 즉 의료진 및 직원의 직장 생활 개선이 있을 수 있지 않을까 하는 의문을 갖게 했습니다. 트리플 목표는 쿼드러플 목표가 되어야 할까요?
In visiting primary care practices around the country,2 the authors have repeatedly heard statements such as, “We have adopted the Triple Aim as our framework, but the stressful work life of our clinicians and staff impacts our ability to achieve the 3 aims.” These sentiments made us wonder, might there be a fourth aim—improving the work life of health care clinicians and staff—that, like the patient experience and cost reduction aims, must be achieved in order to succeed in improving population health? Should the Triple Aim become the Quadruple Aim?

의사와 진료에 대한 기대치 상승
RISING EXPECTATIONS OF PHYSICIANS AND PRACTICES

사회는 특히 1차 진료 분야에서 의사와 진료에 대해 점점 더 많은 것을 기대하고 있습니다. 환자들은 자신의 건강이 개선되고, 적시에 공감하는 방식으로 진료를 받고, 자신이 선택한 우수한 임상의와 지속적인 관계를 유지하기를 원합니다.3 환자 중심의 진료는 "내가 필요로 하고 원하는 도움을 필요할 때 정확히 제공하는 것"으로 설명됩니다.4 그러나 일차 진료의 경우, 사회는 이러한 높은 기준을 충족할 수 있는 자원을 제공하지 못했습니다. 
Society expects more and more of physicians and practices, particularly in primary care. Patients want their health to be better, to be seen in a timely fashion with empathy, and to enjoy a continuous relationship with a high-quality clinician whom they choose.3 A patient-centered practice has been described as, “They give me exactly the help I need and want exactly when I need and want it.”4 Yet for primary care, society has not provided the resources to meet these lofty benchmarks.

의사의 번아웃
PHYSICIAN BURNOUT

사회적 기대와 직업적 현실 사이의 큰 격차로 인해 미국 의사의 46%가 번아웃 증상을 경험하는 것으로 나타났습니다. 번아웃은 여러 전문 분야에 걸쳐 널리 퍼져 있으며, 특히 응급의학과 의사, 일반 내과 의사, 신경과 의사, 가정의학과 의사에게 많이 나타납니다.5 2014년 설문조사에 따르면 가정의학과 의사의 68%와 일반 내과 의사의 73%가 경력을 새롭게 시작할 수 있다면 같은 전문 분야를 선택하지 않겠다고 답했습니다.6 직업적 소진은 업무에 대한 열정의 상실, 냉소주의, 낮은 개인적 성취감으로 특징지어지며 조기 퇴직, 알코올 사용, 자살 충동과 관련이 있습니다.5,7 최근 RAND Corporation의 조사에 따르면 의사 만족도의 주요 요인은 양질의 진료를 제공할 수 있는 능력입니다.7 따라서 의사의 불만족은 의료 시스템이 양질의 진료에 장애가 된다는 조기 경고 신호입니다. 
The wide gap between societal expectations and professional reality has set the stage for 46% of US physicians to experience symptoms of burnout. Widespread across specialties, burnout is especially prevalent among emergency department physicians, general internists, neurologists, and family physicians.5 In a 2014 survey, 68% of family physicians and 73% of general internists would not choose the same specialty if they could start their careers anew.6 Professional burnout is characterized by loss of enthusiasm for work, feelings of cynicism, and a low sense of personal accomplishment and is associated with early retirement, alcohol use, and suicidal ideation.5,7 According to a recent RAND Corporation survey, the principal driver of physician satisfaction is the ability to provide quality care.7 Physician dissatisfaction, therefore, is an early warning sign of a health care system creating barriers to high-quality practice.

우리는 의사들이 다음과 같은 말을 하는 것을 들었습니다:
We have heard physicians making such statements as:

"의술을 행하는 기쁨이 사라졌다."
“The joy of practicing medicine is gone.”

"의사라는 직업이 너무 싫어요... 하루빨리 벗어나고 싶어요."
“I hate being a doctor…I can’t wait to get out.”

"얼마나 패배감을 느끼는지 말할 수 없습니다... 좋은 치료를 제공했는데 벌을 받는다는 느낌은 신경이 곤두서게 합니다."
“I can’t tell you how defeated I feel…The feeling of being punished for delivering good care is nerve-racking.”

"저는 더 이상 의사가 아니라 데이터 관리자, 데이터 입력 사무원, 스테노 걸입니다... 환자를 돌보기 위해 의사가 되었습니다. 저는 타이피스트가 되었습니다."
“I am no longer a physician but the data manager, data entry clerk and steno girl… I became a doctor to take care of patients. I have become the typist.”

2011년 전국 설문조사에서 의사의 87%는 업무 관련 스트레스와 소진의 주요 원인을 서류 작업과 관리로 꼽았으며 63%는 스트레스가 증가하고 있다고 답했습니다.8 2014년 설문조사에 참여한 의사의 43%는 하루 중 30% 이상을 행정 업무에 소비한다고 답했습니다.9 의사들은 환자보다 비대면 활동(예: 편지, 우편함 관리, 약물 리필)에 더 많은 시간을 소비합니다.10 환자와 함께 진료실에 있을 때에도 주치의는 25%에서 50%의 시간을 컴퓨터를 사용하는 데 소비합니다.11 2009년과 2010년 사이에 한 재향군인회 시설의 주치의는 제공된 치료 문서 외에 받은 편지함 유형 알림에 응답하는 데 하루 49분을 소비했습니다. 이러한 알림의 절반은 임상적 중요성이 거의 없거나 다른 팀원이 처리할 수 있는 내용이며, 알림에 포함된 텍스트의 80%는 불필요한 내용입니다. 알림과 문자의 양이 너무 많으면 조치가 필요한 중요한 정보가 가려집니다. 게다가 이러한 알림은 환자 치료에 악영향을 미치는 것으로 알려진 업무 중단을 초래합니다.12,13 
In a 2011 national survey, 87% of physicians named the leading cause of work-related stress and burnout as paperwork and administration, with 63% indicating that stress is increasing.8 Forty-three percent of physicians surveyed in 2014 reported spending over 30% of their day on administrative tasks.9 Physicians spend more time on non–face-to-face activities (eg, letters, in-box management, and medication refills) than with patients.10 Even when in the exam room with patients, primary care physicians spend from 25% to 50% of the time attending to the computer.11 Between 2009 and 2010, primary care physicians at a Veterans Affairs facility spent 49 minutes per day responding to inbox-type alerts in addition to documentation of care provided. One-half of such alerts have little clinical significance or could be handled by other team members; 80% of the text in the alerts is unnecessary. The volume of alerts and texts overshadows important information that requires action. Moreover, the alerts create interruptions known to adversely affect patient care.12,13

2013년 30개 의료기관을 대상으로 실시한 설문조사에 따르면 전자 의료 기록(EHR) 기술이 데이터 입력에 시간이 많이 걸리고 환자 진료에 방해가 되어 업무 만족도를 떨어뜨리는 것으로 나타났습니다.7 응급의학과 의사들은 하루 중 44%를 데이터 입력에 소비하며, 하루에 4,000번의 EHR 클릭을 하지만 환자에게 보내는 시간은 28%에 불과합니다.14 2011년 조사에서는 의사의 3/4 이상이 EHR 때문에 진료 계획, 검토, 지시 및 문서화에 걸리는 시간이 증가한다고 응답했습니다.15 
A 2013 survey of 30 physician practices found that electronic health record (EHR) technology has worsened professional satisfaction through time-consuming data entry and interference with patient care.7 Emergency medicine physicians spend 44% of their day doing data entry, with 4,000 EHR clicks per day; only 28% of the day is spent with patients.14 In a 2011 survey, over three-quarters of physicians reported that the EHR increases the time it takes to plan, review, order, and document care.15

직원 번아웃
STAFF BURNOUT

번아웃은 의사뿐만 아니라 다른 의료 인력에게도 영향을 미칩니다. 병원 간호사의 34%, 요양원 간호사의 37%가 번아웃을 경험한 반면, 다른 환경에서 일하는 간호사의 22%만이 번아웃을 경험했습니다.16 진료의 최전선에서 일하는 접수원은 68%가 환자로부터 언어적 폭력을 경험하는 등 스트레스가 많은 업무를 맡고 있습니다.17 대부분의 접수원은 의사가 자신의 업무의 복잡성을 이해하지 못한다고 느끼고 있습니다. 스트레스의 원인으로는 환자 진료 예약을 잡는 일, 의사와 환자의 요구 사이에 끼어 있다는 느낌 등이 있습니다.18 2013년 243개 의료기관에서 근무하는 직원 508명을 대상으로 실시한 설문조사에 따르면 60%가 업무 소진을 경험했으며 34%는 다른 직장을 구할 계획이라고 답했습니다. 불만 사항으로는 과중한 환자 수, 적은 직원 수, 높은 스트레스 수준 등이 있었습니다.19 
Burnout affects not only physicians, but also other members of the health care workforce. Thirty-four percent of hospital nurses and 37% of nursing home nurses report burnout, compared with 22% of nurses working in other settings.16 On the front lines of practice, receptionists have a stressful job, with 68% experiencing verbal abuse from patients.17 Most receptionists feel that physicians fail to appreciate the complexity of their work. Sources of stress include finding appointments for patients and feeling caught between doctors’ and patients’ demands.18 A 2013 survey of 508 employees working for 243 health care employers found that 60% reported job burnout and 34% planned to look for a different job. Complaints included heavy patient loads, small staffs, and high stress levels.19

의사와 직원의 불만은 서로에게 영향을 미칩니다. "지친 의사 곁에 있는 것은 정말 힘든 일입니다. 그들은 냉소적이고 냉소적이며 '더 이상 무슨 소용이 있나'라고 생각하게 됩니다." 그 반대의 경우도 마찬가지입니다. 소진된 직원은 자신의 업무를 제대로 수행하지 못해 이미 과로한 의사에게 더 많은 스트레스를 줄 수 있습니다.20 이직률이 낮고 잘 훈련되고 신뢰할 수 있으며 유능한 지원 직원이 적절하게 많으면 의사 만족도가 높아집니다.7
Physician and staff dissatisfaction feed on each other. “It’s really rough to be around a burned-out doctor. They’re cynical, sarcastic, and wonder, ‘what’s the use anymore?’” It can go the other way, too. A burned-out staff member may not be doing his or her job, resulting in more stress for the already overworked doctor.20 Adequate numbers of well-trained, trusted, and capable support staff with low turnover predict greater physician satisfaction.7

세 가지 목표를 달성하기 위한 전제 조건으로서의 의료진 복지
CARE TEAM WELL-BEING AS A PREREQUISITE FOR THE TRIPLE AIM

의료진의 번아웃은 환자 중심주의와 세 가지 목표를 위협합니다. 의사와 간호사의 불만족은 환자 만족도 저하와 관련이 있습니다.16,21 의사와 의료진의 소진은 자원의 과잉 사용으로 이어져 치료 비용을 증가시킬 수 있습니다.22-24 불만족스러운 의사는 진료실을 떠날 가능성이 높으며 가정의학과 의사 이직 비용은 의사 1인당 25만 달러에 달합니다.25 불만족스러운 의사는 부적절한 약물을 처방할 가능성이 높으며 이는 고가의 합병증을 유발할 수 있습니다.26 
Burnout among the health care workforce threatens patient-centeredness and the Triple Aim. Dissatisfied physicians and nurses are associated with lower patient satisfaction.16,21 Physician and care team burnout may contribute to overuse of resources and thereby increased costs of care.2224 Unhappy physicians are more likely to leave their practice; the cost of family physician turnover approaches $250,000 per physician.25 Dissatisfied physicians are more likely to prescribe inappropriate medications which can result in expensive complications.26

의사의 소진은 치료 계획 준수율 저하와 연관되어 임상 결과에 부정적인 영향을 미칩니다.27 소진은 또한 공감 능력 저하로 이어져 당뇨병 환자의 임상 결과 악화와 관련이 있습니다.28 간호사 불만족으로 인해 환자 안전이 위협받고 있으며, 많은 간호사가 업무량으로 인해 환자 상태의 중요한 변화를 놓친다고 보고합니다.16 불만족한 의사는 진료실을 떠날 가능성이 2~3배 더 높으므로 일차 진료 의사 부족을 악화시키고 건강한 인구 달성을 어렵게 합니다.29 
Physician burnout is associated with reduced adherence to treatment plans, resulting in negatively affected clinical outcomes.27 Burnout also leads to lower levels of empathy, which is associated with worsened clinical outcomes for patients with diabetes.28 Patient safety is threatened by nurse dissatisfaction; many nurses report that their workload causes them to miss important changes in their patients’ condition.16 Dissatisfied physicians are 2 to 3 times more likely to leave practice, thereby exacerbating the growing shortage of primary care physicians and complicating the achievement of a healthy population.29

트리플 목표를 향해 노력하는 의료기관은 의사의 소진을 증가시켜 성공 가능성을 낮출 수 있습니다. 환자 중심 의료 가정 평가에서 높은 점수를 받을수록 안전망 클리닉의 임상의 소진이 더 클 수 있습니다.30 트리플 목표를 촉진하기 위해 환자와의 이메일, 의사의 주문 입력, 알림 및 리마인더와 같은 EHR 기능이 많을수록 소진 및 이직 의도가 더 높아집니다.31 
Practices working toward the Triple Aim may increase physician burnout and thereby reduce their chances of success. Higher scores on a patient-centered medical home assessment may be associated with greater clinician burnout in safety-net clinics.30 More EHR functionalities—email with patients, physician order entry, alerts and reminders—intended to promote the Triple Aim are associated with more burnout and intent to leave practice.31

그룹 건강 협동조합은 2000년대 초반에 트리플 목표 성과를 개선하기 위해 1차 의료 개혁을 시행했습니다. 의도치 않은 결과는 의사의 소진 증가와 그에 따른 질 저하 및 비용 증가였습니다. 2006년에 그룹 헬스는 방향을 바꿔 방문 시간을 늘리고 패널 규모를 줄임으로써 임상의의 업무 생활에 우선 초점을 맞췄습니다. 그 결과 번아웃이 크게 감소하고 임상 품질, 환자 경험, 비용 절감 효과가 크게 향상되었습니다. Group Health의 사례는 의료진의 직장 생활을 해결하지 않으면 세 가지 목표가 악화될 가능성이 높다는 것을 보여줍니다.32 
Group Health Cooperative implemented primary care reforms in the early 2000s aimed at improving Triple Aim performance. The unintended consequence was increased physician burnout and resultant quality reductions and cost increases. In 2006, Group Health changed direction, focusing first on clinician work life by increasing visit length and reducing panel size. Burnout dropped substantially with significant gains in clinical quality, patient experience, and cost reduction. The Group Health story demonstrates that without addressing the work life of those providing care, Triple Aim measures are likely to worsen.32

네 번째 목표 해결
ADDRESSING THE FOURTH AIM

의료 기관이 네 번째 목표인 임상의와 직원의 직장 생활 개선을 위해 어떻게 노력할 수 있을까요? 주치의의 경우 다음 목록은 몇 가지 실용적인 단계를 제안합니다: 
How can health care organizations work toward the fourth aim, improving the work life of clinicians and staff? For primary care physicians the following list suggests some practical steps:

  • 팀 문서화 구현: 간호사, 의료 보조원 또는 기타 직원이 환자 방문 시 동석하여 일부 또는 모든 문서를 EHR에 입력하고, 주문 입력, 처방전 처리, 청구서 수납을 지원합니다. 팀 문서화는 의사와 직원의 만족도 향상, 수익 개선, 더 많은 환자를 더 일찍 퇴원시키면서 관리할 수 있는 팀의 역량 강화와 관련이 있습니다.33,34
    Implement team documentation: nurses, medical assistants, or other staff, present during the patient visit, entering some or all documentation into the EHR, assisting with order entry, prescription processing, and charge capture. Team documentation has been associated with greater physician and staff satisfaction, improved revenues, and the capacity of the team to manage a larger panel of patients while going home earlier.33,34
  • 사전 방문 계획 및 예약 전 실험실 테스트를 사용하여 실험실 결과의 검토 및 후속 조치에 낭비되는 시간을 줄입니다.35
    Use pre-visit planning and pre-appointment laboratory testing to reduce time wasted on the review and follow-up of laboratory results35
  • 의사가 작성한 대기 명령에 따라 간호사와 의료 보조원이 예방 치료 및 만성 치료 건강 코칭을 담당할 수 있도록 역할을 확대합니다.33,36
    Expand roles allowing nurses and medical assistants to assume responsibility for preventive care and chronic care health coaching under physician-written standing orders33,36
  • 처방전 리필을 위한 워크플로를 표준화하고 동기화하여 의사의 주당 5시간을 절약하는 동시에 더 나은 의료 서비스를 제공할 수 있는 접근 방식37
    Standardize and synchronize workflows for prescription refills, an approach which can save physicians 5 hours per week while providing better care37
  • 의사가 팀원들과 같은 공간에서 근무하도록 팀을 공동 배치하여 효율성을 높이고 하루에 30분의 의사 시간을 절약하는 것으로 나타났습니다38.
    Co-locate teams so that physicians work in the same space as their team members; this has been shown to increase efficiency and save 30 minutes of physician time per day38
  • 의사의 소진이 진료 직원에게 전가되는 것을 방지하려면 새로운 책임을 맡은 직원이 충분한 교육을 받고 자신이 환자의 건강에 기여하고 있다는 점을 이해하도록 하고 불필요한 업무는 진료에서 제외하도록 합니다2,39.
    To avoid shifting burnout from physicians to practice staff, ensure that staff who assume new responsibilities are well-trained and understand that they are contributing to the health of their patients and that unnecessary work is reengineered out of the practice2,39

장기적으로는 사회의 기대와 일차 의료의 역량 사이의 격차를 해소하기 위해 더 많은 재정과 인력이 일차 의료에 투입되어야 합니다. 한 연구에 따르면 환자 중심의 의료 가정을 달성하기 위해서는 의사 1인당 4.25명의 FTE 직원으로 59%의 인력 증원이 필요한 것으로 추정됩니다.40
In the longer run, to address the chasm between society’s expectations and primary care’s capacity, more financial and personnel resources should be dedicated to primary care. One study estimates that a 59% increase in staffing, to 4.25 FTE staff per physician, is needed to achieve the patient-centered medical home.40

환자 중심주의와 네 번째 목표
Patient-centeredness and the Fourth Aim

트리플 목표 달성을 가로막는 장애물로는 비만과 당뇨병이 만연하고 소득 격차가 커지는 사회에서 인구 건강을 개선하고, 의료 비용을 증가시키며, 의료 인력이 사기를 잃고 이탈하는 것 등이 있습니다. 일차 의료에 대한 사회의 기대와 일차 의료의 가용 자원 사이의 격차가 계속 벌어진다면, 일차 의료 종사자들이 느끼는 배신감과 일상적인 스트레스로 인한 피로감은 더욱 커질 것입니다. 환자 중심 진료에 미치는 부정적인 영향은 깊고 오래 지속될 것입니다. 반면, 인력에 대한 강조가 환자의 필요를 희생하는 대가로 이루어진다면 부정적인 결과를 초래할 수 있습니다. 의료 서비스는 치료를 제공하는 사람과 치료를 원하는 사람 사이의 관계이며, 이 관계는 공생 관계일 때만 번성할 수 있고 양쪽 모두에게 이익이 됩니다.
The barriers to achieving the Triple Aim include improving population health in a society experiencing obesity and diabetes epidemics and growing income disparities, rising health care costs, and a dispirited and disengaged health care workforce. If the gap continues to widen between society’s expectations for primary care and primary care’s available resources, the feelings of betrayal and the wearing down from daily stress voiced by primary care practitioners will grow. The negative impact on patient-centered care will be deep and long lasting. On the other hand, if an emphasis on the workforce comes at the expense of patients’ needs, this focus could have negative consequences. Health care is a relationship between those who provide care and those who seek care, a relationship that can only thrive if it is symbiotic, benefiting both parties.

결론
CONCLUSION

트리플 목표는 우리 사회에 나침반이 되어 의료 시스템이 나아갈 방향을 제시했습니다. 트리플 목표의 주요 목표인 인구 건강 개선을 달성하기 위해서는 의료 인력의 부정적인 좌절감보다는 긍정적인 참여가 가장 중요합니다. 의료 서비스 리더와 제공자는 더 나은 치료, 더 나은 건강, 더 낮은 비용이라는 나침반에 의료 서비스를 제공하는 사람들의 직장 생활 개선이라는 네 번째 차원을 추가하는 것을 고려해야 합니다. 
The Triple Aim has provided society with a compass, pointing the way forward for our health care system. The positive engagement, rather than the negative frustration, of the health care workforce is of paramount importance in achieving the primary goal of the Triple Aim—improving population health. Leaders and providers of health care should consider adding a fourth dimension—improving the work life of those who deliver care—to the compass points of better care, better health, and lower costs.

 


Ann Fam Med. 2014 Nov-Dec;12(6):573-6. doi: 10.1370/afm.1713.

From triple to quadruple aim: care of the patient requires care of the provider

Affiliations collapse

1Center for Excellence in Primary Care, Department of Family and Community Medicine, University of California San Francisco, San Francisco, California TBodenheimer@fcm.ucsf.edu tbodie@earthlink.net.

2Medical Associates Clinic and Health Plan, Dubuque, Iowa American Medical Association, Chicago, Illinois.

PMID: 25384822

PMCID: PMC4226781

DOI: 10.1370/afm.1713

Free PMC article

Abstract

The Triple Aim-enhancing patient experience, improving population health, and reducing costs-is widely accepted as a compass to optimize health system performance. Yet physicians and other members of the health care workforce report widespread burnout and dissatisfaction. Burnout is associated with lower patient satisfaction, reduced health outcomes, and it may increase costs. Burnout thus imperils the Triple Aim. This article recommends that the Triple Aim be expanded to a Quadruple Aim, adding the goal of improving the work life of health care providers, including clinicians and staff.

Keywords: health care workforce; patient-centered care; primary health care.

학습이론의 통합된 이론적 프레임워크와 공중보건 CME 연구 및 실천의 가이드(J Contin Educ Health Prof. 2021)
A Unified Theoretical Framework of Learning Theories to Inform and Guide Public Health Continuing Medical Education Research and Practice
Thomas L. Roux, MBChB, MPH, DFPHMI RCPI, FRSPH; Mirjam M. Heinen, BSc, MSc, PGDIp, PhD;
Susan P. Murphy, PhD, MA, BA, PDip; Conor J. Buggy, BA Mod, PhD, PCert, PDip

 

 

20세기 초 평생 의학 교육(CME)의 등장은 의료 전문가(HCP)들 사이에서 평생 교육의 중요성을 인식하는 전환점이 되었습니다.1 1977년 이후 39건의 체계적 문헌고찰에 따르면 CME가 의료 전문가의 지식을 높이고, 의료 전문가의 행동을 변화시키며, 환자 결과를 개선하는 데 효과적이라는 사실이 밝혀졌습니다.2 그러나 비효율적인 형식(예: 교훈적인 강의 및 컨퍼런스)이 여전히 지배적이며,2 공인된 CME 활동의 80% 이상이 블룸 분류법(인지(표 1), 정서 및 신체운동 영역)에 정의된 더 높은 수준의 학습을 목표로 하지 않는 등 CME가 제대로 발전하지 못하고 있다는 우려가 계속되고 있습니다.3 
The advent of continuing medical education (CME) in the early part of the 20th century was a turning point in the recognition of the importance of lifelong education among health care professionals (HCPs).1 Thirty-nine systematic reviews since 1977 reveal that CME is effective in increasing HCP's knowledge, changing HCP's behavior, and to a lesser extent, improving patient outcomes.2 However, there is ongoing concern that CME continues to be poorly developed: ineffective formats (eg, didactic lectures and conferences) continue to dominate,2 with more than 80% of accredited CME activities not targeting higher levels of learning as defined by Bloom taxonomy (cognitive (Table 1), affective, and pyschomotor domain).3

CME 선택은 주로 HCP가 자신의 학습 요구를 정확하게 자가 평가하고 결정할 수 있을 것이라는 기대에 의해 주도됩니다.4 그러나 증거에 따르면 HCP는 자신의 기술 부족을 정확하게 자가 평가할 수 없으며4 종종 자신의 능력을 과대평가하는 경향이 있습니다.5 그 결과, HCP는 이미 역량을 갖춘 익숙한 CME 주제를 선택하는 경향이 있으며, 잠재적으로 중요하고 현대적인 의학 지식의 다른 영역을 무시할 수 있습니다.6
CME selection is predominantly driven by the expectation that HCPs are able to accurately self-assess and determine their own learning needs.4 Evidence suggests, however, that HCPs are unable to accurately self-assess their skill deficit4 and often tend to overestimate their abilities.5 As a result, HCPs are more inclined to select familiar CME topics in which they are already competent, potentially ignoring other areas of important and contemporary medical knowledge.6

의과대학에서 다루는 의학 지식의 범위가 73일마다 두 배씩 증가하는 것으로 추정되는 등 빠르게 변화하는 의학 지식 분야로 인해 CME의 질3 형식2 및 자체 선택6에 대한 이러한 우려는 더욱 심화되고 있습니다.7 이러한 증가된 지식의 초점은 인구 역학 및 의료 요구의 변화에 대한 전 세계적인 인식에 따라 공중보건(PH) 및 양질의 환자 치료와 관련된 문제로 옮겨가고 있습니다.8 또한 보편적 의료에 대한 추진,10 그리고 지역사회에서 예방적 일차 진료의 이점,11은 HCP가 PH 영역의 발전과 지식을 계속 평가할 것을 요구합니다. 현재 환자의 50%만이 적절한 수준의 예방 진료를 받고 있습니다.12 이를 90%까지 높이면 비용 절감과 함께 연간 200만 명의 생명을 추가로 구할 수 있습니다.13 PH의 광범위한 다전문가, 다분야, 다기관 특성으로 인해 임상 영역을 넘나들고 인구의 PH 요구사항에 특화된 CME가 필요합니다.14 HCP는 PH 인력의 필수 구성 요소로 간주되므로, "의료 환경에서 관련 건강 증진 및 질병 예방 서비스를 제공하는 데 필요한 지식과 기술을 갖추도록 보장해야 할 고유한 책임이 있습니다."15(17페이지). 
This concern about quality,3 format,2 and self-selection of CME6 is aggravated further by the rapidly changing field of medical knowledge: it is estimated that the extent of medical knowledge covered in medical school doubles every 73 days.7 The focus of this increased knowledge has moved toward matters relating to public health (PH) and quality patient care,8 driven by the global recognition of changing population dynamics and health care needs.9 In addition, the push for universal health care,10 and the benefit of preventive primary care in the community,11 requires that HCPs keep appraised of developments and knowledge within the realm of PH. Currently, only 50% of patients receive the appropriate level of preventive care.12 Increasing this to 90% could save an additional two million lives a year with cost savings.13 Because of the broad multiprofessional, multidisciplinary, and multiagency nature of PH, CME that cuts across clinical domains and is specific to the PH needs of a population is required.14 Because HCPs are considered an integral component of the PH workforce, a unique responsibility exists to ensure they are equipped with the necessary knowledge and skills “to provide relevant health promotion and disease prevention services in the health care setting.”15(pg. 17)

이러한 문제를 해결하기 위해서는 PH CME의 최적화가 필요합니다. 앞서 언급했듯이 CME는 올바르게 제공되고 사용될 때 효과적이지만, 항상 그런 것은 아닙니다. 맥락이 CME 효과에 어떤 역할을 할 수 있는지 이해하는 것이 연구 우선순위로 확인되었습니다.2 실제로 의학교육 내에서 '맥락'은 끊임없이 정의definition를 어렵게 만들고 있으며16, 그 결과 CME 관련 분야에서 맥락을 정의17하고 식별18하려는 관심이 증가하고 있습니다. 베이츠와 엘러웨이16는 어떤 식으로든 컨텍스트를 다룬 62편의 논문을 조사하여 의학교육에서의 컨텍스트에 대한 정의를 개발했습니다: 
These issues necessitate the optimization of PH CME. As has been mentioned, CME is effective when offered and used correctly; however, this is not always the case. Understanding what role context may play in CME effectiveness has been identified as a research priority.2 Indeed, within medical education, context continues to elude definition16; as a result, there is increasing interest to define17 and identify18 context in CME-related fields. Bates and Ellaway16 examined 62 articles that addressed context in some way and developed a definition for context in medical education:

"컨텍스트는 환자, 장소, 실무, 교육 및 사회의 기본 패턴과 이러한 패턴 간의 예측할 수 없는 상호 작용에서 나타나는 역동적이고 끊임없이 변화하는 시스템입니다."(814페이지).
“Context is a dynamic and ever-changing system that emerges from underlying patterns of patients, locations, practice, education and society, and from the unpredictable interactions between these patterns.”(p. 814)

이 정의는 저자들이 CME에서 컨텍스트를 이해하는 데 기초가 됩니다.
This definition serves as the basis for the authors' understanding of context in CME.

HCP가 인구의 필요를 충족시킬 수 있는 CME의 잠재력에 대한 인식과 전달 방법 및 맥락에 관한 현재의 한계에 대한 이해가 결합되어 PH CME에서 맥락이 어떤 역할을 하는지에 대한 조사로 이어졌습니다. 이 조사의 일환으로 연구팀은 연구 프로젝트에 정보를 제공하기 위해 이론적 프레임워크를 객관화했습니다. 이러한 프레임워크의 사용은 결과에 대한 이론적 근거를 제공하고19 의학교육 연구 분야를 이론을 시험하고 도전하며 더욱 발전시킬 수 있는 방식으로 발전시킵니다.20 이 글에서는 PH CME와 관련된 학습 이론에 대한 비판적 분석에서 나온 혁신적이고 진보적인 통합 이론적 프레임워크를 제시합니다. 이 통합 프레임워크는 연구팀이 고려한 다른 접근법의 단점을 해결하고 의료 시스템 내 CME 맥락을 이해하는 데 있어 새로운 이론적, 방법론적 통찰력을 제공할 수 있는 잠재력을 제공합니다. 
It is the appreciation of CME's potential in equipping HCPs to address population needs, combined with an understanding of its current limitations regarding methods and context of delivery, that has led to an investigation into what role context plays in PH CME. As part of this investigation, the research team has objectified a theoretical framework to inform the research project. The use of such a framework offers a theoretically grounded explanation for results19 and moves the field of medical education research forward in a fashion that allows theory to be tested, challenged, and developed further.20 This article presents an innovative and progressive unified theoretical framework that ensued from a critical analysis of learning theory as it relates to PH CME. This unified framework addresses shortcomings of other approaches considered by the research team and offers the potential for new theoretical and methodological insights into understanding CME context within health care systems.

프레임워크 식별
Identifying a Framework

링스테드 외21는 의학교육 연구의 첫 번째 단계는 이론적 또는 개념적 프레임워크 내에서 문제를 파악하는 것이라고 주장합니다. 의학교육 연구 문헌에서 이러한 프레임워크의 결여는 제출된 논문의 3분의 2에서 출판 거부의 요인으로 지적된 반면, 출판된 모든 의학교육 연구 문헌의 절반만이 이론적 프레임워크를 명시적으로 사용하고 있습니다.22 이는 교육적 장학금을 방해하고 연구 결과의 적용 가능성과 일반화 가능성을 제한하는 요인으로 작용합니다. 
Ringsted et al21 argue that the first step in medical education research should be situating the problem within a theoretical or conceptual framework. The deficit of such frameworks within medical education research literature has been noted as a factor in publication rejection in two-thirds of articles submitted, whereas only half of all published medical education research literature makes explicit use of a theoretical framework.22 This hampers educational scholarship and limits applicability and generalizability of findings.

호지스와 쿠퍼23(26쪽)가 지적했듯이, 오늘날 다양한 분야에서 "수백 가지의 이론"이 사용되고 있습니다. 의학교육 연구 영역에서 이러한 이론은 HCP가 기능하고 학습하는 사회문화적 맥락과는 반대로 개인에 초점을 맞추는 경향이 있습니다.24 개인에 초점을 맞추는 것이 Flexner 보고서(1910)의 권고에 따라 의학교육에 유용한 접근법으로 입증되었지만, 의료의 변화하는 모습과 학생들의 학습 방법에 대한 우리의 진화하는 이해는 21세기 빠르게 발전하는 글로벌 사회의 요구를 충족하기 위해 의학교육 발전 방식에 다른 접근법을 요구하고 있습니다.25 HCP는 고립된 채로 기능하는 것이 아니라, 임상팀과 주변 환경, 그리고 HCP가 수행하는 치료의 유형과 표준을 결정하는 국가 보건 정책에 이르기까지 광범위한 의료 시스템의 일부이며, 이는 다시 국제 보건 의제 및 SARS-CoV-2와 같은 새로운 우려의 영향을 받습니다. 사회문화적 학습 이론은 "의학이 학습되고 실행되는 환경 수준에서" 이러한 시스템 전반에서 학습이 어떻게 이루어지는지 살펴볼 수 있는 기회를 제공합니다.23(31페이지) 실제로, 교육 중에 이러한 시스템 복잡성으로부터 HCP를 격리하는 것은 환자 결과를 개선하는 것으로 나타난 전문가 간 능력을 육성하지 못할 가능성이 높습니다.26 
As Hodges and Kuper23(p. 26) have pointed out, “there are hundreds of theories” in use today across various disciplines. Within the realm of medical education research, these theories have tended to focus on the individual, as opposed to the sociocultural context in which HCPs function and learn.24 Although focusing on the individual has proved a useful approach to medical education following the recommendations of the Flexner report (1910), the changing face of health care, and our evolving understanding of how students learn, necessitates a different approach in how we advance medical education to meet the needs of a rapidly progressing global society in the 21st century.25 HCPs do not function in isolation; they are part of wider health care systems that stretch from clinical teams, in their immediate environment, to national health policies determining the type and standard of care that HCPs practice, which in turn are influenced by international health agendas and emerging concerns, such as SARS-CoV-2. Sociocultural theories of learning offer opportunities to examine how learning occurs across these systems “at the level of the environment in which medicine is learned and practiced.”23(p. 31) Indeed, isolating HCPs from this system complexity during training is unlikely to foster interprofessional abilities that are shown to improve patient outcomes.26

시스템적 사고는 PH 분야에서 점점 더 인기를 얻고 있으며27,28 오피오이드 남용에 대한 교육적 개입의 영향을 모델링하는 데 유용하다는 것이 입증되었습니다.29 실제로 시스템적 사고의 기본 교리는 인구 결과를 개선하기 위해 새로운 지식이 어떻게 생성, 관리, 전파 및 통합되는지 이해하는 것입니다.30 마찬가지로, 사회 학습 이론은 복잡한 시스템 내에서 사회적 상호 작용을 통해 지식이 생성된다는 것을 인식함으로써 시스템 관점을 가정합니다.31 이러한 공통점은 사회 문화 학습 이론을 사용하여 PH CME를 조사하는 데 유익한 근거를 제공합니다. 
Systems thinking is becoming increasingly popular within the field of PH27,28 and has proved useful in modeling impacts of educational interventions on opioid abuse.29 Indeed, a fundamental tenet of systems thinking is understanding how new knowledge is created, managed, disseminated, and integrated across systems to improve population outcomes.30 Similarly, social learning theories assume a systems perspective by recognizing that knowledge is created through social interaction within complex systems.31 These commonalities offer fruitful ground for using sociocultural theories of learning to investigate PH CME.

이를 염두에 두고 저자들은 연구에 정보를 제공하고 근거를 제시할 수 있는 적절한 이론적 틀을 수립하기 시작했습니다. 의학 및 사회과학 분야의 온라인 저널 데이터베이스를 '의학 교육', '학습 이론' 및 관련 동의어를 사용하여 검색했습니다. 이를 의학교육 및 고등교육 교수학습 분야의 교육학 전문가들과 비공식 그룹 토론을 통해 보완했습니다. 이러한 과정을 통해 확인된 리뷰 논문23,25,32,33은 관련 현대 이론을 평가하기 위한 발판으로 사용되었으며, 이를 바탕으로 적절한 참고 문헌이 눈덩이처럼 불어났습니다. 또한, 확인된 이론을 보다 명확하게 설명하기 위해 일부 학술 문헌을 참고했습니다. 
With this in mind, the authors set out to establish a suitable theoretical framework to inform and ground their research. A search of online journal databases within the medical and social science fields was performed using terms “medical education,” “learning theory,” and associated synonyms. This was supplemented by informal group discussions with pedagogical experts in the field of medical education and higher education teaching and learning. Review articles identified through these processes23,25,32,33 were used as a springboard to evaluate relevant contemporary theories; from there, snowballing of suitable references took place. In addition, select academic text was consulted to provide deeper clarity on identified theories.

프레임워크 개발에 적합한 이론을 식별하는 데 다음 세 가지 기준이 사용되었습니다: 
The following three criteria were used in identifying a suitable theory to inform the framework's development:

  1. 이론은 개별 학습자 외에도 학습과 관련된 더 넓은 맥락적 요인을 인식해야 합니다.
    In addition to the individual learner, the theory needs to be cognizant of the wider contextual factors involved in learning.
  2. 이론은 학습자와 더 넓은 맥락적 요인 간의 상호 작용에 대한 시스템적 이해를 수반해야 합니다.
    The theory needs to entail a systems understanding of the interactions between learner and wider contextual factors.
  3. CME에 정보를 제공할 모든 이론은 학습을 단순한 지식 습득이라는 개념을 넘어설 필요가 있습니다.
    Any theory that will inform CME needs to move beyond the notion of learning as mere acquisition of knowledge.

또한 선택한 이론의 실제 적용은 연구 프로젝트의 시간 및 리소스 제약 내에서 실현 가능해야 했습니다. 식별된 이론에 대한 1차 평가 후, 10개의 이론을 세부적으로 검토하여 미리 정해진 기준과 연구와의 관련성에 따라 적합성을 평가했습니다(표 2). 10가지 이론 중 어떤 이론도 개별적으로 PH CME의 맥락을 탐구하는 데 충분하지 않다고 판단된 것은 없었습니다.

  • 몇몇 이론은 지나치게 개인에 초점을 맞춘 것으로 간주되었고(패스만 인식-준수 모델, 콜브 경험적 학습 주기, 메지로우 변형 학습, 가드너 다중 지능 이론),
  • 로저스 혁신 확산 이론은 대규모 변화에 더 적합한 것으로 간주되었습니다.
  • 또한, 전기적 학습에서 홀크비스트 '사회적 공간'의 모호한 특성과 라베와 벵거의 실천 커뮤니티에서 PH '마스터'를 식별하는 데 어려움이 있었기 때문에 이 두 이론을 사용할 수 없었습니다.
  • 마지막으로, 활동 시스템 수준에서 엥스트롬의 확장적 학습 이론을 적용하는 데 내재된 복잡성은 너무 많은 시간과 자원이 소요되는 것으로 간주되었습니다. 

In addition, practical application of any theory selected had to be feasible within the time and resource constraints of the research project. After an initial evaluation of identified theories, 10 theories were subsequently examined in detail to evaluate their suitability based on the prespecified criteria and relevance to the research (Table 2). None of the 10 theories individually was deemed sufficient for the purpose of exploring context in PH CME.

  • Several were considered to be too overtly focused on the individual (Pathman awareness-to-adherence model, Kolb experiential learning cycle, Mezirow transformative learning, and Gardner theory of multiple intelligences) while
  • Rogers diffusion of innovations theory was deemed more appropriate for making large-scale changes.
  • Furthermore, the nebulous nature of Hallqvist “social space” in biographical learning and the challenge in identifying a PH “master” in Lave and Wenger communities of practice precluded the use of these two theories.
  • Finally, the complexity inherent in applying Engström expansive learning theory at the level of activity systems was considered too time and resource intensive.
 

그러나 이러한 문제를 피할 수 있고 비판적 평가를 통해 각 관점의 개별적인 단점을 보완하면서 맥락 문제에 대한 이해를 심화할 수 있는 두 가지 이론적 관점이 등장했습니다. 바로 빅스의 건설적 조정 원리34와 브론펜브레너35의 생물생태학적 인간 발달 모델입니다.

  • 빅스 원리는 학습 환경 내에서 개별 학습자가 경험하는 학습 과정에 대한 이론적 명확성을 제공하는 반면,
  • 브론펜브레너 모델은 학습이 다양한 시스템과의 상호작용을 통해 어떻게 영향을 받는지를 설명함으로써 이를 확장합니다. 

Two theoretical perspectives, however, did emerge that avoided these challenges and, on critical assessment, could be combined to deepen understanding of the issue of context while complementing individual shortfalls of each perspective in isolation. These were Biggs principle of constructive alignment34 and Bronfenbrenner35 bioecological model of human development.

  • Biggs principle offers theoretical clarity around the learning process as experienced by individual learners within the learning environment, whereas
  • Bronfenbrenner model expands on this by describing how learning is influenced through interactions with various systems.

건설적 정렬의 빅스 원리
Biggs Principle of Constructive Alignment

빅스의 구성적 연계의 원리는 구성주의 학습 이론, 즉 학습은 개인적 경험과 사회적 상호작용에 기반한 지식의 구성을 통해 발생한다는 학파에 속합니다.34 빅스는 이를 기반으로 교육과정의 연계 개념을 통해 성과, 교수/학습 활동 및 과제 평가의 연계가 추가적인 교육적 혜택을 부여합니다.34 빅스가 이 이론을 고등교육에 적용하여 의도한 결과는 고등교육을 졸업할 때 선언적 지식뿐만 아니라 직업적 맥락에서 학습을 실천하는 데 필요한 기능적 지식을 갖춘 "깊은" 자기 주도적 학습자를 개발하는 것이 었습니다. 증거에 따르면 고등 교육에서 빅스의 건설적 연계 원칙을 적용하면 개인이 선호하는 학습 스타일에 관계없이 실제로 "심층적인" 상황 학습 접근법이 가능하다고 합니다.36 이는 특히 자기주도적 학습을 통해 직업 경력 전반에 걸쳐 지식과 기술을 지속적으로 업데이트해야 하는 HCP와 관련이 있습니다.
Biggs principle of constructive alignment lies within the school of constructivist learning theory, that is, learning occurs through construction of knowledge based on personal experiences and social interactions.34 Biggs builds on this through the curricular concept of alignment, whereby alignment of outcomes, teaching/learning activities, and task assessment confers additional educational benefits.34 Biggs' intended outcome of applying this theory in higher education was to develop “deep” self-directed learners who leave tertiary education not only with declarative knowledge but also with functioning knowledge needed to put learning into practice in a professional context. Evidence suggests that applying Biggs principle of constructive alignment in higher education does indeed result in a “deep” situational learning approach, regardless of individuals' preferred learning styles.36 This is particularly relevant to HCPs, who must constantly update their knowledge and skills throughout their professional career through self-directed learning.

빅스 원칙에는 시스템적 특성이 내재되어 있습니다. 그의 초기 3P 모델(사전-과정-결과)37은 한 구성 요소의 변화가 다른 구성 요소에 어떤 영향을 미칠 수 있는지에 대한 인식을 통해 이를 명확하게 표현합니다. 실제로 빅스는 교육을 여러 개의 중첩된 "상호 작용하는 생태계"로 구성된다고 설명합니다.37(74페이지) 학습 활동과 교육기관 수준 간의 연계성을 고려하여 기능적 지식을 개발하는 것을 목표로 하는 CME에 가능성을 제공하는 것은 바로 이러한 상호 작용하는 시스템의 특성입니다. 
There is an inherent systems nature evident in Biggs principle. His initial 3P model (Presage-Process-Product)37 clearly expresses this through its recognition of how changes in one component can impact the other. Indeed, Biggs describes education as consisting of several nested “interacting ecosystems.”37(p. 74) It is this interactive systems nature that offers promise for CME, aiming to develop functioning knowledge by considering alignment across learning activities and institute levels.

빅스는 고등교육에 내재된 다양한 수준(프로그램, 대학, 전문대학)이 연계될 수 있음을 인정하지만, 이 원칙을 고등교육 이외의 환경에 적용하는 것은 복잡합니다. 특히 CME 내에는 개발 및 제공에 중요한 역할을 하는 수많은 요소와 이해관계자가 있습니다.38 Freeth와 Reeves39는 전문직 간 직장에서의 학습 기회에 대한 이러한 광범위한 영향을 파악하기 위해 빅스 3P 모델을 채택했습니다. 이 모델은 전문직 간 교육에 대한 체계적인 검토에서 결과를 종합하는 분석 도구로 효과적임이 입증되었습니다.40,41 그러나 빅스 모델은 맥락을 하나의 선행 요인으로 통합하기 때문에 시스템 전반에서 학습에 미치는 맥락의 영향을 탐색할 수 없습니다. 앞서 언급했듯이, 시스템 전반에서 지식이 어떻게 생성되는지 이해하는 것은 PH 및 사회 학습 이론에서 시스템 사고의 기본 측면입니다. 바로 이 지점에서 브론펜브레너의 인간 발달 생물생태학적 모델35은 빅스 모델 내에서 여러 시스템에서 지식이 어떻게 생성되는지 더 잘 이해할 수 있는 기회를 제공합니다. 

Although Biggs recognizes various levels inherent in tertiary education that could align (program, college, and university), applying this principle to settings outside of tertiary education is complicated. Particularly within CME, there are numerous factors and stakeholders that play important roles in its development and delivery.38 Freeth and Reeves39 adapted Biggs 3P model in an attempt to identify these wider influences on learning opportunities within interprofessional workplaces. Their adaptation has proven effective as an analytical tool for synthesizing results in systematic reviews of interprofessional education.40,41 However, Biggs model does not allow the exploration of the effect of context on learning across systems because it aggregates them into a single presage factor. As previously mentioned, understanding how knowledge is created across systems is a fundamental aspect of both systems thinking within PH and social learning theories. It is on this point that Bronfenbrenner bioecological model of human development35 offers opportunity for greater understanding of how knowledge is created across systems within Biggs model.

브론펜브레너의 생물생태학적 인간 발달 모델
Bronfenbrenner Bioecological Model of Human Development

브론펜브레너35는 학습이 개인과 개인이 작동하고 생활하는 시스템 간의 점점 더 복잡한 상호작용, 그리고 이러한 시스템 간의 관련 상호작용에서 비롯된다고 보았습니다. 이를 바탕으로 브론펜브레너는 교육 환경의 생태학적 구조를 구성하는 네 가지 초기 수준, 즉 미시체계, 중체계, 외체계, 거시체계를 정의했습니다(표 3). 
Bronfenbrenner35 viewed learning as arising from increasingly complex interactions between individuals and the systems in which they operate and live and the associated interactions between these systems. From this, Bronfenbrenner defined four initial levels that make up educational environment's ecological structure, namely the

  • microsystem,
  • mesosystem,
  • exosystem, and
  • macrosystem (Table 3).

이러한 수준 정의는 개인과의 상호 작용 정도에 따라 각 시스템 내의 주요 이해관계자에 대한 구체적인 설명을 제공합니다. 이러한 브론펜브레너의 연구를 통해 빅스 모델의 구성 요소를 확장하여 시스템 내 및 시스템 간 학습에 영향을 미치는 맥락적 요인을 더욱 세밀하게 파악할 수 있습니다. 브론펜브레너 모델을 적용하면 빅스 이론을 단독으로 사용할 때의 잠재적인 단점을 해결할 수 있습니다.

These level definitions offer concrete descriptions of key stakeholders within each system based on their degree of interaction with the individual. Such a reading of Bronfenbrenner's work allows for the possible expansion of components of Biggs model to provide further granularity of contextual factors that influence learning within and across systems. Applying Bronfenbrenner model addresses the potential shortcoming of using Biggs theory in isolation.

 

브론펜브레너 모델 사용에 대한 비판은 초기 네 가지 시스템 수준의 생태학적 프레임워크의 성공으로 인해 모델의 후속 반복을 인정하거나 사용하지 않았다는 점과 관련이 있습니다.42 로사와 터지(Rosa)43 는 이 초기 모델이 두 번의 반복을 더 거쳤다고 지적합니다. 

  • 두 번째 반복은 자신의 개발에서 개인의 역할에 초점을 맞추었습니다.
  • 세 번째이자 마지막 반복은 과정-사람-상황-시간(PPCT) 모델로서, 브론펜브레너가 개인과 주변 환경 간의 복잡한 상호작용(발달의 근위 과정)과 종적 및 역사적 시간이 발달에 미치는 영향에 대해 강조한 것을 강조했습니다

그 결과, 브론펜브레너가 크로노시스템이라고 명명한 다섯 번째 체계43가 모델에 추가되었습니다. 이 모델은 발달이 삶의 과정과 과거, 현재, 미래의 역사적 시간을 통해 형성된다고 가정합니다. 이는 의료의 변화로 인해 HCP가 역량을 유지하고 전문적으로 발전하는 방식에 변화가 필요하기 때문에 CME와 매우 관련이 있습니다.44
Criticism of the use of Bronfenbrenner model revolves around the lack of acknowledging or using subsequent iterations of the model due to the success of its initial four system-level ecological framework.42 Rosa and Tudge43 point out that this initial model underwent a further two iterations.

  • The second iteration focused on the role of the individual in their own development.
  • The third and final iteration, referred to as the Process-Person-Context-Time (PPCT) model, highlighted the importance Bronfenbrenner placed on complex interactions between the individual and their immediate surroundings (proximal processes of development), and the influence of time, both longitudinal and historical, on that development.

As a result, the fifth system, termed chronosystem by Bronfenbrenner,43 was added to the model. It posits that development is shaped across the life course and through historical time past, present, and future. This is highly relevant in CME because the changing face of health care requires changes in the way HCPs maintain competency and develop professionally.44

위에서 설명한 두 모델 사이에는 상호보완성과 호환성이라는 큰 요소가 있습니다. 두 모델 모두 학습 과정을 결과의 필수 요소로 간주하지만, 접근 방식은 정반대입니다:

  • 빅스는 결과에서 출발하여 학습 과정을 이 결과에 맞추는 반면,
  • 브론펜브레너는 학습 과정이 어떻게 결과(발달)로 이어지는지를 관찰합니다.

두 이론 모두 개인을 이론의 중심에 두고 있습니다:

  • 빅스는 "학생이 무엇을 하고 그것이 교육과 어떻게 관련되는가"에 초점을 맞추는 3단계 교육에 대해 이야기합니다.34(20쪽);
  • 브론펜브레너에게 개인은 매우 중요했기 때문에 그들의 두 번째 작업은 전적으로 개인의 발달에 있어 개인의 역할에 초점을 맞췄습니다.43

마지막으로, 빅스는 자신의 모델에서 브론펜브레너 크로노시스템과 같은 정도로 시간을 명시적으로 다루지는 않지만 학습이 "일회성 과정이 아니라 지속적인 행동 학습 주기"라고 지적합니다.34(281쪽) 이는 평가에 미치는 영향과는 별개로 움직이는 시간 개념을 의미하지만 빅스 원칙의 주요 구성 요소는 아닙니다.
There is a large component of complementarity and compatibility between the two models described above. Both view the process of learning as an integral component of the outcome, although the models approach this from opposite ends:

  • Biggs starts with the outcome, and then aligns the learning process to this outcome, whereas
  • Bronfenbrenner observes how the learning process leads to the outcome (development).

Both place the individual at the heart of the theory:

  • Biggs talks about level 3 teaching, where the focus is on “what the student does and how that relates to teaching”34(p. 20);
  • the importance of the individual to Bronfenbrenner was so great that the second iteration of their work focused wholly on the role of the individual in their own development.43 

Finally, although Biggs does not explicitly address time in their own model to the same extent as Bronfenbrenner chronosystem, it does point out that learning is not “a one-off process but a continuing action learning cycle”.34(p. 281) This implies a concept of time in motion, although apart from its influence on evaluation, is not a major component of Biggs principle.

두 모델 모두 서로를 보완하지만, 브론펜브레너 모델이 더 넓은 맥락 변수를 탐색하는 데 있어 더 깊이 있는 정보를 제공하는 것으로 보입니다. 그러나 PH CME에서 맥락적 요인을 조사하기 위한 목적으로 브론펜브레너 모델을 단독으로 사용하기에는 몇 가지 단점이 있었습니다. 첫째, 브론펜브레너 모델의 근본적인 초점은 아동 발달이었습니다. 발달은 전 생애에 걸쳐 비슷한 방식으로 일어난다고 했지만, 직업 경력에서 발생하는 "점진적으로 더 복잡한 상호 작용"43(252쪽)은 아동에서 조사된 것보다 훨씬 더 복잡할 가능성이 높습니다. 또한 환경, 그리고 그 환경 내의 사물과 사람들도 아동과 전문가 사이에 크게 다를 가능성이 높습니다.
Although both models complement each other, it would seem Bronfenbrenner model offers more depth regarding exploring wider contextual variables. However, for the purpose of examining contextual factors in PH CME, there were several shortcomings with Bronfenbrenner model that precluded its sole use. First, the underlying focus of Bronfenbrenner model was child development. Although it stated that development occurs in a similar fashion throughout life, the “progressively more complex reciprocal interaction”43(p. 252) that occurs over a professional career is likely to be far more complex than those examined in children. In addition, the environments, and the objects and persons within those environments, are also likely to be vastly different between children and professionals.

둘째, 브론펜브레너 모델의 탐구 방향, 즉 과정이 결과에 미치는 영향은 이미 CME 분야에서 잘 연구되어 있습니다.2 이제 관심의 대상은 상호 작용하는 맥락적 요인을 평가하여 이러한 과정, 즉 집단 결과를 어떻게 개선할 수 있는지에 대한 것입니다. 목적을 염두에 두고 시작하는 것이 CME를 통해 이를 달성하기 위한 수단으로 제안되었습니다.45,46 따라서 의도된 결과에서 시작하는 빅스의 건설적 정렬 원칙은 이 점에 대한 학습 이론의 보다 적절한 적용입니다. 
Second, the direction of enquiry within Bronfenbrenner model, namely how process affects outcome, is already well studied within the field of CME.2 What is now of interest is how to improve these processes, and thus population outcomes, by evaluating interacting contextual factors that play a role. Beginning with the end in mind has been proposed as a means of achieving this with CME.45,46 Thus, Biggs principle of constructive alignment that starts with the intended outcome is a more suitable application of learning theory on this point.

학습에 대한 통합된 이론적 프레임워크
A Unified Theoretical Framework of Learning

그림 1은 이 두 가지 모델을 융합하여 학습에 대한 고유한 통합 이론적 프레임워크를 제시합니다. 이 프레임워크는 저자들의 현재 연구에 정보를 제공하며, 향후 전문적 학습을 탐구하는 모든 연구의 이론적 토대가 될 수 있는 잠재력을 가지고 있습니다.

Figure 1 presents a fusion of these two models to create a unique unified theoretical framework of learning. This framework will inform the authors' current study and has the potential to serve as a theoretical foundation for any future study exploring professional learning.

Biggs 3P 모델의 원래 표현은 세 가지 영역(사전-과정-결과) 모두에 걸쳐 여러 생태계에 걸친 상호작용을 포함하도록 확장되었습니다. 이는 빅스의 원래 모델에서 제안한 학생과 교사 간의 상호작용을 넘어 다양한 수준에서 CME에서 역할을 하는 잠재적인 맥락적 요인에 대한 검토를 가능하게 합니다. 또한, 브론펜브레너 모델을 포함함으로써 각 시스템 내에서 중요한 이해관계자를 식별하는 데 도움이 되는 명시적인 정의를 제공합니다(표 3). 브론펜브레너가 정의한 각 단계의 주요 특성을 나타내기 위해 각 단계에 제목을 부여했습니다. 

  • 미시 시스템 수준에는 개인과 이들이 정기적으로 참여하는 환경이 있습니다. 
  • 중간 시스템 수준에는 미시 시스템을 하나로 모으는 조직인 중개자가 있습니다. 브론펜브레너의 초기 모델에서는 이를 마이크로시스템 주변의 단순한 계층으로 표시했습니다. 저자들은 이 수준에서 발생할 수 있는 풍부한 상호작용을 적절하게 표현하지 못한다는 로사와 터지43의 의견에 동의하며, 따라서 이 프레임워크는 빅스 모델의 모든 구성 요소를 포함하도록 확장했습니다. 
  • 다이어그램의 미시체계 아래에는 인플루언서라고 불리는 외체계Exosystem가 있으며, 이는 미시체계와 직접적으로 관련되지는 않지만 개인에게 (긍정적이든 부정적이든) 영향력을 행사하는 "사회적 구조"35를 의미합니다. 
  • 마지막으로, 거시 시스템은 이데올로기라고 하는데, 이는 모든 시스템이 작동하는 전반적인 문화를 형성하는 이데올로기를 가진 조직을 포괄합니다.

The original representation of Biggs 3P model has been expanded to include interactions across multiple ecological systems over all three domains (Presage-Process-Product). This countenances examination of potential contextual factors that play a role in CME at multiple levels beyond the student–teacher interaction as proposed within Biggs original model. In addition, the inclusion of Bronfenbrenner model offers explicit definitions to aid in the identification of critical stakeholders within each system (Table 3). Titles were assigned to each level to represent the key characteristics of each as defined by Bronfenbrenner.

  • At the microsystem level is the individual and the settings in which they engage on a regular basis.
  • At the mesosystem level are the intermediaries, those organizations that bring the microsystems together. In Bronfenbrenner initial model, this was displayed as a simple layer around the microsystem. The authors are in agreement with Rosa and Tudge43 that this does not adequately represent the richness of interactions that can arise at this level, and therefore, the framework expands it to include all components of Biggs model.
  • Below the mesosystem in the diagram is the exosystem, termed influencers, those “social structures35 that are not directly involved with the microsystem, but nevertheless exert influence (both positive and negative) on the individual.
  • Finally, the macrosystem is termed ideologues, as it encapsulates those organizations whose ideologies shape the overall culture in which all systems function.


이론적 관점에서 이 두 모델을 결합한 혼합 프레임워크를 정교화하면 시스템 전반과 시스템 간에 발생하는 상호 작용에 대한 이해의 깊이와 풍부함을 높일 수 있습니다. 이러한 상호 작용은 프레임워크 오른쪽의 십자 화살표 방향으로 표시됩니다. 실제 적용 관점에서 이 프레임워크는 명확한 정의와 이론적 프로세스를 제공하여 연구 탐구를 안내합니다. 또한 추가 세부 사항을 통해 빅스의 정렬 이론을 적용하여 각 시스템의 의도가 시스템 내부 및 시스템 간에 정렬되는지 조사할 수 있습니다. 가로 화살표로 표시된 고등교육 내 커리큘럼 정렬은 '심층적인' 자기주도적 학습을 장려하는 것으로 나타났으며36, 세로 화살표로 표시된 시스템 간 정렬도 동일한 결과를 기대할 수 있습니다. 
From a theoretical perspective, elaboration of a blended framework that combines these two models increases the depth and richness of understanding of interactions that occur across and between systems. These interactions are indicated by the cross-arrow directions to the right of the framework. From a practical application perspective, it offers clear definitions and theoretical processes to guide research enquiry. The additional detail also permits applying Biggs theory of alignment to investigate whether the intent of each system is aligned within and across the systems. Curricular alignment within higher education, represented by the horizontal arrow, has been shown to encourage ‘deep’ self-directed learning36; the same outcome might be expected when alignment occurs across systems, represented by the vertical arrow.

도표 상단의 화살표는 결과에서 과정으로 이어지는 CME 개발의 방향을 나타내는데, 이는 빅스의 이론적 관점과 일치합니다.34 이는 또한 CME 개발에 관한 현재의 실용적 사고("끝을 염두에 두고 시작하라"46(6페이지))와도 일치합니다. CME 개발은 결과에서 시작되지만, 도표 아래 화살표로 표시된 학습의 방향은 시간이 지남에 따라 왼쪽에서 오른쪽으로 자연스럽게 발생하는데, 이는 개인과 개인이 속한 시스템의 프레젠테이션 요인이 이러한 시스템 내에서 학습과 지식 전파 과정에 영향을 미치기 때문입니다. 이는 위에서 설명한 두 모델의 이론적 관점에 의해 뒷받침됩니다. 이러한 종적 시간의 실질적인 의미는 학습이 지속적이고 지속적인 과정이라는 것을 의미합니다. 효과적인 학습을 위해서는 CME를 한 시점에 단 한 번의 상호작용으로 개발할 수 없습니다. 실제로 경험적 증거는 여러 번 노출되는 CME가 단일 노출 활동보다 더 효과적이라는 개념을 뒷받침합니다.2 
The arrow at the diagram's top indicating direction of CME development, from outcome to process, is in keeping with Biggs' theoretical perspective.34 This also aligns with current practical thinking regarding CME development (“start with the end in mind”46(p. 6)). Although CME development originates with the outcome, the direction of learning, represented by the arrow below the diagram, naturally occurs from left to right over time—presage factors of the individual and the systems they reside in influence the process of learning and knowledge dissemination within these systems. This is supported by the theoretical perspectives of both models as described above. The practical implication of this longitudinal time implies learning is a continuous, ongoing process. To be effective, CME cannot be developed as a single interaction at a point in time. Indeed, empirical evidence supports the notion that multiple-exposure CME is more effective than single-exposure activities.2

마지막으로, 브론펜브레너의 시간 개념화는 학습의 과정과 체계가 존재하는 캡슐화된 크로노시스템으로 표현됩니다. 이는 개인의 학습이 그들이 살아가고 성장하는 역사적 시대에 발생하는 변화에 의해 형성된다는 것을 인정하며,43 연구자들이 지난 수십 년 동안 의학교육의 유사한 변화를 인식할 것을 요구합니다.47 이러한 변화는 기술이 의료 교육48 및 실무에 계속 영향을 미치면서 더 자주 발생할 것입니다.49 따라서 CME 활동을 수행하는 HCP 사이에 여러 세대의 다양한 교육적 학습 전략이 존재할 것입니다.50 이러한 학습 시대가 개인이 선호하는 학습 과정에 미치는 영향을 인정하지 않으면 CME의 효과와 잠재적 영향에 제한이 있을 수 있습니다. 
Finally, Bronfenbrenner's conceptualization of time is represented by the encapsulating chronosystem in which processes and systems of learning reside. This acknowledges that an individual's learning is shaped by changes arising in the historical era through which they live and develop,43 and requires researchers to be cognizant of similar changes in medical education over the past decades.47 These changes will occur more frequently as technology continues to impact health care education48 and practice.49 Thus, several generations of various pedagogical learning strategies will be present among HCPs undertaking any CME activity.50 Failure to acknowledge the impact of these learning eras on the individual's preferred learning process may limit the effectiveness and potential impact of CME.

결론
CONCLUSION

저자들은 PH CME에서 맥락적 요인의 역할에 대한 이해를 발전시키기 위해 이 새로운 통합 이론적 틀을 발전시켰습니다. 이 프레임워크에 적용된 모델은 서로를 보완하며, 각 모델을 단독으로 사용할 때보다 더 명확하게 CME의 전문적 학습 현상을 탐구할 수 있는 기회를 제공합니다. 이 분석에서 나온 통합된 이론적 프레임워크는 CME 연구에 사용할 수 있는 구조화된 이론 기반 접근법을 제공합니다. 이 통합 이론적 프레임워크는 문헌51을 종합하여 "가장 적합한" 프레임워크를 위한 선험적 프레임워크를 형성하여 PH CME에서 역할을 하는 맥락적 요인의 개념적 틀을 개발할 것입니다. 입증된 근거를 가진 이론을 바탕으로 만들어진 이 통합된 이론적 프레임워크의 발전은 향후 개념적 프레임워크를 사용한 연구 결과의 신뢰성을 향상시킬 뿐만 아니라 의학교육 연구 분야의 학문을 발전시킬 것입니다. 

The authors have advanced this novel unified theoretical framework to evolve understanding into the role of contextual factors in PH CME. The models applied in this framework complement each other and provide opportunity to explore the phenomenon of professional learning in CME with greater clarity than either model on its own. The unified theoretical framework that has emerged from this analysis offers a structured, theory based approach for use in CME research. This unified theoretical framework will form the a priori framework for a “best fit” framework synthesis of the literature51 to develop a conceptual framework of contextual factors that play a role in PH CME. The evolution of this unified theoretical framework created from theories with a proven evidence base not only enhances the reliability of findings using the future conceptual framework but also progresses scholarship within medical education research.

 


J Contin Educ Health Prof. 2021 Apr 1;41(2):130-138. doi: 10.1097/CEH.0000000000000339.

A Unified Theoretical Framework of Learning Theories to Inform and Guide Public Health Continuing Medical Education Research and Practice

Affiliations collapse

1Dr. Thomas L. Roux: SPHeRE Programme PhD Scholar, School of Public Health, Physiotherapy and Sports Science, University College Dublin, Ireland. Dr. Mirjam M. Heinen: Assistant Professor in Epidemiology and Biomedical Statistics, School of Public Health, Physiotherapy and Sports Science, University College Dublin, Ireland. Dr. Susan P. Murphy: Assistant Professor in Development Practice, School of Natural Sciences (Geography), Trinity College Dublin, Ireland. Dr. Conor J. Buggy: Assistant Professor in Occupational and Environmental Studies, School of Public Health, Physiotherapy and Sports Science, University College Dublin, Ireland.

PMID: 34057910

PMCID: PMC8168933

DOI: 10.1097/CEH.0000000000000339

Free PMC article

Abstract

Continuing medical education (CME) emerged at the start of the 20th century as a means of maintaining clinical competence among health care practitioners. However, evidence indicates that CME is often poorly developed and inappropriately used. Consequently, there has been increasing interest in the literature in evaluating wider contexts at play in CME development and delivery. In this article, the authors present a unified theoretical framework, grounded in learning theories, to explore the role of contextual factors in public health CME for health care practitioners. Discussion with pedagogical experts together with a narrative review of learning theories within medical and social science literature informed the framework's development. The need to consider sociocultural theories of learning within medical education restricted suitable theories to those that recognized contexts beyond the individual learner; adopted a systems approach to evaluate interactions between contexts and learner; and considered learning as more than mere acquisition of knowledge. Through a process of rigorous critical analysis, two theoretical models emerged as contextually appropriate: Biggs principle of constructive alignment and Bronfenbrenner bioecological model of human development. Biggs principle offers theoretical clarity surrounding interactive factors that encourage lifelong learning, whereas the Bronfenbrenner model expands on these factor's roles across multiple system levels. The authors explore how unification into a single framework complements each model while elaborating on its fundamental and practical applications. The unified theoretical framework presented in this article addresses the limitations of isolated frameworks and allows for the exploration of the applicability of wider learning theories in CME research.

공식화된, 평생 의사 커리어 개발의 중요성: 패러다임 변화를 위한 주장(Acad Med, 2021)
The Importance of Formalized, Lifelong Physician Career Development: Making the Case for a Paradigm Shift
R. Thomas Collins II, MD, and Rania Sanford, EdD

전반적으로 의학 분야에서는 의사가 공식적인 대학원 의학 교육을 마친 후 목적의식적인 전문성 개발이 부족한 것으로 보입니다. 의과대학, 레지던트, 그리고 펠로우십 수련 과정을 거치면서 의사의 적성과 성과를 평가할 수 있는 지표가 명확하게 정의된 커리큘럼을 포함하여 의사 개발이 특히 체계적으로 이루어집니다. 수련의가 진급함에 따라 단계적으로 노출과 책임이 부여됩니다. 수련 프로그램을 감독하는 국가 관리 기관이 존재하여 수련 프로그램이 의사 수련 및 전문성 개발에 대한 최신 기준을 충족하는지 확인합니다. 1,2 그러나 의사가 공식적인 수련 프로그램을 마치면 마치 완성품이 된 것과 같습니다. 예측 가능하지는 않더라도 원하는 경로 또는 여러 경로를 따라 지속적으로 발전하는 것을 목표로 하는 공식적인 개발은 학계 의학에서 거의 찾아볼 수 없습니다. 의사 개발은 개인이 추가 학위를 취득하기 위해 시작하거나 다른 동기나 개인적 관심사에 의해 주도되는 경우가 너무 많습니다. 특정 모델에 기반한 리더십 개발 프로그램이 거의 없기 때문에,3 경험에 따르면 대부분의 학술 의료 센터(AMC)(병원 및/또는 대학)에는 의사 인력의 의미 있는 전문성 개발을 위한 체계적이고 공식화된 프로세스가 부족한 것으로 나타났습니다.
As a whole, the field of medicine seems to lack purposeful professional development of physicians once they have completed their formalized graduate medical education. Throughout medical school, residency, and, if undertaken, fellowship training, the development of physicians is particularly regimented, including clearly defined curricula with metrics to assess aptitudes and performance. There are graduated exposure and responsibility as the trainee advances. National governing bodies exist to oversee the training programs, ensuring they meet current standards for physician training and professional development. 1,2 However, once physicians complete their formalized training program, it is as though they are a finished product. Formal development oriented toward continued, if not predictable, advancement along a desired path, or multiple paths, in academic medicine is nearly uniformly absent. Physician development is all too often initiated by the individual to pursue additional degrees or driven by other motivations or personal interests. Absent leadership development programs that are seldom based on specific models, 3 our experience suggests most academic medical centers (AMCs)—hospitals and/or universities—lack structured, formalized processes for meaningful professional development of their physician workforce.

평생 의학 교육 시스템은 의사를 개발하기 위한 가장 보편적인 시도입니다. 의사 면허를 유지하려면 평생 의학 교육이 필요합니다. 주제별 전문가의 교훈적인 강의로 대표되는 그랜드 라운드가 AMC에서 가장 일관되게 제공되는 교육입니다. 또한 전문과목위원회 인증을 유지하기 위한 요건에는 재인증 시험과 최근에는 일종의 품질 개선 프로젝트를 완료하는 것이 포함됩니다. 5 이러한 메커니즘의 목적은 의사가 자신의 분야에서 최신 정보를 유지하는 것입니다. 그러나 그랜드 라운드나 기타 유사한 평생 의학 교육에 참석하여 전문 기술이나 지식을 개발하는 의사는 거의 없기 때문에 이러한 메커니즘이 경력 개발을 충분히 촉진하지는 못합니다. 6 이러한 강의식 교육 포럼은 전달 방식, 지식 및/또는 기술을 실습할 수 있는 기회 부재, 실수로부터 배울 수 있는 기회 부재 등 본질적인 한계가 있습니다. 미국 의과대학협회와 같은 조직은 미래의 학장 7을 준비하거나 소수자 및 중견 여성 교수진을 지원하는 등 틈새 영역에 집중하면서 이러한 격차를 보완하기 위해 성공적으로 노력해 왔습니다.
The continuing medical education system is the prevalent attempt at developing physicians. Continuing medical education is required to maintain licensure. 4 Grand rounds, typified by a didactic lecture by a subject-matter expert, is the most consistent offering across AMCs. Additionally, there are requirements for maintaining specialty board certification that include completing a recertification examination and, more recently, a quality improvement project of some type. 5 The intent of these mechanisms is for physicians to remain up to date within their fields. However, such mechanisms do not sufficiently facilitate career development, as rarely have physicians developed expert skill or knowledge by attending grand rounds or other similar continuing medical education offerings. 6 Those didactic educational forums have significant intrinsic limitations, such as the mode of delivery, absence of an opportunity to practice knowledge and/or skills, and opportunity to learn from mistakes made. Organizations such as the Association of American Medical Colleges have successfully endeavored to compensate for these gaps while focusing on niche areas, such as preparing future deans 7 or supporting minority and mid-career women faculty.

의사의 경력 개발과 심리적 계약
Physician Career Development and the Psychological Contract

조직과 직원 사이에는 일반적으로 심리적 계약이라고 하는 두 가지 유형의 암묵적 계약이 존재합니다. 8 전통적인 심리적 계약은 조직이 장기적인 조직 충성도와 헌신에 대한 대가로 직원에게 고용 안정조직 중심의 경력 개발을 제공하는 상호 이익이 되는 관계입니다. 9 승진은 연공서열에 큰 비중을 두고 있습니다. 이 모델은 20세기 후반까지 경력 개발에 대한 유일한 운영 방식이었습니다. 대다수의 AMC와 일부 조직 및 산업은 종신 고용이라는 종신직으로 대표되는 이 모델에 따라 계속 운영되고 있습니다. 종신 고용은 AMC와 민간 또는 영리 의료기관 간의 고용을 구분하는 핵심적인 특징이었으며, 지금도 마찬가지입니다.
There are 2 types of implicit agreements, typically referred to as psychological contracts, that exist between organizations and employees. 8 The traditional psychological contract is a mutually beneficial relationship wherein the organization provides job security and institution-centered career development for the employee in return for long-term organizational loyalty and commitment. 9 Advancement is heavily weighted toward seniority. This model was the singular operating approach to career development until the latter half of the 20th century. The majority of AMCs, and some organizations and industries, continue to operate under this model, which is couched in terms of tenure, namely, employment for life. Tenure was, and arguably remains, a key distinguishing characteristic of employment between AMCs and, for example, private or for-profit clinical practices.

두 번째 심리적 계약 모델은 불안정하고 혼란스러운 시장에서는 더 이상 고용 안정성을 보장할 수 없다는 조건에 기초합니다. 20세기 경제가 변화하고 '다운사이징'이 도입되면서 일자리가 급속히 사라졌습니다. 고용 안정이 보장되지 않는 상황에서 "조직은 내부 이동, 지속적인 성장, 기술 및 능력 향상, 개인적 전문성 개발의 기회를 제공할 수 있다"는 두 번째 심리적 계약이 탄생했습니다. 10 그 결과 직원들은 고용 가능성, 즉 일자리를 잃었을 때 다른 취업 기회를 제공할 수 있는 개인적, 전문적 개발로 초점을 옮겼습니다. 11
The second psychological contract model is based on the condition that in unstable and chaotic markets, job security can no longer be guaranteed. As 20th-century economies shifted and “downsizing” was introduced, jobs rapidly vanished. The second psychological contract was born: in the absence of job security, “organizations may offer opportunities for internal movement, continual growth, increased skills and abilities, and personal professional development.” 10 As a result, employees shifted their focus to employability—their personal, professional development that would provide for other employment opportunities if or when they lost their jobs. 11

직원들이 고용 안정성이 보장되지 않는 상황에서 자기계발을 일종의 보험으로 여기기 시작하면서고용 가능성을 유지하는 데 필요한 성장 기회를 제공하는 조직은 점점 더 선호도가 높아지고 최고의 인재를 채용하고 유지하는 데 더 유리한 위치에 서게 되었습니다. 12 따라서 조직은 직원의 전문성, 성과, 헌신도 향상에 대한 대가로 다른 조직으로 이직할 수 있는 경력 개발 기회를 제공합니다조직 내 승진은 직원이 필요한 기술을 보유하고 있는지에 따라 결정되며, 연공서열은 그다지 중요하지 않습니다. 따라서 현대의 많은 조직은 직원의 공식적인 개발을 위한 의미 있는 메커니즘을 구축했습니다. 13
As employees start to see their own development as a form of insurance in the absence of job security, organizations that provide opportunities for the growth needed to maintain employability become increasingly desirable and are better positioned to recruit and retain top talent. 12 As such, the organization provides career development for the employee that is portable—transferrable to other organizations—in return for the employee’s increased expertise, performance, and, hopefully, commitment. Advancement within the organization is predicated on the employee’s possession of a necessary skill set, and seniority is less important. Thus, many modern organizations have established meaningful mechanisms for formalized development of their personnel. 13

현재 대부분의 AMC에서 의사를 위한 엄격한 개발 프로세스가 부재한 것은 과거와 현재의 최악의 심리적 계약이 합쳐진 것으로 볼 수 있습니다.

  • AMC는 수십 년 동안 테뉴어 트랙 교수진의 꾸준한 감소를 목격해 왔으며, 2013년에는 "풀타임 MD 임상 교수진의 26%~12%만이 테뉴어 트랙에 있었고 14%만이 테뉴어 트랙에 있었습니다." 14
  • 테뉴어 제도가 점점 더 시대에 뒤떨어지면서 AMC의 의사 15명은 더 이상 전임자들이 누렸던 직업적 안정성을 누리지 못하고 있습니다.
  • 이제 의사들은 매년, 5년마다 등 다양한 주기로 반복적으로 갱신되는 계약에 따라 고용되며, 계약은 AMC의 재량에 따라 연장되는 경우가 늘고 있습니다.
  • 마찬가지로 많은 계약은 사업상 또는 재량적 결정에 따라 언제든지 해지될 수 있습니다.
  • 최근의 심리적 계약 모델과 일관되게, 직업 안정성은 초기 경력 의사들에게 학문적 성공 로드맵의 불명확성과 함께 우려되는 문제임에도 불구하고, 의사들에게 직업 안정성은 부재하며,16 번아웃을 개선하기 위한 근본적인 필요성으로 더욱 주장되고 있습니다. 17 

The current lack of a rigorous developmental process for physicians at most AMCs could be viewed as an amalgamation of the worst of the old and new psychological contracts.

  • AMCs have witnessed a steady decline in tenure-track faculty for decades; in 2013, “only 26%—12% of full-time MD clinical faculty were tenured and 14% were on the tenure track.” 14 
  • With tenure becoming increasingly outmoded, 15 physicians in AMCs no longer have the job security their predecessors once enjoyed.
  • Physicians now are increasingly employed under contracts with recurrent renewals (in varying periods such as annually, every 5 years, etc.) that are extended at the AMC’s discretion.
  • Similarly, many contracts can be terminated at any time, subject to business or discretionary decisions.
  • Consistent with the more recent psychological contract model, job security is absent for physicians, notwithstanding that job security is a concern for early-career physicians that has been concomitant with lack of clarity on an academic roadmap of success, 16 and is further argued to be a fundamental need to ameliorate burnout. 17

그러나 20세기 초의 조직과 전통적인 심리 계약 모델과 마찬가지로 AMC는 여전히 위계질서를 유지하고 있으며, 승진 결정과 승진 기회 선택에 있어서도 여전히 연공서열에 큰 비중을 두고 있어 이전 패러다임의 흔적이 남아 있습니다의사의 경력 개발을 위한 합법적인 메커니즘이 현저히 부족한 것은 오늘날 채용되어야 할 AMC의 심리적 계약에 대한 이해가 부족하다는 것을 반영하는 것으로 보입니다. 이러한 격차는 여성과 소수자, 특히 경력 중기 및 후기 단계에 있는 의사들의 리더십 발전, 유지, 준비와 같은 목표를 달성할 수 있는 AMC의 잠재력을 더욱 약화시킵니다.
However, more like the traditional psychological contract model, AMCs remain particularly hierarchical, as was the case in organizations and the traditional psychological contract of the early 20th century, and seniority is still heavily weighted when it comes to decisions of advancement and selection for advancement opportunities—an additional vestige of the former paradigm. The significant dearth of legitimate mechanisms for physician career development seems to reflect a lack of understanding of the psychological contract on the part of AMCs that should be employed today. This gap further undermines an AMC’s potential to meet goals such as advancing, retaining, and preparing for leadership women and underrepresented minorities, particularly those in mid- and late-career stages.

경력 개발에 대한 대조적인 접근 방식
A Contrasting Approach to Career Development

의사들의 의도적인 경력 개발이 부족하다는 것은 분명하지만, 구성원들의 성공적인 경력 개발의 역사가 입증된 오랜 조직인 미군으로부터 의사들이 배워야 할 것이 많습니다. 미군에는 공식화되고 의도적인 경력 개발의 정신이 군대와 그 성공에 필수적입니다. 레지던트나 펠로우십을 마치면 의사가 완성품으로 취급되는 의학계의 접근 방식과는 달리, 군대는 계급에 관계없이 제복을 입는 한 성장하고 배우고 발전할 수 있는 잠재력을 가지고 있으며, 군대는 이러한 개인의 경력 개발 과정을 보장하는 시스템을 갖추고 있다는 다른 철학을 가지고 있습니다. 18 이러한 지속적인 역량 기반 개발 프로세스는 군 생활에서 떼려야 뗄 수 없는 부분이며, 19 대령과 일반 장교 사이에서도 계급에 관계없이 계속됩니다. 의료기관과 우리 사회도 이와 유사한 철학을 도입함으로써 의사들의 역량을 크게 향상시키고 현재 낭비되고 있는 막대한 잠재력을 활용할 수 있습니다. 이러한 접근 방식은 문화적 차이에도 불구하고 군대와 교육 기관이 공유하는 장기 근속 및 서비스 차별화 요소를 중시하는 임무 중심의 직업 기관에 적합하다고 주장합니다. 
While it is clear that intentional career development of physicians is lacking, there is much that physicians have to learn from a longstanding organization with a demonstrated history of successful career development of its members—the U.S. military. There is an ethos of formalized and intentional career development essential to the military and its success. As opposed to the approach in medicine where a physician is largely treated as a finished product upon completing residency or fellowship, the military has a different philosophy—as long as one dons the uniform, no matter the rank, they still have the potential to grow, learn, and develop, and the military has a system to make sure this career-long process of individual development happens. 18 This ongoing, competency-based developmental process is an inextricable part of being in the military, 19 one that continues no matter the rank, even among colonels and general officers. By incorporating a similar philosophy, medical institutions and our society stand to enhance greatly the capabilities of physicians and capitalize on large potential that is currently going to waste. We argue that this approach is appropriate for mission-driven, career institutions that value longevity and service—distinguishing elements that are shared by the military and educational institutions despite their cultural differences.

의사 경력 개발에 대한 헌신 증가가 의료 조직에 미치는 영향
The Impact of Increased Commitment to Physician Career Development on Medical Organizations

직원 개발에 대한 조직의 투자는 수십 년 동안 문서화된 이점을 가져옵니다. 거터리지와 동료들은 조직이 직원 개발을 위한 헌신적인 노력으로 인해 직원 기술 및 사기 향상, 직원 역량 강화, 인적 자원 계획 및 선발 개선, 전략적 이점 증대, 직원 유지율 향상 등을 경험했다고 보고했습니다. 20 여러 전문 분야의 수많은 연구자들은 멘토링, 코칭, 액션 러닝 및 기타 방법을 통해 조직이 인재 개발에 투자하면 경력 만족도와 기본 지식 및 기술이 향상되고 직원 이직률이 감소한다는 사실을 밝혀냈습니다. 21-23 AMC가 의도적이고 공식화된 의사 경력 개발에 더 많은 노력을 기울인다면 광범위한 긍정적 효과를 볼 수 있다고 믿지 않을 이유가 없습니다. 
Organizational investment in the development of employees carries benefits that have been documented for decades. Gutteridge and colleagues have reported that organizations experience enhanced employee skills and morale, employee empowerment, improved human resources planning and selection, greater strategic advantage, and enhanced employee retention because of dedicated efforts toward employee development. 20 Numerous other investigators from multiple professional domains have shown that organizational investment in personnel development through mentoring, coaching, action learning, and other methods improves career satisfaction and fundamental knowledge and skill and decreases employee turnover. 21–23 There is no reason to believe that AMCs would not benefit greatly from increased commitment to intentional, formalized physician career development and see far-reaching, positive effects.

의사의 번아웃과 직업 불만족은 의료계에서 유행병 수준입니다. 추정치의 범위는 넓지만, 샤나펠트와 동료들은 의사의 약 50%가 직업적 소진을 겪고 있다고 지적하는 광범위하고 잘 설계된 연구를 보고한 바 있습니다. 24 이는 미국 내 의사 인력의 절반에 해당하는 놀라운 수치입니다. 의사들의 직업 불만족도 또한 수십 년 동안 증가 추세에 있습니다. 25 번아웃과 경력 불만족은 모두 생산성 저하로 이어집니다. 또한 번아웃은 이직률 증가와도 관련이 있으며,26 이는 인력 안정성뿐만 아니라 조직의 재정 건전성에도 상당한 비용을 초래할 수 있습니다. 의료기관을 떠나는 의사 한 명당 의료기관은 약 150만 달러의 매출 손실과 채용 비용의 손실을 입게 됩니다. 27,28 의사의 경력 개발에 투자하면 훨씬 적은 비용으로 이 비용을 절감할 수 있습니다. 
Physician burnout and career dissatisfaction are at epidemic levels within medicine. While the range of estimates is wide, Shanafelt and colleagues have reported extensive and well-designed studies that point to approximately 50% of physicians as suffering from professional burnout. 24 This is an alarming half of the physician workforce in the United States. Career dissatisfaction among physicians has also been on the rise for decades. 25 Both burnout and career dissatisfaction result in decreased productivity. Additionally, burnout is associated with increased turnover, 26 which can be quite costly, not only for workforce stability but also for the financial health of organizations. For each physician who leaves an institution, the cost for the organization is approximately $1.5 million dollars in lost revenue and recruitment expenses. 27,28 Investing in physician career development would be a far less expensive proposition.

의미 있는 경력 개발은 직무 만족도와 직원 유지율을 향상시킵니다. Ng와 동료들은 대규모 메타분석을 통해 경력 개발을 위한 조직적 지원의 척도가 경력 만족도와 가장 밀접한 상관관계가 있음을 보여주었습니다. 29 실제로 이 연구에 따르면 경력 개발에 대한 조직의 지원은 급여 및 승진보다 경력 만족도와 더 밀접한 관련이 있으며, 이는 조직 내 전통적인 패러다임과 상반되는 결과입니다. 또한 조직의 직원 개발 지원은 조직에 대한 직원의 헌신, 즉 조직에 남을 가능성과도 높은 상관관계가 있는 것으로 나타났습니다. 10 반대로 고용 안정이 보장되지 않는 환경에서 원하는 학습 및 성장 기회를 제공하지 못하는 조직은 핵심 직원을 잃을 위험이 커져 경쟁력이 약화됩니다. 12 
Meaningful career development improves job satisfaction and employee retention. In a large meta-analysis, Ng and colleagues showed that measures of organizational support for career development were most strongly correlated with career satisfaction. 29 In fact, that study showed that organizational support of career development was more strongly related to career satisfaction than to salary and promotion, which is in contradistinction to the traditional paradigms within organizations. Further, organizational support of employee development has been highly correlated with employees’ commitment to the organization, that is, the likelihood of remaining with the organization. 10 Conversely, in an environment where job security cannot be guaranteed, organizations that fail to deliver the desired learning and growth opportunities are at greater risk of losing key employees, thus becoming less competitive. 12

최근 강조된 바와 같이, 중견 및 후기 경력 교직원을 위한 멘토링 및 경력 개발의 성과에 관한 데이터는 거의 없는데, 30 이는 이 단계의 의사들이 의도적이고 엄격한 경력 개발을 하는 경우가 드물기 때문일 수 있습니다. 이러한 데이터 부족으로 인해 은퇴 등 의사의 경력 결정에 영향을 미치는 변수의 상호 작용에 대한 이해가 부족합니다. 그 결과, 현재 의사의 은퇴에 관한 연구 결과가 서로 엇갈리고 있는 것처럼 보입니다. 예를 들어, 스카룹스키와 그의 동료들은 65세 이상의 의사들 중 경력을 계속 유지하고 있는 의사들의 수가 증가하고 있다고 보고했습니다. 31 그러나 이들은 별도의 논문에서 의사들의 은퇴 결정에 영향을 미치는 주요 요인으로 의사의 소진을 동시에 보고했습니다. 32 이는 의사들 사이에 소진이 만연해 있는 상황에서 경력 말기에 도달한 의사들이 계속 일을 계속하고 있지만, 경력 초기 단계에 있는 의사들의 소진은 향후 의료계에서 조기 퇴출될 위험을 증가시킬 수 있음을 시사합니다. 이렇게 되면 현재보다 훨씬 더 많은 의사가 부족해질 것입니다. 그러나 의도적인 의사 경력 개발 철학을 도입하면 의사의 소진을 크게 줄이지는 못하더라도 완화할 수 있으며, 이를 통해 의사의 생산성 향상과 지속적인 경력 참여로 이어져 다가오는 의사 부족의 영향을 완화할 수 있다고 주장합니다. 
As has recently been highlighted, few data are available regarding the outcomes of mentoring and career development for mid- and late-career faculty, 30 most likely because intentional, rigorous career development of physicians at these stages is rare. This lack of data shortchanges our understanding of the interplay of variables that influence physician career decisions, such as retirement. As a result, there is currently a seeming divergence of findings regarding physician retirement. For example, Skarupski and colleagues have reported increasing numbers of physicians older than 65 who are continuing in their careers. 31 Yet in a separate publication, they simultaneously reported physician burnout as the leading factor influencing physicians’ decisions to retire. 32 This suggests that in the face of widespread burnout among physicians, although those who have made it to late-career continue to press on, burnout among physicians in early-career stages will increase the risk of future early exits from medical practice. This would result in a much greater physician shortage than is already present. However, by employing a career-long philosophy toward intentional physician development, we contend that physician burnout could be mitigated, if not significantly decreased, thereby leading to increased productivity and continued career involvement of physicians such that the impact of the looming physician shortage might be mitigated.

의사 경력 개발 모델
The Physician Career Development Model

우리는 미 공군에서 처음 개발한 교육훈련 방법인 분석-설계-개발-실행-평가(ADDIE) 33를 사용하는 프레임워크를 제안합니다. 34 인적 자원 관리 분야에서 ADDIE 모델은 직원 교육 프로세스의 황금 표준입니다. 35 의사 경력 개발에 ADDIE 모델을 적용하는 것은 이 모델을 새롭게 적용하는 것이지만 한계가 없는 것은 아닙니다. 학습자 중심의 기반에는 성인기에 걸쳐 점진적으로 복잡한 지식과 변화에 대한 대응 방식이 포함됩니다. 36,37   
We propose a framework that uses the analyze-design-develop-implement-evaluate (ADDIE) training method, 33 which was originally developed by the U.S. Air Force. 34 In the field of human resource management, the ADDIE model is the gold standard for employee training processes. 35 Applying the ADDIE model to physician career development would be a novel application of the model and not without limitations. Its learner-centered underpinnings involve progressively complex ways of knowing and responsiveness to change over the course of adulthood. 36,37

ADDIE의 반복적인 프레임워크는 "기술, 지식, 행동의 성장"을 반영하고 경력 과정의 변화를 허용하는 의사 개발을 위한 발달적 접근 방식에 대한 우리의 요구를 반영합니다. 38 ADDIE의 프레임워크는 '평생 학습자'로서 교수진에게 "높은 관련성"을 보이는 개인적 접근 방식인 코칭과 유사하며, 39 의사의 경우 회복력 증가, 40 임상 진료의 질 향상, 41 웰빙 증진, 고통 감소 등의 효과가 있는 것으로 나타났습니다. 42 우리는 공식화된 ADDIE 프레임워크가 AMC의 제약 내에서 의사에게 단계에 적합한 경험적 학습 기회를 제공하는 강력한 모델을 만든다고 가정합니다. 이 모델의 성공 여부는 기관-의사 역학 관계의 특성에 따라 달라질 수 있으며, 훈련, 적성, 역량, 직무 만족도를 갖춘 의사 집단Cadre을 양성하여 환자 치료, 교육, 연구의 질에 영향을 미치고 폭넓은 의사 역량을 통해 의료 혁신을 위한 역량을 구축할 수 있을 것입니다. 참고로, 우리는 AMC 내의 관점에서 의사 경력 개발 문제를 다루고 있지만, 민간 및 영리 조직과 의료 관리 조직과 같은 다른 맥락에서도 똑같이 효과적이지 않을 것이라고 믿을 이유가 없습니다. 
ADDIE’s iterative framework echoes our call for a developmental approach for physician development—a reflection of the “growth in skills, knowledge, and behaviors” and allowing for the changes in the course of a career. 38 ADDIE’s framework parallels coaching, a personal approach that has shown to be “highly relevant” for a faculty member as a “lifelong learner of a craft,” 39 which for physicians has shown increased resilience, 40 improved quality of clinical practice, 41 enhanced wellbeing, and decreased distress. 42 We posit that a formalized ADDIE framework creates a robust model delivering stage-appropriate experiential learning opportunities for its physicians within the constraints of their AMCs. The success of this model could predicate on the nature of the institution–physician dynamic, and would result in a physician cadre with training, aptitudes, competence, and job satisfaction that in turn affect the quality of patient care, teaching, and research, and build capacity for health care innovation through the breadth of academic physician capabilities. Of note, while we are addressing the issue of physician career development from the perspective within an AMC, we have no reason to believe it would not be equally effective in other contexts such as private and for-profit organizations and health care management organizations.

ADDIE 모델은 야심찬 모델이지만 고려해야 할 몇 가지 한계가 있습니다. 이 모델은 의사 경력 개발에 대한 역동적이고 고도로 개인화된 접근 방식을 전제로 하기 때문에 이를 조직 전체에 확대 적용하려면 상당한 자원을 투자해야 합니다. ADDIE에 따른 각 의사의 선택에 따라 발생할 수 있는 다양한 개발 경로가 소규모 AMC에서는 문제가 될 수 있습니다. 또한, 이 모델의 구현은 의사의 생애에 걸친 장기적인 궤적에 의해 방해를 받을 수 있습니다. 
While the ADDIE model is ambitious, there are some limitations that should be considered. The model’s predication on a dynamic, highly personalized approach to physician career development commands investment of significant resources to bring it to scale across organizations. The diversity of development paths that could result from each physician’s choices under ADDIE could be a challenge at small AMCs. Additionally, implementations of the model could be hindered by its long-term trajectory over a physician’s lifetime.

의사 경력 개발에 대한 이론적 프레임워크는 그림 1에 나와 있습니다. 
Our theoretical framework for physician career development is presented in Figure 1.

 

분석 단계
Analysis phase

'학습과 성장 기회'를 제공하기 위해 AMC는 조직의 목표와 제약에 대한 현실적인 평가와 함께 의사들이 어떤 방향으로 어떻게 커리어를 발전시키고 싶어 하는지에 대한 이해가 있어야 합니다. 
To provide “learning and growth opportunities,” 12 AMCs must have an understanding of how and in what directions the physicians want to take their careers, along with a realistic assessment of the organizational goals and constraints.

의사의 역량과 목표AMC의 요구 사항과 결합하여 분석하면 성공에 필요한 인사이트를 얻을 수 있습니다. 이러한 체계적인 평가는 "교육 설계 및 개발의 중요한 초기 단계이며 교육 프로그램의 전반적인 효과에 상당한 영향을 미칠 수 있습니다." 43 역량, 목표, 요구사항, 만족의 동인에 대한 의사의 자체 평가는 멘토, 코치 및 숙련된 커리어 가이드의 의견을 통해 이루어집니다. AMC가 이러한 리소스를 제공한다면 의미 있는 경력 개발 프로그램을 만드는 첫걸음이 될 것입니다. 
The analysis of the physician’s capabilities and goals in combination with the needs of the AMC gives the necessary insight for success. This systematic assessment “is a crucial initial step to training design and development and can substantially influence the overall effectiveness of training programs.” 43 A physician’s self-assessment of capabilities, goals, needs, and drivers of satisfaction is done with input from mentors, coaches, and/or a trained career guide. If AMCs provided such resources, it would be a first step in cocreating a meaningful career development program.

Lieff는 의사들이 자신에 대한 이해와 가장 큰 커리어 포부를 높일 수 있는 여러 가지 메커니즘을 훌륭하게 설명했습니다. 44 한 가지 메커니즘은 "몰입flow"이라고 불리는 "최적의 경험"의 에피소드에서 비롯됩니다. 45 샤나펠트와 동료들은 의사가 일주일에 20%의 시간만 즐거움을 주는 경험에 투자하면 번아웃의 위험이 크게 줄어든다는 것을 보여주었습니다. 46 따라서 업무 몰입의 동인을 파악하고 이를 위한 기회를 제공하기 위한 개발 계획을 수립하면 의사의 경력 만족도는 높아지고 소진은 감소하며, 이는 이들을 고용하는 AMC에도 도움이 될 것입니다.  
Lieff has outlined superbly multiple mechanisms through which physicians can increase their understanding of themselves and their greatest career aspirations. 44 One mechanism arises from episodes of “optimal experience,” which have been termed “flow.” 45 Shanafelt and colleagues have shown that if a physician spends only 20% of their time per week working on those experiences that bring enjoyment, the risk of burnout is drastically reduced. 46 It follows that by identifying drivers of flow and building a developmental plan to provide opportunities for it, physicians would experience increased career satisfaction and decreased burnout, which would also benefit the AMCs that employ them.

조직적 맥락을 고려해야 합니다. 의사의 가치관, 열정, 궁극적인 커리어 목표가 AMC의 장기적인 비전 및 미션과 일치해야 합니다. 그렇지 않으면 AMC는 의사의 개발에 투자할 인센티브가 없고, 의사는 성취감을 느끼지 못할 것입니다. 
The organizational context must be taken into consideration. The physician’s values, passions, and ultimate career goals must align with the long-term vision and mission of the AMC. If they do not, the AMC has no incentive to invest in the physician’s development, and the physician will be unfulfilled.

설계 단계
Design phase

의사는 AMC 및 커리어 가이드/코치와 협력하여 경력 개발 계획을 수립합니다. 예를 들어, 이 계획에서는 AMC의 사명과 제약 조건(시간 및 자금의 가용성 또는 기관의 요구와 같은 자원)에 따라 의사가 경력 목표를 달성하는 데 가장 유리한 위치에 놓일 수 있는 교육 기회와 기타 기회를 식별합니다. 
The physician would create a career development plan collaboratively with their AMC and a career guide/coach. The plan identifies, for example, those training opportunities as well as other opportunities that put the physician in the best position to reach their career goals in alignment with the AMC’s mission and constraints (resources such as availability of time and funds or institutional needs).

직장 내 학습의 거의 70%가 실무 교육, 행동, 체험적 또는 능동적 학습에서 비롯됩니다. 39,47 이는 레지던트 및 펠로우십 교육의 도제식 모델에 반영되어 있으며 교수진 개발의 관행을 변화시키고 있습니다. 39 의사의 경력 개발에 이러한 접근 방식을 사용하면 AMC와 의사는 의료 교육 및 비즈니스 부문에서 효과가 있는 것으로 알려진 학습자 중심 모델, 즉 즉각적이고 측정 가능한 영향을 미치는 점진적이고 발전적인 변화를 향해 유연하고 맞춤화되고 점진적인 모델을 활용할 수 있습니다. 47 
Adults learn best experientially: nearly 70% of workplace learning stems from on-the-job training, action, or experiential, or active, learning. 39,47 This is reflected in the apprenticeship model of residency and fellowship training and has been transforming the practice of faculty development. 39 Using this approach in physician career development, the AMC and physician could capitalize on what we know works in medical training and in the business sector: learner-centered models that are flexible, tailored, and incremental toward gradual and evolutionary change with an immediate, measurable impact. 47

개발 단계
Development phase

우리가 제안하는 경력 개발 프로그램은 의사가 목표를 향해 나아갈수록 경험의 단계를 점진적으로 높여나갈 수 있습니다. 이러한 발전의 예로는 처음에는 클리닉에서 환자를 진료하다가 클리닉의 부원장이 되고, 다음에는 클리닉의 원장으로 승진한 후 AMC의 모든 외래 클리닉의 원장이 되는 의사를 들 수 있습니다. 
The career development program we propose would progressively increase echelons of experiences as the physician moves further toward their goal(s). An example of this progression is a physician who at first sees patients in a clinic, then becomes the associate director of the clinic, next advances to director of the clinic, and thereafter becomes the director of all outpatient clinics for the AMC.

이러한 맥락에서 다음 단계로 나아가기 위해 필요한 적성을 정의하고 측정하는 것이 필요하며, 주어진 단계 내에서 적성을 어떻게 발휘할 수 있는지를 파악하는 것이 중요합니다. 적성을 정의하는 데 있어 본질적인 과제이자 도전 과제는 성공적인 완수 및 진급 준비에 대한 지표를 설정하는 것입니다. 잠재적인 단계별 개발 프로젝트의 개념화 또는 실행은 평가 및 개발 향상을 위한 매우 효과적인 행동 학습 방법을 제공하기 위해 수행될 수 있습니다. 48 
Within this context, it is necessary to define and measure the aptitudes needed and how they might be demonstrated within a given echelon to advance to the next. Intrinsic, and a challenge, to the definition of aptitudes is the establishment of metrics of successful completion and readiness to advance. The conceptualization or implementation of potential echelon-specific developmental projects could be undertaken to provide a highly effective, action-learning method for assessment and enhanced development. 48

실행 단계
Implementation phase

일부 의사의 경우, 공식화되고 개별화된 훈련 및 교육(예: 연구, 교육 또는 비즈니스 관련 석사 프로그램)이 역량, 헌신, 경력 만족도를 높여 경력 개발에 적합할 수 있습니다. 49 다른 많은 의사들에게 코칭과 멘토링은 가장 유익한 경력 개발 자원입니다. 21 이는 공식적인 교육 프로그램이나 의료 서비스 맥락에서 이루어질 수 있습니다. 의료계에서는 명확한 기대치와 가시적인 목표(소위 기능적 멘토링)를 가지고 멘토링 관계를 구축할 때 결과가 개선됩니다. 50 공식적인 멘토링 또는 커리어 코칭 프로세스를 개발하면 롤 모델에 대한 접근성과 노출이 증가하여 경력 개발 계획의 실행이 활성화되고, 궁극적으로 의사가 AMC에 제공할 수 있는 역량이 증가합니다. 
For some physicians, formalized, individualized training and education (e.g., research-, teaching-, or business-related master’s programs) may be appropriate for career development by increasing capabilities, commitment, and career satisfaction. 49 For many other physicians, coaching and mentoring are the most beneficial career development resources. 21 This may occur within formalized education programs or in the health care context. Within health care, when mentoring relationships are established with clear expectations and a tangible goal—so-called functional mentoring—the outcomes improve. 50 Developing a formal mentoring or career-coaching process activates implementation of the career development plan by increasing access and exposure to role models, ultimately increasing capabilities the physician could bring to bear for the AMC.

계획을 실행하는 동안 AMC는 의사의 승진을 위한 경로를 만들어야 합니다. 더 높은 경력을 쌓고 싶은 의사의 경우, 이전 노력을 통해 습득한 기술은 있지만 이를 활용할 수 있는 길이 없다면 의욕이 크게 저하될 수 있습니다. 앞서 설명한 바와 같은 협력적 개발 참여를 통해 의사와 조직은 의사의 역량 내에서 가능한 최고 직책에 도달할 수 있는 과정을 설명하기 위해 투명한 관계를 구축할 수 있습니다. 이러한 투명성은 의사가 특정 목표를 달성하기 위해 현실적인 자기 평가와 상황 평가를 할 수 있도록 해주기 때문에 매우 유익할 것입니다. 이 과정에는 의학계에서는 생소할 수 있는 개방성이 필요합니다. 그러나 이는 필요한 신뢰를 증진하고, 공정성과 정의감을 제공하며, 공평한 능력주의를 창출하고 유지할 수 있습니다. 13 
During implementation, it is incumbent upon AMCs to create a pathway for physician advancement. For physicians who have higher career aspirations, being left with a ready skill set gained through previous efforts but no avenue to use it can be significantly demotivating. Through this collaborative developmental engagement along the lines described earlier, the physician and organization cocreate a transparent relationship, if only to delineate the process by which the highest possible position within the physician’s capabilities could be attained. Such transparency would be markedly beneficial because it would provide the physician with realistic self- and contextual appraisal toward reaching specific goals. This process requires openness that may be novel in medicine. But it would promote necessary trust, provide a sense of fairness and justice, and create and maintain an equitable meritocracy. 13

평가 단계
Evaluation phase

의사의 경력 개발 과정에서는 이정표를 달성하고 개발 기회가 제공되고 있는지 확인하기 위해 지속적이고 형성적인 평가가 필요합니다. 이를 통해 진행 상황, 변경해야 할 사항, 다음 단계에 대한 준비 가능성을 파악할 수 있습니다. AMC의 경우, 이 평가는 투자 수익률에 대한 평가를 제공하고 승계 계획을 수립할 수 있게 해줍니다. 
The physician career development process requires ongoing, formative assessment to ensure that milestones are being achieved and developmental opportunities are being undertaken. This sheds light on progress, what needs to be altered, and the likelihood of preparedness for the next echelon. For the AMC, the evaluation both provides an appraisal of the return on investment and allows for succession planning.

결론
Concluding Remarks

ACGME에서 인증한 레지던트 및 펠로우십 교육 프로그램의 형태로 의사 경력의 기초를 제공하기 위해 엄격하고 잘 발달된 시스템이 마련되어 있습니다. 의사가 경력을 쌓는 동안 지속적이고 의도적인 경력 개발을 위한 시스템은 매우 부족합니다. 평생 의사 경력 개발 철학을 채택하면 AMC, 환자, 의사, 수련의 모두에게 큰 이득이 될 수 있습니다. 
There are rigorous, well-developed systems in place to provide the foundations of physicians’ careers in the form of Accreditation Council for Graduate Medical Education accredited residency and fellowship training programs. Systems for ongoing, intentional career development for physicians across the course of careers are sorely lacking. By adopting a lifelong physician career development philosophy, AMCs, their patients, their physicians, and trainees stand to gain significantly.

 


Acad Med. 2021 Oct 1;96(10):1383-1388. doi: 10.1097/ACM.0000000000004191.

The Importance of Formalized, Lifelong Physician Career Development: Making the Case for a Paradigm Shift

Affiliations

1R.T. Collins II is clinical associate professor, Departments of Pediatrics and Internal Medicine, Stanford University School of Medicine, Palo Alto, California; ORCID: http://orcid.org/0000-0002-3387-6629 .

2R. Sanford is director, Faculty Professional Development, Stanford University School of Medicine, Palo Alto, California.

PMID: 34074898

DOI: 10.1097/ACM.0000000000004191

Abstract

The value of structured development processes has been recognized and implemented in formal physician training programs such as residencies and fellowships. Physicians are seemingly viewed as a "finished product" upon completing formal training. In recent years, a number of academic medical centers have implemented formalized early-career development programs for physicians, largely those who have a major research focus. However, beyond the early stage of physicians' careers, formalized and intentional physician career development programs are rare. The lack of a philosophy of intentional, career-long individual development at academic medical centers reflects a narrow understanding of the implicit contract between employers and employees. The resulting gap leads the vast majority of physicians to fall short of their potential, further leading to long-term loss for the academic medical centers, their physicians, and society as a whole. Based on the framework of analyze-design-develop-implement-evaluate, the authors propose a robust, iterative model for physician career development that goes beyond skills and knowledge maintenance toward leveraging a broad range of individual capabilities, needs, and contexts along the career lifespan. The model provides a means for harnessing physicians' strengths and passions in concert with the needs of their organization to create greater physician fulfillment and success, which in turn would benefit the patients they care for and the academic medical centers in which they work.

CPD의 개념적 프레임워크의 다섯 도메인 (J Contin Educ Health Prof. 2023)
Five Domains of a Conceptual Framework of Continuing Professional Development
David P. Sklar, MD; Teresa Chan, MD, MHPE; Jan Illing, PhD; Adrienne Madhavpeddi, MSc; William F. Rayburn, MD, MBA, FSACME 

문제 제기
PROBLEM STATEMENT

의사를 교육하기 위해서는 의예과, 학부 의학교육(UME), 대학원 의학교육(GME), 지속적인 전문성 개발(CPD)의 엄격한 과정을 거쳐야 합니다. 의사의 평균 은퇴 연령이 69세라고 가정할 때1 대부분의 의사는 거의 40년 동안 CPD를 받아야 하는데, 이는 UME와 GME를 합친 기간의 거의 5배에 달하는 기간입니다. 
Education of physicians requires a long rigorous process of premedical, undergraduate medical education (UME), graduate medical education (GME), and continuing professional development (CPD). Assuming an average age of physician retirement of 69 years,1 most physicians will require nearly 40 years of CPD—almost five times the combined duration of UME and GME.

의학 지식은 73일마다 두 배씩 증가하는 것으로 추정되며, 졸업하는 의대생들은 새로운 정보를 따라잡기 위해 평생교육에 의존하고 있습니다.2 CPD의 목표는 의사가 환자 치료 결과를 개선하는 데 도움이 되는 교육을 제공하는 것이지만, 공식적인 CPD가 이러한 목표를 달성했다는 증거는 거의 없습니다.3,4 이전 CPD 모델에는 공백이 있습니다.

  • 케네디는 CPD의 유형과 이를 사용하는 방법 및 시기를 식별하는 모델을 개발했습니다.5 케네디는 CPD의 유형을 교육, 수상, 적자, 계단식, 표준 기반, 코칭 또는 멘토링, 실무 커뮤니티, 행동 연구, 변혁적 등 9가지로 분류하고 강점과 약점을 설명했습니다. 그러나 그녀의 모델은 교육과 교사에 초점을 맞춘 것으로, 의료 서비스나 보건 시스템 개선에는 특별히 적용되지 않았습니다.
  • Roux 등은 공중보건과 관련된 CPD를 위한 통합 모델을 개발했지만,6 이 모델의 임상 진료 적용 가능성은 연구되지 않았습니다.
  • Moore 등은 환자 결과를 통합하려는 역량 기반 프레임워크를 사용하여 CPD 계획 및 평가 모델7을 개발했습니다. 이 모델은 기획자에게 유용한 아이디어를 개발하지만 학습자와 시스템 목표를 통합하지는 않습니다.
  • Fox와 Bennett8은 세 가지 유형의 CPD(자기 주도형, 소그룹형, 직장 기반형)를 확인했습니다. 활동의 목표에 따라 각 유형을 고려해야 하지만, 이 모델은 의료 시스템 우선순위와 연계성을 제공하지 않습니다.

Medical knowledge has been estimated to double every 73 days, leaving graduating medical students dependent on continuing education to keep up with new information.2 Although the goal of CPD is to provide education that helps physicians improve patient outcomes, there is little evidence that formal CPD has achieved this goal.3,4 There are gaps in previous models of CPD.

  • Kennedy developed a model that identified typologies of CPD and how or when to use them.5She characterized nine types of CPD: training, award-bearing, deficit, cascade, standards-based, coaching or mentoring, community of practice, action research, and transformative and describes strengths and weaknesses. However, her model was focused on education and teachers and did not apply specifically to health care or improving health systems.
  • Roux et al developed a unified model for CPD related to public health,6 but the applicability of this model to clinical care was not studied.
  • Moore et al developed a model for planning and assessment of CPD7 using a competency-based framework that attempts to incorporate patient outcomes. This model develops useful ideas for planners but does not integrate learner and systems goals.
  • Fox and Bennett8 identified three types of CPD (self-directed, small group, and workplace based). Each should be considered depending on the goals of the activity, but this model does not provide alignment with health system priorities.

이러한 프레임워크는 개별 학습자가 지식과 기술을 업데이트하는 데 도움이 될 수 있지만, 새로운 지식과 기술이 임상 환경에서 적용되어 보건 시스템의 목표를 달성할 수 있는지는 다루지 않습니다. 

  • 사무엘 외4는 CPD가 의료 전문가의 성과와 환자 결과에 미치는 영향에 대한 지식 종합을 광범위하게 검토한 결과, 대부분의 환자 결과에 대한 CPD의 영향은 유의미하지 않다는 결론을 내렸습니다.
  • 이러한 우려스러운 결과는 학습이 실무로 이전되지 않고 CPD 개입의 일부로서 환자 결과를 측정하지 않았기 때문일 수 있습니다.9 Illing 등9은 환자 결과를 개선하기 위해 의료 교육 활동을 설계할 수 있지만, 이는 설계의 일부로서 의도적으로 이루어져야 하며 결과를 측정하고 피드백을 제공해야 한다는 것을 입증했습니다.

Although these frameworks can help individual learners update their knowledge and skills, they do not address whether the new knowledge and skills will be applied in the clinical environment and address goals of the health system.

  • In a scoping review of knowledge syntheses of the effect of CPD on health professionals' performance and patient outcomes, Samuel et al4 concluded that the effects of CPD on most patient outcomes were nonsignificant.
  • This worrisome finding may be because of a lack of transfer of learning to practice and failure to measure patient outcomes as part of the CPD intervention.9 Illing et al9 have demonstrated that medical education activities can be designed to improve patient outcomes, but this must occur intentionally as part of the design, with results measured and feedback provided.

임상의가 하는 일의 가장 중요한 측면은 환자를 돌보는 것이며, 임상의가 효과적이고 효율적인 방식으로 환자를 돌볼 수 있도록 돕는 것이 CPD의 목표가 되어야 합니다. 우리는 버윅 외10가 인구 건강 개선, 개인의 의료 서비스 경험 향상, 인구의 1인당 의료 비용 절감이라는 세 가지 목표를 제시하고, 이후 보덴하이머 외11가 직원 건강까지 포함하는 네 가지 목표로 수정한 삼중 목표가 CPD 활동에 적용할 수 있는 명시적인 의료 시스템 목표를 제공한다고 믿습니다. 우리는 임상의의 교육 목표를 이러한 의료 시스템 목표에 맞추고, 따라서 개인 학습에 초점을 맞춘 기존의 CPD 목표를 넘어 의료 시스템 목표와 의료 팀을 염두에 두고 개인 학습을 설계할 수 있는 모델로 CPD의 목표를 확장하는 새로운 개념적 프레임워크를 제안합니다. 이 프레임워크는 직장에서의 정보 및 기술 평가의 혁신을 통합합니다. CPD의 우선순위를 직장으로 옮기는 이러한 변화는 임상의의 성과에 더 집중하여 환자 결과를 개선하기 위한 것입니다. 이전의 CPD에 대한 개념적 프레임워크는 의료진, 의료 시스템, 인구 건강 또는 환자 결과를 다루지 않고 개별 의료 전문가의 학습 과정과 동기에 주로 초점을 맞췄습니다. 우리의 프레임워크는 개인이 생명과학 지식을 향상시키기 위해 CPD 활동에서 배우는 것과 의료 시스템 및 환자 결과를 개선하기 위해 학습을 적용하는 것 사이의 간극을 해결합니다.  
The most crucial aspect of what clinicians do is care for patients, and helping them do so in an effective and efficient manner should be the goal of CPD. We believe that the Triple Aim, identified by Berwick et al,10 of better population health, better individual experience of health care, and lower per-capita costs of care for populations, subsequently revised to the Quadruple Aim by Bodenheimer et al11 to include workforce wellness, provides explicit health care system goals that could apply to CPD activities. We propose a novel conceptual framework for CPD that would align clinician educational goals with these health system goals and thus broaden the goals of CPD beyond the traditional focus of individual learning, to a model in which individual learning can be designed with health system goals and the health care team in mind. Our framework incorporates innovations in information and skills assessment in the workplace. This shift in priority of location of CPD to the workplace is meant to better focus on performance of clinicians to improve patient outcomes. Previous conceptual frameworks for CPD have been largely focused on the learning processes and motivations of individual health professionals without addressing the health care team, health systems, and population health or patient outcomes. Our framework addresses the gap between what individuals learn in a CPD activity to improve their bioscientific knowledge and the application of learning to improve health systems and patient outcomes.

우리는 개인과 인구의 높은 가치의 건강 관리를 촉진하는 보건 시스템 및 교육 성과에 대한 초점으로 점점 더 많이 받아들여지고 있는 쿼드러플 목표를 CPD의 중심 목표로 사용하기로 결정했습니다. 보건 시스템 목표를 CPD 활동에 적용할 수 있다면 학습의 결과는 환자와 시스템의 결과를 개선할 수 있을 것입니다. 
We have chosen to use the Quadruple Aim as our central goal for CPD based on its growing acceptance as a focus for health system and educational performance that promotes high-value health care of individuals and populations. If health system goals could be applied to CPD activities, the outcomes of the learning would likely improve patient and system outcomes.

CPD는 의료 전문가의 행동을 변화시킴으로써 의료 시스템에 영향을 미치려고 시도합니다. 전통적으로 이러한 행동 변화는 생명과학적 지식과 기술에 중점을 두었습니다. 그러나 현재 의료 분야의 당면 과제는 인구 건강, 시스템 공학, 심리학, 커뮤니케이션 및 전통적으로 의과대학 커리큘럼에 포함되지 않은 기타 학문에 대한 이해를 필요로 합니다. CPD는 일반적으로 서로 다른 직종의 팀원들이 함께 일하기보다는 별도의 전문 공간에서 진행되어 왔으며, 의학연구소의 획기적인 간행물인 '품질 격차 해소: 21세기를 위한 새로운 의료 시스템'에서 주장한 것처럼 환자의 질병과 치료에 대한 유사한 정신 모델을 공유하여 오해와 잘못된 의사소통을 피하고 효율성과 효과를 극대화해야 합니다.12
CPD attempts to impact the health system through changing the behaviors of health professionals. Traditionally, these behaviors have focused on bioscientific knowledge and skills. However, current challenges in health care require an understanding of population health, systems engineering, psychology, communications, and other disciplines not traditionally included in the medical school curriculum. CPD has typically occurred in separate professional venues rather than mixing team members from different professions who will work together and should share a similar mental model of a patient's disease and treatment to avoid misunderstanding and miscommunication and maximize efficiency and effectiveness as advocated by the Institute of Medicine in its landmark publication, Crossing the Quality Chasm: A New Health System for the 21st Century.12

프레임워크 개발 과정은 선임 저자(박사)가 CPD 및 보건 전문직 교육 연구 분야에서 인정받는 국제 전문가를 초청하여 기초 문서와 출판된 문헌을 기반으로 프레임워크의 핵심 요소를 제안하는 것으로 시작되었습니다. 이 그룹은 기본 원칙에 동의하고 영역의 프레임워크를 반복적으로 설계하여 모델에 대한 합의를 도출했습니다. 우리의 개념적 모델에는 보건 시스템 목표와의 통합을 촉진하고 학습 활동을 개발하는 사람들이 최종 목표를 염두에 두고 계획하는 데 도움이 되는 CPD를 위한 5가지 영역이 포함되어 있습니다. 이러한 영역은 의학교육 및 CPD에 대한 세 가지 기초 문서에서 도출되었습니다.13-15 영역 선택은 해당 영역이 교육을 통해 4중 목표의 목표를 촉진하는지 여부에 따라 이루어졌습니다. 그림 1은 쿼드러플 목표의 목표가 환자(환자 사례), 인구, 비용 절감(가격), 인력 건강 개선(모든 의료팀 구성원을 포함한 전문가)의 결과 개선과 어떻게 연관되어 있는지 보여줍니다. 이러한 목표는 정책과 다섯 가지 교육 영역을 사용하여 네 가지 목표를 달성합니다.
Our process of framework development began with the senior author (D.S.) inviting recognized international experts in CPD and health professions education research to propose key elements of a framework based on foundational documents and published literature. The group agreed on guiding principles and iteratively designed the framework of domains and reached consensus on the model. Our conceptual model contains five domains for CPD that will facilitate integration with health system goals and assist those who develop learning activities to plan with the end in mind. These domains were drawn from three foundational documents for medical education and CPD.13–15 The domain selection was based on whether the domain facilitated the goals of the Quadruple Aim through education. Figure 1 illustrates how goals of the Quadruple Aim involve improving outcomes for patients (Patient Stories), Populations, lowered cost (Price), and improved workforce wellness (Professionals inclusive of all members of the health team). These goals use Policy and the five educational domains to achieve the Quadruple Aim.


각 영역은 학습에 영향을 미치며, 개인이 학습한 내용을 임상 환경에 적용하고 시스템의 취약점을 해결할 수 있는 역량을 갖추게 되면 환자 치료와 의료 시스템 개선에 영향을 미칩니다. 영역을 선정하는 데 사용한 문서는 ACCME의 핵심 인증 및 인증 기준,13 ACGME의 핵심 역량 및 마일스톤,14 그리고 캐나다 의사 역량 프레임워크인 CanMEDS입니다.15

  • CanMEDS는 의사의 역량을 사회적 요구와 일치시키기 위해 설계되었으며,16 이는 쿼드러플 목표의 목적이기도 하기 때문에 포함시켰습니다.
  • 나머지 두 문서는 미국 의학전문대학원 교육 및 CPD의 교육 프로그램 개발과 평가에 사용되는 기초 문서로, 의료 전문가를 위해 개발되는 커리큘럼은 이 문서에서 요구하는 사항을 충족해야 하기 때문에 선택했습니다. 

Domains affect learning, which influence patient care and health systems improvements when individuals carry their learning forward into the clinical setting and are empowered to address the weaknesses in their systems. The documents we used to select the domains were the Core Accreditation and Commendation Criteria of ACCME,13 the Core Competencies and Milestones of ACGME,14 and The Canadian Physician Competency Framework known as CanMEDS.15 

  • We included CanMEDS because it was designed to align physician competencies with societal needs,16 which is also the purpose of the Quadruple Aim.
  • We chose the other two documents because they are the foundational documents used for the development and evaluation of educational programs in US graduate medical education and CPD; curriculum that is developed for health professionals must meet requirements from these documents.

모든 문서는 보건 전문가 교육을 지식과 환자 치료뿐만 아니라 공중 보건 및 옹호 활동과 같은 건강 증진을 위한 기타 활동을 통해 보건 시스템의 성과와 연결했습니다. 지난 3년간의 보건 전문직 교육 문헌을 검토하여 다른 문서에 포함할 시간이 없었던 코로나19 관련 학습 모델과 같은 새로운 자료를 포함했습니다. 여기에서 CPD의 과정 및 네 가지 목표와 가장 일치하는 것으로 보이는 다섯 가지 영역을 확인했습니다.

  • (1) 새로운 정보의 식별, 평가, 학습[새로운 지식],
  • (2) 전문성 유지를 위한 신규 및 이전 습득 기술의 지속적인 연습[새로운 기술 및 유지],
  • (3) 의료팀을 위한 새로운 학습의 공유 및 이전[팀],
  • (4) 의료 시스템 및 환자 결과 개선을 위한 데이터 분석[질 개선],
  • (5) 인구 건강 증진 및 질병 예방[예방] 

All documents linked the education of health professionals with health system performances not only through knowledge and patient care but also through other activities that promote health, such as engagement in public health and advocacy. We reviewed the health professions education literature of the past 3 years to include any new materials such as learning models related to COVID-19 that would not have had time to be incorporated into the other documents. We identified five domains that appeared most consistent with the processes of CPD and the Quadruple Aim:

  • (1) identifying, appraising and learning new information [New Knowledge];
  • (2) ongoing practice of newly and previously acquired skills to maintain expertise [New Skills and Maintenance];
  • (3) sharing and transfer of new learning for the health care team [Teams];
  • (4) analyzing data to improve the health care system and patient outcomes [Quality Improvement]; and
  • (5) promoting population health and prevention of disease [Prevention].

이러한 영역은 종종 서로 연결되어 있지만, 표 1에서 각 영역이 다루는 구체적인 문제, 해결책, 학습 이론을 확인했습니다.

  • 처음 두 영역은 강의, 자기주도 학습, 시뮬레이션 프로그램을 통해 전통적인 CPD 공식 프로그램의 일부였지만, 코로나19 팬데믹 기간 동안 환자 치료나 술기 재고를 위해 새로운 정보에 빠르게 접근해야 하는 과제를 해결하기 위해 두 영역에서 강조해야 할 새로운 영역에 대해 논의합니다.
  • 팀 학습 영역의 경우, 팀이 복잡한 치료와 만성 치료를 제공할 것이라는 인식이 있었지만, CPD를 통해 팀의 공유 학습이 더욱 발전할 수 있다고 생각합니다. 

Although these domains are often interconnected, we identified specific problems, solutions, and learning theories that each domain addresses in Table 1.

  • Although the first two domains have been a part of traditional CPD formal programs through lectures, self-directed learning, or simulation programs, we discuss new areas of emphasis in both domains to meet the challenges of rapidly accessing new information during the COVID-19 pandemic for patient care or refreshing skills.
  • For the domain of team learning, although there has been recognition that teams will provide complex care and chronic care, we believe that the shared learning of the team could be further advanced through CPD.

Sargent 등17 은 데이터 수집을 통한 혁신적인 진료 개선에 학습을 통합하는 것이 CPD에서 질 개선의 중심적인 역할이라는 강력한 주장을 펼쳤습니다. 이 영역은 혁신적인 학습과 임상 혁신을 제공할 수 있습니다. 인구 건강 및 예방을 포함하는 이 영역은 코로나19 팬데믹 기간 동안 심각한 격차를 해소합니다. CPD는 미래의 새로운 감염이나 환경적 위협을 식별, 예방 및/또는 대응할 수 있는 기술을 제공해야 합니다. 이 프레임워크는 반 후프와 미한18이 제안한 대로 CPD의 패러다임을 바꾸고, 개인 학습에서 개인 및 인구 건강의 질적 향상으로 이어지는 학습으로 CPD의 강조점을 옮기기 위한 초기 노력으로 제안합니다. 커뮤니케이션, 전문성, 보건 인문학 등 보건의료 전문가 성과에 기여하는 다른 중요한 요소들도 CPD에서 고려되어야 한다는 점을 인식하고, 사용을 용이하게 하기 위해 영역을 5개로 제한하기로 했습니다. 아래 영역에 대한 요약에서는 해당 영역이 CPD 프로그램 개발에 어떻게 활용될 수 있는지에 대한 문헌 및 문서의 예를 제공합니다.
Sargent et al17 have made a powerful argument for the central role of quality improvement in CPD to integrate learning into the innovative improvements in care through collection of data. This domain can provide transformative learning and clinical innovation. The domain including population health and prevention addresses a serious gap during the COVID-19 pandemic. CPD should provide the skills to identify, prevent, and/or respond to future emerging infections or environmental threats. We propose this framework as an initial effort to change the paradigm of CPD as suggested by Van Hoof and Meehan18 and to move the emphasis of CPD from individual learning to learning that leads to better quality of care for individual and population health. We chose to limit the domains to five to facilitate use, recognizing that there are other important contributors to health professional performance such as communications, professionalism, and health humanities that should be considered in CPD. In the summaries of the domains below, we provide examples from literature and documents about how the domain can be used in CPD program development.

 

도메인 1: 새로운 지식
Domain 1: New Knowledge

새로운 지식의 급속한 확산과 이를 평가, 학습, 활용해야 하는 필요성은 CPD의 핵심 과제였습니다. 기존의 강의식 CPD 컨퍼런스는 행동 변화나 성과 개선에 효과적이지 못했습니다.3 현재의 문제를 중심으로 설계된 CPD와 동기 부여된 학습자가 능동적인 문제 해결을 통해 새로운 학습을 실행에 옮길 때 더 큰 이점이 발생합니다.3,19 
The rapid expansion of new knowledge and the need to appraise, learn, and use it has been the core challenge of CPD. Traditional lecture-based CPD conferences have not been effective at changing behavior or improving outcomes.3 Greater benefit occurs when CPD designed around current problems is combined with motivated learners using active problem solving to implement the new learning into practice.3,19

코로나19 팬데믹으로 인해 질병이 인지된 지 불과 20개월 만인 2021년 8월 1일까지 210,863건의 논문이 출판된 것을 보면 이 문제를 잘 알 수 있습니다. 오래된 정보와 정확하고 관련성 있는 새로운 정보를 신속하게 구분하고 실무 의료 전문가와 소통하는 CPD 시스템의 역량이 한계에 부딪혔습니다. 
The problem can be illustrated by the COVID-19 pandemic in which 210,863 articles were published by August 1, 2021,20 just 20 months after the recognition of the disease. The capacity of the CPD system to rapidly differentiate outdated information from accurate, relevant, new information and communicate with practicing health professionals was overwhelmed.

이러한 과제를 해결하기 위해 다양한 플랫폼에서 새로운 정보를 검색하는 방법을 아는 것은 임상의에게 지식 기반의 중요한 부분이 되었습니다. 개인의 동기를 강조하는 Ryan과 Deci21의 자기 결정 이론, 문제가 학습과 평가를 자극하는 콜브의 학습 주기22와 같이 성인이 새로운 정보를 학습하는 방법에 대한 이론은 이 영역의 활용에 도움이 될 수 있습니다. 슬롯닉23은 의사가 새로운 학습에 착수할 필요가 있는지 평가하고, 활동을 완료하고 새로운 지식을 진료에 통합하기 위한 노력을 기울이는 과정을 설명했습니다.
Knowing how to search for new information on various platforms to meet this challenge has become an important part of the knowledge base for clinicians. Theories about how adults learn new information such as Self Determination Theory by Ryan and Deci21 that emphasizes individual motivations and Kolb's Learning Cycle22 in which problems stimulate learning and evaluation can assist use of this domain. Slotnick23 has described a process whereby physicians assess whether they need to embark on new learning and go through the effort to complete the activity and integrate the new knowledge into their practice.

새로운 정보를 신속하게 선별하고 공유하는 데 있어 신뢰할 수 있는 온라인 커뮤니티는 이점을 제공합니다.24 스마트폰, 컴퓨터, 소셜 미디어는 환자 치료를 위한 문제 해결에 도움이 될 수 있습니다.25 Sklar 등은26 최근 COVID-19 팬데믹 기간 동안 온라인 학습 자료를 사용하여 정확한 새로운 정보를 효율적으로 파악하여 더 나은 의료 서비스를 제공한 사례를 설명했습니다. 
For rapid curation and sharing of new information, trusted online communities offer advantages.24 Smartphones, computers, and social media can aid problem solving for patient care.25 Sklar et al26 described the use of online learning materials during the recent COVID-19 pandemic that provided an efficient way to identify accurate new information, facilitating better health care.

영역 2: 새로운 기술 및 유지 관리 
Domain 2: New Skills and Maintenance

두 번째 영역은 새로운 기술의 습득과 이전 기술의 유지에 중점을 둡니다. 여기에는 침대 옆 초음파 같은 기술 혁신의 사용법을 배우거나 요추 천자와 같이 거의 시행되지 않지만 중요한 기술에 대한 전문성을 유지하는 것이 포함될 수 있습니다. 에릭슨이 설명한 전문 기술 습득에 관한 연구27와 푸시 등28이 설명한 학습 곡선 현상에 따르면 새로운 기술을 습득하고 실력이 저하되지 않으려면 시간과 의도적 연습이 필요하다는 것을 보여줍니다. 학습 분석의 광범위한 영역은 기술 개발 및 유지를 위한 계획에 도움이 될 수 있습니다.29
The second domain focuses on the acquisition of new skills and maintenance of prior skills. This could include learning how to use technological innovations such as bedside ultrasound or the maintenance of expertise in rarely performed but important skills such as lumbar puncture. Research on the acquisition of expert skills described by Ericsson27 and the phenomenon of learning curves described by Pusic et al28 demonstrate that new skills require time and deliberate practice to be mastered and not deteriorate. The broader domain of learning analytics may assist planning for skills development and maintenance.29

기술을 습득하고 유지하려면 간헐적으로 예정된 교육에서 정기적으로 예정된 재교육으로 전환해야 합니다. 여기에는 새로운 술기 및 이전에 습득한 술기에 대한 피드백이 포함된 집중 교육과 의도적 연습이 포함되어야 합니다.27 프로시저 연습은 순환 일정에 따라 시뮬레이션(마네킹 및 표준화 환자 모두 포함)을 사용하여 작업장에 통합할 수 있으며, 함께 일하는 팀이 함께 훈련할 수 있도록 현장 환경 내에서 실시할 수도 있습니다. 이러한 접근 방식은 치료의 질과 환자 치료 결과 개선이라는 시스템 목표와 교육 기회 개선이라는 목표를 동시에 달성할 수 있습니다.30  
For skills to be acquired and maintained, there must be a shift away from intermittent scheduled courses to regularly scheduled refreshers. This should include focused training with feedback and deliberate practice on new and previously acquired skills.27 Procedural practice can be integrated into the workplace with use of simulation (including both manikins and standardized patients) in a rotational schedule, and possibly within in situ settings so that teams who work together may train together. This approach aligns the system goal of improved quality of care and patient outcomes with simultaneously improving educational opportunities.30

영역 3: 팀
Domain 3: Teams

세 번째 영역은 의료 전문가의 새로운 지식과 기술을 의료 팀과 함께 진료에 통합하는 것입니다. 시간이 지남에 따라 임상의 중심 치료 모델에서 환자 치료 결과가 개별 임상의 전문가보다 팀의 교육과 기능에 더 많이 좌우될 수 있는 팀 기반 접근 방식으로 진화하는 것을 강조하기 위해 모델에 팀을 별도의 영역으로 포함시켰습니다. 복잡한 수술 치료, 외상 치료, 만성 질환 관리에서 최고 수준의 의료 서비스를 제공하는 팀의 사례가 증가하고 있습니다. 저희는 CPD 프레임워크가 더 많은 학습 활동을 팀 기반의 장소로 옮길 수 있기를 희망합니다. 전문가 간 평생교육 공동 인증을 통한 학습 활동 인증은 의료팀의 공인된 학습 활동을 쉽게 개발할 수 있는 메커니즘을 제공합니다. Lave와 Wenger31, O'Brien과 Battista32의 상황 학습 이론과 Kirwan33의 실무로의 기술 전수 이론은 양질의 의료 서비스를 위한 팀의 중요한 역할을 강조합니다. 일부 환자 치료 결과의 경우 팀 기반 전문 지식이 개인 전문 지식만큼 중요할 수 있으며, 이를 위해서는 함께 일하는 전문직 간에 새로운 정보와 기술을 공유하는 메커니즘이 필요합니다. 코로나19 팬데믹과 같이 정보가 빠르게 생성되는 상황에서는 팀원 간의 학습 이전이 예상되는 CPD 과정의 일부가 되어야 합니다. 
The third domain integrates the health professional's new knowledge and skills into practice with the health care team. We have included Teams as a separate domain in our model to highlight the evolution over time from a clinician centric model of care to a coordinated team-based approach where patient outcomes may depend more on the education and function of a team than the individual clinician expert. There are increasing examples of teams providing the highest quality of complex surgical care, trauma care, and management of chronic diseases. We are hopeful that our framework of CPD will move more learning activities to team-based venues. Accreditation of learning activities through the Joint Accreditation of Interprofessional Continuing Education provides an easy mechanism to develop accredited learning activities of the health care team. Theories of situated learning by Lave and Wenger31 and O'Brien and Battista32 and the theory of transfer of skills to practice by Kirwan33 emphasize the important roles of teams for quality health care. Team-based expertise may be as important as individual expertise for some patient outcomes requiring a mechanism to share new information and skills between professions working together. When information is being generated rapidly, as happened with the COVID-19 pandemic, the transfer of learning between team members should be part of the expected CPD process.

어떤 새로운 정보를 의료팀의 실무에 도입할 것인지에 대한 결정과 새로운 정보와 혁신의 확산은 통신 네트워크와 정보의 인지된 가치에 영향을 받습니다.34 소셜 미디어는 새로운 정보를 강조하는 데 중요한 역할을 할 수 있지만 타당성의 위험이 있으며, 정보는 해당 분야 전문가가 검증해야 합니다. Theis 등35은 원격 멘토링 교육 플랫폼인 프로젝트 ECHO가 검증된 정보를 공유하는 데 어떻게 사용되었는지 설명합니다. COVID-19 검사 및 치료에 대한 지식은 1차 진료 전문가 팀과의 정기적인 회의를 통해 향상되었습니다. 포터와 리36는 난청과 같이 정의된 환자 요구사항을 중심으로 의료팀을 조직하고 교육하여 간호사, 청각사, 이비인후과 전문의 등 의료팀의 모든 구성원이 환자를 상담하고 관리할 수 있도록 함으로써 비용을 절감하고 품질을 개선하여 의료의 가치를 향상시킬 수 있다고 제안했습니다. 
Decisions about what new information to transfer into the practice of the health care team and the diffusion of new information and innovations are affected by communication networks and the perceived value of the information.34 Social media can play an important role in highlighting new information, but there are risks of validity, and information must be verified by subject matter experts. Theis et al35 describe how the tele-mentoring educational platform Project ECHO was used to share validated information. Improvements in knowledge about COVID-19 testing and treatment resulted from regular meetings with primary care interprofessional teams. Porter and Lee36 proposed that health care teams be organized and trained around a defined patient need such as hearing loss, with all members of the health care team, i.e., nurses, audiologists, and otologists, available to consult and comanage the patient, simultaneously reducing costs and improving quality, thus improving value in health care.

영역 4: 품질 개선
Domain 4: Quality Improvement

의료 시스템은 건강 결과의 10~15%만 책임지지만,37 CPD를 통해 데이터, 피드백, 교육을 활용하여 의료 시스템을 재설계함으로써 건강 결과를 개선할 수 있는 많은 기회가 있습니다.36 Sklar 등은38 고가치 건강 및 의료의 목표를 지원하기 위한 의학교육의 alignment가 어떻게 의학교육의 혁신을 주도해야 하는지에 대해 설명합니다. 임상의가 검사 및 치료에 대해 내리는 결정이 의료 서비스의 가치에 영향을 미치기 때문에 CPD의 경우 특히 그렇습니다. 병원이나 클리닉에서 의료 서비스 제공의 문제점을 파악하는 것은 의료팀을 포함하는 학습 활동 설계를 통해 CPD와 질 향상을 통합할 수 있는 이상적인 기회를 제공할 수 있습니다. 환자 설문조사, 불만 사항, 질 측정 또는 기타 데이터 소스에서 문제를 파악할 수 있으며, 파악된 성과 격차는 개인과 의료진이 학습할 수 있는 동기를 부여합니다.9 Pusic 등39 은 교육 임무 전용 정보 시스템임상 시스템(전자 건강 기록) 전용 정보 시스템의 데이터를 통합 학습 분석 시스템으로 모아 보건 전문가 교육 개선을 통해 환자 결과를 개선할 수 있는 많은 기회를 촉진할 수 있는 기회를 설명했습니다. 
Although the health care system is only responsible for 10 to 15% of health outcomes,37 there are many opportunities to improve health outcomes using data, feedback, and education through CPD to redesign health care systems.36 Sklar et al38 describe how the alignment of medical education to support the goals of high-value health and health care should drive innovation in medical education. This is particularly true for CPD because the decisions that clinicians make about testing and treatments influence value in health care. Identification of problems in health care delivery at a hospital or clinic can provide the ideal opportunity to integrate CPD and quality improvement through the design of learning activities that include the health care team. Problems can be identified from patient surveys, complaints, quality measures, or other data sources and the identified performance gaps provide motivation for learning by individuals and the health care team.9 Pusic et al39 have described the opportunities to bring together data from information systems dedicated to the education mission and information systems devoted to clinical systems (electronic health record) into an integrated learning analytics system that would facilitate many of these opportunities to improve patient outcomes through improving health professional education.

데이터를 사용하여 문제, 비효율성, 낭비를 파악하는 의료 시스템은 학습 문화를 조성할 수 있으며,40 CPD를 활용하여 학습을 실무에 적용하고 환자 결과를 개선하며 학습 의료 시스템의 비용을 절감할 수 있습니다.9,41 인공 지능은 방대한 양의 정보를 검색 및 수집하여 의료 전문가, 모든 수준의 학습자, 공유 의사 결정에 참여하고자 하는 의료 교육을 받지 않은 환자에게 체계적이고 간결하며 접근하기 쉬운 방식으로 제공하는 능력으로 학습 의료 시스템의 개발을 더욱 촉진할 수 있는 기회를 제공합니다. 그러나 쿠퍼와 로드먼42은 이 기술이 의료 전문가의 인지 습관에 잠재적으로 파괴적인 영향을 미칠 수 있기 때문에 이 기술을 채택하는 데 주의를 기울여야 한다고 조언합니다. 환자와 그들의 이야기는 데이터에 의미와 생명을 불어넣을 수 있으며, 그들의 관점과 가치가 품질 개선 프로젝트에 포함되어야 합니다. 사회생태학적 모델43은 환자를 의료 결과에 미치는 일련의 영향의 중심에 두고, 모든 품질 개선은 환자의 의견을 경청하고 참여하는 것에서 시작된다는 점을 강조합니다.9 
Health care systems that use data to identify problems, inefficiencies, and waste can create a learning culture,40 leveraging CPD to transfer learning to practice, improve patient outcomes, and lower cost in a learning health system.9,41 Artificial intelligence provides the opportunity to further stimulate the development of a learning health systems with its ability to search and collect vast amounts of information and present it in an organized, concise, and accessible manner for health professionals, learners at all levels, and patients with no medical training who want to participate in shared decision making. However, Cooper and Rodman42 advise caution in the adoption of this technology because of its potential disruptive effects on the cognitive habits of health professionals. Patients and their stories can give meaning and life to data, and their perspectives, and values should be included in quality improvement projects. The socio-ecological model43 places the patient at the center of a series of influences on health care outcomes, highlighting that all quality improvements start with listening to and involving patients.9

계획-실행-연구-행동 방법(PDSA)은 의료 서비스를 개선하기 위한 이론적 프레임워크의 한 예입니다. 이 순환적이고 반복적인 프로세스는 콜브22가 설명한 학습 모델과 유사하며 많은 CPD 프로그램에 통합되어 있습니다.44 질 개선 활동에는 팀의 모든 구성원이 의료 시스템 혁신의 결과를 검토할 수 있는 데이터 시스템과 혁신을 수정할 수 있는 능력이 필요합니다. 이상적으로, 환자에게 혜택을 주는 것을 목표로 하는 모든 CPD 활동은 임상의의 지식 향상을 통한 혜택을 가정하기보다는 설계 단계부터 환자를 참여시키고 그 결과를 측정하는 것이 좋습니다9,36.
The Plan-Do-Study-Act Method (PDSA) is an example of a theoretical framework to improve health care. This cyclical, iterative process is similar to the learning model described by Kolb22 and has been incorporated into many CPD programs.44 Quality improvement activities require data systems that allow all members of a team to examine the results of innovations in the care system and the ability to modify the innovation. Ideally, any CPD activity that aims to benefit patients should involve patients in the design and seek to measure their outcome9,36 rather than assume benefits through improvements in clinician knowledge.

영역 5: 예방
Domain 5: Prevention

다섯 번째 영역은 공중보건 원칙과 이론을 적용하여 질병을 예방하고 건강 증진을 도모하는 것입니다. 대부분의 의료 및 임상의 교육은 질병으로 인해 증상이 발생한 후 환자에게 초점을 맞추지만, 이 영역을 포함함으로써 임상의가 질병이나 부상을 유발하는 사회적, 행동적, 환경적 요인을 해결하기 위해 수행할 수 있는 중요한 역할을 인식하는 변화를 나타냅니다. 병적 상태의 치료적 치료에 중점을 두었던 기존의 의학교육은 사회생태학적 모델의 일부로서 예방을 포함하도록 확장되어야 합니다.43 이 영역에서 학습과 행동을 촉진할 수 있는 이론의 예로는 런연이 수정한 해든 매트릭스가 있습니다.45 이 프레임워크는 부상과 관련된 생체역학적 원리를 부상에 기여하는 사회적, 행동적, 생태학적 힘과 통합하고 안전띠법이나 헬멧법 같은 정책을 통해 학습과 행동 변화를 자극할 수 있는 환자 및 사건 사례를 제공하여 향후 환자의 부상 예방에 도움을 줄 수 있습니다.
The fifth domain involves the application of public health principles and theory to address prevention of disease and promote improved health. Although much of health care and clinician education focuses on the patient after an illness has caused symptoms, inclusion of this domain represents a shift to recognize the important role that clinicians can play to address the social, behavioral, and environmental factors that lead to illness or injury. The traditional focus of medical education on curative treatments of pathologic conditions will need to broaden to include prevention as part of a socio-ecological model.43 An example of a theory that can promote learning and behavior in this domain is the Haddon Matrix as modified by Runyon.45 The framework integrates biomechanical principles related to injury with the social, behavioral, and ecological forces that contribute to injury and provides stories of patients and events that can stimulate learning and changes in behavior through policy such as seatbelt laws or helmet laws to prevent injury for future patients.

이 영역에서 학습의 영향에는 환자와의 위험에 대한 대화 및 정책 개선을 위한 옹호 활동이 포함됩니다. 이 영역은 대부분의 생명과학 교육 모델에서 강조되지 않았지만, CPD 인증("의료인은 인구의 건강에 영향을 미치는 임상 치료 이외의 요소를 다룬다"13) 및 국제 교육 프레임워크("건강 개선은 질병이나 외상 완화에 국한되지 않고 질병 예방, 건강 증진 및 건강 보호를 포함한다"15)에 의해 점점 더 인정되고 있습니다. 이 영역의 학습 평가에는 인구 건강 개선을 위한 지식 성장과 옹호가 포함됩니다. 
The impact of learning in this domain includes conversations with patients about their risks and advocacy activities to address policy. Although this domain has not been emphasized in most bioscientific educational models, it has become increasingly recognized by CPD accreditation (“the provider addresses factors beyond clinical care that affect the health of populations”13) and international educational frameworks (“improving health is not limited to mitigating illness or trauma, it involves disease prevention, health promotion and health protection”15). Evaluation of learning in this domain would include knowledge growth and advocacy for improvements in population health.

솔루션
SOLUTIONS

이러한 영역은 임상의를 위한 교육 활동을 설계하는 데 사용하여 CPD를 보건 시스템 목표에 맞출 수 있습니다. CPD의 다양한 이해관계자에는 CPD 교육 설계자, 임상팀, 품질 개선 전문가, 재무 관리자, 공중보건 전문가가 포함되며, 이들은 각기 다른 목표와 우선순위를 가지고 별도의 지리적, 행정적 영역에서 일하기 때문에 이 프레임워크는 이러한 영역 간의 가교 역할을 합니다. CPD와 임상 진료에 대한 4중 목표의 공통된 목표를 인식함으로써 학습 활동을 개발할 때 이 영역의 사용을 장려할 수 있기를 바랍니다. 표 1은 코로나19와 같은 신종 감염병의 출현 또는 병원 내 감염과 같은 지속적인 문제와 같이 임상의가 우려하는 문제를 어떻게 분석하고 CPD 활동으로 개발할 수 있는지 자세히 설명합니다. 이 표는 어떤 영역이 작용하는지, 관련 학습 이론은 무엇인지, 교육 활동이 보건 시스템 목표에 어떻게 부합하는지 파악하는 데 도움이 될 수 있습니다.38표 1은 각 영역이 학습 활동 개발에 도움이 되도록 다양한 학습 이론을 CPD에 도입하는 방법을 요약한 것입니다.
These domains can be used to design educational activities for clinicians that align CPD with health system goals. Because the various stakeholders of CPD include education designers of CPD, clinical teams, quality improvement experts, financial managers, and public health experts, who work in separate geographic and administrative areas with distinct goals and priorities, our framework provides bridges between these areas. We hope the recognition of a common goal of the Quadruple Aim for CPD and clinical care will encourage the use of the domains in developing learning activities. Table 1 details how a problem of concern to clinicians, such as the appearance of a new infectious disease like COVID-19 or an ongoing problem such as hospital acquired infections, might be analyzed and developed as a CPD activity. The table can help identify which domains are at play, the relevant learning theories, and how educational activities will align with health systems goals.38Table 1 summarizes how each domain might bring different learning theories into CPD to help develop a learning activity.

예를 들어, 코로나19는 신종 질병의 진단과 치료에 대한 정확한 정보를 신속하게 전파해야 했습니다. 그러나 공인된 CPD 활동을 위한 프로세스는 계획과 검토가 필요했기 때문에 지연이 발생했습니다. 임상의들은 신속한 학습이 필요한 새로운 문제에 자주 직면하게 됩니다. 다행히도 온라인 정보의 성장으로 이러한 문제를 해결할 수 있으며 CPD 프로그램에 통합할 수 있습니다. 
For example, COVID-19 required rapid diffusion of accurate information about diagnosis and treatment of the emerging disease. However, processes for accredited CPD activities required planning and review that created delays. Clinicians frequently confront novel problems that require rapid learning. Fortunately, with the growth of online information, such challenges can be addressed and could be integrated into a CPD program.

효율적이고 생산적인 검색을 위해서는 가장 적절한 정보 리소스를 선택해야 합니다. 이상적인 리소스는 다음을 할 수 있어야 합니다.

  • 근거에 기반하고,
  • 사용하기 쉬우며,
  • 쉽게 이용할 수 있고,
  • 특정 주제를 다루고,
  • 질문에 신속하게 답변

Efficient productive searching requires selecting the most appropriate information resources. An ideal resource should be

  • evidence-based,
  • easy to use,
  • readily available,
  • cover the specific topic, and
  • answer the question quickly.

이러한 기준을 충족하는 리소스는 원래 Haynes 등이 "사전 평가된 근거 검색을 위한 5S 모델"로 설명했습니다.46,47 

  • 연구,
  • 체계적 문헌고찰,
  • 체계적으로 도출된 권고[지침],
  • 참고 문헌으로 종합된 요약,
  • 시스템)

Resources to meet these criteria were originally described by Haynes et al as the “5S model for retrieving pre-appraised evidence” (

  • studies,
  • systematic reviews,
  • systematically derived recommendations [guidelines],
  • synthesized summaries as references, and
  • systems).46,47

번거롭기는 하지만 자기 주도적 온라인 학습을 통해 CME 학점을 취득할 수 있습니다. 공인된 CME 제공자는 실무와 관련된 주제에 대한 온라인 학습을 수행하는 실무자를 위해 학점을 구성할 수 있습니다. 새로운 정보가 빠르게 생성되는 속도를 고려할 때, 의료 전문가가 최신 근거 기반 치료를 제공할 수 있도록 의료 기록에서 업데이트된 문헌에 액세스할 수 있어야 합니다. EHR의 정보 버튼은 시간을 절약할 수 있는 많은 리소스(예: 최신 정보, PubMed, Dynamed)에 쉽게 액세스할 수 있도록 해줍니다. 일정과 리소스가 허용하는 한, 의료 전문가의 다양한 학습 스타일을 수용하기 위해 자기 주도적 학습의 사용을 보다 공식적인 프레젠테이션으로 보완할 수 있습니다.
Although cumbersome, CME credit can be obtained from self-directed online learning. An accredited CME provider can structure credit for practitioners undertaking online learning on topics relevant to practice. Given the rapid rate at which new information is being produced, there is a need for access to updated literature from the health record to help health professionals to provide the latest evidence-based treatments. Info buttons on EHRs provide easy access to many resources (e.g., UpToDate, PubMed, and Dynamed) that can be time-saving. The use of self-directed learning can be supplemented by more formal presentations to accommodate the variability of learning styles of health professionals as schedules and resources allow.

COVID-19 팬데믹 기간 동안 많은 기관에서 직장 기반 재교육 기회가 제공되었으며, 이는 개인 및 팀 역량을 유지하려는 학습자의 요구에 부응한 경우가 많았습니다. 라가조니 외48는 이탈리아에서 코로나19 팬데믹 기간 동안 직원들이 팬데믹을 신속하게 관리할 수 있도록 3주 동안 매일 4시간씩 교육을 실시하는 적시 교육을 설명합니다. 일마즈 외49는 가장 필요한 시점에 짧은 콘텐츠를 제공하는 마이크로 러닝을 통해 제한된 시간과 많은 양의 콘텐츠 문제를 해결하려는 적시 교수진 개발이라는 접근 방식을 설명합니다. 또한 Thomas 등50은 소아과 레지던트를 위한 적시 프로시저 교육을 통해 수련의의 자신감과 술기를 향상시켰다고 설명했습니다. 
During the COVID-19 pandemic, workplace-based refresher opportunities occurred in many institutions and were often in response to needs from learners to maintain individual and team competence. Ragazzoni et al48 describe Just-in-Time training during the COVID-19 pandemic in Italy with 4-hour training daily for 3 weeks to get their staff rapidly trained to manage the pandemic. Yilmaz et al49 describe an approach called Just-In-Time Faculty Development that attempts to address the problems of limited time and high volume of content with micro learning that are short pieces of content delivered at the time when they are most needed. Additionally, Thomas et al50 described Just-In-Time procedural training for pediatric residents that increased trainee confidence and skills.

이 모든 솔루션의 공통점은 교육 리소스를 업무에 통합하고 학습자가 이를 사용하도록 동기를 부여한다는 것입니다. 직장에서 전체 의료진의 공동 작업과 참여가 장려되어야 합니다. 지식과 기술의 우수성은 전체 의료진의 전문성의 산물이라는 인식이 있어야 합니다. 교육 및 기술 유지는 직장에 구축된 지속적인 프로세스로 간주되어 팀이 실행해야 합니다.
What all these solutions have in common is the integration of educational resources into the workplace and the motivation of learners to use them. The co-location and participation of the entire health care team in the workplace should be encouraged. There should be a recognition that knowledge and skills excellence is a product of the expertise of the entire health care team. Education and skills maintenance must be considered a continuous process built into the workplace and practiced by the team.

코로나19는 의료 수요를 해결하기 위해 신속한 CPD가 필요한 중요하지만 극단적인 상황을 제공하지만, 병원 내 감염은 품질 개선을 위한 교육 이니셔티브의 통합이 필요한 장기적인 문제의 대표적인 예입니다. 품질 개선 영역에서는 문제의 범위와 위치를 명확히 하기 위한 데이터 수집을 강조하고, 감염을 줄이고 궁극적으로 가치를 향상시킬 수 있는 교육적 개입에 중점을 둡니다. 많은 병원 내 감염의 원인에는 지식과 기술 부족과 팀워크 개선의 필요성도 포함되므로 다섯 가지 영역 모두 적극적으로 활동에 참여하게 됩니다. 
Although COVID-19 provides an important but extreme situation for rapid CPD to address a health care need, hospital-acquired infections are typical examples of long-term problems that have required the integration of educational initiatives to improve quality. The domain of quality improvement emphasizes the collection of data to clarify the extent and location of the problem and focuses on educational interventions that could reduce infections and ultimately improve value. Because the cause of many hospital-acquired infections also involves knowledge and skills deficits as well as needs for better teamwork, all five domains would be actively engaged in the activity.

학생들은 병원 데이터를 사용하여 중심정맥관 삽입 중 감염 전파 등 병원 내 감염의 원인과 위치를 명확하게 파악하는 방법을 배우고, 계획-실행-연구-행동의 이론적 프레임워크를 사용하여 여러 차례의 개입과 효과 측정을 반복하게 됩니다. 의료진을 훈련하는 교육 방법에는 전문가 수행을 위한 의도적 연습에 대한 에릭슨 모델27 의 이론적 프레임워크가 필요한 중심정맥관 삽입 및 관리 시뮬레이션 프로그램 개발이 포함될 수 있습니다. Pronovost 등51은 카테터 관련 혈류 감염을 줄이기 위해 증거 기반 중재를 사용하여 이러한 프로그램을 개발한 결과, 이러한 감염을 66%까지 줄일 수 있었다고 설명했습니다. 중심정맥관 삽입 및 관리에서 전체 의료팀의 역할이 중요하기 때문에, 학습의 사회적 맥락을 강조하는 상황학습32과 같은 이론은 CPD 전문가 간 팀 학습 활동을 설계하는 데 도움이 될 수 있습니다. Illing 등9은 의학 교육 개입과 환자 결과에 미치는 영향에 대한 문헌고찰을 발표하고 교육 개입이 환자 결과를 개선하는 데 성공적인 것으로 보이는 시기와 방법에 대한 4단계 모델을 제공했습니다. 이 프레임워크는 CPD 주최자가 임상 문제와 관련된 영역을 선택하여 학습을 제공하고 치료의 질적 결과에 부합하는 교육 개입을 개발하는 데 도움이 될 수 있습니다. 
Students would learn how to use hospital data to create a clear picture of what the causes and locations of hospital-acquired infections might be, such as transmission of infection during insertion of central lines, and then would use the theoretical framework of Plan-Do-Study-Act with multiple iterations of intervention and measurement of the effects. Educational methods to train the health care team might include creation of a simulation program in central line insertion and care that would require the theoretical framework of Ericsson's model27 of deliberate practice for expert performance. Pronovost et al51 have described the development of such a program using evidence-based interventions to reduce catheter-related bloodstream infections and were able to reduce such infections by 66%. Because of the critical role of the entire health care team in the insertion and care of central lines, the theories such as situated learning32 that emphasize the social context of learning may be helpful in designing a CPD interprofessional team learning activity. Illing et al9 have published a literature review of medical education interventions and their impact on patient outcomes and provided a four-step model of when and how education interventions appear to be successful at improving patient outcomes. Our framework can help CPD organizers select domains that are related to a clinical problem to develop educational interventions that provide learning and align with quality of care outcomes.

주의 깊은 성찰
Cautionary Reflection

우리가 확인한 다섯 가지 영역은 의학교육이 보건 시스템과 어떻게 연계될 수 있는지에 대한 핵심적인 측면을 포착하기 위한 것이지만, 우리는 포함되지 않은 다른 지식 영역, 특히 인문학이 있다는 것을 인정합니다. 예술, 음악, 이야기, 역사, 윤리가 건강을 다루는 데 중요하지만, 건강 인문학은 이를 제대로 다루기 위해 별도의 논의가 필요하다고 생각합니다. 물론 사례 검토와 문제 기반 학습의 근간을 이루는 환자 이야기는 학습 과정에 중요한 기여를 하며, CPD 활동을 설계할 때 반드시 고려해야 합니다. 마찬가지로 환자가 자신의 이야기를 전달하고 임상의와 자신의 문제와 가치를 명확하게 표현하는 방법, 건강 정보를 공유하고 의사 결정을 내리기 위해 협력하는 방법은 우리가 확인한 영역, 특히 팀, 품질 개선, 새로운 정보에 영향을 미치는 중요한 전문성 영역입니다. 추가 영역을 포함하려면 프레임워크의 간결함과 중요성의 균형을 맞춰야 합니다. 향후 보건 인문학 및 의료 시스템 교육과 관련된 학습 이론이 개발됨에 따라 우리 모델에서 보건 인문학이 중요한 위치를 차지할 수도 있습니다. 또한 행동과 변화의 동기를 부여하는 데 있어 보건 전문가의 태도, 신념, 가치의 중요한 기여를 강조하지 않았습니다. 임상의는 환자의 이야기와 상황을 이해함으로써 환자와의 관계를 발전시키며, CPD를 통해 이러한 관계를 더 잘 이해하고 양질의 치료와 인구의 건강 형평성을 위한 헌신에 동기를 부여하는 태도와 가치를 형성하는 데 도움을 줄 수 있습니다. 
Although the five domains we identified were meant to capture key aspects of how medical education can align with the health system, we acknowledge that there are other areas of knowledge that were not included, most notably the humanities. Although art, music, narrative, history, and ethics are important in addressing health, we believe that the health humanities require a separate discussion to do them justice. Certainly, patient stories that form the backbone of case reviews and problem-based learning make important contributions to the learning process and must be considered as CPD activities are designed. Similarly, how patients communicate their stories and articulate their problems and values with clinicians and how to work together to share health information and make decisions represent an important area of expertise that influence the domains we identified, particularly teams, quality improvement, and new information. Inclusion of additional areas will need to balance the importance with the parsimony of the framework. As learning theories related to health humanities and health care systems education are developed in the future, there may be an important place for health humanities in our model. We have also not highlighted the important contributions of attitudes, beliefs, and values of health professionals to motivate action and change. Clinicians develop relationships with patients through understanding their story and circumstances; through CPD these relationships can be better understood and help shape the attitudes and values that motivate commitments to high quality care and health equity of populations.

조직화된 자격증, 펠로우십 또는 학위 프로그램의 일부로 발생하는 새로운 지식의 습득은 포함하지 않았습니다. 이러한 프로그램이 전문성 개발에 기여하고 칭찬받을 만하지만, 조직화된 학습 프로그램에 장기간 몰입하는 것은 대부분의 의료 전문가가 산발적이고 지속적으로 학습하는 것과는 충분히 다르기 때문에 별도의 논의가 필요합니다. 
We did not include the acquisition of new knowledge that occurs as part of an organized certificate, fellowship, or degree program. Although such programs contribute to professional development and are to be commended, the prolonged immersion in an organized program of study is sufficiently different from the sporadic and ongoing learning needs of most health professionals as to require deferment to a separate discussion.

결론
CONCLUSION

우리는 다섯 가지 영역으로 구성된 CPD의 개념적 틀을 설명했습니다: 새로운 지식, 새로운 기술 및 유지, 팀, 품질 개선, 예방의 다섯 가지 영역으로 설명합니다. 대부분의 CPD 활동에는 하나 이상의 영역이 학습 활동에 포함됩니다. 이 개념적 프레임워크는 CPD와 의료 시스템의 목표가 일치해야 한다는 인식을 기반으로 합니다. 이 모델은 보건 전문가가 필요로 하는 CPD에는 생명과학적 지식뿐만 아니라 보건 시스템 과학과 건강의 사회적 결정요인, 건강 증진 및 질병 예방에 미치는 영향도 포함되어야 한다는 점을 인식하고 있습니다. CPD 활동은 학습 활동의 보건 시스템 목표와 함께 주요 영역과 해당 영역에 대한 학습 이론을 기반으로 설계되어야 합니다.
We describe a conceptual framework of CPD with five domains: New Knowledge, New Skills and Maintenance, Teams, Quality Improvement, and Prevention. For most CPD activities, more than one domain will be involved in the learning activity. The conceptual framework is based on a recognition that the goals of CPD and the health care system must be aligned. Our model recognizes that the CPD needs of health professionals should include not only bioscientific knowledge but also health systems science and social determinants of health and their impact on health promotion and disease prevention. CPD activities should be designed based on the predominant domains and the learning theories for the domain along with the health system goals for the learning activity.

 


J Contin Educ Health Prof. 2023 Oct 24. doi: 10.1097/CEH.0000000000000536. Online ahead of print.

Five Domains of a Conceptual Framework of Continuing Professional Development

Affiliations collapse

1Dr. Sklar: Senior Advisor to the Provost, Professor, College of Health Solutions, Arizona State University, Phoenix, AZ; Dr. Chan: Dean, School of Medicine, Toronto Metropolitan University, Toronto, Ontario, Canada; Associate Clinical Professor, McMaster University, McMaster University, Hamilton, Ontario, Canada; Prof. Illing: Director Health Professions Education Center, RCSI University of Medicine and Health Sciences; Ms. Madhavpeddi: Director, ASU Project ECHO, Arizona State University, Phoenix, AZ; Dr. Rayburn: Professor, College of Graduate Studies, Medical University of South Carolina, Charleston, SC.

PMID: 37883123

DOI: 10.1097/CEH.0000000000000536

Abstract

Continuing professional development (CPD) for health professionals involves efforts at improving health of individuals and the population through educational activities of health professionals who previously attained a recognized level of acceptable proficiency (licensure). However, those educational activities have inconsistently improved health care outcomes of patients. We suggest a conceptual change of emphasis in designing CPD to better align it with the goals of improving health care value for patients through the dynamic incorporation of five distinct domains to be included in learning activities. We identify these domains as: (1) identifying, appraising, and learning new information [New Knowledge]; (2) ongoing practicing of newly or previously acquired skills to maintain expertise [New Skills and Maintenance]; (3) sharing and transfer of new learning for the health care team which changes their practice [Teams]; (4) analyzing data to identify problems and drive change resulting in improvements in the health care system and patient outcomes [Quality Improvement]; and (5) promoting population health and prevention of disease [Prevention]. We describe how these five domains can be integrated into a comprehensive conceptual framework of CPD, supported by appropriate learning theories that align with the goals of the health care delivery system. Drawing on these distinct but interrelated areas of CPD will help organizers and directors of learning events to develop their activities to meet the goals of learners and the health care system.

의학교육자를 위한 교수개발의 실재주의 평가: 무엇이 누구를 위하여 왜 효과가 있는가 (Med Teach, 2017)
Realist evaluation of faculty development for medical educators: What works for whom and why in the long-term
Olanrewaju O. Sorinolaa, Jill Thistlethwaiteb, David Daviesa and Ed Peilea 

 

소개
Introduction

교수개발(FD)은 교육기관과 교수진이 교육, 연구, 행정 및 경력 관리 분야에서 자신의 역할을 수행할 수 있도록 준비시키기 위한 계획된 프로그램으로 정의되어 왔습니다(Bland 외. 1990). FD에서 교육에 대한 강조는 계속되고 있지만, 이제는 조직 및 리더십 개발을 포함한 다른 교수의 역할에 대해 더 폭넓게 다루고 있습니다(McLean 외. 2008). 보건 전문직의 FD에 관한 제1차(2011), 제2차(2013), 제3차(2015) 격년 국제 컨퍼런스의 참석자 수가 증가한 것은 FD가 개인 개발에서 집단 개발로, 단일한 목적에서 다차원적 목적으로, 대체로 조정되지 않은 활동에서 보다 정의된 활동으로 어떻게 발전해 왔는지를 반영합니다. 그러나 FD에 관한 방대한 문헌에도 불구하고 개입 방식에 대한 일관성이 거의 없으며, 교육 효과에 대한 장기적인 영향에 대한 증거는 여전히 제한적입니다. 또한 FD 개발자를 돕기 위한 활동에 대한 일반화 가능한 평가도 거의 없습니다(Steinert 외. 2006; Mcleod & Steinert 2010). 
Faculty development (FD) has been defined as a planned program to prepare institutions and faculty members for their roles in the areas of teaching, research, administration and career management (Bland et al. 1990). While the emphasis on teaching in FD continues, there is now broader coverage of other faculty roles including organizational and leadership development (McLean et al. 2008). Increasing attendances at the 1st (2011), 2nd (2013) and 3rd (2015) biennial international conferences on FD in the health professions reflect how FD has evolved from individual to collective development, from singular to multidimensional purposes, and from largely uncoordinated to more defined activities. However, despite extensive literature on FD, there is little consistency in the way that interventions are offered; evidence of long-term impact on the effectiveness of teaching is still limited. Furthermore, there are few generalizable evaluations of activities to help FD developers (Steinert et al. 2006; Mcleod & Steinert 2010).

의학 교육 개입의 결과는 상황에 따라 크게 달라집니다. "동일한" 개입의 효과는 누가, 어떤 참가자에게, 어떤 상황에서, 어떤 도구를 사용하여, 참가자가 내린 결정과 행동에 따라 크게 달라집니다(Pawson & Tilley 1997; Pawson 2013). Sorinola와 Thistlethwaite(2013)는 FD 이니셔티브의 성공에 있어 컨텍스트의 중요성을 보고했습니다. 다른 사람들이 성공적인 개입을 복제하기 위해서는 맥락을 이해하는 것이 중요합니다. 따라서 우리는 맥락 없이는 "FD가 효과적인가?"라는 질문에 답하기 어렵다고 제안합니다. 우리는 "맥락-기제-결과(CMO) 구성"(Pawson & Tilley 1997)을 사용하는 Realist 평가가 FD에서 "무엇이, 어떻게, 어떤 조건에서, 누구에게 효과가 있는지"에 답하는 것을 목표로 하기 때문에 더 유용한 평가 프레임워크라고 제안합니다. 
Outcomes of medical education interventions are highly context-dependent: the impact of the “same” intervention varies considerably depending on who delivers it, to which participants, in what circumstances, with which tools as well as the decisions and actions taken by the participants (Pawson & Tilley 1997; Pawson 2013). Sorinola and Thistlethwaite (2013) reported the importance of context on the success of FD initiatives. Understanding the context is important for others to replicate successful interventions. Therefore we suggest that, without context, it is difficult to answer the question “is FD effective?” We propose that realist evaluation, which uses a “context-mechanism-outcome (CMO) configuration” (Pawson & Tilley 1997), is a more useful evaluative framework as it aims to answer “what works, how, in which conditions, and for whom” in FD.

Realism는 우리의 신념과 구성과는 독립적으로 존재하는 실제 세계가 있다는 존재론적 관점과 이 세계에 대한 우리의 지식은 특정 관점에서 만들어진 우리 자신의 구성이라는 인식론적 입장을 결합합니다(Maxwell 2012). Realism는 프로그램이 작동하는 이유(메커니즘)와 어떤 조건(맥락)에서 어떤 맥락이 도움이 되고 어떤 맥락이 그렇지 않은지를 설명하며(Pawson & Tilley 2004; Wong 외 2012), FD와 관련된 복잡한 교육 시스템에 대한 더 깊은 이해와 해석을 제공합니다(Sayer 2000; Wong 외 2012).
Realism combines the ontological view that there is a real world that exists independently of our beliefs and constructions with an epistemological stance that our knowledge of this world is our own construction, created from a specific vantage point (Maxwell 2012). Realism explains what makes a program work (mechanism) and under what conditions (context) as certain contexts will be supportive and others will not (Pawson & Tilley 2004; Wong et al. 2012); it provides a deeper understanding and interpretation (Sayer 2000; Wong et al. 2012) of complex educational systems involved in FD.

기존 연구들은 단기적으로 FD 활동의 학습에 영향을 미치는 기제로 동기부여와 몰입을 제시했지만(Sorinola 외. 2013, 2015), 2년 이상의 장기적인 관점에서 FD를 효과적으로 만드는 기제에 대한 연구는 전무한 실정이다. 따라서 본 연구는 장기간에 걸친 FD 학습과 관련된 메커니즘이 특정 맥락과 어떻게 관련되어 교육자의 실천(결과)에 변화를 가져오는지 설명할 수 있는 Realist CMO 이론을 개발하기 위해 설계되었습니다. 이 연구에서 사용된 맥락, 메커니즘, 결과에 대한 간결한 정의는 표 1에 나와 있습니다. 
Previous studies suggested that motivation and engagement are mechanisms that influence learning from FD activities in the short-term (Sorinola et al. 2013, 2015), but there are no studies on the mechanisms that make FD effective in the long-term i.e. two years or longer. Therefore we designed this study to develop realist CMO theories to explain how the mechanisms involved in learning from FD over a long-term period relates to specific contexts and results in changes in educators’ practice (outcomes). Concise definitions of context, mechanism and outcome used in this study are provided in Table 1.

연구 방법
Methods

이 질적 연구는 대학 생의학 연구윤리위원회의 윤리적 승인을 받았습니다. 영국에는 33개의 의과대학이 있으며(Medical Schools Council 2010), 의도적 표본 추출을 통해 영국 4개 지역에서 각각 2개의 의과대학을 선정하여 각 학교의 교수개발 코디네이터(FDC)와 의학교육자 1명을 인터뷰했습니다. FDC(또는 유사한 직책)는 FD 웹페이지에서 확인하거나 해당 의과대학에 직접 연락하여 파악했습니다. 이들에게 의대생 교육을 담당하는 교육자의 세부 정보를 제공하도록 요청했으며, 2년 이상 FD 활동에 참여한 적이 있는 교육자의 세부 정보를 제공하도록 했습니다(기억하기 쉽고 장기적인 영향을 입증할 수 있도록). 알파벳 순으로 나열된 첫 번째 교육자를 인터뷰 대상으로 선정했습니다(첫 번째 교육자를 찾을 수 없는 경우 두 번째 교육자). 인터뷰에 참여한 교육자들은 대학원 과정, 종단형 반나절 과정(6~12개월), 독립형 1~2일 세션, 하이브리드 FD(워크샵/세미나와 온라인 학습의 결합) 등의 FD 활동에 참여한 경험이 있습니다. FD 참석 후 경과된 시간은 2년에서 3년이었고 개입은 없었습니다. 8개 의과대학에서 각각 한 명의 FDC와 한 명의 교육자를 인터뷰했습니다. 16명의 반구조화된 개별 1시간 인터뷰는 "인터뷰의 이론화"라는 Realism 원칙(Pawson 1996)에 따라 진행되었으며, 인터뷰와 데이터 수집은 이해관계자의 관점에서 맥락, 메커니즘 및 결과를 파악하는 데 목적이 있었습니다. Realist 방법론에 대한 전문성과 '인터뷰 이론화' 접근법의 일관성을 유지하기 위해 모든 인터뷰는 제1저자(OS)가 수행했습니다. 각 인터뷰 대상자는 코드로 식별되었습니다: FDC 1, E1 등
This qualitative study received ethical approval from the university biomedical research ethics committee. There were 33 UK medical schools (Medical Schools Council 2010); purposive sampling was used to select two medical schools from each of the four UK regions to interview the faculty development coordinator (FDC) and one medical educator from each school. The FDCs (or similar titles) were identified from the FD webpages or by direct contact with the medical school. They were requested to provide details of educators, with responsibility for teaching medical students, who had attended a FD activity two years ago or longer (for recall and demonstrable long-term impact). The first educator listed alphabetically was chosen for interview (or the second if the first was not available). The educators interviewed had attended FD activities including postgraduate courses, longitudinal half-day courses (6–12 months period), standalone 1–2 day(s) sessions and hybrid FD (combination of workshops/seminars and online learning). The time elapsed since FD attendance ranged from 2 to 3 years with no intervening intervention. One FDC and one educator at each of the eight medical schools were interviewed. The 16 semi-structured, individual, one-hour interviews were based on the realist principle of “theorizing the interview” (Pawson 1996): the interview and data collection were aimed at identifying the Contexts, Mechanisms and Outcomes from the stakeholders’ perspectives. The first author (OS) carried out all the interviews because of expertise in realist methodology and to maintain consistency of “theorizing the interview” approach. Each interviewee was identified by a code: FDC 1; E1; etc.

데이터의 타당성, 즉 수집된 데이터가 연구 대상 현상을 정확하게 설명하고 데이터와 개발된 이론적 아이디어가 잘 일치하는지 확인하기 위해 연구자가 참여자에게 연구 결과에 대한 설명을 제공하고 피드백을 요청하는 응답자(또는 구성원) 검증 과정을 거쳤습니다(Bryman 2012; Maxwell 2013). 참가자가 말한 내용의 의미를 잘못 해석하지 않도록 인터뷰 녹취록을 참가자에게 보냈습니다.
To ensure data validity, i.e. that the data collected accurately describes the phenomena being researched and show a good match between data and the theoretical ideas developed, we engaged in a process of respondent (or member) validation, whereby the researcher provides participants with an account of the findings and solicits feedback (Bryman 2012; Maxwell 2013). We sent interview transcripts to participants to avoid misinterpreting the meaning of what participants said.

데이터 분석
Data analysis

전사된 모든 인터뷰 데이터는 NVivo(10판) 소프트웨어 패키지에 입력되었습니다. 데이터 분석은 범주화 및 연결 전략을 사용하는 데 중점을 두었습니다. 범주화할 때는 설명, 평가, 인과관계 코드를 조합하여 절충적 코딩을 적용하고 데이터 소스, 코드, Realism 프레임워크 사이를 오가며 CMO의 관련 측면을 종합했습니다(Bazeley 2007; Saldaña 2013). 연결 전략은 진술과 사건을 일관된 전체로 연결하는 관계, 즉 하나가 다른 하나에 미치는 영향을 찾습니다(Miles 외. 2014). 연결을 통해 우리는 특정 결과(O)로 이어지는 FD 메커니즘(M)을 촉진하는 맥락(C)을 조정할 수 있었습니다. 우리는 Realism 프레임워크에 따라 각 CMO 이론과 관련된 데이터를 요약했습니다(Pawson 2013). 이 반복적인 과정에는 모든 저자가 각 단계마다 각 이론의 타당성을 검토하여 합의에 도달하는 과정이 포함되었습니다. 
All transcribed interview data were entered into the NVivo (10th edition) software package. Data analysis focused on using categorizing and connecting strategies. In categorizing, we applied eclectic coding using a combination of descriptive, evaluating and causation codes, moving back and forth between the data sources, the codes, and the realist framework to synthesize relevant aspects of the CMOs (Bazeley 2007; Saldaña 2013). Connecting strategy looks for relationships that connect statements and events into a coherent whole i.e. the influence of one on the other (Miles et al. 2014). Connecting enabled us to align the context (C) that facilitates an FD mechanism (M) leading to a specific outcome (O). We summarized the data relevant to each CMO theory in line with the realist framework (Pawson 2013). This iterative process involved all authors examining each theory for validity at each stage to reach a consensus.

결과
Results

데이터에서

  • 참여, 동기 부여, 긍정적 인식, 전문화라는 네 가지 핵심 메커니즘이 확인되었습니다.
  • 이러한 메커니즘을 촉진하는 것으로 확인된 맥락적 요인은 각각 참여적 접근/반성적 실천, 관련성, 지원적 교육 환경/ FD에 대한 접근성, 외부 영향/표준이었습니다.
  • 보고된 결과자신감, 역량, 신뢰성, 경력 발전이었습니다.

이후 각 맥락, 메커니즘, 결과 사이의 연관성을 보여주는 네 가지 CMO 이론을 정교화했습니다(표 2). 지면 제약으로 인해 각 이론에 대한 인용문은 거의 포함하지 않았습니다. 더 많은 인용문은 부록에서 확인할 수 있습니다. 

  • Four key mechanisms were identified from the data: engagement; motivation; positive perception; and professionalization.
  • The contextual factors identified as facilitating these mechanisms respectively were: participatory approach/reflective practice; relevance; supportive educational setting/access to FD; and external influences/standards.
  • The reported outcomes were confidence; competence; credibility; and career progression.

We subsequently elaborated four CMO theories showing the connection between each context, mechanism and outcome (Table 2). Due to space constraints, we have included few quotes under each theory. Further quotes are available in the Supplementary Appendix.

이론 1: 참여
Theory 1: Engagement

참여(표 3)는 모든 측면을 뒷받침하는 데이터와 함께 가장 강력한 CMO 이론 중 하나로 부상했습니다. 교육자와 FDC는 학습을 위한 참여의 중요성을 강조하면서 참여에 대한 설명을 대화형, 정보 제공, 자극적인 FD 활동으로 제시했습니다. 참여를 촉진하고 학습을 촉진하는 맥락은 FD 중 참여적이고 다양한 방식의 접근 방식(동료 토론, 다양한 관점, 공유된 경험, 아이디어의 이전 가능성)과 성찰적 체험 실습(자기 인식, 비판적 분석, 새로운 관점 개발)으로 장기적인 참여를 촉진하는 것으로 나타났습니다. 교육자들이 보고한 가장 중요한 성과는 콘텐츠와 관련이 없는 교육에 대한 자신감 증가였습니다. 자신감은 채택한 교수법이 효과적일 것이라는 확신이 생기고 권한이 부여되는 느낌으로 설명되었습니다. 교육자들은 FD에서 배운 다양한 교수 전략을 학생들과 함께 사용하는 데 자신감을 갖게 되었습니다. 교육자들이 가장 큰 효과를 본 것은 바로 이 개인 개발 영역이었습니다. 

  • 교육자들은 교육 기회를 인식하고 활용할 수 있는 역량을 갖추게 되었고, 자발적으로 더 많은 교육을 제공했으며, 학생들이 교육 기회를 찾도록 장려했습니다. 
  • 이들은 교육에 대한 동료와의 상호작용, 교육 전달, 복잡한 교육 활동을 이해하기 쉬운 요소로 세분화, 새로운 교육 기법 시도, 다양한 교육 시나리오 및 어려운 교실 역학 관계에 대처하는 데 자신감이 생겼다고 말했습니다. 

8명의 교육자 모두 16개 이상의 사례를 언급하며 강의에 대한 자신감이 향상되었다고 말했습니다:
Engagement (Table 3) was one of the more robust CMO theories to emerge, with data supporting all its aspects. Educators and FDCs emphasized the importance of engagement for learning providing descriptors of engagement as interactive, informative and stimulating FD activities. Contexts facilitating engagement and driving learning were participatory, multimodal approaches during FD (peer discussion, different perspectives, shared experiences and transferability of ideas), and reflective experiential practice (self-awareness, critical analysis and the development of a new perspective), which fostered long-term engagement. The single most important outcome reported by educators was increased confidence in teaching which was not content related. Confidence was described as increased certainty that the teaching approach adopted is likely to be effective and a feeling of empowerment. Educators became confident in using various teaching strategies learnt from FD with their own students. It was in this domain of personal development that educators noticed the greatest impact.

  • They became empowered to recognize and utilize teaching opportunities, voluntarily offered more teaching, and encouraged students to seek teaching opportunities.
  • They discussed confidence in interactions with colleagues about teaching, delivery of teaching, breaking down complex teaching activities into understandable components, trying out new instructional techniques, handling various teaching scenarios and difficult classroom dynamics.

All eight educators mentioned improved confidence in teaching with over 16 references made:

이 프로그램에서 가장 매력적인 점 중 하나는 상호 작용과 참여형 접근 방식이었습니다. 서로 다른 전문 분야에서 다른 방식으로 가르치는 사람들이 참석했지만, 토론과 그들의 이야기를 통해 우리 모두는 서로에게서 많은 것을 배웠습니다. 저는 FD로부터 많은 것을 배웠는데요... 많은 일을 하고, 생각하고, 시도하고, 반성해야 했기 때문입니다. 그래서 반성하는 연습이 도움이 되고, 반성을 더 많이 하게 되죠... 개인적으로는 수업에 대한 자신감과 수업 중 다양한 상황에 대처할 수 있는 능력이 향상되어 정말 유용했습니다. 성찰을 통해 배운 것을 적용하는 데 자신감이 생겼습니다. (E8)
One of the most engaging things about the programme was the interactivity and participatory approach. There were people attending from different specialties teaching in different ways, and yet from the discussion, their stories, we all learnt from each other. I learnt a lot from the FD because I had to do quite a lot of work… think… try things out and reflect. So it’s the reflective practice that’s helpful, you’re sort of forced to do more reflecting… personally I found that really useful as it improved my confidence in teaching and in dealing with various situations in my own teaching. By reflecting I became more confident to apply what I learnt. (E8)

FDC는 참여형 대화식 접근 방식과 FD에 통합된 성찰적 실습이 의도적으로 교육자의 참여를 촉진하는 데 목적이 있다는 데 동의했습니다:
FDCs agreed that the participatory interactive approach, and the reflective practice incorporated into FD were deliberately aimed at promoting educators’ engagement:

참여형 상호작용을 통해 사람들은 서로 이야기하고 영감을 얻습니다. 교육자들이 대화형 방식으로 자신의 경험을 성찰할 수 있도록 하는 것이 핵심입니다... 큰 변화를 가져왔습니다. 교육자들의 참여도가 높아졌습니다... 저는 교육 세션에서 교훈적인 교육이 아닌 상호작용을 활용하는 교육자들을 관찰했습니다. 그들은 정말 자신감이 넘쳤고 더 나은 교육을 개발하기 위해 참여했습니다. 그들이 힘을 얻고 함께 일하는 학생들에 대해 생각하는 것을 보는 것은 큰 영향을 미칩니다. (FDC4)
It’s the participatory interactivity; people talk to one another, feel inspired. Allowing educators to reflect on their experiences in an interactive way is key… it made a big difference. Educators became more engaged… I observed them at their teaching sessions making use of interactivity and less didactic teaching. They are really confident and engaged to develop teaching further. Seeing them empowered and thinking about the students they are working with is a great impact. (FDC4)

이론 2: 동기 부여
Theory 2: Motivation

동기부여일반적으로 행동에 에너지와 방향을 부여하여 사람들이 무엇을, 얼마나 잘, 얼마나 오래 하기로 선택하는지에 영향을 미치는 것으로 생각됩니다(Reeve 2001; Martin 2007, 2008). 우리는 동기가 FD 활동에 참여하기로 결정하고 교육자가 부족한 분야의 기술을 배우는 데 중요하다는 것을 발견했습니다. 7명의 교육자 데이터는 FD 학습의 메커니즘으로서 동기를 뒷받침했습니다. 가장 중요한 동기개인주의적 동기, 즉 외부 요인보다는 교육자의 필요와 관련된 동기였습니다. 교육자들은 동기를 FD와 자신의 학습 요구와의 관련성에 연결시켰으며, FD 이니셔티브가 자신의 업무를 더 잘 수행하고 역할 요구 사항을 충족하는 데 도움이 되어야 한다고 긍정했습니다:
Motivation is generally thought to be that which gives behavior energy and direction, influencing what people choose to do, how well, and for how long (Reeve 2001; Martin 2007, 2008). We found motivation to be important in deciding to attend FD activities and for educators to learn skills in areas in which they were deficient. Seven educators’ data supported motivation as a mechanism in FD learning. The most important motivation was individualistic, i.e. in relation to an educator’s need rather than external factors. Educators’ linked motivation to relevance of the FD to their own learning needs, affirming that FD initiatives should help them do their job better and meet their role requirements:

저는 의학교육에 관심이 많기 때문에 제 자신의 학습과 학부 교육에 대한 더 나은 이해를 위해 FD가 필요했습니다. 제가 선택한 FD 과정은 대그룹, 소그룹 교육, 일대일 슈퍼비전 등 다양한 맥락에서 제가 수행하는 모든 것을 다루었습니다. 이 과정은 현재 위치에서 개선할 수 있는 즉각적인 팁을 제공했습니다. 저는 지극히 실용적인 사람이고, 일을 완수해야 하기 때문에 관련성이 있는 무언가가 필요합니다. 이 과정을 수강하는 동안과 수강 후에도 학습에 대한 동기가 부여되었고 강의 스킬이 많이 향상되었습니다. 가르치는 데 더 유능해졌고 학생 피드백도 크게 향상되었습니다. (E1)
I was motivated; I needed FD for my own learning and a better understanding of undergraduate teaching as I have a real interest in medical education. The FD course I chose dealt with large group, small group teaching, one-to-one supervision, all of which I do in varied contexts. The course gave instant tips to improve from where you were. I’m terribly pragmatic, I need to get the job done therefore I need something relevant. That motivated me to learn during and after the course and my teaching skills have improved a lot. I feel more competent in my teaching and student feedback has improved significantly. (E1)


8명의 FDC는 모두 FD의 관련성(맥락)과 교육자의 학습 동기(메커니즘)를 연결하는 추가 데이터를 제공했으며, 흥미와 학습을 자극하는 전략으로서 FD 활동을 교육자의 필요에 align하는 것이 중요하다고 언급했습니다. 예를 들어
All eight FDCs provided further data linking relevance of the FD (context) to educators’ motivation to learn (mechanism) and commented on the importance of aligning the FD activities to educators’ needs as a strategy to stimulate interest and learning. For example:

의료 교육자에게 관련성이 있도록 교육 과정을 조정하는 것이 중요하다는 것을 인식하고 있습니다. 이를 통해 교육생들이 적극적으로 참여하고 학습하도록 동기를 부여하는 것을 발견했습니다. 개입 후 평가에서 교수자의 강의와 학생의 성과에 대한 피드백을 관찰한 결과, 교수자의 강의 기술이 향상되고 유능한 교육자가 늘어나는 것을 확인할 수 있었습니다. (FDC1)
It’s recognising the importance of aligning the courses so that they are relevant to the medical educators. I’ve found this motivates them to actively participate and learn. The post-intervention assessments showed improved instructional skills and more competent educators from my observation of their teaching and students feedback on their performance. (FDC1)

이 이론의 핵심 결과는 교육자의 역량이 향상되었다는 것입니다. 교육자들은 다음으로 역량을 설명했습니다:

  • 교육 접근 방식의 변화(예: 교육 계획에 더 많은 시간을 할애하고, 커리큘럼을 이해함),
  • 태도와 행동의 변화(예: 더 열린 마음을 갖고, 가르치는 것을 주저하지 않음),
  • FD 과정에서 얻은 지식과 기술을 적용하는 데 있어서의 변화

The key outcome of this theory is the improvement in educators’ competence. Educators described competence in terms of

  • changes in their teaching approach (e.g. spending more time planning teaching, understanding the curriculum),
  • changes in attitudes and behavior (e.g. being more open minded, not shying away from teaching), and
  • in their application of knowledge and skills gained from the FD course:
FD 과정은 역량에 관한 것입니다. 예전에는 체계 없이 아무렇게나 가르쳤어요. 하지만 FD 과정을 수강한 후부터는 체계가 생겼어요. 커리큘럼과 학생들이 무엇을 알아야 하는지 알게 되었죠. 저는 다양한 교수법에 대해 더 개방적이고 지식의 폭을 넓혔으며, FD는 제 교수법을 확장하도록 도전했습니다. 수많은 작은 힌트와 팁이 모여서 변화된 접근 방식을 제공합니다. 예를 들어 질문 통합, 사전 지식 활성화, 스노우볼링과 같은 기법..... 저는 FD 전에는 이 기법들을 사용하지 않았지만 지금은 사용하고 있습니다. 저는 더 광범위하고 정교한 템플릿을 사용할 수 있게 되었고, 제 자신의 자기 평가뿐만 아니라 제 강의에 대한 동료의 평가와 학생들의 피드백을 통해 더 유능해졌습니다. (E2)
Doing the FD course is about competence. I used to teach anyhow, with no structure. But since attending the FD course, I have developed a structure. I know the curriculum and what students need to know. I am more open to different ways of teaching, extended my knowledge and the FD challenged me to extend my teaching approach. It is the multitude of small hints and tips, which aggregate to give a changed approach. For example integrating questioning, activating prior knowledge, techniques like snowballing…. I have not used them before the FD but now I do. I have a broader and more sophisticated template to work with and I am more competent … from my own self-assessment but also from the feedback received from peer appraisal of my teaching and students feedback. (E2)

이론 3: 긍정적 인식
Theory 3: Positive perception

인식(표 3에 정의된 바와 같이)은 교수의 가치, 즉 FD에 의해 강화된 교수의 개인적 및 기관적 가치의 측면에서 메커니즘으로 개념화되었습니다. 개인적 차원에서 7명의 교육자는 FD를 통해 배운 것이 가르침의 중요성을 인식하는 데 도움이 되었다고 답했으며, 교육에 대한 열정과 흥미를 더 많이 느끼고 전문적 실천과 질 향상에 기여한 점을 높이 평가했습니다. 교육기관 차원에서 교육자들은 FD 참여로 교육에 대한 기관의 인식이 달라졌다고 답했습니다. 다른 교육 과정에 참석할 수 있도록 더 많은 지원을 받았고, 교육에 대한 아이디어와 기여도가 더 많이 고려되었으며, 승진 신청 시 교육에 대한 공로를 인정받았습니다. 한 교육자의 부정적인 의견이 한 건 있었지만, 데이터는 FD 이후 교육에 대한 제도적 가치를 긍정하는 긍정적인 의견이 압도적으로 많았습니다:
Perception (as defined in Table 3) was conceptualized as a mechanism in terms of the value of teaching: the individual and institutional values of teaching enhanced by FD. At the individual level, seven educators reported that learning from the FD helped them appreciate the importance of teaching; they felt more enthusiastic and interested in teaching and valued its contribution to their professional practice and quality improvement. At the institutional level, educators reported that FD participation had altered their institution’s perception of their teaching. They were better supported to attend other teaching courses, their ideas and contributions on teaching were considered more, and there was acknowledgment of teaching in their applications for promotion. Even though there was one negative comment by one educator, the data were overwhelmingly positive affirming the institutional value of teaching post FD:

이 기관에서 교육을 선도하는 것이 우선순위입니다. 그들은 FD 교육을 중요하게 생각하고 매우 지원합니다. 제 계약은 교육, 행정 및 소량의 연구입니다... 교육이 주된 업무입니다. FD는 도움을 쉽게 받을 수 있는 지원 환경이었어요. PGCE를 수료하고 HEA의 펠로우가 된 후 승진 절차를 밟을 때 그들은 제 가르침을 높이 평가했습니다. 교사로서 그런 신뢰를 얻으니 기분이 좋았어요. 지금은 제 자신의 가르침을 더 소중히 여기고 학생들의 학습을 돕는 데 더욱 열정적으로 임하고 있습니다. (E7)
Leading the teaching at this institution is a priority. They consider FD training important and are very supportive. My contract is teaching, administration and a small amount of research … teaching is the main one. FD was a supportive environment with easy access to help. Once I had completed the PGCE and became a fellow of the HEA, they highly valued my teaching when I went through the promotion process. It was a good feeling having that credibility as a teacher. I value my own teaching more now and become more enthusiastic in helping my students to learn. (E7)

두 그룹 모두 지지적인 교육 환경FD에 대한 접근성이 이러한 긍정적 인식을 촉진했다는 증거가 있었습니다. 7명의 교육자는 FDC가 자신의 필요에 부응하고, 필요할 때 추가 지원을 제공하며, 학생들을 가르치는 것을 진정으로 즐긴다고 느꼈습니다. 마찬가지로 모든 FDC가 그들이 제공하고자 했던 지지적 환경을 긍정적으로 평가했습니다:
There was evidence from both groups on the context of supportive educational environment and access to FD that facilitated this positive perception. Seven educators felt their FDC was responsive to their needs, provided additional support when needed, and genuinely enjoyed teaching them. Similarly, all the FDCs affirmed the supportive environment they aimed to provide:

저는 교육자들을 가르치고 FD 과정에 쉽게 접근할 수 있는 지지적 환경을 조성하는 데 열정을 쏟고 있습니다. 이론을 가르치는 것만으로는 충분하지 않고, 관찰하고, 관찰하는 동안 실습하게 하고, 학생들이 학생들을 가르칠 수 있도록 지원합니다... 학생들의 피드백에 따라 효과가 있었습니다... 제가 교육자들을 지지한다는 사실이 교육자들의 열정과 관심, 다양한 FD 활동에 대한 인식을 높여주었습니다. 이것이 제가 생각하는 가장 큰 영향일 것입니다. (FDC 8)
I am passionate about teaching the educators and creating a supportive environment and easy access to the FD courses. Teaching them the theory is not enough; I observe, let them practise whilst been observed and I support them in teaching their students… which based on student feedback has worked…. the fact that I am there to back up the educators has increased their enthusiasm, interest and perception of the various FD activities. That’s probably the greatest impact as far as I’m concerned. (FDC 8)

이 이론에 대한 결과는 교육자들의 신뢰도 향상이었습니다. 교육자들은 FD에 참여함으로써 학생과 동료에 대한 신뢰도가 높아졌다고 믿었습니다. 교육자들은 다음 등의 측면에서 신뢰성에 대해 논의했습니다:

  • 지식과 전문 지식의 적용,
  • 학생 및 동료와의 관계,
  • 교육 기관에서 자신을 어떻게 바라보는지에 대한 인식,
  • 교육에 대한 토론에 영향을 미칠 수 있는 능력 

The outcome for this theory was improved educators’ credibility. Educators believed that participating in FD led to more credibility with their students and peers. Educators discussed credibility in terms of

  • application of knowledge and expertise,
  • relationships with students and colleagues,
  • perception of how they are viewed by the educational establishment, and
  • the ability to influence discussions on teaching:
저에게 있어 FD는 자신감과 신뢰성이라는 두 가지 측면에 관한 것이었습니다. 자신감의 측면에서는 제가 말하는 것에 대해 더 확신을 갖게 되고, 이것이 이론과 프레임워크에 부합하며 어떤 접근법이 다른 접근법보다 더 잘 작동하는 방법을 설명할 수 있는 능력이라고 말할 수 있습니다. 이를 통해 학생들을 가르치는 데 더 많은 신뢰를 얻고 다른 사람들(동료/기관)이 제 가르침을 어떻게 평가하는지에 대한 신뢰도도 높아집니다. (E10)
Doing the FD for me was about two things; confidence and credibility. In terms of confidence it is being more assured of the things that I say; I can say this is consistent with this theory and framework and ability to explain how some approaches work better than others. This gives me more credibility in teaching my students and credibility in how others (peers/institution) value my teaching. (E10)
어떤 의미에서 PGCE를 통해 교육 기관 내에서 제 평판이 높아졌습니다. 저는 그 과정에 참여함으로써 더 많은 신뢰를 얻게 되었다는 평가를 받았습니다... 교육계 선배들과 협상하고, 커리큘럼에 기여하고, 긍정적인 변화를 이끌어낼 수 있는 더 강력한 입장에 서게 되었습니다. (E6)
In a sense doing the PGCE has enhanced my reputation within the educational establishment. I was given feedback at my appraisal of having more credibility by engaging with that process…. something that is valued… it’s put me in a stronger position to negotiate with senior educational colleagues, contribute to the curriculum, make positive changes. (E6)

이론 4: 전문화
Theory 4: Professionalization

전문화는 의학교육 교육의 표준화를 목표로 하는 자격 및 인증의 맥락에서 바라보았습니다. 교육자와 FDC는 전문화에 대해 자격/인증, 학습에 대한 목적의식, 수료 후 성취감, 경력 발전의 측면에서 이야기했습니다. 모든 FDC는 이를 FD 학습의 중요한 메커니즘으로 간주했지만 교육자의 절반만이 전문화를 메커니즘으로 논의했습니다.
Professionalization was viewed along the lines of qualification and accreditation aimed at standardizing medical education teaching. Educators and FDCs talked about professionalization in terms of qualification/accreditation, providing a sense of purpose to learning, a sense of achievement upon completion, and career progression. All FDCs viewed this as an important mechanism for FD learning but only half of the educators discussed professionalization as a mechanism.

외부 의제는 GMC, AoME, HEA가 전문 의료 교육자의 기준을 설정하고 우리가 이에 어떻게 대응할 것인가입니다. 대학은 PGCE 또는 FHEA(펠로우 오브 HEA) 자격을 가진 직원 수를 보고해야 합니다. 이러한 국가 정책으로 인해 고등 교육 부문의 교직원 구인 광고에서 FHEA를 요구하는 것을 발견했습니다. 우리의 FD 프로그램은 HEA의 인증을 받았기 때문에 교육자들은 그 인정을 받을 수 있고, 표준/품질과 우리 과정의 학습에 대해 안심할 수 있습니다. (FDC 7)
The external agenda is the GMC, AoME and HEA setting the bar for a professional medical educator and how we respond to that. Universities are expected to report the number of staff with PGCE or Fellow of HEA (FHEA). This national policy is pushing things… we’ve noticed job adverts for academic staff in the higher education sector asking for FHEA. Our FD programme is accredited with the HEA, so it enables educators’ to gain that recognition and are reassured regarding standards/quality and learning from our courses. (FDC 7)
자격증과 인증을 받는 데 확실히 도움이 됩니다. '나는 이 교육을 받았고, 이 학습을 완료했다'고 말할 수 있습니다. FD 과정에 참여하여 배웠다는 것을 인정받는 것입니다. '가르치는 데 있어 어떤 교육을 받았습니까?"라는 질문을 받았을 때 서류상의 증거와는 별개로 무언가를 얻고 있다는 것을 아는 것은 학습에 대한 원동력을 제공합니다. 이 과정이 제 학습의 원동력이 되었어요... 수료한 것이 자랑스러웠어요. 이제 저는 이 과정을 통해 교수 경력을 쌓고 있습니다. (E4)
It certainly helps getting a certificate and accreditation. I can say, ‘I’ve been to this training, I’ve completed this learning’. It is recognition that you’ve participated … learnt from the FD course. Knowing you are getting something out of it provides the impetus for learning apart from documentary evidence when asked ‘What training have you had in teaching?’ It did drive my learning… I was proud I completed it. Now I’m using it to further my teaching career. (E4)

교육자들은 FD를 통해 자격과 인정을 받음으로써 경력에 변화를 가져왔다고 말했습니다. 교육자들은 FD 이후 승진, 모듈 리더십, 교육 과정 촉진 등 다양한 기회를 얻었다고 설명했습니다. 그들은 FD가 없었다면 이러한 역할을 맡지 않았을 것이며, 이를 통해 자극과 즐거움을 느꼈다고 말했습니다. 일부는 학술적 글쓰기, 출판물, 강의 가이드 등을 개선하여 학술활동 수준이 향상되었음을 보여주었습니다:
Educators attributed career progression to the FD confirming that qualification and recognition did bring about career changes. Educators described various opportunities following FD such as promotion, module leadership and facilitation of teaching courses. They stated that without the FD they would not have taken up these roles, which they’ve found stimulating and enjoyable. Some demonstrated enhanced scholarship with improved academic writing, publications, teaching guides, etc:

FD를 하고 PGCE를 취득하면서 제 경력은 두 가지 측면에서 긍정적으로 변화했습니다. 첫째, 다른 프로그램에서 강의할 수 있게 되었습니다. 저는 학습 및 학술 개발 센터 프로그램 위원회에 초빙되어 대학 전체의 PGCE에 참여해 달라는 요청을 받았습니다. 작년에 저는 PCAP(학문적 실무 대학원 수료증)의 진행자 중 한 명이 되었습니다. 대학 전체에서 다른 학자들을 가르치고 만나고, 교육에 대해 토론하고, 평가를 할 수 있기 때문에 저는 이 일을 좋아합니다. 둘째, PGCE/PCAP에서 강의하는 것은 제 승진에 큰 도움이 되었습니다. 작년에 선임 강사로 승진했습니다.... FD가 제 승진을 정말 도와줬고, FD가 없었다면 이 모든 것을 할 수 없었을 것입니다. (E7)
Doing the FD and getting a PGCE has positively changed my career at two levels. First, it enabled me to teach on other programmes. I was invited on the Centre for Learning and Academic Development programme committee and asked to be part of the PGCE across the university. Last year, I became one of the facilitators on the PCAP (Postgraduate Certificate in Academic Practice). I love doing those teachings because I get to teach and meet other academics across the university, discuss teaching, and do assessments. Second, teaching on the PGCE/PCAP really supported my promotion; I was promoted last year to senior lecturer…. the FD really supported my promotion, I couldn’t have done all these without it. (E7)

지지되지 않는 다른 이론
Other theories unsupported

데이터 수집은 다양하지만 FD의 이론으로 완전히 부각되지는 않은 다른 CMO도 있었습니다. 피드백, 협업, 훈련된 퍼실리테이터가 바로 그것입니다. 몇몇 이해관계자가 가능한 추가 메커니즘으로 개별적으로 언급했지만, 데이터가 CMO 이론을 생성하기 위한 모든 측면을 완전히 뒷받침하지는 못했습니다.
There were other CMOs for which data collection was varied but did not fully emerge as a theory of FD. These were feedback, collaboration and trained facilitators. Even though they were mentioned individually as possible additional mechanisms by a few stakeholders, the data did not fully support all aspects to generate a CMO theory.

토론
Discussion

주요 결과
Main findings

본 연구는 교육자와 개발자를 위한 FD의 장기적인 효과에 대한 증거를 제공했습니다. 참여, 동기 부여, 긍정적 인식, 전문화(표 3)가 장기적으로 FD 개입의 효과에 영향을 미치는 네 가지 주요 메커니즘으로 나타났으며, 인터뷰에 참여한 교육자들은 개입 후 최소 2년이 지났기 때문에 이 네 가지 메커니즘이 장기적으로 FD 개입의 효과에 영향을 미치는 것으로 나타났습니다. 이론 1의 주요 전제는 깊고 효과적인 학습이 이루어지기 위해서는 참여가 중요하다는 것입니다. 참여도가 높은 학습자는 높은 수준에서 학습하고, 학습한 내용을 유지하며, 학습한 내용을 새로운 맥락으로 옮길 수 있습니다(Kearsley & Shneiderman 1998). 학습자는 더 깊은 이해를 얻고 해당 과정의 즉각적인 범위를 넘어서는 개념을 개발할 가능성이 더 높습니다. FD 참여에 대한 우리의 연구 결과는 참여와 딥러닝에 관한 문헌을 뒷받침합니다(Schaufeli 외. 2002, 2006; Miliszewska & Horwood 2004).

Our study has provided evidence of the long-term efficacy of FD for educators and developers. Engagement, motivation, positive perception and professionalization (Table 3) were the four main mechanisms impacting the effectiveness of FD intervention in the long-term, as the educators interviewed were at least two years post intervention. The major premise of Theory 1 is that engagement is important for deep and effective learning to occur. The engaged learn at high levels, retain what they learn, and can transfer what they learn to new contexts (Kearsley & Shneiderman 1998). Learners gain a deeper understanding and are more likely to develop concepts beyond the immediate scope of the course. Our findings on engagement in FD support the literature on engagement and deep learning (Schaufeli et al. 20022006; Miliszewska & Horwood 2004). 

교수개발자는 교육자의 가치, 관심사 및 요구에 가장 잘 부합하는 자질을 교육에 구축함으로써 교육자가 과제 및 활동에 참여할 가능성을 높일 수 있습니다. 연구 결과에 따르면 FD 참여를 촉진하는 맥락은 FD 기간 동안 참여적이고 복합적인 접근 방식이었으며, 장기적인 참여는 반성적 실천을 통해 촉진되었습니다. 교수자 개발자는 반성적 실천의 맥락이 교육자의 개발을 향상시키는 다양한 방식(자기 인식, 비판적 분석, 새로운 관점 개발)을 이해하는 것이 중요합니다. 이러한 참여의 결과는 다양한 방식으로 표현되는 가르침에 대한 자신감으로 나타났습니다.

  • 강의 전달,
  • 복잡한 교수 활동을 이해하기 쉬운 구성 요소로 분해,
  • 새로운 교수 기법 시도,
  • 학생 및 동료와의 대화,
  • 교수법 검토 등 

Faculty developers can enhance the prospects of educators being engaged in the tasks and activities by building into their teaching those qualities that are most likely to appeal to the values, interests and needs of the educators. The findings suggest that the contexts that promoted FD engagement were a participatory, multimodal approach during the FD and long-term engagement was facilitated by reflective practice. It is important for faculty developers to understand the diverse ways by which the context of reflective practice enhances the development of educators (self-awareness, critical analysis, and development of new perspectives). The outcome from this engagement was confidence in teaching expressed in various ways:

  • delivery of teaching;
  • breaking down complex teaching activities into understandable components;
  • trying out new instructional techniques;
  • dialog with students and peers; and
  • examination of teaching practices.

"동기부여"라는 단어의 라틴어 어근은 "움직이다"를 의미하므로, 동기부여에 관한 이론 2는 교육자가 FD 활동에 참여하고 배우기 위해 "움직이도록" 돕는 데 있어 기대, 필요 및 가치가 수행하는 역할에 대한 이해를 제공합니다. 동기부여 이론은 시간이 지남에 따라 진화해 왔으며, 인간 심리의 복잡성 때문에 동기를 내적 또는 외적 현상으로 단순하게 이분법적으로 해석하는 것은 더 이상 사실이 아닙니다(Misch 2002; Brissette & Howes 2010). 우리는 이전에 단기적으로 FD에 대한 가장 중요한 동기는 개인주의적 동기이며, 상위 세 가지 개인적 동기는 개인 개발, 경력 개발 및 개인적 교육 관심이라고 보고한 바 있습니다(Sorinola 외. 2013, 2015). 이 연구는 더 나아가 의학교육자의 요구와 FD의 관련성 및 연계가 장기적인 동기 부여의 핵심 맥락적 요소임을 시사합니다. 이는 특히 FD에 대한 체계적 문헌고찰을 통해 "무엇이 FD 참여에 동기를 부여하는가?"라는 스타이너트 등의 질문에 대한 답변으로 FD 개발자에게 중요한 포인트입니다(스타이너트 등, 2006). 또한 FD 참석 후 교육자들이 확인한 결과로서 역량 향상을 명확히 했습니다. 교육자들은 역량을 FD 참석을 통해 얻은 지식과 경험 및 실습을 통해 개발한 전문성을 결합하여 올바른 태도로 교육에 적용하는 것으로 개념화했습니다. 
The Latin root of the word “motivation” means “to move”, hence Theory 2 on motivation provides some understanding of the role played by expectancies, needs and values in helping educators “move” to participate and learn from FD activities. Motivation theories have evolved over time; it is no longer true to construe motivation as a simple dichotomous internal or external phenomenon because of the complexity of the human mind (Misch 2002; Brissette & Howes 2010). We have previously reported that the most important motivation for FD in the short-term was individualistic with the top three individual motivators being personal development, career development and personal teaching interest (Sorinola et al. 2013, 2015). This study has gone further to suggest that relevance and alignment of the FD to the needs of medical educators is the key contextual factor for motivation in the long-term. This is an important point for FD developers especially in response to Steinert et al’s question following their systematic review of FD: “What motivates participation in FD?” (Steinert et al. 2006). We further clarified improved competence as an outcome identified by educators following FD attendance. The educators conceptualized competence as combining the knowledge from attending the FD with the expertise developed from experience and practice, applying it with the right attitude in teaching.

이론 3은 교육자들의 FD에 대한 긍정적인 인식이었습니다. 인식은 기대, 신념, 가치관 등 다양한 요인에 의해 형성되고 영향을 받으며(Weiten 2013), 완전히 편향되지 않고 필터링되지 않은 지각은 존재할 수 없습니다(Clark 2011). 지각과 기대 사이에는 많은 피드백이 있고,  인식적 경험이 종종 우리의 신념을 형성하지만, 이러한 지각은 기존의 신념에 기반하기 때문이다. 우리는 대부분의 교육자들이 FD에 대해 긍정적인 인식을 가지고 있는 것으로 나타났는데, 이는 교육자 개인이 자신의 가르침을 소중히 여기게 되었으며, 교육 기관 차원에서도 자신의 가르침을 소중히 여기게 된 것으로 나타났습니다. 이 이론은 교육자가 FD가 개인적, 직업적 성장을 가능하게 하고 지지적인 교육 환경에서 접근할 수 있다고 믿을 때 학습 가능성이 높아져 교육의 신뢰도중요성이 높아진다는 결과를 낳는다는 것을 확인시켜 줍니다. 신뢰도 증가지식의 더 나은 적용, 교육 전문성, 학생, 동료 및 교육 기관과의 더 나은 관계라는 측면에서 나타났습니다. 이는 개인과 기관 차원에서 가치를 더하는 프로그램 설계의 중요성을 뒷받침합니다.
Theory 3 was positive perception of FD by educators. Perception is shaped and affected by a variety of factors including expectancy, beliefs and values (Weiten 2013) and there can be no completely unbiased, unfiltered perception, because there is a great deal of feedback between perception and expectation, as perceptual experiences often shape our beliefs, but those perceptions are based on existing beliefs (Clark 2011). We found most educators reported a positive perception of FD as it made them value their teaching individually and significantly it also led to their teaching being valued at institutional level. The theory affirms that when educators believe that FD can enable personal and professional growth and is accessible in a supportive educational environment, they are more likely to learn leading to outcomes of increased credibility and importance of teaching. Increased credibility was expressed in terms of better application of knowledge, teaching expertise, better relationship with their students, colleagues and educational establishment. This underlies the importance of designing programs that add value at individual and institutional levels.

네 번째 이론은 의학교육의 전문화로, 외부의 영향이 의학교육을 형성하고 FD에서 중요해짐에 따라 더욱 주목받고 있습니다. 의학교육자에게는 교육 자격과 인증을 획득하기 위해 FD에 참석하여 교육에 필요한 지식을 습득하는 것이 전문화의 중요한 요소였습니다. 교육자들이 경력 발전과 교육자로서의 신뢰성을 위해 인증의 필요성을 점점 더 인식하게 되면서 이는 학습의 원동력이 되었습니다. 이는 취업 기회 증가, 승진, 교육계에서의 리더십 역할 등 다양한 방식으로 표현되었습니다. 교육에 대한 외부 규제/표준화의 맥락에서는 두 이해관계자 그룹의 지지 강도가 약간 달랐습니다. 모든 FDC는 의학교육의 표준화 필요성에 대한 미국의학위원회(GMC 2012), 고등교육아카데미(HEA 2011) 및 기타 규제 기관의 외부 이니셔티브에 큰 영향을 받은 반면, 교육자들은 영향은 덜 받았지만 교육의 책임성과 전문성을 강화하는 추세에 대해서는 인정했습니다. 이는 각 이해관계자 그룹의 전문성을 고려할 때 전혀 예상치 못한 결과는 아니었습니다. FDC는 FD 개입의 설계 및 개발에 영향을 미치는 규제 부문에 대해 더 잘 알고 있었습니다. 따라서 전문화가 FDC의 학습을 촉진하는 메커니즘으로 부상할 수 있는 충분한 데이터가 있었고, 이는 참여 교육자들도 인정했습니다.

Our fourth theory was the professionalization of medical education, which is receiving increased attention as external influences shape medical education and become important in FD. For medical educators, having the requisite knowledge in teaching by attending FD to gain teaching qualifications and accreditation was an important component of professionalization. It was a driver for learning as educators became increasingly aware of the need for accreditation for career progression and credibility as educators. This was expressed in various ways including increased job opportunities, promotions and leadership roles in education. The contexts of external regulations/standardization of teaching had slightly different strength of support from the two groups of stakeholders. While all FDCs were strongly influenced by external initiatives from the General Medical Council (GMC 2012), Higher Education Academy (HEA 2011) and other regulatory bodies on the need for standardization of medical education, the educators were less influenced but admitted recognizing the trend towards greater accountability and professionalization of teaching. This was not totally unexpected considering the expertise of each group of stakeholder; the FDCs were more aware of the regulatory sector which influences their design and development of FD interventions. Hence, there was enough data for professionalization to emerge as a mechanism used to drive learning by the FDCs, which was recognized by the participating educators.

기존 문헌과의 비교
Comparison with existing literature

본 연구 결과는 참여와 반성적 연습이 심화된 학습에 중요하다는 기존 문헌과 일치합니다. Moon(1999)은 학습자가 성찰을 통해 원래의 학습 시간 이후 더 높은 수준으로 학습을 업그레이드할 수 있다고 주장했습니다. 이러한 반성적 과정은 더 깊이 있는 학습, 이론적 교육 개념의 실제 통합, 비판적 사고와 판단력을 향상시킵니다. 이 연구는 교수 개발자가 촉진해야 하는 참여와 심층 학습을 향상시키는 반성적 실천의 맥락에 대한 추가적인 지원을 제공했습니다. 
Our finding is in agreement with the literature on engagement and reflective practice being important for deeper learning. Moon (1999) argued that by reflecting learners are able to upgrade their learning to higher levels after the original time of learning. This reflective process produces deeper learning, integration of theoretical teaching concepts into practice, and enhances critical thinking and judgement. Our study has provided further support for the context of reflective practice enhancing engagement and deeper learning which faculty developers need to promote.

동기 부여에 관한 대부분의 연구에서 동기 부여가 학습, 학습 행동, 학업 성취도 및 성공에 긍정적인 영향을 미친다고 보고했습니다(Sobral 2004; Wilkinson 외. 2007). 대부분의 교수개발자가 의사가 공식 행사에 참석하도록 동기를 부여하는 요인을 평생 의학 교육(CME)의 광범위한 분야에서 추론했기 때문에 FD의 동기 부여에 대한 문헌은 부족합니다(Harrison & Hogg 2003; McLeod & McLeod 2004).

  • 오설리반과 어비(2015)는 교수개발자가 간헐적으로 FD 워크숍을 진행하는 5가지 주요 동기로 숙달, 관련성, 의무, 목적, 만족을 꼽았습니다.
  • Steinert 등(2010)은 포커스 그룹을 통해 FD 활동에 정기적으로 참석하는 교사의 동기를 조사한 결과 다음의 다섯 가지 요인이 지속적인 참여를 촉진한다고 보고했습니다.
    • 학습 및 자기계발,
    • 교사의 필요와 관련된 주제,
    • 개인적/전문적 성장,
    • 동료와의 네트워크 기회,
    • 초기의 긍정적인 경험

Most studies on motivation have reported motivation positively influencing learning, study behavior, academic performance and success (Sobral 2004; Wilkinson et al. 2007). The literature on motivation for FD is scant as most faculty developers have extrapolated from the broad field of continuing medical education (CME) what motivates doctors to attend formal events (Harrison & Hogg 2003; McLeod & McLeod 2004).

  • O’Sullivan and Irby (2015) reported mastery, relatedness, duty, purpose and satisfaction as five key motivators for occasional faculty developers to conduct FD workshops.
  • Steinert et al. (2010) used a focus group to explore the motivation of teachers who regularly attend FD activities and reported five factors:
    • learning and self-improvement;
    • topics relevant to teachers’ needs;
    • enabling personal/professional growth;
    • opportunity to network with colleagues; and
    • initial positive experiences promote on-going involvement.

이번 연구는 교육자가 FD 리소스를 활용하게 만드는 요인과 어떤 조건에서 그렇게 하는지에 대한 연관성을 설명하는 동기에 대한 보다 자세한 이해를 제공했습니다. 학습 동기, 관련성 맥락, 교육자가 개발한 역량(수업 기술 향상 및 교수 행동의 변화) 사이의 연관성은 FD에서 동기 부여의 패러다임을 넓혀줍니다. 교수법 개발자는 교육자의 역량자율성에 대한 욕구를 충족시켜야 하는데, 각각의 욕구 충족은 그 자체로 동기부여를 촉진하지만 두 가지 욕구를 모두 충족하면 시너지 효과를 낼 수 있기 때문입니다.
Our study provided a more detailed understanding of motivation explaining the link between what makes an educator take advantage of FD resources and under what conditions they do so. The link between motivation to learn, the context of relevance and the competence developed by educators (improvement in instructional skills and changes in teaching behavior) broadens the paradigm of motivation in FD. Faculty developers need to address educators’ need for competence and autonomy as each need fulfilled on its own promotes motivation; however, fulfilling both needs creates a synergistic effect.

마지막으로, 교육은 우연이나 적성, 성향에 맡길 수 없는 핵심적인 전문 활동이라는 인식이 확산되고 있습니다(Eitel 외. 2000; Purcell & Lloyd-Jones 2003). 일부 저자들은 의학교육 학위가 교육 이론/실무에 대한 필수적인 토대를 제공하고 교육 연구, 학술활동 및 리더십의 토대를 제공한다고 제안했습니다(Cohen 외. 2005). 우리의 연구 결과는 표준이 의학교육자의 지위를 높이고, FD 제공의 질을 개선하며(Eitel 외. 2000; Wojtczak & Schwarz 2000), 교육자의 실무를 변화시키는 데 도움이 될 수 있다는 문헌을 뒷받침합니다. 그러나 교육자의 관행 변화가 학생 경험의 질에 지속적으로 긍정적인 영향을 미친다고 자신 있게 말하기에는 아직 갈 길이 멀기 때문에 이를 뒷받침할 증거를 신중하게 축적해야 합니다. 관련 CMO의 정교화는 향후 FD 영향에 대한 연구에 도움이 될 것이며, 따라서 표 4의 권장 사항도 도움이 될 것입니다.
Lastly, there is a growing acceptance that teaching is a core professional activity that cannot be left to chance, aptitude or inclination (Eitel et al. 2000; Purcell & Lloyd-Jones 2003). Some authors have suggested that a degree in medical education offers essential grounding in educational theory/practice and provides a foundation for educational research, scholarship and leadership (Cohen et al. 2005). Our findings support the literature that standards can help raise the status of medical educators, improve the quality of FD provision (Eitel et al. 2000; Wojtczak & Schwarz 2000) and change educators’ practice. However, there is still some way to go before we can state with confidence that changes in educators’ practice consistently impacts positively on the quality of student experience: evidence to support this must be carefully accumulated. Our elaboration of relevant CMOs will help future studies on FD impact hence our recommendations in Table 4.

강점과 한계
Strengths and limitations

본 연구는 여러 가지 강점을 가지고 있습니다.

  • 첫째, 풍부하고 상세한 데이터를 제공하는 여러 데이터 소스(두 그룹의 이해관계자)를 사용했다는 점입니다. 모든 이해관계자(교육자/FDC)가 다양한 지식 기반과 서로 다르지만 상호보완적인 세계관을 바탕으로 CMO 이론에 대한 설명을 제공할 수 있었기 때문에 수집된 증거의 종류와 양이 이론화 수준에 충분했다고 판단했습니다.
  • 둘째, 영국 4개 지역 모두에서 대표성 있는 데이터를 수집하고 응답자 검증을 활용하여 데이터의 타당성을 확보했습니다.
  • 셋째, Realist 설계가 강력한 방법론을 제공했습니다. 인터뷰의 이론화 원칙은 데이터 수집이 성인 학습자로서 교육자에게 중요한 것이 무엇인지에 대한 신뢰를 주도록 보장했습니다.

Realist 접근법은 FD 개입의 모든 측면(맥락, 과정 및 결과)을 분석하여 더 깊은 수준의 이해를 얻음으로써 표면을 넘어섰습니다. 예를 들어 의학교육에서 일반적으로 사용되는 평가 방법, 예를 들어 Freeth 외(2002)가 수정한 Kirkpatrick의 모델(Kirkpatrick 1994)은 복잡한 개입의 특정 요소에 따라 결과가 어떻게 또는 왜 발생하는지 설명하지 못합니다(Yardley & Dornan 2012). 그러나 '실제 실천'에서는 과정뿐만 아니라 맥락도 교육 결과에 영향을 미치기 때문에 특정 요소나 상호작용에 따라 결과가 어떻게 그리고 왜 발생하는지 이해하지 못하면 효과를 극대화하기 어렵습니다. Realist 방법론을 통해 FD의 맥락, 메커니즘, 결과 사이의 연관성을 더 깊이 탐구할 수 있었습니다.
Our study has a number of strengths:

  • first, was the use of multiple data sources (two groups of stakeholders) providing rich and detailed data. All stakeholders (educators/FDCs) were able to offer explanations on the CMO theories from varied knowledge bases and different but complementary world views, hence we believe the kind and amount of evidence collected was sufficient for the level of theorizing.
  • Second, data validity was ensured by collecting representative data, i.e. from all four UK regions and utilizing respondent validation.
  • Third, the realist design provided a strong methodology. The principle of theorizing the interview ensured data collection gave credence to what was important to educators as adult learners.

The realist approach went beyond the surface by analyzing all aspects of FD intervention (contexts, processes and outcomes) to gain a deeper level of understanding. The commonly used evaluation method in medical education, for example Kirkpatrick’s model (Kirkpatrick 1994), modified by Freeth et al. (2002), does not explain how or why outcomes are consequential to particular elements of complex interventions (Yardley & Dornan 2012). Yet, because contexts as well as processes impact on educational outcomes in “real practice”, unless we understand how and why effects are consequential to particular elements or interactions, it is difficult to maximize benefit. The realist methodology allowed deeper exploration of the links between contexts, mechanisms and outcomes in FD.

이 연구에는 한계가 있습니다. 

  • 첫 번째는 다른 저자들이 보고한 것과 유사한 Realism 프레임워크에서 맥락과 메커니즘을 구분하는 문제입니다(Carter & New 2004; Schofield & Tolson 2010). 우리는 각 항목에 대해 매우 엄격한 조작적 정의를 사용하여 이 문제를 해결했습니다(표 1).
  • 둘째, 복잡성의 문제와 서로 다른 원인이 동일한 효과를 낼 수 있는 가능성을 고려할 때, FD 활동 중에 두 가지 이상의 메커니즘이 함께 작동할 수 있으므로 인과관계가 잘못 귀속될 위험이 항상 존재합니다. 우리는 동일한 FD 개입이 무수히 많은 방식으로 변화를 유발할 수 있음을 인정하며, 따라서 각 단계마다 각 이론의 타당성을 재검토하는 반복적이고 역동적인 연구 설계를 사용합니다.
  • 셋째, 일부에서는 연구 결과가 대부분 자가 보고에 의한 것이라고 주장합니다. 교육자들이 보고한 결과와 FDC가 보고한 결과 사이에 일치하는 부분이 있었기 때문에 이는 문제가 되지 않는다고 생각합니다. 또한 자체 보고는 학생 및 동료 피드백, 평가 문서, FDC의 직접 관찰을 통해 얻은 데이터에 근거한 것입니다.

The study has limitations.

  • First is the issue of differentiating contexts and mechanisms in a realist framework, similar to that reported by other authors (Carter & New 2004; Schofield & Tolson 2010). We addressed this by using very tight operational definitions for each item (Table 1).
  • Second, given the challenge of complexity and the possibility of different causes producing the same effect, there is always a risk of misattribution of causality as more than one mechanism may be operating in concert during FD activities. We acknowledge that the same FD intervention can trigger change in myriad ways hence our use of an iterative, dynamic, research design with each theory reexamined at each stage for validity.
  • Third, some will suggest that the outcomes were mostly self-reported. We do not think this an issue as there was congruence between the outcomes reported by the educators and the FDCs. Furthermore the self-reporting was grounded in data from students and peers feedback, appraisal documents, and direct observations by the FDCs.

넷째, 인터뷰에 참여한 교육자들이 다양한 FD 개입에 참여했기 때문에 Realism적 평가의 결과가 대표성이 없거나 일반화하기 어렵다는 주장도 있습니다. 그러나 우리는 지속적 중요성을 갖는 것은 FD의 길이, 내용 또는 유형이 아니라 FD를 통한 학습이라는 Barlett과 Rappaport(2009)의 의견에 동의합니다. 또한, Realism 연구의 핵심은 맥락에서의 국지적 인과성입니다. 즉, 발견한 필요한 관계는 관련성이 있는 곳이면 어디든 존재할 것입니다(Maxwell 2012). 따라서 인간의 선택과 상호 작용이 개입되어 있더라도 특정 상황에서 개인은 항상 확실하지는 않지만 어떤 자원을 사용할 것인지에 대해 유사한 선택을 할 가능성이 높습니다(셰퍼드 외. 2009). 즉, 특정 맥락이 인간의 선택에 영향을 미쳐 반쯤 예측 가능한 행동 패턴이 발생한다는 것입니다(Pawson 2006). 따라서 우리가 보기에, 보고된 CMO는 교육자들이 FD를 통해 학습한 것과 관련하여 가장 중요하고 관련성이 높은 것이었습니다.
Fourth, some will argue that the findings of realist evaluation are unlikely to be representative or generalizable especially as the educators interviewed had attended a variety of FD interventions. However we agree with Barlett and Rappaport (2009) that it is the learning from FD rather than the particulars of length, content, or type that have lasting importance. Furthermore, the key point of realist research is local causality in context: necessary relations discovered will exist wherever their relata are present (Maxwell 2012). So, even though human agency and interaction is involved, in certain contexts, individuals are likely, though not always certain, to make similar choices about which resources they will use (Shepperd et al. 2009). In other words, particular contexts influence human choices such that semi-predictable patterns of behavior occur (Pawson 2006). So, in our view, it was appropriate that the CMOs reported were those relevant and uppermost in the mind of the educators in relation to their learning from FD.

결론
Conclusions

이 연구는 FD 메커니즘이 장기적으로 교육자의 실무에 어떤 변화를 가져오는지 보여주었습니다. 동기 부여, 참여, 긍정적 인식, 전문화 이론은 교수진 개발자에게 무엇이 누구에게 왜 효과적인지, 그리고 이 네 가지 이론 간의 중요한 상호 연관성을 이해할 수 있게 해줍니다. 참여는 동기 부여와 학습을 연결하는 다리 역할을 하지만, 교수진 개발자는 교육자의 관심사 및 요구 사항(즉, 동기 부여)을 업무에 반영하여 참여도를 더욱 높일 수 있습니다. 가치와 인식이 참여도에 영향을 미치지만, 학위 수여와 경력 발전으로 참여도가 향상되기도 합니다. 따라서 이 네 가지 영역을 동시에 해결하면 교육자와 개발자 모두에게 FD 효과를 극대화할 수 있습니다. 
Our study has shown how FD mechanisms bring about changes in educators’ practice in the long-term. The theories of motivation, engagement, positive perception and professionalization offer faculty developers an understanding of what works for whom and why and the important interconnections between the four theories. While engagement is the bridge between motivation and learning, faculty developers can further enhance engagement by building into the work, the interests and needs of the educators (i.e. motivation). Values and perceptions influence engagement however engagement is also enhanced by the granting of degrees and career progression. Therefore addressing the four areas simultaneously maximizes FD effectiveness for both educators and developers.

 


Med Teach. 2017 Apr;39(4):422-429. doi: 10.1080/0142159X.2017.1293238. Epub 2017 Feb 28.

Realist evaluation of faculty development for medical educators: What works for whom and why in the long-term

Affiliations

1a Warwick Medical School, University of Warwick, Warwick Medical School , Coventry , UK.

2b Medical Education Department, University of Technology , Sydney , Australia.

PMID: 28379088

DOI: 10.1080/0142159X.2017.1293238

Abstract

Purpose: Realism is a perspective in which entities exist independently of being perceived or independently of our theories about them. The realist framework with its principle of explanatory causation was used for an in-depth exploration of faculty development (FD) since, despite the widespread investment in FD, the evidence that it enhances the effectiveness of teaching in the long-term is still limited. The study aimed to develop realist theories that explain the connections between contexts (C), mechanisms (M) and outcomes (O) to find out what works for whom and why in FD.

Methods: Purposive sampling was used to select two medical schools from each of the four UK regions (total 8 of the 33 UK medical schools) for interview of a faculty development coordinator and a medical educator at each school. Sixteen interviews were carried out. Data were coded and summarized under contexts, mechanisms, and outcomes (CMO) to derive realist theories.

Results: We identified contexts that facilitated FD mechanisms of engagement, motivation, positive perception and professionalization, which led to educators' outcomes of improved confidence, competence, credibility and career progression.

Conclusion: Four realist theories, which support the effectiveness of FD in the long-term, were derived, enabling recommendations for FD stakeholders.

교수개발: 루비에서 오크까지(Med Teach, 2020)
Faculty development: From rubies to oak
Yvonne Steinert

메디컬 티처의 생산성과 출판물에서 꾸준한 성장을 보인 분야 중 하나는 교수개발 분야입니다. 교수개발 또는 직원 개발이라고도 불리는 교수개발은 의료 전문가가 개인 및 그룹 환경에서 교사 및 교육자, 리더 및 관리자, 연구자 및 학자로서 지식, 기술 및 행동을 개선하기 위해 추구하는 모든 활동을 말합니다(Steinert 2014). 개인 및 그룹 환경에서 공식적 접근 방식과 비공식적 접근 방식을 모두 포함할 수 있는 교수개발은 조직의 변화를 촉진하는 데 유용한 도구가 될 수도 있습니다. 
One of the areas in which we have seen steady growth in productivity and publications in Medical Teacher has been in the field of faculty development. Faculty development, or staff development as it is often called, refers to all activities health professionals pursue to improve their knowledge, skills and behaviors as teachers and educators, leaders and managers, and researchers and scholars, in both individual and group settings (Steinert 2014). Faculty development, which can include both formal and informal approaches, in individual and group settings, can also serve as a useful instrument in the promotion of organizational change.

제가 아는 한, 의학 교사(Medical Teacher)에서 교수개발(FD)이라는 용어를 사용한 첫 번째 논문은 1981년에 출판되었으며(Westberg and Jason 1981), 그 이후로 이 저널에는 보건 전문직의 임상 및 기초 과학 교사 개발에 관한 145편의 논문이 게재되었습니다. 그림 1에서 볼 수 있듯이 메디컬 티처에 게재된 논문은 꾸준히, 그리고 크게 증가해 왔습니다. 이 작업에서 어떤 패턴을 발견할 수 있을까요? 콘텐츠와 프로세스의 어떤 영역이 강조되고 있을까요? 
To my knowledge, the first article using the term faculty development (FD) in Medical Teacher was published in 1981 (Westberg and Jason 1981), and since that time, 145 articles have been devoted to the development of clinical and basic science teachers in the health professions in this journal. As highlighted in Figure 1, there has been a steady – and significant – growth in publications in Medical Teacher. What patterns can we discern in this work? What areas of content and process have been highlighted?

이 백서의 목표는 지난 40년 동안 메디컬 티처의 교수자 개발의 초상을 제시하고 앞으로의 새로운 트렌드를 강조하는 것이며, 이러한 논의가 이 저널에서 이 분야의 발전과 학술의 역사를 설명하고, 미래의 방향과 가능한 성장 영역을 제시하며, 교수자 개발이 강력하고 학술적인 영역으로 유지되는 데 도움이 되기를 바라는 마음에서입니다. 
The goal of this paper is to present a portrait of faculty development in Medical Teacher over the last 40 years and to highlight emerging trends moving forward, with the hope that this discussion will help to illustrate the history of this field of development and scholarship in this journal, indicate future directions and possible areas of growth, and ensure that faculty development will remain a strong and scholarly domain.

뒤돌아보기 - 의학 교사 리뷰
Looking backward – A review of Medical Teacher

저는 보건과학 사서와 함께 교수개발, 직원 개발, 전문성 개발, 교수진 현직 교육이라는 검색어를 사용하여 Medical Teacher의 창간호부터 지금까지의 모든 호를 검토했습니다. 이 검색을 통해 286개의 결과가 나왔으며, 그 중 145개의 보고서는 교수개발 관련 문헌의 검토 및 종합, 특정 프로그램 또는 활동에 대한 설명, 개념적 모델 또는 프레임워크에 초점을 맞춘 것이었습니다. 또한, 이 검색에서 학생과 레지던트에게 교수법에 대해 가르치는 것의 중요성에 대해 보고한 논문이 6편, '12가지 팁' 논문이 24편 검색되었는데, 이 중 6편은 교수 개발에 특별히 초점을 맞춘 논문으로(예: McLean and Van Wyk 2006; Yelon 외 2014; Dewey 외 2016) 모두 교수진과 교수 개발 활동을 위한 훌륭한 자료가 될 것입니다(예: Harden and Crosby 2000; Ramani 2006; Dudek and Dojeiji 2014). 나머지 논문은 의학교육의 다른 측면을 설명하면서 교수개발에 대한 시사점을 설명하는 경우가 많았습니다(예: D'Eon 2004, Sanson-Fisher 외. 2008, Sandars and Murdoch-Eaton 2017). 그러나 이 섹션에서는 교수개발을 직접적으로 다룬 145개의 보고서를 중점적으로 다룹니다. 
Together with a health sciences librarian, I reviewed all issues of Medical Teacher since its inception, using the search terms faculty development, staff development, professional development, or in-service training for faculty. This search yielded 286 results, of which 145 reports focused specifically on faculty development reviews and syntheses of the literature, descriptions of specific programs or activities, and conceptual models or frameworks. In addition, 6 articles in this search reported on the importance of teaching students and residents about teaching, and 24 ‘Twelve Tips’ articles were retrieved, six of which focused specifically on faculty development (e.g. McLean and Van Wyk 2006; Yelon et al. 2014; Dewey et al. 2016) and all of which would be excellent resources for faculty members and faculty development activities (e.g. Harden and Crosby 2000; Ramani 2006; Dudek and Dojeiji 2014). The remaining articles described other aspects of medical education, often with a description of implications for faculty development (e.g. D’Eon 2004; Sanson-Fisher et al. 2008; Sandars and Murdoch-Eaton 2017). However, the 145 reports addressing faculty development directly will be the focus of this section.

현장의 성장
Growth in the field

그림 1에서 볼 수 있듯이, 지난 40년 동안 의학 교사 분야의 출판물은 꾸준히, 그리고 크게 증가했으며, 이는 의학교육에서 이러한 측면의 중요성이 점점 더 커지고 있음을 보여줍니다. 또한 교수자 개발을 직접적으로 다룬 145건의 보고서 중

  • 30%는 프로그램 개발을 위한 권장 사항, 교수자 개발의 역할과 중요성에 대한 관점 또는 성찰, 교수 및 학습을 위한 프레임워크 또는 문헌 검토(7건)를 제공하는 보다 일반적인 성격의 보고서였으며,
  • 42%는 특정 FD 프로그램 또는 활동에 대한 설명을 제공했고, 이 중 90%는 평가 요소를 포함했습니다.
  • 전체 연구의 약 28%를 차지한 연구 건수도 1980년대에는 한 건도 없었지만 2010년 이후에는 23건으로 이 기간 동안 크게 증가했습니다.

흥미롭게도 이 분야의 연구에는 교육 또는 장학에 대한 교수진의 요구 평가(Goldszmidt 외. 2008)에서부터 트레이너 개발 방법(Hendry 2009), 교수개발에 대한 태도(Waters and Wall 2007), 교육학적 원칙(McLeod 외. 2008), 교수개발 성과(Boerboom 외. 2009)에 이르기까지 다양한 주제가 포함되었습니다.
As highlighted in Figure 1, there has been a steady – and significant – growth in publications in Medical Teacher over the last 40 years, demonstrating the increasing importance of this aspect of medical education. Moreover, of the 145 reports that addressed faculty development directly,

  • 30% were more general in nature, offering recommendations for program development, perspectives or reflections on the role and importance of faculty development, frameworks for teaching and learning, or literature reviews (of which there were seven);
  • 42% provided descriptions of specific FD programs or activities, of which 90% included an evaluative component.
  • The number of research studies, which represented approximately 28% of this body of work, also increased significantly over this time frame, starting with no studies in the 1980’s and 23 studies since 2010.

Interestingly, studies in this area included a variety of topics, from needs assessments of faculty members for education or scholarship (Goldszmidt et al. 2008), to how trainers develop (Hendry 2009), attitudes to faculty development (Waters and Wall 2007), pedagogical principles (McLeod et al. 2008), and faculty development outcomes (Boerboom et al. 2009).

교수자 개발의 초점 영역 및 접근 방식
Areas of focus and approaches to faculty development

이 의학 교사 검색에서 검색된 대부분의 논문은 교육 개선을 위한 교수자 개발에 초점을 맞추었습니다. 연구 역량이나 리더십 개발을 위한 교수 개발에 초점을 맞춘 논문은 훨씬 적었습니다(예: Hill and Stephens 2005; Abdulghani 외. 2014). 교수법 개선을 강조한 논문 중에는 임상 교수법, 외래 교수법, 문제 기반 학습, 직장 학습, 전문직 간 교육, 교수의 개념 등의 주제가 포함되었습니다. 

  • 학습자 평가를 위한 교수자 개발에 초점을 맞춘 논문은 거의 없었고(Preston-Whyte 외. 1993; Alamoudi 외. 2017),
  • 교사의 전문적 정체성을 다룬 논문은 2편에 불과했으며(Lieff 외. 2012; O'Sullivan 외. 2016), 
  • 조직 개발에서 교수자 개발의 역할에 대해 설명한 논문은 없었습니다.

교육 및 학습에 대한 특정 방식(예: 사례 토론, 시뮬레이션 기반 교육) 또는 교수개발에 대한 특정 접근 방식(예: 대화형 연극(Kumagai 외 2007), 동료 관찰(Finn 외 2011), 멘토링(Stenfors-Hayes 외 2010) 등)을 다룬 논문은 소수에 불과했고, 가상 환자 활용을 포함한 온라인 교수개발에 대해 설명한 논문은 의외로 적었습니다(Round 외 2009, Cook and Steinert 2013). 또한, 대부분의 프로그램 설명은 교수개발을 위한 주요 전달 방법으로 워크숍이나 세미나에 의존하고 있었습니다. 동료 코칭(Schwellnus and Carnahan 2014), 업무 기반 교수자 개발(Schreurs 외. 2016), 교수자 개발 실천 커뮤니티(Maley 외. 2010)의 활용에 대해 설명한 경우는 거의 없었습니다. 

The majority of articles retrieved in this search of Medical Teacher focused on faculty development for teaching improvement. A much smaller number focused on faculty development for research capacity or leadership development (e.g. Hill and Stephens 2005; Abdulghani et al. 2014). Among the articles that emphasized instructional improvement, topics included clinical teaching, ambulatory teaching, problem-based learning, workplace learning, interprofessional education, and conceptions of teaching.

  • Very few articles focused specifically on faculty development for learner assessment (Preston-Whyte et al. 1993; Alamoudi et al. 2017);
  • only two addressed teachers’ professional identities (Lieff et al. 2012; O’Sullivan et al. 2016); and
  • none described the role of faculty development in organizational development.

A limited number of articles addressed specific approaches to teaching and learning (e.g. case discussions; simulation-based education) or to faculty development, such as interactive theatre (Kumagai et al. 2007), peer observation (Finn et al. 2011), or mentorship (Stenfors-Hayes et al. 2010); surprisingly few articles described online faculty development, including the use of virtual patients (Round et al. 2009; Cook and Steinert 2013). In addition, the majority of program descriptions relied on workshops or seminars as the main method of delivery for faculty development. Very few described the use of peer coaching (Schwellnus and Carnahan 2014), work-based faculty development (Schreurs et al. 2016), or communities of practice in faculty development (Maley et al. 2010).

교수진 개발의 국제적 특성
The international nature of faculty development

흥미롭게도 이번 의학 교사 리뷰에 실린 교수개발 보고서는 여러 나라에서 작성되었습니다. 당연히 대부분의 논문은 캐나다, 미국, 영국에서 작성되었습니다. 그러나 20%가 조금 넘는 논문이 네덜란드와 독일을 중심으로 한 유럽에서 작성되었으며, 10%가 조금 넘는 논문은 프로그램 설계나 참여자 프로필에 여러 국가가 참여한 국제적인 것으로 분류할 수 있습니다. 시간이 지남에 따라 저자의 국가에서 특별한 패턴을 발견할 수는 없었지만, 2000년 이후 국제 파트너십이 꾸준히 증가하고 있습니다. 중요한 점은 모든 대륙에서 적어도 한 편의 논문이 발표되어 총 22개 국가가 이 문헌에 포함되었다는 것입니다. 의학 교사 분야의 교수개발이 전 세계적으로 확산되고 있다는 사실은 인상적입니다.
Interestingly, the faculty development reports in this review of Medical Teacher emanated from many different countries. Not surprisingly, the majority of articles came from Canada, the USA, and the UK. However, slightly over 20% of the articles came from Europe, with most emanating from Holland and Germany; and just over 10% could be classified as international, involving more than one country in the design of the program or the participant profiles. Although no particular patterns in authors’ countries could be discerned over time, there has been a steady increase in international partnerships since 2000. Importantly, there was at least one article from every continent, for a total of 22 countries being represented in this literature. The global reach of faculty development in Medical Teacher is impressive.

앞으로의 전망
Looking forward

이 관점에서는 메디컬 티처에 실린 논문과 더 큰 규모의 의학교육 문헌, 그리고 이 분야의 현재 연구를 바탕으로 향후 발전을 위한 6가지 영역을 강조할 것입니다. 물론 더 많은 분야를 강조할 수 있지만, 현재로서는 이 여섯 가지가 특히 중요하다고 생각됩니다.
Based on the articles reviewed in Medical Teacher and the larger medical education literature, as well as current work in the field, this perspective will highlight six areas for future development. Clearly, we could underscore many more; however, these are seen as particularly important at this time.

교수진 개발의 범위 확대 - 교육에서 학문적 개발까지
Broadening the scope of faculty development – from teaching to academic development 

많은 저자들이 교수개발이 연구(Hodges 2014), 리더십 개발(Swanwick and McKimm 2014), 학업 및 경력 개발(Leslie 2014)에서 교원의 역할을 준비하는 데 있어 교수개발이 할 수 있는 역할을 강조했지만, 대부분의 교수개발 노력은 여전히 교사 및 교육자로서의 교원 역할을 강화하는 데 초점을 맞추는 경향이 있습니다. 거의 20년 전 이 저널에서 강조했듯이(Steinert 2000), 이제는 이러한 관점을 넓혀 교수진의 모든 역할을 대상으로 하는 새로운 프로그램을 의도적으로 설계해야 할 때입니다. 의학 교사와 광범위한 보건 전문직 문헌에서 연구 및 장학, 리더십 개발을 위한 교수개발에 대한 일부 보고가 있었다는 것은 고무적인 일이지만, 그 범위는 여전히 제한적입니다. 앞으로 교수개발의 주요 초점이 여전히 교육 개발인 이유를 더 잘 이해하고(Steinert 외. 2016), 고등 교육을 포함한 다른 분야로부터 배우는 것이 가치가 있을 수 있습니다(Schroeder 2011). 또한 교수진은 개인 및 경력 개발에 초점을 맞추는 것을 높이 평가하며(Steinert 외. 2009), 다른 부서 및 조직과 협력하여 학문적 개발을 촉진하는 다양한 방법을 모색하는 것을 고려할 수 있습니다(Bertram 외. 2015, Power 외. 2018, Zacher 외. 2019). 
Although many authors have underscored the role that faculty development can play in the preparation of faculty members for their roles in research (Hodges 2014) and leadership development (Swanwick and McKimm 2014) as well as academic and career development (Leslie 2014), the majority of faculty development efforts still tend to focus on enhancing the role of faculty members as teachers and educators. As highlighted almost 20 years ago in this journal (Steinert 2000), it is time for us to broaden this view and intentionally design new programs targeting all of the roles that faculty members play. It is heartening to see that there have been some reports on faculty development for research and scholarship, as well as leadership development, both in Medical Teacher and in the broader health professions literature; however, the scope remains limited. Moving forward, it might be worthwhile to better understand why the primary faculty development focus is still educational development (Steinert et al. 2016) and to learn from other fields, including higher education (Schroeder 2011). We also know that faculty members appreciate a focus on personal and career development (Steinert et al. 2009) and we could consider partnering with other units and organizations to explore different ways of fostering academic development (Bertram et al. 2015; Power et al. 2018; Zacher et al. 2019).

교수진 개발에 대한 접근 방식 확장하기
Expanding our approaches to faculty development

교수개발에 대한 우리의 접근 방식을 확장할 수 있는 방법은 분명히 많습니다(Steinert 2010). 그러나 이 섹션에서는 사회적 학습 이론과 대규모 의학교육 문헌에서 떠오르는 트렌드를 반영하여 동료 코칭, 업무 기반 학습 및 교수개발을 위한 실천 커뮤니티에 초점을 맞출 것입니다. 
There are clearly many ways in which our approaches to faculty development can be expanded (Steinert 2010). However, with a nod to social learning theories and an emerging trend in the larger medical education literature, this section will focus on peer coaching, work-based learning, and communities of practice for faculty development.

동료 코칭
Peer coaching

교수진 개발 방법으로서의 동료 코칭은 교육 문헌에 광범위하게 기술되어 있습니다(Parker 외. 2015; Hagen 외. 2017). 동료 코칭의 핵심 요소에는 개별 학습 목표 파악, 집중 관찰, 피드백, 분석 및 지원 제공이 포함됩니다(Flynn 외. 1994). 동료 코칭은 진료 환경에서 이루어지고, 개별화된 학습을 가능하게 하며, 협업을 촉진하기 때문에 보건 전문직에서 특히 매력적입니다(Orlander 외. 2000). 또한 이러한 접근 방식은 의료 전문가들이 함께 일하면서 서로에 대해 배울 수 있게 해주며, 이러한 방식으로 전문가 간 교육 및 실습을 촉진하는 데 도움이 될 수 있습니다. 동료 코칭은 때때로 동료 상담이나 관찰과 겹치기도 하지만, 안전한 환경, 상호 신뢰와 동료애, 성찰이 필요한 고도로 개인화된 학습자 중심 접근법입니다(Boillat and Elizov, 2014). 또한 유사한 원칙을 기반으로 하며 교수진의 사회화 및 경력 개발을 촉진하는 데 자주 사용되는 또 다른 잘 활용되지 않는 교수개발 전략인 멘토링과도 밀접하게 연관되어 있습니다(Morzinski 외. 1994; Pololi 외. 2002). 

Peer coaching as a method of faculty development has been described extensively in the education literature (Parker et al. 2015; Hagen et al. 2017). Key elements of peer coaching include the identification of individual learning goals, focused observation, and the provision of feedback, analysis and support (Flynn et al. 1994). Peer coaching has particular appeal in the health professions as it occurs in the practice setting, enables individualized learning, and fosters collaboration (Orlander et al. 2000). This approach also allows health care professionals to learn about each other as they work together and, in this way, can help to promote interprofessional education and practice. Peer coaching, which sometimes overlaps with peer consultation or observation, is a highly personalized, learner-centered approach that requires a safe environment, mutual trust and collegiality, and reflection (Boillat and Elizov, 2014). It also ties in closely with mentorship, another underutilized faculty development strategy which builds on similar principles and is often used to facilitate the socialization and career development of faculty members (Morzinski et al. 1994; Pololi et al. 2002).

직장 내 학습
Workplace learning

보건 전문직의 교수개발은 대학 및 보건 전문직 학교, 교육 병원 및 지역사회 현장, 국내 및 국제 협회 및 조직을 포함하여 끊임없이 변화하는 복잡한 환경에서 이루어집니다(Hueppchen 외. 2011). 이러한 모든 맥락에서 교수개발 프로그램과 활동은 의료 서비스 제공, 교육 실무, 진화하는 의료 전문가의 역할 변화에 대응할 수 있어야 합니다. 하지만 이를 어떻게 달성할 수 있을까요? 교수개발은 종종 현장이 아닌 워크숍과 단기 과정을 통해 제공되기 때문에 참가자들은 '배운 교훈'을 각자의 상황으로 가져가야 합니다. 이러한 추세를 어떻게 바꿀 수 있으며, 교육 이전을 강화하려면 어떻게 해야 할까요? 빌렛(1996, 2002)은 다음의 여러 단계를 포함하는 '일터의 교육학'을 설명한 바 있습니다.

  • 개인의 참여,
  • 학습을 위한 경로를 만들기 위한 활동의 시퀀싱,
  • 근거리 또는 원거리 수준에서의 가이드 제공,
  • 접근을 가능하게 하는 환경적 어포던스,
  • 성찰과 역할 모델링 등 

Faculty development in the health professions takes place in an ever-changing (and complex) environment, including universities and health professions schools, teaching hospitals and community sites, and national and international associations and organizations (Hueppchen et al. 2011). In all of these contexts, faculty development programs and activities must be responsive to changes in health care delivery, educational practice, and the evolving roles of health professionals. However, how do we accomplish this? Faculty development is frequently offered through workshops and short courses that are not situated in the workplace, requiring participants to take their ‘lessons learned’ back to their own contexts. How can this trend be changed – and how can we strengthen transfer of training? Billett (1996; 2002) has described a ‘pedagogy of the workplace’ that includes a number of steps:

  • individual engagement;
  • the sequencing of activities to create a pathway for learning;
  • the provision of guidance, be it at a proximal or distal level;
  • environmental affordances, which can enable access; and
  • reflection and role modelling.

직장에서 학습을 촉진할 수 있는 방법에 대한 인식과 실제 환경에서 동료들과 함께 업무 기반 과제를 해결하는 힘(Boud와 미들턴 2003)은 많은 교수개발 노력을 향상시킬 수 있습니다. 마찬가지로, workshop에서 workplace으로 활동의 방향을 바꾸면 참여와 동기 부여, 접근성을 높일 수 있습니다. 교수개발자들은 종종 '가장 필요한 사람들이 가장 적게 참석한다'고 한탄합니다. 직장으로 이동하여 업무 기반 경험(교육 및 실습)을 활용함으로써 직장 내 학습을 더욱 가시화할 수 있는 방법을 찾는다면 교수진 참여도 해결할 수 있습니다. 임상의와 기초 과학자는 함께 일하고 더 큰 커뮤니티에 참여함으로써 새로운 지식을 쌓고 교육과 학습에서 직면하는 문제에 대한 새로운 접근법을 개발할 수 있습니다(Lave and Wenger 1991). 또한 '훈련의 전이transfer'(예: Grossman and Salas 2011)에 관한 문헌에서 얻은 교훈을 바탕으로 모든 교수개발 프로그램을 설계하고 실행할 때 연수생의 특성(예: 자기 효능감), 훈련 설계(예: 행동 모델링), 업무 환경 자체(예: 지원 정도)를 고려하는 것도 가치가 있을 것입니다. 일상적인 교육 및 임상 경험은 잠재적인 '학습' 경험이며, 직장에서의 교수개발을 가시적이고 신뢰할 수 있는 교수개발 활동으로 만드는 것은 이 목표를 달성하는 데 큰 도움이 될 것입니다. 
Awareness of how learning can be promoted in the work place and the power of tackling work-based challenges with colleagues in authentic settings (Boud and Middleton 2003) can enhance many faculty development efforts. Similarly, a re-orientation of activities from the workshop to the workplace can boost participation, motivation, and access. Faculty developers often lament that ‘those who need it the most attend the least.’ By moving to the workplace and capitalizing on work-based experiences (in teaching and practice), faculty engagement can also be addressed, as long as we find ways to make workplace learning more visible. By working together and participating in a larger community, clinicians and basic scientists can build new knowledge and develop new approaches to challenges encountered in teaching and learning (Lave and Wenger 1991). It would also be worthwhile to build on lessons learned in the literature regarding ‘transfer of training’ (e.g. Grossman and Salas 2011) and consider trainee characteristics (e.g. self-efficacy), training design (e.g. behavioral modeling), and the work environment itself (e.g. degree of support) in the design and implementation of all faculty development programs. Everyday educational and clinical experiences are potential ‘learning’ experiences; making faculty development in the workplace a visible and credible faculty development activity would go a long way in achieving this objective.

실천 공동체
Communities of practice

동료 코칭과 직장 내 학습은 실무 커뮤니티에서의 학습과 밀접한 관련이 있습니다. Barab 등(2002)은 실천 커뮤니티(CoP)를 다음으로 정의했습니다. 

  • '공통의 관행 및 상호 기업enterprise에 초점을 맞춘 중복되는 지식 기반, 일련의 신념, 가치, 역사 및 경험을 공유하고 발전시키는 개인들의 지속적이고 지속적인 사회적 네트워크'

Peer coaching and workplace learning are closely tied to learning in a community of practice. Barab et al. (2002) have defined a community of practice (CoP) as a

  • ‘persistent, sustaining, social network of individuals who share and develop an overlapping knowledge base, set of beliefs, values, history and experiences focused on a common practice and/or mutual enterprise.’

분명히 교수개발 프로그램은 실무 커뮤니티를 발전시키는 데 중추적인 역할을 할 수 있습니다. 동시에 이러한 커뮤니티에 속하는 것은 의학교육자의 발전에 중요한 역할을 할 수 있습니다. 최근 기사에서 드 카르발류-필류(de Carvalho-Filho) 외(2019)는 교수개발을 위한 CoP를 구현하기 위한 12가지 '팁'을 제시했는데, 여기에는 다음과 같은 내용이 포함됩니다:

  • CoP의 목표와 가치를 명확히 하기,
  • 구성원들을 하나로 묶는 특정 프로젝트 또는 과제로 시작하기,
  • CoP를 개방적으로 유지하고 전문성(기억)과 신선한 아이디어(혁신)를 모두 갖춘 구성원 초대하기,
  • 제도적 지원을 보장하기 위해 노력하기,
  • 지속 가능성 촉진하기.

Clearly, faculty development programs can play a pivotal role in developing communities of practice. At the same time, belonging to such a community can play a critical role in the development of medical educators. In a recent article, de Carvalho-Filho et al. (2019) outlined 12 ‘tips’ for implementing a CoP for faculty development which included the following:

  • articulating the goals and value of a CoP;
  • starting with a specific project or task that unites the members;
  • keeping the CoP open and inviting members with both expertise (memory) and fresh ideas (innovation);
  • working to ensure institutional support; and
  • promoting sustainability.

실천 공동체의 정의(Buckley 외, 2019)를 인지하고, 드 카르발류-필류 외(2019)가 강조한 전략을 인식하면 지식 관리와 '모범 사례'의 활용을 촉진하는 데 도움이 될 수 있습니다. 대면 활동을 보완하는 데 자주 사용되는 교수개발에 온라인 기술을 사용하는 것도 교수진 간의 공동체 의식을 강화하는 데 도움이 될 수 있습니다(Sherer 외. 2003; Cook and Steinert 2013). 동시에 의학교육 센터 및 학과(Varpio 외. 2014, 2017)와 다양한 형태의 아카데미(Irby 외. 2004, Bligh and Brice 2007, Searle 외. 2010)를 포함한 교육 단위가 여러 면에서 실천 공동체가 발전할 수 있는 환경을 제공할 수 있다는 점도 주목해야 합니다. 이러한 단체는 신규 및 경력 교사와 교육자, 연구자와 학자, 지도자와 관리자를 육성하고 지원하는 데 도움이 될 수 있습니다. 문헌에서 점점 더 많이 기술되고 있는 이러한 단위는 의학교육을 학문 분야로 발전시키고 유지하는 데에도 도움이 될 수 있습니다(Walsh 2007). 이러한 단위가 성공하기 위해서는 공통의 목적, 열린 의사소통, 대화의 기회, 가이드 및 제도적 지원이 필수적입니다.
Cognizance of the definitions of communities of practice (Buckley et al. 2019), and awareness of the strategies highlighted by de Carvalho-Filho et al. (2019), can help to facilitate knowledge management and the uptake of ‘best practices.’ The use of online technologies for faculty development, which are often used to complement face-to-face activities, can also help to reinforce a sense of community among faculty members (Sherer et al. 2003; Cook and Steinert 2013). At the same time, it should also be noted that, in many ways, educational units, including centers and/or departments of medical education (Varpio et al. 2014, 2017) as well as the multiple forms of academies (Irby et al. 2004; Bligh and Brice 2007; Searle et al. 2010), can offer a setting for communities of practice to develop. These entities can help nurture and support new and experienced teachers and educators, researchers and scholars, and leaders and administrators. These units, which have been increasingly described in the literature, can also help to develop and sustain medical education as an academic discipline (Walsh 2007). Critical to their success is a common purpose, open communication, and opportunities for dialogue, guidance and institutional support.

교수진 개발을 위한 역량 기반 프레임워크 활용하기
Utilizing a competency-based framework for faculty development

대부분의 교수진 개발 프로그램이 교수진을 위한 커리큘럼과는 별개로 설계되었으며, 종종 인지되거나 자체적으로 파악된 필요에 의존한다는 점은 흥미롭습니다. 최근 몇 년 동안 많은 저자들이 학문적 역량을 종합하기 위한 프레임워크를 제안했습니다(예: Harris 외. 2007, Molenaar 외. 2009, Milner 외. 2011, Srinivasan 외. 2011). 교수진 개발 프로그램을 설계하고 제공할 때 이러한 프레임워크를 고려하면 프로그램의 내용과 원하는 결과를 모두 파악하는 데 도움이 될 것입니다. 예를 들어, 영국에 본부를 둔 의학 교육자 아카데미(2014)는 '의학 교육자에게 요구되는 이해, 기술 및 행동에 대한 세부적인 결과'를 요약하여 핵심 가치와 5개 영역으로 구분한 의학 교육자를 위한 전문성 표준을 개발했습니다. 핵심 가치로는 다음이 제시되었습니다.

  • 직업적 성실성, 
  • 교육적 학술활동, 
  • 기회의 평등과 다양성, 
  • 대중에 대한 존중, 
  • 환자에 대한 존중, 
  • 학습자에 대한 존중, 
  • 동료에 대한 존중

이러한 핵심 가치는 또한 의학교육자의 전문성 개발을 뒷받침하고 미국의학협회에서 규정한 교육 활동의 다섯 가지 영역의 토대가 됩니다.

  • 학습 활동의 설계 및 계획,
  • 학습자 교육 및 지원,
  • 학습자에 대한 평가 및 피드백,
  • 교육 연구 및 증거 기반 실습,
  • 교육 관리 및 리더십

또 다른 맥락에서, 스리니바산 외(2011)는 '역량으로서의 교육'을 설명하면서 학습자를 위한 ACGME 역량을 반영하여 의학 교육자를 위한 6가지 역량을 자세히 설명했습니다.

  • 의학(또는 내용) 지식,
  • 학습자 중심성,
  • 대인관계 및 의사소통 기술,
  • 전문직업성 및 역할 모델링,
  • 실천 기반 성찰 및 개선,
  • 시스템 기반 학습 등 

이러한 역량 또는 다른 프레임워크를 사용하여 교수개발을 위한 커리큘럼을 정의하든, 교수진의 열정과 연민, 호기심과 창의성, 헌신을 키우는 것이 중요하다는 점을 기억해야 합니다.
It is interesting to observe that most faculty development programs have been designed independently of a curriculum for faculty members, often relying on perceived or self-identified needs. In recent years, a number of authors have proposed frameworks to synthesize academic competencies (e.g. Harris et al. 2007; Molenaar et al. 2009; Milner et al. 2011; Srinivasan et al. 2011). Considering these frameworks in the design and delivery of faculty development programs would help to inform both content and desired outcomes. As an example, the UK-based Academy of Medical Educators (2014) has developed Professional Standards for medical educators that are divided into core values and five domains, outlining ‘detailed outcomes in terms of understanding, skills and behaviour required of medical educators.’ The suggested core values include:

  • professional integrity,
  • educational scholarship,
  • equality of opportunity and diversity,
  • respect for the public,
  • respect for patients,
  • respect for learners, and
  • respect for colleagues.

These core values also underpin the professional development of medical educators and serve as the foundation for the following five domains of educational practice identified by the Academy:

  • the design and planning of learning activities;
  • teaching and supporting learners;
  • assessment and feedback to learners;
  • educational research and evidence-based practice; and
  • educational management and leadership.

In another context, Srinivasan et al. (2011) described ‘teaching as a competency’ and detailed six competencies for medical educators mirroring the ACGME competencies for learners:

  • medical (or content) knowledge;
  • learner centeredness;
  • interpersonal and communication skills;
  • professionalism and role modelling;
  • practice-based reflection and improvement; and
  • systems-based learning.

Irrespective of whether these competencies, or another framework, are used to define a curriculum for faculty development, we must remember the importance of nurturing faculty members’ passion and compassion, curiosity and creativity, and commitment.

교사의 전문적 정체성 지원
Supporting teachers’ professional identities

의료 교사의 40년 리뷰에서 언급했듯이, 대부분의 교원 개발 이니셔티브는 교원의 전문적 정체성 형성이나 지원보다는 지식과 기술 습득에 초점을 맞추고 있습니다. 그러나 동시에 우리는 동료의 직업적 정체성이 진로 선택, 학문적 역할과 책임, 전문성 개발 기회에 강력한 영향력을 행사할 수 있기 때문에 매우 중요하다는 것을 알고 있습니다(Steinert 외. 2019). 또한 교수개발을 통해 정체성을 강화하거나 일깨우는 데 도움이 될 수 있는 여러 가지 전략이 있으며, 여기에는 다음 등이 포함됩니다.

  • 정체성 및 정체성 형성을 기존 강의에 포함(특히 정체성과 관련된 질문을 통해),
  • 종단적 프로그램에 정체성 통합,
  • 커뮤니티 구축 및 네트워킹 기회 구축,
  • 성찰 촉진,
  • 멘토링 활용 

교수진의 정체성에 초점을 맞춘 독립적인 교수개발 활동도 도움이 될 수 있으며, 조직의 변화와 제도적 지원을 옹호하는 다양한 접근 방식도 도움이 될 수 있습니다. 다양한 방식으로 교직원의 전문적 정체성을 강화하면 교직원이 가치를 느끼고 교육 활동을 추구하는 데 도움이 될 수 있으며, 교수 및 학습의 전문화를 위한 첫 단계인 교직원 개발 프로그램에 대한 참여를 높일 수 있습니다(Eitel 2000). 교직원의 전문적 정체성에 초점을 맞추는 것은 분명 더 많은 개발과 탐구의 가치가 있습니다.
As noted in this 40-year review of Medical Teacher, most faculty development initiatives focus on knowledge and skill acquisition rather than the formation – or support of – faculty members’ professional identity. At the same time, however, we know that our colleagues’ professional identities are critically important, as they can exert a powerful influence on career choice, academic roles and responsibilities, and professional development opportunities (Steinert et al. 2019). We have also learned that a number of strategies can help to strengthen or awaken identity through faculty development and include:

  • the embedding of identity and identity formation into existing offerings (most notably by asking questions related to identity);
  • incorporating identity in longitudinal programs;
  • building opportunities for community building and networking;
  • promoting reflection; and
  • capitalizing on mentorship.

Stand-alone faculty development activities focusing on faculty members’ identities can also be helpful, as can a variety of approaches that advocate for organizational change and institutional support. In diverse ways, strengthening faculty members’ professional identities can help them to feel valued and pursue educational activities; it can also enhance participation in faculty development offerings, often the first step in the professionalization of teaching and learning (Eitel 2000). Focusing on faculty members’ professional identities clearly merits further development and inquiry.

조직 개발과 변화에 집중하기
Focusing on organizational development and change

처음에 암시한 바와 같이, 그리고 교수개발에 대한 여러 BEME 리뷰(Steinert 외. 2006, 2016)에서 강조한 바와 같이, 교수개발은 조직의 변화와 발전을 촉진하는 데 중요한 역할을 할 수 있습니다. 예를 들어, 교수개발은

  • 우수성을 지원하고 보상하는 기관 정책을 개발하고(Eitel 2000),
  • 학문적 승진 기준을 재검토하도록 장려하며(Azer 2005),
  • 혁신과 학술활동을 인정하고,
  • 주니어 및 시니어 교수진에게 학습 기회와 자원을 제공함으로써 변화의 문화를 촉진할 수 있습니다(Steinert 2019).

교수개발은 또한 다음에 유용한 도구로 사용될 수 있습니다.

  • 커리큘럼 변화를 촉진하고(예: Steinert 외. 2007; Snell 2014),
  • 교육 실무 및 연구 네트워크에 대한 접근성을 높이며,
  • 교육자를 위한 가시적인 경력 경로를 창출  

지난 30년 동안 우리는 우수한 교육에는 콘텐츠 전문성 이상의 것이 필요하며, 제도적 정책이 교육을 가치 있는 학문 분야로 정당화하는 데 기여할 수 있다는 점을 인식하는 데 상당한 진전을 이루었습니다(Steinert 외. 2019).

  • 교수 개발 프로그램을 제공하는 임무를 가진 교수 개발 부서(또는 사무실)를 만드는 것은 교육과 교사에 대한 지원의 신호 중 하나입니다.
  • 교사의 academic progress를 위한 명확한 경로를 가시화하는 것도 또 다른 방법입니다. 실제로 최근 몇 년 동안 교사와 교육 장학의 정당한 기여를 인정하여 경력 및 승진 경로가 극적으로 변화하고 있으며, 교수개발은 이러한 조직적 변화를 이끌어내는 데 중요한 역할을 할 수 있습니다.
  • 중앙 또는 부서 단위의 교수 개발실(또는 센터) 또는 의학교육자 아카데미(위에서 언급한 바와 같이)와 같은 교육 부서를 신설하는 것도 조직 변화의 또 다른 예입니다.

As implied at the outset, and as highlighted in several BEME reviews of faculty development (Steinert et al. 2006; 2016), faculty development can play an important role in promoting organizational change and development. As an example, faculty development can

  • promote a culture of change by helping to develop institutional policies that support and reward excellence (Eitel 2000),
  • encourage a re-examination of criteria for academic promotion (Azer 2005),
  • recognize innovation and scholarship, and
  • provide learning opportunities and resources for junior and senior faculty members (Steinert 2019).

Faculty development can also serve as a useful instrument in

  • the promotion of curricular change (e.g. Steinert et al. 2007; Snell 2014),
  • enhanced access to educational practice and research networks, and
  • the creation of visible career pathways for educators.

Over the last 30 years, we have made significant progress in recognizing that excellent teaching requires more than content expertise and that institutional policies can contribute to legitimizing education as a valued field of scholarship (Steinert et al. 2019).

  • Creating faculty development units (or offices) with the mandate of offering faculty development programs is one sign of support for teaching and teachers.
  • Making visible a clear path toward academic progression for teachers is another. In fact, career and promotion pathways have shifted dramatically in recent years in recognition of the legitimate contributions of teachers and educational scholarship, and faculty development can play a critical role in helping to bring about such organizational change.
  • The creation of educational units, such as centralized or departmentally-based Faculty Development Offices (or centers) or Academies of Medical Educators (as noted above), is another example of organizational change. 

교수개발은 여러 가지 면에서 비판적 탐구, 변화 후 적응, 적응 및 성장을 촉진하는 환경을 조성하는 데 도움이 될 수 있습니다(Jolly 2014). 즉, 교수개발은 다음에 도움이 될 수 있습니다.

  • 조직을 발전시키고(기관의 목표와 구조의 다양성을 보여주는 데 도움이 되고),
  • 리더십과 관리를 촉진하며(팀 개발과 역할 식별을 장려하고),
  • 직장 내 문화 변화를 돕고(직업적 보상과 인센티브에 중점을 두고)(Steinert 2014) 

스완윅(2008)이 말한 것처럼 직원 개발은 다음과 같이 이루어져야 합니다:

  • '다음을 의도로 기관 전체가 추구하는 것...'
    • 교사의 교육 활동을 전문화하고,
    • 교육 인프라를 강화하며,
    • 미래를 위한 교육 역량을 구축

In many ways, faculty development can help to promote an environment that fosters critical inquiry, post-change accommodation, adaptation and growth (Jolly 2014). That is, faculty development can

  • help to move organisations forward (and help demonstrate a greater diversity of institutional goals and structures),
  • promote leadership and management (and encourage team development and role identification), and
  • assist in culture change in the workplace (with an emphasis on professional rewards and incentives) (Steinert 2014).

As Swanwick (2008) has stated, staff development should be:

  • ‘An institution-wide pursuit with the intent of
    • professionalizing the educational activities of teachers,
    • enhancing educational infrastructure, and
    • building educational capacity for the future …’

교수개발을 위한 연구 및 학술활동 장려
Promoting research and scholarship in faculty development

Medical Teacher(및 다른 저널)의 기념호에 실린 여러 저자들이 강조했듯이, 의학교육에 대한 연구와 장학이 크게 증가했습니다(Albert 외. 2007; Norman 2011; Harden 외. 2018; van Enk and Regehr 2018). 안타깝게도 이러한 성장은 교수개발과 병행되지 않았습니다. 프로그램 설계 및 실행, 정책 개발(및 교수진 인증), 교육 및 교수개발 연구에 대한 제한된 자원 등 성장 부족의 이유는 다양할 수 있지만, 이 분야에서 학술활동을 장려해야 할 필요성은 여전히 심각합니다. 
As a number of authors in the anniversary issues of Medical Teacher (as well as other journals) have highlighted, we have seen a significant increase in research and scholarship in medical education (Albert et al. 2007; Norman 2011; Harden et al. 2018; van Enk and Regehr 2018). Unfortunately, this growth has not been paralleled in faculty development. Although reasons for this lack of growth may vary, including an emphasis on program design and implementation, policy development (and the certification of faculty members), as well as limited resources for educational and faculty development research, the need to promote scholarship in this area remains acute.

2016년에 발표된 교육 효과성을 위한 교수개발에 대한 BEME의 검토(Medical Teacher, 2016)에서는 다음과 같은 권고 사항을 제시했으며, 이 중 상당수는 2006년에 제시된 권고 사항을 반영하고 있습니다(Steinert 외. 2006): 
The 2016 BEME review of faculty development for instructional effectiveness, published in Medical Teacher (Steinert et al. 2016), made the following recommendations, many of which mirror those made in 2006 (Steinert et al. 2006):

  • 이론적 또는 개념적 프레임워크에 연구를 포함할 것
  • 질적 연구와 혼합 방법 연구를 통합하여 보다 엄격한 연구를 수행합니다.
  • 다양한 방법과 데이터 소스를 사용하여 행동 및 조직 성과를 평가합니다.
  • 시간 경과에 따른 변화 및 실무로의 이전 평가
  • 교수개발의 주요 특징 분석
  • 교수개발이 전개되는 더 큰 조직적 맥락에서 교수개발의 역할을 탐색합니다.
  • Embed research studies in a theoretical or conceptual framework
  • Conduct more rigorous research studies, incorporating qualitative and mixed methods studies
  • Use multiple methods and data sources to assess behavioral and organizational outcomes
  • Assess change and transfer to practice over time
  • Analyze key features of faculty development
  • Explore the role of faculty development within the larger organizational context in which it unfolds

이러한 권고사항은 오늘날에도 여전히 유효하며, 40년간의 Medical Teacher 리뷰를 통해 더욱 강화되었습니다. 사실, 이 문헌 검토에서 특히 첫 번째 권고사항이 눈에 띄는데, 교수 개발 연구와 실천을 이론적 또는 개념적 프레임워크에 명시적으로 포함시켜야 한다는 점을 종합적으로 고려해야 합니다. 두 체계적인 BEME 검토는 또한 조사 및 학술적 가치가 있는 여러 교수개발 콘텐츠 영역을 강조했습니다. 여기에는 다음이 포함됩니다

  • 교수개발 참여의 결정 요인에 대한 탐구,
  • 다양한 방법과 접근 방식(예: 워크숍과 동료 코칭)의 비교,
  • 교수개발이 촉진자에게 미치는 영향,
  • 전문성 개발을 촉진하는 직장 학습의 핵심 요소와 실무 커뮤니티의 역할에 대한 이해,
  • 교수개발이 조직에 미치는 잠재적 영향과 맥락이 전문적 발달에 미치는 영향

의학교육과 교수개발에서 세계화와 국제적 파트너십이 증가하는 이 시대에 '문화'에 초점을 맞추고 그 의미와 해결 방법을 모색하는 것도 앞으로 연구 의제의 일부가 되어야 합니다. 
These recommendations continue to hold true today and are reinforced by this 40-year review of Medical Teacher. In fact, the first recommendation is particularly striking in this review of the literature, and we should collectively ensure that we explicitly embed both our faculty development research – and practices – in a theoretical or conceptual framework. Both systematic BEME reviews have also highlighted a number of faculty development content areas worthy of investigation and scholarship. These include:

  • an exploration of the determinants of participation in faculty development;
  • a comparison of different methods and approaches (e.g. workshops vs peer coaching);
  • the effect of faculty development on the facilitators;
  • a better understanding of the key elements of workplace learning that foster professional development and the role that communities of practice can play; and
  • the potential impact of faculty development on the organization and how context influences professional development.

In this era of increased globalization and international partnerships in medical education and faculty development, a focus on ‘culture’ – and what it means and how it is addressed – should also become part of the research agenda moving forward.

결론
Conclusion

메디컬 티처의 40주년을 기념하는 행사에 참여하고 이 관점에 대한 글을 쓰도록 초대받게 되어 영광이며 특권입니다. 출판물의 꾸준한 성장뿐만 아니라 새로 제정된 교수 개발상인 ASPIRE 어워드(https://amee.org/awards-prizes), 교수 개발 국제 위원회인 AMEE 국제 위원회(https://amee.org/amee-committees/faculty-development), 보건 전문직의 교수 개발 국제 컨퍼런스(https://www.facdev.org/up-coming-conferences)의 격년 개최에서 볼 수 있듯이 이 분야의 역동적인 성장과 진화는 전 세계의 교사와 교육자, 연구자와 학자, 지도자와 행정가들의 헌신과 함께 놀랍습니다.
It is an honor and a privilege to participate in celebrating the 40th anniversary of Medical Teacher and to have been invited to write this perspective. The dynamic growth and evolution of the field, as witnessed not only in the steady growth of publications but also in the newly created ASPIRE award for Faculty Development (https://amee.org/awards-prizes), the creation of an AMEE International Committee on Faculty Development (https://amee.org/amee-committees/faculty-development), and the biannual hosting of the International Conference on Faculty Development in the Health Professions (https://www.facdev.org/up-coming-conferences), has been remarkable, as has the dedication of teachers and educators, researchers and scholars, and leaders and administrators around the world.

마지막으로, 이 글의 제목인 '루비에서 오크로'에 대해 궁금해하는 독자가 있을 것입니다. 전통적으로 40주년은 루비로, 80주년은 오크로 만든 선물로 축하하는 것이 관례입니다. 여러 면에서 교수개발은 지금까지 의학 및 보건 전문직 교육을 빛나고 소중하게 보완해 왔으며, 앞으로 40년 후에는 참나무처럼 강하고 튼튼한 모습을 보여줄 수 있기를 기대합니다. In closing, the reader may wonder about the title of this article, ‘From Rubies to Oak.’ Tradition suggests that a 40th anniversary is to be celebrated with rubies, whereas an 80th anniversary should be celebrated with gifts in oak. In many ways, faculty development has, to date, been a shiny and precious complement to medical and health professions education; it is hoped that, in another 40 years, it will be as strong and sturdy as an oak tree.

 


 

Med Teach. 2020 Apr;42(4):429-435. doi: 10.1080/0142159X.2019.1688769. Epub 2019 Nov 26.

 

Faculty development: From rubies to oak

Affiliations collapse

1Institute of Health Sciences Education, Faculty of Medicine, McGill University, Montreal, Canada.

PMID: 31769320

DOI: 10.1080/0142159X.2019.1688769

Abstract

Introduction: Faculty development has played a significant role in health professions education over the last 40 years. The goal of this perspective is to present a portrait of faculty development in Medical Teacher since its inception and to highlight emerging trends moving forward.Method: All issues of Medical Teacher were reviewed, using the search terms faculty development, staff development, professional development, or in-service training for faculty. The search yielded 286 results of which 145 focused specifically on faculty development initiatives, reviews, or frameworks.Findings: This review demonstrated a significant growth in publications related to faculty development in Medical Teacher over the last 40 years, with a primary focus on teaching improvement and traditional approaches to faculty development, including workshops, short courses and other structured, group activities. The international nature of faculty development was also highlighted.Recommendations: Moving forward, it is suggested that we: broaden the scope of faculty development from teaching to academic development; expand our approaches to faculty development, to include peer coaching, workplace learning and communities of practice; utilize a competency-based framework to guide the development of faculty development curricula; support teachers' professional identities through faculty development; focus on organizational development and change; and rigorously promote research and scholarship in faculty development.

졸업후의학교육을 위한 인증 시스템: 다섯 개 국가의 비교(Adv Health Sci Educ Theory Pract. 2019)
Accreditation systems for Postgraduate Medical Education: a comparison of five countries 
Dana Fishbain1,2 · Yehuda L. Danon1 · Rachel Nissanholz‑Gannot1,3 

소개
Introduction

졸업후 의학 교육 인증(PGME)은 교육 기관(대학, 프로그램, 학과, 클리닉 등)의 레지던트(수련의/전공의) 교육에 대한 지속적인 질 평가 및 모니터링 프로세스입니다.

  • 1910년 플렉스너 보고서는 의학교육의 표준화와 표준이 충족되고 있음을 보장하기 위한 인증 절차 수립의 중요성을 처음으로 강조했으며,
  • 2010년 카네기 보고서교육과정의 길이와 구조 대신 학습 결과와 일반 역량을 표준화할 것을 강조했습니다(Irby 외. 2010).

국가 인증 시스템은 평가 기준을 개발하고, 바람직한 결과물을 정의하며, 졸업생이 사회적 건강 요구를 충족할 수 있는 적절한 역량을 갖추도록 보장해야 합니다(Frenk 외. 2010). PGME 인증이 필요하다는 데는 폭넓은 공감대가 형성되어 있지만, 이를 달성할 수 있는 보편적인 방법은 없습니다(WHO 2013). 
Accreditation of Postgraduate Medical Education (PGME) is an ongoing process of quality evaluation and monitoring of medical resident (doctor in training/postgraduate trainee) training in an institution (a university, program, department, clinic and others). The 1910 Flexner report was the first to highlight the importance of standardizing medical education and establishing accreditation process to assure standards are being met, while the 2010 Carnegie report stressed for standardizing learning outcomes and general competencies instead of length and structure of curriculum (Irby et al. 2010). National accreditation systems are expected to develop criteria for assessment, define desired outputs, and make sure that graduates achieve adequate competencies to meet societal health needs (Frenk et al. 2010). There is a broad consensus that accreditation of PGME is needed, but there is no universal way of accomplishing this (WHO 2013).

2000년대 초, PGME는 특정 시간 내에 레지던트를 수련하는 과정에 초점을 맞춘 시간/과정 기반 모델에서 역량에 대한 조직화된 프레임워크를 사용하여 의학교육 프로그램의 설계, 실행, 평가 및 평가에 대한 결과 기반 접근 방식인 역량 기반 의학교육(CBME)으로 점차 전환되었습니다(Frank 외. 2010). 이는 전공의가 전문의 수준에 도달할 때까지 수련의 각 단계에서 전공의의 개인적 진전을 모니터링하는 것을 기반으로 합니다.
In the early 2000s, a shift gradually emerged in PGME from time/process-based models, which focus on the process of training a resident within a certain time frame, to Competency Based Medical Education (CBME), an outcome-based approach to the design, implementation, assessment and evaluation of medical education programs, using an organizing framework of competencies (Frank et al. 2010). It is based on monitoring residents’ personal progress at each stage of training, until they reach the level of specialist.

전통적인 과정 기반 인증 시스템은 의사를 수련하는 데 필요한 자원과 구조에 초점을 맞추고, 공식적인 교육 과정뿐만 아니라 구조적 매개변수(수술 건수, 선임 의사 수, 시설 목록 등)를 사용했습니다(Nasca 외. 2012). 지난 몇 년 동안 일부 국가에서는 교육의 구조와 과정뿐만 아니라 프로그램과 학습자의 결과도 조사하기 위해 인증 시스템을 개정하기 시작했습니다(Manthous 2014). 
Traditional process-based accreditation systems focused on the resources and structure required for training physicians, and used structural parameters (the number of procedures, the number of senior physicians, a list of facilities and others), as well as on the process of formal teaching (Nasca et al. 2012). During the last few years, some countries began revising their accreditation systems in an attempt to examine not only the structure and process of training, but the outcomes of programs and learners, as well (Manthous 2014).

의학교육의 인증 시스템은 국가마다, 때로는 국가 내에서도 다양합니다. 전 세계적으로 인증 과정에는 큰 차이가 존재하며, "인증"이라는 용어가 반드시 "적절한 인증"으로 기대할 수 없는 다른 과정을 지칭하기도 합니다(Karle 2006). 
Accreditation systems in medical education vary from country to country and sometimes within countries. Great variation exists in accreditation processes world-wide, sometimes referring the term “accreditation” to different process which would not necessarily be expectable as “proper accreditation” (Karle 2006).

인증 시스템은 환경 조건, 보건 시스템 요구 및 기타 요인에 따라 발전해 왔지만, 세계화로 인해 각국은 다른 국가에 존재하는 모델을 알게 되고 새로운 아이디어를 채택하게 됩니다. 미국과 캐나다의 의학교육에 관한 방대한 문헌이 있지만, PGME 인증에 관한 문헌은 거의 없으며, 다른 국가의 인증에 관한 문헌은 더욱 적습니다. 우리는 지난 20년간의 변화를 고려하여 5가지 인증 시스템을 비교하고자 합니다. 우리의 목표는 의사 결정권자가 새로운 아이디어를 고려하는 데 도움이 될 수 있는 공통 원칙과 차이점을 모두 찾는 것입니다. 
Accreditation systems have evolved based on environmental conditions, health system demands and other factors, but due to globalization, countries become acquainted with models existing in other countries and adopt new ideas. A vast body of literature describes medical education in the United States and Canada, but very little is written about accreditation of PGME, and even less is written about it in other countries. We aim to compare five accreditation systems, taking into consideration changes to these systems during the last 20 years. Our goal is to find both common principles and differences, which may help decision makers consider new ideas.

조사 방법
Methods

여러 국가의 5가지 인증 시스템을 중점적으로 검토했습니다: 미국, 캐나다, 영국, 독일, 이스라엘. 오랜 기간 동안 PGME와 그에 수반되는 인증 시스템을 운영해 온 서구 국가를 선정했습니다. 이 기준에 부합하는 모든 국가 중에서 다양한 그룹을 찾기 위해 북미와 유럽 국가, 의사와 레지던트 수가 다른 국가, 의학교육 논의와 문헌을 선도하는 국가(미국, 영국, 캐나다 등), 시스템이 잘 알려지지 않은 기타 국가를 포함시켰습니다. 영어로 된 정보에 대한 접근성(공개되어 있거나 개인적 인맥을 바탕으로 요청 시 제공)도 또 다른 요소였습니다.
We focused our review on five systems of accreditation from different countries: The United States, Canada, The United Kingdom, Germany and Israel. We selected Western countries that have had PGME and accompanying accreditation systems for many years. Of all countries fitting this criteria, we looked for a diverse group, and thus included North American as well as European countries, countries differing in the number of physicians and residents, countries leading in medical education discussion and literature (as USA, UK and Canada), and other countries where the systems are less publicized. Accessible information in English, either published or available on request based on personal connections, was another factor.

세 가지 정보 소스를 기반으로 비교했습니다. 

  • 첫째, Pub-Med와 Web of Science 검색을 통해 선정된 5개국 중 하나 이상의 국가에 대한 일반적 또는 특정 국가에 대한 PGME 인증 관련 논문을 대상으로 문헌 검토를 실시했습니다.
  • 둘째, 5개국의 각 관련 인증 기관 및 기타 보건 당국이 2018년 12월까지 공개적으로 발표한 PGME 인증에 관한 모든 정보 및 문서(입장문, 규정, 프로토콜, 표준, 강의 계획서 및 각 기관의 웹사이트에 게시된 정보 포함)에 대해 온라인 검색을 실시했습니다.
  • 마지막으로 캐나다와 독일의 인증 기관에 추가 세부 정보를 요청하는 이메일을 보냈습니다.

We based our comparison on three information sources.

  • First, a literature review was conducted, using both Pub-Med and Web of Science searches, for articles concerning accreditation of PGME generally or specifically concerning one or more of the five selected countries.
  • Second, an online search was conducted for all information and documents concerning accreditation of PGME publicly published until December 2018 by each relevant accreditation authority and other health authorities in the five countries (including position papers, regulations, protocols, standards, syllabi and information published on each authority’s web site).
  • Finally, a request for further details was e-mailed to accreditation authorities in Canada and Germany.

정보 분석을 위해 King(2012)이 설명한 대로 유연성과 직관적인 사용법을 위해 템플릿 분석을 사용했습니다. 

  • 처음 읽은 인상과 주제에 대한 저자의 인식을 바탕으로 선험적인 주제 목록을 설정했습니다. 
  • 그런 다음 두 국가(미국, 캐나다)에 관한 문서를 검토하고 선험적 주제 목록과 관련된 문장과 새로 발견된 주제를 코딩하여 초기 템플릿을 구축했습니다. 
  • 그런 다음 코드는 의미 있는 그룹으로 클러스터링되었고, 각 그룹은 같은 클러스터에 속한 테마 간의 계층적 연결을 가졌습니다. 선험적 목록에 나타난 일부 테마는 예상보다 참조가 적은 것으로 판명되어 초기 템플릿에 포함되지 않았습니다. 
  • 테마 선정은 조사 대상 국가 중 3개국 이상에서 반복되는 주제를 찾는 방식으로 진행되었습니다. 
  • 모든 문서를 검토하고 관련 주제에 대한 모든 참조를 표시한 후 최종 템플릿을 작성하여 5개 국가를 모두 비교할 수 있도록 했습니다. 
  • 분석에서 나타난 주요 주제를 표로 정리했습니다.

For our analysis of the information we used Template Analysis, as described by King (2012), which was chosen for its flexibility and its intuitive use.

  • An a priori list of themes was set based on first reading impressions and the authors’ perceptions of the subject.
  • An initial template was then constructed by reviewing documents concerning two countries (the United States and Canada), coding statements that related to the a priori list of themes, as well as new themes located.
  • The codes were then clustered into meaningful groups, each with hierarchical connections between themes in the same cluster. Some themes that appeared on the a priori list were not included in the initial template, as they proved to have fewer references than anticipated.
  • Our choice of themes was conducted by looking for reoccurring themes in three or more of the countries examined.
  • After reviewing all documents and marking all references to the relevant themes, we assembled our final template, which allowed a comparison among all five countries.
  • Major themes emerging from the analysis were tabulated.

결과
Results

우리가 선택한 5개국에서는 PGME 시스템과 보건 시스템의 다양한 특성을 발견할 수 있었습니다(표 1, 2). 
Among the five countries we chose, we found diversified characteristics of PGME systems and health systems (Tables 1, 2).

인증은 어떻게 이루어지나요?
How is accreditation performed?

표준에 의한 인증
Accreditation by standards

표준에 의한 인증은 표준의 형식과 사양은 다르지만 대부분의 인증 시스템이 공유하는 기본 원칙입니다. 미국, 캐나다, 영국은 교육기관 또는 교육기관에 대한 일반 표준을 사용하는 반면, 이스라엘에서는 이러한 일반 표준을 대부분 폐지하고 각 전문 분야 및 교육기관 유형에 대한 특정 표준에 중점을 두고 있습니다. 미국과 캐나다에서도 전문 분야별 표준이 사용되고 있으며, 영국과 독일은 트레이너를 위한 특정 표준을 채택하고 있습니다(ACGME 2016, 2000-2018, RCPSC 외. 2007-2013, 2007-2011, GMC 2015, 2016a, Ärztekammer 2014, GMA 2003-2015, IMA 2014). 독일에서는 각 주 의사회에서 표준을 규정하기 때문에 독일 의회에서 채택한 (모델) 전문의 수련 규정을 기반으로 하지만 각 주마다 다를 수 있습니다(Nagel 2012). 다양성은 매우 광범위하여 가정의학 PGME에서와 같이 일부 독일 주에서는 전혀 표준을 적용하지 않는 경우도 있습니다(Egidi 외. 2014).  
Accreditation by standards is a basic principle shared by most accreditation systems, though the standards differ in format and specification. The United states, Canada and Britain employ general standards for sites or institutions, while in Israel most of those general standards were canceled, with emphasis put on specific standards for each specialty and type of training site. Specialty specific standards are used in the United states and Canada as well, while Britain and Germany employ specific standards for trainers (ACGME 2016, 2000–2018; RCPSC et al. 2007–2013, 2007–2011; GMC 2015, 2016a; Ärztekammer 2014; GMA 2003–2015; IMA 2014). In Germany, standards are regulated by each state physicians’ chamber and therefore may vary from one to the other though they are all based on the (Model) Specialty Training Regulations, which are adopted by the German Medical Assembly (Nagel 2012). Variation may be so extensive that in some cases, as in Family Medicine PGME, some of the German states employ no standards at all (Egidi et al. 2014).

각기 다른 표준의 내용에는 공통점이 많지만 분명한 차이점도 있습니다. 예를 들어, 미국, 캐나다 및 영국의 표준은 더 정교하고 CBME로의 전환에 따라 결과 기반 표준의 추가 측면이 있으며, 이는 "과정 기반/결과 기반 인증 시스템" 섹션에서 자세히 설명할 것입니다. 
Though the content of the different standards has much in common, there are apparent differences as well. Those of the United states, Canada and Britain, for example, are more elaborate and have an additional facet of outcomes-based standards, corresponding with the move to CBME, which will be further explained in the section “Process-based/outcome-based accreditation system”.

인증 도구
Accreditation tools

5개국 모두 현장 방문, 연간 데이터 수집, 자체 평가라는 세 가지 주요 인증 도구 중 2~3가지를 적용하여 기준이 충족되고 있는지 검증하는 것으로 나타났습니다(Marsh 외. 2014, Kennedy 외. 2011, GMC 2016a, IMA 2014, 2016년 11월 GMA의 지비킬레이이 E로부터 받은 이메일 서신, 참조하지 않음)(표 3). 
We found that all five countries applied between 2 and 3 of the same three main accreditation tools to verify that standards are being met: site-visits, annual data collection and self-evaluations (Marsh et al. 2014; Kennedy et al. 2011; GMC 2016a; IMA 2014; November 2016 an e-mail correspodence from Jibikilayi E of the GMA, unrefferenced) (Table 3).

5개국 모두에서 실시된 외부 검토인 현장 방문은 주로 조사팀이 시설을 방문하여 직원을 인터뷰하고 경영진을 만나 조사 결과와 권고 사항을 담은 보고서를 작성하는 방식으로 이루어집니다. 대부분의 국가에서는 사전 정의된 주기에 따라 방문을 실시했지만, 불만이나 우려 사항과 같은 예기치 않은 상황에 의해 방문이 촉발되기도 했습니다(표 4). 

  • 영국 일반의학회(GMC)는 잉글랜드에서는 지역 검토를, 북아일랜드, 스코틀랜드, 웨일즈에서는 전국 검토를 예정했는데, 독특하게도 학부 및 대학원 의학교육을 모두 같은 방문에 포함하도록 설계했습니다. 
  • 독일의 현장 방문은 주 의사회에서 필요에 따라 일정을 잡았습니다. 각 주 의사회는 전문과목 수련 시설과 전문과목 수련을 제공하도록 승인된 의사를 품질 보증의 틀 안에서 사례별로 또는 특별한 이유 없이 모니터링할지 여부(모니터링한다면 어느 정도까지)를 결정합니다(2017년 10월, GMA의 O'Leary S가 보낸 이메일 서신, 참조하지 않음). 
  • 미국에서 ACGME는 크게 두 가지 종류의 현장 방문을 실시합니다: 
    • 10년 일정으로 운영되는 프로그램 현장 방문과 
    • 후원 기관을 대상으로 하며 임상 현장에서 레지던트 및 동료 의사가 안전하고 질 높은 환자 치료를 제공하기 위한 학습에 참여하는 방식을 개선하기 위해 고안된 임상 학습 환경 검토(CLER)가 그것입니다. 이 원고에서는 주로 프로그램 현장 방문에 대해 자세히 설명합니다.

A site-visit, an external review performed in all five countries, mainly requires a team of surveyors to visit the facilities, interview the staff, meet with the management and compile a report of their findings and recommendations. Most countries used visits on a predefined cycle, though triggered visits by unexpected circumstances as well, such as complaints or concerns (Table 4).

  • The British General Medical Council (GMC), scheduled regional reviews in England and national reviews in Northern Ireland, Scotland and Wales, uniquely designed to include both undergraduate and Postgraduate Medical Education at the same visit.
  • Site visits in Germany were scheduled on a needs basis by the state chamber of physicians. It is up to the respective State Chambers of Physicians to decide whether (and, if so, to what extent) specialty training facilities and physicians authorized to provide specialty training should be monitored within the framework of quality assurance—either on a case-by-case basis or without a specific reason (October 2017, an e-mail correspondence from O’Leary S of the GMA, unreferenced.).
  • In the United States, the ACGME conducts two main kinds of site-visits:
    • A program site-visit, run on a 10-year schedule, and
    • a Clinical Learning Environment Review (CLER), which is aimed for sponsoring institutions and designed to improve the way clinical sites engage resident and fellow physicians in learning to provide safe, high quality patient care. In this manuscript we mainly elaborate on the program site-visits.

방문 조사원의 수, 조사원의 전문 분야(시니어 의사, 레지던트, 공공 대표, 교육자), 방문 기간에 따라 국가마다 방문 팀이 다릅니다(표 4 참조). 

  • 캐나다와 이스라엘의 경우, 조사원은 모두 자원봉사 의사로 구성되며, 적어도 한 명은 같은 전문 분야, 다른 한 명은 다른 전문 분야의 의사입니다. 방문은 특정 치료법이 아닌 교육의 과정과 틀에 초점을 맞추기 때문에 다른 전문과목의 조사원이 객관성을 유지하고 전문과목 간 모범 사례를 전파하는 역할을 합니다(Shapira Y. 교수 인터뷰, 미인용, 2018). 
  • 미국에서는 의학전문대학원교육인증위원회(ACGME)에서 고용한 한 명 이상의 조사위원(의사 또는 관련 분야의  박사)이 각 방문에 참여합니다. 
  • 영국의 경우, 방문 팀에는 공공 대표, 학부생, 레지던트(수련의) 및 선임 의사가 포함됩니다.
  •  독일에서는 방문팀에 관한 정보를 얻지 못했습니다. 그럼에도 불구하고 방문팀의 역할은 모든 출처의 데이터 사용, 경영진과의 회의, 프로그램 책임자, 레지던트, 교수진 및 기타 행정 담당자 인터뷰, 문서 검토, 물리적 시설 견학, 상세한 서면 보고서 작성, 조치를 위한 권고 또는 제안서 작성 등 대부분 일부 또는 전부가 포함된 유사한 것으로 밝혀졌습니다.

Visiting teams vary among countries by the number of surveyors, their expertise (senior physicians, residents, public representatives, educators) and the length of the visit (see Table 4).

  • In Canada and Israel, surveyors are all volunteer physicians, at least one of them from the same specialty and another from a different specialty. Since the visit focuses on the processes and framework of education and not on specific treatments, a surveyor from a different specialty serves for objectivity and spreading best practices between specialties (Interview with Prof. Shapira Y., unreferenced, 2018).
  • In the United States, one or more surveyors employed by the Accreditation Council for Graduate Medical Education (ACGME), either physicians or PhDs in a relevant field, participate in each visit.
  • In The United Kingdom, the visiting team includes public representatives, an undergraduate students and a resident (trainee) as well as senior physicians.
  • We acquired no information regarding visiting teams in Germany. Visiting team’s roles, nevertheless, were found to be similar and include mostly some or all of the following: using data from all sources, meeting with management, interviewing program director, residents, faculty and other administrative representatives, reviewing documentation, touring physical facilities, writing a detailed written report and compiling recommendations or proposals for action.

영국에서는 팀이 한 지역과 그 지역에 위치한 일부 LEP(Local Education Provider)를 방문하는 반면, 캐나다에서는 각 대학과 모든 프로그램을 방문합니다. 하지만 하나의 프로그램이 여러 LEP에서 제공될 수 있기 때문에 사실상 영국과 캐나다의 방문 샘플링은 거의 차이가 없을 수 있습니다. 미국에서는 모든 펠로우십이 연결된 프로그램을 방문하고, 이스라엘에서는 각 사이트를 방문합니다. 시스템 간의 주요 차이점 중 하나는 연간 방문 횟수입니다. 이는 여러 가지 요인에 의해 영향을 받는데,

  • 초기 인증을 요청하는 사이트를 방문하는지 여부(캐나다와 영국은 해당 시점에 서류에만 의존),
  • 주기 기간(4년에서 10년 사이),
  • 일반적인 조사 정책
    • 각 사이트/프로그램을 모두 방문할지(미국 및 이스라엘과 같이) 또는
    • 위험이 의심되는 경우(영국과 같이)에 방문할지
  • 국가 내 교육 프로그램/사이트의 수 

이는 시스템 비용과 효율성에 영향을 미칩니다.
While in The United Kingdom, teams visit a region and some of the LEPs located therein, in Canada visits are made to each university and all of its programs. Nevertheless, since one program might be provided by several LEPs, there may be little difference between the UK and Canada visit sampling de facto. In the United States, visits are made to programs with all the attached fellowships, and in Israel to each site. One major difference among the systems is the number of visits conducted annually. This is influenced by several factors:

  • whether a visit is made to a site requesting initial accreditation (Canada and the United Kingdom rely on documentation only at that point);
  • the length of the cycle (varying between 4 and 10 years);
  • the inspection policy in general, which determines
    • whether a visit is conducted to each site/program (as in the United States and Israel); or
    • when a risk is suspected (as in the United Kingdom) and
  • the number of training programs/sites in the country.

This has implications for system costs and efficiency.

5개국은 현장 방문을 통해 수집한 정보를 넘어 데이터를 보강하기 위해 다양한 데이터 소스를 사용합니다(표 5). 가장 일반적인 방법은 설문조사, 특히 전공의 설문조사입니다. 

  • 미국과 영국은 일상적으로 설문조사를 통해 정보를 수집하고 있으며, 캐나다, 독일, 이스라엘은 현재 전공의 설문조사를 진행하고 있습니다. 
  • 독일의 경우, 설문조사가 인증 목적으로 특별히 고안된 것은 아니지만 설문지 자체에 수련 시설 및 수련 활동에 관한 질문이 주로 포함되어 있습니다(GMA 2015).

The five countries employ varied data sources (Table 5) to enrich data beyond the information gathered by site-visits. The most common method is surveys, in particular, resident surveys.

  • The United States and the United Kingdom routinely gather information using a survey,
  • while Canada, Germany and Israel are currently constructing a resident survey.
  • In Germany, surveys were not declared to be specifically designed for accreditation purposes, but the questioner itself contains mainly questions regarding the training facility and training activities (GMA 2015).


미국에서는 레지던트 평가위원회가 매년 연례 업데이트(프로그램 변경 사항, 프로그램 특성, 참여 기관, 교육 환경 등), 레지던트/펠로우 설문조사, 임상 경험, 인증 시험 합격률, 교수진 설문조사, 학술 활동, 반기별 레지던트 평가(나중에 자세히 설명할 마일스톤 포함), 데이터 누락 등 다양한 데이터 소스를 사용하여 프로그램을 검토합니다(Potts 2013).
In the United States, Residency Review Committees review programs annually by using multiple sources of data: annual updates (program changes, program characteristics, participating sites, educational environment and others), resident/fellow survey, clinical experience, certification examinations pass rate, faculty survey, scholarly activity, semi-annual resident evaluation (including milestones which will be further explained later on) and omission of data (Potts 2013).

미국, 캐나다, 영국에서 사용되는 자체 평가는 신청 기관이 현장 방문에 앞서 내부 검토를 수행하고 자체 개선을 촉진하는 보고서를 작성하도록 요구합니다.
Self-evaluation
 used in the United States, Canada, and the United Kingdom, requires the applying institution to conduct an internal review preceding the site visit and compiling a report promoting self-improvement.

인증의 결과
Consequences of accreditation

인증 신청은 다양한 결과를 초래할 수 있습니다(ACGME 2015-2016, Potts 2013, GMA 2003-2015, RCPSC 외. 2012, GMC 2016a, IMA 2014): "최초 인증", "계속 인증", "조건부 인증"("수습" 또는 "경고 포함") 및 "인증 철회". 일부 국가에서는 전체 강의 계획서 요건을 충족할 능력이 부족한 프로그램이 전공의를 다른 곳에서 일정 기간의 교육을 이수하도록 보내 인증을 받을 수 있습니다. 이를 "부분 인증"이라고도 합니다. 대부분의 국가에서는 특정 규칙("통합 사이트", "기관 간 제휴 계약", "컨소시엄", "공동/결합 인증" 또는 기타)에 따라 두 개의 프로그램/기관/사이트가 레지던트 교육을 위한 노력과 자원을 함께 할 수 있도록 허용합니다. 
An application for accreditation may result in various outcomes (ACGME 2015–2016; Potts 2013; GMA 2003–2015; RCPSC et al. 2012; GMC 2016a; IMA 2014): “Initial Accreditation”, “Continued Accreditation”, “Conditioned Accreditation” (also called “Probationary” or “With Warning”) and “Withdrawal of Accreditation. In some countries, a program that lacks the ability to support the full syllabus requirements, may receive accreditation by sending its residents to complete certain periods of training elsewhere. This is sometimes referred to as “Partial Accreditation”. Most countries allow for two programs/institutions/sites to join efforts and resources to train residents together under certain rules (“integrated sites”, “Inter-institution affiliation agreements”, “Consortium”, “Conjoint/combined accreditation” or other).

인증 철회는 수치 데이터를 확보할 수 있는 모든 국가에서 신중하게 사용되었습니다. 2016년 이스라엘에서는 5건(전체 인증 사이트의 0.3%), 미국에서는 42건(전체 인증 프로그램의 0.4%), 영국에서는 0건의 인증 철회가 있었습니다. 캐나다에서는 '탈퇴 의사 통지' 항목이 프로그램 개선을 위한 강력한 도구로 사용되기 때문에 탈퇴가 거의 발생하지 않습니다(2018년, S Taber와의 전화 통화, 출처 불명). 이러한 탈퇴 중 일부는 자발적으로 이루어지는 경우가 많기 때문에 사실상 거의 사용되지 않습니다. 결과의 선택권을 실질적으로 확대하고 프로그램/사이트에 개선 동기를 부여하기 위해 일부 국가에서는 더 광범위한 규모의 결과를 사용합니다. 
Withdrawal of accreditation was carefully used in all countries for which we could obtain numerical data. In 2016, there were 5 withdrawals in Israel (0.3% of accredited sites), 42 in the United States (0.4% of accredited programs) and 0 in the United Kingdom. In Canada, withdrawal is rare as the “notice of an intent to withdraw” category serves as a powerful tool to enable programs to make improvements (2018, telephone conversation with S Taber; unreferenced). Since some of these withdrawals are voluntary—this consequence is rarely used de-facto. In order to practically expand options for consequences and give programs/sites motivation for improvement, a broader scale of consequences is used in some countries.

과정 기반/결과 기반 인증 시스템
Process-based/outcome-based accreditation system

결과 기반 PGME 모델은 1990년대 후반에 처음 도입되었지만, 호환 가능한 결과 기반 인증 시스템이 개발되는 데는 거의 15년이 걸렸습니다. 
Although outcome-based PGME models were first introduced during the late 1990s, it took almost 15 years for compatible outcome-based accreditation systems to be developed.

표 6에 명시된 바와 같이, 우리는 지난 20년간 인증 시스템의 변화 과정을 3단계로 나누어 설명할 수 있었습니다.

  • 1990년대 후반까지는 시간/과정 기반 레지던트 수련 프레임워크와 일치하는 전통적인 시간/과정 기반 인증 시스템이 우세했습니다. 이러한 시스템은 프로그램 구조를 강조하고, 공식 교육의 양과 질을 높이며, 서비스와 교육 간의 균형을 도모하고, 레지던트 평가와 피드백을 촉진하여 긍정적인 결과를 얻었습니다(Nasca 2012).  

Our findings, as specified in Table 6, led us to portray a three-phased process of change in accreditation systems over the last two decades. Traditional time/process-based accreditation systems corresponding with time/process-based residency training frameworks prevailed until the late 1990s. Systems such as these emphasized program structure, increased the amount and quality of formal teaching, fostered a balance between service and education, promoted resident evaluation and feedback and gained positive results (Nasca 2012).

새로운 성과 기반 PGME 프레임워크의 시행으로 일부 국가에서는 인증 시스템을 변경해야 한다는 의견이 제기되었습니다. 이를 위해 각 프로그램의 노력과 자원에 대한 평가를 포함하도록 표준을 개정하여 전공의가 모든 필수 영역에서 역량을 확보할 수 있도록 했습니다. 경우에 따라서는 데이터 수집을 업그레이드하고 정보를 확인하기 위해 현장 방문을 조정하기도 했습니다. 
Implementation of new outcome-based PGME frameworks raised, in some countries, the idea of changing accreditation systems. For that purpose, standards were revised to include evaluation of each program’s efforts and resources to allow its residents to gain competencies in all the required domains. In some cases, data collection was upgraded as well and site-visits adapted to verify the information.

예를 들어,

  • GMC 표준모든 졸업후의학교육 프로그램이 레지던트에게 커리큘럼에서 요구하는 임상 또는 의료 역량(또는 둘 다)을 달성하고 유지할 수 있는 충분한 실무 경험을 제공하도록 요구합니다(GMC 2015). 커리큘럼 설계 및 개발 표준인 "Excellence by Design"과 교육 프로그램의 품질 보증 및 승인 표준인 "Promoting Excellence"는 모두 "우수 의료 행위" 및 "일반 전문 역량"의 결과 기반 프레임워크와 일치합니다(GMC 2015, 2017b).
  • 캐나다 표준은 각 프로그램이 임상, 학술 및 학술적 내용, 교육 및 평가 활동, 교수진 개발에서 결과 기반 용어로 목표를 명확하게 정의하는 데 있어 CanMEDS 역량 프레임워크를 기초로 설정합니다(RCPSC 2007a, b 편집 개정판-2013년 6월, 2007년 재인쇄 2011년 1월).
  • ACGME는 인증 심사 시 프로그램에 레지던트의 역량을 가르치고 평가하는 방법을 설명하고, 레지던트의 학습 기회를 개선하기 위해 변경된 사항을 보고하도록 요구합니다(Swing 2007). 이 시행 시점의 계획대로, 인증에 결과 데이터를 사용하는 것은 아직 이루어지지 않았기 때문에 인증은 프로그램의 교육 결과가 아닌 역량을 가르치고 평가하는 과정에 초점을 맞추었습니다(Swing 2007). 
  • GMC standards, for example, require all postgraduate programs to give residents sufficient practical experience to achieve and maintain the clinical or medical competences (or both) required by their curriculum (GMC 2015). Both standards for curricula design and development “Excellence by Design” and standards for quality assurance and approval of training programs “Promoting Excellence” are concurrent with the outcome-based frameworks of “Good Medical Practice” and “General Professional Capabilities” (GMC 2015, 2017b).
  • Canadian standards set the CanMEDS roles framework of competencies as the basis for each program in clearly defining objectives in outcome-based terms, in clinical, academic and scholarly content, in teaching and assessment activities and in faculty development (RCPSC 2007a, b Editorial Revision—June 2013, 2007 reprinted January 2011).
  • The ACGME requires programs at their accreditation review, to describe how they are teaching and assessing their residents’ competencies and report changes made to improve residents’ learning opportunities (Swing 2007). As planned at this point of implementation, the use of outcome data in accreditation had not occurred yet, and therefore accreditation focused on the processes of teaching and assessing the competencies and not on of programs’ educational outcomes (Swing 2007).

또 다른 변화의 단계는 역량 기반 의학교육과 인증 과정 간의 더 나은 동기화에 대한 필요성이 인식되면서 일어났습니다. 

  • 미국에서 ACGME는 "성과 프로젝트"의 약속을 실현하고 성과에 대한 공적 책무성을 제공하기 위해 성과에 기반한 프로그램을 인증하는 것을 목표로 선언했습니다(Potts 2013). 
    • 이러한 목표와 다른 목표에 부응하기 위해 ACGME는 2013년에 인증에서 교육 결과 데이터의 사용 증가를 강조하는 차기 인증 시스템(NAS)을 만들었습니다. 
    • NAS의 일환으로, ACGME는 전공의가 교육 시작부터 무감독 전문과목 실습에 이르기까지 점진적으로 입증할 수 있는 역량 기반 개발 성과인 마일스톤도 도입했습니다(ACGME 2015a). 
      • "성과"라는 약속의 결실을 맺을 수 있도록 하는 마일스톤은 프로그램과 기관에서 자체 평가 및 개선을 위해 사용됩니다
      • NAS를 시행하는 모든 프로그램의 레지던트가 달성한 마일스톤 데이터는 ACGME에서 1년에 두 번 수집합니다. 이 데이터는 레지던트 검토 위원회에서 프로그램에 관한 연례 데이터 검토의 일부로, 그리고 집계된 형태로 전문과목별 국가 규범 데이터로 사용되었습니다. 
      • 마일스톤은 전국적으로 프로그램의 벤치마크 역할을 하도록 설계되었습니다(Potts 2013).

Another phase of change took place when a need for better synchronization between the competency-based medical education and accreditation process was realized.

  • In the United States, the ACGME pronounced its goal to accredit programs based on outcomes, to realize the promise of the “Outcomes Project” and to provide public accountability for outcomes (Potts 2013).
    • To answer these goals and others, ACGME created in 2013 the Next Accreditation System (NAS) which emphasized an increased use of educational outcome data in accreditation.
    • As part of NAS, the ACGME also introduced Milestones, competency-based developmental outcomes that can be demonstrated progressively by residents from the beginning of their education to the unsupervised practice of their specialties (ACGME 2015a).
      • The milestones, which were said to permit fruition of the promise of “Outcomes”, are used by programs and institutions for self-evaluation and improvement.
      • Data of milestones achieved by residents of all programs implementing NAS has been collected twice a year by ACGME. It has been used by Residency Review Committees as part of annual data review regarding a program and in its aggregated form as a specialty specific national normative data.
      • Milestones were designed to serve as a benchmark for programs nationally (Potts 2013).

2017년, 성과 기반 교육에는 성과 기반 인증이 필요하다는 것을 인식한 캐나다의 이니셔티브 CanRAC은 CBME 모델로 전환하는 레지던트 프로그램의 증가를 반영하기 위해 개발된 새로운 인증 시스템인 CanERA를 발표했습니다(CanRAC 2018a). 

  • 새로운 시스템은 새로운 평가 프레임워크, 새로운 표준, 기관 검토 프로세스, 새로운 결정 범주 및 임계치, 8년 주기 및 데이터 통합, 향상된 인증 심사, 디지털 인증 관리 시스템, 학습 환경 강조, 지속적인 개선 및 평가와 연구 강조 등 새로운 기능을 도입했습니다(CanRAC 2018b).

In 2017, after recognizing that outcomes-based education requires outcomes-based accreditation, the Canadian initiative CanRAC announced a new accreditation system called CanERA, which was developed to reflect the increasing number of residency programs shifting to a CBME model (CanRAC 2018a).

  • The new systems introduced new features, among them a new evaluation framework, new standards, institution review process, new decision categories and thresholds, 8 years cycle and data integration, enhanced accreditation review, digital accreditation management system, emphasis on learning environment, emphasis on continuous improvement and evaluation and research (CanRAC 2018b)

인증 프로세스를 성과 기반 프로세스로 전환하는 것은 점진적으로 이루어졌으며, 한 번에 몇 개의 대학(캐나다) 또는 한 번에 몇 개의 전문 분야(영국, 미국)를 대상으로 이루어졌습니다. 예를 들어, 2019년 7월 1일로 예정된 전체 시행에 앞서 여러 대학에서 3단계의 프로토타입 테스트 단계를 포함하는 다단계 접근 방식을 통해 CanERA를 시행하고 있습니다(CanRAC 2018c). 
Adaptation of the accreditation process to outcome-based process was gradual, concerning few universities at a time (Canada) or few specialties at a time (UK, USA). The implementation of CanERA, for example, includes a multi-phased approach containing 3 prototype testing phases in several universities prior to full implementation, which is planned for July 1, 2019 (CanRAC 2018c).

그림 1은 변화의 과정을 요약하고, 그림 2는 검토 대상 5개 국가별로 현재 변화의 단계를 설명합니다.
Figure 1 summarizes the process of change and Fig. 2 describes the current stage of change for each of the five reviewed countries.

 

토론
Discussion

현장 방문, 정보 수집, 자체 평가를 통해 표준을 정의하고 그 이행 여부를 검증하는 여러 국가의 PGME 인증 방식에서 유사한 원칙을 많이 발견했습니다. 적용 세부사항을 보면 지역 보건 시스템의 구조와 복잡성, 문화와 맥락에서 비롯된 차이점이 드러납니다(Saltman 2009, Segouin과 Hodges 2005). 
We found many similar principles in the way different countries accredit PGME-defining standards and verifying their fulfillment by site visits, information gathering and self-evaluations. The application details reveal differences originating from the structure and complexity of the local health system, as well as from culture and context (Saltman 2009; Segouin and Hodges 2005).

현장 방문은 5개국 모두에서 어느 정도 적용되는 대표적인 도구 중 하나이지만 빈도, 계기, 방문 팀, 방문 단위 및 기타 요인에서 차이가 발견되었습니다

  • 캐나다와 이스라엘의 조사원은 대부분 무보수로 활동하는 의사인 반면, 영국에서는 전문의와 수련의, 공공 대표로 구성된 팀이 모두 동일한 일당을 지급받습니다. 
  • 동료 조사원은 인증 당국뿐만 아니라 조사원의 의견(도스 산토스 외 2017)에 따르면 혁신과 모범 사례의 수정 및 확산(케네디 외 2011)과 내부의 눈이 보지 못하는 것을 볼 수 있는 능력에서 유리한 것으로 나타났습니다. 그럼에도 불구하고 의사들은 설문조사 및 조사원의 기술 개발에 투자할 시간이 충분하지 않을 수 있습니다. 
  • 또한, 자원자가 감소하는 시기에 동료 검토자를 유지하는 데 어려움이 있습니다(Kennedy 외, 2011). 미국에서 사용되는 전문 조사원과 동료 조사원의 조합은 비용이 증가하지만 프로세스에 전문성을 더하는 방법으로 제안되었습니다(Dos Santos 외. 2017). 
  • 다른 국가에서는 아직 영국의 GMC처럼 조사팀에 공공 대표를 임명하지 않았지만, PGME 결과에 대한 이해관계자로서 의료 소비자를 참여시키는 방안에 대해 더 논의할 필요가 있습니다.

Site visits are one prominent tool applied to some extent by all five countries, but variations were found in their frequency, triggers, visiting teams, visited units and other factors.

  • In Canada and Israel, surveyors are physicians, mostly unpaid for their work, while in The United Kingdom teams include specialists as well as trainees and public representatives, all paid the same daily fee.
  • Peer-surveyors were seen to be advantageous by accrediting authorities, as well as in the surveyors’ opinion (Dos Santos et al. 2017) for fertilization and diffusion of innovations and best practices (Kennedy et al. 2011) and the ability to see what internal eyes may not notice. Nevertheless, physicians may not have enough time to devote to surveying and developing surveyors’ skills.
  • Moreover, there is a challenge in maintaining peer-reviewers in a time of decline in volunteers (Kennedy et al. 2011). A combination of professional surveyors (as used in the United States) and peer-surveyors was suggested as a way of adding expertise to the process (Dos Santos et al. 2017), although it would increase costs.
  • None of the other countries has yet appointed public representatives to the surveying teams as did the GMC in UK, though the idea deserves further discussion regarding the involvement of the consumers of health care as stakeholders in the results of PGME.

자체 평가는 3개국에서 사용되며 일부 국가에서는 비교적 새로운 방식입니다(Guralnick 외. 2015). 일부 규제기관에서는 자체평가를 품질 보증 강화 접근법의 핵심으로 인식하는 반면, 다른 규제기관에서는 신뢰할 수 없다는 의견을 제시하고 있습니다(Colin Wright Associates Ltd 2012). 자체 평가는 PGME를 제공하는 기관에 대한 더 많은 신뢰를 바탕으로 지역 수준에서 품질 개선에 대한 강조를 증가시킬 수 있습니다(Akdemir 외. 2017). 자체평가 방법이 교육 지도자들이 프로그램을 개선하기 위해 행동에 옮길 수 있는 의미 있는 정보를 제공하는지 알아보기 위해서는 더 많은 연구가 필요합니다.
Self-evaluation is used by three countries and is relatively new to some of them (Guralnick et al. 2015). It is perceived by some regulators as the heart of the enhancement approach to quality assurance, while others suggest that it is unreliable (Colin Wright Associates Ltd 2012). Self-evaluation may increase emphasis on quality improvement at the local level, based on more trust in the institutions providing PGME (Akdemir et al. 2017). More research is needed to learn whether self-evaluation methods provide meaningful information that educational leaders can act on to improve their programs.

모든 인증 당국은 각 기관의 교육 품질에 관한 최신의 정확한 정보를 유지하기를 원합니다. 이러한 정보의 축적은 주로 몇 년에 한 번씩 현장을 방문하여 보고된 정보를 기반으로 이루어졌습니다. 여러 국가에서 설문조사, 연례 보고서 또는 온라인 플랫폼을 통해 수집한 데이터, 전공의의 우려 사항, 보건 기관의 정보 등 다양한 출처를 사용하여 '실시간'으로 지속적인 데이터를 수집하는 방식으로의 전환이 진행되고 있습니다.
All accreditation authorities wish to maintain updated, accurate information regarding the quality of training in each institution. Accumulation of this information was once primarily based on information reported by a site visit once every few years. A shift to ongoing data collection in “real time” is advancing in several countries, using a variety of sources including surveys, annual reports or data collected through on-line platforms, concerns from residents of others and information from other health organizations.

검토 대상 국가 중 일부는 다른 변화 중에서도 기관의 관점을 더 강조하게 되었습니다. ACGME는 새로운 기관 요건, 기관 자체 학습 방문 및 CLER(임상 학습 환경 검토) 방문을 도입했습니다. RCPSC는 새로운 CanERA의 요소로 기관 검토 프로세스를 도입했습니다. GMC의 의학 교육 및 훈련에 대한 " Promoting excellence" 표준은 영국의 의대생과 의사를 교육하고 훈련하는 기관이 표준을 충족할 책임을 져야 한다고 명시하고 있습니다 
Some of the reviewed countries came to put more emphasis on the institutional perspective among other changes. The ACGME introduced New Institutional Requirements, Institutional self-study visits and CLER (Clinical Learning Environment Review) visits. The RCPSC introduced an institution review process as an element of the new CanERA. The GMC’s standards for medical education and training “Promoting excellence” declare an expectation for organizations for educating and training medical students and doctors in the UK to take responsibility for meeting the standards.

우리가 검토한 국가 중 일부는 성과 기반 PGME로 전환하면서 앞서 설명한 대로 인증 시스템의 조정이 필요하다는 것을 깨달았습니다. 미국과 캐나다는 성과에 기반한 인증 시스템을 구현함으로써 한 걸음 더 나아갔습니다. 앞서 언급했듯이 마일스톤은 차세대 인증 시스템의 핵심 구성 요소입니다. 차세대 인증 시스템에서는 의도적으로 단일 프로그램을 레지던트의 마일스톤 기록까지 측정하지는 않지만, 집계된 수준에서의 마일스톤을 사용합니다. 마일스톤의 초기 유효성 증거(Su-Ting 2017)와 함께, 효과적인 교육을 입증해야 하는 프로그램의 요구가 수련의에게 기대되는 점수를 부여하는 경향으로 인해 측정에 영향을 미치고 있다는 우려가 제기되었습니다(Witteles 2016). ACGME는 레지던트 또는 프로그램에 관한 중대한 결정에 마일스톤이 사용될 경우 레지던트의 마일스톤 평가 데이터가 인위적으로 부풀려질 수 있다는 우려를 표명하고(ACGME, 2018b), 적어도 초기 단계에서는 검토위원회가 각 레지던트/펠로우에 대해 평가된 수준을 기준으로 프로그램을 판단하지 않을 것이라고 명시하고 있습니다(ACGME 2018a). 
Some of the countries we reviewed made the transition to an outcome-based PGME and realized it requires an adaptation of the accreditation system, as described earlier. The United States and Canada have taken another step by implementing an accreditation system based on outcomes. As mentioned earlier, milestones are a central component of the Next Accreditation System. Though the Next Accreditation System intentionally does not measure a single program up to its resident’s milestones records, it uses the milestones on an aggregated level. Alongside initial validity evidence of the milestones (Su-Ting 2017), some concerns were raised that programs’ needs to demonstrate effective education are influencing the measurement by the tendency to give trainees the scores they are expected to have (Witteles 2016). The ACGME itself declares its concern that programs may artificially inflate residents’ milestones assessment data if the milestones are used for high stakes decisions regarding residents or programs (ACGME, 2018b) and states that Review Committees will not judge a program based on the level assessed for each resident/fellow (ACGME 2018a), at least at the early phase.

RCPSC는 CanMeds 2015 프레임워크의 일부로 마일스톤을 도입했지만 인증 제안을 위해 학습자의 데이터를 통합하지는 않습니다. RCPSC는 중요한 절차적 요건과 구조적 요건, 그리고 결과 측정 간의 적절한 균형을 찾고 있습니다(2018년, S Taber와의 전화 통화, 미참조).
The RCPSC has introduced milestones as part of the CanMeds 2015 framework, but does not integrate learner’s data for accreditation proposes. The RCPSC is looking for the right balance between the important procedural and structural requirements with any measurement of outcomes (2018, telephone conversation with S Taber; unreferenced).

의학전문대학원 교육 개선의 궁극적인 목표는 환자 치료의 질적 향상이므로, 향후 인증 과정의 목표는 인증 결정을 위한 또 다른 데이터 소스로서 환자 치료 결과를 측정하는 것일 수 있습니다. 10여 년 전, ACGME는 환자 진료의 질과 역량 교육을 연계하는 아웃컴 프로젝트의 또 다른 단계에 대한 비전을 선언했는데, 이는 역량 교육을 효과적으로 실시하는 레지던트 프로그램이 환자에게 더 나은 진료를 제공한다는 것을 입증하기 위한 시도였습니다(Batalden 외. 2002; Swing 2007). 환자 치료 결과와 교육적 개입을 연계하는 것은 더 많은 시간과 노력을 투자해야 하는 어려운 작업입니다. 
Since an ultimate goal of any improvement to Postgraduate Medical Education is quality improvement of patient care, a future aspiration of accreditation processes may be measurement of patient care outcomes as another data source for accreditation decisions. More than a decade ago, the ACGME declared a vision of another phase to its Outcome Project, linking patient care quality and education in the competencies, in an attempt to establish that residency programs that have effective education in the competencies, give better care to their patients (Batalden et al. 2002; Swing 2007). Linking patient outcomes with educational interventions is a challenging task which would probably take more time and effort investment.

PGME 인증 거버넌스의 중앙집권화 수준은 국가와 지방 당국 간의 역할 분담, 인증 기관이 관리하는 기타 PGME 측면(예: 강의 계획서, 보드 시험)의 수에 따라 국가마다 다릅니다.

  • 중앙집권형 척도의 한쪽 끝에는 캐나다와 이스라엘이 있는데, 한 국가 기관이 PGME의 세 가지 측면을 모두 책임지고 있으며(다른 보건 부문 기관과 협력하여),
  • 분산형 척도에서는 독일이 있는데, 17개 주정부가 모든 PGME 업무를 매우 다양하게 수행하고 있습니다.
    • 독일 연방 구조상 주 의사회에 의사의 전문 업무에 관한 광범위한 자율 규제 권한이 부여되어 있기 때문에 독일 제도의 분권적 특성이 제도의 기능에 영향을 미치는 주요 요인으로 작용하는 것으로 나타났습니다.
    • 독일 전역에 걸쳐 전문의 수련 규정의 통일성을 높이기 위해 독일 의회의(독일 의사협회 연례 총회)는 주 의회의 모범이 될 권장(모델) 전문의 수련 규정을 채택했습니다. 그러나 각 주 의회가 항상 권고한 대로 정확하게 이행하는 것은 아닙니다(Nagel 2012).
    • 독일 의학교육학회 의학전문대학원 교육위원회는 2013년에 발표한 입장문(David 외 2013)에서 투명하고 국가적으로 표준화된 질 보증 절차를 수립할 필요성을 강조하면서 독일 내 의학전문대학원 교육의 구조, 과정, 산출물, 결과 및 영향을 평가할 수 있는 역량을 갖춘 단일 국가 질 보증 기관을 설립할 것을 권고했습니다. 이 기관은 의학 대학원 교육 프로그램 실행을 위한 지침을 제공하고 품질 보증 프로그램, 감사 및 동료 검토를 시작해야 합니다. 저자가 아는 한, 이러한 기관은 아직 설립되지 않았습니다.

The level of centralization in PGME accreditation governance varies between countries: the division of roles between national and local authorities and the number of other PGME aspects governed by the accrediting authority (i.e., syllabi, board examinations).

  • On one end of this centralization scale we found Canada and Israel, where one national authority is responsible for all three aspects of PGME (in collaboration with other health sector authorities),
  • while on the decentralized end we found Germany, in which all PGME tasks are performed by the 17 state chambers with much variation.
    • We found the decentralized nature of the German system to be a dominant factor influencing its functioning, as the federal structure of Germany has granted the state chambers of physicians far reaching self-regulation powers concerning the professional practice of physicians.
    • To increase uniformity of specialty training regulations across the entire country, the German Medical Assembly (annual assembly of the German Medical Association) has adopted the recommended (Model) Specialty Training Regulations to serve as a template for the state chambers. However, these are not always implemented by the chambers exactly as advised (Nagel 2012).
    • In a position paper published on 2013 (David et al. 2013), the German committee on graduate medical education of the Society for Medical Education has emphasized the need to establish a transparent and nationally standardized quality assurance procedure and therefore recommended the foundation of a single national quality assurance institution with capacities to evaluate structure, process, outputs, outcome and impact of graduate medical education in Germany. The institution should provide guidelines for implementing graduate medical training programs and initiate quality assurance programs, audits and peer-reviews. To the best of the authors knowledge, an institution as such has not yet been founded.

영국에서는 GMC가 국가 기관이지만 지역 이사회와 학장에 의존하고 실행 권한의 상당 부분을 위임하여, GMC 자체는 주로 품질 보증 및 승인 모니터링에 집중할 수 있습니다.

  • 학부 의학교육과 대학원 의학교육에 대한 GMC의 권한은 표준과 절차를 간소화하고 의학교육의 여러 단계 간에 자원을 효과적으로 할당하는 데 긍정적인 기여를 할 수 있는 또 다른 독특하고 흥미로운 특징입니다.
  • GMC의 또 다른 역할은 모든 전문분야에서 국가 교육과정을 승인하는 것으로, 2017년에는 인증 기준의 기본 원칙에 따라 교육과정을 설계하고 개발하는 기준을 설정하는 " excellence by design"(GMC 2017b)이라는 새로운 표준 프레임워크를 도입했습니다(GMC 2015).
  • 단일 기관이 넓은 관할권을 포괄하기는 쉽지 않지만, 모든 역할을 한 기관에 통합하면 PGME의 모든 측면을 더 쉽게 동기화하고 성과 기반 의학교육으로의 전환과 같은 개혁을 촉진할 수 있다고 믿습니다.

In the United Kingdom, though being a national authority, the GMC relies on the local boards and deaneries, and delegates much of its power of execution, allowing GMC itself to focus mainly on monitoring quality assurance and approvals.

  • GMC’s mandate over undergraduate medical education as well as on Postgraduate Medical Education, is another unique and interesting characteristic which may have a positive contribution to streamlining standards and processes as well as effectively allocating resources between the different stages of medical education.
  • As another role of the GMC is the approval of national curricula in all specialties, it has introduced during 2017 a new framework of standards called “excellence by design” (GMC 2017b) which sets standards for designing and developing of curricula in accordance with the fundamental principles underlining the accreditation standards as well (GMC 2015).
  • Though a single authority may not easily cover a large jurisdiction, we do believe that integration of all roles in the hands of one authority makes synchronization of all aspects of PGME easier and may facilitate a reform such as the move to outcome-based medical education.

인증 절차는 레지던트 교육 비용 외에도 인증 기관과 기관 모두에게 복잡하고 유지 비용이 많이 듭니다(Regenstein 외, 2016). 이러한 부담(예: 시간 및 자원)을 간소화하는 것이 중요하며, 프로그램 리더십의 소진을 예방할 수 있습니다(Dos Santos 외. 2017; Yager와 Katzman 2015). 검토 대상 국가 중 일부는 보다 효율적인 인증 절차를 모색하고 있으며 규제 부담을 줄이고 있습니다. 도스 산토스 외(2017)는 인증 당국이 구조와 프로세스(예: 필요한 문서, 준비 시간)와 인적 자원(예: 조사원 교육, 조사원의 업무와 노력에 대한 인정) 사이에 투자된 자원의 균형에 주의를 기울일 것을 권고합니다. 시스템이 더욱 정교해지고 까다로워질 때마다 증가하는 것으로 보이는 인증 시스템과 관련된 재정적, 관료적 부담이 프로세스의 이점과 균형을 이루고 있는지는 아직 불분명합니다(Yager and Katzman 2015). 
Accreditation procedures are complex and costly to maintain, in addition to the cost of residency training (Regenstein et al. 2016), both for the accrediting authority and institutions. Streamlining burden (e.g., time and resources) is important and may as well prevent a contribution to program leadership burnout (Dos Santos et al. 2017; Yager and Katzman 2015). Some of the reviewed countries are looking for more efficient accreditation procedures and are cutting down regulatory burden. Dos Santos et al. (2017) recommend accreditation authorities pay attention to the balance of invested resources between structure and process (i.e., required documentation, time for preparations), and human resources (i.e., training surveyors, recognition of surveyors work and efforts). It is yet unclear whether the financial and bureaucratic burden related to accreditation systems, which seems to increase whenever systems become more elaborate and demanding (Yager and Katzman 2015), is balanced against the benefit of the process.

결론
Conclusions

5개국 모두 혁신을 통해 시스템에 도전했습니다. 다른 국가들도 변화를 계획하고 있을 가능성이 높습니다. 조사 대상 5개국의 비교를 바탕으로 인증 기관이 고려해야 할 몇 가지 권장 사항을 제시합니다:
All five countries have challenged their systems with innovation. It is probable that other countries are planning changes as well. Based on the comparison of the five countries examined, we point out some recommendations for accrediting authorities to consider:

  1. 1. 결과의 규모 '인증 철회'의 사용은 후원 기관, 전공의는 물론 해당 전공의가 돌보는 환자에게도 심각한 결과를 초래합니다. "경고를 수반한 인증" 및 다음 심사까지 제한된 시간 등 일부 국가에서 강조한 추가 옵션은 다른 국가에서도 인증 철회가 더 극단적인 상황에서만 사용되도록 고려하는 데 도움이 될 수 있습니다.
    1.
    Scale of consequences The use of “Withdrawal of Accreditation” has severe consequences for the sponsoring institution, the residents, as well as to the patients cared for by those residents. Additional options used in some countries which we have highlighted, such as “Accreditation with Warning” and a limited time until the next review, may be helpful for others to consider so that withdrawal of accreditation is reserved for use in more extreme circumstances.
  2. 2. 사이트 방문 정책 방문 빈도 및 방문 트리거를 신중하게 고려해야 합니다. 이 문서에 제시된 사례는 실현 가능성, 비용 효율성 및 교육적 영향을 고려하여 내부 논의를 촉진할 수 있습니다. 더 많은 연구가 진행되면 의사 결정권자가 대안의 이점과 비용을 평가하는 데 도움이 될 수 있습니다.
    2.
    Policy for site visits Frequency of visits and their triggers should be carefully considered. The examples shown in this article may facilitate an internal discussion, taking into account feasibility, cost effectiveness and educational impact. More research may help decision makers evaluate benefits and costs of alternatives.
  3. 3."실시간" 데이터 수집을 위한 여러 출처는 인증 주기를 연장할 뿐만 아니라 위험 기반 접근 방식을 위한 수단으로 사용될 수 있습니다. 그럼에도 불구하고 여기에도 타당성과 비용에 대한 고려가 적용되어야 합니다.
    3.
    Multiple sources for “real time” data collection may serve as means for a risk-based approach as well as for lengthening the accreditation cycle. Nevertheless, considerations of feasibility and costs should be applied here, as well.
  4. 4.결과 기반 PGME로 전환하려면 그에 따라 인증 시스템을 조정해야 합니다. 이러한 적응은 앞서 설명한 3단계 모델에서와 같이 점진적으로 전환하는 것이 도움이 될 수 있습니다. 의심할 여지없이, 다른 나라에서의 시행에서 배울 점이 많습니다.
    4.
    A move to an outcome-based PGME requires adaptation of the accreditation system accordingly. This adaptation may benefit from a gradual transition as depicted earlier and in our three-phased model. No doubt, there is much to learn from its implementation in other countries.
  5. 5. 변화를 계획할 때 국가와 지방 당국 간의 역할 분담과 인증 기관이 관리하는 기타 PGME 측면을 고려해야 합니다.
    5.
    Division of roles between national and local authorities and other PGME aspects governed by the accrediting authority should be considered when planning a change.

우리는 각 국가가 새로운 시스템, 아이디어 또는 도구를 채택하기 전에 현지 상황과 문화에 맞는 적절한 준비를 해야 한다는 점을 강조하고 싶습니다. 인증 당국이 직면한 도전 과제의 공통분모는 각국의 경험을 상호 학습하는 데 도움이 될 것입니다. 따라서 의사 결정권자는 지속적인 혁신과 개선을 위한 원동력으로 다른 관련 국가의 인증 발전 상황을 지속적으로 검토해야 합니다. 
We would stress that each country may need to make the suitable preparations accommodating for local context and culture before trying to adopt a new system, idea or tool. The common denominator of the challenges occupying the accreditation authorities would facilitate mutual learning of each country’s experience. Therefore, decision makers should constantly examine developments in accreditation in other relevant countries as an impetus for ongoing innovation and improvement.

실험/준실험 모델, 논리 모델, 커크패트릭의 4단계 모델 또는 CIPP 모델과 같은 일부 최근 평가 모델은 인증 시스템의 생성 및 개선에 대한 이론적 배경이 될 수 있습니다(Frey and Hemmer 2012). 저자들은 구조와 복잡성, 맥락 및 문화적 차이를 고려한 CIPP 모델이 인증 의사결정권자의 변화 관리 및 개선 노력에 도움을 줄 수 있다고 생각하지만, 의사결정권자는 다양한 모델을 숙지하는 것이 좋습니다. 
Some recent evaluation models such as the experimental/quasi-experimental models, the Logic model, Kirkpatrick’s 4-level model or the CIPP model, may serve as a theoretical background for the creation and improvement of accreditation systems (Frey and Hemmer 2012). In the authors minds, the CIPP model which takes the structure and complexity, context and culture differences into account may offer support for accreditation decision makers in their efforts for change management and improvement, though decision makers are encouraged to familiarize themselves with different models.

방법의 한계
Limitations of methods

본 검토는 주로 문헌과 공개된 문서에 의존했기 때문에 공개되지 않은 세부 정보가 부족할 수 있습니다. 일부 국가에서는 정보가 풍부했지만 다른 국가에서는 정보가 부족했습니다. 추가 정보를 얻기 위해 관련 당국에 연락을 취했지만 일부 세부 정보는 여전히 불완전한 상태였습니다. 
Our review relied mostly on literature and published documents and therefore may lack details that were not made public. Information was abundant for some countries but lacking for others. Efforts were made to contact relevant authorities for further information but some details remained incomplete.

 


 

Adv Health Sci Educ Theory Pract. 2019 Aug;24(3):503-524. doi: 10.1007/s10459-019-09880-x. Epub 2019 Mar 27.

Accreditation systems for Postgraduate Medical Education: a comparison of five countries

 

Affiliations

1Department of Health Management, School of Health Sciences, Ariel University, Ariel, Israel. dana@ima.org.il.

2The Scientific Council, Israeli Medical Association, POB 3566, 5213604, Ramat Gan, Israel. dana@ima.org.il.

3Department of Health Management, School of Health Sciences, Ariel University, Ariel, Israel.

4Myers-JDC-Brookdale Institute, Jerusalem, Israel.

PMID: 30915642

DOI: 10.1007/s10459-019-09880-x

 

Abstract

There is a widespread consensus about the need for accreditation systems for evaluating post-graduate medical education programs, but accreditation systems differ substantially across countries. A cross-country comparison of accreditation systems could provide valuable input into policy development processes. We reviewed the accreditation systems of five countries: The United States, Canada, The United Kingdom, Germany and Israel. We used three information sources: a literature review, an online search for published information and applications to some accreditation authorities. We used template analysis for coding and identification of major themes. All five systems accredit according to standards, and basically apply the same accreditation tools: site-visits, annual data collection and self-evaluations. Differences were found in format of standards and specifications, the application of tools and accreditation consequences. Over a 20-year period, the review identified a three-phased process of evolution-from a process-based accreditation system, through an adaptation phase, until the employment of an outcome-based accreditation system. Based on the five-system comparison, we recommend that accrediting authorities: broaden the consequences scale; reconsider the site-visit policy; use multiple data sources; learn from other countries' experiences with the move to an outcome-based system and take the division of roles into account.

Keywords: Accreditation; Outcome-based medical education; Postgraduate Medical Education; Residency.

교수자 개발을 위한 적시교육 인포그래픽 앱 (J Grad Med Educ. 2022)
Just in Time Teaching (JiTT) Infographics App for Teacher Development (J Grad Med Educ. 2022)

설정 및 문제
Setting and Problem

임상 실습을 하는 동안 의대생들은 레지던트들이 임상 지식을 향상시켜 주었다고 평가합니다. 레지던트는 근무 시간의 25% 이상을 의대생을 가르치는 데 할애할 수 있으며, 많은 수련 프로그램에서 레지던트의 교사로서의 역량을 핵심 역량으로 간주합니다. 이러한 중요한 역할에도 불구하고 많은 레지던트들이 교육 및 멘토링 기술과 방법론에 대한 적절한 지침과 교육이 부족합니다. 
During clinical clerkships, medical students credit residents for enhancing their clinical knowledge. Residents can spend at least 25% of their time teaching medical students, and many training programs consider resident-as-teacher skills a core competency. Despite this key role, many residents lack adequate instructions and training in teaching and mentoring skills and methodologies.

레지던트와 교수진 사이에서 기존 커리큘럼을 개선해야 한다는 요구가 증가함에 따라(인증 기관에서 제시하는 요건과 함께) 교수진 개발은 콘텐츠 전달을 위한 적시 교육 모델로 전환하고 있습니다. 스마트폰의 보편적인 사용과 가용성, 애플리케이션(앱)을 통한 연결성은 수련의와 교수진이 의학교육의 연속체 전반에 걸쳐 증거 기반 지식과 기술을 가지고 임상 팀의 학습자를 감독할 수 있는 능력을 향상시킬 수 있는 엄청난 잠재력을 가지고 있습니다. 지리적으로 분산되어 있는 교육 의료 시스템은 계속 성장하고 있으며, 임상의의 다양한 교육 요구를 충족하기 위해서는 교육 리소스에 대한 액세스가 필요합니다. 
Given the growing demand to enhance the existing curriculum among our residents and faculty (concomitant with requirements set forth by accreditation bodies), faculty development is moving to Just in Time Teaching models for content delivery. The ubiquitous use and availability of smartphones and connectivity through applications (apps) has tremendous potential to enhance the ability of trainees and faculty to supervise learners on their clinical teams with evidence-based knowledge and skills across the continuum of medical education. Geographically dispersed academic health systems, which continue to grow, require access to educational resources to guide diverse teaching needs of clinicians.

중재
Intervention

적시 교육(JiTT) 인포그래픽 앱은 SAMR(대체, 증강, 수정, 재정의) 기술 개념 프레임워크에서 파생된 교육학적 접근 방식을 결합하여 만들어졌습니다. JiTT 인포그래픽 앱은 수련의와 임상 교수진에게 근거 기반의 임상 관련 교육 팁을 제공하는 새로운 교육 팁 접근 방식으로, 단독으로 사용하거나 레지던트-교사 프로그램에 맞게 조정할 수 있습니다. 
The Just in Time Teaching (JiTT) Infographics app was created by combining a pedagogical approach derived from the SAMR (substitution, augmentation, modification, redefinition) technological conceptual framework. The JiTT Infographics app is a novel teaching tips approach that delivers evidence-based clinically relevant teaching tips to trainees and clinical faculty in their environment and can be used alone or adapted for resident-as-teacher programs.

각 JiTT 인포그래픽 도구는 지리적으로 분산된 의학교육 네트워크에서 바쁜 교사의 참여를 유도하는 비동기식 디지털 경험 전략을 통해 임상 교사의 교수법 개발을 지원합니다.1 교육 콘텐츠는 의학교육자, 임상 교육자 및 레지던트에 의해 개발되었습니다. 각 JiTT 도구는 교육 세션 중 기초 및 전문 분야별 임상 교육 팁을 설명하기 위해 PDF로 다운로드할 수도 있습니다. 필요한 순간에 쉽게 찾을 수 있도록 '즐겨찾기' 카테고리에 저장할 수 있습니다. 
Each JiTT infographic tool supports clinical teachers' access to faculty development with an asynchronous digital experience strategy to engage busy teachers in a geographically distributed medical education network.1  Educational content was developed by medical educators, clinician educators, and residents. Each JiTT tool is also downloadable as a PDF to explain foundational and specialty-specific clinical teaching tips during didactic sessions. JiTTs can be saved in a “Favorites” category to ease finding a JiTT in the moment of need.

기본 JiTT 도구에는 콘텐츠 청취를 선호하는 학습자를 지원하기 위한 짧은 팟캐스트가 포함되어 있습니다. 기본 교수 원칙에는 기대치 설정, 질문 기법, 피드백 및 코칭, 병상 교육 등이 포함됩니다. 특정 임상 교육 기법에는 내과, 가정의학과, 소아과, 산부인과, 외과, 정신과, 신경과 및 하위 전문 분야와 관련된 콘텐츠가 포함됩니다. 또한 웰빙, 품질, 사회 정의 및 연구 원칙을 가르치는 데 중점을 둔 카테고리도 포함되어 있습니다. 각 카테고리에는 사용자가 습득한 지식을 스스로 평가할 수 있는 복습 질문(선택 사항)이 제공됩니다.
Foundational JiTT tools include brief podcasts to support learners who prefer listening to content. Foundational teaching principles include setting expectations, questioning techniques, feedback and coaching, and bedside teaching. Specific clinical teaching techniques include content pertaining to internal medicine, family medicine, pediatrics, obstetrics and gynecology, surgery, psychiatry, and neurology, as well as sub-specialties. In addition, categories focused on teaching wellness, quality, social justice, and research principles are included. Optional review questions are provided in each category for users to self-assess their acquired knowledge.

지금까지의 성과
Outcomes to Date

JiTT 인포그래픽스 앱은 구글 플레이와 애플 스토어에서 다운로드할 수 있습니다. 2022년 4월 현재 90개국에서 3406명의 사용자가 앱을 다운로드했으며, 미국(N=2337), 필리핀(N=179), 멕시코(N=169), 캐나다(N=98), 사우디 아라비아(N=68)에서 가장 많은 다운로드 횟수를 기록했습니다. 앱 활동에 대한 예비 분석에서는 다음과 같은 기초 교육 카테고리를 강조합니다: 건강의 사회적 결정 요인 영역; 5가지 마이크로 스킬: 제한된 시간의 교훈; 그리고 효과적인 교수 기술로서의 질문. 지금까지의 결과는 오픈액세스 리소스에 대한 접근성을 높이기 위한 기술 활용에 대한 전 세계적인 관심을 뒷받침합니다. 2022년 4월 현재, 실시간 교육 환경에서 JiTT를 적용하는 방법을 안내하는 짧은 동영상(2021년 7월)이 유튜브에 게시되어 462회 조회되었습니다. 2022년 3월, 이 앱은 '지속적 제품'으로 인증되어 전문가 간 사용자가 선택한 평생 교육 학점을 무료로 취득할 수 있게 되었습니다. 이 앱은 교수진 개발을 위한 기술을 재정의한다는 점에서 증거 기반 JiTT 교육 도구로서 그 자체로 성과입니다. 
The JiTT Infographics app is available in Google Play and the Apple Store. As of April 2022, the app has been downloaded by 3406 unique users across 90 countries, with the largest numbers of downloads from the United States (N=2337), Phillippines (N=179), Mexico (N=169), Canada (N=98), and Saudia Arabia (N=68). Preliminary analysis of app activity highlights the foundational teaching category, which includes: Domains of Social Determinants of Health; 5 Micro Skills: Precept with Limited Time; and Questioning as an Effective Teaching Skill. The results to date support a global interest in utilizing technology to increase accessibility to open access resources. As of April 2022, a brief video on YouTube (July 2021) that guides users on how to apply the JiTT in real-time teaching settings has been viewed 462 times. In March 2022, the app was accredited as an “enduring product,” enabling interprofessional users to obtain selected continuing education credits at no cost. The app as an evidence-based JiTT teaching tool is an outcome in itself, as it redfines technology for faculty development.

향후에는 간단한 구조화된 피드백 설문조사를 통해 최종 사용자의 피드백을 수집하고 학습자 참여 지표에 대한 심층 분석을 통해 앱의 성과와 효과를 파악하여 앱 평가에 집중할 것입니다. 다른 언어로 번역해 달라는 요청이 들어오고 있으며, 외부 협력자들도 추가적으로 요청하고 있습니다. 
Future efforts will focus on app evaluation by capturing end-user feedback via brief structured feedback surveys and more in-depth analyses of learner engagement metrics to determine the outcomes and effectiveness of the app. Requests for translation to other languages are in the pipeline, as are additional external collaborators.

 

231217 Faculty Development JiTT Introduction to Just in Time Teaching (JiTT) Infographics facdev-home-jittintro2.pdf
6.29MB
Faculty Development Fac.Dev_ About the Project.pdf
12.49MB

 


J Grad Med Educ. 2022 Jun;14(3):344-345. doi: 10.4300/JGME-D-21-01011.1. Epub 2022 Jun 13.

Just in Time Teaching (JiTT) Infographics App for Teacher Development

Affiliations collapse

1Associate Program Manager, Office of Academic Affairs, Northwell Health.

2Senior Program Manager, Office of Academic Affairs, Northwell Health.

3Associate Dean, Zucker School of Medicine at Hofstra/Northwell, Office of Academic Affairs, Vice President, Northwell Health.

PMID: 35754631

PMCID: PMC9200240

DOI: 10.4300/JGME-D-21-01011.1

Free PMC article

No abstract available

적시 보수교육: 인지되거나 인지되지 않은, 당기거나 미는(J Contin Educ Health Prof. 2022)
Just-in-Time Continuing Education: Perceived and Unperceived, Pull and Push Taxonomy 
Yusuf Yilmaz, PhD; Dimitrios Papanagnou, MD, MPH; Alice Fornari, EdD, RDN; Teresa M. Chan, MD, FRCPC, MHPE, DRCPSC 

문제 진술
PROBLEM STATEMENT

의료 전문직의 임상의는 적시적소(JiT) 학습을 지원하기 위해 일상적으로 사용 시점 정보에 의존합니다. 이러한 관계는 임상 학습 환경에서 종종 관찰되는데, 개인이 직장에서의 학습과 실습을 보완하기 위해 JiT 리소스를 참조하는 것이 매우 일반적입니다.1,2 이러한 추세는 어느 정도는 교수진을 포함한 모든 학습자의 지속적인 전문성 개발(CPD)에도 적용되어야 합니다. 그러나 CPD 교육의 중심은 여전히 워크숍과 라이브 이벤트입니다.3-5 라이브 워크숍에 참석할 수 있는 교수진 학습자는 지식, 기술, 태도를 크게 향상시킬 수 있지만6,7 이러한 행사에 참석할 수 없는 학습자는 동료에 비해 뒤처질 위험이 있습니다. 학습자(특히 학술 보건 과학 센터에서 교수진으로 활동하는 사람들)는 종종 임상 업무량, 연구, 학술 여행 등 다양한 역할과 관심사를 병행하는 경우가 많기 때문에 실시간 동기식 평생 교육 및 개발 프로그램이 의도한 대상에게 도달하지 못하는 것은 놀라운 일이 아닙니다. 반면에 온라인 CPD 프로그램은 강력한 설계 및 평가를 위한 지침이 부족하여 지식, 행동, 자신감, 기술 및 태도에 대한 평가가 협소하게 이루어집니다.8,9,10 
Clinicians in the health professions routinely rely on point-of-use information to support just-in-time (JiT) learning. This relationship is often observed in the clinical learning environment, where it is quite common for individuals to consult with JiT resources to supplement learning and practice in the workplace.1,2 To a certain extent, this trend should transfer to all learners, inclusive of faculty regarding their continuing professional development (CPD). The mainstay of CPD education, however, still takes the form of workshops and live events.3–5 Faculty learners who are available to attend live workshops can enhance their knowledge, skills, and attitudes significantly6,7; but those who cannot attend these events risk falling behind their peers. Learners (especially those who function as faculty with academic health sciences centers) often juggle various competing roles and interests (eg, clinical workload, research, and academic travel); therefore, it is no surprise that live, synchronous continuing education and development programs often fail to reach intended audiences. Online CPD programs, on the other hand, lack guidance for robust design and evaluation,8 and this results in narrow assessment and evaluation for knowledge, behavior, confidence, skills, and attitudes.9,10

CPD의 세계에서 교육자와 리더는 종종 인지된 요구와 인지되지 않은 요구를 모두 고려해야 합니다.11-14 종종 평생교육에서 실무자는 자신이 무엇을 배워야 하는지 알지 못합니다.15 또한 실무자는 자신이 무엇을 모르는지 모를 수도 있습니다. 요구사항 평가의 패러다임은 인지된 요구와 인지되지 않은 요구의 두 가지로 나뉩니다. 

  • 전자는 자신의 학습 격차를 파악할 수 있는 주관적 요구사항에 초점을 맞추는 반면,
  • 후자는 CPD 사무소가 이러한 격차에 대응하는 교육 프로그램을 개발하기 위한 객관적 요구사항을 다룹니다.11,15

In the world of CPD, educators and leaders are often asked to consider both their perceived and unperceived needs.11–14 Often in continuing education, practitioners do not necessarily know what they need to learn.15 Furthermore, practitioners may simply not know what they do not know. The paradigm of needs assessment is twofold: perceived needs and unperceived needs. Although

  • the former focuses on subjective needs where one can identify his/her/their learning gaps,
  • the latter deals with objective needs where CPD offices act on these gaps to develop responsive educational programs.11,15

오늘날과 같이 디지털이 발달한 세상에서는 인지되지 않거나 인지된 필요를 더 쉽게 파악하고 해결할 수 있는 다양한 기술이 존재합니다. 가장 최근의 Google 광고나 Netflix 추천을 한 번이라도 클릭해 보지 않은 사람이 있을까요? 그렇다면 새로운 학습 기회에 대한 참여를 더 잘 유도하는 기술을 활용한다면 교수자 개발을 포함한 CPD의 세계는 어떤 모습일까요? 무엇보다도 CPD 개발의 가장 중요한 단계 중 하나는 개인 또는 코호트 수준에서 실무자의 요구를 효과적이고 정확하며 시의적절하게 파악하는 것입니다. 그러나 안타깝게도 문헌에 정의된 방법에는 효과성, 정확성, 적시성이 부족하여 적시에 프로그램을 만들고 우선순위를 정하려는 CPD 사무소의 노력을 약화시키고 있습니다. 이 글에서 저자들은 인지된/인지되지 않은 푸시/풀(PUPP) 니즈를 설명하는 분류법을 소개하며, 이를 통해 JiT 평생교육(JiTCE) 제공의 실행을 지원할 수 있습니다.
In today's digitally enhanced world, many technologies now exist to create ways in which unperceived and perceived needs can more easily be identified and addressed. Who has not clicked, at least once, on the most recent suggestion from a Google Ad or a Netflix recommendation? What, then, could the world of CPD (inclusive of faculty development) look like if technologies to better encourage engagement in new learning opportunities were harnessed? First and foremost, one of the most important steps of CPD development is to identify practitioner needs effectively, accurately, and timely—at the individual or cohort level. Unfortunately, however, the methods defined in the literature lack effectiveness, accuracy, and timeliness, dampening CPD offices' efforts to create and prioritize programs in a timely fashion. In this article, the authors introduce a taxonomy to describe the perceived/unperceived push/pull (PUPP) needs that can support the implementation of JiT continuing education (JiTCE) delivery.

솔루션: PUPP 분류법
SOLUTION: PUPP TAXONOMY

디지털 JiTCE 프로그램의 해부학
Anatomy of a Digital JiTCE Program

교수진 학습자는 전문성 개발 기회를 소비하는 방식이 다릅니다. 저자들은 개발자가 JiTCE 프로그램에 통합할 수 있는 오퍼링의 유형을 고려하는 데 도움이 되는 간단한 2×2 표인 PUPP 분류법을 제안합니다. 그림 1은 학습자의 준비도를 다양한 방식으로 다루고 개발 요구사항에 대한 새로운 방향을 제시합니다. 이 분류법은 CPD에 종사하는 사람들이 어떻게 JiT CPD 영역에 진입할 수 있는지 개념화하는 데 도움을 주는 것을 목표로 합니다. 
Faculty learners differ in how they consume professional development opportunities. The authors suggest the PUPP taxonomy: a simple 2 × 2 table that helps developers consider the types of offerings they might incorporate in a JiTCE program. Figure 1 addresses learner readiness in various ways and suggests new directions for development needs. The taxonomy aims to help those who are in the CPD conceptualize how they might enter the JiT CPD domain.

예를 들어, 학습자는 자신의 발달 요구 사항을 알고 있지만 특정 주제 영역에서 특정 수준의 역량에 도달했을 때 이를 파악하고 개선된 점을 느끼지 못할 수 있습니다(예: 학습자에게 피드백 제공). 학습자는 자신의 학습 과정에 적극적으로 참여해야 합니다. 많은 CPD 학습자는 스스로를 독립적인 학습자라고 인식하고 자신이 알아야 할 내용을 이미 알고 있다고 생각하며, 모르는 내용에 직면했을 때만 특정 정보에 접근하도록 유도해야 한다고 생각합니다. 학습 요구를 파악하는 것은 어려운 일이지만, 최근의 온라인 기술 발전은 CPD 학습자의 성과를 추적하고 향후 학습을 위한 인사이트를 제공하는 데 도움이 될 수 있습니다. 분류 체계 내에서 JiTCE 프로그램에 대한 배분은 두 가지 간단한 분류를 기반으로 합니다.

  • (1) 인지된 요구와 인지되지 않은 요구,
  • (2) 풀 콘텐츠와 푸시 콘텐츠

그림 1은 JiTCE 콘텐츠 전달을 위한 네 가지 메커니즘을 보여줍니다. PUPP 분류 체계의 각 분야는 아래에 자세히 설명되어 있습니다. 
For example, learners may be aware of their own developmental needs, but they may not identify and feel an improvement when they reach a certain level of competence in a specific subject domain (eg, providing learners with feedback). Learners should be actively engaged in their learning process. Many CPD learners will perceive themselves as independent learners and feel that they already know what they need to know and should be prompted to access specific information only when they face an unknown. Although determining learning needs is challenging, recent advancements in online technologies can help track CPD learners' performance and provide insights for future learning. The allocation for a JiTCE program within our taxonomy is based on two simple categorizations:

  • (1) perceived versus unperceived needs and
  • (2) pull versus push content.

 Figure 1 displays the four mechanisms for delivering JiTCE content. Each field of the PUPP taxonomy is explained in detail below.

온디맨드 학습: "풀" 메커니즘으로 충족되는 인지된 요구 사항
On-Demand Learning: Perceived Needs Met by a “Pull” Mechanism

JiTCE 모델에서 온디맨드 학습은 학습자가 인지된 필요를 파악한 후 특정 시점과 특정 상황에 맞는 관련 콘텐츠를 '끌어오거나' 접근할 수 있는 메커니즘을 설명합니다. 이는 필요 수준과 사용 가능한 시간에 따라 마이크로 콘텐츠에서 더 광범위한 리소스에 이르기까지 다양할 수 있습니다. 보다 확장된 학습을 위해 주요 문헌이나 리소스를 가리키는 마이크로 콘텐츠를 만드는 것이 중요합니다. 마이크로 콘텐츠는 학습자가 특정 학습 상황에 맞게 해당 리소스를 찾아보거나 검색 범위를 좁혀 자신의 학습 요구에 더 부합하는 리소스를 찾을 수 있도록 미리 보기 역할을 할 수 있습니다. 
On-demand learning within the JiTCE model describes a mechanism where learners have identified a perceived need, after which they can “pull”—or access—relevant content that suits their particular needs at a specified point in time and for a particular context. This may range from microcontent to more extensive resources, depending on the level of need and the time available. Creating microcontent that points toward key literature or resources for more extended learning is critical. Microcontent can then serve as a preview for the learner, allowing her to pursue that resource for a specific learning situation or refine her search to identify a resource that is more congruent with her learning need.

온디맨드 학습을 가능하게 하려면 CPD 학습자는 기꺼이 배우려는 마음가짐을 가져야 합니다. 또한 학습자는 자신이 무엇을 배우고 싶은지 알고 있어야 합니다. 이러한 유형의 학습을 지원하는 시스템은 쉽게 검색 가능한 마이크로 콘텐츠 저장소로, 특정 주제 영역의 마이크로 자격증을 향해 구축할 수 있는 연속적이고 연결된 마이크로 콘텐츠를 제공할 수 있습니다.
To make on-demand learning possible, CPD learners must embrace a mindset of being willing to learn. Learners must also know what they wish to learn. The system to support this type of learning would be an easily searchable microcontent repository, which would allow for successive, and linked, microcontent that can be built toward a microcredential in a specific topic area.

온디맨드형 JiTCE의 핵심 원칙은 학습 요구가 확인되면 콘텐츠를 쉽고 빠르게 이용할 수 있어야 한다는 것입니다.16 온디맨드형 학습이 성공적으로 이루어지려면 학습자가 특정 과제를 완료해야 하거나 새로운 정보가 필요할 때 콘텐츠에 쉽게 접근할 수 있어야 합니다.
The key principle to on-demand JiTCE is that the content must be easily and quickly available once a learning need has been identified.16 For on-demand learning to occur successfully, learners must be able to access the content when they need to complete a specific task or when they need new information at their fingertips.

예를 들어, 교수자가 객관식 문제(MCQ)를 작성해야 하는 상황에 처했을 때 최적의 MCQ를 작성하기 위해 모범 사례 및/또는 지침을 참조할 수 있습니다. 이 교직원은 자신이 선택한 검색 엔진에서 "어떻게 하면 좋은 MCQ 문제를 작성할 수 있나요?"를 검색할 가능성이 높습니다.
For instance, when a faculty member is immersed in a situation where he is required to write multiple-choice questions (MCQs), he may choose to consult best practices and/or guidelines to write optimal MCQs. This faculty member is likely to search for “How do I write good MCQ questions?” in their search engine of choice.

CPD 사무소는 새로운 CPD 학습자의 요구를 충족할 수 있도록 준비해야 합니다. 이를 지원하는 기술은 맞춤형 검색 엔진을 가능하게 할 것입니다.17 많은 학습자가 처음 필요를 발견했을 때 이러한 리소스를 사용하여 정보에 접근하기 때문에 교수진 개발자는 Google 및 YouTube에 최적화된 콘텐츠를 만들어야 합니다. CPD 학습자를 위한 맞춤형 웹 포털을 만드는 것도 학습자가 온디맨드 콘텐츠(예: 스크롤할 수 있는 콘텐츠 메뉴)를 찾는 데 도움이 되는 또 다른 메커니즘이 될 수 있습니다. 위키18 또는 기타 풍부한 리포지토리(예: 미국 의과대학 협회의 MedEdPORTAL)도 큰 도움이 될 수 있습니다.
CPD offices should be prepared to meet emerging CPD learners' needs. Technologies that would assist in this pursuit would allow for customized search engines.17 Faculty developers would need to create content that is well-optimized for Google and/or YouTube because many learners readily use these resources to access information when they first identify a need. Creating web portals for CPD learners that are tailored to their needs may also be another mechanism to help them discover on-demand content (eg, menu of content they can scroll through). Wikis18 or other rich repositories (eg, the Association of American Medical Colleges' MedEdPORTAL) may also be of great benefit.

구독 기반 학습: 학습자에게 '푸시'되는 인지된 요구 사항
Subscription-Based Learning: Perceived Needs That Are “Pushed” to Learners

학습자가 JiTCE를 더 자주 사용하게 되면 학습 분석을 활용하여 학습자에게 더 많은 콘텐츠를 제안할 수 있습니다(예: 푸시 알림). 학습자의 학습 분석은 학습 관리 시스템(LMS)에서 수행할 수 있으며, 학습 관리 시스템은 학습 경험의 다양한 매개변수(예: 위치, 학습 이력, 검색 이력)를 기반으로 학습자의 학습 행동을 분석하고 식별할 수 있습니다. 그런 다음 LMS 시스템은 학습자가 즉시 사용할 수 있도록 모바일 알림이나 이메일을 통해 마이크로 콘텐츠를 푸시할 수 있습니다. 예를 들어, 개인이 이메일 뉴스레터를 구독하고 받은 편지함으로 주간/월간 콘텐츠를 받아볼 수 있습니다.
As learners become more frequent users of JiTCE, learning analytics could be leveraged to suggest more content to the learners (eg, akin to push notifications). Learning analytics of learners could be performed by a learning management system (LMS), which could analyze and identify learning behaviors of the learners based on various parameters of their learning experiences (eg, location, learning history, and search history). The LMS system can then start to push microcontent to learners through mobile notifications or email for immediate use. An example of this might also be an email newsletter to which individuals could subscribe and receive weekly/monthly content to their inbox.

마찬가지로 학습자는 피드백 스킬, 시험 항목 생성, 침대 옆 교육 등 푸시 알림을 받고 싶은 항목을 선택할 수 있습니다. 그러면 앞서 설명한 인지된 요구/풀 메커니즘을 기반으로 구축됩니다. 
Similarly, learners could select items they would like push notifications for, such as feedback skills, test-item creation, and bedside teaching. This would then build on the perceived needs/pull mechanism previously described.

성과 피드백 중심 학습: 새로운 정보를 끌어오도록 유도하는 인지되지 않은 요구 사항
Performance Feedback–Driven Learning: Unperceived Needs That Prompt Pulling New Information

이 시나리오에서 학습자는 자신이 무엇을 배워야 하는지 구체적으로 알지 못하지만 배울 의향은 있습니다. 학습자에게는 기관, 전문 분야 또는 실무의 다른 담당자가 파악한 대중적인 수요가 있는 개발 주제가 제공됩니다.
In this scenario, a learner does not specifically know what they need to learn, but they are willing to learn. Learners are provided with development topics that are in popular demand that are identified by other counterparts in the institution, specialty, or practice.

예를 들어, 이 메커니즘에 참여하고자 하는 캐나다의 학습자는 모바일 또는 웹 애플리케이션(앱)에 스스로 등록할 수 있습니다. 그러면 이 학습자는 사용자 입력에 따라 비슷한 직책에 있는 다른 사람들도 CBD(역량별 설계)와 관련된 콘텐츠를 검토하고 있다는 알림을 받을 수 있습니다. 그러면 시스템은 캐나다 전역의 교수진 개발을 위한 CBD에 대한 집단 검색 데이터를 기반으로 이러한 수요를 인식하고 등록한 모든 학습자에게 기본 콘텐츠부터 고급 콘텐츠까지 CBD 마이크로 콘텐츠를 제안할 수 있습니다. 마찬가지로, 미래 지향적인 학술 병원은 임상의 대시보드를 LMS에 연결하여 병원 내 의료진이 실제 환자 중심 및 환자 중심 결과를 기반으로 학습 추천을 즉시 받을 수 있도록 할 수 있습니다(예: Press Ganey 점수가 낮으면 커뮤니케이션 과정 추천 트리거). 학습자별 학습 진도를 분석하고 그에 따라 맞춤화하여 시스템 내의 사람들이 추가 리소스를 찾을 수 있도록 지원합니다. 
For instance, learners in Canada who wish to opt into this mechanism could self-enroll in a mobile or web application (app). Based on user input, this learner might then receive notifications that other individuals with comparable positions are also reviewing content related to Competency by Design (CBD). Based on data from collective searches about CBD for faculty development across Canada, the system would then recognize this demand, and suggest CBD microcontent, from basic to advanced content, to all learners enrolled. Similarly, a forward-facing academic hospital may wish to link clinician dashboards to an LMS that would allow practitioners within their hospital to immediately be given learning recommendations based on their actual patient-oriented and patient-centered outcomes (eg, low Press Ganey score triggers recommendations for communications courses). Learning progress by learners are analyzed and customized accordingly to assist those within the system discover additional resources.

데이터 기반 학습: 학습자를 위한 푸시 콘텐츠를 식별하는 인지되지 않은 요구 사항
Data-Driven Learning: Unperceived Needs That Identify Push Content for Learners

이 구성 요소는 모델에서 가장 까다로운 CPD 구성 요소를 나타냅니다. 이는 추가 개발의 즉각적인 필요성을 인식하지 못하지만, 자신에게 필요하다고 인식하지 못했던 콘텐츠가 푸시될 수 있는 학습자를 의미합니다. 이 구성 요소의 핵심은 필요성을 강조하기 위한 타사 소스의 정보 흐름입니다(예: 교수진 평가 및 연간 성과 검토). 후자의 데이터는 학습자에게 푸시될 콘텐츠에 대한 정보를 제공합니다. 또한 이 시스템은 이메일이나 푸시 알림을 통해 인기 있는 주제를 생성하는 사용자 중심 접근 방식을 통해 인기 있는 주제에 대한 마이크로 콘텐츠를 전송할 수도 있습니다. 이 시스템은 마이크로 콘텐츠를 사용하여 학습자의 관심을 유도하고 CPD 영역의 최신 정보를 학습자에게 알리는 것을 목표로 합니다. 
This component represents the most challenging CPD component of the model. This refers to those learners who do not perceive the immediate need for further development, but could be pushed content that they did not realize they needed. Essential to this component is the flow of information from a third-party source to highlight a need (eg, faculty evaluations and annual performance reviews). The latter data would inform the content that would be pushed to learners. In addition, the system could potentially send microcontent for trending topics; this represents a user-driven approach for popular topic generation through email or push notifications. The system would aim to get attention from the learners using microcontent and inform the learners on what is current within the realm of CPD.

  • 예를 들어 특정 임상 교수진이 특정 임상 공간에서 교육생에게 피드백을 제공하지 않는 경우, 학습자에게 '푸시' 콘텐츠를 통합하면 학습자가 인지하지 못한 필요를 충족시킬 수 있는 지침을 제공하고 학습자가 관찰하거나 보고할 수 있는 행동 변화를 촉진하는 데 도움이 될 수 있습니다.
  • 마찬가지로, 위기 상황에서의 커뮤니케이션 스타일(감독자 보고, 360 평가, 환자 불만 등)에 대해 좋지 않은 평가를 받은 임상 리더에게는 위기 커뮤니케이션 과정을 추천하는 내용이 LMS 또는 사용자 지정 뉴스레터에 표시될 수 있습니다.

피드백 제공을 강화하기 위해 임상 환경에 통합된 리소스(예: 병원 컴퓨터의 스크롤식 화면 보호기에 증거 기반 피드백 제공 방법에 대한 인포그래픽을 표시하는 것)도 매우 유용할 것입니다. 이 예에서는 학습자가 더 나은 피드백 관행을 위한 넛지가 필요하다는 것을 알기보다는 그룹 수준의 데이터(예: 집계된 레지던트/학생 피드백 및 집계된 임상 성과 데이터)를 통해 이러한 필요성을 알 수 있습니다. 또한 개인이 수련의를 관찰하고 특정 상황에서 환자와의 상호 작용에 대해 피드백을 제공하거나 팀 내 다른 전공의로부터 JiT 피드백을 받아야 하는 순간에 피드백을 개선하기 위해 개인에게 배포할 수도 있습니다(표 1). 

  • If, for example, a specific clinical faculty does not provide feedback to their trainees in a certain clinical space, the integration of “push” content to the learner for this unperceived need may help provide instruction and even prompt behavior change that can be observed or reported by the learner.
  • Similarly, a clinical leader who receives poor performance reviews about their communication style in a crisis (supervisor reports, 360 evaluations, and patient complaints) may have a recommendation for a crisis communication course floated their way within either an LMS or in a custom newsletter.

Resources integrated into the clinical environment to augment feedback delivery (eg, a scrolling screensaver on a hospital computer with an infographic about how to give evidence-based feedback) would also be highly useful. In this example, it is not incumbent for learners to know that they require a nudge toward better feedback practices, but rather, this need is informed by group-level data (eg, aggregated resident/student feedback and aggregated clinical performance data). JiTCE can also be deployed to individuals to improve their feedback, in the moment, at the time when they have observed a trainee and need to provide feedback or engage in JiT feedback from other practitioners on a team about their interactions with patients in certain contexts (Table 1).

다른 보건 전문직 교육과 마찬가지로,19-21 향후에는 아마존이 상품을 추천하거나 넷플릭스가 고객에게 영화를 추천하는 방식과 유사하게 인공지능 분석 기술(예: 머신러닝 및 자연어 처리)을 사용하여 CPD 경험에 대한 추천을 강화함으로써 "빅데이터"의 힘을 활용할 수 있는 큰 잠재력이 있습니다. 그러나 이러한 유형의 분석은 상당히 '데이터 집약적'이며 결과를 나타내기 위해 광범위한 데이터베이스가 필요합니다. 조화로운 데이터베이스와 플랫폼(예: OpenCourseWare[OCW]와 유사한 단일 저장소 내에서 CPD 온라인 오퍼링을 집계하는 것)은 이러한 가능성을 실현하는 데 도움이 될 것입니다. 
Similar to the rest of health professions education,19–21 there is great potential in the future to harness the power of “big data” by using artificial intelligence analytic techniques (eg, machine learning and natural language processing) to augment recommendations for CPD experiences akin to the way Amazon recommends products or Netflix recommends movies to their clientele. However, these types of analysis are quite “data hungry” and require extensive databases to manifest results. Harmonized databases and platforms (eg, aggregating CPD online offerings within a single repository similar to OpenCourseWare [OCW]) would be helpful in helping to achieve this possible future.

구현 시 고려 사항
Considerations for Implementation

이 아이디어를 처음 구상했을 때는 팬데믹 이전 시기로, 2019년 코로나바이러스감염증-19 팬데믹으로 인해 초래될 극적인 변화를 아직 알지 못했습니다. 코로나바이러스감염증-19 이후, 우리는 새로운 디지털 세상으로 밀려났고, 미래를 위해 기존의 평생 교육을 변화시키고 적응시키기 위해 다양한 전략이 사용되었습니다. 대부분의 의료 전문가가 테크놀로지 사용에 익숙해졌지만, PUPP 분류체계에 설명된 많은 기술은 여전히 상당히 발전된 기술이며 CPD 영역의 많은 사용자, 교육자 또는 개발자에게는 여전히 익숙하지 않은 기술일 수 있습니다. 또한 이러한 유형의 학습을 지원하기 위해 마이크로 콘텐츠와 LMS를 제작하고 유지하는 데 필요한 디지털 인프라, 기술 역량, 지속적인 리소스에 상당한 투자가 필요합니다. 
When we first conceived of this idea, it was in the prepandemic period where we did not yet know the dramatic shift that would be induced by the Coronavirus Disease 2019 pandemic. In the post–Coronavirus Disease 2019 era, we have been thrust into a newly digital world, with a wide variety of strategies that have been used to change and adapt existing continuing education for the future. Although most health professionals are certainly more familiar with technology use now, many of the techniques described in the PUPP taxonomy are still fairly advanced and may still be outside of the comfort zone for many users, educators, or developers in the CPD domain. Moreover, there will need to be significant investment into digital infrastructure, technical capabilities, and continued resourcing that will be required to create and maintain the microcontent and LMS to support this type of learning endeavor.

새로운 기술을 배우기 위한 성장 마인드를 채택하는 것은 CPD 교육자의 당연한 의무이지만, 모듈과 개발 환경을 설계할 때는 대상 고객의 기술적 친숙도를 고려하고 이러한 리소스와 모듈의 사용자 인터페이스에 많은 투자를 하는 것이 중요합니다. 분석 기반 개발 영역으로의 진입을 고려할 때는 특히 마음가짐이 중요한데, 대부분의 CPD 사무실에서는 아직 대시보드, 빅데이터에 정통한 인공지능 기술(예: 자연어 처리 및 머신러닝)을 현재 프로그래밍에 일반적으로 배포하고 있지 않기 때문입니다. 잠재적인 학습 기회를 제대로 활용하려면 CPD 사무소는 병원 및 클리닉 기반 파트너와 더 많이 협력하여 대규모 환자 중심 데이터 세트(예: 결과 데이터베이스 및 환자 만족도)와 운영 데이터 세트(예: 병동 체류 기간, 수술실 처리 시간, 응급실 대기 시간)를 연결해야 합니다.  
Although it is certainly within the wheelhouse of CPD educators to adopt a growth mindset for learning new techniques, when designing modules and development experiences, it will be important to consider the technical familiarity of the target audience and to invest heavily on the user interface of these resources and modules. Mindset will be especially important when considering entering into the analytic-driven development domain because most CPD offices are not yet commonly deploying dashboarding, big data-savvy artificial intelligence techniques (eg, natural language processing and machine learning) within their current programming. To truly capitalize on the potential learning opportunities, CPD offices will need to join forces more with their hospital and clinic-based partners to interface large patient-oriented data sets (eg, outcomes databases and patient satisfaction) and operational data sets (eg, ward length of stay, operating room turnaround times, and emergency department wait times).

인지되지 않은 니즈를 파악하기 위해 데이터를 수집하거나 데이터에 연결하는 데는 높은 수준의 조정이 필요하기 때문에 CPD 리더는 분류 체계 내에서 보다 쉽게 달성할 수 있는 접근 방식부터 시작하는 것이 현명할 수 있습니다. 예를 들어, 익숙한 푸시 전략(예: 이메일 구독)으로 시작하여 나중에 새로운 촉진 방법을 구축하는 것이 현명할 수 있습니다.
Because of the high level of coordination required for acquiring or linking to data for generating unperceived needs, it may be prudent for CPD leaders to begin with more easily attainable approaches within our taxonomy. For instance, beginning with push strategies that are familiar (eg, email subscription) may be prudent, building toward new ways of facilitation later on.

결론
CONCLUSION

PUPP 분류체계는 교육 개발자가 최첨단 기술을 최대한 활용하면서 최고의 증거를 CPD 제공에 활용할 수 있는 새로운 기회를 안내할 수 있습니다. 현재 우리 일상에서 온라인 기술과 도구의 활용은 다음에 무엇을 클릭하고, 보고, 팔로우할지 예측하고 제안하는 맞춤형 방법을 달성했으며, PUPP 분류법은 전문가들의 요구를 타겟팅하면서 CPD 영역 내에서 유사한 접근 방식을 달성할 수 있는 잠재력을 가지고 있습니다.
The PUPP taxonomy can guide new opportunities for educational developers to leverage best evidence into CPD offerings, while making the best use of cutting-edge technologies. Current practices of online technology and tools in our daily lives accomplished custom-tailored methods of predictions and suggestions for what to click, watch, and follow next; PUPP taxonomy has the potential to achieve similar approaches within the CPD area while targeting needs of professionals.

 


 

J Contin Educ Health Prof. 2022 Apr 1;42(2):125-129. doi: 10.1097/CEH.0000000000000415. Epub 2021 Dec 31.

Just-in-Time Continuing Education: Perceived and Unperceived, Pull and Push Taxonomy

Affiliation

1Dr. Yilmaz: Postdoctoral Fellow, McMaster University Education Research, Innovation and Theory (MERIT) Program, Hamilton, Ontario, Canada, Postdoctoral Fellow, McMaster University Office of Continuing Professional Development, Hamilton, Ontario, Canada, and Researcher and Instructor, Department of Medical Education, Faculty of Medicine, Ege University, Izmir, Turkey. Dr. Papanagnou: Professor and Vice Chair of Education, Department of Emergency Medicine, Sidney Kimmel Medical College at Thomas Jefferson University, Associate Provost for Faculty Development, Thomas Jefferson University, Philadelphia, PA. Dr. Fornari: Professor Science Education, Family Medicine, Occupational Medicine, Donald and Barbara Zucker School of Medicine at Hofstra/Northwell, Hempstead, NY. Dr. Chan: Associate Professor, Division of Emergency Medicine, Department of Medicine, McMaster University, Hamilton, Ontario, Canada, Associate Dean, Office of Continuing Professional Development, Faculty of Health Sciences, McMaster University, and Clinician Scientist, McMaster Education Research, Innovation, and Theory (MERIT) Program, Hamilton, Ontario, Canada.

PMID: 34966109

DOI: 10.1097/CEH.0000000000000415

Abstract

We live in a world where "just-in-time" (JiT) methodologies are increasingly used. Continuing professional development (CPD), including faculty development, has the opportunity to leverage online technologies in a JiT format to further support learner engagement and program sustainability. In this article, the authors propose a model that can serve as a taxonomy for defining and implementing JiT continuing education (JiTCE). The anatomy of JiTCE describes four mechanisms to address CPD needs and delivery procedures: perceived and unperceived, as well as pull and push (PUPP) taxonomy. JiTCE PUPP taxonomy defines four components for designing and developing a program with JiT: on-demand learning, subscription-based learning, performance feedback-driven learning, and data-driven learning. These methods, as backbones, use various online technologies, which offer fundamental support for JiTCE. Delivery systems and technologies are provided as specific examples for JiTCE throughout the article. JiTCE introduces a novel taxonomy to meet continuing education needs and provides an organized approach to design and deploy programming in a sustainable way. Online technologies are evolving everyday and are an indispensable part of both clinical practice and medical education. Pull-push and perceived-unperceived axes can help guide new opportunities for instructional designers and curriculum developers to leverage best practices to align with CPD offerings, which include cutting-edge technologies.

 

+ Recent posts