학부의학교육에서 지속적 교육과정 개선을 위한 학생-교수 파트너십 촉진(Acad Med, 2019)

학부의학교육에서 지속적 교육과정 개선을 위한 학생-교수 파트너십 촉진(Acad Med, 2019)

Fostering Student–Faculty Partnerships for Continuous Curricular Improvement in Undergraduate Medical Education

Kirstin W. Scott, MPhil, PhD, Dana G. Callahan, Jie Jane Chen, Marissa H. Lynn, David J. Cote, Anna Morenz, Josephine Fisher, Varnel L. Antoine, Elizabeth R. Lemoine, Shaunak K. Bakshi, Jessie Stuart, Edward M. Hundert, MD, Bernard S. Chang, MD, and Holly Gooding, MD, MSc

문제

Problem

학습 환경의 주요 이해당사자로서, 성인 학습자는 지속적인 품질 개선(CQI) 이니셔티브와 교육 개혁에 대한 의견을 제공할 수 있는 고유한 위치에 있다. 불행하게도, 의과대학들은 일반적으로 학생들을 교육 컨설턴트로 충분히 활용하지 못했으며, 커리큘럼 설계 과정에 부적절하게 참여시킬 수도 있다.1

As key stakeholders in the learning environment, adult learners are uniquely positioned to provide input on continuous quality improvement (CQI) initiatives and educational reforms. Unfortunately, medical schools have generally underused students as educational consultants and may inadequately engage them in the curricular design process.1

2015년 가을, 하버드 의과대학(HMS)은 학부 의과 교육을 위한 새로운 커리큘럼인 Pathways를 시행하였다.6 이 구현에는 커리큘럼 구조, 교육학, 내용 및 교수 역할의 완전한 변환이 포함되었다. 

(1) 핵심 교수진이 제공하는 CBCL(case based collaborative learning) 전임상 커리큘럼의 구현, 

(2) 초기 임상 노출의 통합 

(3) 임상실습을 3학년에서 2학년으로 이동. 

In fall 2015, Harvard Medical School (HMS) implemented Pathways, a new curriculum for undergraduate medical education.6 This implementation involved a complete transformation of curricular structure, pedagogy, content, and teaching roles, including the 

(1) implementation of a casebased collaborative learning (CBCL) preclerkship curriculum delivered by core teaching faculty, 

(2) integration of earlier clinical exposure, and 

(3) movement of the clerkship year from the third to the second year. 

또한, 이러한 변화에는 학생 평가의 변경과 임상실습후 통합 과학 과정의 개발이 포함되었다. Pathway 교육 대표단(Ed Reps) 프로그램은 새로운 커리큘럼의 배치와 함께 발생하는 불가피한 과제를 해결하고 새로운 커리큘럼의 최종 사용자(학생)를 이 과정에 참여시킴으로써 CQI를 가속화하기 위해 동시에 만들어졌다.

Additionally, this transformation included changes to student assessment and the development of postclerkship integrated science courses. The Pathways Education Representatives (Ed Reps) program was created simultaneously to address the inevitable challenges that come with the deployment of a new curriculum and to accelerate CQI by engaging the new curriculum’s end users—students—in this process.

접근

Approach

Pathways 커리큘럼 개시를 예상하고 Ed Reps 프로그램을 개발하기 위해, HMS 교직원들은 기존의 외부 및 내부 학생 참여 이니셔티브를 검토했다.

To develop the Ed Reps program in anticipation of the Pathways curriculum launch, HMS faculty examined existing external and internal student engagement initiatives.

HMS에서, 학생들은 역사적으로 공식적인 거버넌스 위원회의 참여와 코스 종료 평가의 완료를 통해 커리큘럼에 대한 피드백을 제공하였다(표 1).

At HMS, students historically provided feedback on the curriculum through participation on official governance committees and completion of end-of-course evaluations (Table 1).

Ed Reps 프로그램은 지속적이고 실시간 커리큘럼 개선을 위해 교직원과 학생 간의 더 큰 파트너십을 증진하는 문화를 육성하기 위해 2015년에 신설되었다. Ed Reps 프로그램은 학생들을 CQI 과정의 중심에 배치하고, 교수진과 훈련된 학생 대표자들 사이의 양방향 피드백을 위한 의사소통 메커니즘을 시기적절하고 효율적인 방법으로 제도화했다는 점에서 이전의 내부 노력과는 달랐다. CQI를 중심으로 한 이 실시간 학생-학업 제휴는 기존의 프로그램 보완에서 큰 변화를 의미하며(위 참조), 새로운 커리큘럼 출범 이후 필요할 것으로 예상되는 과정 내용과 교육학의 빈번한 미세조정refinement을 지원하기 위한 것이었다.

the Ed Reps program was created in 2015 to launch alongside the new curriculum with the aim of fostering a culture that promoted a greater sense of partnership between faculty and students for continuous and real-time curricular improvement. The Ed Reps program differed from previous internal efforts by placing students at the center of the CQI process and institutionalizing a communication mechanism for bidirectional feedback between faculty and trained student representatives in a timely, efficient manner. This real-time student–faculty partnership centered around CQI represented a major shift from the existing complement of programs (see above) and aimed to support the frequent refinement of course content and pedagogy that was anticipated to be needed following the launch of a new curriculum.

Ed Reps 선정, 교수진 멘토링 및 교육

Ed Reps selection, faculty mentorship, and training

학생들은 입학 후 2개월 이내에 이 [자발적인 지원 기반 프로그램]에 선발되는데, 이는 그들이 임상실습 기간과 그 이후까지 종단적으로 서비스를 계속할 것이라는 기대에서이다. 처음 2년 동안에는 Ed Reps 프로그램에 지원한 모든 학생들이 선발되었다(2015–2016 [AY15], 2016–2017 [AY16]). 3년차(학술년 2017~2018년 [AY17])부터는 제안된 자리가 줄어들었고(총 8개), 수석 에드 렙스는 지원서를 토대로 후보 순위를 매겼다.

Students are selected into this voluntary, application-based program within two months of matriculation with the expectation that they will continue their service longitudinally through their clerkship year and beyond. All students who applied to the Ed Reps program in the first two years were selected (21 in academic year 2015–2016 [AY15] and 19 in academic year 2016–2017 [AY16]). Starting in the third year (academic year 2017–2018 [AY17]), fewer slots were offered (8 in total), and senior Ed Reps ranked candidates based on their applications.

교수 멘토는 Ed Reps의 격주 회의에 참여함으로써 지원을 제공하며(아래 참조), 임시로 Ed Reps와 만날 수 있다. 멘토는 또한 다음에 대한 교육을 제공한다. 

• 성인 학습 이론, 

• Pathways 커리큘럼을 뒷받침하는 증거 기반 교육 전략, 

• 교수진 및 동료에게 피드백을 제공하기 위한 모범 사례 

• 필요에 따라 동료 학생을 제도적 지원에 연결하는 절차(예: 장애 사무소, 상담 및 정신 건강 서비스, 익명 학습 환경 보고 도구)

A faculty mentor provides support by participating in the Ed Reps’ biweekly meetings (see below) and is available to meet with Ed Reps on an ad hoc basis. The mentor also provides training in 

• adult learning theory, 

• the evidence-based teaching strategies underpinning the Pathways curriculum, 

• best practices for providing feedback to faculty and peers, and 

• procedures for connecting fellow students to institutional supports as needed (e.g., the disability office, counseling and mental health services, anonymous learning environment reporting tools).

프로그램 구조

Program structure

과정 감독과의 커뮤니케이션을 효율화하기 위해, Ed Reps가 각 사전 커리큘럼 과정과 4개 학습 커뮤니티의 리드 컨택 역할을 했다. 한 학습 커뮤니티는 40명의 학생과 2명의 리드 교직원으로 구성되어 있다. 수업 전 과정의 CBCL 세션마다 학생들은 4인 1조로 협력하여 새로운 지식을 수업 중인 사례에 적용하고, 그 후 교직원들이 전체 40인 학습 커뮤니티와 함께 사례 검토를 주도한다. 각 학습 커뮤니티는 교과과정이 일관성 있게 시행되도록 하기 위해 각 세션에 대해 동일한 준비 작업, 사례, 수업 내 자료 및 평가를 사용한다.

To streamline communication with course directors, one or two Ed Reps served as the lead contact for each preclerkship course and for each of four learning communities. A learning community comprises 40 students and two lead faculty. During each CBCL session in the preclerkship course, students work collaboratively in groups of four to apply new knowledge to in-class cases, after which faculty lead a review of the cases with the entire 40-person learning community. Each learning community uses the same preparatory work, cases, in-class materials, and assessments for each session to ensure that the curriculum is implemented consistently.

Ed Reps는 과정 내용, 교육학, 강의실 역학, 평가 및 학습에 미치는 영향에 대한 실시간 학생 피드백을 탐색했다. 피드백을 수집하는 방법이 진화했지만, 피드백은 일반적으로 비공식적인 동료 대화 및 학습 커뮤니티 미팅 외에 격주로 익명의 온라인 설문조사를 통해 수집되었다. 에드 레퍼스 

• 격주로 만나 수집된 피드백을 검토하고 과제를 파악하며 해결책을 도출한다. 

• 코스 이사 및 핵심 교직원과 정기적으로 만나 양방향 피드백을 전달하여 실시간으로 학습 환경을 최적화하십시오. 

• 주간 이메일과 직접 발표를 통해 학생들의 피드백에 대한 교수진의 반응을 업데이트했다. 

Ed Reps sought real-time student feedback about course content, pedagogy, classroom dynamics, assessments, and their impact on learning. Although methods for gathering feedback evolved, feedback was typically gathered through optional biweekly anonymous online surveys in addition to informal peer conversations and learning community meetings. The Ed Reps 

• met biweekly to review the gathered feedback, identify challenges, and generate solutions; 

• met regularly with course directors and core faculty to convey bidirectional feedback (see below) to optimize the learning environment in real time; and 

• updated their class on faculty responses to student feedback via weekly emails and in-person announcements. 

Ed Reps는 또한 주기적으로 학생들의 학습 환경에 대한 준비 및 참여 수준에 대한 교수 피드백을 검토했다. 또한 효과적인 학습 습관에 대한 제안을 검토했고, 동료들과 함께 Pathway 커리큘럼 뒤에 숨겨진 과학적 근거 등을 검토했다.

Ed Reps also periodically reviewed faculty feedback on students’ level of preparation for and engagement in the learning environment, suggestions for effective study habits, and the scientific rationale behind the Pathways curriculum with their peers.

성과

Outcomes

우리는 3명의 학생 조사와 1명의 교직원 조사를 포함하는 Ed Reps 영향 조사 프로젝트의 데이터를 제시한다.

We present data from the Ed Reps impact survey project, which includes three student surveys and one faculty survey.

학생 관점

Student perspectives

총 222명의 Pathway 학생들이 프로그램 초기 3년 동안 설문조사를 완료했다(AY15: 77/152 [50.7% 응답률(RR)], AY16: 68/145 [46.9% RR], AY17: 77/159 [48.4% RR], P = .94).

A total of 222 Pathways students completed the survey across the initial three years of the program (AY15: 77/152 [50.7% response rate (RR)]; AY16: 68/145 [46.9% RR]; AY17: 77/159 [48.4% RR]; P = .94).

대다수의 학생들은 에드 레퍼스(217; 97.7%)를 알고 있었으며, 대부분의 학생들은 에드 레퍼스에게 피드백을 제공했다고 보고했다(156; 70.3%). 응답자 중 대다수는 Ed Reps가 커리큘럼(202; 91.0%)에 긍정적인 영향을 미쳤고, 교직원에게 학생 피드백을 촉진했으며, 진행 중인 과정을 실시간으로 개선하는 데 도움이 되었다고 보고했다(194; 87.4%) 상대적으로 Ed Reps가 교수진과의 직접 소통의 장벽이라고 느끼는 학생은 거의 없었다(24; 10.8%).

The vast majority of students were aware of their Ed Reps (217; 97.7%), and most students reported providing feedback to their Ed Reps at some point in the year (156; 70.3%). A strong majority of respondents reported that Ed Reps had a positive impact on the curriculum (202; 91.0%), facilitated student feedback to faculty (212; 95.5%), and helped make real- time improvements to ongoing courses (194; 87.4%). Relatively few students felt that the Ed Reps were a barrier to direct communication with faculty (24; 10.8%).

여러 가지 중심 주제가 학생들의 자유 텍스트 응답에서 나왔다(표 2).

Several central themes emerged from the students’ free-text responses (Table 2).

학생들은 Ed Reps가 학생 투입을 위한 체계적인 경로를 제공함으로써 교직원들에게 적시에 통합된 피드백을 용이하게 해준다는 것을 인정했다. 학생들의 입력을 바탕으로 한 수업 변경의 실시간 방식에 주목하면서 학생 임파워먼트를 가치있게 여겼다. 일부 학생들은 피드백이 전체 클래스를 더 대표할 수 있도록 Ed Repers의 피드백 요청 및 커뮤니케이션 프로세스의 투명성을 높일 필요가 있다고 제안했다.

Students appreciated that Ed Reps facilitated timely, synthesized feedback to faculty by offering a structured path for student input. Student empowerment was valued, with students noting the real- time manner in which course changes were implemented based on their input. Some students suggested a need to increase the transparency of the Ed Reps’ feedback solicitation and communication processes to ensure that feedback was more representative of the entire class.

교수 관점

Faculty perspectives

총 47명(적격자 64명 중 73.4% RR)의 교수진이 설문조사를 완료했으며, 대부분 AY15와 AY16(42/47; 89.4%)에서 경로 커리큘럼에서 강의했다.

A total of 47 (out of 64 eligible) faculty members completed the survey (73.4% RR), most of whom taught in the Pathways curriculum in both AY15 and AY16 (42/47; 89.4%).

대다수의 교직원들은 Ed Reps가 학습 환경(34/37; 91.9%) 학생-학업 관계(33/37; 89.2%) 교수 및 학습 활동(32/36; 88.9%)에서 긍정적인 영향을 미친다는 데 동의했다. 여전히 과반수지만, Ed Reps가 학습 목표(19/33; 57.6%)와 기관의 규칙과 절차에 긍정적인 영향을 미친다는 데 동의한 교수 수는 더 적었다(16/30; 53.3%). Ed Reps의 피드백을 받은 교수들 중 거의 모든 교수들이 이 인풋에 기초하여 과목을 개선했다고 보고했다(35/37; 94.6%). 진행 중인 과정과 향후 과정에 대해 교수진이 보고한 커리큘럼 변경의 구체적인 영역은 그림 1과 같다.

The majority of faculty agreed that the Ed Reps had a positive impact in the following areas: the learning environment (34/37; 91.9%), student–faculty relationships (33/37; 89.2%), and teaching and learning activities (32/36; 88.9%). Although still a majority, fewer faculty agreed that the Ed Reps had a positive impact on learning objectives (19/33; 57.6%) and institutional rules and procedures (16/30; 53.3%). Of faculty who received feedback from the Ed Reps, almost all reported making changes to their course based on this input (35/37; 94.6%). Specific domains of curricular change reported by faculty for ongoing and future courses are shown in Figure 1.

다음 단계

Next Steps

프로그램 인식, 사용 및 만족도

Program awareness, use, and satisfaction

Ed Reps 프로그램에 대한 인식, 사용 및 만족도는 교직원과 학생들 사이에서 높았다. 상당수의 학생들은 Ed Reps가 커리큘럼에 긍정적인 영향을 끼치고, 교직원들에게 학생들의 피드백을 용이하게 하며, 진행 중인 과정의 실시간 개선을 돕는다고 생각했다. 중요한 것은, 대다수의 교직원들이 이 프로그램에 대해 긍정적인 반응을 보임에 따라, 학생들의 견해가 교직원의 반응과 echo하였다는 점이다. 교수진은 에드 렙스가 긍정적인 학습 환경을 조성하고 학생-학생-학생-교수간 파트너십을 촉진하는 데 미치는 영향을 긍정적으로 보고, 이 프로그램이 의도된 문화 변화, 즉 새로운 커리큘럼을 만드는 데 진정한 동반자 의식을 달성하는 데 도움이 되었음을 시사했다. 우리의 결과는 Ed Reps 프로그램 또한 실시간 커리큘럼 개선을 촉진한다는 목표를 달성했으며, 교수진의 거의 95%는 Ed Reps의 피드백에 대응하여 커리큘럼을 변경했다.

Awareness of, use of, and satisfaction with the Ed Reps program was high among faculty and students. A significant majority of students felt that the Ed Reps had a positive effect on the curriculum, facilitated student feedback to faculty, and helped make real-time improvements to ongoing courses. Importantly, students’ perspectives were echoed in faculty responses, with the majority of faculty reporting positive responses to the program. Faculty viewed the impact of Ed Reps in promoting a positive learning environment and facilitating student–faculty partnerships favorably, suggesting that the program helped to achieve the intended culture change: a true sense of partnership in creating the new curriculum. Our results demonstrate that the Ed Reps program also achieved its objective of facilitating real-time curricular improvement, with nearly 95% of faculty reporting making curricular changes in response to Ed Reps’ feedback.

연구 한계

Study limitations

당면 과제 및 향후 방향

Challenges and future directions

매년 Ed Reps impact survey를 학생들에게 계속 배포함에 따라, 연간 비교는 Ed Reps 프로그램 자체의 CQI(즉, 추세에 관한 모든 것을 식별, 추적 및 다루기 위해)에 사용될 것이다. impact survey에서 비롯되는 CQI의 한 가지 예는 (지원자들이 AY17에서 구현된 Ed Rep로서 직면할 수 있는 다섯 가지 시나리오에 대한 접근방식을 공유하도록 요구하는) 보다 엄격한 Ed Reps 선발 과정이다. 또한, Ed Reps는 동료 피드백을 수집하고 동료에게 교직원 반응을 다시 전달하는 방법을 개선하기 위해 이러한 impact survey 데이터를 계속 사용한다(예: 구조화된 주간 이메일 업데이트와 같은 표준화된 커뮤니케이션 프로세스를 통해).

As we continue to distribute the Ed Reps impact survey to students annually, the year-to-year comparisons will be used for CQI of the Ed Reps program itself (i.e., to identify, track, and address any concerning trends). One example of CQI resulting from the impact survey is the more rigorous Ed Reps selection process that requires candidates to share their approach to five scenarios they might encounter as an Ed Rep, which was implemented in AY17. Additionally, Ed Reps continue to use these impact survey data to improve their methods for collecting peer feedback and conveying faculty responses back to their peers (e.g., via standardized communications processes such as structured weekly email updates).

---

Acad Med. 2019 Jul;94(7):996-1001. doi: 10.1097/ACM.0000000000002726.

Fostering Student-Faculty Partnerships for Continuous Curricular Improvement in Undergraduate Medical Education.

Scott KW1, Callahan DG, Chen JJ, Lynn MH, Cote DJ, Morenz A, Fisher J, Antoine VL, Lemoine ER, Bakshi SK, Stuart J, Hundert EM, Chang BS, Gooding H.

Author information

1

K.W. Scott is a fourth-year medical student, Harvard Medical School, Boston, Massachusetts; ORCID: https://orcid.org/0000-0002-5415-6479. D.G. Callahan is a fourth-year medical student, Harvard Medical School, Boston, Massachusetts; ORCID: https://orcid.org/0000-0002-1413-5331. J.J. Chen is a third-year medical student, Harvard Medical School, Boston, Massachusetts; ORCID: https://orcid.org/0000-0002-5380-4825. M.H. Lynn is a fourth-year medical student, Harvard Medical School, Boston, Massachusetts. D.J. Cote is a fourth-year medical student and PhD student, Harvard Medical School and Harvard T.H. Chan School of Public Health, Boston, Massachusetts. A. Morenz is a fourth-year medical student, Harvard Medical School, Boston, Massachusetts. J. Fisher is a fourth-year medical student, Harvard Medical School, Boston, Massachusetts. V.L. Antoine is a second-year medical student, Harvard Medical School, Boston, Massachusetts. E.R. Lemoine is a fourth-year medical student, Harvard Medical School, Boston, Massachusetts. S.K. Bakshi is a fourth-year medical student, Harvard Medical School, Boston, Massachusetts. J. Stuart is a fourth-year medical student, Harvard Medical School, Boston, Massachusetts. E.M. Hundert is dean for medical education and Daniel D. Federman, M.D. Professor in Residence of Global Health and Social Medicine and Medical Education, Harvard Medical School, Boston, Massachusetts. B.S. Chang is advisory dean and director, Francis Weld Peabody Society, and course director, Mind, Brain and Behavior, Harvard Medical School, Boston, Massachusetts. H. Gooding is faculty mentor, Education Representatives Program, Harvard Medical School, and adolescent medicine specialist, Division of Adolescent and Young Adult Medicine, Boston Children's Hospital, Boston, Massachusetts.

Abstract

PROBLEM:

A number of medical schools have used curricular reform as an opportunity to formalize student involvement in medical education, but there are few published assessments of these programs. Formal evaluation of a program's acceptability and use is essential for determining its potential for sustainability and generalizability.

APPROACH:

Harvard Medical School's Education Representatives (Ed Reps) program was created in 2015 to launch alongside a new curriculum. The program aimed to foster partnerships between faculty and students for continuous and real-time curricular improvement. Ed Reps, course directors, and core faculty met regularly to convey bidirectional feedback to optimize the learning environment in real time.

OUTCOMES:

A survey to assess the program's impact was sent to students and faculty. The majority of students (202/222; 91.0%) reported Ed Reps had a positive impact on the curriculum. Among faculty, 35/37 (94.6%) reported making changes to their courses as a result of Ed Reps feedback, and 34/37 (91.9%) agreed the program had a positive impact on the learning environment. Qualitative feedback from students and faculty demonstrated a change in school culture, reflecting the primary goals of partnership and continuous quality improvement (CQI).

NEXT STEPS:

This student-faculty partnership demonstrated high rates of awareness, use, and satisfaction among faculty and students, suggesting its potential for local sustainability and implementation at other schools seeking to formalize student engagement in CQI. Next steps include ensuring the feedback provided is representative of the student body and identifying new areas for student CQI input as the curriculum becomes more established.

PMID:

 

30920449

 

DOI:

 

10.1097/ACM.0000000000002726