基于双向的学习质量评估方法及继续医学教育闭环管理系统

技术领域

本发明属于教育信息管理的技术领域，特别是涉及基于双向的学习质量评估方法及继续医学教育闭环管理系统。

背景技术

继续医学教育(ContinuingMedical Education，CME)主要是指以知识更新为主要内容的学历后医学教育，是医务人员不断更新知识、丰富经验、自我完善的源泉。继续医学教育通常采用线下会议、面授模式，缺少智能化系统支撑，缺乏统一、规范的流程来管理。远程线上教育模式逐渐进入CME领域，且优势显著。近年来，基于互联网视频会议、网络直播等技术开始应用于医学学术会议，打破了传统科教活动模式，具有开放、高效、实时及互动等特点，优势凸显。

目前继续医学教育主要通过线下模式，这样既耗时又费力，效率低，不利于持续推动继续医学教育工作健康、有序开展。同时，线上主要使用第三方会议软件，只提供了会议、直播功能，并不能完整覆盖策划立项、专家邀约、课程制作、章节管理、报名、签到打卡、在线学习、互动答疑、连线病房、在线评测、学分发放、学习质量分析、教学质量反馈、线上线下融合等继续医学教育全流程。很多环节几乎都是人工进行操作，每次培训前、中、后都有大量的工作，且容易出现纰漏。

发明内容

本发明为解决上述背景技术中存在的技术问题，提供了基于双向的学习质量评估方法及继续医学教育闭环管理系统。

本发明采用以下技术方案来实现：基于双向的学习质量评估方法，至少包括以下步骤：

根据学员或教学需求预先设置教育管理模式，基于所述教育管理模式配置对应的课程教学模式；

学员基于所述课程教学模式完成线上学习，并存储每位学员的学习过程记录，同时获取每位学员的测试成绩；学员在学习过程中生成至少一份教学质量反馈记录；

创建学习指标评判模型，基于所述学习过程记录和测试成绩得到学员的学习质量指标，基于学分规则对符合条件的学员按照学习质量指标进行降序排列，并对前n名学员授予学分，n为本次课程可授予学员数量；

创建教学指标评判模型，基于所述教学质量反馈记录生成关于课程的教学质量指标，基于所述教学质量指标不断优化教育管理模式和课程教学模式。

在进一步的实施例中，所述学习过程记录至少包括：

学员学习对应课程的签到、在线学习时间、在线学习方式；所述在线学习方式包括但不限于直播课、点播课、连线病房、线下会议。

在进一步的实施例中，所述学习质量指标的计算流程如下：

步骤101、基于所述学习过程记录自定义学习过程基础质量因子R

步骤102、对行为p的历史数据进行统计分析，获取行为p的阈值，对学员在学习课程时做出的行为类别进行无量纲化处理，得到关于学习过程基础质量因子R

步骤103、基于所述学习过程基础质量因子，采用AHP层次分析法，确定定辅助评判因子β，β＝(β

步骤104、通过以下公式计算得到学员i的学习过程质量因子K

K

步骤105、对学员i关于课程的测试成绩进行无量纲化处理得到成绩测评质量因子S

步骤106、基于学习过程质量因子R

步骤107、通过以下公式计算学员i的学习质量指标V

V

由于采集到的各指标的数量级和计量单位不尽相同，故需要对各项参数进行无纲量化处理，规范化数据，便于数据分析。

在进一步的实施例中，所述R

其中，r

r

r

r

r

r

各指标的数量级和计量单位不尽相同，进行无纲量化处理，规范化数据，便于数据分析。

在进一步的实施例中，所述学分规则至少包括以下考核指标：课程学习时长、测试成绩、无效学习检测命中次数、签到和签退；

若不满足考核指标中的至少一项，则属于不符合条件的学员，将不会授予其学分。

在进一步的实施例中，所述教学质量反馈记录包括：反应记录、学习记录、行为记录和结果记录；

其中所述反应记录为学员、授课老师的满意度以及线上互动、远程答疑的参与度；

学习记录为学员参与课程后的理论、技能提升情况以及培训目标的完成情况；

行为记录为学员参与课程后在实践中行为改变情况；

结果记录为学员所在组织、单位因学员学习所引起的绩效改变情况。

在进一步的实施例中，所述教学质量指标的计算流程如下：

步骤201、基于教学质量反馈记录自定义教学质量反馈因子Q

步骤202、对教学质量反馈因子Q

步骤203、对教学无量纲化因子Q

步骤204、计算每个记录项的标准差：

步骤205、基于记录项f，采用AHP层次分析法，确定反馈辅助评判因子ω，ω＝(ω

步骤206、计算课程k教学质量反馈指标：C

步骤207、计算课程k的学员学习质量均值：

步骤208、基于教学质量反馈指标和学习质量均值设定教学辅助评判因子γ，γ＝(γ

步骤209、通过以下公式计算课程k的教学质量指标T

T

继续医学教育闭环管理系统用于实现上述学习质量评估方法，包括：

策划模块，被设置为根据学员或教学需求预先设置教育管理模式；

课程开发模块，被设置为基于教育管理模式配置对应的课程教学模式；

学习模块，被设置为给学员提供学习平台；学员在学习平台上基于所述课程教学模式完成线上学习，

学习采集模块，被设置为采集并存储每位学员的学习过程记录，同时获取每位学员的测试成绩；

教学反馈模块，被设置为采集并存储学员在学习过程中生成至少一份教学质量反馈记录；

学习质量分析模块，被设置为创建学习指标评判模型，基于所述学习过程记录和测试成绩得到学员的学习质量指标，基于学分规则对符合条件的学员按照学习质量指标进行降序排列，并对前n名学员授予学分，n为本次课程可授予学员数量；

教学质量分析模块，被设置为创建教学指标评判模型，基于所述教学质量反馈记录生成关于课程的教学质量指标，基于所述教学质量指标不断优化教育管理模式和课程教学模式。

在进一步的实施例中，所述教育管理模式为关于继续医学教育的课程立项、组织策划工作、课程体系的建立、课程信息发布，以及学员的报名通道、缴费形式、签到及学分发放要求；

所述课程教学模式为关于课程的授课人信息、教学内容、教学形式、教学资料、以及考评方式。

在进一步的实施例中，教学质量分析模块至少包括：反应层、学习层、行为层和结果层；

其中，所述反应层被设置为采集并记录学员、授课老师的满意度以及线上互动、远程答疑的参与度；

学习层被设置为采集学员参与课程后的理论、技能提升情况以及培训目标的完成情况；

行为层被设置为采集学员参与课程后在实践中行为改变情况；

结果层被设置为采集学员所在组织、单位因学员学习所引起的绩效改变情况。

本发明的有益效果：本发明通过对学员的学习质量考评、对授课老师的教学质量考评构成双向的教学质量评估，解决了现有技术中仅从学员的单一方向衡量教学质量的片面性。通过前期的组织策划、课程规划、学习情况以及教学反馈等多方面构成闭环式的继续医学教育管理系统，不仅仅提升了教学质量，还从多方面提高了学习效率。

线下教学的管理模式已经不再适用于线上教学，对学员的学习状态、以及授课老师的教学质量得不到很好的监管，故本发明实现了对继续医学教育活动策划、组织报名、学习、质量评估、学分发放和成果归档等继续医学教育活动全流程闭环管理。为组织者、授课专家、学员和教务人员提供了一体化平台进行综合管理，组织者可以利用本系统策划立项、发布学习课程、管理和推广课程，授课专家利用本系统制作课件、在线授课、远程答疑，学员通过本平台可以线上报名、在线学习、在线互动和考核、获得学分，管理人员还可以在线巡课、查看学习和考评记录、授予学分，并根据质量模块所提供的数据、教学反馈信息进行教学质量分析和项目的持续改进。系统还可以根据规则定时提醒老师制作课件、学员上线学习，可以导入线下学习数据。不仅能查看单次课程的学习情况，还提供了分时段、多维度、全年综合等多种教学数据。采用这种闭环管理方式，提高了管理效率，提升了教学质量，节约了时间成本、场地、交通、人力、管理等成本，有利于持续推动继续医学教育工作健康、有序开展，具有重要的推广意义。

附图说明

图1是本发明实施例1中一种继续医学教育闭环管理系统的工作流程图。

图2是本发明实施例2中一种继续医学教育闭环管理系统的业务框架图。

具体实施方式

下面结合说明书附图和实施例对本发明做进一步的描述。

现有的教学系统中，一般仅通过学员的考评成绩判断学员针对某个课程的学习效果并给出学分，但是这样的判断具有一定的片面性，原因如下：学员的学习情况一方面是取决于学员自身的学习态度或者学习能力，但是不可否认的也会存在其他的原因：比如，课程编排的不合理、教学时长不够，又或者授课老师讲解时的方式、课程难易程度等等。

基于上述问题，现有的教学管理中并未能对除学生以外的其他因素进行考核，因此也没有给出适用性的教学优化。

实施例1

本实施例公开了基于双向的学习质量评估方法，包括以下步骤：

步骤一、根据需求预先设置教育管理模式，基于所述教育管理模式配置对应的课程教学模式；

步骤二、学员基于所述课程教学模式完成线上学习，并存储每位学员的学习过程记录，同时获取每位学员的测试成绩；学员在学习过程中生成至少一份教学质量反馈记录；

步骤三、创建学习指标评判模型，基于所述学习过程记录和测试成绩得到学员的学习质量指标，基于学分规则对符合条件的学员按照学习质量指标进行降序排列，并对前n名学员授予学分，n为本次课程可授予学员数量；

步骤四、创建教学指标评判模型，基于所述教学质量反馈记录生成关于课程的教学质量指标，基于所述教学质量指标不断优化教育管理模式和课程教学模式。

在本实施例中，步骤一中的教育管理模式表现为：立项，即设置项目主题、培训目标、培训计划、目标学员、开展形式、已有基础、费用和预计产生的获益情况等信息。

确定目标学员，包括本院员工、进修学员、见习生、实习生、社区医护人员等，可依据目标学员培养方向、科室及分组等信息，还可以同时对目标培训群体进行现况调查以了解学员的学习需求。

设置对应的培养计划，以适应不同的培训要求及目标。发起人设置好立项信息并提交给相关负责人进行审批，审批进度会通过短信和公众号消息的形式提醒发起者和审批人，审批人可进行驳回和同意操作，也可逐级审批。

课程审批通过后，进行课程内容策划，规划课程体系、课程主题、学习形式、主讲人及议题，进而确定课程基本信息：主办方、承办方、主讲人、时间、场地、费用、考核要求、学分发放标准。课程内容确定后，及时与专家联系、邀请专家，对每次邀约形成记录。对于接受邀约的专家，开始收集专家信息并录入系统中的专家资料库。如邀约失败，系统会根据任务紧急程度自动提醒主办方及时处理，必要时启动备用方案。

报名通道一般是海报形式，方便进行宣传，系统支持海报、H5页面等形式的报名通道在线设计。无需额外的开发，通过拖拽和粘贴的形式就能设计出美观的海报，支持一键分享到社群、短信、邮箱中，也可以下载打印。学员通过海报上的二维码入口进入报名通道、注册报名，系统收集学员的工作单位、科室、姓名、性别、年龄、职称、证件类型、证件号、学员编号、联系方式等基本信息。学员录入信息后，系统会进行自动判别，对错误信息进行提示，系统判别无误后提交主办方审核，审核通过后报名成功。

在进一步的实施例中，步骤一中的所述课程教学模式包括以下流程：课件制作和课程发布：专家接受邀约后，首先组织专家进行培训大纲的讨论、确定，再根据培训大纲进行课件的制作。课程主要有会议、直播、录播三种形式。会议和直播的课件以PPT为主，课件PPT制作好后可以上传到平台组织专家评阅。录播课件主要是视频形式，可以通过本系统录制，也可以将录制好的课件上传到本系统中，本系统中包含了视频剪辑功能，可以对课件在线剪辑。

完成课件制作后，通过系统上传课程资料、发布课程。提取课程信息，根据课程形式和报名信息，一键生成学习入口。在系统内设置课程章节、学习时长要求。在线学习的完成度可设定，例如观看视频达90％为完成学习，视频可根据需求设置禁用快进及倍数播放、移动/电脑端同步切换登陆等。

对于录播课，要将视频设置在对应的章节下。对于会议和直播课，本系统提供了预览功能，可以提前进行调试、彩排。系统内还可以录试题、制作试卷，将试卷关联到对应的课程下，设定考评要求。并设置学分发放规则。

线下培训会这种传统继续教育活动模式，在一些场景中出现的频率较高，短期内还难以完全线上化，为了统一管理，可以将线下签到、签退信息导入到学习平台中，自动统计学习时长。同时受制于场地和时间的限制，也可以结合系统内的直播、云课堂功能，实现线上线下融合的培训模式，不能到达现场的学员可以在线学习。

直播课基于流媒体技术，支持电脑端和移动端，做到多端覆盖。支持RMTP、 FLV格式，支持多种清晰度模式，适应不同网络状态：高清、标准、流畅模式，并能根据网络质量自动降级技术，让弱网下的用户也能较好的参与到学习中。学员通过点击课程链接、公众号菜单或扫描课程二维码均可以进入学习，学员每次进出都会有完整的记录。系统内可以设置画面布局，支持共享、白板、标注等授课操作。

连线病房主要通过视频连线的方式，用来实景示教、远程查房。可以将现场画面投影到教室、会场大屏上，也可以推送到直播课。多方联系时，主办方可以利用系统中的会控功能远程控制摄像头、麦克风，对于通信协议一致的摄像头还能远程遥控角度和焦距等。

云课堂主要是录播课，根据课程设置，可以按章节进行学习。

同时配置了在线互动、答疑频道，当学员学习过程中遇到问题时，可以及时向专家提问，专家在线解答。问答内容将展示给本课程的所有学员，其他学员也可以回答和补充，学员可以通过问答频道互相交流、积极讨论。

在进一步的实施例中，步骤二中的学习过程记录则包括：学员学习对应课程的签到、在线学习时间、在线学习方式；所述在线学习方式包括但不限于直播课、点播课、连线病房、线下会议。

基于学习过程记录，学习质量指标的计算流程如下：

步骤101、基于所述学习过程记录自定义学习过程基础质量因子R

步骤102、对行为p的历史数据进行统计分析，获取行为p的阈值，对学员在学习课程时做出的行为类别进行无量纲化处理，得到关于学习过程基础质量因子R

步骤103、基于所述学习过程基础质量因子，采用AHP层次分析法，确定辅助评判因子β，β＝(β

步骤104、通过以下公式计算得到学员i的学习过程质量因子K

K

步骤105、对学员i关于课程的测试成绩进行无量纲化处理得到成绩测评质量因子S

步骤106、基于学习过程质量因子R

步骤107、通过以下公式计算学员i的学习质量指标V

V

在进一步的实施例中，p的取值为6，即包含了六种学习课程时行为，分别是：学员的在线学习时长、离线行为、互动行为、学习资料浏览行为、无效学习检测命中行为、以及回放学习视频片段行为。对应的，R

基于上述实施例，对每个学习过程质量因子的无量纲化处理的方式如下：

r

r

r

r

r

r

需要说明的是，步骤三中的学分规则至少包括以下考核指标：课程学习时长、测试成绩、无效学习检测命中次数、签到和签退；结合表1所示。

即某学员不满足表中的其中一项规则对应的要求，则属于不符合条件的学员，将不会授予其学分。

在进一步的实施例中，步骤二中的教学质量反馈记录包括：反应记录、学习记录、行为记录和结果记录；其中所述反应记录为学员、授课老师的满意度以及线上互动、远程答疑的参与度；学习记录为学员参与课程后的理论、技能提升情况以及培训目标的完成情况；行为记录为学员参与课程后在实践中行为改变情况；结果记录为学员所在组织、单位因学员学习所引起的绩效改变情况。教学质量反馈记录通过问卷的形式生成，问卷的内容可以包括：学员满意度、教师满意度、互动答疑参与度、理论技能水平提升度、实践行为改变度等。不同选项，对应不同的分值。

在进一步的实施例中，教学质量指标的计算流程如下：

步骤201、基于教学质量反馈记录自定义教学质量反馈因子Q

步骤202、对教学质量反馈因子Q

步骤203、对教学无量纲化因子Q

步骤204、步骤204、计算每个记录项的标准差：

步骤205、基于记录项f，采用AHP层次分析法，确定反馈辅助评判因子ω，ω＝(ω

步骤206、计算课程k教学质量反馈指标：C

步骤207、计算课程k的学员学习质量均值：

步骤209、通过以下公式计算课程k的教学质量指标T

T

本实施例公开的基于双向的学习质量评估方法与传统的教学模式相比：

突破了传统模式受制于时间、空间、学员数量、科教条件等限制，形成了现场与网络共存互补的教育格局。持续推动继续医学教育工作健康、有序开展。

结束了继续教育工作半手工半自动化的管理方式，实现继续教育活动全流程闭环，通过统一平台完成继续教育活动的全周期管理。还能够应对突发情况，迅速开展会议和直播培训，再应急培训中发挥了重要作用。

对线上继续教育活动全过程进行数据采集和挖掘，创造性实现了继续教育活动全流程在线监管、教学质量(学员的学习质量以及老师的教课质量)多维度分析。为优化课程、提升教学质量、完善继续教育活动管理提供了决策支持。

本实施例适用于继续医学教育，临床医务人员无论来自三级综合性医院，还是社区医院，其日常工作繁忙。本发明的继续医学教育闭环管理系统，为医务人员提供了灵活、弹性、便捷的学习资源和条件，可以利用碎片化时间完成继续医学教育，以更新和丰富自身医学知识和技能。

实施例2

本实施例公开了继续医学教育闭环管理系统，用于实现实施例1所述的基于双向的学习质量评估方法，包括：策划模块、课程开发模块、学习模块、学习采集模块、教学反馈模块、教学质量分析模块和优化模块。

进一步的，策划模块，被设置为根据需求预先设置教育管理模式；

课程开发模块，被设置为基于教育管理模式配置对应的课程教学模式；

学习模块，被设置为给学员提供学习平台，学员在学习平台上基于所述课程教学模式完成线上学习；

学习采集模块，被设置为采集并存储每位学员的学习过程记录，同时获取每位学员的测试成绩；

教学反馈模块，被设置为采集并存储学员在学习过程中生成至少一份教学质量反馈记录；

学习质量分析模块，被设置为创建学习指标评判模型，基于所述学习过程记录和测试成绩得到学员的学习质量指标，基于学分规则对符合条件的学员按照学习质量指标进行降序排列，并对前n名学员授予学分，n为本次课程可授予学员数量；根据点击和停留记录、有效学习时长、考试成绩、互动答疑参与情况等，通过汇总数据综合评估学员学习质量。不仅针对单次课程，也可以综合历次学习记录进行对比分析，以报表的形式提供给管理人员。

教学质量分析模块，被设置为创建教学指标评判模型，基于所述教学质量反馈记录生成关于课程的教学质量指标；采集教学质量相关的数据及教学反馈，其中教学质量相关的数据包括学员基本信息、每时段/每课参与学习人数、高峰学习时段、每课/每人的学习时间记录、点击和停留记录、课程学习时间安排、学习进度、中途离线次数、阅览学习资料时长、无效学习检测命中次数、回放学习视频片段次数、参与考核人数、每题的答题正确率、及格人数、学分获取情况、答题明细、互动答疑参与记录等，还包括授课专家基本信息、授课形式和授课时长等。教学反馈根据柯式模型分为四个方面：反应层：采集学员、授课老师的满意度以及线上互动、远程答疑的参与度；学习层：主要采集学员授课后理论、技能等是否提升以及培训目标的完成情况；行为层：主要采集学员培训后在实践中行为改变情况；结果层：采集学员所在组织、单位因学员的学习而引起的绩效改变情况等。数据采集模块贯穿了整个学习过程，为教学质量评估提供数据支撑。

优化模块，被设置为基于所述教学质量指标不断优化教育管理模式和课程教学模式。