船员考试试题改革方向研讨(试题改革修订)

,Click to edit Master text styles,Second level,Third level,Fourth level,Fifth level,*,Click to edit Master title style,Click to edit Master text styles,Second level,Third level,Fourth level,Fifth level,Click to edit Master title style,*,Click to edit Master text styles,Second level,Third level,Fourth level,Fifth level,Click to edit Master title style,*,船员考试改革探讨,中华人民共和国海事局,中国海事服务中心,2011,年,6,月,1.,船员考试改革背景,3.,船员考试改革重点、难点,4.,船员考试改革应用基础,5.,船员考试智能试题（实例）研究,目 录,6.,船员考试未来方向,2.,船员考试改革方向,1.,船员考试改革背景,船员适任,随着我国航运事业和现代科技的高速发展，现代航海技术也在日新月异，船舶也在向着大型化、专业化的方向发展，这种发展趋势对船员的相关技术和实操水平的要求越来越高。,现代网络、仿真等高科技信息技术的发展为海船船员适任试题研究开发新一代考试系统提供了条件。,船员考试取得了一定的发展，但是目前的考试试题、考试方法与正确评估船员实际水平的要求存在一定距离。,1.,船员考试改革背景,-,正在修订的中华人民共和国海船船员适任考试、评估和发证规则,-,应试者可在具有全功能仿真平台的二维及三维立体可视化系统界面上，进行与实船功能相同的仿真操作，并将操作过程和结果进行自动记录和评分，实现真正意义上的集理论、实操为一体的智能考试模式,.,船员考试改革,船员考试内容改革,船员考试方法、方式改革,-,新修订的中华人民共和国内河船舶船员适任考试、评估和发证规则,1.,船员考试改革背景,强调电子海图显示与信息系统（,ECDIS,）的应用。新增使用,ECDIS,保持安全的航行值班（操作级）和使用有助于指挥的,ECDIS,和附属系统，以保持安全的航行（管理级）的要求。,简化天文航海的知识、理解和熟决策练要求，提倡使用电子航海天文历和天文航海计算软件。,驾驶台资源管理成为强制性适任标准。,新增领导和团队工作技巧的使用（操作级）和领导力和管理技巧的使用（管理级）的强制性适任能力。,新增海洋环境保护意识方面的知识、理解和熟练要求。,新增按照船舶报告系统和,VTS,报告程序的一般规定进行报告的内容。,机舱资源管理成为强制性适任标准。,新增领导力和团队工作技巧的使用（操作级）和领导力和管理技巧的使用（管理级）的强制性适任能力。,2010,年,6,月,21,日,-25,日在菲律宾马尼拉召开的国际海事组织缔约国外交大会上审议通过,STCW,公约马尼拉修正案，修正案将于,2012,年,1,月,1,日生效,1.,船员考试改革背景,考试,中心,经过多年的工作实践，不断创新，研究考试理论，结合中国国情和国际先进的考试理念开发出了具有国际先进水平的计算机考试系统,、,评估系统，并已经在全国范围内推广使用，使考试工作变的更加公开、更加透明,、便利,。,组卷系统,考务系统,终端考试系统,Add Your,Title,2001,年发布,2004,年升级至,2.0,2005,年升级至,2.4,2006,年系统重构支持批量操作,2007,年支持分考场,2008,年支持网络考试,2009,年全面实现自主考试,1.,船员考试改革背景,船员考试集成平台,船员考试系统及平台建设,海船、内河船舶船适任计算机考试系统,海船船员船舶电站评估系统,海船船员,GMDSS,操作员评估系统,。,海船船员英语评估系统,海船船员气象评估系统,海船船员货运积载与系固评估系统,考试,中心,经过多年的工作实践，不断创新，研究考试理论，结合中国国情和国际先进的考试理念开发出了具有国际先进水平的计算机考试系统,、,评估系统，并已经在全国范围内推广使用，使考试工作变的更加公开、更加透明,、便利,。,1.,船员考试改革背景,目前试题类型,主要是单项选择题，英语,、,气象关联题事实上也是四选一的形式，无法真正,考察,学员的真实水平。,学校和学员专注于试题答案的选择，而忽略知识和技能的学习。,适任考试总体理论性太强，理论与实践结合的程度不够完善。,由于全面实现计算机终端考试，为方便操作，全部试题都是客观题，取消了以前的主观题，虽然降低了工作量，但对学员们的整体、个人真实水平的分析、判断的难度加大。,考试题型,设置单一化,主观题缺失,试题理论性强,采用,计算机考试，所有试题、试卷不再对外公布，无法对做过的试卷进行评价、综合分析，只能通过每年的题库审定请专家进行综合分析评价。,试题评审,船员考试试题现状,1.,船员考试改革背景,根据国际公约对船员,适任,的要求，通过考试应使船员能够从知识、理论上达到要求，考试应选用与船员实践密切相关应知应会的内容。,目前,的考试系统,及方法,实质上是对船员能力进行的是书本知识的考察，与上述要求存在距离。,目前船员考试仍局限于书本考试模式,现行考试与时代高水平要求存在一定距离,目前的考试系统无论是在考试方式上，还是在试题选用上都比较难达到要求，无论怎样变革，考试都带有纸上谈兵之嫌。,目前的船员考试,方式,-,计算机终端系统,优点,：,首先，工作效率高，自动化程度高。,其次，,电脑进行统计与分析，及时反馈,；,第三，符合教育测试的有关理论，四，安全保密性强。第五，能突破地域的限制，有利于远程,考试,的实施，也能保证大规模的考试在异地能够实时进行。,但是现行的船员考试是传统纸笔考试形式的计算机化，完全实现了“无纸化”考试，虽然提高了效率，但从本质上讲，没有从根本上改变书本知识考试的模式。,船员考试试题现状,1.,船员考试改革背景,多媒体试题的答案目前还只能是四选一的结果，或多选题的形式，结果有唯一性，不能实现智能、模糊评判，对学员知识的熟练掌握、操作程度不能进行综合性的评判。,多媒体没有摆脱传统试题的框架，只是在传统试题的加入了,多媒体,演示的内容，使学员从多媒体中得到与实际相关的信息，从而分析得出结论，并不能直观地把学员的分析、操作、及处理过程全面的展示出来，无法真正体现学员的操作水平、分析理解能力。,试题单一,传统试题的变形,在船员考试中试引入多媒体试题是试题改革的一种尝试，,应用于考试中更考察船员真实的理论和实践水平。,船员考试试题现状,2.,船员考试改革方向,以船员适任为目标,考试平台,以“船员适任”为出发点，采用计算机操作化和试题环境仿真化的考试形式，力求具有对船员的实际能力有较高信度的评判能力，能够成为我国权威的、公正的、方便的、功能齐全的船员考试,方式,。,试题改革方向：智能试题,技术支撑平台为基础,考察船员能力的最好方法是让受试人员处于与船员实际工作环境类似的考试环境，并设置类似实际工作可能碰到的问题，考察受试人员解决问题的能力，并据此给合理的评判。,3.,船员考试改革方向,打破传统纸面理论考试难以实现的技术操作考试的束缚，使应试者可在二维、三维可视化操作界面上，结合理论进行与实船功能相同的操作，并,能,开展,导致,实船,设备损坏的性能实验、参数设定和工况变化等理论知识和应急操作，由不可能纳入培训和操作评估内容而变为现实，对船员实操技能会有更大提高和进步。,考试可以自动记录和评分，实现真正意义上的集理论、实操为一体的考试模式。,对考试的全过程，即试题库建设、组卷、试卷分发、考务、评测、咨询等各个环节提供全面的、统一的技术支撑；,复杂的专家应用系统,是人工智能技术的一项重要应用,，,使考试,各,环节实现计算机智能化操作，避免人为因素的干扰，避免死背试题答案的现象泛滥。有利于考试体制的权威性、公正性的建设。,智能试题要点,提供模拟的航海真实环境,全自动操作的考试,复杂的,试题,专家应用系统,3.,船员考试改革方向,智能化,直观化,试题应,具有模拟人类考官的智能特征和客观判断力。,具有智能的辅助,试题,建库能力,。,试题技术支撑平台,提供与,实船,环境相仿的,、直观的,计算机仿真环境（界面）,考试人员的,操作,行为与真正实际环境中处理类似情况的行为有较高的一致性,试题技术支撑平台,应用形式是基于网络化,的大批量的测试,网络化为系统建设尤其是题库集中广大社会资源提供基础。,智能试题建设原则,方便性,试题技术支撑平台环境为,考试交互、组卷、题库建设提供方便和易使用功能。,试题技术支撑平台,具有良好的扩展性，以适应,各种,功能和服务的增长和增强；,适应不断提升的软硬件环境。,网络化,扩展性,试题环境,需要从数据传输、数据存储、权限管理方面保证系统安全可靠，,从架构设计方面保证,试题技术支撑平台,应安全、稳定地运行稳定运行。,安全性,3.,船员考试改革重点、难点,技术支撑平台是船员考试,改革,的核心，需要开发建设一系列的各专业,模拟,平台来实现船员适任考试的功能,，平台,能满足不同层次、不同专业,船员,考试的需求。,以船员适任为目标，以船员实际工作要求为原则，,建立船员考试标准体系，对船员考试实行统一的评,价,标准，使船员考试,评价,有据可寻。,在船员适任考试技术支撑平台基础上，以船员,考试技术规范,为依据，全面构建船员考试智能试题库（试题和评判规则）。,船员考试,技术规范,建设,技术支撑平台,建设技术规范,智能试题建设,及评判规则,2.,船员考试改革方向,状态树,专业模拟器整合,评判模型运行机制,试题构建,3,.,智能,试题构建平台,:,试题构建不同于状态树构建，而是对模拟器初值的设定和初始数据加载，还有就是,评判标准,的加入等）。,1.,智能,试题,基本原理：,以状态树运行机制作为其核心结构,即操作化交互的所有实现的将以状态树运行形式作为基本运行形式,2,.,专业模拟器整合,：我国现有的经过十余年研究开发的各类专业模拟器有非常高的水准，利用,和整合专业,模拟器来增强考试交互环境的逼真性和专业性；,智能,试题（原型）,基本技术路线,3.,船员考试改革重点、难点,智能化交互,智能化是智能,试题,最基础的、最重要的要求。,高效并发处理能力,扩充考试交互平台，加载模拟器,智能,试题,，参与考试人员众多，实际应用时，必须承受众多考试人员的同时在线考试，这要求系统有很高的并发处理能力。,扩充考试交互平台，使之众多的模拟器系统在系统中互相调用、共享数据、协同运行、平滑过渡,试题,实现的工程技术重点,、难点,作为实用系统建设和软件工程建设，实用智能船员考试系统在工程技术上还存在以下几个方面的难点：,.,各种的模拟器系统的改造及相关评判模型研究,实现各项辅助功能,智能试题推广应用,，还必须实现一系列辅助功能，这部份功能实现的工程量将占整个工作量相当比重,。,3.,船员考试改革重点、难点,试题构建难度高,试题评判需要完善,试题交互环境离真实性和专业性还有距离,考试交互环境的实现在与真实工作环境有较大的距离，与作为高水平权威考试系统的要求有距离。,智能,试题,与传统试题在形式有根本的不同。试题形式上是一棵棵状态树，它描述了该试题的所有的操作序列，出题过程就是一个构造状态树的过程。,考试成绩的公平、公正是考试权威的体现。智能,试题,对考试的基本评判依据是考试的交互过程。对于不同类型甚至同类型的试题可能其评判模型都会不同。,。,实现的工程技术重点,、难点,智能化交互难点,3.,船员考试改革重点、难点,考试交互,平台,技术支撑平台,除要实现系统的智能,试题,功能外，还应具备网络化，易扩展特点、具备完备的考试交互、考务管理、辅助建库、考试指导等功能，,需要,要作好,支撑平台,设计，加强软件工程质量控制。,专家,评判平台,建库辅助平台,考试管理及指导平台,试题技术支撑平台研究,4.,船员考试改革应用基础,基本实现操作化交互考试,实现综合化考试目