加强国际交流与合作 做优会计资格考试品牌

    编者按：为了学习和借鉴国外先进的考试测评经验和做法, 跟踪、了解国际考试测评技术的发展趋势和前沿资讯，不断提高会计专业技术资格考试水平，近日，财政部会计资格评价中心派人参加了国际考试行业协会（ATP）第18届年会，与会者对所学、所悟进行了梳理和总结。

以创新引领考试改革

    近日，财政部会计资格评价中心参加了在美国亚利桑那州斯科茨代尔市召开的国际考试行业协会（ATP）第18届年会。

    自2012年以来，会计资格评价中心已连续6年参加ATP年会。通过参加会议，会计资格评价中心与国内外相关考试组织管理机构建立了联系，对其有益管理经验在会计资格考试的创新中予以借鉴。

年会热点突出

    此次年会的主题是“行业引领：考试中的创新（Leading the Conversation：Innovations in Testing）”，议题覆盖考试技术最新理论与方法、机考在人才选拔中的应用、命题技术与考试数据管理、测评与心理测量、考试风险与防范、考试实施与运营模式等。

    从演讲和互动的内容看，年会关注的热点主要包括如下几大方面。

    一是考试认证，包括向考试主办方和考生提供“商业智能”服务、无纸化考试在人才选拔中的应用、考试认证的发展方向、对操作类考试的判分等。

    二是考试理论与应用方向，包括考试创新知识产权的保护、项目反应理论的演变、资格考试和水平考试中项目反应理论应用的非技术性介绍、如何使测评目标与考试期望值一致、试题分析等问题。

    三是教育方向，包括改进大规模阅读测试的形式、向考生提供成绩报告、远程在线教育测评安全等问题。

    四是组织选拔方向，包括应聘者对测评和选拔过程的反应、人才获得、人才甄别以及测评在人才管理中的应用、综合性测评和人才管理战略等问题。

    五是考试安全，包括考试安全讲座、如何防止考试作弊、考试作弊的典型案例、如何通过互联网管理考试作弊行为等问题。

    六是跨行业，包括利用虚拟工具优化考试开发过程、考试项目的转型、创新性测评等方面。

让会计资格考试“大数据”化

    会议期间，会计资格评价中心代表与国内外同行进行了沟通交流，了解国际考试行业前沿资讯和发展动态，有如下几点突出感受。

    一是以专业化提升会计资格考试服务质量。

    从此次年会的参会人员可看出，考试行业的分工愈加精细，报名、题库、试题发送、监控、考生生物信息识别等各个环节都有专业的服务商提供精细化的服务，还有专门为视力障碍考生提供服务的考试服务商。传统的“一条龙”式服务已不多见。

    参与此次年会的CFA（特许注册金融分析师）、AICPA（美国注册会计师协会）考试机构演讲人员均提到，他们正结合自身考试的特点，面向考生提供更加优质的服务。AICPA开始采用谷歌应用程序应用于考生考前、考中、考后的相关工作。同时，将谷歌应用程序应用于考试内容变化的调研。AICPA也提到谷歌应用程序存在一定的安全问题，需要进行监督和完善。CFA考试则更加注重在考试时长、每年考试次数、考试题型、考试语言等方面为考生提供更加优质的服务。

    国外考试机构多为民间机构运作，需要为考生提供优质的服务才能吸引更多的人参与考试，其主要方式是提高考前、考中、考后各环节的服务质量。我国会计资格考试应进一步加强无纸化考试标准示范考场建设，以服务考生为出发点，创新考试组织方式，丰富会计资格评价网内容，优化完善无纸化考试系统，全面提升考试信息安全防护水平，让会计资格考试及其评价网成为会计人员成长、成才的“助推器”。

    二是积极将大数据运用于会计资格考试。

    目前，已经有一些考试利用数据库进行大数据跟踪分析，通过分析考生的分数分布、考生的学习能力及知识掌握情况，积极探索将大数据分析应用于考试的不同环节。

    目前，会计资格考试的结果仅用于试题质量分析，我们应当利用大数据分析方法积极开展考试题目内容的分析。通过合理分析考生每道题目的答题情况，及时掌握相关知识点在广大会计实务工作者、高校教学中的应用情况，充实相关知识点在会计资格考试辅导教材中的讲解，发挥会计资格考试对会计人才选拔、培养的导向作用，提高会计资格考试的品牌价值和形象。

    同时，应延伸会计资格考试服务链，将会计资格考试试题分析结果运用于考试后跟踪评价工作。通过分析会计资格考试的结果，识别出考生学习过程中的难点。将发现的难点知识点作为职业能力提升项目视频讲解内容，扩大相关法律法规政策的普及面，助力会计人才成长。

    三是加强国内外交流与合作。

    一方面，加强与国内考试机构的交流与合作。作为考试主办方，会计资格评价中心可加强与国内考试行业的横向交流与合作。实现“走出去，请进来”，增加与教育部、人社部、卫生部、交通部等这类具备考试主办经验的考试管理机构交流合作，采取调研或邀请专家讲座等方式。多参加国内考试行业方面的会议。

    另一方面，加强与国际考试机构的交流与合作。考试ATP年会以其规模大、创新学术与实务著称。这主要同以美国为首的发达经济体人才测评市场化程度高、测评理念先进、技术发达有关。相比起来，我国会计资格考试无纸化程度领先于国际同行，但在测评理念、管理体制、新技术开发与运用上尚存在一定差距。

    因此，应通过加强与国际同行的交流与合作，关注国际考试与人才测评的动态，积极开展相关研究，促进引进吸收先进理念和技术成果。同时，还应积极通过ATP平台，推介我国会计资格考试的经验和做法，不断探索人才测评新方法和新路子，做强做大做优会计资格考试品牌。

ATP年会关注考试“七大主题”

    在此次ATP年会中，几位演讲者的精彩内容让人印象格外深刻，分享如下几个主题。

    主题一：考试认证与胜任能力框架

    人力资源证书是被行业认可、经第三方验证的便携式认证或职业许可证，可以使个人在高需求领域工作，包括学位、从业证、资格证书等。证书被广泛用于各种就业市场。有效的证书认证为雇主提供有关其员工技能水平的信息，有效降低了雇主和求职者之间的信息成本。

    对于如何构建一个考试认证体系，应包括如下几点。

    一是建立一个考试认证。首先，应进行相应工作的分析。具体包括一项特定工作要求的职责、任务、知识、能力和其他要求。其次，建立胜任能力模型。胜任能力包括工作所需要的知识、技能、能力和其他特性（品质）。胜任能力模型是在特定的工作、职业或组织中定义考核要求。

    二是胜任能力模型的例子。胜任能力包括安全意识、客户服务意识、责任意识、团队意识、沟通意识和职业道德。

    三是开发一个胜任能力模型。开发一个胜任能力模型需要经过专业学术文献述评、输入关键要点、内容效度调查、完成相应模型（包括能力、行为和关键的行为指标）等步骤。

    四是制定测试规范。开发胜任能力模型后，要制定必要的测试规范。

    五是项目开发。制定测试规范后，要进行具体项目的开发，并评估自身的开发能力。其中，评估能力的测量方法应考虑的因素包括能够达到预期目的、易于实施、对真假具有敏感性、实际的开发成本等。

    主题二：持续考试的动态分布式方法

    全球化和动态的考试开发流程为，从程序设计开始，依次经过测试设计、内容设计、内容评估、Beta分析、标准设定，最终到用3种语言进行实时的发布。

    这种开发方法的优点是，在其他地区，能够有效提高考试知名度和扩大考生范围；能够精准的覆盖考生所在区域，减少偏差；提高测试开发人员招聘与调度工作的灵活性。

    主题三：为测试管理策略评估你的选择

    开发一个考试需要从位置、监督、计划、模式四个维度进行管理。其中，位置包括构建专业的考试中心、选择特定的考试位置、试卷的远程传递；监督包括面对面监考、远程监考、无人监考；计划包括随需应变、窗口、事件；模式包括纸笔考试和无纸化考试等。

    以CFA考试为例，他们认为一种考试模式可能无法检测所有考生的真实水平，需要有其他辅助的方法进行支撑。关于考试风险等问题，CFA考试管理者认为，应将考试期间的安全责任管理交给软件供应商负责，在测试管理过程中的安全风险主要是访问量的增加；考试数据的传递与存储风险主要是存储形式转换过程中的风险。关于考试成本，CFA考试管理者认为，主要是考试组织者管理费用和考生成本的增加；考试管理者需要评估全球范围内考试可拓展空间，发掘新的增长点。

    主题四：教育领域的大数据和分析

    大数据需要有大的数据库，这些数据必须由计算机进行分析，揭示其中模式、趋势和管理，尤其是人的行为和互动关系。大数据需要有共同的语言，集合和分解不同的统计数据。

    大数据库应当包括人口特征、性能指标（测试参数）、行为指标、情感指标。其中，人口特征包括年龄、性别、分数、民族等；性能指标包括需要达到的分数、项目分析、教师水平等；行为指标包括执行任务的时间、测试时间等；情感指标包括测试者面部表情的记录、考试动机、学习持久性等。

    大数据应该具有一定的可视性，包括显示界面具有不同色彩的板块、显示不同的数据、能够进行可定制的服务。

    主题五：精益原则在项目开发与管理中的应用

    AICPA选择精益原则的原因是这种方法在很多行业取得了成功，软件开发方面要求更加准确。

    精益原则要求消除浪费、注重质量、创造知识、推迟决定（降低软件开发的不确定性）、迅速交付（软件开发成功后迅速交付使用）、尊重员工、全局优化（优化整个价值流）。

    演讲者认为，商业环境要求考试行业能够集中于一个地区做自身最需要做的工作，利用现有的技术,从事相关业务，不耗费大量的内部资源。

    主题六：考试安全

    考试安全是一个多维议题，随着信息技术的发展以及在考试中的运用，考试安全问题也较过往更加复杂。作弊、**、信息泄露等都对考试安全造成威胁。有效的做法是在考试流程的不同部分启用不同的安全程序或技术，将考试安全植入每一项与考试相关的战略规划和活动中。

    考试安全框架主要包括考试、考生和发送三个维度。在考试方面，包括在试题开发过程中保护知识产权，提前杜绝考试欺诈，在试题设计中制定安全策略等。在考生方面，包括考生身份验证——采集电子照片及签名、掌纹静脉扫描技术，筛查有**和其他违纪记录的考生，强化考试授权，将现场采集的考生照片印制在成绩报告单上。在发送方面，采用专业考试中心并实行最高级别的安全措施，加密发送考试内容；严格执行安全协议，实时监控考生行为；考试管理员每年需通过认证。

    主题七：考试与试题开发

    在考试与试题开发方面，主要探讨的问题包括试题开发与承包服务模式、试题开发与组卷、考后试卷分析3个方面。

    在试题开发与承包服务模式方面，包括试题开发研讨会模式和承包服务模式。

    比如，承包服务是一整套的开发服务模式，考试主办方与考试服务商签订试题开发合同。由考试服务商聘用内容开发合作伙伴和学科内容专家完成试题编写与审核。考试主办方通过关键绩效指标实现对试题开发过程的监控。

    在试题开发与组卷方面，包括题型、组卷和试题测试。

    比如， 组卷包括固定问卷（生成多个包含一定数量试题且在统计意义上等值的试卷版本）、线性动态考试（根据定义好的内容和统计特征从题库中随机抽取试题）和计算机化适应考试（根据应试者回答前面试题的表现从题库中挑选后面的试题，目的是为每个考生挑选难度适中的试题，应试者答题表现好，后面试题难度就会增加，反之则降低，考试的长度可以固定或不固定）。

    在考后试卷分析方面，包括效度与信度、公平性、分数线设置与等值化。

    比如，效度是开发和评估考试时应考虑的最基本因素之一。评估试题开发的过程，分析试题间关联性及其是否与考试方案相符等均可用来证明考试的效度。信度指考试的一致性和随机误差的大小。

                                                （作者单位：财政部会计资格评价中心）

福建考试培训，为您提供专业的考培服务！