巴黎人视频通话口语测试的开发:第四阶段的运筹学试验和四个阶段测试开发周期的总体总结

立即下载

摘要

对语言测试的探索是相对罕见的,它最大限度地利用技术将考生和考官远程联系起来,并保持考试的交互性结构. 这种技术的创新使用有助于在许多情况下公平和公平地使用评估,并需要有一种合理的有效性论据来支持. 解决这些差距和机会, 巴黎人口语考试是通过视频电话技术进行的, 试用过, 并在一个四阶段的研发项目中得到验证.

加强有效性论证部分的努力指导了测试开发和验证的迭代过程, 来自全球7个地点的595名考生和32名考官参与了一系列混合方法研究. 每个验证阶段都有助于更新有效性参数, 主要是在评价和解释推理方面, 用于VCS (Video Call Speaking)测试.

第四阶段, 这是本报告的特色, 考察了前一阶段提出的一些管理问题, 如测试中每个部分的时间分配和对话者框架的变化, 以及考生和考官对VCS测试的看法. 375名测试者记录了完成每个测试任务的平均时间,以调查现有的时间在VCS模式下是否足够. 十个考官, 在这个阶段是谁进行测试的, 他们被要求回答一份问卷,并参加半结构化的焦点小组,分享他们对VCS测试的看法. 测试者也通过问卷调查, 此外,有些游戏在焦点小组中提供了更深入的测试感知.

总的来说,现有的时间为每个部分被发现是足够的. Examiners perceived using the revised interlocutor frame as straightforward; however, 还提出了几项附加的小改动. 他们还认为,应试者对视频通话模式感到舒适,不会被吓倒, 他们发现整体测试交付相当舒适, 和整体, 他们认为他们的评级体验是积极的. 一小部分考生认为VCS测试让他们充分展示了自己的英语能力, 他们对声音质量的看法普遍是积极的.

报告以在整个测试开发过程的四个阶段中收集的有效性证据的总结结束, 在有效性论证框架内的背景.

研究员(s):

惠媛·李,米娜·帕特尔,珍妮·林奇和伊芙琳娜·加拉奇

标签:

考官和评分-口语 , 巴黎人-口语 , 测试交付
立即下载