不会失败的e-Learning–如何高效制作“优质测试”

2020.01.17
人财开发资讯

   “没想到出测试题这么不容易啊……”

 

     一开始只是作为一个学习教材的附加物来出测试题的,没想到做起来需要考虑的事情比想象中多很多——公司内部制作e-Learning教材的负责人应该有过这种体会吧。

 

     制作测试通常是为了检查学员的“知识的掌握情况”。既然要制作成套学习教材,当然也要制作考试用的测试。

 

     不管怎么说,其主要目的是“检测学员对学习内容的理解程度”,因此可以根据学习内容来思考出题内容,但是这非常困难。这是因为在出题时,出题人只掌握与“正确答案”对应的学习内容是远远不够的。


目录 

1. 什么是“优质测试”?

1-1. 目标明确的测试

1-2. 测试题具有妥当性和可靠性

1-3. 可以轻松实行的测试

2. 如何制作“优质测试”

2-1. 制作阶段1:确定测试目标(测试的内容和标准是什么)

2-2. 制作阶段2:确定测试式样(类型,出题形式,有无解析,合格标准等)

2-3. 制作阶段3:根据式样做题目

2-4. 制作阶段4:做成课件

2-5. 制作阶段5:根据测试结果做改善

3. 总结

 

1. 什么是“优质测试”

      首先,让我们明确一下什么是“优质测试”。

 

      不管从实际进行测试的“学员的视角”还是从出题的“提供方的视角”来看,“优质测试”的条件是相同的。具体而言,有以下三个方面。

·       测试目的明确

·       测试题具有妥当性和可靠性

·       学员能够轻松作答

     接下来,让我们详细看一下“优质测试”的条件吧。

1-1. 目标明确的测试

     第一个条件是明确“此测试的目标是什么?”。如果没有目标,就无法开始探讨测试题的式样,以及题目和解析等的制作。

 

     另外,如果目标不明确就开始的话,在制作过程中很有可能会出现返工的情况。这会导致制作进度的延迟和制作成本的增加。还可能会做出没有意义的测试。

 

     万事开头难。为了避免“本不应该这样..”的后悔发生,首先,从“此测试的目的是什么?”开始思考吧。

1-2. 测试题具有妥当性和可靠性

     第二个条件是测试题具有妥当性和可靠性。为此,必须制作“能够用所学知识来回答的问题”。因为测试的目的是提问学员从教材中学到的知识,并检测他们的理解程度。

 

     不要只是因为方便出题,而把超纲的概念或想法(相关知识等)作为题目。这除了会给学员带来混乱,还会成为咨询量增加的主要原因。

1-3. 可以轻松实行的测试

     出题时,从学员的角度进行思考很重要。

 

     例如,当问题是没学过的内容时,学员会想“我还没有学过!”从而陷入混乱。此外,即使问题是学习范围内的知识,题目本身也会让学员感到不必要的压力。例如,只读一遍很难理解在问什么;因为每个问题的提问方法都不同,学员难以专注于问题的内容。

 

     测试题必须针对所学知识,内容清晰直白。

2.如何制作“优质测试”

     接下来,让我们确认一下具体如何制作“优质测试”。

     测试题基本上根据以下流程制作。

 

1. 确定测试目标(测试的内容和标准是什么)

2. 确定测试式样(种类,出题形式,有无解析,合格标准等)

3. 根据式样做题目

4. 使用课件制作软件来制作教材

5. 根据测试结果做改善

 

     接下来,让我们详细看一下如何制作“优质测试”吧。

2-1. 制作阶段1:确定测试目标

     在出题中最重要的事情是确定“测试的目标”

     坦白来讲,主要目的是“检测学员对学习内容的理解程度”,但是理解程度的广度和深度,随着配套的学习教材的目标而变化。

     要明确以下三点。

①与测试题配套的“学习教材”的目标是什么?

②根据学习教材进行测试的目标是什么?

③衡量学员理解程度的标准是什么?

     请看具体的案例。

 ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄

-  案例  -

       Z公司生产面向消费者的产品,并通过其直营店进行销售。虽然新产品每月发布一次,但问题是“无法及时向站在店门口的兼职人员普及有关新产品的信息”。尽管Z公司在发给员工的电子邮件中附加了PDF文件用来提供信息(新产品功能,客户目标,接待客户谈话技巧等),但是无法知道店铺员工是否真的阅览。

       因此,公司决定开始通过e-Learning提供产品信息。这是因为e-Learning可通过查阅听课记录来确认员工是否已阅新产品的信息,并根据测试分数来检查其理解程度。

 ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄ ̄

     接下来是目的和标准。

 

①在这个案例中学习教材的目的是什么?

     在这个案例中,学习教材的目的是“店铺工作人员可以获得新产品的相关信息,用简单易懂的方式向客户介绍产品”。

 

②根据学习教材进行测试的目的是什么?

     学习教材的目的是“店铺工作人员可以获得新产品的相关信息,用简单易懂的方式向客户介绍产品”,测试的目的是检测其完成情况。

 

③出题的标准是什么?

     在制作试题时,有必要为出题的范围,深度,难度等设置标准。例如,虽然上述案例的学习目的是“店铺工作人员可以获得新产品的相关信息,用简单易懂的方式向客户介绍产品”,但是“介绍”的水平可能参差不齐。

 

     鉴于对象是轮班工作且人数众多的兼职人员,这个培训措施在有限的时间内发挥出最大的效果非常重要。因此,没必要让他们连产品特征的详细规格都记住。检查的重点是员工是否已经掌握了有关新产品的基本信息,以及接待客户的交流方式。以此为前提设置出题的标准。

2-2. 制作阶段2:确定测试式样

     确定了测试的目的后,该考虑为达成目的应该出什么样的题。要考虑的主要类型如下:

① 测试种类

② 出题形式

③ 有无解析

④ 合格基准

 

①     测试种类

下表显示了几种测试种类。请根据目标去选择最佳类型。

(图表)测试的种类

② 出题形式

     出题形式通常使用“单项选择”、“多项选择”、“判断对错”等。根据问题的内容,难易程度大致如下:

 

“判断对错”<“单项选择”<“多项选择”

 

    如果想更准确地测试学员的理解程度,“单项选择”比“判断对错”更合适,比起“单项选择”,“多项选择”会更好。

 

     “随机出题“是进一步增加难度的方式。即每次测试时都更改出题的顺序。此外,还有“打乱选项”,即更改选项的顺序。

 

     另外,“下拉式选择”是单选的变形。还有论述题,需要以文章的形式作答。关于论述题的试卷评分是很难的。

 

③ 有无解析

     评分之后需要决定是否提供解析。

 

・不带解析的类型

单纯提问学习教材内容的问题,则无需解析。这是因为,如果学员分数不及格,让他重新学习不清楚的部分然后进行测试,学习效果更好。

 

・附带解析的类型

专题讨论(案例研究)的问题一般需要附带解析。由于案例分析题是应用题,穿插了教材中学习过的知识,因此答案难以理解。解析有助于学生掌握应用的思考方式。

此种题型不仅是单纯的“测试”,其本身还包含“学习”的要素。

 

④ 合格标准

     虽然设置测试的合格标准是常见做法,但是这些标准需要根据学习的内容和目的进行调整。如下例所示,也有合格标准是100分的情况。

 

例:

要求所有学生掌握最低标准的知识,合格标准为70分

能解决一定水平的问题,合格标准为80分

需要完美的解决问题,例如信息安全,合格标准为100分

2-3. 制作阶段3:根据式样做题目

     接下来是根据最终类型出试卷。注意事项如下。

① 题目形式统一

② 调整文字风格

 

① 题目形式统一

     尽量统一题目的提问形式。题目形式多样的话可能会给学员带来压力,影响他们作答。请看以下不恰当的例子和恰当的例子。

 

<不恰当的例子(混合了多种形式)>

(a)哪个正确?

(b)哪个错误?

(c)哪个恰当?

(d)哪个不恰当?

 

<恰当的例子(形式统一)>

(a)哪个正确?

(b)哪个错误?

(c)哪个正确?

(d)哪个错误?

 

     显然,恰当的例子会让学员在作答时更轻松。

 

② 调整文字风格

     测试卷应用“です・ます ”(日语中的敬体)或“ だ・ある”(日语中的简体)的形式。并不是说其中哪个更好。需要注意的是,两种语体不要混在一段文字里。

     中文的情况,则需要注意词汇的统一性。比如“正确”、“对的”、“恰当”等相近的表达,尽量统一用一个词汇。

      否则也会给学员增加不必要的负担。例如下面的句子。

 

<不恰当的例子(混合了两种语体/词汇)>

  • 日语版

設問文の仕様はできるだけ統一するようにしましょう。仕様が複数あると、学習者にストレスを与え、解答作業に集中できなくなる可能性があるからだ。

  • 中文版

请尽量统一试题的问答形式。题目的提问方式多样的话可能会给学员带来压力,影响他们专心作答。

 

<恰当的例子(统一语体/词汇)>

  • 日语版

設問文の仕様はできるだけ統一するようにしましょう。仕様が複数あると、学習者にストレスを与え、解答作業に集中できなくなる可能性があるからです。

  • 中文版

请尽量统一题目的提问形式。题目的形式多样的话可能会给学员带来压力,影响他们专心作答。

 

     恰当的例子能使学生阅题更顺畅。

2-4. 制作阶段4:做成课件

     试卷完成后,将其做成课件。在这里简单讲一下使用课件制作工具制作教材的过程

 

     首先,根据文档格式制作试卷,以便导入课件制作工具中。下面是使用本公司的课件制作工具导入测试题时,Excel文件的部分图片。

参考:“教材君©”的原稿制作实例

     将该文件(原稿)导入到课件制作工具中,制作出的教材如下图所示。

参考:使用“教材君©”制作的测试题图像

     像这样,只要制作出与课件制作工具格式对应的文件(原稿),就可以在很短的时间内(大约几分钟)制作出课件。修订工作也变得更加容易。

> 教材制作工具-教材君 <

     最多可读取23种类型的文件。轻松制作和编辑e-Learning课件。

 

     使用Lightworks的“教材君®”来制作课件时,最短可以在1分钟内以公司内部资料为基础制作出原创课程。

     此外,共15种类型的出题形式,还可以自由设定测试题和设问,从而制作出各种类型的测试题。

2-5. 制作阶段5:根据测试结果做改善

 

      如果只是在LMS中导入制作好的课件来使用(听课)的话,意义会损失大半。需要关注的是,如何基于测试结果的分析和学习者的问卷调查结果,来对策划之后的方案,或者直接对测试题做改进。分析要点如下。

 

·       测试的目的达到了吗?

·       测试题是否与学员的水平相符?

·       合格标准是否恰当?

·       学习者会有压力吗……

 

     不断进行此类分析和改进将进一步提高测试质量、e-Learning教育的培训质量,以及学习者的满意程度

3.总结

 

      本文介绍了测试的企划方法,大家有没有新的发现呢?

      让我们简要地回顾一下。

 

      “优质测试”是指满足以下条件的测试:

·       测试的目的明确

·       测试题具有妥当性和可靠性

·       能够轻松进行解答

 

      “明确测试目的”尤其重要这是因为测试题的类型与合格标准取决于此。制作测试时,请首先考虑“此测试的目的是什么?”。一旦有了明确的目标,就可以和参与制作测试的全体相关人员确认,并开始制作。

 

     根据测试的目的确定测试的类型并做出试卷,但是此处要注意一定要“从学习范围中出题”。这是确保测试题的妥当性和可靠性不可或缺的一点。

 

      在实际制作试卷时,请注意“不要给学员造成不必要的压力”。具体措施包括“统一题目的形式”、“调整文字风格”、“用简单的句子提问”。这些对细节的考虑都会提高学员对测试的评价。

 

      测试并不是考完就结束了。分析测试结果,听取学员的反馈(评价),对之后的措施和测试进行改进是很重要的。为此,要求测试制作者精通学习教材的内容。

 

      虽然制作测试很不容易,但是如果明确目标,按照步骤制作,其实并没有那么困难。请参考本文试着制作测试吧。