使用数据来改善您的在线课程

当你完善你以前教过或开发过的在线课程时，你就有了丰富的经验，可以据此做出决定。你对学生群体的了解，你从他们的反馈中学到的经验教训，以及其他轶事信息，都可以作为一个有价值的指南，当它涉及到你想要改变什么。

然而，通常忽略的是保存在学习管理系统（LMS）中的数据，这可能是一个可宝贵的工具，用于确定课程需要注意哪些元素。鸿和张（2008）注意到课程数据提供了学习模式，偏好和与学生成就相关的进展的有力方法。当适当使用时，课程数据可以给出学生如何与您的课程元素接触的清晰，无偏见的画面。

在本文中，我们将讨论几种不同的方法，你可以在你的在线课程中挖掘这类数据，以及如何使用它来改善你的学生的学习体验。

在你开始之前

作为一个快速的注意事项，您可能无法访问这里讨论的所有工具，这没关系。大多数的lms都有一些限制，所以很有可能——甚至可能——您必须在如何查找课程数据方面发挥创造性。考虑到这一点，在决定对您的课程进行哪些更改时，考虑并充分利用以下工具。

此外，在分析课程数据时，请记住相关性并不一定意味着因果关系。仅仅因为两个变量相互关联并不意味着这个变量原因另一个。例如，如果你看到学生参与度在某一周下降，这并不一定意味着你的材料没有吸引学生。这可能意味着学生要在截止日期前完成其他课程，或者可能你即将进行的另一项评估要求他们比你预期的更多关注。使用任何你能找到的背景来寻找你的课程数据和你从中得出的结论之间的关联。

现在，让我们看看在线课程中的一些课程数据来源。

学生评估

学生评价是指学生在课程结束时收到并作出的调查。这些评估并不是决定什么有效什么无效的最终结果，但它们提供了有价值的见解，了解您的学生对课程的满意度，以及他们对您的课件和教学的看法。虽然你可能会在两个方向上看到异常值，但总体而言，评估可以帮助你衡量学生认为这门课程满足他们需求的程度。

在查看调查结果时，尝试识别学生回应中的模式。例如，如果学生满意度的平均评级是2.2 / 5，则可能值得注意。相反，如果由于一个学生的一个学生的分数平均下降，你不需要与之那样。模式可以帮助表明学生身体的意见，而不仅仅是那些具有强烈观点的人或另一方的人。

您还应该考虑您的课程背景。（如果您需要在课程设计三角形上进行修复，包括课程上下文，您可以找到一个这里。例如，如果您有一个小课程，异常值将更加严重影响评估的平均分数。同样，如果学生在课程中挣扎，在评估过程中可能会更加重要。然而，这并不意味着，你不应该挑战你的学生。相反，考虑这些结果如何适合课程的整体背景并根据需要确定调整。

最后，您的机构可能的调查可能包含定量和定性数据。虽然定量数据是学生如何感知您的课程的重要指标，但定性数据也提供了有价值的洞察力。在审查学生的评论时，请注意平均值和异常值，就像您的定量数据一样。还需要花时间考虑在您自己的教学哲学的背景下考虑这些评论。重新阅读您的目标，以反映您希望学生离开课程的内容。他们得到了吗？他们的成功与你的课程目标保持一致吗？在返回课程的下一次迭代时，请考虑差异的领域。

活动日志

Black，Dawson和Priem（2008）注意到LMS中的活动日志文件提供了最有希望的自动收集的电子学习数据来源之一。许多LMSS将向教师提供有关学生点击的元素的数据，他们多久访问每个元素，甚至它们仍然多长时间。与您认为学生应在特定资源上花费的时间相比，此信息可能特别有用。

例如，如果学生在大量冗长和深入的教学材料上花费一两分钟，您可能会考虑如何将其拆分或使其更加引人入胜。同样，如果学生在简单资源上花费太多时间，您可能会检查布局是否令人困惑或有问题。

在查看活动日志时，请查找以下行为，并考虑如何鼓励改进的相应策略。

行为	改善策略
学生没有点击资源	修改您的模块介绍。 提及评估方向中的资源。 提醒自己引导学生到论坛，LMS聊天等资源。
学生在资源上花费太多时间	确保资源在认知上适合您的学生。 重写导航指令以确保清晰度。
学生在资源上花费太少	确保模块介绍和相关评估提到了资源的重要性。 有意识地培养资源本身的价值和期望。
学生在评估时花太多时间	确保评估是为您的学生认知的。 确保评估与你的学习目标一致。 确保评估有明确的说明。
学生在评估时花太少的时间	确保评估对您的学生来说不是太简单。 确保学生看到评估与学习目标的一致性。 确保评估(和模块)促进价值和期望。
学生没有发布到论坛	在课程开始时包含一个破冰船或其他工具，以帮助构建在线社区。 修改您的模块介绍，以确保学生知道论坛在学习过程中发挥不可分割的部分。 突出讨论论坛要求。
学生经常发布到论坛	确保学生的评论与讨论论坛主题有关。 提醒学生在你的课程中讨论论坛和网络礼仪规则(无论是在教学大纲，标题，或其他讨论)。

测验报告

如果你的课程使用自动评分评估，LMS应该有学生如何与这些评估互动的数据。这类似于您从活动日志中检索的信息。评估数据将显示学生在测验上花了多长时间，在某些问题上花了多长时间，他们尝试测验或问题的次数，以及他们选择了哪些错误的答案而不是正确的答案。使用这些数据可以帮助确定评估是太困难还是太容易。

据迪克，凯莉和凯莉（2015年）称，教学设计中最关键的信息之一是了解学习者的技能，偏好和态度。无论是在线还是面对面，都会获得这种理解的挑战之一是在整个课程中确定正确的挑战程度。

找到挑战的“甜蜜点”可以帮助学生在你的课程中保持积极性。如果过于简单，你的学生对课程内容的价值感就会直线下降。相反，过于困难的课程可能会使学生气馁，导致他们脱离学习。

你的自动评分测验可以让你大致了解学生对难度的看法。因此，如果你发现学生在测验中进步太快，可以考虑修改题目来增加难度(当然，在保持学习目标的同时)。或者，如果学生在一次测验中遇到困难，看看他们答错的问题，以更好地确定你可以如何为他们简化这个过程。

尺度分析

在审查高等教育中的Rubric使用中，Reddy和Andrade（2010）发现，有规定的学生指导他们的工作经历更高的成就。Rubrics确保一致性和客观性，并帮助您清楚而简洁地传达分配期望。

在检查如何更好地满足在线课程中的学生需求时，请根据这些规则来了解您的学生的性能。如果学生在某些标准中始终如一地得分低，您可以添加或修改哪些资源以帮助它们？或者，换句话说，如何重塑您的指示，以更好地准备成功？修改您的量规时，请考虑以下内容：

• 确保标准与目标和评估对齐。我们知道对我们的目标，评估和彼此对齐的指令非常重要。但是，对于你的统治来说，它同样重要的是。毕竟，您使用Rubrics来评估您的学生是否符合学习目标！考虑到这一点，请仔细观察您的标准。动词是否与目标和评估中的动词对齐？如果没有，您可能需要修改评估，目标，指令，甚至是标题本身，以更好地反映整个过程。请记住，实心课程设计取决于对齐。
• 确保学生对他们提供适当的资源。如果学生在你的评分中某一项得分一直很低，考虑在你的课程中加入额外的资源。修改你的学习材料，添加补充资源，甚至发展实践活动，可以帮助你的学生在评估前掌握这些技能。
• 确保你有明确的标准。虽然学生应该提前看到你的批注，但如果他们不理解标准，那也没什么用。当回顾你的标准时，确保你的期望没有任何问题。学生应该能够看到每个级别，并知道他们必须做什么来满足该级别的标准。例如，“文章包含少量语法和/或拼写错误”的标准可以被澄清为“文章包含3-5个语法和/或拼写错误”。

结论

无论如何收集数据来修改您的课程，请考虑到您的学生。你所做的任何改变都可能会增加学生的成功，但为了改变的缘故 - 而不是改变，而不是植根于你的课程的学习目标 - 可以阻碍你的学生的学习经历。在查看学生评估，活动日志，测验报告或您的rubrics时，请问自己，“此信息如何说明我如何更好地设置学生在课程中取得成功？”该问题的答案最终将帮助您确定如何修改您的课程。

参考

Black，E. W.，Dawson，K。，＆Priem，J.（2008）。免费数据：使用LMS活动日志测量在线课程中的社区。互联网和高等教育那11.（2），65-70。

迪克，W.，Carey，L.，＆Carey，J.O.（2015）。系统的系统设计。波士顿，马：皮尔逊。

Hung，J.，Zhang，K。（2008）。在线教学中揭示在线学习行为和活动模式以及通过数据挖掘技术进行预测。Merlot在线学习和教学杂志，4（4），426-437。

Reddy，Y. M.，＆Andrade，H.（2010）。高等教育专栏用途综述。《高等教育评估与评价》，35.（4），435-448。