在谷歌，我们鼓励人们大胆尝试，快速迭代。通常我们开发新产品的逻辑都是：提出假设、收集用户反馈、发布产品、评估用户体验、快速迭代。在我们的内容专家、教学设计专家和工程师的共同努力下，经过8周的开发，我们的第一门课程—“谷歌搜索（PowerSearching with Google）”成功发布。课程包含28个单元，每个单元都有一段视频、字幕、行动练习、3个作业，以及完成课程的证书。起初，我们的界面还有许多待完善之处，但正因为我们快速发布了第一版课程，使得我们及时收集到学员的互动数据，进而利用这些数据来对课程迭代。几个月后，我们发布了第二个版本，使得活动指导语更浅显易懂，论坛的链接更显而易见，考试题目更新颖有效。此外，学员在课程论坛中互相解答疑问也使得我们能够减少专门的答疑人员。

互联网使得我们全球各地的学员可以彼此连接。但这也为课程开发者带来巨大的挑战：如何确保一门课程对于来自不同国家、具有不同文化背景，喜欢不同应用方式的学员都有价值？

尽管在开课之前已经对我们认为的目标学员进行了课程可用性调研，但实施过程中还是发现，实际情况远比我们想象的复杂。比如，通过数据分析发现，每个课程单元的挑战性任务超出了大部分学员的现有水平，只有一小部分学员能够顺利完成。后来，我们便将这些挑战任务作为基础课程内容的附加题，而非必修项。此外，我们并没有考虑到，不到地区的学员看到的谷歌搜索引擎的界面也不相同。我们是以美国的谷歌界面为基础开发课程，导致部分学员在会有疑惑。幸运的是学员通过在课程论坛发帖提问、回帖答疑，最终通过互相帮助达成了课程要求。

最佳实践：每个学员的背景、爱好、需求都不同。在MOOC中要创造机会让学员根据自己的需求来学习，互相分享如何应用课程内容的经验。

大部分MOOC视频都有阶段性的小测验来持续吸引学员的关注。我们的数据显示，视频学习并非对所有人而言都是最有效的学习方式。我们发现有些学员更喜欢看文本课程，而不是视频。事实上，我们课程页面的绝大部分版面被视频占据，有一个小按钮可以链接到课程的文本。70%的学员点击视频学习，30%的学员点击文本学习。

在高级搜索课程中，我们在同一门课程的文本链接旁边附上了对应的视频链接。我们发现，学员点击视频和文本的概率是一样的。还有一些意想不到的发现：相对于冗长的视频，短而精的视频更能吸引学员。在我们的所有课程中，5分钟以内的视频，学员投入度达80%，也就是说学员观看了该段视频80%的内容。

我们为每一个教学视频配置了一项练习任务，用来评估学员对课程内容的掌握程度并为学员提供及时的反馈。但我们发现，有相当一部分学员只完成了任务练习，而并没有观看课程视频。这可能是因为学员直接跳到了任务练习部分，并根据任务完成效果来决定是否需要学习相关的课程。事实上，完成任务练习的学员在课程完成率上要明显高于那些没完成任务的学员。

最佳实践：学员喜欢自己控制学习的进度。让学员能够根据自己的喜好去选择先看教学视频（或文本课程），还是先做练习。

在谷歌地图课程的注册页面，我们让学员自己选择学习目标，包括“完成所有要求，获取课程证书”，“了解一两项谷歌地图的新内容，而不用获取课程证书”，“我很关注在线课程是如何进行的”等。

让人惊讶的是，只有54%的学员想要获取证书，其他大部分学员仅仅是出于工作需要或个人兴趣想学点新东西。根据学习进度追踪数据发现，42%的活跃学员确实完成了他们起初自己设定的目标，只有13%的学员完成了全部课程。

最佳实践：首先，应该考虑为了不同学员的目标改变课程设计。与其假设所有学员都会按照从A到Z的顺序学完所有课程，不如允许学员可以根据自己的目标搜索课程的小模块。其次，清晰的写出课程目标，让学员可以快速的知道哪个视频能够帮助他们获得自己想要的东西。最后，尝试列出学员完成课程的多种路径。

MOOC学习中，学员之间经常互相批改作业，这使得评分人员能从成千上万份作业中解脱出来。但是，我们认为自我评价对学员更有益处，因为自我评价能帮助学员建立应用所学技能的元认知。比如我们希望在课后，当学员开发地图时，能够停下来回忆谷歌地图课程中所讲解的好地图的标准有哪些，并通过这些标准来评价自己的地图，从而将课程所学应用到工作中。

在高级搜索课程中，学员需提交两项案例研究作业才能获取证书，作业应详细说明如何应用课程内容解决了生活中的复杂问题。学员们提供了很多精彩案例，比如有学员使用谷歌工具研究家族史、制定旅行计划、探究常见物品的起源等等。除了列出一些发现，有学员还详细说明了自己如何判断一个网站是否可信，以及过程中学到的其他东西。学员可以根据我们提供的评分规则给自己的作业打分。同样，在谷歌地图课程中，学员可以根据我们提供的自检表评估自己开发的地图。

此外，助教会随机抽取学员作业进行评分。我们发现，助教的评分和学员的自评有较为显著的相关性，作弊现象很少，作业整体质量都很高。事实上，学员自评分数和专家评分误差在6%以内。这说明在MOOC学习中，自我评价是一项有效的评价机制。对助教而言，阅读学员利用谷歌工具去规划假期、找工作、探索物品起源的故事是这个课程最精彩的部分。

最佳实践：继续研究如何利用自我评价来进行评估。用提交的作业来测试评分标准，并为学员进行自我评价提供更多指导。