跳转到内容

开放教育实践:组织用户指南/开放教育评估

来自维基教科书,开放书籍,开放世界

在关于奥塔哥理工学院开放教育实践初始发展影响的调查阶段,最明显的益处体现在投资回报率 (ROI) 上。这是通过品牌知名度、教育资源质量的提升以及 IT 基础设施成本的节省来计算的。这些益处已促使建议进一步投资,并进行更全面的组织协调和承诺。特别是在支持服务部门,以便与当前的标准实践进行比较,更准确地评估开放教育对学习成果和教师工作满意度的影响。

如果没有组织内部各个服务的支持,这些服务有助于促进理解、建立期望以及支持教学和学习,就很难确定开放教育实践的初始发展对学习成果的影响。同样,如果没有组织的承诺来认可和奖励员工的这种新实践,也难以确定开放教育实践对员工工作满意度和动力的影响。

收益、节省和成本

[编辑 | 编辑源代码]
培训和为奥塔哥理工学院教师提供资源以学习如何使用社交媒体进行开放教育后的投资回报率

估计培训一个人如何使用社交媒体进行开放教育实践的成本为 4000 美元。在奥塔哥理工学院,这样的人在第一年就能为他们的组织带来超过 8000 美元的节省和收益。(每年 3511.16 美元的品牌知名度、每年 1030.77 美元的质量收益(通过采样和重复使用免费内容)、每年高达 3461.54 美元的 IT 基础设施和支持成本节省(通过使用现成且流行的社交媒体平台))。这项研究对 13 名员工的工作进行了抽样,从组织在培训方面的投资 52000 美元中,为组织带来了 104045.03 美元的总节省和收益。

该回报率是通过对总收益进行估值,将其加到总节省的估计值中,最后减去成本,只留下回报率来确定的。

该回报率除以便利样本中的参与人数(13 人),以确定每个人的贡献。

ROI = (收益 + 节省 - 成本) / 从业者人数


收益衡量资源质量改进和品牌知名度营销。

品牌知名度

[编辑 | 编辑源代码]

为了确定开放教育实践的品牌知名度营销收益,计算了现有广告牌和报纸广告的投资回报率,并进行了如下直接比较

报纸
  • 以在但尼丁的当地主要报纸上刊登 1/4 页广告的费用为例(不包括设计):629 美元。
  • 将其除以 47000 份的发行量,并假设每份报纸中的广告被一个人看到。
  • 当地新闻报纸中品牌知名度广告活动价值为每观看一次 1 美分。
广告牌
  • 以一块广告牌的费用为例:3490 美元(包括横幅,但不包括设计)。
  • 将其除以一项为期一周的活动中通过的 19000 辆车的数量,并假设每辆车价值为一次观看。
  • 一块广告牌的价值为每观看一次 2 美分。
流行社交媒体上的开放教育资源
  • 制作开放教育资源的成本包含在培训后的正常教学实践中。培训成本在计算节省和收益的回报率的最后阶段减去。
  • 假设一项教育资源价值相当于报纸广告和广告牌的综合价值,因为该资源更具信息量和教育意义。
  • 将报纸观看次数的价值和广告牌观看次数的价值相结合,计算出流行社交媒体上开放教育资源的价值。
  • 开放教育资源的价值为每观看一次 3 美分。

质量收益

[编辑 | 编辑源代码]

如果一项教育资源在其内容中使用免费媒体,则假设这是一种质量收益,假设该资源以前由于成本障碍而没有使用媒体。这种质量收益的货币价值由采样免费媒体的等效商业价值决定。

  • 一张图片的价值为 20 美元,基于较低的版税费率。
  • 一条音频轨道的价值为 50 美元,基于较低的版税费率。
  • 一页文字的价值为 50 美元,假设其制作需要一个小时。
  • 一段五分钟的视频或 10 张幻灯片的演示的价值为 150 美元,假设其制作需要三个小时。

来自其他运行等效技术基础设施的机构的建议,这些机构由维基、博客和 YouTube(作为媒体共享的示例)组成,用于确定通过使用现有社交媒体平台在运行成本方面节省的估计值。这些是每年为建立和运行每个系统(维基、媒体和博客)而产生的固定成本,不包括开放平台中内置的实践社区中隐含的机会价值。

  • Wiki 平台约 15000 新西兰元 - 基于 维基教育家定价
  • 媒体共享网站约 20000 新西兰元 - 基于 坎特伯雷大学的 UCTV 的估计。
  • 博客系统约 10000 新西兰元 - 基于等效公用事业服务提供商的收费。

对教育发展中心为非正式培训员工使用社交媒体进行开放教育使用的努力的回顾,用于确定每人的培训成本。例如

  • 10 小时的 1:1 强化培训,包括对受训者时间的补偿:1000 美元;
  • 10 小时的 1:1 支持,包括对受训者时间的补偿:1000 美元;
  • 设备:2000 美元。
  • 总培训成本:每位员工 4000 美元。
Wikieducator 效益与收益

五名教职工在 Wikieducator 上发布了 500 多份教育资源。这些资源已被浏览了 970620 次,总计价值 29119 美元的品牌知名度。通过使用自由许可的图像和图形,这五名教职工已将他们资源的价值提高到 10400 美元。此外,所有使用 Wikieducator 提供的免费服务的教职工,共同为理工学院节省了每年约 15000 美元的建立、运行和支持其自身维基平台的成本。

  • 样本量(教职工人数):5 人。
  • 资源数量:500 份。
  • 数据总大小:60 MB。
  • 浏览次数:970620 次。
  • 品牌知名度收益价值:29118.60 美元。
  • 重复使用的免费图像数量:520 张。
  • 通过重复使用免费图像获得的质量收益价值:10400 美元。
  • 收益总价值:39518.60 美元,即每名教职工 7903.72 美元。
  • 使用 Wikieducator 平台的节省价值:15000 美元。


Youtube 效益与收益

三名教职工在 Youtube 上发布了 95 份教育资源。这些资源已被浏览了 355600 次,总计价值 10668 美元的品牌知名度。其中 12 个视频使用自由许可的音频轨道,总价值 600 美元。此外,所有使用 Youtube 免费服务的教职工,共同为理工学院节省了每年约 10000 美元的提供该服务的内部成本(在 Slideshare 和 Youtube 之间分配的总多媒体托管服务的成本的一半)。

  • 样本量(教职工人数):3 人。
  • 视频数量:95 个。
  • 数据总大小:约 950 MB。
  • 浏览次数:355600 次。
  • 品牌知名度收益价值:10668 美元。
  • 免费音频轨道数量:12 个。
  • 通过使用免费音频轨道获得的质量收益价值:600 美元。
  • 收益总价值:11268 美元,即每名教职工 3756 美元。
  • 使用 Youtube 平台的节省价值:10000 美元(20000 美元的一半,与 Slideshare 平台分担)。


Slideshare 效益与收益

两名教职工在 Slideshare 上发布了 94 份教育资源。这些资源已被浏览了 14000 次,总计价值 420 美元的品牌知名度。通过使用自由许可的图像和图形,这五名教职工已将他们资源的价值提高到 1400 美元。此外,所有使用 Slideshare 免费服务的教职工,共同为理工学院节省了每年约 10000 美元的提供该服务的内部成本(在 Slideshare 和 Youtube 之间分配的总多媒体托管服务的成本的一半)。

  • 样本量(教职工人数):2 人。
  • 演示文稿数量:94 份。
  • 数据总大小:约 180 MB。
  • 浏览次数:约 14000 次。
  • 品牌知名度收益价值:420 美元。
  • 使用的免费图像数量:约 70 张。
  • 通过使用免费图像获得的质量收益价值:1400 美元。
  • 收益总价值:1820 美元,即每名教职工 910 美元。
  • 使用 Slideshare 平台的节省价值:10000 美元(20000 美元的一半,与 Youtube 平台分担)。


Blogger 效益与收益

三名教职工发布了 102 篇与他们在理工学院的工作相关的博文。这些资源已被浏览了 181281 次,总计价值 5438 美元的品牌知名度。通过使用自由许可的图像和图形,这三名教职工已将他们资源的价值提高到 1000 美元。此外,所有使用免费博客服务的教职工,共同为理工学院节省了每年约 10000 美元的提供该服务的内部成本(在 Slideshare 和 Youtube 之间分配的总多媒体托管服务的成本的一半)。

  • 样本量(教职工人数):3 人。
  • 博文数量:102 篇。
  • 数据总大小:约 50 MB。
  • 浏览次数:181281 次。
  • 品牌知名度收益价值:5438.43 美元。
  • 使用的免费图像数量:约 50 张。
  • 通过使用免费图像获得的质量收益价值:1000 美元。
  • 收益总价值:6438.43 美元,即每名教职工 2146.14 美元。
  • 使用 Blogger 平台的节省价值:10000 美元。


总体效益与收益
  • 样本量(教职工人数):13 人。
  • 品牌收益价值:45645.03 美元,即每名教职工 3511.16 美元。
  • 质量收益价值:13400 美元,即每名教职工 1030.77 美元。
  • 节省价值:45000 美元,即每名教职工 3461.54 美元(随着教职工人数的增加,节省金额减少,但平台成本保持不变)。
  • 总节省和收益:104045.03 美元,即每名教职工 8003.46 美元。
  • 总成本:52000 美元,即每名教职工 4000 美元。
  • 发展开放教育实践的投资回报率为 50%。

教育成果

[编辑 | 编辑源代码]

很难有意义地确定开放教育实践对教育成果的影响,因为仅仅比较封闭课程和开放课程的参与率、完成率和注册率是不够的。理工学院更广泛的支持学生的服务目前严重偏向于标准的封闭教育实践。因此,只有在开放教育实践在支持服务中变得规范时,比较才有意义,例如:管理、学生服务、图书馆和市场营销,所有服务都传达关于开放教育环境中学习的一致信息。否则,已知影响教育成果的学生支持相关因素(参与率、完成率和注册率)可能会在使用开放教育实践的课程中受到不公平的损害。

关于开放课程,已经有一些统计数据。在“促进在线学习”的例子中,在 2008 年发展为开放课程后,该课程在公众和国际上的兴趣显著上升。该统计数据将与课程的正常营销响应率进行比较,但这是国际兴趣首次显现。在 2009 年,在全球社区的最初兴趣和参与之后,人数下降,这可能归因于许多因素。例如,缺乏支持服务和政策来帮助非正式学习者转为正式学习者,或国际学生的注册费用。2010 年参与人数的随后上升,可能表明课程的重新开发和管理正在稳定,并且组织对开放模式的理解有所提高。一旦达到足够的支持和政策水平,希望注册率和完成率会上升,以满足兴趣水平。为此,需要审查对国际学生的收费,并实施承认先前学习评估的选项。


艺术中的数字素养

[编辑 | 编辑源代码]
2007 年,艺术学院对目前注册为美术学士(摄影)的学生的软件技能进行了分析。
  • 95% 的学生年龄在 30 岁以下,其中 84% 的学生年龄在 20 至 25 岁之间(即大多数学生直接从学校毕业)。
  • 计算机技能:所有人都具备基本技能,70% 的人具备中级技能。
  • 图像编辑技能:所有人都具备基本的图像编辑技能,但只有 10% 的人具备中级技能。
2009 年,参加数字素养课程的摄影专业高年级课程学生的技能水平高于 2007 年的课程。
  • 计算机技能:100% 的人都具备中级技能,70% 的人具备高级技能。
  • 图像编辑技能:100% 的人都具备中级技能,70% 的人具备高级技能。
  • 附加技能:90% 的学生具备社交网络技能,他们定期使用这些技能来增强和发展他们的艺术实践。
  • 附加技能:50% 的学生定期使用除了摄影设备之外的其他数字工具来增强和发展他们的艺术实践。
  • 附加技能:90% 的学生拥有网站/网络形象来推销自己。
2010 年,在数字能力方面测量出了一些改进。
  • 电子艺术和摄影工作室的所有学生(100%)都将他们的作业在线提交。
  • 艺术学院的所有学生(100%)都通过在线方式获取艺术史和理论的学习资源。
  • 其他高年级专业的学生中有一半(50%)每天使用在线资源。
  • 所有第一年 BVA 和文凭课程的学生(100%)都拥有并维护着工作室研究的博客。
  • 大多数研究生(80%)都保持着在线形象。
总结.
在 2007 年引入数字素养之前,没有一位艺术学院的学生将他们的工作室作业作为博客提交。
2008 年,这一比例上升到摄影和电子艺术专业的 20%,其他工作室的一些学生也参与了在线实践。
如果没有学生数字素养的显著变化,学生参与在线教学材料的数量可能会逐渐增加。在数字素养的支持下,艺术学院的理念和实践发生了实质性的转变,这体现在上述统计数据中。
将数字素养融入艺术学院体验核心要素的做法已被证明可以改变学习者的体验,并让学生真正选择他们与在线世界的互动方式。这是一种改进的教育成果,对达尼丁艺术学院的学习者体验产生了真正的影响。

了解更多

促进在线学习

[编辑 | 编辑源代码]
年份 参与者 注册 完成 评论
2006 13 13 10 封闭课程,外部管理。
2007 15 15 9 部分封闭课程,外部管理。
2008 89 9 13 开放课程,外部管理。
2009 39 15 15 开放课程,辅导员变更,外部管理。
2010 70 8 4 个正式,9 个非正式 开放课程,奥塔哥理工学院管理。

灵活学习

[编辑 | 编辑源代码]

本课程由奥塔哥理工学院管理。

年份 参与者 注册 完成 评论
2006 0 个非正式 15 12 封闭课程
2007 0 个非正式 15 12 部分封闭课程
2008 7 个非正式 20 15 开放课程
2009 1 个非正式 20 14 开放课程
2010 5 个非正式(报名后有 4 个) 26 21 个(3 个正在进行中) 开放课程

自然农法设计

[编辑 | 编辑源代码]

此维基页面 用于增强面对面的教学。

年份 参与者 注册 完成 评论
2008 0 个正式,15 个非正式(5 个在线) 0 个正式 10 个非正式 非正式输入以帮助开发课程。开发讨论/评论可以找到 这里这里.
2009 9 9 9 公开课程,有 5 名来自理工学院以外的参与者。其中 4 人已经是园艺学全日制学生。
2010 15 15 13 公开课程,有 2 名来自理工学院以外的参与者。13 人已经是园艺学全日制学生。
年份 参与者 注册 完成 评论
2009 23 23 20 开放课程
2010 24 24 23 开放课程

动物解剖学和生理学

[编辑 | 编辑源代码]
年份 注册学生 非正式学生 教科书销售 评论
2008 274 4 1 教科书在维基教科书上开发,免费提供给注册学生,在 Lulu.com 上出售给非正式学生
2009 283 28 22
2010 305 141 115

研究:教职工对开放教育实践的看法

[编辑 | 编辑源代码]

奥塔哥理工学院委托第三方研究团队进行了一项研究,以确定奥塔哥理工学院教职工如何理解开放教育实践,以及这些实践如何影响他们对工作满意度、工作动机以及对教学和学习绩效(价值观)的看法。研究结果发表在奥塔哥大学为奥塔哥理工学院撰写的报告中: 奥塔哥理工学院教职工对开放教育实践的看法. 由 Russell Butson、Shelagh Ferguson 和 Carla Thomson 于 2010 年 5 月编制。

五名参与者参与了这项研究,该研究采用摄影方法。更广泛的样本可以提供更多关于研究结果的确定性,但是,也揭示了一些有价值的信息。例如,参与者对开放教育的信念与他们实际的实践之间存在着明确的联系。但是,参与者对开放教育实践的理解似乎还处于不成熟阶段,例如,分享开放资源。参与者专门谈论了他们创建和分享的资源,而没有提到使用来自其他提供者的开放资源。发现了三种使用开放资源的实践阶段

  • 对分享资源没有兴趣;
  • 有兴趣与他人分享他们的资源;以及
  • 有兴趣进行开放的、相互的资源共享。

开放教育实践对工作满意度、工作动机以及对教学和学习绩效的看法的影响尚未明确确定。研究结果表明,需要对开放教育进行战略性承诺,以及如何支持、认可和奖励开放教育。

这项小型民族志研究是更大规模的 Ako Aotearea 研究的一部分,旨在调查方便样本的教学人员如何理解和使用开放教育资源。研究样本并不寻求代表理工学院的全体教学人员,而是代表能够为研究提供特定见解和深度的知情者。研究人员旨在确定教职工对使用开放教育资源的看法,并深入了解教职工如何理解和评价他们在开放教育中的工作。为此,一些教职工参与了录像采访,他们在采访中讨论并展示了他们的开放教育实践。

重要的是要注意,这项研究是在奥塔哥理工学院开放资源知识产权政策的背景下进行的,该政策使用默认的知识共享署名版权。接受采访的教职工清楚地了解了该政策,并且在探索开放资源共享方面感到受到鼓励和支持。

录像的理由

[编辑 | 编辑源代码]

研究人员希望数据由参与者的信念和经验决定,因此,他们不希望采用一种强加外部理论框架来定义或划分他们所寻求数据的方法。摄影不是以存在解释行为的潜在概念方案或深层结构为前提的,而是允许研究人员在相互交换和协商中捕捉到大量的思想、观念、信念和期望。作为一种方法,摄影可以捕捉到丰富且厚实的数据,从而洞悉实践和潜在价值观。

伦理考虑

[编辑 | 编辑源代码]

这项研究的伦理批准(B 类)由奥塔哥大学高等教育发展中心提供。在对参与者进行采访之前,他们被提供了伦理批准的信息单和同意书(附录 5)。他们都签署了书面同意书,同意参与该项目。

对参与者进行的采访被录像并部分转录。视频文件仅供研究人员使用。实际的视频记录未包含在任何研究成果中,转录稿在用于研究成果(报告、出版物和会议论文)之前被修改以删除任何识别信息。那些要求获得视频采访数字副本的参与者收到了副本。为了保持匿名,参与者在本报告和任何书面研究成果中以匿名标记表示。

招募/抽样

[编辑 | 编辑源代码]

该项目采用了目的抽样。为了实现对教职工对开放教育的看法和经验进行深入了解的目标,研究人员从使用过开放教育资源的教职工中构建了一个方便样本。通过电子邮件邀请了 8 位参与提供开放教育资源的教师接受采访。5 位同意并接受了采访。

数据收集

[编辑 | 编辑源代码]

采访在参与者的工作场所(家中或办公室)进行。一位研究人员进行采访,另一位研究人员录像。采访是半结构化的,也就是说,研究人员有一个预先确定的问题集或采访计划。但是,问题风格是开放式的,允许对受访者的引导做出反应,并在相关性方面有一定的自由度。除了回答采访问题外,受访者还在线上展示了他们在开放教育资源方面的实践。

数据分析

[编辑 | 编辑源代码]

研究人员对参与者的视频记录进行了迭代分析,包括观看、标注、部分转录和根据新出现的主题进行编码。这些过程由 NVivo 软件协助完成。在收集和处理个别参与者的数据后,研究小组采用了归纳式迭代分析方法。在这种方法下,数据经过了多次阅读。这使得研究人员能够识别视频记录和访谈记录中的主题(见附录 1-4)。研究人员采用常量比较法,在数据中来回移动,逐渐从编码过渡到概念类别,最后形成理论。

结果/发现

[编辑 | 编辑源代码]

四次访谈时长从 40 分钟到超过 1 小时不等,共记录了 238 分钟(3.97 小时)的访谈片段。每个半结构化访谈都从访谈者询问参与者关于教学和学习的理念开始。根据对这个初始问题的回答所确定的方向,参与者在访谈过程中继续讨论他们对开放教育的看法以及他们使用开放教育资源的原因。他们还演示并讨论了他们使用开放教育资源的方式以及特定功能/应用,例如博客和 YouTube。

尽管存在这些共同点,但每个参与者都对开放教育有不同的关注点或立场。因此,每次访谈都有非常不同的“风格”,产生的视频数据丰富而多样。从访谈中出现了四个主要主题。

  • 开放教育的理由。
  • 开放教育的实践。
  • 对开放教育的抵制。
  • 对教学和学习的信念。

大多数访谈数据根据这些主题进行了分类。所有参与者都发表了属于每个主题的访谈评论。下表 1 显示了与每个主题相关的评论总数以及这些评论所涵盖的视频片段的百分比。例如,参与者发表了 106 条评论,这些评论在“开放教育的理由”下进行了编码,涵盖了访谈片段的 35%。

表 1:根据主题分类的访谈评论和覆盖率

主题 评论 覆盖率
开放教育的理由 106 35%
开放教育的实践 95 29%
对开放教育的抵制 54 18%
对教学和学习的信念 41 11%

如表 1 所示,与对开放教育的抵制和对教学和学习的信念相比,开放教育的理由和实践在更大比例的访谈中成为焦点。

显然,拥有合理的开放教育理由很可能导致与开放教育实践清晰一致的行为。虽然这个结果只是建立在五個人的經驗之上,但研究人员认为,这些参与者在表达他们的信念并概述他们的实践时,他们的自我报告揭示了拥有理由和实际实践之间的良好耦合。他们对此的结论是,为了让开放教育发挥作用,组织需要发出明确的信息(例如,通过政策)来鼓励和支持这种实践。其次,组织需要让其成员参与,以促进对这种方法的理由和价值的清晰理解。最后,组织采用“开放”模式将导致实践的改变。

这项研究的参与者虽然有明确的理由,但似乎在机构内属于少数群体。奥塔哥理工学院可能缺乏倡导者(对开放教育有明确理由的员工),这可能是导致奥塔哥理工学院尽管机构支持开放资源,但在实际开放教育实践方面的采用率仍然较低的原因。然而,研究样本量很小,需要进一步研究来验证这一观察结果。

值得注意的是,参与者只谈论了他们创建和分享的资源。没有提到使用其他提供者的开放资源。研究人员留下的印象是,接受访谈的教职工都从“没有兴趣”状态转变为“感兴趣”状态(图 2)。由于参与者中只有一人对资源共享作为一种协作互惠过程表现出兴趣或理解,研究人员得出结论,其他四名教职工处于所谓的第二阶段:以自我为中心的阶段,重点完全放在他们的资源上。另一位参与者已经从这个位置移开,并且清楚地意识到了共享和获取开放资源时的益处。

图 2:使用开放资源的实践阶段。

虽然上述模式(图 2)是从数据分析中得出的,但研究人员不能肯定地说,没有进一步的研究,这三个阶段是否一定是连续体的部分。他们预计,在针对改变态度和实践的正确类型的支持和发展帮助下,教职工可能会沿着这条连续体前进。值得一提的是,这项研究的讨论集中在开放资源以及与这些资源相关的署名确认上。研究人员没有讨论可能在第一阶段发生的隐蔽使用资源,这些资源通常会被重新包装,并且不会包含对原始作者/创建者的确认。

研究结果表明,如果机构希望促进开放的教育资源开发和共享,两个基本要素非常重要。首先,需要机构对开放分发教育资源的支持(参见奥塔哥理工学院的开放教育政策),其次,需要对免费分发教育资源的理解和理由达成共识。在研究信仰和实践时,发现这两方面之间存在脱节的情况并不罕见,而且这种脱节通常会被轻松地维持。然而,这项研究的有趣之处在于参与者对开放教育的信念和他们的实践之间存在清晰的联系。

最后,研究人员遇到了一个他们难以解决的关键问题:什么是开放教育?首先,参与者没有提出这个问题。似乎对开放教育的含义有一个普遍的理解,这使得所有参与者都能从相似的角度进行讨论。为了在任何分析之前形成理解,研究人员必须“深入挖掘”开放教育的范围。他们很早就意识到,开放教育是一个母概念,它包含了资源共享等实践(开放教育资源)。虽然参与者在很多场合都使用了“开放教育”这个词,但研究人员认为他们实际上指的是“开放教育资源”。事实上,所有访谈材料基本上都集中在开放分享资源上。这引发了将教育定义为资源还是定义为项目的问题。问题出现了:这些资源本身有价值,还是只有在项目中嵌入时才更有意义?

回答这个问题并不在本次研究的范围内,但它作为研究结果浮出水面。研究人员希望对开放教育的进一步研究能够更全面地探讨这个问题。

华夏公益教科书