博客:立即订阅

犹他州STEM行动中心发布典范全州计划评估

已为国家赠款资助的数字数学计划评估设置了一个新的酒吧。这犹他州茎动作中心已经发布了它2020年度报告,其中包括其全州全州计划评估的结果。这代表了七年来迈向持有教育计划和学区至关重要的实践的新的高水位,并使用国家资金负责实现学生学习影响。

STEM Action Center成立于2013年,负责向犹他州立法机关进行定期和严格的报告,以了解年度国家对数字补充数学计划的使用和影响,以及用于推进STEM数字教育最佳实践的知识捕获和传播状态。该程序提供了各种赠款对于犹他州的学校,包括K-12数学个性化学习软件赠款,该赠款可访问精选的数学个性化学习软件程序,以改善学生在数学素养方面的成果。伟德1946亚洲娱乐城,由Mind Resear伟德备用ch Institute创建,是学校和地区可用的数学课程之一。

该报告为什么很重要?

该报告以450多页的计算在全州范围内跟踪和解开数字程序的使用,并报告使用忠诚度和对州立法机关的影响效力。

通过进行如此彻底而全面的分析,犹他州STEM行动中心是其透明且高度可见的对问责制和持续改进的承诺的国家先驱和榜样。

此外,STEM行动中心与大学的数据研究人员相关犹他州教育政策中心在犹他大学在本报告中进行研究 - 这项战略合作进一步强调了该中心对合理研究方法的关注以及独立和严格的分析。

犹他州对严格的承诺

准备全州分析需要各方(国家,研究人员,Edtech计划供应商以及学校和地区用户)对所有方进行严格的承诺。主要挑战包括:

  • 尽管有无数的产品平台,但以正常方式获取数字使用数据
  • 定义影响的衡量标准,内部程序输入和输出,实施的保真度以及在国家标准化的数学测试指标中
  • 愿意测试和调整成功之路的不同方法 - 它并不总是第一次起作用
  • 直接与Edtech供应商的反馈和合作伙伴关系,他们对数据有洞察力

在STEM行动中心的主持下,我与所有其他计划供应商的代表一起很高兴有机会与犹他州教育政策中心的研究人员紧密合作,以分享有关我们如何分析St的功效的更多信息。使用模型的数学可重复的结果

最终,深入研究计划疗效,大规模并在多个计划中进行标准化,使每个利益相关者受益。Edtech提供商共享和从苹果到苹果使用数据中学习,以实现交叉程序分析。提供了有关数字计划实施结果和基准的全州范围,该镜头对他们及其邻居的使用和影响有……导致对其教师和学生的产品拟合和产品实施计划的更有效,更有信息的决策。国家利益相关者对其倡议的有效性有所了解,并有证据表明纳税人的投资回报率。

报告对K-12数学软件有何评论?

K-12数学个性化学习软件对学生成就的影响该报告的一部分从第311页开始,并将软件用户与非用户进行了三个感兴趣的结果:熟练程度,百分比等级和学生成长百分位数(SGP)。

总体而言,研究人员发现“更多使用数字数学软件的学生和学生使用数字数学软件具有更大一致性的人优先于使用的学生软件少,使用软件的一致性较小。”(看第351页

熟练程度

衡量学生相对于预定义的基准的绩效

图13

百分位排名

相对于其他参加相同考试的学生表演的指标

犹他州STEM行动中心报告的百分位排名图,图14

学生成长百分比(SGP)

相对于过去表现相似的学生的学生成长的统计估计

犹他州STEM行动中心报告的学生成长百分位图表,图15

关于大规模重复结果的一句话

研究人员注意注意(请参阅第350页)他们的分析本质上是观察性和相关性的。该研究不是一项完全实验性的随机对照试验(RCT),也不是因果影响的证据。

尽管RCT是评估程序疗效的最终因果测试,但它们也很长,昂贵且罕见。这意味着RCT在实验之外的应用程序方面可能会很快脱离外部有效性:例如,在更新了当前市场上的程序版本或其实施或支持模型之后。在我看来,犹他州的研究是市场应在哪里转移的一个明确的例子 - 使用最近的各种地区的计划版本,朝着大型数据集朝着大型数据集迈进。在脑海中,我们相信大量有效性研究是一个健康的教育产品信息市场的未来。

其他州可以从此分析中获得什么?

在组装此范围的报告是一项重大事件的同时,它无与伦比地观察了犹他州对STEM教育的主要投资的结果。

进行全州分析带来了许多强大的好处。国家授予人将为他们的实施和使用质量提供更大的地区问责和买入。州授予者还将能够评估各个地区的计划使用和效力,从而帮助揭示最佳实践,从而为学生带来最大的收益。

俄亥俄州是另一种投资于全州疗效分析的州。例如,在2015年过去的基础对其数学事务项目进行了形成性评估,该项目研究了在费尔菲尔德和富兰克林县的九个地区进行的ST数学实施。伟德1946亚洲娱乐城由俄亥俄州教育部直接资助的基金资助,该分析的最重要发现之一是教师需要更多的时间,时间和信息,以便计划在新的混合学习计划的规模上成功推出。

对于各州来说,了解他们的资深支出的效果比以往任何时候都更为重要 - 特别是鉴于需要照顾法案CRRSA法资金用于用于解决未完成学习并在远程学习环境中有效的Edtech计划。我们认为,犹他州STEM行动中心的报告是其他州审查和遵循其分析的强烈典范。

进一步阅读

安德鲁·库尔森

关于作者

Andrew R. Coulson是Mind Research Institute首席数据科学官。伟德备用他的数据分析师团队评估程序使用情况并衡量学生的学习成果。在Twitter上关注Andrew@andrewrcoulson

评论