ShinyTAM

(Shiny版本的试题分析模块)



新闻

  • 我们正在计划用中文举办一个关于 ShinyTAM 的工作坊/讲座。请随时关注本网站以获取相关信息。
  • 关于 ShinyTAM 的研讨会于 2024 年 3 月 21 日圆满结束。本次研讨会共有198人参加,其中98.7%的观众对其表示满意并感到学有所成。
  • 新版本的 ShinyTAM 已于 2024 年 3 月 3 日发布。

欢迎使用ShinyTAM!

这是一个交互式在线平台,用于使用 Rasch 模型进行试卷分析和形成性评估。 它可以通过检查试卷的信度和效度以及测试项目的质量,为教师提供反馈。 它还可以提供有关学生最近发展区(Zone of Proximal Development)的信息。

截至今天 ( 2024-05-20 ), 已经有 人次访问了我们的 ShinyTAM 平台。

您可以按照以下步骤进行您的分析:

1. 导入和分析:

下载数据模板和数据输入手册,然后导入数据。然后检查您的数据,看看在输入时是否发生了任何错误。之后,您可以点击“分析”进行分析。

2. 分析完成后,您可以在以下地方查看各种输出:

• 怀特图(Wright Map): 比较个体能力和题目难度分布
• 题目报告: 题目难度和题目拟合度的总结,以及每个班级的原始百分比得分。
• 特定题目报告: 选择题和非选择题的频率百分比,百分比得分以及每个选项(对于选择题)或分数类别(对于非选择题)的学生能力均值的总结。
• 个人表现——拟合图: 按其能力和表现(稳定与不稳定)对学生进行分类。
• 个人报告: 学生能力和学生拟合度的总结,包括表现比预期更好/差的题目和最近发展区内的题目。
• 特定个人报告: 展示特定个人的预期得分和观察得分,这些得分之间的差距将被识别并用于个性化学习。

3. 下载输出:

您可以下载输出和整份报告以供进一步使用。

注意:ShinyTAM使用R中的'TAM'包来使用Rasch模型进行心理测量学属性分析。

参考文献:

Robitzsch, A., Kiefer, T., & Wu, M. (2020). TAM: Test analysis modules. R package version, 3, 5-19.

使用许可:

这个程序是一个免费的在线应用程序,您可以使用以下引用来使用或传播它:

Kwan, K., Xu, K., & Zhu, J. (2022-2024). ShinyTAM [Online application; Beta version 1.3]. Retrieved from https://shinytam.eduhk.hk

下载数据模板和数据输入手册


您可以首先从以下按钮下载数据模板和数据输入手册:


下载数据模板
点击这里!
下载数据输入手册
点击这里!





数据文件显示


您可以预览您的数据文件以检查是否存在任何问题。

题目类型和分值





原始作答




个人-表现图的选项


请输入您打算用于制作个人-表现图和将学生分类为不同表现组的标准。





分析数据


您可以通过点击以下按钮进行数据分析:







怀特图——总体难度



测评的心理测量特性


信度系数:通过预期后验(EAP)方法估计得到的试卷信度系数。


平均学生能力与平均题目难度的差异(Logit):总体学生能力与平均题目难度之间的关系,如果为正数,表明试卷较为容易;如果为负数,表明试卷较难;如果接近于零,则表明试卷难度和大多数学生的能力相当。


平均题目与学生能力参数相关系数:每个题目与学生能力参数的相关系数的平均,系数越高,表示试卷内的题目越能用于衡量出学生的能力水平。





总体题目难度


怀特图——类别难度



测评的心理测量特性


信度系数:通过预期后验(EAP)方法估计得到的试卷信度系数。


平均学生能力与平均题目难度的差异(Logit):总体学生能力与平均题目难度之间的关系,如果为正数,表明试卷较为容易;如果为负数,表明试卷较难;如果接近于零,则表明试卷难度和大多数学生的能力相当。


平均题目与学生能力参数相关系数:每个题目与学生能力参数的相关系数的平均,系数越高,表示试卷内的题目越能用于衡量出学生的能力水平。





题目类别难度


怀特图——总体难度(按班呈现)


注意:如果班内只有一位学生,则该班将不作呈现




测评的心理测量特性


信度系数:通过预期后验(EAP)方法估计得到的试卷信度系数。


平均学生能力与平均题目难度的差异(Logit):总体学生能力与平均题目难度之间的关系,如果为正数,表明试卷较为容易;如果为负数,表明试卷较难;如果接近于零,则表明试卷难度和大多数学生的能力相当。


平均题目与学生能力参数相关系数:每个题目与学生能力参数的相关系数的平均,系数越高,表示试卷内的题目越能用于衡量出学生的能力水平。





按班呈现的描述统计


怀特图——类别难度(按班呈现)


注意:如果班内只有一位学生,则该班将不作呈现




测评的心理测量特性


信度系数:通过预期后验(EAP)方法估计得到的试卷信度系数。


平均学生能力与平均题目难度的差异(Logit):总体学生能力与平均题目难度之间的关系,如果为正数,表明试卷较为容易;如果为负数,表明试卷较难;如果接近于零,则表明试卷难度和大多数学生的能力相当。


平均题目与学生能力参数相关系数:每个题目与学生能力参数的相关系数的平均,系数越高,表示试卷内的题目越能用于衡量出学生的能力水平。





按班呈现的描述统计


题目报告


题目统计的总结,包括平均百分比得分,题目难度,题目拟合度,点与总分相关度,每个班级的平均百分比得分。


注意:对于题目拟合度,'*'代表拟合度 > 2,'#'代表拟合度 < 0.5。


题目报告——选择题


多项选择(MC)题目的报告:选项频率百分比(平均百分比得分/平均个人能力)


题目报告——非选择题


非多项选择(非MC)题目的报告:类别(分数)频率百分比(平均百分比得分/平均个人能力)


个人表现——拟合图


个人百分比得分与个人拟合度的散点图。注意,值在 1.00 左右时表示个人拟合度最佳。



类别描述


个人报告


个人统计的总结,包括百分比得分,个人能力,个人拟合度,表现-拟合度分类,比预期多/少获得 1 分以上的题目等。



特定个人报告


个人得分的总结,包括预期得分,观察得分,得分差距和题目分类。



学生基本信息:


结果下载


你可以下载以下数据分析结果:

结果表格
下载结果表格
题目特征曲线图和预期得分曲线图
下载题目特征曲线图和预期得分曲线图
完整分析报告
下载完整分析报告(建设中)