ShinyTAM

(Shiny版本的試題分析模組)



新聞

  • 我們正在計劃用中文舉辦一個關於 ShinyTAM 的工作坊/講座。請隨時關注本網站以獲取相關信息。
  • 關於 ShinyTAM 的研討會于 2024 年 3 月 21 日圓滿結束。本次研討會共有198人參加,其中98.7%的觀衆對其表示滿意並感到學有所成。
  • 新版本的 ShinyTAM 已于 2024 年 3 月 3 日發佈。

歡迎使用ShinyTAM!

這是一個互動式線上平台,用於使用 Rasch 模型進行試卷分析和形成性評估。 它可以透過檢查試卷的信度和效度以及測試項目的質量,為教師提供回饋。 它還可以提供有關學生最近發展區(Zone of Proximal Development)的訊息。

截至今天 ( 2024-05-20 ), 已經有 人次訪問了我們的 ShinyTAM 平台。


您可以按照以下步驟進行您的分析:

1. 導入和分析:

下載資料模板和資料輸入手冊,然後匯入資料。然後檢查您的數據,看看輸入時是否發生了任何錯誤。之後,您可以點擊“分析”進行分析。

2. 分析完成後,您可以在以下地方查看各種輸出:

• 懷特圖(Wright Map): 比較個體能力與題目難度分佈
• 題目報告: 題目難度和題目擬合度的總結,以及每個班級的原始百分比得分。
• 特定題目報告: 选擇題和非選擇題的頻率百分比,百分比得分以及每個選項(對於選擇題)或分數類別(對於非選擇題)的學生能力均值的總結。
• 個人表現-擬合圖: 依其能力與表現(穩定與不穩定)對學生進行分類。
• 個人報告: 學生能力與學生擬合度的總結,包括表現比預期更好/差的題目及最近發展區內的題目。
• 特定個人報告: 展示特定個人的預期得分和觀察得分,這些得分之間的差距將被識別並用於個人化學習。

3. 下載輸出:

您可以下載輸出和整個報告以供進一步使用。

注意:ShinyTAM使用R中的'TAM'套件來使用Rasch模型進行心理測量學屬性分析。

參考文獻:

Robitzsch, A., Kiefer, T., & Wu, M. (2020). TAM: Test analysis modules. R package version, 3, 5-19.

使用許可:

這個程式是一個免費的線上應用程序,您可以使用以下引用來使用或傳播它:

Kwan, K., Xu, K., & Zhu, J. (2022-2024). ShinyTAM [Online application; Beta version 1.3]. Retrieved from https://shinytam.eduhk.hk

下載資料範本和資料輸入手冊


您可以先從以下按鈕下載資料範本和資料輸入手冊:


下載資料模板
點這裡!
下載資料輸入手冊
點這裡!





數據檔案顯示


您可以預覽您的資料檔案以檢查是否有任何問題。

題目類型和分值





原始作答




個人-表現圖的選項


請輸入您打算用於製作個人-表現圖和將學生分類為不同表現組的標準。





分析數據


您可以點擊以下按鈕進行數據分析:







懷特圖-整體難度



測評的心理測量特性


信度係數:透過預期後驗(EAP)方法估計所得的試卷信度係數。


平均學生能力與平均題目難度的差異(Logit):整體學生能力與平均題目難度之間的關係,如果為正數,表示試卷較為容易;如果為負數,表示試卷較難;若接近零,則顯示試卷難度和大多數學生的能力相當。


平均題目與學生能力參數相關係數:每個題目與學生能力參數的相關係數的平均,係數越高,表示試卷內的題目越能用於衡量出學生的能力水平。





整體題目難度


懷特圖-類別難度



測評的心理測量特性


信度係數:透過預期後驗(EAP)方法估計所得的試卷信度係數。


平均學生能力與平均題目難度的差異(Logit):整體學生能力與平均題目難度之間的關係,如果為正數,表示試卷較為容易;如果為負數,表示試卷較難;若接近零,則顯示試卷難度和大多數學生的能力相當。


平均題目與學生能力參數相關係數:每個題目與學生能力參數的相關係數的平均,係數越高,表示試卷內的題目越能用於衡量出學生的能力水平。





題目類別難度


懷特圖-整體難度(依班級呈現)


注意:如果班內只有一位學生,則該班將不作呈現




測評的心理測量特性


信度係數:透過預期後驗(EAP)方法估計所得的試卷信度係數。


平均學生能力與平均題目難度的差異(Logit):整體學生能力與平均題目難度之間的關係,如果為正數,表示試卷較為容易;如果為負數,表示試卷較難;若接近零,則顯示試卷難度和大多數學生的能力相當。


平均題目與學生能力參數相關係數:每個題目與學生能力參數的相關係數的平均,係數越高,表示試卷內的題目越能用於衡量出學生的能力水平。





按班呈現的描述統計


懷特圖-類別難度(依班級呈現)


注意:如果班內只有一位學生,則該班將不作呈現




測評的心理測量特性


信度係數:透過預期後驗(EAP)方法估計所得的試卷信度係數。


平均學生能力與平均題目難度的差異(Logit):整體學生能力與平均題目難度之間的關係,如果為正數,表示試卷較為容易;如果為負數,表示試卷較難;若接近零,則顯示試卷難度和大多數學生的能力相當。


平均題目與學生能力參數相關係數:每個題目與學生能力參數的相關係數的平均,係數越高,表示試卷內的題目越能用於衡量出學生的能力水平。





按班呈現的描述統計


題目報告


題目統計的總結,包括平均百分比得分,題目難度,題目擬合度,點與總分相關度,每個班級的平均百分比得分。


注意:對於題目擬合度,'*'代表擬合度 > 2,'#'代表擬合度 < 0.5。


題目報告——選擇題


多項選擇(MC)題目的報告:選項頻率百分比(平均百分比得分/平均個人能力)


題目報告——非選擇題


非多項選擇(非MC)題目的報告:類別(分值)頻率百分比(平均百分比得分/平均個人能力)


個人表現——擬合圖


個人百分比得分與個人擬合度的散佈圖。注意,數值在 1.00 左右時表示個人擬合度最佳。



類別描述


個人報告


個人統計的總結,包括百分比得分,個人能力,個人擬合度,表現-擬合度分類,比預期多/少獲得 1 分以上的題目等。



特定個人報告


個人得分的總結,包括預期得分,觀察得分,得分差距和題目分類。



學生基本資訊:


結果下載


你可以下載以下數據分析結果:

結果表格
下載結果表格
題目特徵曲線圖與預期得分曲線圖
下載題目特徵曲線圖與預期得分曲線圖
完整分析報告
下載完整分析報告(建置中)