以答題信心為基礎之線上診斷評量系統

Development of an On-Line Learning-Problem Diagnostic System Using a Confidence-Scoring Mechanism

10.29882/JTNUE.200804.0001

黃國禎(Gwo-Jen Hwang)；朱蕙君(Hui-Chun Chu)；王榕榆(Rung-Yu Wang)

國語文教學 ； 補救教學 ； 診斷測驗 ； 電腦輔助學習 ； 網路學習 ； Chinese language instruction ； remedial instruction ； diagnosis test ； computer-assisted learning ； web-based learning

師大學報：教育類

53卷1期（2008 / 04 / 01）

1 - 24

繁體中文

一般線上評量系統的測驗方式，是由學生回答單選或複選題；由於忽略了學生答題過程的不確定因素，因此在診斷學生的學習困難時，不易作出精確的研判。針對這個問題，已有學者嘗試以答題信心度為基礎，來開發線上評量系統，並獲得不錯的成果。然而，由於目前已提出的評量模式，是由學生主觀認定其信心度，因此在診斷的準確性方面仍有很大的改善空間。在本研究中，我們嘗試加入答題時間參數，來加強其診斷效果，以期更準確地分析學生遭遇的困難。為了驗證這個新評量機制的分析成效，我們以國小學童中文字辨識課程進行實驗；實驗結果證明，本研究提出之「考量時間因素之信心度診斷評量機制」較原有的機制能提供更精確的診斷結果。

In conventional testing systems, students usually take a test by selecting one or more answers for each test item. Nevertheless, the confidence degree of individual student in answering each test item is usually ignored, which might affect the accuracy of diagnosing student learning problems. Researchers have attempted to cope with this problem by developing test systems that allow students to show their degree of confidence regarding the answer to each test item. Such a confidence scoring mechanism has been proved to be effective. However, the existing confidence scoring mechanism is mainly based on the subjective judgments of the students, which may reduce the degree of diagnostic accuracy. In this study, we attempt to develop a new confidence-scoring model by taking the ”time spent answering each test item on the Internet” factor into consideration while determining the conference degree for individual students to answer each test item. To evaluate this innovative approach, an experiment has been conducted using a Chinese word-identification course. Experimental results showed that our approach can provide more accurate learning suggestions to students, and hence is more helpful in improving their learning performance than previously proposed approaches.

1. Anderson, J. R(2000).Cognitive Psychology and Its Implications.New York:Worth.
2. Britton, B. K.,Tidwell, P.,P. D. Nichols,S. F. Chipman,R. L. Brennan (Eds.)(1995).Cognitively Diagnostic Assessment.Hillsdale, NJ:Erlbaum.
3. Corbett, A. T.,Anderson, J. R.,O`Brien, A. T.,Paul D. Nichols,Susan F. Chipman,Robert L. Brennan (Eds.)(1995).Cognitively Diagnostic Assessment.Hillsdale, NJ:Erlbaum.
4. Gitomer, D. H.,Steinberg, L. S.,Mislevy, R. J.,Paul D. Nichols,Susan F. Chipman,Robert L. Brennan (Eds.)(1995).Cognitively Diagnostic Assessment.Hillsdale, NJ:Erlbaum.
5. Hwang, G. H.,Chen, J. M.,Hwang, G. J.,Chu, H. C.(2006).A time scale-oriented approach for building medical expert systems.Expert Systems with Applications,31(2),299-308.
6. Hwang, G. J.(2003).A concept map model for developing intelligent tutoring systems.Computers & Education,40(3),217-235.
7. Hwang, G. J.(2007).A gray forecast approach for developing testing and diagnostic systems.IEEE Transactions on System, man and Cybernetic Part C,37(1),98-108.
8. Langley, P.,Wogulis, J.,Ohlsson, S.,N. Frederiksen,R. Glaser, A. Lesgold,M. G. Shafto (Eds.)(1990).Diagnostic Monitoring of Skill and Knowledge Acquisition.Hillsdale, NJ:Erlbaum.
9. Lo, J. J.,Wanga, H. M.,Yeh, S. W.(2004).Effects of confidence scores and remedial instruction on prepositions learning in adaptive hypermedia.Computers & Education,42(1),45-63.
10. Marshall, S. P.(1995).Schemas in Problem Solving.Cambridge, MA:Cambridge University Press.
11. Mislevy, R. J.,P. D. Nichols,S. F. Chipman,R. L. Brennan (Eds.)(1995).Cognitively Diagnostic Assessment.Hillsdale, NJ:Erlbaum.
12. Nichols, P. D.(1994).A framework for developing cognitively diagnostic assessment.Review of Educational Research,64(4),575-603.
13. Shortliffe, E. H.,Buchanan, B. G.(1975).A model of inexact reasoning in medicine.Mathematical Biosciences,23,351-379.
14. Snow, R. E.,Lohman, D. F.,R. L. Linn (Ed.)(1989).Educational Measurement.New York:Macmillan.
15. 王錦如(2000)。台中市，台中師範學院國民教育研究所。
16. 丘慶鈴(2003)。新竹市，新竹師範學院臺灣語言與語文教育研究所。
17. 行政院教育改革審議委員會(1996)。教育改革總諮議報告書。台北市:行政院教改會。
18. 余民寧(2001)。教育測驗與評量。台北市:心理出版社。
19. 吳裕益、王佳文(1997)。國小數學診斷測驗之編製。教育測驗新近發展趨勢學術研討會論文集，台南市:
20. 李白芬(1995)。嘉義市，國立嘉義師範學院初等教育研究所。
21. 林秀如(2004)。新竹市，中華大學資訊管理學系。
22. 林昌炫(1979)。國中學生作文錯別字分析。中國語文，267，39-50。
23. 胡依斐(1988)。台北縣，輔仁大學語言學研究所。
24. 高廣孚(1997)。教學原理。台北市:五南圖書出版有限公司。
25. 符顯仁(1983)。中國文字面面觀。台北市:莊嚴出版社。
26. 莊明廣(1994)。國民小學五年級學生國語科習寫的錯別字研究。載於進修（推廣）部學士學位進修班獨立研究專輯第三輯，191-215。
27. 郭生玉(1997)。心理與教育測驗。台北市:精華書局。
28. 陳玟秀(2000)。高雄市，國立高雄師範大學特殊教育學系。
29. 陳金明(1995)。識字教學與兒童認知發展。第一屆小學語文課程教材教法國際學術研討會論文集，臺東市:
30. 陳長春(1992)。加強補救教學的意義。中縣文教季刊，13，17-18。
31. 陳姿君(2002)。彰化市，彰化師範大學特殊教育學系在職進修專班。
32. 陳英豪、吳裕益(1995)。測驗與評量。高雄市:復文圖書。
33. 陳順宇(1996)。統計學。台北市:華泰書局。
34. 曾清文(2004)。臺中市，國立台中師範學院教育測驗統計研究所。
35. 歐用生(1989)。質的研究。台北市:師大書苑。
36. 鄭美芝(2002)。臺南市，臺南師範學院國民教育研究所。

1. 林靜雯、吳育倫(2013)。應用診斷測驗結合答題信心探究跨年級學生簡單暨串聯電路之理解及影響來源。教育科學研究期刊，58(2)，25-56。
2. 劉湘瑤、黃書涵、陳柏熹、陳冠利(2015)。以情境式試題評量中學生能源素養。教育科學研究期刊，60(2)，167-196。
3. 楊瑩、黃國禎、郭凡瑞、張宏俊、巫青燕(2010)。線上投資理財模擬實習環境之建立與實證。電子商務學報，12(4)，547-570。