Phiếu cho điểm 560 và một khoảng từ 511 đến 609. Em có được lấy 609 làm điểm tốt nhất để đăng ký không? Khoảng này đang diễn đạt độ bất định theo mô hình; điểm báo cáo vẫn là 560. Muốn dùng khoảng cho đúng, ta nên tự tính một lần rồi đọc kỹ điều nó nói và điều cần thêm bằng chứng.
Trước phép tính phải biết đang tính khoảng nào
Bài này minh họa khoảng xấp xỉ 95% theo cách tiếp cận tần suất cho một ước lượng theta bằng MLE hữu hạn, ở vùng phù hợp và có độ lệch đủ nhỏ. Giả sử mô hình phù hợp, sai số chuẩn được tính thích hợp và phân bố lấy mẫu của ước lượng gần chuẩn quanh giá trị cần ước lượng. Trong các điều kiện đó, một cách lập khoảng thường dùng là lấy ước lượng cộng hoặc trừ 1,96 lần sai số chuẩn.
Đây thường được gọi là khoảng Wald. Nó không tự phù hợp với mọi mẫu trả lời, nhất là ở biên hoặc khi ước lượng lệch nhiều. Feuerstahler cho thấy sai số trong IRT còn chịu ảnh hưởng của cách ước lượng, hiệu chuẩn câu và đặc tả mô hình [1]. Một khoảng được tính đúng công thức vẫn cần được thẩm định về các điều kiện ấy.
Tính từ theta rồi chuyển sang điểm
Toàn bộ số liệu sau là giả định. Lấy theta 0,60 và sai số chuẩn 0,25; các tham số câu được xem như cố định trong phép tính minh họa. Thang báo cáo tự dựng là S bằng 500 cộng 100 lần theta. Không dùng các số này như sai số hay quy tắc chấm của V-ACT, HSA hoặc TSA.
| Bước | Phép tính | Kết quả |
|---|---|---|
| Biên xấp xỉ 95% | 1,96 × 0,25 | 0,49 đơn vị theta |
| Cận dưới theta | 0,60−0,49 | 0,11 |
| Cận trên theta | 0,60+0,49 | 1,09 |
| Điểm và sai số cùng thang | 500+100 × 0,60; 100 × 0,25 | 560 điểm; SE 25 |
| Chuyển hai cận | 500+100 × 0,11; 500+100 × 1,09 | 511 đến 609 điểm |
Phép tính tự dựng. Cũng có thể tính trực tiếp 560 cộng hoặc trừ 1,96 × 25, cho cùng hai cận 511 và 609 trước khi làm tròn.
Điểm 560 và khoảng xấp xỉ 95% từ 511 đến 609 trên thang minh họa. Đường đứt tại 600 là ngưỡng giả định để tập diễn giải, không phải ngưỡng xét tuyển thật.
Đọc 95% theo quy trình tạo khoảng
Theo cách hiểu tần suất, nếu lặp lại quy trình lấy dữ liệu và tính khoảng dưới những giả định phù hợp, khoảng 95% các khoảng được tạo sẽ chứa giá trị cần ước lượng. Với khoảng cụ thể đã tính, không nên đổi thành khẳng định “có 95% xác suất điểm thật của em nằm ở đây” theo nghĩa hậu nghiệm. Cách hiểu đó cần một mô hình Bayes và phân bố hậu nghiệm xác định.
Học sinh không cần thuộc mọi thuật ngữ để dùng được báo cáo. Điều cần giữ là điểm 560 có độ bất định đáng kể; riêng chữ số 560 không mô tả toàn bộ độ chính xác. Nếu báo cáo đưa khoảng hậu nghiệm thay vì khoảng tần suất, hãy theo đúng phần giải thích và phương pháp mà đơn vị cung cấp đã nêu.
Khoảng cắt qua ngưỡng thì chưa được tự đổi quyết định
Trong hình, mốc 600 nằm trong khoảng 511–609. Điều đó cho thấy cần thận trọng khi diễn giải mức năng lực so với mốc theo phép đo minh họa. Nó không làm điểm báo cáo thành 609, không chứng minh học sinh đã đạt 600 và không tự tạo xác suất trúng tuyển. Quy tắc ra quyết định còn phụ thuộc mục đích và quy định chính thức.
Standards đề nghị chú ý sai số ở vùng có ngưỡng quyết định [2]. Nếu mục tiêu là hỗ trợ học, giáo viên có thể thu thêm nhiệm vụ mới quanh kỹ năng cần xác định. Nếu là xét tuyển, phải sử dụng điểm và điều kiện theo thông báo của trường, không tự thay bằng một đầu mút khoảng.
Những bất định khoảng này có thể chưa bao hết
Phép tính ở trên xem các tham số câu là đã biết. Trong thực tế chúng cũng được ước lượng từ dữ liệu. Nếu sai số hiệu chuẩn hoặc liên kết chưa được đưa vào, khoảng có thể chưa phản ánh toàn bộ bất định của kết quả. Mô hình không phù hợp hoặc sự cố dữ liệu cũng không được sửa chỉ bằng cách cộng thêm 1,96 SE.
Khoảng này còn khác khoảng dự báo điểm ở lần thi sau. Lần sau có thể đổi đề, điều kiện và mức học được; dự báo cần một thiết kế khác. Cũng không dùng hai khoảng cá nhân có chồng nhau hay không để thay mọi phép kiểm chênh lệch: câu hỏi về thay đổi cần sai số của chính chênh lệch ấy.
Một câu diễn giải có thể dùng khi trao đổi
Em có thể ghi: “Điểm báo cáo minh họa là 560; với mô hình và sai số đã giả định, khoảng xấp xỉ 95% là 511–609. Em cần thêm bằng chứng ở nhiệm vụ mới trước khi nhận xét chắc về vị trí quanh 600”. Câu này giữ rõ điểm, độ bất định và việc tiếp theo. Nó giúp thông tin kỹ thuật đi vào trao đổi học tập một cách bình tĩnh và cụ thể.
Nguồn tham khảo
[1] Feuerstahler, L. M. (2018). Sources of Error in IRT Trait Estimation. Applied Psychological Measurement, 42(5),359–375. DOI 10.1177/0146621617733955. Xem tài liệu
[2] AERA, APA, & NCME. (2014). Standards for Educational and Psychological Testing. Standards 2.13–2.14. Xem tài liệu