Sai số đo lường mô tả độ bất định gắn với điểm trong một thiết kế hoặc mô hình đo. Sai số chuẩn không phải số điểm bị chấm nhầm; khi đọc cần biết đơn vị, cách tính và phạm vi áp dụng của thông tin sai số.
Phiếu ghi 620 điểm, bên cạnh là sai số chuẩn 18. Có phải người chấm đã chấm nhầm 18 điểm? Không. Sai số chuẩn mô tả độ bất định gắn với phép đo theo một mô hình. Hiểu dòng này giúp em giữ được giá trị của điểm 620 mà không xem nó là con số chính xác tuyệt đối về bản thân.
Vì sao cùng một người vẫn có thể dao động kết quả
Một bài thi chỉ lấy một tập nhiệm vụ trong phạm vi rộng. Em cũng không phải lúc nào thể hiện y hệt nhau. Trong một thiết kế đo xác định, những yếu tố được xem là ngẫu nhiên góp phần làm điểm quan sát dao động. Mô hình đo lường cố gắng mô tả mức độ dao động ấy, chứ không tìm một số điểm bị cộng nhầm vào từng bài.
Harvill giải thích sai số chuẩn đo lường, thường viết SEM, là độ lệch chuẩn của sai số gắn với điểm trong một thiết kế và nhóm xác định [1]. Hãy hiểu bước đầu rằng sai số chuẩn càng lớn thì vị trí được mô tả càng kém chính xác, nếu các đại lượng đang ở cùng đơn vị và cùng cách tính phù hợp.
Một dòng điểm cần đi cùng một dòng độ chính xác
Bảng dưới là hai lượt đo giả định đã được đặt lên cùng thang báo cáo. Hai lượt dùng những tập câu có lượng thông tin khác nhau quanh vùng năng lực đang xét. Các số được tự dựng để tập đọc báo cáo, không phải kết quả của học sinh thật.
Kéo ngang bảng để xem đầy đủ các cột.
| Nội dung trên phiếu | Lượt A | Lượt B | Cách đọc |
|---|---|---|---|
| Điểm báo cáo | 620 | 620 | Cùng vị trí điểm được báo trong ví dụ. |
| Sai số chuẩn cùng đơn vị | 12 điểm | 28 điểm | Lượt B có độ bất định lớn hơn theo cách ước lượng đang dùng. |
| Điều đã biết | Điểm và độ chính xác | Điểm và độ chính xác | Có thông tin về độ chính xác theo mô hình. |
| Điều chưa biết | Sai số thật của riêng lượt này | Sai số thật của riêng lượt này | Không biết người chấm đã nhầm đúng 12 hoặc 28 điểm. |
Số liệu hoàn toàn giả định. Bảng so độ chính xác, không kiểm định chênh lệch giữa hai người và không xác định điểm của lần thi sau.
Cùng 620 không buộc hai lượt có cùng độ chính xác khi tập câu hoặc cách thu thập bằng chứng khác nhau. Trong IRT, một đề có thể đo khá rõ ở một vùng nhưng kém rõ ở vùng khác. Vì thế, câu hỏi “đề có đáng tin không” thường cần thêm câu “đo chính xác ở vùng năng lực nào”.
SEM và sai số của theta phải đọc đúng đơn vị
Báo cáo IRT có thể ghi sai số chuẩn của theta, chẳng hạn 0,25. Báo cáo trên thang điểm có thể ghi 25 điểm sau một quy tắc chuyển thang phù hợp. Hai số không nên được đặt cạnh nhau để nói 0,25 nhỏ hơn 25 nên chính xác hơn: chúng đang khác đơn vị. Bài về chuyển thang sẽ minh họa cách chuyển cả điểm lẫn sai số.
Ngoài ra, độ lệch chuẩn hậu nghiệm trong cách ước lượng Bayes là một đại lượng có cách hiểu riêng. Nó không tự động đồng nhất với mọi định nghĩa sai số chuẩn theo cách tiếp cận tần suất. Người sử dụng nên giữ đúng nhãn mà báo cáo kỹ thuật cung cấp thay vì đổi mọi loại độ bất định thành một chữ SEM.
Ba tình huống cần ba cách xử lý
| Tình huống | Điều cần kiểm | Việc phù hợp |
|---|---|---|
| Khóa đáp án bị nhập sai | Phiên bản đáp án và dữ liệu chấm | Đối soát, sửa và công bố lại theo quy trình. |
| Kết quả dao động giữa các phép đo phù hợp | Độ chính xác, đề và điều kiện | Đọc cùng sai số và thêm bằng chứng học tập. |
| Em học được một cách giải mới | Sản phẩm trước–sau và câu mới | Kiểm tra tiến bộ; không quy toàn bộ thay đổi thành ngẫu nhiên. |
Các tình huống minh họa giúp phân biệt lỗi cần sửa với bất định cần diễn giải. Sai số đo không phải lý do để bỏ qua sự cố chấm.
Standards yêu cầu thông tin sai số được trình bày theo đúng đơn vị điểm báo cáo và, khi thích hợp, theo từng vùng điểm [2]. Với một quyết định gần ngưỡng, độ chính xác tại vùng ấy đặc biệt đáng xem. Một hệ số tin cậy chung của cả bài chưa kể hết tình huống của từng mức điểm.
Dùng thông tin sai số để học bình tĩnh hơn
Khi ôn V-ACT, HSA hay TSA, một thay đổi ít điểm giữa hai lượt chưa đủ để kết luận mọi kỹ năng đã tăng hoặc giảm. Em hãy ghi điều kiện và xem lại những bước làm cụ thể. Sai số giúp chọn mức thận trọng của nhận định; nó không thay thế việc chữa bài và cũng không tự chứng minh em không tiến bộ.
Nếu phiếu có dòng độ chính xác, em có thể hỏi đơn vị cung cấp: sai số đang theo thang nào, được tính theo cách nào và cần hiểu thế nào ở mức điểm của em. Nếu chưa có thông tin ấy, đừng tự lấy một sai số trên mạng gắn vào điểm của mình. Một câu hỏi đúng về độ chính xác hữu ích hơn việc đếm thêm chữ số sau dấu phẩy.
Nguồn tham khảo
[1] Harvill, L. M. (1991). Standard Error of Measurement. Educational Measurement Issues and Practice, 10(2),33–41. DOI 10.1111/j.1745-3992.1991.tb00195.x. Xem tài liệu
[2] AERA, APA, & NCME. (2014). Standards for Educational and Psychological Testing. Standards 2.13–2.14. Xem tài liệu