Chất lượng câu hỏi · Ứng dụng

Đọc bảng tham số và sai số để lập danh sách câu cần thẩm định

Trong bài viết này

Nhận một bảng hàng trăm dòng a, b và SE, người phụ trách không cần bắt đầu bằng câu hỏi “câu nào bị loại?”. Cách hữu ích hơn là lập danh sách: câu nào có dấu hiệu gì, cần ai xem và cần thêm bằng chứng nào. Bảng tham số khi ấy trở thành một công cụ làm việc.

Đọc phần đầu báo cáo trước từng con số

Cần biết mô hình, cách đặt thang, số người, phạm vi năng lực của mẫu, phiên bản câu và trạng thái hội tụ. Hội tụ nghĩa là quá trình ước lượng đạt tiêu chí dừng đang dùng; nó chưa chứng minh mô hình đúng hoặc tất cả tham số đủ chính xác. Một bảng thiếu phần đầu dễ tạo ra so sánh sai giữa các lần chạy.

a thường chỉ độ phân biệt, b chỉ vị trí độ khó trong dạng tham số quen dùng. SE là sai số chuẩn của ước lượng tương ứng: SE(a) đi với a; SE(b) đi với b. Đây là bất định của tham số câu, khác sai số năng lực của một học sinh. Cũng không nên so trực tiếp SE(a) với SE(b) như cùng một đơn vị.

Bốn hồ sơ, bốn ưu tiên

Minh họa giả định có 800 người, dùng 2PL logistic D = 1 trên cùng thang, đã hội tụ. c được cố định bằng 0 nên không có SE(c) ước lượng; mọi số và nhận xét thực nghiệm trong bảng đều do Song Pa tự dựng. Chúng không phải đầu ra phân tích dữ liệu thật.

Kéo ngang bảng để xem đầy đủ các cột.

Câua; SE(a)b; SE(b)Dấu hiệu để thẩm định
Q111,20; 0,120,00; 0,10Quan sát khá sát dự báo; mẫu có người quanh b.
Q121,10; 0,252,00; 0,80Ít người ở vùng cao; vị trí độ khó còn bất định lớn.
Q132,10; 0,120,30; 0,10Tham số khá chính xác nhưng đường quan sát lệch rõ quanh 0,3.
Q140,35; 0,18−0,20; 0,45Độ dốc thấp và còn bất định; cần xem câu chữ, nhiễu và mẫu.

Q12 có b khá cao nhưng lý do thẩm định chính ở đây là độ bất định và thiếu dữ liệu tại vùng liên quan. Nếu dùng xấp xỉ chuẩn đơn giản, b ± 1,96 × SE(b) cho khoảng 0,43 đến 3,57. Khoảng này chỉ là minh họa có điều kiện; nếu xấp xỉ chuẩn không phù hợp, cần phương pháp khoảng phù hợp hơn.

Q13 cho một bài học khác: SE nhỏ không bảo đảm câu đã mô tả tốt dữ liệu. Một ước lượng có thể khá chính xác trong khuôn mô hình đang áp dụng, trong khi khuôn ấy chưa phù hợp. Cần mở đồ thị thực nghiệm và xem nội dung trước khi xem a cao là lý do giữ câu.

Đổi bảng thống kê thành phiếu giao việc

Ưu tiên minh họaViệc cần làmĐiều kiện xem xét đóng
Q12 — thêm bằng chứng vùng caoKiểm phân bố theta; xem SE và thiết kế thử thêm người phù hợp.Đủ bằng chứng mới, tham số được ước lượng và thẩm định lại.
Q13 — kiểm chỗ lệchĐối chiếu khóa, phiên bản; xem ngữ liệu và giả định mô hình.Có giải thích và kết quả phân tích lại được lưu.
Q14 — đọc lại nhiệm vụPhản biện lời giải, tính rõ nghĩa và cách hoạt động của nhiễu.Bản giữ/sửa có lý do; bản sửa được thử lại.
Q11 — rà thường lệKiểm nội dung, phạm vi và công bằng như mọi câu khác.Đủ các bước thẩm định, không chỉ đạt thống kê.

Mẫu phiếu do Song Pa đề xuất. Khi dùng thật, thêm người phụ trách, ngày kiểm, phiên bản và liên kết bằng chứng. “Đóng” nghĩa là hoàn thành việc thẩm định, không mặc nhiên nghĩa là giữ câu.

Hai bẫy thường nằm ngay ở tên cột

Một số phần mềm xuất dạng độ dốc–hệ số chặn a, d. Với 2PL logistic D = 1, b = −d/a; không đổi tên cột d thành b. Sai số của b sau biến đổi cần tính đến bất định và quan hệ giữa các tham số, không chép SE(d) sang. Tài liệu chính thức của mirt phân biệt các dạng tham số và cách chuyển kèm sai số [1].

Nếu dùng 3PL, cần ghi c là tiệm cận dưới theo mô hình, tránh gọi ngay đó là tỷ lệ một học sinh đoán mò. Ước lượng thêm tham số cũng có thể làm việc xác định các tham số khác kém chính xác trong một số điều kiện; Thissen và Wainer bàn trực tiếp vấn đề sai số trong IRT [2]. Nhiều tham số hơn chưa tự có nghĩa báo cáo tốt hơn.

Giao cho học sinh phần thông tin họ dùng được

Đơn vị có thể giữ bảng kỹ thuật để thẩm định, rồi diễn giải cho học sinh bằng nội dung rõ hơn: câu thuộc kỹ năng nào, kết quả có giới hạn gì và nên xem lại cách làm nào. Không cần đưa cả sổ tham số chưa chốt cho người đang ôn HSA, TSA hoặc V-ACT rồi yêu cầu họ tự suy năng lực.

Một danh sách thẩm định tốt phải cho thấy đường đi từ dấu hiệu đến hành động. Tham số và SE giúp xác định nơi cần xem kỹ; dữ liệu, phản biện nội dung và kết quả thử lại mới giúp đóng quyết định sử dụng có căn cứ.

Nguồn tham khảo

[1] Chalmers, R. P. và cộng sự. Tài liệu chính thức mirt: coef-method, phần IRTpars và sai số sau biến đổi. Kiểm tra 31/10/2026. Xem tài liệu

[2] Thissen, D. & Wainer, H. (1982). Some Standard Errors in Item Response Theory. Psychometrika, 47(4),397–412. DOI 10.1007/BF02293705. Xem tài liệu

Tất cả bài trong Chất lượng câu hỏi Về kho kiến thức

Bạn đang tìm điều gì?

Gõ có dấu hoặc không dấu · Esc để đóng