Nếu một đơn vị nhận danh sách tám mã câu, làm sao biết người tổ hợp đã chọn theo mục tiêu nào? Cần xem danh sách ấy cùng bảng đối chiếu điều kiện. Bài này đi theo một đề rất nhỏ để người đọc nhìn được ba lớp công việc: đủ ô ma trận, có ích ở vùng năng lực đang quan tâm và không vi phạm các điều kiện sử dụng.
Chốt yêu cầu trước khi nhìn danh sách câu
Tình huống hoàn toàn giả định là một bài luyện tám câu cho học sinh THPT. Hai mảng nội dung là đọc dữ liệu và quan hệ đại số; trong mỗi mảng cần hai câu lấy thông tin trực tiếp và hai câu suy luận. Bốn ô ấy mỗi ô có hai câu, tổng cộng tám. Các nhãn này là đặc tả tự dựng, không phải cấu trúc chính thức của HSA, V-ACT hoặc TSA.
Đơn vị dự kiến quan tâm hai vị trí θ=−1 và θ=0 trên thang minh họa SP-T. Ký hiệu θ đọc là theta, biểu diễn vị trí năng lực trong mô hình. Mục tiêu tự đặt là thông tin đề tại mỗi vị trí ấy ít nhất 1,70, đồng thời tổng thời gian dự kiến không quá 16 phút. Đây là các con số để tập đọc hồ sơ, không phải tiêu chuẩn chất lượng được khuyến nghị cho đề thật.
Nhìn từng câu trong đúng ô đã chọn
Giả sử đã chọn E01–E08 ở đúng phiên bản v1.0 và cùng quyền sử dụng. Tất cả tham số trong ví dụ được gán để tính minh họa, không phải kết quả hiệu chuẩn từ người làm thật. Dùng mô hình logistic 2PL với D=1, c=0; a=1 cho cả tám câu. Mỗi ô có một câu b=−1 và một câu b=0. Việc chia nội dung thành hai mảng không tự chứng minh mô hình một chiều phù hợp; sự phù hợp ấy đang là giả định của phép tính.
Kéo ngang bảng để xem đầy đủ các cột.
| Câu v1.0 | Mảng nội dung | Yêu cầu trong ô | b giả định | Phút dự kiến |
|---|---|---|---|---|
| E01 | Đọc dữ liệu | Trực tiếp | −1 | 1 |
| E02 | Đọc dữ liệu | Trực tiếp | 0 | 1 |
| E03 | Đọc dữ liệu | Suy luận | −1 | 2 |
| E04 | Đọc dữ liệu | Suy luận | 0 | 2 |
| E05 | Quan hệ đại số | Trực tiếp | −1 | 1 |
| E06 | Quan hệ đại số | Trực tiếp | 0 | 1 |
| E07 | Quan hệ đại số | Suy luận | −1 | 2 |
| E08 | Quan hệ đại số | Suy luận | 0 | 2 |
Bảng cho phép kiểm ngay mỗi ô có hai câu và tổng thời gian dự kiến là 12 phút. Thời gian gán này dùng lập kế hoạch, không bảo đảm mọi học sinh xong trong 12 phút. Khi phát triển thật, cần bằng chứng thời gian và xem yêu cầu tốc độ có phù hợp điều muốn đo, kể cả thời gian đọc hướng dẫn và xử lý ngữ liệu.
Tính rồi đọc đường thông tin theo vùng
Trong quy ước đã nêu, xác suất đúng của từng câu được tính từ a, b và θ; thông tin câu là a²×P×(1−P). Tổng thông tin của tám câu được cộng dưới giả định độc lập có điều kiện. Livingston giải thích cách đọc đường thông tin đề theo vị trí năng lực và lưu ý rằng đường ấy không thay cho việc kiểm nội dung [1].
Đường tính từ tám bộ tham số giả định: b=−1 có bốn câu, b=0 có bốn câu, tất cả a=1, D=1, c=0. Các điểm tròn đánh dấu θ=−1, 0 và 1; hai điểm đầu là vị trí mục tiêu trong ví dụ.
Tại θ=−1 và θ=0, thông tin đều xấp xỉ 1,786; tại θ=1 chỉ khoảng 1,206. Vì thế bộ câu đáp ứng riêng hai điều kiện thông tin đã đặt ở −1 và 0. Nó không đạt một tuyên bố rộng hơn rằng thông tin luôn ít nhất 1,70 trên mọi vùng. Nếu đơn vị đổi mục tiêu sang nhóm rất vững, bảng yêu cầu và cách chọn phải được xét lại.
Một bộ đáp ứng phép đếm còn phải qua điều kiện dùng
Giả sử trong tập dự tuyển còn E09 có nội dung gợi ý cho E05, và E10 đang tạm ngừng. Không chọn E09 cùng E05; không đưa E10 vào chỉ vì tham số trông có ích. Các ràng buộc ấy cần nằm trong hồ sơ tổ hợp và được kiểm lại trên danh sách cuối, thay vì chỉ nhắc bằng miệng.
| Điều kiểm trong ví dụ | Kết quả với E01–E08 | Giới hạn kết luận |
|---|---|---|
| Bốn ô ma trận, mỗi ô 2 câu | 2–2–2–2; đủ 8 câu | Mới đối chiếu nhãn đã gán; vẫn cần rà nội dung |
| Thông tin tại θ=−1 và 0 ≥1,70 | Cả hai khoảng 1,786 | Chỉ hai vị trí và mô hình giả định |
| Tổng phút dự kiến ≤16 | 12 phút | Chưa là bằng chứng mọi người đều đủ giờ |
| E09 không đi cùng E05 | Không có E09 trong bộ | Cần danh sách quan hệ gợi ý đầy đủ |
| Không dùng câu tạm ngừng E10 | Không có E10 trong bộ | Cần kiểm trạng thái tại thời điểm phát hành |
Trong nghiên cứu về tổ hợp tự động, các điều kiện nội dung và mục tiêu thông tin có thể được mô tả riêng để cùng kiểm trên nghiệm tìm được [2]. Một bộ khả thi là bộ thỏa những điều kiện đã khai báo; một bộ tối ưu còn gắn với mục tiêu tối ưu và bằng chứng của thuật toán. Bài này chỉ trình bày một phương án minh họa, không tuyên bố đã tìm phương án tốt nhất trong ngân hàng.
Bảng nào giúp người nhận quyết định tiếp
Khi bàn giao thật, cần có bản danh sách chốt, mã/bản câu, ma trận yêu cầu–thực tế, bảng hoặc đồ thị thông tin, kết quả kiểm ràng buộc và người xác nhận. Nếu một điều chưa kiểm, ô kết quả nên ghi “chưa kiểm” thay vì để trống rồi hiểu là đạt. Thay một câu sau bước này cần chạy lại các đối chiếu bị ảnh hưởng.
Đối với học sinh, đồ thị trên chỉ giải thích nơi đề được thiết kế để quan sát rõ hơn. Nó không phải đường tiến bộ cá nhân hay dự báo điểm của em. Một bộ câu bám mục tiêu học tập, có lời giải rõ và điều kiện làm phù hợp mới giúp việc luyện đem lại thông tin hữu ích để điều chỉnh cách học.
Nguồn tham khảo
[1] Livingston, S. A. (2020). Basic Concepts of Item Response Theory: A Nonmathematical Introduction. ETS RM-20-06, tr. 11–13. Xem tài liệu
[2] Becker, B., Debeer, D., Sachse, K. A., & Weirich, S. (2021). Automated Test Assembly in R: The eatATA Package. Psych, 3(2), 96–112, các phần 1, 3.3. DOI 10.3390/psych3020010. Xem tài liệu