Một học sinh hỏi vì sao lời giải trong bài đã làm ghi tăng 10, còn bản tải về sau đó lại ghi tăng 20%. Nếu câu hỏi đã được sửa mà bản cũ bị ghi đè, người phụ trách có thể không xác định được em đã thực sự đọc yêu cầu nào. Lưu phiên bản giúp trả lời đúng câu hỏi ấy và phân biệt rõ bản đang sửa với bản được phép sử dụng.
Mã câu ổn định nhưng nội dung có thể đã thay
Một mã câu có thể có nhiều phiên bản qua quá trình phát triển. Phiên bản ghi nhận nội dung cụ thể tại một thời điểm, gồm câu dẫn, ngữ liệu, phương án, khóa hoặc rubric và những hướng dẫn liên quan. Trạng thái cho biết bản ấy đang ở bước nào và được dùng vào việc gì. “Mới nhất” chỉ nói về thứ tự thay đổi; nó không tự có nghĩa là “đã duyệt”.
Ví dụ hoàn toàn tự dựng dùng Q451 với số liệu từ 50 lên 60. Bản đầu hỏi “mức tăng là bao nhiêu” mà chưa nói rõ đơn vị trả lời. Có thể tính chênh lệch tuyệt đối là 10 hoặc mức tăng tương đối là (60−50)/50=20%. Mục đích của ví dụ là theo dõi lịch sử chỉnh câu, không phải phân xử một đề thi thật hay mô tả sự cố đã xảy ra ở Song Pa Lab.
Một bảng phiên bản giữ được điều gì
Kéo ngang bảng để xem đầy đủ các cột.
| Bản Q451 | Nội dung hoặc thay đổi chính | Trạng thái hiện tại trong mẫu | Quyền sử dụng hiện tại |
|---|---|---|---|
| v1.0 | Hỏi “mức tăng”; đã từng được duyệt và sử dụng trong tình huống giả định | Tạm ngừng sau khi tiếp nhận ý kiến về đơn vị | Giữ để đối soát lượt cũ; không chọn cho lượt mới |
| v1.1 | Đề xuất thêm “theo phần trăm so với ban đầu” | Bản nháp đã phản biện, lưu lịch sử | Tra cứu và đối soát nội bộ theo trách nhiệm; không phát hành |
| v1.2 | Chốt yêu cầu tính theo phần trăm; khóa và lời giải thống nhất 20% | Đã duyệt nội dung, đang chờ bằng chứng sử dụng tiếp | Được đưa vào kế hoạch thử đã duyệt; chưa xếp sẵn sàng chấm IRT |
Cột trạng thái nói về hiện tại, còn dòng v1.0 vẫn ghi được việc từng sử dụng trước đây. Nếu chỉ để một nhãn “đã duyệt” hoặc “đã sửa”, người nhận khó biết đó là duyệt nội dung, duyệt thử hay cho phép dùng tham số để chấm trên thang. Mỗi quyền dùng cần gắn đúng bản và phạm vi, tránh nhãn chung làm người sau hiểu rộng hơn quyết định thật.
Bản v1.1 cũng có giá trị dù không được phát hành: nó cho thấy đề xuất nào đã được xem, phản biện nào dẫn tới v1.2 và ai chốt nội dung. Không cần giữ mọi thao tác gõ phím như một phiên bản độc lập; đơn vị nên xác định các mốc thay đổi đáng ghi nhận và cách lưu nháp phù hợp. Mẫu ba phiên bản trên là cách minh họa, không phải một hệ thống đánh số bắt buộc.
Đối soát lượt đã làm bằng đúng bộ từng được phát
Một hồ sơ lượt cũ nên nối tới bản câu, bản khóa và mã gói phát hành của lượt ấy. Khi có ý kiến, người kiểm mở đúng bản đó để xem, thay vì lấy bản mới nhất làm bằng chứng người học đã gặp gì. Bản nháp sau này không được âm thầm thay vào lịch sử một bài đã làm.
Nếu phát hiện bản cũ có vấn đề ảnh hưởng điểm, cần đánh giá phạm vi tác động, thẩm định cách xử lý và lưu quyết định về việc chấm lại hoặc thông báo theo quy trình. Việc giữ bản cũ không có nghĩa tiếp tục giữ một kết quả sai. Nó giúp biết cần sửa kết quả nào và vì sao, đồng thời phân biệt dữ liệu ban đầu với kết quả được điều chỉnh có kiểm soát.
Hướng dẫn ITC về kiểm soát chất lượng nhấn mạnh ghi nhận hoạt động và lỗi, cùng việc cập nhật tài liệu khi sửa khóa hoặc loại câu [1]. Lịch sử phiên bản là một cách cụ thể để đơn vị hỗ trợ yêu cầu đối soát ấy. Phiếu nên nối được nội dung, quyết định và các lượt sử dụng bị ảnh hưởng.
Tham số IRT cũng cần biết đang thuộc bản nào
Một bảng a, b không nên gắn lơ lửng với mã Q451 mà thiếu phiên bản nội dung, mô hình và thang. Sửa câu dẫn có thể thay đổi cách người học hiểu nhiệm vụ; giữ cùng mã gốc không chứng minh các đặc trưng cũ còn phù hợp. Với v1.2 trong mẫu, chưa được tự chép tham số v1.0 sang rồi coi là đã hiệu chuẩn.
Mức kiểm lại cần dựa vào thay đổi và bằng chứng. Sửa một lỗi dấu câu không ảnh hưởng nghĩa và thay nhiệm vụ từ chênh lệch tuyệt đối sang phần trăm là hai trường hợp khác nhau. ETS nêu việc thử lại câu đã sửa khi khả thi trong quy trình phát triển [2]. Đơn vị cần ghi căn cứ xem xét, không biến nguyên tắc ấy thành yêu cầu máy móc rằng mọi thay đổi hình thức đều phải làm lại y hệt toàn bộ nghiên cứu.
Học sinh tìm đúng bản còn đơn vị giữ được trách nhiệm
Với tài liệu luyện HSA, V-ACT hay TSA do một đơn vị biên soạn, học sinh có thể xem ngày/bản cập nhật, dùng lời giải đi cùng đúng đề và gửi mã câu kèm ảnh nội dung khi cần hỏi. Hai lời giải khác nhau đôi khi do hai nhiệm vụ đã khác; đôi khi là lỗi cần sửa. Có phiên bản giúp kiểm được, thay vì yêu cầu người học tự đoán.
Trong ngân hàng, danh sách được phép chọn cho lượt mới nên tách khỏi kho lịch sử có phân quyền. Người vận hành nhìn thấy bản được chốt; người xử lý vấn đề có thể truy lại bản cũ theo trách nhiệm. Lưu cả bản sửa và bản duyệt giúp công việc ấy có căn cứ, đồng thời giữ được lời giải thích nhất quán cho người học.
Nguồn tham khảo
[1] International Test Commission (2014). ITC Guidelines on Quality Control in Scoring, Test Analysis, and Reporting of Test Scores. International Journal of Testing, 14(3), 195–217, các mục 1.7 và 2.4.1.5–2.4.1.6. DOI 10.1080/15305058.2014.918040. Xem tài liệu
[2] Educational Testing Service (2014). ETS Standards for Quality and Fairness, Standard 7.5, tr. 32. Xem tài liệu