Một chương trình thông báo “95% hoàn thành” nghe có vẻ rất tốt. Nhưng 95% của ai: người đăng ký, người đã bắt đầu hay người đã vào được hệ thống? Muốn đánh giá một chương trình thi thử, cần đi theo hành trình của người học, xem những trường hợp còn mắc ở mỗi bước và kiểm tra kết quả cuối có giúp học sinh làm được việc gì hay không.
Đặt các con số trên cùng một hành trình
| Mốc theo dõi | Số người giả định | Thông tin cần kiểm tra tiếp |
|---|---|---|
| Đăng ký | 200 | Danh sách đã loại người trùng chưa? |
| Bắt đầu làm bài | 180 | 20 người còn lại không tham gia vì lý do gì? |
| Có xác nhận nộp | 171 | 9 người đã bắt đầu nhưng chưa xác nhận nộp đang ở trạng thái nào? |
| Đủ điều kiện lập báo cáo theo quy tắc đã nêu | 165 | 6 bài đã nộp cần rà thêm những điểm gì? |
| Đã được cấp báo cáo | 160 | 5 người đủ điều kiện còn chờ ở khâu nào? |
Số liệu toàn bộ chương trình là giả định. Các mốc là tập con lồng nhau của cùng một nhóm 200 người, không phải năm nhóm khác nhau; chưa quy các trường hợp chưa qua mốc thành lỗi của học sinh hay hệ thống.
Từ bảng, 171/180 bằng 95%, nhưng 171/200 là 85,5%. Cả hai đều có thể đúng nếu nói rõ mẫu số. Tỷ lệ đầu mô tả nộp bài trong nhóm đã bắt đầu; tỷ lệ sau mô tả nộp bài trong toàn bộ người đăng ký. Bỏ 20 người chưa bắt đầu khỏi câu chuyện có thể che mất khó khăn truy cập hoặc vấn đề truyền đạt lịch, nhưng cũng chưa đủ để kết luận họ đều gặp lỗi kỹ thuật.
Tương tự, 160/165 xấp xỉ 97% cho biết phần đã cấp báo cáo trong nhóm đủ điều kiện, còn 160/200 là 80% trong toàn bộ nhóm đăng ký. Việc cấp báo cáo cũng chưa chứng minh người nhận đã mở, đọc hiểu hoặc dùng được báo cáo. Mỗi chỉ số trả lời một câu hỏi và cần được đặt tên đúng.
Tốc độ trả lời chưa phải kết quả xử lý
Giả sử có 24 yêu cầu hỗ trợ, 20 yêu cầu đã được phản hồi và 15 yêu cầu đã giải quyết xong. Còn 9 yêu cầu chưa giải quyết, trong đó 4 chưa được phản hồi và 5 đã phản hồi nhưng còn chờ xử lý. Nếu chỉ báo thời gian phản hồi trung vị 4 phút trên 20 yêu cầu có phản hồi, cần ghi thêm 4 yêu cầu còn lại; không để chúng biến mất vì chưa có thời gian để tính.
Một tin nhắn “đã nhận thông tin” được gửi nhanh có giá trị xác nhận, nhưng chưa chứng minh học sinh đã tiếp tục làm được bài hoặc nhận đúng báo cáo. Sổ hỗ trợ nên nối yêu cầu với tình trạng, người phụ trách, thông tin còn thiếu và bước tiếp theo. Các thời gian và tỷ lệ trong ví dụ này không phải ngưỡng chứng nhận chất lượng hoặc cam kết phản hồi của Song Pa Lab hay Empire.
Hướng dẫn ITC/ATP năm 2025 đề cập việc phân công trách nhiệm, ghi nhận yêu cầu và điều tra ảnh hưởng của gián đoạn [1]. Khi vận dụng vào thi thử, đơn vị có thể dùng các chỉ số vận hành để tìm nơi cần cải thiện. Không nên suy phương án khắc phục chỉ từ một tỷ lệ tổng hoặc công bố lời hứa trước khi kiểm tra từng nhóm tình huống.
Kiểm tra chất lượng đánh giá cùng với việc vận hành
Một chương trình chạy mượt vẫn cần bài thi phù hợp mục tiêu, đáp án và cách chấm được kiểm tra, dữ liệu đủ chất lượng và lời diễn giải có căn cứ. Tỷ lệ nộp cao không tự chứng minh điểm đo chính xác. Nếu có IRT, cần xem bằng chứng về mô hình, sai số và phạm vi sử dụng kết quả, thay vì chỉ kiểm tra báo cáo có ghi chữ IRT hay không.
Với học sinh, câu hỏi thực tế là sau khi nhận kết quả, em biết điều gì cần xem lại và có thể thực hiện bước tiếp theo hay chưa. Với trường hoặc trung tâm, cần kiểm tra báo cáo lớp có đúng người, đúng lượt và phân biệt được trường hợp thiếu dữ liệu. Có thể chọn một số hồ sơ để đối chiếu từ đăng ký đến báo cáo, qua đó kiểm tra điều mà bảng thống kê chung không thể hiện.
Chọn một điểm cần sửa có thể theo dõi ở lần sau
Trong chương trình giả định, nhóm phụ trách có thể ưu tiên tìm nguyên nhân của 9 trường hợp đã bắt đầu nhưng chưa xác nhận nộp. Sau khi có căn cứ, đơn vị chọn thay đổi phù hợp và theo dõi lại số người mắc ở bước này. Nếu thành phần người tham gia hoặc cách tổ chức khác, cần nêu rõ khi so các đợt; không coi mọi thay đổi tỷ lệ là hiệu quả riêng của một biện pháp.
Thi thử theo định hướng V-ACT, HSA hoặc TSA có giá trị khi người học tham gia được, kết quả có cơ sở để hiểu và hỗ trợ sau đó đến đúng chỗ. Bảng hành trình giúp theo dõi việc tổ chức; hồ sơ chuyên môn giúp đánh giá chất lượng đo lường; phản hồi của người học cho biết thông tin có dùng được hay không. Đọc chúng cùng nhau mới tạo được một bức tranh đủ để cải thiện chương trình.
Đồ thị minh họa lại hành trình trong bảng. Cùng nhóm người và cùng quy tắc đếm; số liệu giả định, không phải dữ liệu Song Pa Lab hoặc Empire.
Nguồn tham khảo
[1] International Test Commission & Association of Test Publishers (2025). Guidelines for Technology-Based Assessment, Version 1.1. Mục 3.34–3.40 về tổ chức phản ứng và đối soát gián đoạn, trang 52–53. Xem tài liệu