Một người đọc lại câu mình vừa viết có thể kiểm được nhiều lỗi, nhưng cũng dễ mang theo những giả định đã có trong đầu. Phản biện độc lập thêm một cách đọc có căn cứ từ người khác. Giá trị của nó không nằm ở việc có thêm một chữ ký, mà ở việc ý kiến được hình thành đủ độc lập, các vấn đề được xử lý và người có trách nhiệm xác nhận đúng bản cuối.
Độc lập là thuộc tính của cách làm việc
Người phản biện cần có chuyên môn phù hợp với nội dung, mục tiêu và người làm bài dự kiến. Họ có thể ở trong cùng trường hoặc nhóm phát triển; “độc lập” không nhất thiết là một người từ tổ chức bên ngoài. Tuy nhiên, nếu chỉ đọc lời giải của tác giả rồi đồng ý, họ có thể bỏ qua chính cách hiểu khác mà bước phản biện cần phát hiện.
Một cách thực hành là cho người phản biện giải và ghi nhận xét ban đầu trước khi xem khóa của tác giả, rồi mới đối chiếu. Đây là thiết kế quy trình có thể lựa chọn, không phải hình thức bắt buộc cho mọi loại câu. Sau đối chiếu, các bên cần cùng xem đầy đủ đặc tả, ngữ liệu, phương án và hướng dẫn chấm để đánh giá đúng mục đích.
Một quy trình ba người có thể hình dung ngay
Các tên Mai, Hương, An và quy trình dưới đây hoàn toàn giả định. Đây là mẫu để hình dung phân công của một nhóm nhỏ, không phải mô tả tổ chức đang vận hành tại Song Pa Lab hoặc Empire. Số người và quyền hạn thật phải được đơn vị xác định theo công việc và mức hệ trọng của kết quả.
| Khâu | Người thực hiện trong mẫu | Đầu ra có thể kiểm |
|---|---|---|
| Biên soạn | Mai chuẩn bị câu, ngữ liệu, khóa, lời giải và đặc tả | Một bộ tài liệu có cùng mã và phiên bản |
| Đọc và giải ban đầu | Hương ghi cách hiểu, lời giải và vấn đề phát hiện trước khi đối chiếu khóa | Phiếu phản biện còn giữ ý kiến ban đầu |
| Đối chiếu và sửa | Mai giải trình từng ý; Hương kiểm phản hồi và bản sửa | Bảng nhận xét–cách xử lý–căn cứ, không chỉ chữ đã sửa |
| Xác nhận nội dung cuối | An theo phân công kiểm các ý đã xử lý và căn cứ chuyên môn; chuyển người thẩm định thêm nếu cần | Quyết định giữ/sửa/thử thêm/tạm ngừng, ghi đúng phiên bản |
| Khóa bản phát hành | An kiêm quản trị trong mẫu này, nhận đúng bộ đã duyệt; không tự đổi nội dung | Bản câu, khóa, lời giải và ngữ liệu nhất quán trong gói phát hành |
Ở mẫu này, tác giả chịu trách nhiệm nội dung mình đề xuất nhưng không tự biến mọi phản hồi thành “đã giải quyết”. Người phản biện kiểm việc xử lý; người được giao quyền duyệt xác nhận bản cuối theo căn cứ. Vai trò kỹ thuật khóa tệp phát hành cũng cần rõ để một chỉnh sửa sau duyệt không âm thầm trở thành bản đang dùng.
Một dòng nhật ký cần nói rõ hơn chữ đã duyệt
Ví dụ nhật ký tự dựng: “SP-Q406 v1.0 nhận ý kiến thiếu nhãn đơn vị trên hình; tác giả bổ sung nhãn ở ngữ liệu v1.1; người phản biện xác nhận nhãn và lời giải khớp; người duyệt chấp thuận bộ SP-Q406 v1.1 cùng ngữ liệu v1.1 để chuyển sang bước thử nghiệm.” Dòng này cho biết sửa điều gì và được phép làm gì tiếp, không biến duyệt nội dung thành xác nhận đã hiệu chuẩn.
Nếu vẫn còn bất đồng có thể ảnh hưởng đáp án hoặc cách hiểu, trạng thái ấy cần được giữ. “Chưa thống nhất” là thông tin công việc phải xử lý, không phải một ô có thể xóa để đủ hồ sơ. Có thể cần người thẩm định khác, một tài liệu đối chiếu hoặc phản hồi thử từ đúng đối tượng. Khi chưa có căn cứ phát hành, quy trình nội bộ nên xác định ai có quyền tạm ngừng câu.
Nguồn chuyên môn giúp xác định điều phải lưu
ETS yêu cầu lưu cách thu nhận ý kiến chuyên gia và đặc điểm liên quan đến tính độc lập, mức đồng thuận; đồng thời yêu cầu phản biện đặc tả, câu và tài liệu chấm bởi người đủ chuyên môn [1]. Bảng ba người trong bài là đề xuất triển khai để các yêu cầu ấy có sản phẩm cụ thể, không phải một sơ đồ nhân sự được ETS quy định.
Độc lập cũng không bảo đảm người phản biện luôn đúng. Bất kỳ ý kiến nào ảnh hưởng quyết định đều cần căn cứ từ yêu cầu, dữ kiện, tài liệu chuyên môn hoặc kết quả thử. Quyền chốt bản cuối đi cùng trách nhiệm ghi lý do và xử lý các vấn đề tồn, thay vì chỉ dựa vào chức danh hoặc số chữ ký.
Người học nhìn thấy gì từ công việc phía sau
Học sinh luyện V-ACT, HSA, TSA không cần xem mọi trao đổi nội bộ. Điều hữu ích là đơn vị mở được đúng câu, lời giải và căn cứ khi có thắc mắc; thông báo sửa đổi rõ khi cần; giải thích được giới hạn của bản đang sử dụng. Một quy trình phản biện có hồ sơ giúp thực hiện những việc ấy nhất quán hơn.
Với ngân hàng câu hỏi, nên hỏi cụ thể: ai đã đọc độc lập, vấn đề nào được xử lý, ai xác nhận bản nào và bản đó được phép dùng ở giai đoạn nào? Những câu hỏi này biến phản biện thành một phần của bằng chứng chất lượng. Phân tích IRT ở bước sau bổ sung dữ liệu hoạt động của câu, không thay việc xác nhận nội dung và khóa đã được rà đúng.
Nguồn tham khảo
[1] Educational Testing Service (2014). ETS Standards for Quality and Fairness, Standard 2.4, tr.10; Standard 7.4, tr.31. Xem tài liệu