Một đợt phát triển ngân hàng thường có câu chưa đủ dữ liệu, bản đang sửa hoặc kết quả cần kiểm lại. Nếu chỉ có hai ô “đạt” và “không đạt”, nhóm dễ đánh dấu cho xong hoặc bỏ mất việc đang chờ. Quy trình ngoại lệ giúp giữ đúng trạng thái bằng chứng, chỉ rõ việc được làm tiếp và điều kiện để một quyết định được mở lại.
Ngoại lệ cần đi cùng giới hạn sử dụng
Ngoại lệ ở đây là một tình huống chưa đáp ứng đủ tiêu chí của mục đích dự kiến, cần được xử lý theo thẩm quyền thay vì đi theo đường nghiệm thu thông thường. Nó không phải cách tự miễn những điều kiện nội dung hoặc đổi tên câu còn thiếu bằng chứng thành câu đã được xác nhận.
Mức hạn chế cần phù hợp phần đang thiếu. Một câu đã rõ nội dung có thể được dùng để phản biện hoặc thử thêm theo kế hoạch, trong khi chưa được dùng tham số để chấm cá nhân trên thang. Nếu đáp án chưa được phân xử, câu đó chưa được dùng để chấm và báo điểm; chỉ tiếp tục phản biện hoặc thử theo kế hoạch đã duyệt. Quyền sử dụng được xét lại sau khi giải quyết vấn đề và thẩm định bằng chứng tương ứng, rồi ghi cụ thể trong hồ sơ.
Mở một phiếu ngoại lệ có thể giao việc
Phiếu EX-04 dưới đây hoàn toàn tự dựng cho Q719 v1.0. Số 78, thời điểm theo ngày công việc và mọi quyết định đều giả định; không phải hồ sơ thật của Song Pa Lab hay Empire. Mẫu chỉ minh họa cơ chế kiểm soát một câu còn thiếu bằng chứng, không đưa ra chính sách bắt buộc cho mọi đơn vị.
| Trường trong phiếu EX-04 | Nội dung minh họa |
|---|---|
| Mục đích đang xin nghiệm thu | Dùng câu có tham số để dự tuyển tạo đề và chấm theo thang SP-R |
| Bằng chứng còn thiếu | 78 phản hồi phân tích; vùng cần đo còn ít dữ liệu; phần kiểm độ ổn định và độ chính xác chưa giải quyết xong |
| Việc được phép ở trạng thái hiện tại | Giữ lịch sử, phản biện nội dung và đưa vào kế hoạch thử bổ sung đã duyệt |
| Việc chưa được phê duyệt | Không xếp vào tập sẵn sàng dùng tham số cho mục đích chấm SP-R đang xét |
| Trách nhiệm trong mẫu | Người phụ trách dữ liệu lập kế hoạch; người thẩm định kiểm bằng chứng; người được giao quyền nghiệm thu chốt trạng thái |
| Mốc theo dõi | Ngày D0 mở phiếu; D7 rà việc đã làm và dữ liệu đã có; tới D7 không tự chuyển thành đạt |
| Điều kiện mở lại quyết định | Đã đối soát dữ liệu bổ sung, phân tích và kiểm phù hợp; thẩm định theo tiêu chí mục tiêu, ghi rõ người chốt và phiên bản |
Phiếu có ích vì người vận hành biết Q719 được xuất hiện ở đâu và chưa được xuất hiện ở đâu. Người tiếp nhận không phải đoán chữ “chờ” nghĩa là chờ tải tệp, chờ duyệt nội dung hay chờ thêm dữ liệu. Nếu hệ thống có lựa chọn câu tự động, trạng thái và quyền sử dụng phải được đưa vào điều kiện lọc tương ứng.
Theo dõi việc thiếu đã thay đổi hay chưa
| Sự kiện sau khi mở phiếu | Điều cần kiểm | Hướng xử lý minh họa |
|---|---|---|
| Có thêm nhiều phản hồi nhưng vẫn thiếu đúng vùng quan trọng | Phần thiếu ban đầu đã được giải quyết chưa | Tiếp tục hạn chế; điều chỉnh kế hoạch thu, không chỉ xem tổng N đã tăng |
| Nội dung được sửa thành v1.1 | Thay đổi ảnh hưởng nhiệm vụ và bằng chứng cũ thế nào | Mở hồ sơ bản mới, liên kết lịch sử; không tự chuyển tham số v1.0 |
| Bằng chứng bổ sung đáp ứng tiêu chí và được thẩm định | Đúng dữ liệu, bản câu, thang, phạm vi và quyền quyết định | Người có thẩm quyền chốt trạng thái mới, cập nhật tập được phép dùng |
| Không thể bổ sung theo kế hoạch hiện tại | Mục đích nào còn có thể được hỗ trợ | Giữ hạn chế hoặc ngừng trong mục đích đang xét; lưu lý do và điều kiện có thể xem lại |
Một ngày đến hạn là thời điểm quản lý công việc, không phải bằng chứng đo lường mới. Tương tự, chạy lại cùng dữ liệu với một cấu hình khác chưa tự giải quyết vấn đề; cần giải thích vì sao cách phân tích phù hợp và phần thiếu đã được xử lý ra sao. Nếu sửa khóa hoặc loại câu liên quan, phải kiểm tác động và cập nhật các kết quả, tài liệu liên quan.
Giữ cơ chế đủ linh hoạt nhưng có trách nhiệm
ETS nêu các phương án bổ sung khi không thể thử trước đầy đủ, như thử quy mô nhỏ, nguồn thông tin hỗ trợ hoặc phân tích ban đầu sau tổ chức trước khi báo điểm [1]. Vì vậy, không nên diễn giải thành một lệnh cấm chung cho mọi việc sử dụng khi chưa pretest. Cần đánh giá tình huống, mục đích, điều kiện và bằng chứng thay thế có thể cung cấp.
Cơ chế phiếu ngoại lệ của bài là đề xuất quản trị để ghi được đánh giá ấy. Hướng dẫn ITC yêu cầu xác định thẩm quyền xử lý, có giám sát và giữ hồ sơ vấn đề cùng cách khắc phục [2]; không quy định phải dùng đúng các tên trạng thái hoặc hai bảng trong bài. Đơn vị có thể điều chỉnh quy trình nhưng cần giữ khả năng kiểm lại quyết định.
Đóng phiếu không đồng nghĩa xóa lịch sử
Khi kết thúc, hồ sơ phải chỉ ra bằng chứng đã có, việc đã làm, kết quả thẩm định và phạm vi trạng thái mới. Bản phân tích cũ và các lượt đã dùng vẫn được giữ theo quản trị dữ liệu để đối soát. Nếu phát hiện vấn đề ảnh hưởng kết quả đã báo, việc xử lý cần đi theo kế hoạch riêng có trách nhiệm và lưu tác động, không chỉ cập nhật danh sách câu cho lần sau.
Với đối tác nhận ngân hàng phục vụ ôn HSA, V-ACT, TSA, bảng câu sẵn sàng và bảng câu còn hạn chế nên được phân biệt rõ. Người học không cần đọc mọi phiếu nội bộ, nhưng họ được lợi khi một kết quả chưa chắc không bị trình bày như đã xác nhận. Một quy trình ngoại lệ tốt giúp dự án tiếp tục làm những việc có căn cứ, đồng thời bảo toàn các điều kiện để chất lượng được kiểm chứng.
Nguồn tham khảo
[1] Educational Testing Service (2014). ETS Standards for Quality and Fairness, Standard 7.5, tr. 32. Xem tài liệu
[2] International Test Commission (2014). ITC Guidelines on Quality Control in Scoring, Test Analysis, and Reporting of Test Scores. International Journal of Testing, 14 (3), 195–217, các mục 1.4.2–1.4.3, 1.6–1.7 và 2.4.1.5–2.4.1.6. DOI 10.1080/15305058.2014.918040. Xem tài liệu