Đo cùng một việc, từ đầu đến lúc dùng được
Một bản nháp xuất hiện sau vài giây vẫn có thể mất nhiều phút để sửa. Hãy đo từ lúc nhận yêu cầu đến khi người phụ trách chấp nhận kết quả, cho cả cách làm cũ và cách dùng AI.
Chọn một đơn vị rõ ràng: một yêu cầu, một hóa đơn hoặc một báo cáo. Ghi riêng thời gian chờ và thời gian người làm thực sự bỏ ra. Nếu số ban đầu chỉ là ước lượng, đánh dấu rồi đo lại trên công việc thực tế.
Ví dụ: xử lý 100 yêu cầu mất bao lâu?
Đây là ví dụ giả định, không phải kết quả khách hàng hay mức tiết kiệm được cam kết. Hai cách làm được so ở cùng khối lượng và mức chất lượng chấp nhận được.
Bảng có thể cuộn ngang khi chưa hiện đủ.
| Khoản đo | Cách cũ | Dùng AI |
|---|---|---|
| Mỗi yêu cầu | 6 phút | 4 phút |
| 100 yêu cầu | 600 phút | 400 phút |
| Kiểm tra thêm cả đợt | 0 phút trong ví dụ | 20 phút |
| Tổng | 600 phút | 420 phút |
Chênh lệch: 600 − 420 = 180 phút, tức 3 giờ. Đừng bỏ 20 phút kiểm tra cả đợt ra khỏi phép tính.
Ba giờ bớt làm việc này có thể dùng cho việc khác; chưa thể coi ngay là tiền tiết kiệm. Muốn tính lợi ích bằng tiền, cần cộng phí mô hình, hạ tầng, phần mềm, triển khai và vận hành.
Ngoài thời gian, cần ghi những gì?
- Chất lượng: bao nhiêu kết quả dùng được sau kiểm tra, bao nhiêu phải sửa; lỗi nào nghiêm trọng đến mức phải dừng.
- Công vận hành: chuẩn bị dữ liệu, sửa lỗi kết nối, làm lại và xử lý việc AI chuyển cho người.
- Chi phí: khoản trả một lần, khoản theo mức dùng và công nhân sự. Tách số thực trả khỏi số đang ước tính.
Với trợ lý tra cứu, kiểm câu trả lời, tài liệu dẫn nguồn và quyền xem. Với hóa đơn, kiểm riêng các trường quan trọng như mã số thuế, số tiền và ngày.
Thử cả việc khó trước khi quyết định
Chọn mẫu thường gặp, mẫu khó đọc và trường hợp thiếu thông tin. Dành riêng một phần mẫu chưa dùng để sửa hệ thống cho lần đánh giá cuối. Ghi lại phiên bản tài liệu, mô hình và cấu hình.
Một lần từ chối vì thiếu dữ liệu có thể là kết quả đúng. Một câu trả lời trôi chảy nhưng dùng sai nguồn thì không. Người phụ trách cần thống nhất cách chấm những tình huống này.
Bản kết luận nên nêu: phạm vi đã thử, số đo, lỗi còn lại, ai vận hành và cách quay về quy trình cũ. Chỉ mở rộng phần đã đạt yêu cầu; tiếp tục đo khi bổ sung loại việc mới.
Mẫu đo thử nghiệm
Bạn có thể tải về hoặc mở để sao chép và điền thông tin của mình.
Tham khảo
Tham khảo việc đánh giá AI bằng số đo và bộ kiểm thử theo từng bối cảnh. Phép tính minh họa và mẫu theo dõi do Rivermind Labs đề xuất.