ROI AI Agent: đo theo công việc hoàn tất, không theo số lần gọi model
Xây business case AI Agent bằng cost per completed case, safe completion, cycle time, rework, escalation và giá trị tài chính đã kiểm chứng.
ROI của AI Agent không nên bắt đầu bằng “một triệu token giá bao nhiêu” hoặc “agent đã chạy bao nhiêu lần”. Một lần chạy có thể không tạo ra kết quả, tạo việc phải sửa hoặc chỉ chuyển chi phí sang bộ phận khác. Đơn vị đo tốt hơn là một case hoàn tất an toàn: yêu cầu khách được giải quyết, hồ sơ được xác minh, hóa đơn được đưa tới trạng thái hợp lệ hoặc báo cáo được giao đúng hạn.
Business case cần so sánh baseline và pilot trên cùng loại công việc, cùng mức chất lượng và cùng cửa sổ thời gian. Tổng chi phí phải gồm model, integration, hạ tầng, giám sát, review, rework và incident. Lợi ích chỉ được ghi nhận khi outcome được hệ thống nghiệp vụ xác nhận.
Đơn vị đo
Từ lượt chạy sang completed case
Một output đẹp chưa phải một công việc hoàn tất.
Xác định case_id, trạng thái bắt đầu, điều kiện hoàn tất và hệ thống có thẩm quyền xác nhận. Ví dụ, với support, hoàn tất không phải agent đã gửi câu trả lời mà là ticket được giải quyết không reopen trong một khoảng theo dõi. Với AP, hoàn tất không phải OCR xong mà là invoice hợp lệ, không trùng và đi qua approval đúng policy.
Mẫu số phải minh bạch: tổng case đủ điều kiện, không chỉ case agent chọn xử lý. Tách completed_by_agent, completed_with_human, handed_off, failed, và . Nếu bỏ case khó khỏi báo cáo, completion rate sẽ đẹp nhưng không phản ánh vận hành.
