Cách tính ROI thử nghiệm AI mà không tự làm đẹp số

Công thức cơ bản là: ROI = (lợi ích dùng được − tổng chi phí) / tổng chi phí. Kết quả thường được đổi sang phần trăm. Công thức đơn giản, nhưng việc khó là xác định hai vế theo cùng phạm vi và cùng thời gian.

Green Book của Bộ Ngân khố Anh nhấn mạnh việc đánh giá lựa chọn cần xem mục tiêu, chi phí, lợi ích, rủi ro, bằng chứng và sự không chắc chắn. Bài này mượn cách nghĩ đó làm khung quản trị, không phải chuẩn kế toán cho mọi doanh nghiệp.

Đo cách làm hiện tại trong một khoảng đủ đại diện: số ca, thời gian mỗi ca, việc tồn, lỗi phải sửa, chi phí ngoài và thời gian quản lý can thiệp. Dùng cùng định nghĩa khi đo sau thử nghiệm.

Nếu tuần thử có ít việc hơn hoặc đội ngũ đổi quy trình cùng lúc, phải ghi rõ. Không nên gán toàn bộ thay đổi cho AI.

Có thể tính chi phí tránh được, thời gian thật sự được dùng lại, lỗi giảm có giá trị đo được hoặc doanh thu tăng có quan hệ đủ rõ với phép thử. Không cộng cùng một lợi ích hai lần.

Ví dụ minh họa: nếu nhân viên tiết kiệm 20 giờ nhưng thời gian đó vẫn bỏ trống, chưa thể coi toàn bộ là doanh thu. Có thể ghi là năng lực được giải phóng, rồi theo dõi xem nó được dùng để gọi khách, xử lý tồn hay giảm làm thêm.

Ngoài phí công cụ, cần tính thời gian chuẩn bị dữ liệu, tích hợp, họp quy trình, đào tạo, người duyệt, theo dõi, sửa lỗi và phương án quay về. Nếu tự xây, thêm chi phí phát triển, hạ tầng và duy trì.

Nếu mua sẵn, thêm chi phí cấu hình, kết nối và thay đổi nhà cung cấp. Một phép thử rẻ lúc đầu vẫn có thể đắt khi mở rộng, nên ghi cả chi phí một lần và chi phí vận hành.

Xem ROI cùng chất lượng và rủi ro. Một phép thử có lợi về tiền nhưng tạo lỗi ảnh hưởng quyền lợi khách vẫn không nên mở rộng. Ngược lại, ROI ngắn hạn thấp có thể chấp nhận nếu phép thử tạo dữ liệu nền quan trọng; phải ghi đây là quyết định chiến lược, không làm đẹp số.

Chạy ít nhất ba kịch bản: thận trọng, cơ sở và thuận lợi. Sau mỗi vòng, thay giả định bằng số thực tế. Người có thẩm quyền quyết định tiếp tục, thu hẹp hay dừng.