Làm thế nào để đo lường hiệu quả của chương trình đào tạo AI?

Tóm lại, làm thế nào để đo lường hiệu quả đào tạo AI?

Đo lường ở ba cấp độ, theo thứ tự: mọi người có thể thực hiện tác vụ đạt tiêu chuẩn không, họ có áp dụng vào công việc thực tế không, và điều gì đó doanh nghiệp quan tâm có thay đổi không. Tỷ lệ hoàn thành và điểm hài lòng đáng được ghi nhận, nhưng chúng chỉ cho thấy mọi người đã tham gia và thấy thích, không chứng minh họ đã học được.

Điều này tương ứng với mô hình Kirkpatrick được sử dụng rộng rãi, có bốn cấp độ là phản ứng, học tập, hành vi và kết quả. Theo định nghĩa của chính mô hình, cấp độ 3 là mức độ mọi người thực hiện các hành vi thiết yếu trong môi trường của họ, còn cấp độ 4 là mức độ đạt được các kết quả tổ chức đã đặt ra. Với đào tạo AI, cấp độ 2 và 3 thường là nơi có bằng chứng hữu ích.

Một bộ tiêu chuẩn tốt để đánh giá sản phẩm công việc mẫu sẽ như thế nào?

Một tiêu chuẩn tốt là bộ tiêu chí chấm điểm ngắn gọn mà người khác có thể áp dụng và đi đến cùng nhận định. Với câu trả lời khách hàng có AI hỗ trợ, bộ tiêu chí có thể gồm: chỉ dùng thông tin được cung cấp, trả lời đúng câu hỏi thực tế của khách hàng, phù hợp với giọng văn của công ty, chỉ rõ những điểm chưa chắc chắn và không có nội dung nào cần sửa trước khi gửi.

Chấm từng tiêu chí theo cách đơn giản, chẳng hạn đạt, đạt một phần hoặc chưa đạt, và giữ lại ghi chú của người rà soát. Ghi chú thường hữu ích hơn điểm số vì cho biết cần luyện tập điều gì tiếp theo.

Một bản so sánh trước và sau sẽ như thế nào?

Fernhill Outdoors, một nhà bán lẻ trực tuyến giả định có 15 nhân viên, đã đào tạo bốn nhân viên hỗ trợ của mình. Trước khi đào tạo, mỗi người dùng ChatGPT để soạn câu trả lời cho một khiếu nại mẫu. Các bản nháp thường lịch sự nhưng bịa ra một chi tiết về chính sách hoàn tiền và bỏ sót câu hỏi của khách hàng về ngày giao hàng.

Sau bốn tuần, mỗi nhân viên soạn câu trả lời cho một khiếu nại khác nhau theo cùng một bộ tiêu chí chấm điểm. Trưởng nhóm hỗ trợ ghi lại những tiêu chí đã đạt và nhận thấy ba trong bốn bản nháp giờ đây đã nêu rõ rằng ngày giao hàng chưa chắc chắn, thay vì tự bịa ra một ngày. Đó là bằng chứng về việc học được cách làm một nhiệm vụ của bốn người. Đó không phải là bằng chứng cho thấy hỗ trợ nhanh hơn hay khách hàng hài lòng hơn, và trang này không nên khẳng định như vậy.

Làm thế nào để biết mọi người có áp dụng kỹ năng vào công việc thực tế hay không?

Quan sát hành vi trong công việc thường ngày thay vì hỏi mọi người có dùng hay không. Những dấu hiệu hữu ích gồm bản nháp có AI hỗ trợ đã được rà soát trong thư mục chung, quản lý thấy giảm những lỗi mà khóa đào tạo nhắm đến, và mọi người hỏi về giới hạn chia sẻ thông tin trước khi hành động.

Báo cáo sử dụng công cụ giúp theo dõi khía cạnh truy cập. Ví dụ, báo cáo sử dụng Copilot của Microsoft cho biết người dùng đang hoạt động và ngày hoạt động gần nhất. Dữ liệu hoạt động cho thấy công cụ đã được sử dụng, chứ không cho thấy công cụ được sử dụng tốt, vì vậy hãy kết hợp dữ liệu này với việc xem xét công việc thực tế.

Có thể tính tỷ suất hoàn vốn từ việc đào tạo AI không?

Bạn có thể ước tính, nhưng hãy thận trọng với những gì mình khẳng định. Thời gian tiết kiệm do nhân viên tự báo cáo là cảm nhận, không phải kết quả đo lường. Nếu một kết quả có ý nghĩa quan trọng, hãy đo thời gian thực hiện một nhiệm vụ tương đương trước và sau, hoặc so sánh chất lượng đầu ra đã được rà soát, đồng thời ghi lại ước tính đó bao quát bao nhiêu người và nhiệm vụ.

Cũng cần tính đầy đủ chi phí, bao gồm thời gian của người học và thời gian rà soát. Với nhiều nhóm nhỏ, bằng chứng rõ ràng nhất sẽ là một tập hợp sản phẩm công việc đã được rà soát và một cách làm mà mọi người tiếp tục duy trì, thay vì một con số duy nhất về tỷ suất hoàn vốn. Đó là cơ sở vững chắc để quyết định có tiếp tục hay không.

Tosheo.ai phù hợp với những nhu cầu nào?

Tosheo.ai đang được phát triển để mỗi bài học kết thúc bằng một nhiệm vụ được chấm theo bảng tiêu chí công khai, kèm phản hồi cụ thể, và người học có thể đánh dấu điểm số mà họ không đồng ý để yêu cầu xem xét lại. Dự kiến người quản lý sẽ thấy tiến bộ về kỹ năng theo vai trò, qua đó có bằng chứng về việc học. Sản phẩm không thể đo lường kết quả kinh doanh thay bạn.

Khi nào Tosheo.ai không phải là giải pháp?

Nếu cần một đánh giá chính thức cho bên tài trợ hoặc hội đồng quản trị, có nhóm đối chứng hoặc số liệu đã được kiểm toán, bạn cần chuyên gia đánh giá. Nếu chủ yếu cần theo dõi giấy phép công cụ và hoạt động sử dụng, báo cáo quản trị của nhà cung cấp có thể đáp ứng. Tosheo.ai không tích hợp với hệ thống quản lý học tập khi ra mắt.

Nguồn và phạm vi

Kirkpatrick Partners, Mô hình Kirkpatrick, đã kiểm tra ngày 16 tháng 10 năm 2026 ↗

Microsoft Learn, báo cáo sử dụng Microsoft Copilot, 14 July 2026 ↗