Bài kiểm tra đặt lại câu hỏi cho đúng

Tháng 10/1950, tạp chí triết học Mind đăng bài "Computing Machinery and Intelligence" (Máy tính và trí thông minh) của Alan Turing. Câu mở đầu đặt vấn đề: liệu máy có thể suy nghĩ không. Rồi Turing gác câu hỏi đó sang một bên, vì những chữ như "suy nghĩ" quá mơ hồ để tranh luận cho ra lẽ.

Thay vào đó, ông mô tả "trò chơi bắt chước" (imitation game). Một giám khảo ngồi ở phòng khác, nhắn tin bằng chữ với hai người chơi giấu mặt: một người thật và một cỗ máy. Giám khảo phải đoán ai là ai. Theo Turing, nếu khó phân biệt cỗ máy với con người, ta nên xem điều đó là nghiêm túc.

Turing đưa ra một dự đoán thận trọng. Ông cho rằng khoảng 50 năm sau, máy tính sẽ chơi giỏi đến mức một giám khảo bình thường, sau năm phút hỏi chuyện, chỉ đoán đúng không quá 70% số lần. Ông cũng lần lượt trả lời từng phản bác, chẳng hạn ý của Ada Lovelace rằng máy chỉ làm được những gì ta bảo nó làm.

Khi đó máy tính điện tử mới vừa ra đời. Turing làm việc với một trong những chiếc đầu tiên, tại Đại học Manchester. Không cỗ máy nào ông có trong tay chơi nổi trò này.

Bước đi của Turing là chấm một cỗ máy qua cách nó trò chuyện, chứ không phải qua những gì diễn ra bên trong. Ý tưởng đó trở thành phép thử nổi tiếng nhất của AI, ngày nay gọi là Turing test (phép thử Turing). Nó cũng để lại một khoảng trống vẫn còn bị tranh cãi: trò chuyện giống người không có nghĩa là hiểu, biết hay quan tâm.

Với người dùng chatbot hôm nay, điều này rất quan trọng. Chatbot hiện đại chơi trò bắt chước rất giỏi. Chúng viết trôi chảy, thân thiện, nghe như người thật. Sự trôi chảy đó chính là thứ phép thử Turing đo, và nó cho bạn biết rất ít về việc câu trả lời có đúng hay không. Một chatbot có thể nghe như người chín chắn trong khi thực chất nó chỉ đang đoán từ tiếp theo có khả năng xuất hiện nhất, hết từ này đến từ khác.

Ý tưởng đằng sau vụ nàyBài học: Chatbot thật ra đang làm gì →

1. 1Đánh giá câu trả lời của chatbot bằng cách kiểm tra, chứ không phải bằng việc nó nghe tự nhiên hay tự tin đến đâu.
2. 2Nhớ rằng "nghe giống người" và "nói đúng" là hai phép thử khác nhau.
3. 3Khi ai đó bảo AI "biết nghĩ" hay "hiểu", hãy hỏi cụ thể nó đã làm gì và điều đó được đo bằng cách nào.
4. 4Tận dụng sự trôi chảy của chatbot cho việc nó giỏi, như viết nháp và giải thích, còn quyết định thì giữ cho phán đoán của bạn.