Đừng bảo AI là chuyên gia — hãy cho ngữ cảnh

[AI Crazy]

Nghiên cứu mới cho thấy việc yêu cầu AI 'hành xử như chuyên gia' không nhất thiết cải thiện độ chính xác, thậm chí có thể làm kém đi với các tác vụ đòi hỏi kiến thức như toán và lập trình. Thay vào đó, độ dài và tính chính xác của prompt, cùng bối cảnh rõ ràng, mang lại kết quả tốt hơn.

Tóm tắt nghiên cứu​

Nhiều nghiên cứu gần đây chỉ ra rằng việc thêm persona kiểu "hãy đóng vai chuyên gia" thường giúp về mặt giọng điệu, cấu trúc hay mục đích (alignment), nhưng lại không nâng cao khả năng trả lời các câu hỏi đòi hỏi kiến thức chính xác như toán học hay mã nguồn.

Các tác giả từ Đại học Southern California cho rằng persona dạng này có thể khiến mô hình chuyển sang chế độ "theo chỉ dẫn" (instruction-following) thay vì truy xuất kiến thức đã học, dẫn tới hiệu suất kém trên các benchmark kiến thức.

Điều gì thực sự quan trọng trong prompt?​

Nghiên cứu nhấn mạnh rằng độ dài hợp lý của prompt và thông tin chính xác, đầy đủ mới là yếu tố quyết định. Một prompt được thiết kế cẩn thận, cung cấp ngữ cảnh và mục tiêu rõ ràng, cho phép AI hoạt động tự chủ và cho đầu ra chất lượng hơn.

Ngoài ra, các kết quả cho thấy persona hữu ích cho các nhiệm vụ về giọng điệu, phong cách hay hướng dẫn viết, nhưng không biến đổi bản chất kiến thức của mô hình.

Giải pháp PRISM​

Các tác giả đề xuất PRISM (Persona Routing via Intent-based Self-Modeling) — một cách tiếp cận để cho AI tự so sánh câu trả lời với và không có persona, rồi chọn phương án tốt hơn. Hệ thống sau đó học khi nào nên áp dụng persona và khi nào nên để mô hình cơ sở xử lý nhằm tránh làm xấu đầu ra.

Sự khác biệt giữa các loại mô hình​

Nghiên cứu cũng phát hiện ra sự khác biệt tùy loại mô hình: các mô hình chú trọng suy luận hưởng lợi nhiều hơn từ ngữ cảnh dài, trong khi các mô hình đã được tinh chỉnh theo chỉ dẫn (instruction-tuned) nhạy cảm hơn với persona.

Lời khuyên thực tế cho người dùng​

• Đừng mặc định dặn AI là "chuyên gia"; thay vào đó tập trung cung cấp ngữ cảnh và mục tiêu cụ thể.
• Viết prompt ngắn gọn nhưng đầy đủ thông tin quan trọng: dữ kiện, ràng buộc, định dạng mong muốn.
• Sử dụng persona khi cần điều chỉnh giọng điệu hoặc phong cách, nhưng kiểm tra kỹ kết quả với các câu hỏi kiến thức quan trọng.
• Đối với bài toán toán học và lập trình, ưu tiên prompt chính xác, ví dụ cung cấp ví dụ đầu vào/đầu ra hoặc bước trung gian mong muốn.
• Cân nhắc phương pháp so sánh câu trả lời (có/không persona) để tự động chọn giải pháp phù hợp nếu có thể.

Kết luận​

Người dùng và nhà phát triển nên để AI làm việc dựa trên nhiệm vụ và bối cảnh thay vì buộc một vai "chuyên gia" không cần thiết. Việc tối ưu prompt theo hướng cung cấp thông tin chính xác, đủ ngữ cảnh và mục tiêu rõ ràng thường mang lại kết quả thực dụng và tin cậy hơn.

Nguồn: Techradar