Càng thông minh, trí tuệ nhân tạo càng thích giấu dốt?
Một nhóm nghiên cứu trí tuệ nhân tạo (AI) tại Đại học Bách khoa Valencia, Tây Ban Nha, phát hiện rằng khi các mô hình ngôn ngữ lớn (LLM) trở nên lớn hơn và tinh vi hơn, chúng có xu hướng ít thừa nhận với người dùng rằng mình không biết câu trả lời.
Trong nghiên cứu được công bố trên tạp chí Nature, nhóm đã kiểm tra phiên bản mới nhất của ba chatbot trí tuệ nhân tạo AI phổ biến nhất về phản hồi, độ chính xác và khả năng người dùng phát hiện câu trả lời sai.
Khi LLM trở nên lớn hơn và tinh vi hơn, chúng lại có xu hướng ít cởi mở hơn. (Ảnh minh họa).
Để kiểm tra độ chính xác của ba LLM phổ biến nhất là BLOOM, LLaMA và GPT, nhóm nghiên cứu đã đưa ra hàng nghìn câu hỏi và so sánh câu trả lời nhận được với phản hồi của các phiên bản trước đó cho cùng một câu hỏi.
Họ cũng đa dạng hóa chủ đề, bao gồm toán học, khoa học, câu đố chữ và địa lý, cũng như khả năng tạo văn bản hoặc thực hiện các hành động như sắp xếp danh sách.
Kết quả nghiên cứu cho thấy một số xu hướng đáng chú ý.
Độ chính xác nói chung của các chatbot được cải thiện qua mỗi phiên bản mới, nhưng vẫn giảm khi đối mặt với những câu hỏi khó hơn.
Điều đáng ngạc nhiên là khi LLM trở nên lớn hơn và tinh vi hơn, chúng lại có xu hướng ít cởi mở hơn về khả năng trả lời chính xác của mình.
Trong các phiên bản trước đây, hầu hết LLM sẽ thẳng thắn thông báo với người dùng khi chúng không thể tìm thấy câu trả lời hoặc cần thêm thông tin.
Ngược lại, các phiên bản mới hơn có xu hướng đoán nhiều hơn, dẫn đến việc đưa ra nhiều câu trả lời hơn nói chung, bao gồm cả đúng và sai.
Đáng lo ngại hơn, nghiên cứu phát hiện rằng tất cả các LLM đôi khi vẫn đưa ra câu trả lời không chính xác ngay cả đối với các câu hỏi dễ, cho thấy độ tin cậy của chúng vẫn còn là một vấn đề cần được cải thiện.
Những phát hiện này nêu bật một nghịch lý trong sự phát triển của AI: mặc dù các mô hình ngày càng mạnh mẽ hơn, chúng cũng có thể trở nên kém minh bạch hơn về những hạn chế của mình.
Điều này đặt ra những thách thức mới trong việc sử dụng và tin tưởng vào các hệ thống AI, đòi hỏi người dùng phải thận trọng hơn và các nhà phát triển cần tập trung vào việc cải thiện không chỉ độ chính xác mà còn cả khả năng "tự nhận thức" của các mô hình.
Dùng AI vẽ chân dung của Leonardo da Vinci, Alexander Đại đế ở thế kỷ 21 và cái kết cực chất
Ở thế kỷ 21, Leonardo da Vinci, Alexander Đại đế hay Van Gogh có vẻ ngoài thế nào?
Phát hiện hơn 2 triệu cấu trúc tinh thể mới, AI của Google rút ngắn 800 năm nghiên cứu cho nhân loại
Thay vì phải tiêu tốn thời gian và công sức cho các thí nghiệm thử sai để tìm ra vật liệu mới, bộ phận phát triển AI của Google đã sử dụng các mô hình máy học để rút ngắn quá trình này.
Trí tuệ nhân tạo hàng đầu thế giới bị qua mặt trong môn cờ vây chỉ bằng một "thủ thuật cỏn con"
"Vô chiêu thắng hữu chiêu", thủ thuật đánh bại AI cờ vây hàng đầu thế giới hóa ra đơn giản không ngờ.
Deepfake là gì? Làm sao để phát hiện video làm từ deepfake?
Hình ảnh, video deepfake đang trở thành một trào lưu hết sức nguy hiểm và xuất hiện ngày càng nhiều trên mạng hay các phương tiện truyền thông.
Chatbot ChatGPT "hot" nhất hiện nay có gì đặc biệt?
ChatGPT đã có hơn 1 triệu người dùng thử chỉ trong vòng một tuần ra mắt. Đây là sản phẩm của một công ty trí tuệ nhân tạo do tỷ phú Elon Musk đồng sáng lập.
Các nhân vật trong truyện tranh Conan sẽ có dung nhan thực tế như thế nào ngoài đời thật?
Công nghệ AI cho kết quả siêu ấn tượng khi dựng lại hình ảnh các nhân vật trong bộ truyện Thám Tử Lừng Danh Conan.
