Lưu ý: Phiên bản miễn phí của ChatGPT có thể cung cấp thông tin không đầy đủ

Biểu tượng của OpenAI và ChatGPT. Ảnh: AFP/TTXVN

Nghiên cứu trên được thực hiện bởi nhóm dược sĩ tại Đại học Long Island (Mỹ) từ tháng 1/2022 đến tháng 4/2023 đối với phiên bản miễn phí của ChatGPT của công ty OpenAI. Theo đó, Phó Giáo sư chuyên ngành Dược học Sara Grossman cùng nhóm nghiên cứu đã đưa ra 45 câu hỏi thực tế liên quan đến dịch vụ thông tin thuốc tại trường Dược thuộc Đại học Long Island. Một số dược sĩ trong nhóm đã nghiên cứu và trả lời 45 câu hỏi. Một số dược sĩ khác sẽ kiểm tra lại mỗi câu hỏi và trả lời. Những câu trả lời này được sử dụng làm tiêu chí để đối chiếu với các phản hồi của ChatGPT. Sau đó, nhóm nghiên cứu đã loại bỏ 6 câu hỏi vì thiếu tài liệu giải đáp, để lại 39 câu hỏi cho ChatGPT trả lời.

Kết quả cho thấy chỉ 10 trong số 39 phản hồi của ChatGPT được đánh giá là đáng tin cậy theo tiêu chí của các dược sĩ. ChatGPT không trả lời trực tiếp 11 câu hỏi, trả lời không chính xác cho 10 câu và trả lời sai hoặc không đầy đủ cho 12 câu.

Trước kết quả này, trưởng nhóm nghiên cứu Sara Grossman cho rằng cần thận trọng khi sử dụng ChatGPT để tìm hiểu thông tin liên quan đến thuốc, và người dùng cũng nên xác minh lại thông tin bằng các nguồn đáng tin cậy khác.

Đối với mỗi câu hỏi, các nhà nghiên cứu yêu cầu ChatGPT cung cấp tài liệu tham khảo để xác minh thông tin. Chỉ có 8 câu trả lời có tài liệu tham khảo và tất cả đều đã không còn tồn tại. Điều đáng chú ý là, ChatGPT được hỏi về sự tương tác giữa thuốc Paxlovid điều trị COVID-19 của hãng Pfizer và thuốc cao huyết áp verapamil. ChatGPT trả lời không có tương tác nào khi sử dụng 2 loại thuốc này cùng lúc. Tuy nhiên, Phó Giáo sư Grossman cho biết thực tế, 2 thuốc này có thể tương tác với nhau và việc sử dụng kết hợp Paxlovid và verapamil có thể khiến huyết áp giảm sâu. Bà nhấn mạnh nếu không biết về sự tương tác này, bệnh nhân có thể gặp phải tác dụng phụ không mong muốn, trong khi thực tế có thể tránh được.

Trong nghiên cứu, bà Grossman lưu ý rằng các nhà quản lý dược phẩm Mỹ đã cấp phép lưu hành thuốc Paxlovid lần đầu vào tháng 12/2021, ít tháng sau khi ứng dụng ChatGPT phiên bản miễn phí bị giới hạn sử dụng tập dữ liệu. Do đó, nhiều người dùng Paxlovid có thể không biết dữ liệu mà họ tiếp cận là lỗi thời và thông tin ChatGPT cung cấp không chính xác. Bà Grossman nói rằng có thể ChatGPT phiên bản tính phí sẽ cho kết quả tốt hơn.

Theo bà Grossman, nghiên cứu chỉ ra rằng hiệu suất của chatbot này đã được cải thiện từ đầu năm và phiên bản miễn phí của ChatGPT hiện đang đạt được kết quả tốt hơn.