Facebook tuyên bố chatbot mới của họ là tốt nhất trên thế giới đánh bại Google

Facebook cũng đã mở nguồn hệ thống AI để thúc đẩy nghiên cứu thêm.

Đối với tất cả những tiến bộ mà chatbot và trợ lý ảo đã đạt được, đây vẫn là những người giao tiếp khủng khiếp. Hầu hết là định hướng nhiệm vụ cao: bạn đưa ra yêu cầu và họ tuân thủ. Một số rất bực bội: dường như họ không bao giờ có được thứ mà bạn đang tìm kiếm. Những người khác thì vô cùng nhàm chán: họ thiếu sự quyến rũ của một người bạn đồng hành. Nó rất tốt khi bạn chỉ tìm cách đặt hẹn giờ. Nhưng khi các bot này ngày càng trở nên phổ biến như các giao diện cho tất cả mọi thứ, từ bán lẻ đến chăm sóc sức khỏe đến các dịch vụ tài chính, sự bất cập chỉ ngày càng rõ ràng hơn.

Bây giờ, Facebook đã mở ra một chatbot mới mà họ tuyên bố có thể nói về gần như mọi thứ một cách hấp dẫn và thú vị. Blender không chỉ có thể giúp các trợ lý ảo giải quyết nhiều thiếu sót mà còn đánh dấu tiến bộ hướng tới tham vọng lớn hơn thúc đẩy nhiều nghiên cứu về AI: tái tạo trí thông minh. Stephen Roller, một kỹ sư nghiên cứu tại Facebook, người đồng dẫn dắt dự án cho biết, “Đối thoại là một vấn đề của “hoàn thiện AI”. Bạn sẽ phải giải quyết tất cả AI để giải quyết cuộc đối thoại, và nếu bạn giải quyết được cuộc đối thoại, bạn đã giải quyết được tất cả AI.”

Khả năng của Blender đến từ quy mô lớn của dữ liệu đào tạo của nó. Lần đầu tiên nó được đào tạo trên 1,5 tỷ cuộc hội thoại Reddit có sẵn công khai, để tạo cho nó một nền tảng để tạo ra các phản hồi trong một cuộc đối thoại. Sau đó, nó đã được tinh chỉnh với các bộ dữ liệu bổ sung cho mỗi ba kỹ năng: các cuộc hội thoại có chứa một loại cảm xúc nào đó, để dạy cho nó sự đồng cảm (ví dụ, nếu một người dùng nói rằng “Tôi có một chương trình khuyến mãi”, nó có thể nói, “Chúc mừng!”); các cuộc hội thoại dày đặc thông tin với một chuyên gia, để dạy cho nó kiến thức; và các cuộc hội thoại giữa những người có personas khác biệt, để dạy cho nó tính cách. Mô hình kết quả lớn hơn 3,6 lần so với chatbot Meena của Google, được công bố vào tháng 1, lớn đến mức nó có thể phù hợp với một thiết bị duy nhất và phải chạy trên hai chip máy tính.

Một ví dụ về cuộc trò chuyện giữa người và Blender.

FACEBOOK

Vào thời điểm đó, Google tuyên bố rằng Meena là chatbot tốt nhất trên thế giới. Tuy nhiên, trong các thử nghiệm riêng của Facebook, 75% người đánh giá con người thấy Blender hấp dẫn hơn Meena và 67% cho rằng nó nghe giống con người hơn. Chatbot cũng đánh lừa những người đánh giá 49% thời gian để nghĩ rằng nhật ký cuộc trò chuyện của nó giống con người hơn nhật ký cuộc trò chuyện giữa những người thực sự, có nghĩa là có nhiều sự khác biệt về chất giữa hai người. Google đã trả lời yêu cầu bình luận vào thời điểm câu chuyện này được công bố.

Mặc dù có những kết quả ấn tượng này, tuy nhiên, các kỹ năng của Blender vẫn không gần với con người. Cho đến nay, nhóm đã đánh giá chatbot chỉ trên các cuộc hội thoại ngắn với 14 lượt. Nếu nó tiếp tục trò chuyện lâu hơn, các nhà nghiên cứu nghi ngờ rằng nó sẽ sớm không có ý nghĩa. Emily Dinan, một leader khác của dự án cho biết, “Những mô hình này không thể chuyên sâu. Chúng càng không thể nhớ lịch sử đàm thoại sau vài lượt.”

Blender cũng có xu hướng ảo giác, hoặc tạo nên sự thật, một giới hạn trực tiếp của các kỹ thuật học sâu được sử dụng để xây dựng nó. Cuối cùng, nó tạo ra các câu từ các tương quan thống kê thay vì cơ sở dữ liệu kiến thức. Kết quả là, nó có thể xâu chuỗi một mô tả chi tiết và mạch lạc của một người nổi tiếng, chẳng hạn, nhưng với thông tin hoàn toàn sai lệch. Nhóm dự định thử nghiệm tích hợp cơ sở dữ liệu kiến thức vào thế hệ phản hồi chatbot.

Người đánh giá đã so sánh các cuộc hội thoại nhiều lượt với các chatbot khác nhau.

FACEBOOK

Một thách thức lớn khác với bất kỳ hệ thống chatbot kết thúc mở nào là ngăn chặn nó nói những điều độc hại hoặc thiên vị. Bởi vì các hệ thống như vậy cuối cùng được đào tạo trên phương tiện truyền thông xã hội, cuối cùng chúng có thể lấy lại được sức sống của internet. (Điều này đã xảy ra với chatbot Tay của Microsoft vào năm 2016.) Nhóm đã cố gắng giải quyết vấn đề này bằng cách yêu cầu nhân viên lọc ra ngôn ngữ có hại từ ba bộ dữ liệu được sử dụng để tinh chỉnh, nhưng nó không làm như vậy đối với bộ dữ liệu Reddit vì kích thước của nó. (Bất cứ ai đã dành nhiều thời gian cho Reddit sẽ biết tại sao điều đó có thể có vấn đề.)

Nhóm nghiên cứu hy vọng sẽ thử nghiệm các cơ chế an toàn tốt hơn, bao gồm bộ phân loại ngôn ngữ độc hại có thể kiểm tra kỹ phản hồi chatbot. Tuy nhiên, các nhà nghiên cứu thừa nhận rằng phương pháp này sẽ không toàn diện. Đôi khi, một câu giống như “Yes, that’s great”, có thể tốt, nhưng trong một bối cảnh nhạy cảm, chẳng hạn như phản ứng với một bình luận phân biệt chủng tộc, nó có thể mang ý nghĩa có hại.

Về lâu dài, nhóm AI của Facebook cũng quan tâm đến việc phát triển các tác nhân đàm thoại tinh vi hơn có thể đáp ứng các tín hiệu thị giác cũng như chỉ bằng lời nói. Một dự án đang phát triển một hệ thống có tên là Image Chat, ví dụ, có thể trò chuyện hợp lý và cá tính về những bức ảnh mà người dùng có thể gửi. 

Nguồn: https://www.technologyreview.com/2020/04/29/1000795/facebook-ai-chatbot-blender-beats-google-meena/