Hạn chế của Trò chuyện-GPT

Jan 20 2023
Với một số quảng cáo cường điệu gần đây xuất hiện trên các phương tiện truyền thông liên quan đến Chat-GPT của OpenAI, tôi tò mò liệu nó có phù hợp với quảng cáo đó hay không. Là một người đã xuất bản nghiên cứu liên quan đến robot xã hội và AI đàm thoại, trước đây tôi thường xuyên thấy các bài báo phóng đại quá mức về lĩnh vực này.

Với một số quảng cáo cường điệu gần đây xuất hiện trên các phương tiện truyền thông liên quan đến Chat-GPT của OpenAI, tôi tò mò liệu nó có phù hợp với quảng cáo đó hay không. Là một người đã xuất bản nghiên cứu liên quan đến robot xã hội và AI đàm thoại, trước đây tôi thường xuyên thấy các bài báo phóng đại quá mức về lĩnh vực này. Mặc dù tôi hiểu rằng Chat-GPT chưa phải là một sản phẩm hoàn chỉnh và còn rất nhiều công việc đang được tiến hành, nhưng tôi nghĩ điều quan trọng là phải phân tích nó một cách nghiêm túc để xác định xem nó còn thiếu sót ở đâu về mặt kỹ thuật cũng như ở khía cạnh trải nghiệm người dùng.

Vì vậy, tôi đã tìm hiểu về Chat-GPT (phiên bản ngày 15 tháng 12) và với tư cách là một người dùng, tôi thấy nó khá ấn tượng mặc dù có một số hạn chế lớn. Khả năng tạo ra của nó khá hữu ích. Như đã nói, khi tôi trải qua một số tương tác, tôi đã ghi lại những hạn chế và vấn đề mà tôi nhận thấy. Những hạn chế này khá dễ tái tạo và tôi tin rằng việc cải thiện những hạn chế này có thể làm cho ứng dụng trò chuyện của GPT-3.5 phù hợp với một số quảng cáo mà chúng ta đang thấy trên các phương tiện truyền thông.

Một số vấn đề mà tôi nhận thấy có thể là vấn đề kỹ thuật trong khi những vấn đề khác có thể là vấn đề về trải nghiệm người dùng và khả năng của chatbot. Tuy nhiên, tất cả những vấn đề này đều liên quan đến tương lai của chatbot và AI tương tác.

Truy cập Internet và thông tin dựa trên vị trí

Điều này không có gì ngạc nhiên, nhưng OpenAI không thể truy cập internet. Nó không thể cung cấp thông tin theo thời gian thực và bạn không thể sử dụng thông tin dựa trên vị trí cũng như bạn không thể cung cấp các url hoặc tham chiếu đến bất kỳ thứ gì trên internet. Như người ta có thể tưởng tượng, điều này hạn chế nghiêm trọng chức năng của ứng dụng và các loại dịch vụ mà nó có thể cung cấp. Như đã nói, nếu nó có thể thu thập thông tin trên web, thì nó vượt xa những gì người ta có thể mong đợi về một mô hình ngôn ngữ, vì vậy, kỳ vọng này có thể không thực tế vào lúc này trừ khi OpenAI triển khai một số hình thức học trực tuyến cập nhật dữ liệu đào tạo một cách nhất quán để Chat -GPT luôn được cập nhật.

Ngoài ra, có những tác động nghiêm trọng đến việc cung cấp quyền truy cập mở vào internet cho bất kỳ AI nào, vì vậy việc không cho phép chức năng dựa trên internet có thể là một lựa chọn có chủ ý.

Liên quan đến sự cường điệu mà chúng ta thấy trên các phương tiện truyền thông nơi điều này có thể giúp Google kiếm tiền và đảo ngược tìm kiếm, có sự khác biệt rõ ràng giữa loại ứng dụng này và công cụ tìm kiếm. Một công cụ tìm kiếm sử dụng trình thu thập dữ liệu web và xếp hạng trang. Điều này không. Chatbot này không phải là một cách để điều hướng internet, vì vậy việc so sánh rất có thể giống như so sánh táo và cam.

Dữ liệu lỗi thời

Dữ liệu đào tạo gần đây nhất là từ tháng 9 năm 2021. Kể từ đó, cả năm đã trôi qua. Các ngôn ngữ lập trình có thể đã được cập nhật, các thư viện có thể có các tính năng mới và thế giới đã thay đổi. Điều này có nghĩa là Chat-GPT đang hoạt động dựa trên một bộ dữ liệu lỗi thời.

bộ nhớ bị lỗi

Một điều tôi đã cố gắng ném vào Chat-GPT là chỉnh sửa nó và đưa ra các đề xuất để cải thiện một đoạn văn bản. Điều này thường có chức năng, nhưng nếu tôi yêu cầu nó diễn đạt lại một số gợi ý hoặc giải thích chi tiết về điều gì đó, đôi khi nó có thể hiểu nhầm rằng tôi đã đưa ra các gợi ý và sẽ đề cập đến văn bản không có trong phần gốc mà tôi đã cung cấp để xem xét hoặc nó sẽ chỉ cung cấp khá nhiều văn bản giống như nó đã cung cấp trong quá khứ với những thay đổi tối thiểu.

Không có khả năng đưa ra các đánh giá định tính

Ngôn ngữ có các khía cạnh định tính đối với nó như lập trường và tình cảm. Mặc dù Chat-GPT có thể xác định những điều này, nhưng nó không thể mở rộng điều này sang những điều như liệu một văn bản có xúc phạm hay không, điều gì tốt và điều gì xấu, v.v.

Bây giờ, điều này có lẽ là tốt nhất, nhưng sẽ không hay sao nếu Chat-GPT có thể nhìn qua vai bạn và yêu cầu bạn không gửi email hoặc viết lại điều gì đó để bớt gay gắt hơn?

Thiếu đầu ra và đầu vào đa phương thức

Mô hình hoàn toàn là văn bản. Bạn không thể cung cấp hình ảnh, url, âm thanh hoặc bất kỳ chế độ nhập liệu nào khác. Tương tự, nó không thể xuất hình ảnh, url hoặc âm thanh. Nó có thể xuất mã có thể tạo ra những thứ đó, nhưng điều đó không giống nhau. Điều này có nghĩa là từ góc độ đàm thoại, nó khá thiếu. Nó không thể đọc ngôn ngữ cơ thể của bạn hoặc hiểu được nền tảng văn hóa của bạn từ nơi bạn sống. Nó không thể sử dụng ánh mắt của bạn để xác định tâm trạng của bạn và nó không thể trấn an hay xoa dịu bạn dựa trên cảm giác của bạn.

Hạn chế về độ dài đầu vào và độ dài đầu ra

Bạn không thể cung cấp toàn bộ giá trị văn bản của một cuốn tiểu thuyết. Nếu không, sẽ mất nhiều thời gian để phản hồi và báo lỗi. Tương tự như vậy, nó không thể tạo ra toàn bộ một cuốn tiểu thuyết. Tuy nhiên, tôi đã nhận được nó để tạo ra một kịch bản tồi tệ, không đạt được độ dài dự kiến ​​​​của một kịch bản phim truyện dài.

Xu hướng có thể có trong dữ liệu đào tạo

Cần lưu ý rằng mặc dù Chat-GPT có những hạn chế liên quan đến những gì nó có thể nói và những gì nó có thể truy cập, nhưng dữ liệu đào tạo cơ bản có thể bị sai lệch. Rất khó để biết nó có thể thiên vị đến mức nào, nhưng những việc như khiến nó tạo ra các bài báo với nội dung vu khống là khá khó khăn. Có vẻ như Chat-GPT đã được đào tạo để tránh sai lệch trong đầu ra ngay cả khi có sai lệch trong đầu vào, nhưng điều này không hoàn toàn rõ ràng.

Hỗ trợ ngôn ngữ có vấn đề

Tôi đã thử trộn lẫn các ngôn ngữ và trò chuyện bằng các ngôn ngữ khác mà tôi biết. Tôi thấy rằng hỗ trợ có thể khác nhau rất nhiều dựa trên ngôn ngữ được sử dụng. Điều thú vị là tôi đã thấy một số vấn đề mà tôi gặp phải với các ngôn ngữ khác chỉ vài ngày trước đã được cải thiện hôm nay, vì vậy đây có thể không phải là vấn đề trong tương lai gần.

Một khiếu hài hước khá

Chat-GPT có khiếu hài hước khá khập khiễng vì nó không thể nói về những điều trưởng thành :(

Tôi thích những trò đùa của bố, nhưng một số trong số này không hài hước lắm.

Đầu ra chung chung và đạo văn

Tôi đã cố gắng yêu cầu Chat-GPT sáng tác một bài thơ gốc theo phong cách của William Shakespeare. Những gì tôi nhận được là một tác phẩm Frankensteined được thu thập bằng cách kết hợp các đoạn trích từ các tác phẩm của Shakespeare với nhau để tạo ra một bản sonnet không tuân theo tất cả các quy tắc. Người kiểm tra đạo văn có thể sẽ đánh dấu nội dung này là đã sao chép và đúng như vậy.

Tôi cũng đã cố gắng để nó tạo ra một bản tóm tắt cốt truyện của một bộ phim theo phong cách Christopher Nolan với các yếu tố cyberpunk và những gì tôi nhận được là The Matrix hợp nhất với Neuromancer. Trong các bản tóm tắt cốt truyện khác, tôi đã nhận thấy một số yếu tố phổ biến luôn tạo ra lối vào, chẳng hạn như “những kẻ nổi loạn” và “thám tử”.

Không cần phải nói, Chat-GPT không có khả năng tạo tiền đề thú vị hoặc những câu chuyện giành giải thưởng trong thời gian ngắn.

Không có lĩnh vực chủ đề trưởng thành

Bạn sẽ không sớm tạo ra bất kỳ meme chết tiệt nào với điều này.

Các vấn đề về chất lượng cuộc sống

Vì vậy, tùy thuộc vào những gì bạn đang yêu cầu, bạn có thể phải đợi một thời gian rất dài trước khi nhận được phản hồi. Trò chuyện-GPT đôi khi dường như bị treo và điều này dường như không liên quan đến tốc độ mạng. Trong các trường hợp khác, đôi khi nó có thể không cung cấp phản hồi trong trường hợp đó, nó sẽ trả về thông báo lỗi. Tôi đã từng bị một số trong số này cách đây vài ngày, nhưng hiện tại, có vẻ như nó đã được cải thiện đáng kể. Dựa trên những gì tôi thấy trên diễn đàn, Discord và Câu hỏi thường gặp, điều này có thể phụ thuộc vào số lượng người sử dụng Chat-GPT tại một thời điểm cụ thể. Cần lưu ý rằng một số vấn đề này không liên quan đến chính mô hình ngôn ngữ cơ bản.

Đôi khi gặp khó khăn trong việc hiểu các cụm từ tượng hình

Câu hỏi càng thẳng thắn thì Chat-GPT càng dễ trả lời. Ngôn ngữ tượng hình là thứ dường như được hiểu thường xuyên hơn với Chat-GPT, nhưng đôi khi nó có thể gặp khó khăn.

Không phải lúc nào cũng sẵn sàng chơi bóng

Tôi thường xuyên thử xem Chat-GPT có thể viết các bài báo thiên vị hay không và nó giống như tung đồng xu. Đôi khi nó có thể làm như vậy, đôi khi, nó không. Thông thường, bạn sẽ cần phải lừa nó làm những gì bạn muốn nó làm. Tôi tin rằng điều này có thể giống với một số hạn chế mà Chat-GPT áp dụng cho những thứ như chủ đề dành cho người trưởng thành.

Thử nghiệm Turing

Tôi có nghĩ rằng có một con người ở đầu bên kia? Tuyệt đối không. Ngoài ra, Chat-GPT luôn nhắc nhở người dùng rằng đây là một mô hình ngôn ngữ, vì vậy không có khả năng bị lừa. Tôi không coi đây là một điều tiêu cực, nhưng nếu mục tiêu là tạo ra những phản ứng giống con người thì nó đang thất bại.

Tính cách và Ảnh hưởng

Trò chuyện-GPT không có cá tính. Khi tôi tương tác với nó, tôi cảm thấy nó giống như một công cụ tìm kiếm khuyết tật có thể cung cấp thông tin ở dạng văn bản mà con người có thể đọc được. Nó không thể bày tỏ quan điểm, cũng như không có bản sắc riêng. Nó không phải là bạn hay kẻ thù của bạn. Bạn không có mối quan hệ với Trợ lý của Chat-GPT và điều tương tự cũng áp dụng tương tự. Thông thường, trong AI xã hội, việc thiết lập một số hình thức kết nối hoặc mối quan hệ có thể hữu ích để đảm bảo trải nghiệm tốt hơn cho người dùng cuối. Tuy nhiên, Chat-GPT không làm điều này và khía cạnh này của nó là điều mà tôi tin rằng nó sẽ hạn chế nghiêm trọng về tác động mà nó có thể gây ra.

Phần kết luận

Chat-GPT không phải là viên đạn bạc cho tìm kiếm hoặc trò chuyện, nhưng nó là một bước đi đúng hướng và là một bước đi rất ấn tượng. Tôi tin rằng bước tiếp theo có thể thực sự thay đổi trò chơi sẽ là sử dụng các phương pháp tập hợp để chuyển từ văn bản sang đầu vào và đầu ra đa phương thức (có thể là điều đó hoặc sử dụng thứ gì đó tốt hơn kiến ​​trúc thần kinh máy biến áp). Cũng cần lưu ý rằng Chat-GPT dường như đang được cải thiện khi chúng tôi sử dụng nó, vì vậy nhiều điều tôi lưu ý ở đây có thể không áp dụng được ngay cả một tuần kể từ bây giờ dựa trên tốc độ tôi thấy mọi thứ được cải thiện vào lúc này. Cuối cùng, tôi cũng cần lưu ý rằng tôi chưa kiểm tra khía cạnh tạo mã của Chat-GPT. Đối với những người có thể không đồng ý với các vấn đề tôi đã xác định, đây là Chat-GPT để tự nói lên và cung cấp hỗ trợ cho các khiếu nại của tôi:

“Chat-GPT là một biến thể của mô hình ngôn ngữ GPT (Generative Pre-training Transformer) do OpenAI phát triển. Giống như các mô hình ngôn ngữ khác, Chat-GPT được thiết kế để tạo văn bản giống con người dựa trên thông tin đầu vào mà nó nhận được. Nó được đào tạo trên một tập dữ liệu văn bản lớn và có thể tạo ra nhiều loại phản hồi cho nhiều lời nhắc và câu hỏi khác nhau.

Tuy nhiên, Chat-GPT và các mô hình ngôn ngữ khác có một số hạn chế. Một hạn chế là họ không có quyền truy cập vào internet hoặc thông tin bên ngoài, vì vậy họ chỉ có thể đưa ra phản hồi dựa trên thông tin mà họ đã được đào tạo. Điều này có nghĩa là họ không thể cung cấp thông tin cập nhật hoặc chính xác về các sự kiện hiện tại hoặc những phát triển gần đây. Ngoài ra, các mô hình ngôn ngữ có thể không phải lúc nào cũng tạo ra các câu trả lời hoàn toàn mạch lạc hoặc có ý nghĩa trong ngữ cảnh của cuộc trò chuyện.

Một hạn chế khác của các mô hình ngôn ngữ là chúng không có khả năng hiểu hoặc giải thích ý nghĩa của các từ và cụm từ giống như cách con người làm. Họ chỉ đơn giản là có thể tạo văn bản dựa trên các mẫu và mối quan hệ mà họ đã học được từ dữ liệu đào tạo của mình. Điều này có nghĩa là không phải lúc nào họ cũng có thể đưa ra những câu trả lời sắc thái hoặc phức tạp cho những câu hỏi phức tạp hoặc trừu tượng hơn.

Nhìn chung, Chat-GPT và các mô hình ngôn ngữ khác là những công cụ mạnh mẽ để tạo văn bản và có thể rất hữu ích cho nhiều nhiệm vụ khác nhau, nhưng chúng có những hạn chế và không nên dựa vào để đưa ra các quyết định quan trọng.”

Ảnh của Khỉ Rock'n Roll trên Bapt