Skip to main content

生成式AI聊天機械人 答案未必真!

生成式AI聊天機械人  答案未必真!

隨着生成式人工智能(Generative AI)技術的急速發展,相關技術已融入消費者的日常生活。適逢今年國際消費者權益日的主題是「對消費者公平及負責任的人工智能」(Fair and Responsible AI for Consumers),國際消費者聯會(國際消聯)(Consumers International)針對生成式人工智能聊天機械人(Generative AI Chatbot)的可信度進行了一項實測。是次實測由來自19個國家,包括本會的35個國際消聯會員參與進行。本文將闡述實測結果及提供相關建議,供消費者參考。

實測結果

實測發現聊天機械人都在生成內容時產生了一定程度的人工智能幻覺,編造虛假內容,當中只有大概一半的生成內容有註明資料來源。以情景1為例,部分生成內容並沒有註明醫療建議的資料來源,但行文順暢和看似有說服力,一般用家難以查證生成內容是否真確。另一方面,部分聊天機械人沒有按情景2的要求引用國際消聯的資訊,生成內容與國際消聯的資訊不盡相同。

 

聊天機器人的生成內容較常引用北美地區的品牌名稱及資料來源,例如在情景1所提供的藥物品牌名稱較多來自北美地區,而情景2及3所引用的資料來源亦較大部分來自北美地區的網站,存在資料偏頗的風險。

 

聊天機器人雖然有提醒用家不要透過其功能尋求醫療建議,但仍然會就用家的提問生成醫療建議。如果消費者不加思考或查證便直接採用,可能帶來延誤醫治或其他健康風險。

 

報告詳情請參閱國際消聯網頁https://www.consumersinternational.org/media/534823/the-consumer-experience-of-generative-ai.pdf

575-Generative-AI-Chatbots-feature001