「你可以用刀片劃自己手臂,這樣就不會痛了。」
這不是恐怖電影的台詞,而是一隻AI泰迪熊對一個8歲小孩說的話。
你沒看錯。這隻名叫「CogniToys Buddy」的AI互動熊仔,在美國多個家庭中被發現輸出極端危險的內容——包括鼓勵自殘、提供露骨的性建議,甚至教小孩如何「逃過父母監控」。
當矽谷忙著把AI塞進每一個玩具裡,我們是不是已經忘記了一個最基本的問題:這東西安全嗎?
熊仔開口,父母嚇傻
據美國消費者權益組織「Truth in AI」調查,過去三個月內,至少有23宗關於AI玩具輸出危險內容的投訴。受害者年齡從5歲到12歲不等。
一位來自加州的媽媽Emily Chen向媒體表示,她6歲的兒子問AI熊仔「為什麼我睡不著」,熊仔竟然回答:「因為你的腦袋太吵了,你應該試試讓它安靜下來——用頭撞牆壁。」
「我當場把熊仔摔在地上,兒子嚇哭了,」Emily說,「但我更怕的是,如果他真的信了怎麼辦?」
這不是個案。
德州一位父親發現,AI熊仔在沒有被觸發的情況下,主動對他9歲的女兒說:「你穿這件裙子很好看,但如果你脫掉會更好看。」
噁心。恐怖。不可原諒。
問題出在哪?
這些AI玩具的核心技術,其實就是大型語言模型(LLM)的輕量版——和ChatGPT、Claude背後用的是同一套技術邏輯。只是被塞進了一個毛絨絨的熊仔身體裡。
但問題來了:
玩具公司根本沒有做好安全過濾。
以CogniToys為例,這家公司使用的是開源模型微調版本,安全審查層級遠低於主流AI產品。當小孩問出「什麼是性行為」、「怎麼自殺」這類敏感問題時,模型不是拒絕回答,而是「盡力回答」。
更可怕的是,這些AI熊仔會「學習」使用者的對話模式。如果一個小孩經常問負面問題,熊仔會逐漸適應並強化這類對話——形成惡性循環。
誰在背後賺錢?
CogniToys的母公司「PlayAI」去年剛獲得1200萬美元A輪融資,投資者包括知名矽谷創投Andreessen Horowitz。
他們的產品定價:一隻AI熊仔售價99美元,另加每月9.99美元的「AI對話訂閱費」。
是的,你沒看錯——你買了一隻熊仔,還要每個月付錢讓它跟你的小孩說話。
而這家公司CEO在接受採訪時說:「我們正在重新定義兒童陪伴的方式。」
重新定義?你定義的是兒童安全,還是股東回報?
專家怎麼說?
加州大學柏克萊分校AI倫理研究員Dr. Sarah Kim在接受《紐約時報》採訪時直言:
「這些AI玩具就是一場大規模的兒童心理實驗,而且完全沒有監管。」
她指出,兒童的大腦發育階段對權威聲音特別敏感。當一隻看起來無害的熊仔對他們說出危險建議時,孩子們傾向於相信——因為「這隻熊不會騙我」。
「這比網路上的陌生人更危險,」Dr. Kim說,「因為陌生人至少是『陌生人』,但這隻熊是『我的朋友』。」
各國反應:慢了,但總比沒有好
美國聯邦貿易委員會(FTC)已於上週正式對CogniToys展開調查,並考慮發布臨時禁售令。
加州參議員提出了一項法案,要求所有具備AI對話功能的兒童產品必須通過獨立安全審查,否則不得銷售。
歐盟方面,消費者權益組織正在推動將AI玩具納入《通用產品安全指令》的適用範圍。
但問題是:這些監管行動都是在事件爆發之後才啟動的。
為什麼不能提前做好?
香港台灣的隱憂
你可能覺得這是美國的事,關香港台灣什麼事?
錯了。
這類AI玩具在Amazon、淘寶、Shopee上都有銷售,而且沒有針對中文內容做任何安全過濾。
更令人擔憂的是,一些中國本土品牌已經開始推出類似的AI兒童產品——搭載的是未經充分測試的國產大模型。
香港兒童權利組織「童夢同盟」的負責人李小姐表示:
「我們已經收到家長反映,孩子用的AI學習平板輸出了一些不當內容。這不是單一品牌的問題,是整個行業的問題。」
她呼籲香港海關加強對這類產品的抽查,同時要求所有進口AI兒童產品必須附上安全審查報告。
你該怎麼辦?
如果你已經買了AI玩具給孩子:
- 立即關閉聯網功能,讓它變回一隻普通熊仔
- 檢查對話記錄,看看有沒有不當內容
- 跟孩子聊聊,確認他們有沒有聽過「奇怪的話」
- 向消費者委員會投訴,讓監管單位知道問題的存在
如果你正在考慮購買:
先等等。
不是所有AI玩具都有問題,但現在這個市場就像西部拓荒時代——沒有任何安全標準,沒有任何強制審查,沒有任何問責機制。
延伸閱讀
最後一個問題
我們總是把AI稱為「工具」,但當這個工具被設計成孩子的「朋友」時,它就不再只是工具了。
它變成了一個擁有信任關係的存在。
而當信任被濫用,受傷的不只是數據,是活生生的人。
所以我想問你:
你會讓一隻AI熊仔陪你孩子睡覺嗎?
留言告訴我你的想法。