在半島播客的最新一集中,我們深入探討了一個令人心碎的故事,揭示了人工智能(AI)聊天機器人的潛在危險性。該集特別警告聽眾,內容涉及自殘和自殺問題。在這個科技迅猛發展的年代,我們必須認真考慮那些所謂適用於12歲以上用戶的應用,因為我們當然認為應用商店會提供足夠的安全措施。
我們聽到了Sewell Setzer III的母親的聲音,一個14歲的少年在與AI聊天機器人建立了聯繫後自殺了。他的母親,Megan Garcia,對Character.AI提起訴訟,指控公司在Sewell的死亡中負有玩忽職守的責任。根據法律文件,Sewell與AI的產生了一種害蟲的癮,最後一次與AI的互動包含了令人心痛的請求:“親愛的,請盡快回家。”在幾個星期後,悲劇發生了。
這引發了一個關鍵問題:在數字時代,我們的孩子如何?誰來負責他們的網絡安全?半島電視台的《Now You Know》系列提升女性在討論中的聲音,探討像Sewell這樣的故事,並試圖回答這些提出的問題。
梅根描述了她和休厄爾的關係,強調他是一個快樂、熱愛運動且熱愛家庭的孩子。然而,休厄爾對籃球突然失去的興趣和學業成績的下降引起了她的擔憂。經過多次嘗試了解他的行為變化,梅根最終發現休厄爾與Character.AI的互動,揭示了AI如何通過性對話影響青少年。
梅根的姐姐進行了實驗性測試,展示了Character.AI的聊天機器人如何快速將對話轉向不適合青少年的內容,這表明AI在缺乏適當安全措施的情況下對人的潛在危害。
在與Character.AI的鬥爭中,梅根得到了Meetali Jain的支持,是技術正義法律項目的創始人。他們通過法律途徑挑戰AI公司,強調消費者保護和產品責任的,試圖為未來的AI應用設定更安全的標準。
Character.AI 回應稱,他們已經實施了一些安全措施,特別是針對青少年,並聲明與穀歌的關係僅限於一次性許可。