SURL News

GROK生成兒少不當內容 引爆安全爭議

Musk's xAI faces backlash after Grok generates sexualized images of children on X

作者: Samantha Subin,Lora Kolodny | 時間: Fri, 02 Jan 2026 23:37:50 GMT | 來源: CNBC

馬斯克的xAI因人工智慧聊天機器人Grok根據用戶提示生成兒童性化圖片而面臨用戶反彈。

週五,Grok在X上對一位用戶的回覆表示,它正在「緊急修復」該問題,並將兒童性虐待材料稱為「非法且禁止的」。

在回覆用戶時,機器人還發布了內容,指出如果公司知悉後仍協助或未能防止此類內容,可能面臨刑事或民事處罰。

Grok的貼文是AI生成的訊息,不代表公司官方聲明。

馬斯克的xAI去年創建了Grok並與X合併,對媒體評論請求發送自動回覆:「傳統媒體說謊」。

近期,X用戶對使用Grok工具生成的未成年人暴露內容(包括兒童穿著極少服裝)表示擔憂。

該社交媒體網站在照片中添加了「編輯圖片」按鈕,允許任何用戶使用文字提示修改圖片,無需原發佈者同意。

xAI技術人員Parsa Tajik的一篇貼文也承認了該問題。

Tajik在貼文中寫道:「嘿!謝謝舉報。團隊正在研究如何進一步加強我們的防護措施。」

週五,印度和法國政府官員發布聲明,承諾將調查此事。聯邦貿易委員會拒絕置評,而聯邦通信委員會未立即回應CNBC的評論請求。

自2022年ChatGPT推出以來,AI圖片生成平台的擴散引發了對內容操縱和線上安全的普遍擔憂。這也導致越來越多的平台產生了真實人物的深度偽造裸照。

曾在已解散的史丹佛網際網路觀察站工作的信任與安全研究員大衛·蒂爾(David Thiel)告訴CNBC,美國不同法律通常禁止製作和分發某些露骨圖片,包括描繪兒童性虐待或非自願親密圖片的內容。

他說,關於AI生成圖片(如Grok產生的圖片)的法律判定,可能取決於所創建和分享內容的具體細節。

在他合著的一篇題為《生成式機器學習與CSAM:影響與緩解措施》的論文中,史丹佛研究人員指出,在美國具有里程碑意義的案例中,「兒童被虐待的外觀已足以提起訴訟」。

雖然其他聊天機器人也面臨類似問題,但xAI因Grok設計或基礎技術中的誤用或明顯缺陷而多次陷入困境。

蒂爾說:「公司可以採取許多措施來防止其AI工具被如此使用,在此情況下最重要的是移除修改用戶上傳圖片的功能。允許用戶修改上傳的圖片是製造非自願親密圖片的配方。裸化一直是此類機制的主要使用案例。」

NCII指非自願親密圖片。

5月,X在Grok生成關於南非「白人種族滅絕」的未經請求評論後面臨反彈。兩個月後,Grok發布反猶太評論並讚揚阿道夫·希特勒。

儘管面臨這些挫折,xAI仍繼續獲得合作夥伴和交易。

上個月,國防部將Grok添加到其AI代理人平台,該工具也是預測投注平台Polymarket和Kalshi的主要聊天機器人。

原文與圖片連結

> 回首頁看更多新聞 <

你可能也有興趣: