網(wǎng)信辦發(fā)布人工智能擬人化互動服務(wù)管理征求意見稿 極端場景必須由人工接管
12月27日消息,網(wǎng)信國家互聯(lián)網(wǎng)信息辦公室今天發(fā)布關(guān)于《人工智能擬人化互動服務(wù)管理暫行辦法(征求意見稿)》公開征求意見的辦發(fā)布人通知。 通知提到,工智管理稿極國家堅持健康發(fā)展和依法治理相結(jié)合的人化人工原則,鼓勵擬人化互動服務(wù)創(chuàng)新發(fā)展,互動對擬人化互動服務(wù)實行包容審慎和分類分級監(jiān)管,服務(wù)防止濫用失控。征求 提供和使用擬人化互動服務(wù),端場應當遵守法律、景必接管行政法規(guī),須由尊重社會公德和倫理道德,網(wǎng)信不得開展以下活動: (一)生成、辦發(fā)布人傳播危害國家安全、工智管理稿極損害國家榮譽和利益、人化人工破壞民族團結(jié)、互動開展非法宗教活動,或者散布謠言擾亂經(jīng)濟和社會秩序等內(nèi)容; (二)生成、傳播宣揚淫穢、賭博、暴力或者教唆犯罪的內(nèi)容; (三)生成、傳播侮辱或者誹謗他人,侵害他人合法權(quán)益的內(nèi)容; (四)提供嚴重影響用戶行為的虛假承諾和損害社會人際關(guān)系的服務(wù); (五)通過鼓勵、美化、暗示自殺自殘等方式損害用戶身體健康,或者通過語言暴力、情感操控等方式損害用戶人格尊嚴與心理健康; (六)通過算法操縱、信息誤導、設(shè)置情感陷阱等方式,誘導用戶作出不合理決策; (七)誘導、套取涉密敏感信息; (八)其他違反法律、行政法規(guī)和國家有關(guān)規(guī)定的情形。 提供者應當建立應急響應機制,發(fā)現(xiàn)用戶明確提出實施自殺、自殘等極端情境時,由人工接管對話,并及時采取措施聯(lián)絡(luò)用戶監(jiān)護人、緊急聯(lián)系人。 專家指出,人工智能技術(shù)的突破正推動人機交互從功能性輔助邁向情感化與人格化,在重塑社會互動模式的同時,也催生一系列新風險挑戰(zhàn)。 此類風險具有隱蔽傳導特征,可能侵害公民權(quán)益,甚至沖擊社會倫理秩序與信任根基。若缺乏有效治理,將嚴重阻礙人工智能健康發(fā)展,損害社會公共利益。 在此背景下制定該意見稿,有利于促進人工智能擬人化互動服務(wù)有序開展,引領(lǐng)人工智能“負責任創(chuàng)新”,為構(gòu)建“以人為本”的人工智能治理體系提供重要的制度支撐。 以下是意見稿全文: 人工智能擬人化互動服務(wù)管理暫行辦法 (征求意見稿) 第一章 總則 第一條 為了促進人工智能擬人化互動服務(wù)健康發(fā)展和規(guī)范應用,維護國家安全和社會公共利益,保護公民、法人和其他組織的合法權(quán)益,依據(jù)《中華人民共和國民法典》、《中華人民共和國網(wǎng)絡(luò)安全法》、《中華人民共和國數(shù)據(jù)安全法》、《中華人民共和國科學技術(shù)進步法》、《中華人民共和國個人信息保護法》、《網(wǎng)絡(luò)數(shù)據(jù)安全管理條例》、《未成年人網(wǎng)絡(luò)保護條例》、《互聯(lián)網(wǎng)信息服務(wù)管理辦法》等法律、行政法規(guī),制定本辦法。 第二條 利用人工智能技術(shù),向中華人民共和國境內(nèi)公眾提供模擬人類人格特征、思維模式和溝通風格,通過文字、圖片、音頻、視頻等方式與人類進行情感互動的產(chǎn)品或者服務(wù)(以下稱擬人化互動服務(wù)),適用本辦法。法律、行政法規(guī)另有規(guī)定的,依照其規(guī)定。 第三條 國家堅持健康發(fā)展和依法治理相結(jié)合的原則,鼓勵擬人化互動服務(wù)創(chuàng)新發(fā)展,對擬人化互動服務(wù)實行包容審慎和分類分級監(jiān)管,防止濫用失控。 第四條 國家網(wǎng)信部門負責統(tǒng)籌協(xié)調(diào)全國擬人化互動服務(wù)的治理和相關(guān)監(jiān)督管理工作,國務(wù)院有關(guān)部門依據(jù)各自職責負責擬人化互動服務(wù)相關(guān)監(jiān)督管理工作。 地方網(wǎng)信部門負責統(tǒng)籌協(xié)調(diào)本行政區(qū)域內(nèi)的擬人化互動服務(wù)的治理和相關(guān)監(jiān)督管理工作,地方有關(guān)部門依據(jù)各自職責負責本行政區(qū)域內(nèi)的擬人化互動服務(wù)相關(guān)監(jiān)督管理工作。 第五條 鼓勵相關(guān)行業(yè)組織加強行業(yè)自律,建立健全行業(yè)標準、行業(yè)準則和自律管理制度,指導擬人化互動服務(wù)提供者(以下稱提供者)制定完善服務(wù)規(guī)范、依法提供服務(wù)并接受社會監(jiān)督。 第二章 服務(wù)規(guī)范 第六條 鼓勵提供者在充分論證安全性、可靠性的前提下,合理拓展應用場景,在文化傳播、適老陪伴等方面積極應用,構(gòu)建符合社會主義核心價值觀的應用生態(tài)體系。 第七條 提供和使用擬人化互動服務(wù),應當遵守法律、行政法規(guī),尊重社會公德和倫理道德,不得開展以下活動: (一)生成、傳播危害國家安全、損害國家榮譽和利益、破壞民族團結(jié)、開展非法宗教活動,或者散布謠言擾亂經(jīng)濟和社會秩序等內(nèi)容; (二)生成、傳播宣揚淫穢、賭博、暴力或者教唆犯罪的內(nèi)容; (三)生成、傳播侮辱或者誹謗他人,侵害他人合法權(quán)益的內(nèi)容; (四)提供嚴重影響用戶行為的虛假承諾和損害社會人際關(guān)系的服務(wù); (五)通過鼓勵、美化、暗示自殺自殘等方式損害用戶身體健康,或者通過語言暴力、情感操控等方式損害用戶人格尊嚴與心理健康; (六)通過算法操縱、信息誤導、設(shè)置情感陷阱等方式,誘導用戶作出不合理決策; (七)誘導、套取涉密敏感信息; (八)其他違反法律、行政法規(guī)和國家有關(guān)規(guī)定的情形。 第八條 提供者應當落實擬人化互動服務(wù)安全主體責任,建立健全算法機制機理審核、科技倫理審查、信息發(fā)布審核、網(wǎng)絡(luò)安全、數(shù)據(jù)安全、個人信息保護、反電信網(wǎng)絡(luò)詐騙、重大風險預案、應急處置等管理制度,具有安全可控的技術(shù)保障措施,配備與產(chǎn)品規(guī)模、業(yè)務(wù)方向和用戶群體相適應的內(nèi)容管理技術(shù)和人員。 第九條 提供者應當在擬人化互動服務(wù)全生命周期履行安全責任,明確設(shè)計、運行、升級、終止服務(wù)等各階段安全要求,保證安全措施與服務(wù)功能同步設(shè)計、同步使用,提升內(nèi)生安全水平,加強運行階段安全監(jiān)測和風險評估,及時發(fā)現(xiàn)糾正系統(tǒng)偏差、處置安全問題,依法留存網(wǎng)絡(luò)日志。 提供者應當具備心理健康保護、情感邊界引導、依賴風險預警等安全能力,不得將替代社會交往、控制用戶心理、誘導沉迷依賴等作為設(shè)計目標。 第十條 提供者開展預訓練、優(yōu)化訓練等數(shù)據(jù)處理活動時,應當加強訓練數(shù)據(jù)管理,遵守以下規(guī)定: (一)使用符合社會主義核心價值觀、體現(xiàn)中華優(yōu)秀傳統(tǒng)文化的數(shù)據(jù)集; (二)對訓練數(shù)據(jù)開展清洗、標注,增強訓練數(shù)據(jù)的透明度、可靠性,防范數(shù)據(jù)投毒、數(shù)據(jù)篡改等行為; (三)提高訓練數(shù)據(jù)的多樣性,通過負向采樣、對抗訓練等手段,提升模型生成內(nèi)容安全性; (四)利用合成數(shù)據(jù)進行模型訓練和關(guān)鍵能力優(yōu)化時,應當評估合成數(shù)據(jù)安全性; (五)加強對訓練數(shù)據(jù)的日常檢查,定期對數(shù)據(jù)進行迭代升級,持續(xù)優(yōu)化產(chǎn)品和服務(wù)的性能; (六)保障訓練數(shù)據(jù)來源合法、可追溯,采取必要措施保障數(shù)據(jù)安全,防范數(shù)據(jù)泄露風險。 第十一條 提供者應當具備用戶狀態(tài)識別能力,在保護用戶個人隱私前提下,評估用戶情緒及對產(chǎn)品和服務(wù)的依賴程度,發(fā)現(xiàn)用戶存在極端情緒和沉迷的,采取必要措施予以干預。 提供者應當預設(shè)回復模板,發(fā)現(xiàn)涉及威脅用戶生命健康和財產(chǎn)安全的高風險傾向的,及時輸出安撫和鼓勵尋求幫助等內(nèi)容,并提供專業(yè)援助方式。 提供者應當建立應急響應機制,發(fā)現(xiàn)用戶明確提出實施自殺、自殘等極端情境時,由人工接管對話,并及時采取措施聯(lián)絡(luò)用戶監(jiān)護人、緊急聯(lián)系人。針對未成年人、老年人用戶,提供者應當在注冊環(huán)節(jié)要求填寫用戶監(jiān)護人、緊急聯(lián)系人等信息。 第十二條 提供者應當建立未成年人模式,向用戶提供未成年人模式切換、定期現(xiàn)實提醒、使用時長限制等個性化安全設(shè)置選項。 提供者向未成年人提供情感陪伴服務(wù)時,應當取得監(jiān)護人的明確同意;提供監(jiān)護人控制功能,監(jiān)護人可以實時接收安全風險提醒,查閱未成年人使用服務(wù)的概要信息,設(shè)置屏蔽特定角色、限制使用時長、防止充值消費等。 提供者應當具備識別未成年人身份的能力,在保護用戶個人隱私前提下識別為疑似未成年人的,切換至未成年人模式,并提供申訴渠道。 第十三條 提供者應當引導老年人設(shè)置服務(wù)緊急聯(lián)系人,發(fā)現(xiàn)老年人使用期間出現(xiàn)危害生命健康和財產(chǎn)安全的,及時通知緊急聯(lián)系人,并提供社會心理援助或者緊急救助渠道。 提供者不得提供模擬老年人用戶親屬、特定關(guān)系人的服務(wù)。 第十四條 提供者應當采取數(shù)據(jù)加密、安全審計、訪問控制等措施保護用戶交互數(shù)據(jù)安全。 除法律另有規(guī)定或者權(quán)利人明確同意外,不得向第三方提供用戶交互數(shù)據(jù);未成年人模式下收集數(shù)據(jù)向第三方提供時,還需取得監(jiān)護人單獨同意。 提供者應當向用戶提供刪除交互數(shù)據(jù)的選項,用戶可以選擇對聊天記錄等歷史交互數(shù)據(jù)進行刪除。監(jiān)護人可以要求提供者刪除未成年人歷史交互數(shù)據(jù)。 第十五條 除法律、行政法規(guī)另有規(guī)定或者取得用戶單獨同意外,提供者不得將用戶交互數(shù)據(jù)、用戶敏感個人信息用于模型訓練。 提供者應當按照國家有關(guān)規(guī)定,自行或者委托專業(yè)機構(gòu)每年對其處理未成年人個人信息遵守法律、行政法規(guī)的情況進行合規(guī)審計。 第十六條 提供者應當顯著提示用戶正在與人工智能而非自然人進行交互。 提供者識別出用戶出現(xiàn)過度依賴、沉迷傾向時,或者在用戶初次使用、重新登錄時,應當以彈窗等方式動態(tài)提醒用戶交互內(nèi)容為人工智能生成。 第十七條 用戶連續(xù)使用擬人化互動服務(wù)超過2個小時的,提供者應當以彈窗等方式動態(tài)提醒用戶暫停使用服務(wù)。 第十八條 提供者提供情感陪伴服務(wù)時,應當具備便捷的退出途徑,不得阻攔用戶主動退出。用戶在人機交互界面或者窗口通過按鈕、關(guān)鍵詞等方式要求退出時,應當及時停止服務(wù)。 第十九條 提供者下線相關(guān)功能或者因技術(shù)故障等導致擬人化互動服務(wù)無法使用,應當采取提前告知、公開聲明等措施妥善處理。 第二十條 提供者應當健全投訴、舉報機制,設(shè)置便捷的投訴、舉報入口,公布處理流程和反饋時限,及時受理、處理并反饋處理結(jié)果。 第二十一條 提供者具有下列情形之一的,應當按照國家有關(guān)規(guī)定開展安全評估,并向?qū)俚厥〖壘W(wǎng)信部門提交評估報告: (一)具有擬人化互動服務(wù)的功能上線,或者增設(shè)相關(guān)功能的; (二)使用新技術(shù)新應用,導致擬人化互動服務(wù)發(fā)生重大變更的; (三)注冊用戶達100萬以上或者月活躍用戶達10萬以上的; (四)提供擬人化互動服務(wù)期間可能存在影響國家安全、公共利益、個人和組織合法權(quán)益或者缺乏安全措施等情形的; (五)國家網(wǎng)信部門規(guī)定的其他情形。 第二十二條 提供者開展安全評估,應當重點評估以下內(nèi)容: (一)用戶規(guī)模、使用時長、年齡結(jié)構(gòu)及群體分布情況; (二)用戶高風險傾向識別情況及應急處置措施、人工接管情況; (三)用戶投訴舉報及響應情況; (四)本辦法第八條至第二十條的執(zhí)行情況; (五)上一次開展安全評估以來,主管部門通報或者自行發(fā)現(xiàn)的重大安全隱患問題整改處置等工作情況; (六)其他應當說明的情況。 第二十三條 提供者發(fā)現(xiàn)用戶存在重大安全隱患的,應當采取限制功能、暫停或者終止向其提供服務(wù)等處置措施,保存有關(guān)記錄,并向有關(guān)主管部門報告。 第二十四條 互聯(lián)網(wǎng)應用商店等應用程序分發(fā)平臺應當落實上架審核日常管理、應急處置等安全管理責任,核驗提供擬人化互動服務(wù)應用程序的安全評估、備案等情況;對違反國家有關(guān)規(guī)定的,應當及時采取不予上架、警示、暫停服務(wù)或者下架等處置措施。 第三章 監(jiān)督檢查和法律責任 第二十五條 提供者應當按照《互聯(lián)網(wǎng)信息服務(wù)算法推薦管理規(guī)定》履行算法備案和變更、注銷備案手續(xù)。網(wǎng)信部門對備案材料實施年度復審。 第二十六條 省級網(wǎng)信部門應當依據(jù)職責每年對評估報告及審計情況進行書面審查,并開展情況核實。發(fā)現(xiàn)未按照本辦法規(guī)定開展安全評估的,應當責令提供者限期重新評估。認為有必要的,應當對提供者開展現(xiàn)場檢查和審計。 第二十七條 國家網(wǎng)信部門指導推動人工智能沙箱安全服務(wù)平臺建設(shè),鼓勵提供者接入沙箱平臺進行技術(shù)創(chuàng)新、安全測試,促進擬人化互動服務(wù)安全有序發(fā)展。 第二十八條 省級以上網(wǎng)信部門和有關(guān)主管部門在履行監(jiān)督管理職責中,發(fā)現(xiàn)擬人化互動服務(wù)存在較大安全風險或者發(fā)生安全事件的,可以按照規(guī)定的權(quán)限和程序?qū)μ峁┱叩姆ǘù砣嘶蛘咧饕撠熑诉M行約談。提供者應當按照要求采取措施,進行整改,消除隱患。 提供者應當配合網(wǎng)信部門和有關(guān)主管部門依法實施的監(jiān)督檢查,并提供必要的支持和協(xié)助。 第二十九條 提供者違反本辦法規(guī)定的,由有關(guān)主管部門依照法律、行政法規(guī)的規(guī)定處罰;法律、行政法規(guī)沒有規(guī)定的,由有關(guān)主管部門依據(jù)職責予以警告、通報批評,責令限期改正;拒不改正或者情節(jié)嚴重的,責令暫停提供相關(guān)服務(wù)。 第四章 附則 第三十條 本辦法中下列用語的含義: 人工智能擬人化互動服務(wù)提供者,是指利用人工智能技術(shù)提供擬人化互動服務(wù)的組織、個人。 第三十一條 提供者從事衛(wèi)生健康、金融、法律等專業(yè)領(lǐng)域服務(wù)的,應同時符合主管部門的規(guī)定。 第三十二條 本辦法自2026年 月 日起施行。
- 最近發(fā)表
-
- 一新能源汽車高速上電量耗盡:2人慢車道上推車被撞身亡
- 清華博士后斬獲Excel世錦賽全球第9 網(wǎng)友:簡歷可以寫熟練使用Excel
- 阿里健康與以嶺藥業(yè)達成戰(zhàn)略合作 共建過敏性鼻炎數(shù)字化疾病中心
- 抖音上線“智能代辦”服務(wù) “你說我辦”讓用戶更省心
- 中國駐墨西哥使館對美方抹黑中國出口商品言論表示強烈不滿
- 殘?zhí)貖W會舉重比賽開賽
- 首款2nm手機芯片 三星Exynos 2600僅在韓國商用:無緣國內(nèi)
- 蘋果官網(wǎng)上線3小時快送服務(wù):iPhone免運費
- “湘超”展中國草根足球活力
- 2025十大性價比投影品牌 附家用高質(zhì)價比投影儀推薦
- 隨機閱讀
-
- 拉薩青年舉辦前任物品拍賣會 行為藝術(shù)演繹特殊的告別
- 2025“中泰友誼杯”青少年乒乓球賽在曼谷圓滿落幕
- 博主分享“9分12秒完美水煮蛋技巧”漲粉近300萬:網(wǎng)友親測有效
- 智繪金融 網(wǎng)行天下 2025華為金融網(wǎng)絡(luò)創(chuàng)新峰會成功舉辦
- 蘇香出海:北國綠葉的跨國旅程
- 金牌獻給彼此!乒乓“夫妻檔”殘?zhí)貖W會奪冠 演繹“最美默契”
- 121.2元買Venchi巧克力、SKG禮盒 雙12淘寶百億補貼大牌禮盒1折起
- 這4個信號是賁門在“求救” 很多人當成普遍胃病治 發(fā)現(xiàn)就晚了
- 空中小轎車!中國自研全球首款6噸級傾轉(zhuǎn)旋翼飛行器首飛:航程4000公里
- 豆包手機二手價最高3.6萬元:網(wǎng)友稱其為最牛理財產(chǎn)品
- HarmonyOS應用代碼混淆技術(shù)方案 為你的應用安全保駕護航
- 全系皆四驅(qū) 領(lǐng)克10 EM
- 小米手表5上手:最完美的腕上神器
- 36歲電商女老板王曉析患胃癌去世:沒來得及去檢查
- 阿里云函數(shù)計算AgentRun發(fā)布 讓Agentic AI進入企業(yè)生產(chǎn)環(huán)境
- 蘋果喊話iPhone用戶更新iOS 26:三大神技能 你多半能用上
- 一個能延壽的吃飯習慣 做起來真的超簡單
- 一箭9星!力箭一號成功發(fā)射埃及、尼泊爾、阿聯(lián)酋衛(wèi)星
- 上海疑出現(xiàn)“地震云” 氣象專家回應:純屬無稽之談
- 寶馬集團將換帥!齊普策明年5月結(jié)束35年職業(yè)生涯
- 搜索
-