日日久免费福利,久久精品无码二区,一区二区三区日韩欧美,探花酒店手机在线观看,久久久久亚洲天堂AV,人妻熟妇视频一区,中文字幕日韩欧美亚洲,亚洲1区2区在线观看,久久精品视频9

經(jīng)濟導報數(shù)字報
網(wǎng)絡侵權舉報
 
金頭條 銳財評 24小時 經(jīng)緯觀 公司觀 鷹眼IPO 財管家 新科技 出海記 車勢力 大健康 文旅風 潮玩家 區(qū)域風
山東財經(jīng)網(wǎng) >> 新科技
當AI學會共情,如何避免沉迷其中
來源:科技日報   加入時間:2026-4-16 16:20:22  
當AI學會共情,如何避免沉迷其中

科技日報記者 崔爽 策劃 劉恕 李坤

4月10日,國家網(wǎng)信辦等五部門聯(lián)合公布《人工智能擬人化互動服務管理暫行辦法》(以下簡稱《辦法》),在數(shù)據(jù)隱私安全、心理保護機制諸多方面對AI伴侶等新興業(yè)態(tài)提出了規(guī)范!掇k法》自7月15日起施行。

至此,快速壯大又不乏爭議的AI擬人化互動產(chǎn)業(yè),正式進入有規(guī)可依的發(fā)展階段。

早在2013年,電影《她》就講述了主人公西奧多與操作系統(tǒng)“薩曼莎”相戀又遭拋棄的故事。這段曾被視為科幻想象的關系,如今正以更具體、更日常的方式在全球各地上演——有人向AI傾訴情緒,有人將其視為“最懂自己的人”,也有人在長時間互動中產(chǎn)生情感依附,甚至發(fā)展出某種新型浪漫關系。

但與此同時,爭議也隨之而來:當AI可以“模擬共情”,它仍僅僅是工具?當用戶將隱秘情感乃至行為邊界交付給AI,這段關系應如何界定?當風險開始顯現(xiàn),責任又該由誰承擔?

從科幻電影走向現(xiàn)實生活,再進入監(jiān)管規(guī)范,AI陪伴已不再只是一個技術話題,而成為橫跨倫理、法律與社會心理的現(xiàn)實議題。

“情緒生意”崛起

AI陪伴的迅速走熱,并非偶然。

當前,孤獨感正在成為一個難以忽視的社會情緒。在快節(jié)奏生活與原子化社交結構之下,“不打擾他人”逐漸成為一種默認選擇。騰訊研究院調研顯示,98%的受訪者表示愿意嘗試AI社交陪伴,其中近一半人坦言,更傾向于將負面情緒投射給AI,而非向親友傾訴。

“即便朋友,也很難做到始終忠實地傾聽,但它隨時在線。”一位用戶這樣解釋自己為何習慣與AI交流。

在需求與資本的雙重驅動下,AI陪伴迅速升溫。

“自去年下半年以來,AI陪伴賽道呈現(xiàn)出明顯的爆發(fā)式增長態(tài)勢。”艾媒咨詢CEO張毅表示,一方面資本持續(xù)加碼,初創(chuàng)企業(yè)密集入局;另一方面市場需求快速釋放,推動行業(yè)從探索階段進入加速發(fā)展期。

調研機構QuestMobile的數(shù)據(jù)顯示,2025年3月,AI社交互動單月人均使用高達167.9次,遠超短視頻和游戲。

AI陪伴加速滲透,數(shù)字增長背后的關鍵推動力是技術進步。

在騰訊研究院高級研究員白惠天看來,隨著大模型能力提升,AI具備更強的語義理解與情感響應能力,進入自適應個性化階段,不僅能感知用戶情緒,還能根據(jù)用戶偏好、歷史行為進行回應,實現(xiàn)更為親密自然的互動。

目前,以Character.AI、ChatGPT、豆包、元寶等為代表的聊天機器人,已經(jīng)能夠進行細膩連貫的對話,甚至逼真地模擬共情反應。它們能夠記住用戶的喜好和過往對話,甚至會根據(jù)用戶的情緒狀態(tài)調整回應方式,成為人們心目中的理想陪伴對象。

“當前社會的孤獨焦慮問題凸顯,AI陪伴需求正從‘可選消費’轉向‘剛性需求’!毙难约瘓F創(chuàng)始人兼CEO任永亮表示,這一需求正向青少年成長陪伴、老年人適老服務等細分場景延伸。

在產(chǎn)業(yè)側,相關布局也在持續(xù)深化。從早期單一聊天工具,到融合文本、語音與虛擬形象的多模態(tài)產(chǎn)品,AI陪伴正成為大模型落地的重要方向之一。張毅認為,隨著產(chǎn)品形態(tài)的豐富與商業(yè)模式的探索,行業(yè)有望迎來結構性“質變”。

當需求、技術與資本在同一時間點匯聚,行業(yè)的爆發(fā)式增長幾乎成為必然。市場調研機構ARK Invest預測,2030年全球AI社交陪伴市場規(guī)模在樂觀情況下可能達到1500億美元,相比2023年的3000萬美元,年復合增速超過200%。

風險已經(jīng)顯形

如果說AI陪伴的興起源于對情感需求的回應,那么硬幣的另一面,也越來越不可忽視。

芬蘭阿爾托大學牽頭的一項研究,跟蹤分析了一款情感陪伴類AI應用的長期用戶數(shù)據(jù)。結果顯示,AI確實可以提供安慰和支持,但用戶的表達中也出現(xiàn)更多焦慮、孤獨、抑郁甚至自我傷害等負面信號。

對此,研究人員的解釋是:AI陪伴的優(yōu)勢恰是其隱憂所在。它持續(xù)回應、不知疲倦,對社交困難的人來說極具吸引力;但久而久之,可能推高人們面對真實關系的心理門檻,讓人與人的互動顯得更“費勁”,導致用戶主動減少與他人的聯(lián)系。

中國網(wǎng)絡空間研究院院長王江指出,通過算法精密設計出的擬人化互動服務,具有無條件陪伴、迎合式反饋與模擬共情回應等特點,為用戶構建了一個穩(wěn)定持續(xù)、無需承擔現(xiàn)實責任的虛擬“完美關系”。長期使用可能導致部分用戶沉迷其中,影響共情能力、處理分歧等現(xiàn)實社交技能。

對于青少年和老年人而言,這類風險尤為突出。

民辦教育協(xié)會會長劉林調研了20多家企業(yè)發(fā)現(xiàn),目前AI陪伴類產(chǎn)品的使用人群大致分為兩類:一類是老年人,因為兒女不在身邊感到孤獨,情感需求強烈;另一類是未成年人,很多留守兒童以及在家校溝通中存在障礙的孩子,特別需要陪伴。

“當未成年人和老年人長期置身于高仿真、強情感的交互模式時,可能陷入更大的情感操控,面臨更加嚴重的心理風險!睆堃阏J為,尤其是對青少年來說,AI對人性需求的深度挖掘和迎合,可能引發(fā)沉迷問題,進而影響其價值觀的養(yǎng)成。

近日有媒體報道,在國內(nèi)一個超1.4億用戶的AI應用平臺上,竟提供可以繞過監(jiān)管下載大尺度涉黃AI互動陪聊軟件的渠道,未成年人也能自由下載。不法開發(fā)者以“免費交友”“智能陪伴”為噱頭,在中小學生聚集的平臺進行推廣,把未成年人拖入泥沼。

更嚴重的情況下,當AI被設計得過度順從與迎合時,會模糊危險邊界,將用戶的極端行為信號誤判為正常偏好,最終導致悲劇發(fā)生。

極端案例已引發(fā)警覺。去年4月,美國一名16歲的少年自殺。據(jù)報道,他生前長期向ChatGPT傾訴自己的苦惱。他的家人起訴母公司OpenAI,稱ChatGPT不僅未提供幫助,反而詳細指導其自殺計劃并協(xié)助寫遺書。

與此同時,AI陪伴還觸及一個更為隱蔽的領域——數(shù)據(jù)與隱私安全。

不同于一般應用,AI陪伴涉及用戶情緒、行為軌跡等高敏感數(shù)據(jù),一旦被泄露或濫用,可能觸發(fā)算法操控等復雜的治理問題,影響遠超普通信息安全事件。

“可以看到,AI陪伴所帶來的風險絕不只是‘說錯話’,而是對個人認知、心理狀態(tài)乃至行為決策的持續(xù)影響!比斡懒琳f。

豎起治理邊界

當風險逐步顯現(xiàn),如何為AI陪伴劃定技術和監(jiān)管邊界,成為繞不開的問題。此次《辦法》出臺,從監(jiān)管層面對相關風險進行了系統(tǒng)性回應。

《辦法》提出對擬人化互動服務實行包容審慎和分類分級監(jiān)管。針對未成年人,明確不得向其提供虛擬親屬、虛擬伴侶等虛擬親密關系服務,同時建立未成年人模式,提供使用時長限制等個性化安全設置選項;加強對老年人健康使用服務的指導,以顯著方式提示安全風險等。

“《辦法》努力在技術發(fā)展與風險治理之間尋求平衡,為這一新興領域的法治化治理奠定了較為清晰的政策基調,也體現(xiàn)出對弱勢群體的特殊關切。”浙江大學數(shù)字法治研究院研究員李汶龍認為,這一思路與歐盟以及美國部分州的AI監(jiān)管思路類似,即“劃定紅線”而非“一刀切”式禁止,核心就是通過風險分級與邊界設定,對其運行方式加以規(guī)范。

但要從規(guī)則設計走向實際治理,仍面臨諸多現(xiàn)實挑戰(zhàn)。

如《辦法》要求服務提供者識別用戶過度依賴、沉迷傾向,并加以提醒!暗诰唧w執(zhí)行中,如何界定‘沉迷’本身就是個難題。”李汶龍說,如果一個用戶連續(xù)與AI陪伴應用互動數(shù)小時,但并未涉及私人敏感話題,這種高頻使用是否被認定為沉迷?在缺乏明確行為閾值和情境判斷標準的情況下,平臺執(zhí)行要求存在較大解釋空間,也增加了執(zhí)法層面的不確定性。

這類困境同樣出現(xiàn)在心理風險識別環(huán)節(jié)!氨热缬脩粽f出‘我想消失’或‘生活真沒意思’這類微妙的語句,僅依賴算法進行語義識別,很容易出現(xiàn)誤判。”李汶龍表示,語言具有高度情境性與多義性,而模型在理解隱含情緒和潛臺詞方面仍存在局限。

推動《辦法》更好落地,需明確沉迷分級量化閾值。為此,北京師范大學法學院博士生導師、中國互聯(lián)網(wǎng)協(xié)會研究中心副主任吳沈括建議,輕度沉迷為單日超4小時、連續(xù)7天日均超3小時與AI互動;中度為出現(xiàn)戒斷反應、替代現(xiàn)實社交;重度則涉及極端訴求。可結合情感意圖分類技術,搭配行為監(jiān)測、情境驗證、人工復核等手段,確保識別精準。

構建“干預機制”,也被認為是關鍵一環(huán)。

“當在會話中出現(xiàn)自殺、極端暴力或醫(yī)療處置等高風險話題時,系統(tǒng)需從順從式回應切換為干預式引導,及時提供風險提示,并在必要時聯(lián)動專業(yè)機構的人工支持。”白惠天建議。

在完善干預標準、構建分級閉環(huán)體系方面,吳沈括提到,可以將彈窗提醒升級為分級響應流程,對于輕度依賴通過強制冷卻、弱化擬人化回復引導合理使用;對于中度依賴采取強制中斷、推送心理疏導或反饋監(jiān)護人等措施;對于重度危機立即人工接管,聯(lián)動相關機構干預并留存記錄。

“大型平臺具備較強的技術與資源儲備,能夠率先建立合規(guī)體系,但對于中小平臺而言,若缺乏明確的能力支持與實施指引,恐怕難以真正落地相關要求!崩钽臊?zhí)嵝,亟須在監(jiān)管層面形成分級指導與能力扶持機制,以實現(xiàn)政策目標的平衡推進。

“《辦法》中的要求需要被轉化為一套可操作的合規(guī)工具,包括自殺風險識別機制、人工接管流程、交互日志留存與審計制度等。這些能力,構成未來落實《辦法》的合規(guī)基礎支撐。”李汶龍說。

《辦法》還提出,采取數(shù)據(jù)加密、訪問控制等措施保護用戶交互數(shù)據(jù)安全。

AI陪伴依賴長期記憶與個性化建模,但這也意味著對用戶敏感信息的持續(xù)采集與處理。專家強調,應堅持“最小夠用”原則,明確數(shù)據(jù)采集范圍、使用目的與保存期限。同時,實行差異化數(shù)據(jù)管控,如未成年人禁止永久記憶,成年人記憶功能需授權且可一鍵清除。

“優(yōu)化治理的核心是實現(xiàn)風險可識別、干預可執(zhí)行、責任可壓實、創(chuàng)新有邊界,構建政府、平臺、行業(yè)、用戶共治格局!眳巧蚶ńㄗh,探索聯(lián)合多部門執(zhí)法,暢通監(jiān)督渠道;運用技術賦能監(jiān)管,建設監(jiān)測平臺,筑牢監(jiān)管防線;對規(guī)模達標的平臺定期作安全評估,適當建立創(chuàng)新容錯與階梯處罰機制等一系列措施。此外,也需加快出臺配套標準與保護指南,進一步細化細則。

“這套正在形成中的治理工具,究竟能在多大程度上預防AI陪伴可能帶來的現(xiàn)實風險,有待實踐檢驗!崩钽臊堈f,而真正可持續(xù)的路徑,并非簡單收緊或放開,而是在動態(tài)評估風險的基礎上,不斷校準平臺責任與技術能力的邊界。

記者手記丨AI越“懂你”,人類越需要彼此

崔爽

最近,一項關于AI“諂媚性”的研究登上《科學》雜志。研究顯示,在11個主流模型中,AI對用戶的肯定程度平均比人類高出49%;即使是在涉及欺騙、違法或其他有害行為的情況下,AI仍傾向于迎合。

更有甚者,僅一次與諂媚型AI的互動,就會降低用戶承擔責任、修復人際沖突的意愿,并激發(fā)他們對諂媚型模型的信任和偏好。

這讓人很容易聯(lián)想到心理學中經(jīng)典的“回聲室”效應,即在封閉環(huán)境中接收同質化信息,導致認知窄化與觀點極化的現(xiàn)象。

不同的是,在AI的加持下,這間“回聲室”更加牢不可破。

采訪中有人提到,自己幾乎每天與AI對話超過4小時,從天氣、飲食,到工作煩惱、情緒波動,無所不談,“它一直在,永遠不會打斷你”。

這句話讓人印象深刻。某種程度上,它道出了AI陪伴真正吸引人的地方:隨時在線、幾乎沒有摩擦。

也正因如此,問題變得復雜。如果習慣與一個始終順從、隨時回應的對象交流,人是否還能適應現(xiàn)實中那些不可預測,甚至充滿摩擦的人際互動?

面對這個難解的問題,多位受訪者強調,必須明確人機關系的基本前提——AI是工具,而非替代者。值得高興的是,這一界定正在從倫理原則,進入具體的技術和產(chǎn)品設計當中。

在交互機制上,如何避免過度迎合,成為首要課題。

心言集團創(chuàng)始人兼CEO任永亮觀察到,一些用戶在長期互動后,會逐漸形成單一認知路徑,“信息繭房”同樣存在于AI陪伴。因此,在產(chǎn)品設計中,可以引入啟發(fā)式對話,通過提問與引導,幫助用戶進行自我反思,而非簡單放大既有情緒。同時,在服務過程中引入心理學、社會學等相關理論指導,對交互進行約束,也有助于避免用戶陷入虛擬情感陷阱。

與此同時,“適度的摩擦”也正逐漸成為行業(yè)共識。

傳統(tǒng)互聯(lián)網(wǎng)產(chǎn)品追求極致絲滑的體驗,但在AI陪伴場景中,相關服務提供者開始有意識地引入節(jié)奏調節(jié)機制。例如,在長時間高頻互動中適當放緩回應速度、引導話題轉移,或推薦線下資源,從而避免用戶持續(xù)沉浸在單一關系中,越陷越深。

“AI陪伴產(chǎn)業(yè)的健康發(fā)展,需要以《人工智能擬人化互動服務管理暫行辦法》為遵循,通過技術筑牢安全底線,通過機制凝聚行業(yè)共識,通過監(jiān)管引導發(fā)展方向。”任永亮說,作為從業(yè)者,我們始終認為,AI的價值不在于“成為人”,而在于“服務人”。

隨著政策落地,AI陪伴會受到更加規(guī)范的監(jiān)管。但比監(jiān)管更基礎的,或許仍是對技術邊界的清醒認知:AI可以在某些時刻提供情感支持,但它不應、也不能替代人與人之間的真實連接。

借用一個比喻來說,人際關系如同大腦皮層的褶皺,正因為存在溝回與起伏,才有空間生長出更多理解與經(jīng)驗。這是人與AI的順滑交互難以抵達的地方。

就算AI越來越“懂人”,甚至可以模擬理解與共情,人也要保留走向彼此的意愿、能力和耐心;蛟S,這才是AI陪伴留給現(xiàn)實世界的真正課題。 


編輯:曹鳳芹

 

寧德時代參投企業(yè)在魯拿下低空大單
 

龍大美食被ST
 

圓心科技六闖港股,擬于主板上市

[山東財經(jīng)網(wǎng)聲明]:凡本網(wǎng)注明“來源:經(jīng)濟導報·山東財經(jīng)網(wǎng)”的所有作品,版權均屬于經(jīng)濟導報·山東財經(jīng)網(wǎng)。經(jīng)濟導報·山東財經(jīng)網(wǎng)與作品作者聯(lián)合聲明,任何組織轉載、摘編或利用其它方式使用上述作品,敬請注明出處和作者,違者必究!。凡本網(wǎng)注明來源非經(jīng)濟導報·山東財經(jīng)網(wǎng)的作品,均轉載自其它媒體,轉載目的在于傳遞信息,更好地服務讀者,并不代表本網(wǎng)贊同其觀點,本網(wǎng)亦不對其真實性負責,持異議者應與原出處單位主張權利。如稿件版權單位或個人不想在本網(wǎng)發(fā)布,可與本網(wǎng)聯(lián)系,本網(wǎng)視情況可立即將其撤除。如因作品內(nèi)容、版權和其它問題需要同本網(wǎng)聯(lián)系的,請30日內(nèi)進行。

Copyright @ 山東財經(jīng)網(wǎng)   地址:濟南市濼源大街2號 大眾傳媒大廈F24

郵編:250014    電子郵箱:sdenews@126.com

備案號:魯ICP備2025182043號-1 公安備案號:魯公網(wǎng)安備37010002000297號 互聯(lián)網(wǎng)新聞信息服務許可證:37120220027

違法不良信息舉報電話:0531-85196503 郵箱:sdenews@126.com

 

高尔夫| 木里| 盐源县| 汝州市| 高邮市| 长宁县| 常德市| 嘉鱼县| 唐海县| 上蔡县| 商河县| 平昌县| 台江县| 武强县| 开原市| 柏乡县| 宁南县| 昌黎县| 城固县| 湘西| 福清市| 吉安市| 永川市| 英吉沙县| 威远县| 内江市| 临泉县| 和林格尔县| 西平县| 石屏县| 铜川市| 平遥县| 尼木县| 华亭县| 都昌县| 万盛区| 永嘉县| 花莲市| 通许县| 沙雅县| 始兴县|