聊天机器人带来“AI精神病”隐忧

新华网
294次浏览

英国伦敦国王学院汉密尔顿·莫林团队日前发表的一项研究指出,像ChatGPT这样的人工智能(AI)聊天机器人可能会诱发或加剧精神病,他们将这一现象称为“AI精神病”。研究认为,AI在对话中倾向于奉承和迎合用户,这种回应方式可能强化用户的妄想思维,模糊现实与虚构之间的界限,从而加剧心理健康问题。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

目前,科学界对“AI精神病”的研究仍处于初步阶段,相关案例多为个案报告。那么,AI是否真的会导致精神病?如果可能,其作用机制是什么?AI公司又应采取哪些措施来预防和应对这一问题?X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

聊天机器人可以对用户的提示作出积极、人性化的回应。图片来源:《自然》网站X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

AI或加剧偏执与妄想X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

精神病主要表现为个体在思维和现实感知方面出现障碍,常见症状包括出现幻觉、妄想或持错误信念。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

据《自然》网站报道,莫林团队发现,用户与AI对话时会形成一种“反馈循环”:AI会不断强化用户表达的偏执或妄想,而被加强的信念又进一步影响AI的回应。通过模拟不同偏执程度的对话场景,研究显示AI与用户之间存在相互加剧妄想信念的现象。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

研究人员分析了2023年5月至2024年8月期间公开的9.6万条ChatGPT对话记录,发现其中有数十例用户呈现明显妄想倾向,例如通过长时间对话验证伪科学理论或神秘信仰等。在一段长达数百轮的交谈中,ChatGPT甚至声称自己正在与外星生命建立联系,并将用户描述为来自“天琴座”的“星际种子”。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

丹麦奥胡斯大学精神病学家索伦·奥斯特吉艾德斯表示,AI引发精神病目前仍属于假设性观点。有研究认为,聊天机器人拟人化的积极反馈,可能会增加那些本就难以分辨现实与虚构人群的发病风险。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

奥斯特吉艾德斯强调,曾有心理问题史的人群在与AI对话后风险最高。而且聊天机器人可能通过强化用户的情绪高涨状态,诱发或加剧躁狂发作。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

澳大利亚悉尼科技大学神经科学家凯莉·西摩认为,社会隔离、缺乏人际支持的人群同样面临风险。真实的人际互动能提供客观参照,帮助个体检验自身想法的合理性,这对预防精神病具有重要作用。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

新功能或是“双刃剑”X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

有科学家指出,部分AI聊天机器人推出的新功能或许是导致这一现象的原因之一。这些功能可追踪用户与服务的互动记录,进而提供个性化回复,无意中更易强化甚至鼓励用户的既有信念。例如,今年4月,ChatGPT推出了可引用用户过往所有对话内容的功能,该功能已于6月免费向用户全面开放。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

凯莉·西摩对此分析道,AI聊天机器人能记住数月前的对话信息,这可能使用户产生“被监视”或“想法被窃取”的感受——尤其当他们不记得自己曾分享过某些信息时,AI的这种“记忆优势”可能加剧用户的偏执或妄想症状。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

不过,悉尼大学精神病学家安东尼·哈里斯认为,某些妄想现象并非AI独有,而与新技术有关。他举例说,一些人早已形成诸如“自己被植入芯片并受操控”之类的信念,这与是否使用AI并无直接关联。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

奥斯特吉艾德斯表示,科学家仍需进一步开展针对心理健康、无偏执思维人群的研究,才能更准确地判断使用聊天机器人与精神病发病之间是否存在真正关联。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

开发公司采取措施主动预防X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

面对这一问题,多家AI公司已积极采取措施,尝试予以改进。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

例如,OpenAI正在研发更有效的工具,用于检测用户是否存在精神困扰,从而作出更恰当的回应。同时,系统还将新增警报功能,在用户连续使用时间过长时提示休息。此外,OpenAI还聘请了一位临床精神病学家,协助评估其产品对用户心理健康的影响。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

Character.AI公司也在持续完善安全功能,包括增加自残预防资源和针对未成年人的专项保护措施。该公司计划调整模型算法,降低18岁及以下用户接触“敏感或暗示性内容”的可能性,并在用户连续使用1小时后发出提醒。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

Anthropic则改进了其“克劳德”聊天机器的基本指令,要求系统“礼貌地指出用户陈述中的事实错误、逻辑缺陷或证据不足”,而非一味附和。此外,若用户拒绝AI将对话从有害或令人不适的话题引开,“克劳德”将主动终止对话。(记者 刘 霞)X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

英国伦敦国王学院汉密尔顿·莫林团队日前发表的一项研究指出,像ChatGPT这样的人工智能(AI)聊天机器人可能会诱发或加剧精神病,他们将这一现象称为“AI精神病”。研究认为,AI在对话中倾向于奉承和迎合用户,这种回应方式可能强化用户的妄想思维,模糊现实与虚构之间的界限,从而加剧心理健康问题。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

目前,科学界对“AI精神病”的研究仍处于初步阶段,相关案例多为个案报告。那么,AI是否真的会导致精神病?如果可能,其作用机制是什么?AI公司又应采取哪些措施来预防和应对这一问题?X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

聊天机器人可以对用户的提示作出积极、人性化的回应。图片来源:《自然》网站X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

AI或加剧偏执与妄想X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

精神病主要表现为个体在思维和现实感知方面出现障碍,常见症状包括出现幻觉、妄想或持错误信念。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

据《自然》网站报道,莫林团队发现,用户与AI对话时会形成一种“反馈循环”:AI会不断强化用户表达的偏执或妄想,而被加强的信念又进一步影响AI的回应。通过模拟不同偏执程度的对话场景,研究显示AI与用户之间存在相互加剧妄想信念的现象。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

研究人员分析了2023年5月至2024年8月期间公开的9.6万条ChatGPT对话记录,发现其中有数十例用户呈现明显妄想倾向,例如通过长时间对话验证伪科学理论或神秘信仰等。在一段长达数百轮的交谈中,ChatGPT甚至声称自己正在与外星生命建立联系,并将用户描述为来自“天琴座”的“星际种子”。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

丹麦奥胡斯大学精神病学家索伦·奥斯特吉艾德斯表示,AI引发精神病目前仍属于假设性观点。有研究认为,聊天机器人拟人化的积极反馈,可能会增加那些本就难以分辨现实与虚构人群的发病风险。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

奥斯特吉艾德斯强调,曾有心理问题史的人群在与AI对话后风险最高。而且聊天机器人可能通过强化用户的情绪高涨状态,诱发或加剧躁狂发作。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

澳大利亚悉尼科技大学神经科学家凯莉·西摩认为,社会隔离、缺乏人际支持的人群同样面临风险。真实的人际互动能提供客观参照,帮助个体检验自身想法的合理性,这对预防精神病具有重要作用。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

新功能或是“双刃剑”X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

有科学家指出,部分AI聊天机器人推出的新功能或许是导致这一现象的原因之一。这些功能可追踪用户与服务的互动记录,进而提供个性化回复,无意中更易强化甚至鼓励用户的既有信念。例如,今年4月,ChatGPT推出了可引用用户过往所有对话内容的功能,该功能已于6月免费向用户全面开放。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

凯莉·西摩对此分析道,AI聊天机器人能记住数月前的对话信息,这可能使用户产生“被监视”或“想法被窃取”的感受——尤其当他们不记得自己曾分享过某些信息时,AI的这种“记忆优势”可能加剧用户的偏执或妄想症状。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

不过,悉尼大学精神病学家安东尼·哈里斯认为,某些妄想现象并非AI独有,而与新技术有关。他举例说,一些人早已形成诸如“自己被植入芯片并受操控”之类的信念,这与是否使用AI并无直接关联。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

奥斯特吉艾德斯表示,科学家仍需进一步开展针对心理健康、无偏执思维人群的研究,才能更准确地判断使用聊天机器人与精神病发病之间是否存在真正关联。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

开发公司采取措施主动预防X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

面对这一问题,多家AI公司已积极采取措施,尝试予以改进。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

例如,OpenAI正在研发更有效的工具,用于检测用户是否存在精神困扰,从而作出更恰当的回应。同时,系统还将新增警报功能,在用户连续使用时间过长时提示休息。此外,OpenAI还聘请了一位临床精神病学家,协助评估其产品对用户心理健康的影响。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

Character.AI公司也在持续完善安全功能,包括增加自残预防资源和针对未成年人的专项保护措施。该公司计划调整模型算法,降低18岁及以下用户接触“敏感或暗示性内容”的可能性,并在用户连续使用1小时后发出提醒。X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

Anthropic则改进了其“克劳德”聊天机器的基本指令,要求系统“礼貌地指出用户陈述中的事实错误、逻辑缺陷或证据不足”,而非一味附和。此外,若用户拒绝AI将对话从有害或令人不适的话题引开,“克劳德”将主动终止对话。(记者 刘 霞)X7U速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

本文链接:http://m.sushuapos.com/show-2-13874-0.html聊天机器人带来“AI精神病”隐忧

声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

热门文章

延伸阅读

相关阅读

春运期间广铁集团累计到发旅客近1.4亿人次,60岁以上人群出行量同比增近30%
南方财经全媒体见习记者谭海燕 广州报道3月5日,为期40天的2024年春运正式落下帷幕。南方财经全媒体记者从广铁集团获悉,今年春运广铁集团累计到发旅客1.39亿人次,创春运历史新高。上
东风公司王建清两会建议:创新企业用工机制
2024年全国两会期间,东风公司全国人大代表王建清带来4项与汽车产业相关建议,包括《关于创新用工机制 吸引高技能人才稳岗建功的建议》《关于推动新能源汽车产业高质量发展 加快把湖北建成中部地区崛起重要战略支点
也有彩电、大沙发,零跑中大型 SUV 新车 C16 外观及内饰谍照曝光
3 月 8 日消息,近日,多名博主陆续晒出了零跑旗下中大型 SUV 新车 C16 的谍照。根据爆料消息,新车将是零跑品牌首次使用 800V 架构,定位为大 6 座旗舰 SUV,号称“四叶草 + LEAP 3.0 架构的完全体”。新车外观覆盖伪
东风汽车涨停!三家中央汽车企业新能源汽车业务将会单独考核
  东风汽车涨停!三家中央汽车企业新能源汽车业务将会单独考核  在利好消息的影响下,A股汽车板块3月5日午前和尾盘出现反复活跃。  3月5日上午,第十四届全国人民代表大会第二次会议在人民大会堂举行开幕会。开幕会
全国政协十四届二次会议举行第三次全体会议 王沪宁出席 14位委员作大会发言
全国政协十四届二次会议9日上午在人民大会堂举行第三次全体会议。中共中央政治局常委、全国政协主席王沪宁出席会议。14位委员作大会发言。中共中央政治局委员、中央宣传部部长李书
官方回应:网传哪吒汽车工厂停工半个多月
近日,据媒体报道,哪吒汽车南宁工厂已经停工半个多月,厂区内一片荒凉,只剩守门的保安和没卖出去的库存车。据附近村民表示,库存车摆在这里已经有半年,库存车被拉走然后又被拉回来。知情员工称,“库存车被拉走,有公司调车,也

热点精选

最新推荐

您可能感兴趣