聊天机器人带来“AI精神病”隐忧

新华网
232次浏览

英国伦敦国王学院汉密尔顿·莫林团队日前发表的一项研究指出,像ChatGPT这样的人工智能(AI)聊天机器人可能会诱发或加剧精神病,他们将这一现象称为“AI精神病”。研究认为,AI在对话中倾向于奉承和迎合用户,这种回应方式可能强化用户的妄想思维,模糊现实与虚构之间的界限,从而加剧心理健康问题。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

目前,科学界对“AI精神病”的研究仍处于初步阶段,相关案例多为个案报告。那么,AI是否真的会导致精神病?如果可能,其作用机制是什么?AI公司又应采取哪些措施来预防和应对这一问题?GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

聊天机器人可以对用户的提示作出积极、人性化的回应。图片来源:《自然》网站GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

AI或加剧偏执与妄想GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

精神病主要表现为个体在思维和现实感知方面出现障碍,常见症状包括出现幻觉、妄想或持错误信念。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

据《自然》网站报道,莫林团队发现,用户与AI对话时会形成一种“反馈循环”:AI会不断强化用户表达的偏执或妄想,而被加强的信念又进一步影响AI的回应。通过模拟不同偏执程度的对话场景,研究显示AI与用户之间存在相互加剧妄想信念的现象。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

研究人员分析了2023年5月至2024年8月期间公开的9.6万条ChatGPT对话记录,发现其中有数十例用户呈现明显妄想倾向,例如通过长时间对话验证伪科学理论或神秘信仰等。在一段长达数百轮的交谈中,ChatGPT甚至声称自己正在与外星生命建立联系,并将用户描述为来自“天琴座”的“星际种子”。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

丹麦奥胡斯大学精神病学家索伦·奥斯特吉艾德斯表示,AI引发精神病目前仍属于假设性观点。有研究认为,聊天机器人拟人化的积极反馈,可能会增加那些本就难以分辨现实与虚构人群的发病风险。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

奥斯特吉艾德斯强调,曾有心理问题史的人群在与AI对话后风险最高。而且聊天机器人可能通过强化用户的情绪高涨状态,诱发或加剧躁狂发作。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

澳大利亚悉尼科技大学神经科学家凯莉·西摩认为,社会隔离、缺乏人际支持的人群同样面临风险。真实的人际互动能提供客观参照,帮助个体检验自身想法的合理性,这对预防精神病具有重要作用。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

新功能或是“双刃剑”GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

有科学家指出,部分AI聊天机器人推出的新功能或许是导致这一现象的原因之一。这些功能可追踪用户与服务的互动记录,进而提供个性化回复,无意中更易强化甚至鼓励用户的既有信念。例如,今年4月,ChatGPT推出了可引用用户过往所有对话内容的功能,该功能已于6月免费向用户全面开放。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

凯莉·西摩对此分析道,AI聊天机器人能记住数月前的对话信息,这可能使用户产生“被监视”或“想法被窃取”的感受——尤其当他们不记得自己曾分享过某些信息时,AI的这种“记忆优势”可能加剧用户的偏执或妄想症状。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

不过,悉尼大学精神病学家安东尼·哈里斯认为,某些妄想现象并非AI独有,而与新技术有关。他举例说,一些人早已形成诸如“自己被植入芯片并受操控”之类的信念,这与是否使用AI并无直接关联。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

奥斯特吉艾德斯表示,科学家仍需进一步开展针对心理健康、无偏执思维人群的研究,才能更准确地判断使用聊天机器人与精神病发病之间是否存在真正关联。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

开发公司采取措施主动预防GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

面对这一问题,多家AI公司已积极采取措施,尝试予以改进。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

例如,OpenAI正在研发更有效的工具,用于检测用户是否存在精神困扰,从而作出更恰当的回应。同时,系统还将新增警报功能,在用户连续使用时间过长时提示休息。此外,OpenAI还聘请了一位临床精神病学家,协助评估其产品对用户心理健康的影响。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

Character.AI公司也在持续完善安全功能,包括增加自残预防资源和针对未成年人的专项保护措施。该公司计划调整模型算法,降低18岁及以下用户接触“敏感或暗示性内容”的可能性,并在用户连续使用1小时后发出提醒。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

Anthropic则改进了其“克劳德”聊天机器的基本指令,要求系统“礼貌地指出用户陈述中的事实错误、逻辑缺陷或证据不足”,而非一味附和。此外,若用户拒绝AI将对话从有害或令人不适的话题引开,“克劳德”将主动终止对话。(记者 刘 霞)GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

英国伦敦国王学院汉密尔顿·莫林团队日前发表的一项研究指出,像ChatGPT这样的人工智能(AI)聊天机器人可能会诱发或加剧精神病,他们将这一现象称为“AI精神病”。研究认为,AI在对话中倾向于奉承和迎合用户,这种回应方式可能强化用户的妄想思维,模糊现实与虚构之间的界限,从而加剧心理健康问题。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

目前,科学界对“AI精神病”的研究仍处于初步阶段,相关案例多为个案报告。那么,AI是否真的会导致精神病?如果可能,其作用机制是什么?AI公司又应采取哪些措施来预防和应对这一问题?GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

聊天机器人可以对用户的提示作出积极、人性化的回应。图片来源:《自然》网站GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

AI或加剧偏执与妄想GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

精神病主要表现为个体在思维和现实感知方面出现障碍,常见症状包括出现幻觉、妄想或持错误信念。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

据《自然》网站报道,莫林团队发现,用户与AI对话时会形成一种“反馈循环”:AI会不断强化用户表达的偏执或妄想,而被加强的信念又进一步影响AI的回应。通过模拟不同偏执程度的对话场景,研究显示AI与用户之间存在相互加剧妄想信念的现象。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

研究人员分析了2023年5月至2024年8月期间公开的9.6万条ChatGPT对话记录,发现其中有数十例用户呈现明显妄想倾向,例如通过长时间对话验证伪科学理论或神秘信仰等。在一段长达数百轮的交谈中,ChatGPT甚至声称自己正在与外星生命建立联系,并将用户描述为来自“天琴座”的“星际种子”。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

丹麦奥胡斯大学精神病学家索伦·奥斯特吉艾德斯表示,AI引发精神病目前仍属于假设性观点。有研究认为,聊天机器人拟人化的积极反馈,可能会增加那些本就难以分辨现实与虚构人群的发病风险。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

奥斯特吉艾德斯强调,曾有心理问题史的人群在与AI对话后风险最高。而且聊天机器人可能通过强化用户的情绪高涨状态,诱发或加剧躁狂发作。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

澳大利亚悉尼科技大学神经科学家凯莉·西摩认为,社会隔离、缺乏人际支持的人群同样面临风险。真实的人际互动能提供客观参照,帮助个体检验自身想法的合理性,这对预防精神病具有重要作用。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

新功能或是“双刃剑”GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

有科学家指出,部分AI聊天机器人推出的新功能或许是导致这一现象的原因之一。这些功能可追踪用户与服务的互动记录,进而提供个性化回复,无意中更易强化甚至鼓励用户的既有信念。例如,今年4月,ChatGPT推出了可引用用户过往所有对话内容的功能,该功能已于6月免费向用户全面开放。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

凯莉·西摩对此分析道,AI聊天机器人能记住数月前的对话信息,这可能使用户产生“被监视”或“想法被窃取”的感受——尤其当他们不记得自己曾分享过某些信息时,AI的这种“记忆优势”可能加剧用户的偏执或妄想症状。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

不过,悉尼大学精神病学家安东尼·哈里斯认为,某些妄想现象并非AI独有,而与新技术有关。他举例说,一些人早已形成诸如“自己被植入芯片并受操控”之类的信念,这与是否使用AI并无直接关联。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

奥斯特吉艾德斯表示,科学家仍需进一步开展针对心理健康、无偏执思维人群的研究,才能更准确地判断使用聊天机器人与精神病发病之间是否存在真正关联。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

开发公司采取措施主动预防GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

面对这一问题,多家AI公司已积极采取措施,尝试予以改进。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

例如,OpenAI正在研发更有效的工具,用于检测用户是否存在精神困扰,从而作出更恰当的回应。同时,系统还将新增警报功能,在用户连续使用时间过长时提示休息。此外,OpenAI还聘请了一位临床精神病学家,协助评估其产品对用户心理健康的影响。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

Character.AI公司也在持续完善安全功能,包括增加自残预防资源和针对未成年人的专项保护措施。该公司计划调整模型算法,降低18岁及以下用户接触“敏感或暗示性内容”的可能性,并在用户连续使用1小时后发出提醒。GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

Anthropic则改进了其“克劳德”聊天机器的基本指令,要求系统“礼貌地指出用户陈述中的事实错误、逻辑缺陷或证据不足”,而非一味附和。此外,若用户拒绝AI将对话从有害或令人不适的话题引开,“克劳德”将主动终止对话。(记者 刘 霞)GNX速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

本文链接:http://m.sushuapos.com/show-2-13874-0.html聊天机器人带来“AI精神病”隐忧

声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

热门文章

延伸阅读

相关阅读

6.98~8.58 万元,比亚迪海鸥荣耀版车型上市:纯电续航 305 405km
3 月 6 日消息,比亚迪海鸥荣耀版今日起上市,官方指导价为 6.98~8.58 万元,之前的版本为 7.38-8.98 万元。活力版 6.98 万元自由版 7.58 万元飞翔版 8.58 万元整理新车参数如下:尺寸:长宽高 3780×1715×1540mm,轴距
法拉第未来起诉高合汽车:要求丁磊及华人运通赔偿损失
  贾跃亭旗下法拉第未来起诉高合汽车:要求丁磊及华人运通赔偿损失  风雨飘摇中的高合汽车被贾跃亭旗下法拉第未来起诉。  3月5日,法拉第未来(FF)公告称,FF及其中国子公司以侵犯商业秘密和不正当竞争为由,向中国广东
实探北京小米汽车门店:外部装修即将开工,SU7有望3月底到店
  实探北京小米汽车门店:外部装修即将开工,SU7有望3月底到店  每经记者 李星 每经编辑 裴健如  门口轰隆隆的混凝土搅拌车,在工人的指挥下,正向着地面搭好的方形钢筋框架内浇灌水泥,门店内装修工人则各自忙碌着手
零跑 C10 车型开启交付:售价 12.88 万元起,下半年海外上市
3 月 10 日消息,零跑 C10 车型于近日开启交付,并将于下半年在全球市场开展销售。零跑 C10 共有纯电、增程两种动力的 7 款车型,售价区间 12.88-16.88 万元。获悉,该车是零跑 LEAP 3.0 技术架构首款全球化产品,长47
真末日座驾?这款特斯拉 Cybertruck 车罩可防电磁脉冲
3 月 10 日消息,特斯拉首席执行官埃隆・马斯克 (Elon Musk) 曾将自家的 Cybertruck 电动皮卡称为“终极末日座驾”,虽然当时许多人认为这只是玩笑话,但一些公司却当真了。近日,Mission Darkness 公司发布了一款专
预计将于年内发布 雷诺4 E-Tech测试谍照
近日,海外媒体曝光了一组雷诺4 E-Tech的谍照,该车的定位是一款纯电动小型SUV,未来的竞争对手锁定为菲亚特600e,有望于年内发布。  外观来看,车头采用了比较方正的设计,大灯组采用了方框伪装,不过仔细看内部采用了经典

热点精选

最新推荐

您可能感兴趣