今年2月,美国佛罗里达州男孩塞维尔·塞策三世(Sewell Setzer III)在家中自杀身亡。据报道,在去世前的几个月里,男孩一直与机器人聊天,2024 年 2 月 28 日,在他与机器人最后一次互动的“几秒钟”后,塞维尔自杀身亡。
Character.AI由两名前谷歌人工智能研究员创立,是当前主打“AI”陪伴的明星独角兽初创公司。事发后,Character.AI称,将添加针对年轻用户的安全功能,包括当用户在应用上花费一个小时后会警告他们。
法律界人士向澎湃科技表示,从当前证据来看,还很难得出该案当事人是因为AI致死的结论。生成式人工智能是新生事物,对于如果保护有心理健康存在问题的用户,全球的服务商目前都在探索过程中。但此类案件的发生可能会推动智能体服务商,改进算法,主动监测可能存在心理问题的用户对话。(澎湃新闻记者 喻琰 实习生 王春)