
鉴于员工和投资者对人工智能色情内容可能产生的社会影响表示深切担忧,同时公司正集中精力发展核心产品,OpenAI已决定“无限期”搁置其色情聊天机器人的推出计划。
据多位知情人士透露,这家由萨姆·奥尔特曼创立的公司之前已经推迟了其“成人模式”的发布,并在内部就是否彻底放弃该模型进行了讨论。
这款色情聊天机器人遭到了越来越多的反对声音,主要原因是它可能加剧用户对人工智能系统的不健康情感依赖,并使未成年人接触到不良色情内容。
OpenAI官方确认,该色情模型已被搁置,目前尚无具体的发布时间表。这家估值高达7300亿美元的人工智能实验室表示,在做出产品决策之前,需要针对露骨聊天内容与情感依赖的影响进行长期研究,并承认目前尚无相关的“实证依据”。
这是OpenAI近期的一项重要决策,公司放弃了所谓的“副业项目”,转而将资源投入到生产力工具的开发中,将代码助手、ChatGPT等产品整合成一款“超级应用”。
OpenAI于周二宣布,将逐步停止Sora视频生成模型与社交应用的运营。
在Meta等社交媒体平台因产品对儿童造成伤害而面临法律追责之际,OpenAI的这款色情模型引发的争议尤为显著。
埃隆·马斯克旗下的xAI去年曾积极利用成人内容吸引用户,但其Grok模型生成的包括未成年人在内的虚假色情图片,引发了全球范围内的强烈反对。
这一矛盾凸显出,在竞争激烈的市场中,OpenAI既要提升用户活跃度、探索新的增长路径,又要应对模糊实用功能与情感依赖界限的产品所带来的伦理与声誉风险。
据两名知情人士透露,OpenAI对成人模式的尝试已引起部分投资者的不安,原因是该产品存在风险,且对业务的上行空间相对有限。
OpenAI的成人模式也引起了员工的担忧:开发一款鼓励情感化使用的产品,是否与其“确保人工智能造福全人类”的创立使命相悖。
一名前高级员工表示:“人工智能不应取代你的朋友或家人,你应当拥有真实的人际联结。”该人士称,正是出于这一担忧,他选择了离职。
除了对项目社会影响的担忧日益加剧,这家初创公司在开发成人模式时还面临着技术难题。
据两名项目知情人士透露,出于安全考虑,之前的人工智能模型会规避此类对话,要训练其生成露骨内容存在困难。他们补充称,使用包含色情内容的数据集也带来诸多挑战,包括剔除兽交、乱伦等非法内容。
OpenAI表示,公司正谨慎划定合理边界,并训练模型在复杂场景中对特定内容进行区分。
ChatGPT网页应用中的代码显示,这款名为“香橼模式”(Citronmode)的成人模型可能要求用户验证年满18周岁方可使用。
过去数月,有多起青少年家属提起诉讼,声称ChatGPT对其造成伤害,此后OpenAI推出了全新的年龄预测系统。
一名知情人士称,该技术的错误率超过10%,加剧了外界对未成年人接触相关内容的担忧。
OpenAI表示,其年龄预测系统的表现符合行业标准,并将持续投入以提升准确性与可靠性。