
据接近此事的消息人士向路透社透露,在OpenAI首席执行官Sam Altman被解雇前,公司部分研究人员曾致信董事会,警告发现了一种可能威胁人类安全的强大人工智能。
可能威胁人类安全的强大人工智能
共享信息显示,该信件及人工智能算法在Sam Altman被解雇事件中发挥了关键作用。据报道,导致其被解雇的投诉清单更长,信件仅为因素之一,其中还包括对未充分理解结果便推进商业化进程的担忧。
尽管该信件尚未公开,起草员工也保持沉默,但OpenAI未回应相关提问。
Q*项目
另一方面,OpenAI在发给员工的内部通信中承认存在名为“Q*”的项目,并在周末事件发生前向董事会发送了信件。该通信由长期担任管理职务、并被任命为Sam Altman临时继任者的Mira Murati发出。OpenAI发言人表示,此举旨在提醒员工注意媒体报道,但不评论特定故事。
一位消息人士称,Q*项目可能是OpenAI追求通用人工智能(AGI)过程中的一次突破。OpenAI将通用人工智能定义为“能够在大多数具有经济价值的任务中超越人类的自主系统”。
据内部消息人士透露,得益于庞大计算资源,新模型能解决特定数学问题,目前仅具备小学水平数学能力。然而,其在测试中的成功让研究人员对未来充满希望。不过,Q*项目的能力和范围尚未得到官方证实。
大型语言模型与生成式AI在文本撰写、翻译或内容创作等方面能力广泛,但在需要确切结果的数学问题上则有所不同。提升AI数学能力意味着发展出类人推理能力;随着通用人工智能在学习和认知能力提升,它也将具备概括能力。
人工智能科学家团队
研究人员指出了该AI的能力及潜在危险,但未明确说明安全方面的具体担忧。信中提到了由“Code Gen”和“Math Gen”合并而成的“人工智能科学家”团队,该团队专注于改进现有AI模型的推理能力,并研究如何优化AI以进行科学研究。
值得一提的是,OpenAI成功的基石Ilya Sutskever频繁提及通用人工智能概念。他在Sam Altman被解雇及重返公司过程中发挥关键作用,尤其相信将在10年内出现超越人类的人工智能。
Sutskever在与Jan Leike共同撰写的博客文章中指出,目前尚无控制或防止超级智能AI的方案:
“目前,我们还没有引导或控制潜在超级智能人工智能、并防止其偏离正轨的解决方案。”

