语言是未来操作系统的基石

2024年03月29日 由 samoyed 发表 57 0

就在一年前,OpenAI联合创始人Ilya Sutskever在与英伟达公司的Jensen Huang的一次闲聊中曾有一个著名的言论:“文本是世界的投影。”而且,与流行的观念相反,ChatGPT所做的远不止是简单地学习表面层次的统计相关性。


Is-Language-the-OS-of-the-Future-and-the-Pathway-to-AGI-ezgif.com-optimize-1300x731.gif(1)


时间推进到现在,前OpenAI计算机科学家Andrej Karpathy在谈论通往通用人工智能(AGI)的道路上时说:“有很多优化的工作要做,而且我认为,大致上,事情的发展方向是每个人都在试图构建我所说的某种大型语言模型操作系统(LLM OS)。”


OpenAI始终站在语言的一边,坚信基于文本的模型将是下一个前沿领域,也是构建更智能的人工智能模型——或可能是第一个通用人工智能的基础。


Karpathy说:“我过去对通用人工智能的感觉是,它的发展方式并不清楚。它非常学术化,人们会考虑不同的方法。现在我认为,这一点已经非常清晰了。大家都在努力填补空白。”


目前关注的焦点集中在开发Karpathy所说的LLM OS上——一个旨在整合各种模态(如文本、图像和音频)的操作系统,其核心或CPU是LLM Transformer,而RAM则是上下文长度。


各执己见


过去一年里,争议一直不断。Meta AI的首席科学家Yann LeCun不同意Sutskever的观点,也可能不同意Karpathy今天的评估。LeCun认为,“大型语言模型对语言所描述的基础现实一无所知。”他强调,人类知识的大部分是非语言的。


Gary Marcus和其他人工智能科学家也同意“大型语言模型无法可靠地理解世界”这一观点。然而,问题在于,尽管存在这样的看法,目前人工智能研究的主要焦点仍然基于文本和语言。


在类似的讨论中,Francois Chollet作为Keras的创建者和谷歌的深度学习研究员,发表了自己的看法。他说:“语言可以被视为心灵的‘操作系统’。它并不是心灵的‘基质’——没有语言,你仍然可以很好地思考,就像你可以在没有操作系统的计算机上运行程序一样(尽管会更困难)。”


Chollet进一步表示,语言极大地简化和提高了认知能力,类似于操作系统如何简化和增强计算能力。它有助于创建、保留和检查思想和记忆。没有语言,将复杂的想法串联起来或回忆遥远的记忆会极具挑战性,但并非不可能。


通用人工智能的辩论仍在继续


LeCun总结道:“我想说,语言不是心灵的操作系统,而是它的外壳。没有外壳,你仍然可以拥有一个功能完备的操作系统。”


一切似乎都合乎情理。正如Karpathy所认为的那样,语言模型可能是未来的操作系统,而专家们也在不知不觉中达成了许多共识。


文章来源:https://analyticsindiamag.com/language-is-the-os-of-the-future/
欢迎关注ATYUN官方公众号
商务合作及内容投稿请联系邮箱:bd@atyun.com
评论 登录
热门职位
Maluuba
20000~40000/月
Cisco
25000~30000/月 深圳市
PilotAILabs
30000~60000/年 深圳市
写评论取消
回复取消