... 2024-02-26 09:20 .. 人脸识别、机器学习、自动驾驶等产业化的场景日行千里。
但很快,AI技术再次来到瓶颈期,准确率似乎进入了一个死胡同,行业对其失望,很多公司相继倒闭。
饶是2019-2022年AI最难的三年里,李彦宏依旧是其忠诚的信徒。
白花花的银子烧进了自动驾驶,百度云也对标微软Azure,围绕着AI打造智能云。
但三年的冷板凳也没有白做。
作为最早一批发现并跟进Transformer技术路线的公司,由王海峰领队吴甜、吴华组成了百度NLP队伍。
围绕着NLP,王海峰一股脑创立了语音识别部门、图像识别部门和知识图谱部门。
2021年,由吴甜带队的知识图谱部门发布了知识增强大模型—ERNIE(文心)3.0,正是文心一言的前身。
后来的故事我们都知道了,当然,从客观的角度来说,目前的百度已经掉出了世界范围内的第一梯队,在国内也并没有绝对的领先优势和差距,但正是由于李彦宏和百度的坚持,保留着中国AI .. UfqiNews ↓
4
...这在历史上前所未有.
GPT-4实现了完整的工程研发体系.
GPT-4之后,如ChatGPT、plugin(插件)等将全面建立产业生态.
从OpenAI的发展中我们可以看到:一个团队如果是在运用新的范式下的核心思考和实现体系,他们创新的能力将有多大?因此,在这个时代,深度解读OpenAI的成长历史,了解他们的思考实践体系,对我们来说是有很大的意义的.
新范式的动力引擎GPT模型体系,驱动新范式的动力引擎在这个范式的背后,有组核心技术,一个动力引擎在驱动着这个范式的进展,它在本质上就是GPT模型体系.
GPT是个模型系统,这个大模型像一个黑洞一样,把所有的模型都吸进这个引擎里面去了.
第一,它能够高效压缩表达所有的人类关于世界的知识,尤其是文字或者其他模态,比如图片、视频.
第二,它能持续提高泛化能力(涌现,子概念空间等).
它能涌现.
涌现是什么?在相同的模型架构下,通过增加.. 05-13 11:50 ↓ 18
...因此将融合TreeSearch和Transformer架构.
想通过这种方式,让模型获得稳定的多步推理和规划能力,能根据任务复杂度Scale计算复杂度,能控制和调度多个模块进行端到端任务的执行,“从而打造ToC端到端的超级个人助手”.
其创始人王冠,是GitHub揽星5.1k开源项目OpenChat的独立开发者,他独立完成了OpenChat全部版本的模型开发和训练框架搭建.
他是个多次拒绝马斯克的男人——此前,王冠多次拒绝了xAI等一线机构创始人的加入邀请.
这就不得不提一个有趣的事:路演现场另一个模型架构挑战团队RWKV,其创始人彭博,则在去年拒绝过OpenAI的入职邀请.
RWKV是其带领团队完全自主研发的新一代大模型架构,结合了RNN和Transformer的优点.
具身智能和AI应用是最大看点当然,路演现场的项目,必然有今年大热门——AI应用和具身智能.
AI应用.. 06-07 10:40 ↓ 7 ..UfqiNews
本页Url
🤖 智能推荐