微新创想(idea2003.com) 8月21日讯 生成式人工智能领域正经历前所未有的变革浪潮,不仅与OpenAI、Meta和Google等巨头在基础模型层面展开激烈竞争,更在顶尖人才纷纷离职创业的浪潮中涌现出新的创新力量。上周四,两位重量级前谷歌研究员David Ha与Llion Jones正式宣布成立新的人工智能公司——Sakana AI,总部设在日本东京。Llion Jones作为”Transformer”人工智能架构的共同发明者,其学术成就影响深远;David Ha则曾担任Stability AI的研究主管,在业界享有盛誉。Jones还是谷歌2017年发表在Nature子刊《Nature Communications》上的开创性论文《Attention Is All You Need》的第五作者。这篇论文提出的基于Transformer的深度学习架构,不仅奠定了ChatGPT等聊天机器人的技术基础,更为当前生成式人工智能产品的蓬勃发展提供了核心支撑。
在《Attention Is All You Need》论文发表后,生成式人工智能基础模型的发展主要聚焦于构建规模越大的Transformer模型,但Sakana AI将另辟蹊径,专注于开发新型基础模型架构。David Ha在接受彭博社采访时表示:”我们的方法可能不是构建一个吞噬所有数据的巨型模型,而是采用大量更小规模、各具特色的模型,每个模型都拥有独特的优势并依托较小的数据集,通过相互协作共同解决问题。”尽管这只是一个初步构想,但Ha进一步阐释道:”就像蚂蚁群动态构建桥梁一样,虽然可能不是最坚固的结构,但能迅速响应环境变化。这种自组织适应能力,正是自然算法中极具力量的概念之一。”
两位创始人向金融时报透露,Sakana AI的命名灵感源自日语中的”さかな”(鱼),寓意”成群鱼通过简单规则形成有机整体”。值得注意的是,《Attention Is All You Need》论文的所有作者现已集体离开谷歌,他们创办的新企业已获得数百万美元的风险投资。投资方阵容星光熠熠,包括运营AI聊天机器人初创企业Character.AI的风投Noam Shazeer,以及创立大型语言模型初创企业Cohere的Aidan Gomez。这些资本注入无疑将加速Sakana AI在生成式人工智能领域的创新突破,为这一竞争激烈的赛道注入新的活力。