您的位置:首页 > IT > 正文

Meta 正在构建新开源大模型,性能超越 Llama 2、比肩 GPT-4

来源:OSCHINA     时间:2023-09-12 10:35:47


(相关资料图)

多元共进|2023 Google 开发者大会 精彩演讲回顾

根据Siliconangle的报道,Meta 正在寻求在生成式 AI 领域与 OpenAI 展开竞争,将发布新的开源大模型,其性能或将与GPT-4 不相上下。

报道称,这款新模型比 Llama 2 强大数倍,将提供文本、图像生成以及分析等功能。目前该模型正处于开发之中,最终功能尚不确定。

Meta 最终目标是加速开发下一代生成式人工智能模型,使其能够生成更多类似人类的表达。

长期以来,Meta 一直在采用开源方法公开其大模型产品,是业内众所周知的最大贡献者之一。仅今年它就向人工智能社区发布了大量人工智能模型和训练数据集。其中包括针对编程任务优化的 Code Llama 大语言模型; 可实现数百种语言通用按需翻译的 SeamlessM4T 模型; 用于创作音乐和声音的生成式人工智能模型 AudioCraft;语音生成人工智能模型 Voicebox。它还推出了 I-JEPA(一种可以像人类一样学习的计算机视觉模型)和 FACET(一种基准数据集,旨在帮助研究人员审核计算机视觉模型的偏差)。

但其模型性能一直在 ChatGPT等产品之下,Meta 的新人工智能大模型能否赶上 OpenAI还有待观察。因为它们的能力取决于训练的数据量。据了解,Meta 的 Llama 2 接受了 700 亿个训练数据参数的训练。 OpenAI 尚未公开透露 GPT-4 基于多少个参数,但其他人估计它可能比 Llama 大 20 倍,基于约 1.5 万亿个参数。

相关文章