扎克伯格发布“史上最强大开源模型”——Llama3，Meta AI 挑战 OpenAI！

它来了，它来了！

AI圈再迎重磅消息，Llama 3王者归来！

近日，Meta 在官网官宣开源模型Llama-3系列， Llama 3 8B（80亿参数）和70B（700亿参数）两个版本！Meta 将 Llama 3 称为有史以来最强的开源大模型！除了这两个版本，扎克伯克透露，Llama 3 最大的4050亿参数的模型仍在训练中。

扎克伯格表示，公司的目标是让Meta AI成为“全球人们可以自由使用的最智能的AI助手”。他补充说：“有了Llama 3，我们基本上感觉到我们已经达到了这个目标。”

Llama 3的出现直接对标OpenAI的GPT-4，与“并不Open”的OpenAI截然不同，在AI圈围绕开源或闭源的路线争论不休之时，Meta坚定沿着开源路线朝AGI的圣杯发起了冲锋，为开源模型扳回一局。

归纳起来，Llama 3具有以下关键创新点：

1.全新的训练方法：Llama 3 使用了一种名为“Optimal Transport”的新训练方法，这种方法可以在不损失性能的情况下，减少模型的参数数量和内存占用。这使得 Llama 3 可以在更小的设备上运行，并且可以更快地训练和部署。

2.更长的文本处理能力：Llama 3 采用了一种新的编码器结构，叫做 Transformer-XL，可以处理更长的文本序列，并提高模型的长期记忆能力。这使得 Llama 3 可以在处理长文本时更加准确和高效。

3.更自由的文本生成能力：Llama 3 采用了一种新的解码器结构，叫做 GPT-3，可以生成更流畅和多样化的文本，并支持多种任务和领域。这使得 Llama 3 可以根据用户的需求生成各种类型的文本，并且可以应用于多种不同的场景。

4.更强大的多模态处理能力：Llama 3 不仅可以处理文本，还可以处理图片、视频等多种模态的数据。这使得 Llama 3 可以在处理复杂任务时更加灵活和高效。

5.开源性：Llama 3 是一个开源项目，用户可以自由使用、修改和分享它的代码和模型。这使得 Llama 3 成为一个非常具有活力和潜力的项目，可以为人工智能领域的发展做出更多贡献。