IT之家 12 月 7 日音书三级成人伦理片,Meta 本年的压轴 AI 大模子来了。Meta 昨日(12 月 6 日)发布 Llama 3.3,共有 700 亿参数,不外性能方面比好意思领有 4050 亿参数的 Llama 3.1。
Meta 强调 Llama 3.3 模子成果更高、资本更低,不错在圭表责任站上启动,裁汰运营资本的同期,提供高质料文本 AI 贬责决策。
91国产Llama 3.3 模子要点优化了多说话撑握,撑握英语、德语、法语、意大利语、葡萄牙语、印地语、西班牙语和泰语 8 种说话。
在架构方面,Llama 3.3 是一款自追忆(auto-regressive)说话模子,使用优化的 transformer 架构,其微调版块使用了监督式微调(SFT)和基于东说念主类响应的强化学习(RLHF),让其与东说念主类对有效性和安全性的偏好保握一致。
Llama 3.3 险阻文长度为 128K,撑握多种器具使用法子,可与外部器具和工作集成,扩张模子的功能。
安全方面,Meta 接纳数据过滤、模子微长入系统级安全严防等要领,以裁汰模子浪费的风险;此外 Meta 饱读吹开荒者在部署 Llama 3.3 时选择必要的安全要领,举例 Llama Guard 3、Prompt Guard 和 Code Shield三级成人伦理片,以确保模子的负包袱使用。