This is an info Alert.
⌘K
  • Home
  • News
  • Blog
  • Releases
  • LLM history
  • Compare LLMs
  • Library
  • About
Sign in
Meta

6 декабря 2024

Llama 3.3 70B 70B Instruct

Context: 128KInput: — / 1MOutput: — / 1M

What's new
  • 70B параметров, открытые веса; выпущена только instruct-версия
  • Качество близко к Llama 3.1 405B при кратно меньшем размере
  • Только текст, мультиязычность (8 языков), контекст 128K токенов
  • Построена на базе Llama 3.1 70B, оптимизированный трансформер (SFT + RLHF)
  • Лицензия Llama 3.3 Community License; веса на Hugging Face
Verdict

Компактная 70B, вплотную подошедшая к флагманской 405B по качеству, — лучший баланс цена/качество в линейке Llama 3.

Meta AI

A blog and notes on development. The easiest way to reach me is via the social links below.

Documents
Terms of UsePrivacy Policy
Contacts
talalaev.misha@gmail.com

© All rights reserved.