В честь первого года выпуска DeepSeek-R1 раскрыта новая модель «MODEL1»

robot
Генерация тезисов в процессе

21 января, согласно Quantum Bit, по случаю годовщины выпуска DeepSeek-R1 был раскрыт новый модель «MODEL1». DeepSeek обновил код FlashMLA на GitHub, в 114 файлах упоминается MODEL1 в 28 местах, он появляется как отдельная модель от V32. Известно, что V32 — это DeepSeek-V3.2, а MODEL1, скорее всего, новая архитектура. Конкретные различия в коде проявляются в расположении кеша KV, обработке разреженности и декодировании FP8, а также в нескольких аспектах оптимизации памяти.

Посмотреть Оригинал
На этой странице может содержаться сторонний контент, который предоставляется исключительно в информационных целях (не в качестве заявлений/гарантий) и не должен рассматриваться как поддержка взглядов компании Gate или как финансовый или профессиональный совет. Подробности смотрите в разделе «Отказ от ответственности» .
  • Награда
  • комментарий
  • Репост
  • Поделиться
комментарий
0/400
Нет комментариев
  • Закрепить