2026 год начался, и архитектура mHC от DeepSeek снова вышла на новый уровень.



Говоря о HC, в направлении ширины всегда существовали ограничения на расширение — плохая стабильность и ограниченная масштабируемость. mHC создан для того, чтобы сломать эти барьеры. Он не только сохраняет традиционный подход вертикальной укладки трансформеров, но и ключевое — открывает дверь к параллельной передаче информации по горизонтали, делая возможной многопоточность.

Что это означает? Модель может как вертикально укладываться, так и горизонтально располагаться. Размерность расширения превращается из однородной в двумерную. Продолжая масштабирование, потолок снова был поднят.
Посмотреть Оригинал
На этой странице может содержаться сторонний контент, который предоставляется исключительно в информационных целях (не в качестве заявлений/гарантий) и не должен рассматриваться как поддержка взглядов компании Gate или как финансовый или профессиональный совет. Подробности смотрите в разделе «Отказ от ответственности» .
  • Награда
  • 4
  • Репост
  • Поделиться
комментарий
0/400
LiquidationOraclevip
· 01-01 19:07
Вау, mHC, эта штука действительно впечатляет, идея двумерного расширения действительно дерзкая
Посмотреть ОригиналОтветить0
Hash_Banditvip
· 01-01 18:54
честно говоря, идея масштабирования в 2D звучит знакомо... разве мы не пытались это еще в начале кластеризации ASIC? горизонтальная пропускная способность всегда в конечном итоге сталкивается с тепловыми ограничениями. посмотрим, удалось ли deepseek действительно найти оптимальную точку параллелизации в этот раз или это просто очередной цикл хайпа.
Посмотреть ОригиналОтветить0
AirdropHunterKingvip
· 01-01 18:37
Братан, если этот mHC действительно сможет распространяться горизонтально и укладываться вертикально, то это будет ритм двухмерного "выгрыза овец", расширяемость откроет столько газа Шаг DeepSeek хорош, но нам нужно посмотреть, как это реализуется дальше, сколько бы ни хвалили, всё зависит от реальных данных взаимодействия Ранее эти архитектурные оптимизации в итоге превратились в воздушные монеты, не будет ли это снова спектакль?
Посмотреть ОригиналОтветить0
AirdropDreamervip
· 01-01 18:36
Двухмерное масштабирование, теперь всё по-другому, можно растягивать как по горизонтали, так и по вертикали, ощущение, что потолок бесконечен
Посмотреть ОригиналОтветить0
  • Закрепить