Статьи и исследования

Cartesia опубликовала исследование масштабирования H-Net: байтовые иерархические сети повышают вычислительную эффективность до 3-5x по сравнению с BPE

Оригинальный заголовок:From Tokens to Bytes I: Scaling Hierarchical Networks

ИИ-резюме

Cartesia выпустила первый пост из серии, в котором сообщила результаты масштабирования своей иерархической сети (H-Net) в байтовом языковом моделировании: по сравнению со строго согласованным BPE Transformer 1-stage H-Net экономит 1,28x вычислений по валидационной потере, около 2x в downstream-оценках, медианно 2,04x в задачах кода и до 3,10x медианно на языках программирования вне распределения (например, 5,37x для Prolog).

Ключевые моменты

  • Cartesia выпустила первый пост из серии
  • в котором сообщила результаты масштабирования своей иерархической сети (H-Net) в байтовом языковом…
  • 28x вычислений по валидационной потере,около 2x в downstream-оценках,медианно 2,04x в задачах кода…

Кратко

Опубликовано
Обновлено
Источник
Cartesia 产品与研究
Категория
Статьи и исследования
Оценка ИИ
60
Читать оригинал Читать полную статью в первоисточнике
Почему это важно

Cartesia 原创研究给出 H-Net 替代 BPE 分词的对照实验与 3-5x 计算效率数据,可了解字节级学习的实际进展。

Источник и авторские права

Статья основана на отобранных заголовках и ИИ-резюме из открытого API AIHOT с указанием источника и обратными ссылками. Авторские права на оригинал принадлежат исходным изданиям и авторам; сайт не воспроизводит полные тексты.

Оригинал статьи · Материал на AIHOT

Как цитировать

При цитировании сохраняйте заголовок, дату и постоянную ссылку, указывая источник: Orange News.

Orange News: Cartesia опубликовала исследование масштабирования H-Net: байтовые иерархические сети повышают вычислительную эффективность до 3-5x по сравнению с BPE. 27 октября 2026. https://new.nat6.net/ru/news/ctuk7r4h4qbyyligi680s7gtr/

Смотреть все →