Lanzamientos de modelos

Baidu lanza Unlimited OCR: modelo MoE de 3B parámetros con caché KV constante para analizar documentos largos con eficiencia

Título original:Baidu Releases Unlimited OCR, a 3B Model That Keeps the KV Cache Flat for Long-Document Parsing

Resumen de IA

Baidu presenta Unlimited OCR, un modelo MoE de 3B parámetros que en inferencia solo activa 500M parámetros. Su innovación central, Reference Sliding Window Attention (R-SWA), fija el tamaño de la caché KV en Lm + n (n por defecto 128), de modo que la memoria y la latencia no crecen con la longitud de salida. El modelo se entrenó 4000 pasos más a partir de DeepSeek OCR, admite una longitud máxima de 32K y logra una compresión de tokens de 16 veces mediante DeepEncoder. En OmniDocBench v1.5 obtiene una puntuación global de 93,23, 6,22 puntos por encima de la línea base de DeepSeek OCR; en v1.6 alcanza 93,92, la más alta. En modo Base logra 5580 TPS, un 12,7 % más que DeepSeek OCR, y con salidas de 6000 tokens la latencia es un 35 % menor. Es adecuado para transcribir libros completos, y el código y los pesos están disponibles en código abierto en HuggingFace.

Puntos clave

  • Baidu presenta Unlimited OCR,un modelo MoE de 3B parámetros que en inferencia solo activa 500M…
  • Su innovación central,Reference Sliding Window Attention (R-SWA),fija el tamaño de la caché KV en…
  • El modelo se entrenó 4000 pasos más a partir de DeepSeek OCR,admite una longitud máxima de 32K y…
  • En OmniDocBench v1.
  • 5 obtiene una puntuación global de 93,23,6,22 puntos por encima de la línea base de DeepSeek OCR

Resumen rápido

Publicado
Actualizado
Fuente
MarkTechPost(RSS)
Categoría
Lanzamientos de modelos
Puntuación IA
73
Leer el original Leer el artículo completo en la fuente original
Por qué importa

Baidu这个OCR模型用R-SWA把KV缓存压成常量,长文档解析终于不用越跑越慢了。MIT开源,3B总参但推理只消500M,做文档管线的可以直接接。

Entidades relacionadas

Fuente y derechos

Este artículo se basa en títulos seleccionados y resúmenes de IA de la API pública de AIHOT, con atribución y enlaces de vuelta. Los derechos del original pertenecen a los medios y autores originales; este sitio no reproduce textos completos.

Artículo original · Ficha de AIHOT

Cómo citar

Al citar este artículo, conserva el título, la fecha y el enlace permanente, e indica que la fuente es Orange News.

Orange News: Baidu lanza Unlimited OCR: modelo MoE de 3B parámetros con caché KV constante para analizar documentos largos con eficiencia. 25. junio 2026. https://new.nat6.net/es/news/cmqt3kfx30024sl0ev7aty5q7/

Ver todo →