Otros

Nuevo artículo: los modelos de difusión iREPA son un renderizador de sus representaciones subyacentes. Con esta nueva...

Título original:new paper: iREPA diffusion models are a renderer of their underlying representations. with this new...

Resumen de IA

Nuevo artículo: los modelos de difusión iREPA son un renderizador de sus representaciones subyacentes. Con esta nueva configuración, podemos comprender más claramente el verdadero significado de estas representaciones. Jas inició una exploración espontánea y en los últimos tres meses hemos aprendido mucho. PD: este es también nuestro pequeño experimento sobre un nuevo tipo de "efecto de la fuente de agua" en línea, y me encanta ver este fenómeno. Debatamos, discutamos y luego convirtámoslo en ciencia seria con verdadero esfuerzo [Cita a @1jaskiratsingh]: ‼️ ¡Las representaciones son importantes para la generación! Pero resulta que nuestra comprensión de cómo las representaciones ayudan a la generación siempre ha sido errónea ‼️ Nuestras ideas anteriores: (estábamos equivocados) ❌ Codificadores visuales más grandes → mejores representaciones → mejor generación ❌ Mejor semántica global → mejores representaciones → mejor generación Resulta que: 🤯 En cuanto a la alineación de representaciones, codificadores visuales más de 20 veces más pequeños pueden lograr un rendimiento similar o mejor que modelos más grandes 🤯 Codificadores visuales con una precisión de sondeo lineal de aproximadamente 20 % (métrica de la semántica global) pueden superar a codificadores con precisión >80 % 🤯 Incluso características clásicas como SiFT y HoG pueden aportar mejoras comparables a las de codificadores visuales modernos mucho más grandes ‼️ 🚨 Introducción: ¿Qué importa para la alineación de representaciones? ¿Información global o estructura espacial? 🚨 TL;DR: ✅ Mejor información semántica global ≠ mejor generación ✅ La estructura espacial (y no la semántica global) impulsa el rendimiento generativo de las representaciones ✅ Proponemos iREPA: solo requiere 3 líneas de código, enfatiza la transferencia de estructura espacial y mejora continuamente la velocidad de convergencia en métodos como REPA, REPA-E, Meanflow y JiT. Un emocionante proyecto en @AdobeResearch, en colaboración con @xingjian_leng, @zongze_wu, @LiangZheng_06, @rzhang88, @elishechtman y @sainingxie 🙏 Para mí también fue una experiencia especialmente interesante y única, en cada paso del proyecto demostramos que nuestros prejuicios estaban equivocados 😆 También un gran agradecimiento a @YouJiacheng, @ShumingHu y @gallabytes, cuyos comentarios en X iniciaron la exploración en esta dirección 🫡 Artículo: https://arxiv.org/abs/2512.10794 Código: https://github.com/End2End-Diffusion/iREPA Página del proyecto: https://end2end-diffusion.github.io/irepa Más detalles en el hilo: [1/n] 🧵

Puntos clave

  • Nuevo artículo: los modelos de difusión iREPA son un renderizador de sus representaciones…
  • Con esta nueva configuración,podemos comprender más claramente el verdadero significado de estas…
  • Jas inició una exploración espontánea y en los últimos tres meses hemos aprendido mucho.
  • PD: este es también nuestro pequeño experimento sobre un nuevo tipo de "efecto de la fuente de…
  • Debatamos,discutamos y luego convirtámoslo en ciencia seria con verdadero esfuerzo [Cita a…

Resumen rápido

Publicado
Actualizado
Fuente
X:谢赛宁 (@sainingxie)
Categoría
Otros
Leer el original Leer el artículo completo en la fuente original
Por qué importa

颠覆认知:小20倍视觉编码器也能驱动高质量生成,空间结构才是关键

Fuente y derechos

Este artículo se basa en títulos seleccionados y resúmenes de IA de la API pública de AIHOT, con atribución y enlaces de vuelta. Los derechos del original pertenecen a los medios y autores originales; este sitio no reproduce textos completos.

Artículo original · Ficha de AIHOT

Cómo citar

Al citar este artículo, conserva el título, la fecha y el enlace permanente, e indica que la fuente es Orange News.

Orange News: Nuevo artículo: los modelos de difusión iREPA son un renderizador de sus representaciones subyacentes. Con esta nueva.... 16. diciembre 2025. https://new.nat6.net/es/news/cmnz6dpf402amsl0fxz3kh21f/

Ver todo →