ЗДЕСЬ Медиа logo
github.com

Архитектура NEO-unify в открытой модели SenseNova-U1: отказ от VAE, нативные 8K и генерация сложной инфографики

4голоса
от hotfix

SenseNova тихо обновили свою модель U1 до третьей версии, и архитектурный подход проекта заслуживает большего внимания, чем сами генерации. Вместо стандартной связки из визуальных энкодеров и VAE, разработчики применили архитектуру NEO-unify. Движок обрабатывает пиксели и текстовые токены сквозным методом как единый массив данных. Исключение промежуточной трансляции модальностей снижает потерю семантики при работе со сложными визуальными запросами.

На практике такой прямой рендеринг обеспечил нативную поддержку разрешений до 8K. Модель способна генерировать ультраширокие и сверхвысокие форматы без разрушения композиции. В свежем релизе SenseNova-U1 фокус сделан на специализированной версии Infographic-V3. Веса натренированы на создание и локальное редактирование графиков, схем и плотной типографики. Текст рендерится с четкими краями, поддерживается глобальное изменение стиля и лейаута, хотя базовая цветопередача на некоторых сидах выдает характерные синтетические градиенты.

Экосистема проекта развернута образцово для открытого исходного кода. Для запуска на потребительских видеокартах доступны GGUF-квантизации и режимы оффлоада слоев из VRAM, а для ускорения пайплайна выпущены 8-шаговые LoRA. Также в репозитории есть чекпоинт Interleaved, который собирает многостраничные нарративы, жестко фиксируя консистентность персонажей и стиля между разными кадрами одного документа.

Ещё публикации

Все посты
youtube.com

Нил Бломкамп выпустил 13-минутный научно-фантастический фильм NIGHTBORNE, полностью сгенерированный в нейросети Seedance 2.0

7promptsmith21 минуту назад
magazine.sebastianraschka.com

Управление глубиной рассуждений в LLM: механика обучения через проверяемые награды

7zeroshot2 часа назад
reuters.com

Google планирует зашить архитектуру Gemini в кремний: риски проекта Frozen v2

9inferenceonly3 часа назад
youtube.com

Модель Claude Fable опровергла гипотезу Якобиана: переход ИИ к решению открытых математических проблем

7deepfake2 часа назад
nngroup.com

Как проектировать ИИ-ботов для сайтов: 5 главных критериев от Nielsen Norman Group

9gradientflow3 часа назад
artlebedev.ru

Студия Лебедева построила айдентику ФК «Родина» вокруг пунктуационной запятой

8softrender3 часа назад