Ideogram представил 4.5 Edit: генерация и редактирование в одной модели.
Ideogram представил версию 4.5 Edit. Теперь генерация и редактирование изображений объединены в одной модели.
Главные изменения
- Multi-turn editing: изображение можно править несколько раз подряд. Разработчики обещают значительно меньший image drift и меньше случайных изменений цветов, текстур, геометрии и деталей. По заявлению Ideogram, модель превосходит GPT Image 2.5.
- Precise Edit: отдельный режим точного редактирования. Его ключевая особенность в том, что неизменённые пиксели восстанавливаются из исходной картинки, а не генерируются заново.
- На вход можно подать до 5 изображений: одно основное изображение, которое редактируется, плюс до 4 дополнительных референсов.
- Если используется маска, лимит уменьшается до 3 дополнительных референсов плюс исходное изображение и сама маска.
- Маска необязательна. Без неё модель сама определяет по текстовой инструкции, что нужно изменить. С маской можно жёстко ограничить область редактирования.
- Есть два уровня точности: Regular Edit использует обычный генеративный edit, а High / Precise Edit включает механизм сохранения неизменённых областей исходника.
- Reference images можно использовать одновременно с исходной картинкой. Модель получает отдельное изображение для редактирования и отдельные изображения, задающие нужный визуальный материал.
- Zoom Editing: можно вырезать небольшой участок изображения высокого разрешения, отредактировать только его и бесшовно вставить обратно. Ideogram демонстрирует работу с исходником 4016 x 6016, то есть 24,2 Мп.
Улучшения
Улучшены редактирование и перевод текста, relighting, изменение цветов, restoration, style transfer, sketch-to-image, reframing и depth-to-image.
Главное техническое изменение заключается в борьбе с накоплением ошибок. При каждой следующей правке модель должна меньше затрагивать то, что менять не просили.
API уже работает, Ideogram 4.5 доступен также через агрегаторы.
Рабочий процесс выглядит так: исходная картинка плюс до 4 референсов, промпт и опциональная маска, затем Regular Edit или Precise Edit, после чего следующий edit поверх результата. На наш взгляд, наиболее интересным здесь выглядит Precise Edit.
Веса скоро будут опубликованы. В API сейчас очень низкая стоимость.
Подробнее о модели: ideogram.ai/models/4.5/
Ещё новости:
