Добавь сайт в закладки! Инструкция по ссылке.
Ранее для этого использовались независимые модели, которые требовали отдельного обучения
Искусственный интеллект312:12
Компания Яндекс начала работу над первой версией интегрированной нейросетевой модели Alice AI ART 2.0. По словам разработчиков, ключевой особенностью новой модели является её способность одинаково эффективно генерировать изображения и редактировать их по указаниям пользователя.
В Яндексе пояснили, что ранее создание и редактирование изображений развивались как два отдельных технологических направления с собственными моделями, данными, метриками и процессами обучения, и любое улучшение требовало внедрения отдельно для каждой системы. Переход к единой модели позволил объединить оба процесса в одной архитектуре, что дало возможность использовать знания, полученные при обучении генерации, и для редактирования.
Разработчики Alice AI ART 2.0 также подчеркивают, что новшества особенно заметны при работе с редкими визуальными концепциями. Если модель научилась создавать изображения с элементами хохломской росписи или самоваром по текстовому запросу, она сможет правильно использовать эти объекты при редактировании уже существующих изображений.
В архитектуру также был внедрён отдельный модуль, который превращает короткий запрос пользователя в более развернутое описание задачи для модели. Компания подсчитала, что это увеличило точность редактирования изображений примерно на 12% без изменения самой генеративной модели.
Особое внимание разработчики уделили генерации текста внутри изображений. Для обучения модели были подготовлены специализированные наборы данных на русском и английском языках, что позволило значительно улучшить качество работы с надписями. Alice AI ART 2.0 уже применяется в приложениях «Алиса AI» и «Шедеврум».
ErinИсточники:CNewsИзображениеИскусственный интеллект3РоссиянейросетьЯндексАлисаAlice AI12:12
ИсточникПоделись видео: