На предстоящей конференции Adobe Max компания Adobe представит свою новейшую разработку: фоторедактор на основе ИИ под названием Project Stardust. Этот продвинутый инструмент способен распознавать и редактировать объекты на фотографиях с невиданным ранее уровнем точности.

Источник изображения: Adobe

В преддверии мероприятия Adobe опубликовала видеоролик, демонстрирующий уникальные возможности нового инструмента, который определяет объекты на изображении, давая возможность с лёгкостью их редактировать. Например, кликнув по чемодану на фотографии, Stardust моментально определит его как отдельный объект, позволяя его переместить или удалить.

Adobe, хоть и не является первопроходцем в области ИИ, однако старается активно развивать этот сегмент. Прошлый год стал важным этапом для компании благодаря запуску ИИ-инструмента Firefly, который позже был успешно интегрирован в Photoshop, обогатив его функциональность.

Те, кто знаком с Photoshop, поймут, насколько эволюционировал процесс выделения объекта — от тщательного контурного обвода до использования инструмента Magic Lasso. С Project Stardust этот процесс становится ещё проще: достаточно кликнуть по объекту. В ролике на YouTube демонстрируется, как при перемещении чемодана автоматически корректируется его тень. Затем, используя функции Firefly, Stardust заменяет чемодан в руке модели на букет жёлтых цветов.

Одним из наиболее впечатляющих нововведений Stardust является возможность убирать отвлекающие элементы. Программа умеет определять объекты на заднем плане, которые могут отвлекать внимание от основного объекта, и удалять их, заменяя сгенерированными ИИ фонами.

В целом, Project Stardust представляет собой новый этап в развитии редактирования фотографий, сочетая в себе уже известные технологии и добавляя новые уровни сложности и точности. И, хотя название Project Stardust может ассоциироваться у поклонников «Звёздных войн» со Звездой Смерти, есть надежда, что новый продукт будет служить исключительно мирным целям.

После почти двух лет бета-тестирования Adobe представила для всех подписчиков веб-сервис Photoshop — упрощённую онлайн-версию своего настольного приложения для редактирования изображений. В веб-сервисе сразу будут доступны популярные инструменты на базе искусственного интеллекта Generative Fill («Генеративная заливка») и Generative Expand («Генеративное расширение»), которые недавно появились в настольной версии Photoshop.

Источник изображений: Adobe

Новые функции, основанные на генеративной модели ИИ Adobe Firefly, доступны для коммерческого использования и позволяют пользователям быстро добавлять, удалять или расширять изображение с помощью текстовых описаний на более чем 100 языках, при этом сохраняя условия освещения и перспективу исходного изображения.

Веб-сервис Photoshop также предоставляет многие из наиболее часто используемых инструментов своего настольного аналога, но с «упрощённым» пользовательским интерфейсом. Инструменты со схожими рабочими процессами сгруппированы на контекстной панели инструментов для помощи новичкам, опытные пользователи могут переключиться на привычный им внешний вид пользовательского интерфейса для ПК.

Adobe собирается активно развивать онлайн-версию Photoshop и обещает в скором времени добавить множество важных функций, таких как «Заплатка», «Перо», «Многоугольное лассо» и поддержку смарт-объектов. Веб-сервис предоставляет подписчикам возможность приглашать других пользователей для совместной работы над проектами и позволяет тем, у кого нет подписки, просматривать и комментировать файлы.

Веб-сервис Photoshop включён во все платные подписки Photoshop, стоимость которых начинается от $9,99 в месяц, и пока у компании нет планов предоставлять его бесплатную версию пользователям.

Adobe тестировала бесплатную веб-версию Photoshop ещё в июне 2022 года, но недавно старший вице-президент Adobe по цифровым медиа Эшли Стилл (Ashley Still) заявила, что у компании «нет непосредственных планов по созданию бесплатного или условно-бесплатного предложения». По её словам, потенциальные пользователи могут протестировать веб-сервис Photoshop с помощью «бесплатных интерактивных демонстраций» и обучающих материалов на сайте Adobe перед оформлением подписки.

Спустя почти полгода после запуска бета-версии ИИ-генератора изображений Firefly компания Adobe объявила о том, что этот инструмент стал доступен всем пользователям через Creative Cloud, Adobe Express и Adobe Experience Cloud. Теперь такими функциями Firefly, как генеративная заливка и расширение изображений в Photoshop, можно пользоваться без установки бета-версии ПО. Кроме того, Adobe запустила Firefly как самостоятельное веб-приложение. А самым важным стало объявление о том, что в будущем Firefly станет платным.

Источник изображения: Adobe

Компания Adobe собирается внедрить так называемые «генеративные кредиты» для оценки того, как часто пользователи взаимодействуют с Firefly. По сути, каждый раз, когда вы нажимаете кнопку «генерировать» для создания изображения в Firefly, вы расходуете один кредит. При этом компания переработала веб-приложение Firefly таким образом, чтобы оно не начинало автоматически генерировать изображения до того, как вы сделаете все необходимые настройки.

Хорошая новость заключается в том, что все пользователи существующих платных тарифных планов Adobe получат доступ к довольно большому количеству этих генеративных кредитов. Вот полный список с количеством кредитов, доступных каждый месяц:

• Creative Cloud All Apps — 1000 кредитов;
• Creative Cloud Single App (включает Illustrator, InDesign, Photoshop, Premiere Pro, AfterEffects,
• Audition, Animate, Dreamweaver, Stock, Photography 1 Тбайт) — 500 кредитов;
• Платная подписка на Adobe Stock — 500 кредитов;
• Adobe Express Premium — 250 кредитов;
• Adobe Firefly Premium — 100 кредитов;
• Creative Cloud for Enterprise All Apps — 1000 кредитов;
• Creative Cloud Pro Plus All Apps — 3000 кредитов;
• Бесплатные пользователи с Adobe ID; Adobe Express, Adobe Firefly, Creative Cloud — 25 кредитов.

Когда эти кредиты закончатся, доступ к Firefly не будет потерян, но он будет работать значительно медленнее. Исключение составляют пользователи, подписанные на Adobe Firefly и Adobe Express Premium, которые смогут выполнить только две генерации в день до тех пор, пока их счетчик не обнулится в конце месяца, хотя для них Adobe предложит дополнительные пакеты подписки. Однако конкретных цен на эти тарифные планы Adobe пока не сообщила.

Кроме того, до 1 ноября на пользователей Adobe, подписанных на Creative Cloud, Adobe Firefly, Adobe Express и Adobe Stock, кредитные лимиты пока не распространяются.

«Все эти модели очень большие. Они работают в облаке и требуют больших затрат. И мы оптимизируем их по качеству вывода, а не по скорости, — сказал ресурсу TechCrunch Александру Костин (Alexandru Costin), вице-президент Adobe по генеративному ИИ и Sensei. — В связи с этим нам необходимо защитить базу пользователей, чтобы убедиться, что они имеют доступ к сервису, и обеспечить его честное использование».

Костин пояснил, что команда рассматривала возможность использования системы, основанной на токенах, но, по отзывам ранних тестировщиков, это было слишком сложно объяснить клиентам.

По данным Adobe, на сегодняшний день пользователи Firefly создали более 2 млрд изображений. Костин подчеркнул, что, поскольку компания обучала модели в основном на изображениях из своей коллекции Adobe Stock, они являются коммерчески безопасными для использования предприятиями. Как недавно объявила компания, она даже застрахует своих корпоративных пользователей от возможных судебных исков при использовании ими изображений, созданных с помощью Firefly.

В мае этого года Adobe интегрировала в бета-версию графического редактора Photoshop ИИ-инструмент, позволяющий пользователям масштабировать изображения, добавлять и удалять объекты с помощью текстовых команд. Теперь же разработчики добавили новые функции за счёт запуска универсального инструмента Generative Expand, который на этой неделе стал доступен участникам программы бета-тестирования Photoshop.

Источник изображения: 9to5mac.com

Новый инструмент может оказаться полезным для выполнения разных действий. С его помощью можно расширить обрабатываемое изображение с текстовой подсказкой или без неё для создания продолжения сцены. Достаточно выделить область рядом с обрабатываемым изображением или вокруг него, а ИИ-инструмент сгенирирует всё остальное. Если не указывать текстовую подсказку, то выделенная область будет заполнена объектами, которые логично вписываются в общую композицию. Если же указать текстовую подсказку, то ИИ дорисует окружение в соответствии с пожеланием пользователя.

Ещё с помощью нового инструмента можно изменить соотношение сторон, например, сделав из горизонтального изображения картинку размером с обложку журнала. Доступна возможность получения точной композиции путём обрезки изображения в одном направлении и расширения в другом направлении, причём всё это осуществляется в рамках одного простого рабочего процесса.

Generative Expand может многократно расширить обрабатываемое изображение, заполнить свободное пространство при повороте картинки и др. Новый ИИ-инструмент имеет массу других возможностей, которые помогут авторам контента при выполнении разных задач. Инструмент Generative Expand и функция генеративной заливки Adobe получили поддержку более 100 языков. На данном этапе они доступны в бета-версии Photoshop. Когда нововведения появятся в стабильной версии графического редактора, пока неизвестно.

Бета-версия графического редактора Adobe Photoshop получила новый ИИ-инструмент, который позволяет пользователям масштабировать изображения, добавлять или удалять объекты с помощью текстовых подсказок. Функция называется Generative Fill и построена на базе набора генеративных ИИ-моделей Firefly для работы с изображениями.

Источник изображений: Adobe

Функция похожа на существующий в Photoshop инструмент Content-Aware Fill, но предоставляет пользователю больше возможностей для творчества. Новинка не станет большим сюрпризом для создателей контента, знакомых с инструментами генерации изображений с помощью искусственного интеллекта Firefly, но интеграция этой технологии Photoshop позволит компании привлечь к продукту более широкую аудиторию.

Помимо функциональности, важным элементом Firefly является источник данных для обучения. Adobe утверждает, что модель обучена только на том контенте, который компания имеет право использовать — будь то изображения из Adobe Stock, контент с открытой лицензией и контент без каких-либо ограничений авторских прав. Теоретически это означает, что всё, что создано с помощью функции Generative Fill, должно быть безопасным для коммерческого использования по сравнению с моделями ИИ, которые менее прозрачны в отношении своих учебных данных. Generative Fill также поддерживает Content Credentials, систему, которая прикрепляет сведения об авторстве к изображениям перед их размещением в интернете, информируя о том, был ли контент создан или отредактирован с помощью ИИ.

Generative Fill пока недоступна в полной версии Photoshop, однако её можно опробовать уже сегодня, загрузив бета-версию приложения для настольных компьютеров или в качестве модуля в бета-версии Firefly. Adobe говорит, что полноценный релиз состоится во второй половине 2023 года.

Исследователи из Института Макса Планка представили ИИ-модель DragGAN, которая позволяет манипулировать изображениями практически в режиме реального времени. Инструмент похож на функцию «Искривление» в Photoshop, но гораздо мощнее, так как пользователь не просто перемещает пиксели, а использует искусственный интеллект для повторного создания базового объекта. Более того он позволяет вращать изображения, как если бы они были в 3D-формате.

Источник изображения: arxiv.org / Drag Your GAN

DragGAN может не только изменять размеры объекта на изображении или превращать улыбку в хмурое выражение лица простым щелчком мыши, но и поворачивать его таким образом, как если бы это была 3D-модель. Например, можно изменить направление лица человека. Приведённые ниже видео взяты с сайта исследовательской группы. Полный текст исследовательской работы можно прочитать на сайте arXiv.

Как отмечает команда разработчиков, то, что действительно интересно в этой работе, это не манипуляция изображениями как таковая, а пользовательский интерфейс. Мы уже давно можем использовать инструменты ИИ, такие как GANs, для создания реалистичных изображений, но большинству методов не хватает гибкости и точности. Вы можете сказать генератору изображений ИИ: «Сделай изображение льва, наблюдающего за саванной», и получите его, но может оказаться, что лев сидит не совсем в той позе, которая вам нужна.

DragGAN предлагает решение этой проблемы. Интерфейс точно такой же, как и в традиционных редакторах изображений, но вместо того, чтобы просто размазывать существующие пиксели, модель создаёт объект заново. Исследователи пишут: «Наш подход не только может создавать окклюзию объектов, но и может деформировать их в соответствии с жёсткостью, например, при сгибании ноги лошади».

Пока это только демонстрация, которая не даёт оценить технологию полностью, но это ещё один пример того, как сделать манипуляции с изображениями с помощью ИИ более доступными.

Adobe присоединилась к гонке ИИ, представив «набор генеративных ИИ-моделей» Firefly для работы с изображениями. Представленные Adobe инструменты ориентированы, конечно же, на людей творческих профессий, а их отличительной особенностью является то, что они не нарушают авторские права — модели обучены на изображениях, авторы которых дали разрешение на такое их использование.

Источник изображений: Adobe

Первый представленный ИИ-инструмент является аналогом популярных нейросетей DALL-E или Midjourney — он так же позволяет создавать изображения по текстовому описанию. Второй инструмент позволяет творчески декорировать надписи и напоминает продвинутую версию WordArt.

Adobe пытается сделать свои ИИ-инструменты более простыми в использовании. Например, вместо ввода подробного описания для стилизации изображения, Adobe предлагает встроенные варианты художественных стилей, освещения и соотношения сторон. Пользователи также смогут применять эти эффекты к уже созданному изображению, а не генерировать новое каждый раз. Инструмент для создания текстовых эффектов работает аналогичным образом, со встроенными опциями для размера эффекта и цвета фона.

В будущем Adobe запустит ещё больше ИИ-инструментов, в том числе для редактирования изображений. Например, ИИ сможет перерисовывать части изображения или менять его стилистику, заменять цвета, менять отдельные объекты или их окружение, а также выполнять другие изменения по текстовым описаниям. Также обещан генератор изображений по 3D-моделям, преобразователь набросков в изображения и многое другое.

Но самой важной частью Firefly является то, что Adobe обучала свои модели на открытых или на лицензированных изображениях, в том числе из библиотеки Adobe Stock, заведомо не нарушая авторских прав художников. В дальнейшем компания собирается платить поставщикам данных, а также позволить владельцам изображений запрещать обучение ИИ по своим материалам.

Как отметили в Adobe, такой подход позволяет «генерировать высококачественный контент, а не случайные [сочетания из] интеллектуальной собственности брендов и других людей, потому что наша модель никогда не видела контента этого бренда или торговую марку». Также в компании добавили: «Мы не боимся перемен, и мы принимаем эти перемены».

Также Adobe планирует разрешить художникам тренировать Firefly на собственных изображениях, что по задумке позволит генерировать работы в совершенно уникальном, персональном стиле.

Пока что Firefly находится в стадии бета-тестирования и доступен исключительно на сайте Adobe. Доступ к инструментам пока ограничен — нужно получить приглашение. Записаться в очередь на приглашения может любой желающий. Позднее компания интегрирует Firefly в свои творческие приложения, включая Photoshop, Illustrator и Premiere Pro, снабдив простым визуальным интерфейсом.

В Photoshop появится ИИ-генерируемая заливка, Illustrator сможет генерировать векторные вариации нарисованных от руки эскизов, а Premiere Pro позволит изменять цвет или стиль изображения, используя подсказки. Adobe не называет сроков выпуска этих функций, но это одни из функций, над которыми компания работает.

Сообщения о предстоящем удалении каталога цветов Pantone из программных продуктов Adobe из-за изменения схемы его лицензирования появлялись достаточно давно. Изначально он должен был исчезнуть из Photoshop, Illustrator и InDesign в марте этого года, позднее дата удаления перенеслась на август, но реальные изменения наступили только сейчас. Теперь пользователям графических редакторов Adobe придётся отдельно оплачивать лицензию на цвета Pantone, или же в PSD-файлах они попросту превратятся в чёрный.

Источник изображения: Pantone

Согласно имеющимся данным, Pantone и Adobe начали сотрудничать в 1990-е годы. Однако библиотеки цветов Pantone в приложениях Adobe не обновлялись с 2010 года. Вероятно, это означает, что библиотеки цветов Pantone в ПО Adobe устарели и в них отсутствуют сотни новых оттенков. Предполагается, что сейчас компании решили избавиться от устаревших библиотек, чтобы совместно проработать вопросы дальнейшего сотрудничества. В результате со вчерашнего дня из актуальных версий Adobe Creative Cloud цвета Pantone попросту пропали. Для продолжения их использования пользователям предлагается установить специальный плагин Adobe, который открывает доступ к обновлённым цветовым библиотекам, но стоит он $15 в месяц.

При этом Pantone на своём форуме продолжает утверждать следующее: «Это обновление окажет незначительное влияние на рабочий процесс дизайнеров. Существующие файлы и документы Creative Cloud, содержащие ссылки на Pantone Color, сохранят идентичность цветов и информацию о них». В это же время в Photoshop при открытии файлов, содержащих цвета Pantone, стало появляться сообщение: «Этот файл содержит цвета Pantone, которые были удалены и заменены чёрным цветом из-за изменений в схеме лицензирования Pantone c Adobe». Цвета при этом действительно автоматически заменяются на чёрный, это касается как новых файлов, так и старых проектов.

Официальные представители компаний пока никак не комментируют данный вопрос.

Компания Adobe рассказала о новых возможностях, которые получила очередная версия графического редактора Photoshop: речь идёт о вариантах для ПК, iPad, а также веб-варианте программы. Разработчик усовершенствовал работу инструмента выделения объектов, нейрофильтров, а также расширил возможности веб-версии и приложения для iPad.

Источник изображения: blog.adobe.com

Значительно усовершенствованный в 2020 году инструмент «Выделение объектов», подсвечивающий их при наведении указателя мыши, научился распознавать сложные объекты: небо, здания, воду, растения, горы, тротуары и улицы. Совместно с сочетанием клавиш Shift + Delete функция позволяет не только быстро выделять, но и удалять и производить заливку объектов.

В 2020 году также появилась функция нейрофильтров (Neural Filters), позволяющая быстро производить существенные изменения в изображении, в том числе разглаживать кожу, изменять выражения лица, а также переносить стили известных художников. В новой версии Photoshop компания добавила новый фильтр, отвечающий за восстановление старых снимков. Он работает на основе алгоритмов машинного обучения, самостоятельно распознавая и ликвидируя царапины с другими мелкими дефектами.

Версия для iPad пополнилась очередным комплектом инструментов, доступных в варианте для ПК. В частности, одним касанием теперь можно удалять фон изображения или производить заливку с учётом содержимого. Улучшена работа функции выбора объекта на портретных снимках, добавлены средства коррекции тона, контраста и цвета в одно касание. Наконец, Adobe продолжила дорабатывать веб-версию Photoshop, запущенную в режиме ограниченного тестирования в прошлом году, — здесь тоже появились функции выделения и заливки объектов, а также удаления фона.

Компания Adobe приступила к тестированию бесплатной веб-версии Photoshop. Изначально эта версия графического редактора стала доступна в Канаде, но постепенно возможность взаимодействовать с ней появится у всех обладателей бесплатных учётных записей Adobe по всему миру.

Источник изображения: Adobe

В описании сервиса говорится, что веб-версия Photoshop останется бесплатной, поэтому в конечном счёте из неё исчезнут некоторые функции, которые будут доступны платным подписчикам. Несмотря на это, бесплатные пользователи будут иметь возможность взаимодействия с базовым набором инструментов для редактирования изображений.

«Мы хотим сделать Photoshop более доступным и простым, чтобы больше людей могли опробовать его и испытать данный продукт», — сообщила Мария Яп (Maria Yap), вице-президент Adobe.

Первая веб-версия Photoshop была представлена широкой публике в октябре прошлого года. Она представляет собой упрощённую версию графического редактора, которая подходит для выполнения базовых операций. Хотя в веб-версии Photoshop присутствует немало полезных инструментов, в плане возможностей для редактирования и создания изображений она сильно уступает полноценной версии редактора. Несмотря на это, в веб-версии Photoshop реализована поддержка совместной работы и другие полезные функции.

Веб-версия Photoshop предназначена для демонстрации пользователям некоторых возможностей редактора и привлечения новых платных подписчиков. Аналогичным путём Adobe продвигает другие свои продукты, такие как Fresco и Express. Конкретные сроки, когда бесплатная веб-версия Photoshop появится за пределами Канады, озвучены не были.

Вместе с этим Adobe представила новый нейронный фильтр, основанный на ИИ-алгоритме. Фильтр называется Photo Restoration и предназначен для улучшения качества старых снимков. Например, с его помощью можно автоматически убрать со старой пожелтевшей от времени фотографии царапины, а также частично восстановить её цвет. Вместе с уже существующим фильтром Colorize, предназначенным для добавления цвета чёрно-белым снимкам, Photo Restoration поможет быстро вернуть к жизни старые фотоснимки.

Разработчик программного обеспечения Adobe разрешил российским клиентам продлить подписки на уже приобретённые продукты. Об этом сообщила пресс-служба компании Softline, являющейся официальным партнёром Adobe и работающая с корпоративными клиентами. Частные клиенты теперь тоже могут продлить подписки, но сделать это стало сложнее.

Источник изображения: Adobe

В пресс-релизе говорится: «Всем корпоративным пользователям канала продаж VIP в России доступно продление действующих лицензий Adobe, временно ограничены только новые закупки и расширение действующих контрактов. В интернет-магазине Softline Store можно продлить свои лицензии и обратиться по вопросам Adobe в базовую техническую поддержку Softline».

«В текущей ситуации я рекомендую заранее продлевать лицензии Adobe, чтобы не потерять доступ к продуктам. При размещении заказа вендор может запросить дополнительную проверку в связи с санкционными ограничениями, это может занять от 2 до 10 рабочих дней», — заявила руководитель направления Adobe в Softline Полина Красикова.

При этом Softline работает только с корпоративными клиентами. Частным клиентам Adobe, которые ранее уже приобретали подписки на продукты компании, предлагается оплатить продление подписки на сайте Adobe банковской картой, не зарегистрированной в России или Беларуси, пояснили в Softline.

Напомним, в начале марта Adobe объявила о прекращении продаж на территории России. Этот шаг сделал невозможным приобретение Photoshop, Premier Pro и другого программного обеспечения компании.