Adobe представила ряд експериментальних інструментів штучного інтелекту, які обіцяють нові способи інтуїтивно редагувати фотографії, відео та звукові записи на конференції Max. Ці експерименти, названі «снейками», включають інструменти, що дозволяють миттєво застосовувати зміни в одному кадрі до всього відео, легко маніпулювати освітленням у зображеннях і виправляти помилки вимови у звукових записах.
Проект Frame Forward
Одним із найбільш вражаючих снейків є Project Frame Forward, який дозволяє відеоредакторам додавати або видаляти об’єкти з відео без використання масок, що зазвичай є трудомістким процесом. Демонстрація Adobe показала, як Frame Forward ідентифікує, вибирає та видаляє жінку з першого кадру відео, замінюючи її на природний фон — подібно до інструментів Photoshop, таких як «Контекстно-усвідомлене заповнення» або «Видалити фон». Ця зміна автоматично поширюється на все відео всього за кілька кліків.
Користувачі також можуть вставляти об’єкти у відеокадр, малюючи, де вони хочуть їх розмістити, та описуючи, що додати за допомогою підказок AI. Ці зміни також будуть застосовані до всього відео. Демонстрація показала, що вставлені об’єкти можуть бути контекстуально обізнаними, відображаючи створену калюжу, що реагує на рух кота, який вже є у відео.
Проект Light Touch
Іншим інструментом є Project Light Touch, який використовує генеративний ШІ для зміни світлових джерел у фотографіях. Він може змінювати напрямок освітлення, створювати враження, що кімнати освітлюються лампами, яких не було увімкнено у оригінальному зображенні, і дозволяє користувачам контролювати розподіл світла і затінення. Також можливе вставлення динамічного освітлення, яке можна переміщати по редагуваній площині, обгинаючи світло навколо і за об’єктивами в реальному часі, наприклад, освітливши гарбуз зсередини та перетворивши навколишнє середовище з дня на ніч. Користувачі можуть також коригувати кольори цих змінених джерел світла, щоб варіювати їхню теплоту або створювати яскраві ефекти на зразок RGB.
Проект Clean Take
Project Clean Take – це новий інструмент редагування, який може змінювати вимову за допомогою підказок штучного інтелекту, уникаючи необхідності перезаписувати відео чи звукові кліпи. Користувачі можуть змінювати подачу чи емоційний окрас голосу, наприклад, роблячи його більш радісним або допитливим, або зовсім замінювати слова, зберігаючи при цьому відмінні характеристики оригінального голосу. Інструмент також може автоматично розділяти фонові шуми на окремі джерела, щоб користувачі могли вибірково регулювати або придушувати певні звуки, що допомагає зберігати загальний звук при покращенні чіткості голосу.
Це лише невеликий перелік снейків, представлених на заході Adobe. Серед інших вартих уваги проектів можна відзначити Project Surface Swap, який дозволяє миттєво змінювати матеріал або текстуру об’єктів і поверхонь, Project Turn Style, що дозволяє редагувати об’єкти в зображеннях, обертаючи їх як 3D-об’єкти, та Project New Depths, який дозволяє редагувати фотографії, як якщо б це було 3D-простір, який визначає, коли вставлені об’єкти повинні бути частково сховані оточенням.
Снейки наразі недоступні для публічного використання, і немає гарантії, що вони стануть офіційними функціями в програмному забезпеченні Adobe Creative Cloud або в додатках Firefly. Багато функцій, таких як «Видалення відволікань» в Photoshop, спочатку були снейками, тому є хороша ймовірність, що якимось чином ці експериментальні можливості стануть доступними для творців у майбутньому.
