Adobe Project Super Sonic використовує ШІ для створення звукових ефектів для ваших відео
На щорічній конференції Max компанія Adobe представила свій експериментальний проєкт під назвою Project Super Sonic. Цей прототип демонструє можливості використання генерації аудіоефектів за допомогою тексту, розпізнавання об’єктів і навіть власного голосу користувача для швидкого створення звукових ефектів і фонової музики у відеопроєктах, повідомляє TechCrunch.
Останні новини: Adobe випускає Firefly Video Model: нова ШІ-технологія для створення відео з тексту, конкурент OpenAI та Meta
Здатність створювати звукові ефекти з текстових підказок стала основою проєкту. Хоча подібні технології вже доступні на ринку, Adobe вирішила розширити можливості цього підходу. Проєкт Super Sonic включає три режими створення аудіо. Перший — текстовий, коли користувач вводить текст і отримує відповідний аудіоефект.
Другий режим передбачає використання моделей розпізнавання об’єктів. Користувач може клікнути на будь-яку частину відеокадру, і система автоматично згенерує відповідний звук на основі розпізнаного об’єкта. Це об’єднує різні моделі в єдиному робочому процесі, що робить генерацію аудіо зручнішою та швидшою.
Найбільш захоплюючий режим дозволяє користувачам записувати свої спроби відтворити потрібний звук, синхронізуючи це з відео, а потім система автоматично створює відповідний аудіоефект. Головний спеціаліст з ШІ-саунддизайну Adobe Джастін Саламон пояснив, що при розробці проєкту основну увагу приділяли наданню користувачам контролю над процесом. За його словами, ця технологія може перетворити будь-яке джерело звуку – від голосу до удару долонь чи гри на інструменті – у необхідний аудіоефект.
На конференції Adobe Max завжди демонструють експериментальні функції, і Project Super Sonic не є винятком. Немає гарантій, що він стане частиною Creative Suite, але є всі підстави вважати, що технологія може отримати своє продовження. Однією з причин є досвід тієї ж команди, яка працювала над аудіо для Generative Extend — функції Firefly, що розширює короткі відео, додаючи до них кілька секунд аудіо.