В Adobe Firefly се появи ИИ-озвучаване на видеоклиповете
Adobe показа ИИ-инструмент за работа със тон, който ви разрешава бързо да добавяте тематично подобаваща фонова музика и глас към вашите видеоклипове. Инструментите Generate Soundtrack и Generate Speech ще бъдат интегрирани в обновеното приложение Adobe Firefly.
Функцията Generate Soundtrack, която към този момент е пусната в обществената бета-версия, проучва каченото видео и генерира до четири инструментални аудио записа с дълготрайност до пет минути, като автоматизирано ги синхронизира с видеото. Потребителите могат да изберат музикален жанр от авансово заложените настройки, като да вземем за пример lofi, хип-хоп, типичен и други, или да опишат мечтаното въодушевление в текстовото поле, като да вземем за пример „ прочувствен “ или „ нападателен “. Системата в началото ще предложи и примерни текстови поръчки въз основа на разбора на видео наличието.
Що се отнася до авторските права, моделът Firefly AI, който зарежда Generate Soundtrack, е подготвен върху лицензирано музикално наличие, което прави получените записи безвредни за комерсиална приложимост, съгласно компанията. Както изяснява Александру Костин, началник на генеративния изкуствен интелект в Adobe, компанията е придобила правата върху музиката и гласовете от притежателите на авторските права, гарантирайки, че те са свободни от опасности от нарушение на авторски права. Това отличава Adobe от съперници като Suno и Udio, които са се сблъсквали със правосъдни каузи за нарушение на авторски права за образование на своите модели върху предпазени материали.
В същото време функционалността Generate Speech, която ви разрешава да създавате гласови надписи от текст, беше пусната в обществена бета-версия. Тя предлага над 50 гласа, основани на технологията Adobe Firefly Speech Model или ElevenLabs, и поддържа над 20 езика. Можете да регулирате скоростта, височината и прочувствения звук на речта, както и ръчно да настройвате произношението на имена и районно характерни думи.
Adobe създава и уеб-базирано приложение, Firefly Video Editor — многотраков редактор с времева линия за генериране, образуване, изрязване и редактиране на клипове. То ще комбинира принадлежности за основаване на озвучаване, саундтраци и заглавия в едно приложение, дружно с редактиране на кадър по кадър и авансово заложени стилове. Редакторът ще стартира да се популяризира в бета-версия от идващия месец, а потребителите могат да се запишат в листата с чакащи за ранен достъп.
