Auto Video

Софт для автоматизаци создания видео и озвучки.

Исходный файл который мы будем загружать в софт для создания видео это doc \ docx файлы, либо же ссылка на гугл в который будет содержаться чистый текст сценария который необходимо озвучить.

Пример:

https://drive.google.com/drive/folders/1aOjqJJBJeQqVZcQiH8vj3GNwWIh6h6DY?usp=drive_link

1)

В софте создается проект, например "Психология", далее в этот проект грузится пачка документов или ссылок, выбирается язык исходника, выбирается голос озвучки для всего проекта, музыка которую добавляем и ее громкость.

Далее софт идет https://t.me/elevenLabsVoicerBot и по API с заданным нам голосом и языком делает отзвучки для всех документов. Ограничение на файлы 4000 символов, поэтому важно, чтобы скрипт заканчивал там где стоят точки или абзацы, для правильности интонации.

После получения всех частей озвучек, для каждого документа у нас есть общая длинна озвучки.

2)

Выбор загрузки промтов списком руками или чтобы AI составил нам промты для сценария. При выборе руками мы просто закидываем все промты в тхт где их разделяет строчка.Длина генерации видео в Sora - 15 сек, в Veo 3 - 8 сек, исходя из этого будет нужно разное кол-во промтов.

AI

Софт обращается по апи к OpenAI чату ЖПТ с просьбой написать нам промты для генирации видео. прикрепляем файл сценария при отравке запроса и промт в стиле:

мне нужна помощь сценариста уровня голливуда лучших кассовых фильмов для написание сценария нового коротко метражного фильма для АИ генерации с качественным сюжетом, завораживающим началом, напряженной середной и не ожиданным концом. В сценарии должен быть сюжет с разговорами и динамичная картинка. Длина каждой генерации [Указываем длину в зависимости от ИИ]. Общая длина фильма [Указываем длину озвучки]

На выходе у нас будет под каждую генерацию видео нужный промт, подходящей длины.

3) После получения всех промтов, мы начинаем генерацию видео через API https://geminigen.ai/

Иногда бывают ошибки в генерации, это нужно сразу помечать. чтобы перегенерить именно этот кусок. Все файлы нужно получать в четкой последовательности т.к. картинка привязана к сценарию и его интелектуальной нагрузке.

Также у меня есть аккаунты https://labs.google/ - изучить возможность использовать их API для генерации картинок и видео через Veo 3. Это второй сервис который мы будем юзать для генерации и лучше если получится юзать оба сервиса.

4)

После того как у нас полностью готова озвучка и полностью готов промт для генерации каждого из елементов видео мы начинаем монтаж всех роликов в 1 длинный ролик 16х9, либо же шортсы 9х16, все зависит от формата самого проекта.

Рендеринг видео можно выполнять как на самой машине, так и использовать API какого нибудь сервиса который все склеит нам в один файл. Также нужна возможность наложения футажа на видео и переходов между короткими роликами, добавление начального привествия и финального.

На выходе у нас получаются готовые смонтированные видео файлы которые лежат в папке "Проект" -> Название исходного DOC со сценарием.