Python + FFmpeg + LLM: конвейер музыкальных эдитов из сцен фильмов с субтитрами по словам

Описание

Автоматизировать сборку коротких музыкальных роликов: сцены из фильмов под песню, слова по центру, по референсу клиента.

Решение

Сбор нарезок из открытых Telegram-каналов; индексация сцен по кадрам vision-моделью; пословная расшифровка песни; подбор сцен под строки через LLM с объяснением выбора; монтаж FFmpeg со вступлением, затемнением и пословными субтитрами со свечением; QC каждого ролика; 105 автотестов; перенос на VPS клиента с его ключом OpenAI.

Результат

Три эдита приняты, около 10 центов на ролик.

Презентация проекта