Проект модернизации ShortWave.STUDIO

До сих пор это было домашнее ремесленное производство

Среди контента, который создаёт и публикует ShortWave.STUDIO, есть 1 вид видеоконтента
под названием «OPTOg».

Раньше, под названием «Ping», мы в основном делали контент в формате разговорной передачи.
Потом начали создавать и то, что в этот формат не укладывалось, поэтому название изменилось.

Но это отступление.

До сих пор наши видео создавались вручную.
Рабочий процесс выглядел так.

1. Написать сценарий на японском
2. Перевести его на английский с помощью ИИ
3. Создать основные видео и звук в HeyGen на основе сценария
4. Создать материалы, например миниатюры, частично используя ИИ
5. Запустить видеоредактор, импортировать созданные материалы и смонтировать видео
6. Экспортировать и загрузить на YouTube, сайт и другие площадки

…Да, совершенно обычный процесс. Именно так мы и работали.

Хотя ИИ использовался для перевода и создания материалов,
большая часть производства оставалась ручной. Настоящее домашнее ремесло.

Время пришло

Сначала нас это устраивало. Создавать контент приятно само по себе.

Однако затраты времени и сил на 1 видео были весьма значительными.
С течением времени и изменением обстоятельств психологический барьер перед творчеством год от года рос.

К счастью, производственный процесс уже следовал определённым шаблонам,
а используемые материалы, структура дорожек и применяемые настройки были стандартизированы.

Если разобраться и проверить, «как автоматизировать то, что делают люди»,
можно, по нашим расчётам, существенно сократить трудозатраты.

Момент оказался удачным: сейчас доступны GPT-6 Astra от OpenAI и Fable 5.1 от Anthropic.
Похоже, им можно поручить подробные исследования, проработку решений и их реализацию.

Мы решили наконец приступить к модернизации, которую давно хотели сделать, но всё откладывали.

Начать с упорядочивания

Прежде всего требовалось определить направление и разобраться с потребностями. То есть выполнить так называемое определение требований.

В качестве важного принципа мы решили не стремиться к полной автоматизации.
Автоматизировать только «рабочие операции», а задачи, относящиеся к «творчеству», оставить человеку.

Эти 2 положения мы определили как «неизменную основу» и решили автоматизировать максимум в её рамках.
При этом сравнивать усилия с результатом и реализовывать только то, что оправдывает затраты.

Разумеется, есть много подробностей, но основа именно такая.

Мы передали эти принципы и описание реальной работы ИИ и попросили предложить несколько планов реализации.
В результате выбрали направление: «сочетать MCP, UXP и управление интерфейсом».

Реализация и проверка

Основные материалы мы создаём с помощью сервиса HeyGen,
у которого оказался MCP.

Испытания показали, что он охватывает большую часть действий, которые мы выполняли вручную,
так что почти все эти этапы, похоже, можно автоматизировать.

Но в Premiere Pro нет механизма, который позволял бы ИИ автоматизировать операции.
Для автоматизации монтажа нужен какой-то посредник…

Изучив разные варианты, мы решили установить приложение «Premiere Pro MCP».

https://premiere-pro-mcp.com

Это приложение использует MCP, чтобы связать ИИ и Premiere Pro.
Подобных продуктов немало, так что, если интересно, поищите их.

Однако и оно оказалось несовершенным…
По мере дальнейшего изучения выяснилось, что довольно многое ему недоступно.

В конце концов мы остановились на сочетании собственного решения на UXP и реального управления браузером через Codex,
чтобы автоматизировать процесс в целом.

Что можно и чего нельзя сделать

После многочисленных поворотов мы реализовали навыки автоматизации, разделённые на 2 части.
Процесс стал выглядеть так.

1. Написать сценарий на японском
2. Перевести его на английский с помощью ИИ
3. Навык № 1 читает сценарий, создаёт видео и звук и автоматически скачивает их
4. Создать материалы, например миниатюры, частично используя ИИ
5. Навык № 2 запускает видеоредактор, обрабатывает и размещает материалы по установленным правилам
6. Принять управление видеоредактором после размещения и первоначальной обработки, затем настроить детали
7. Экспортировать и загрузить на YouTube, сайт и другие площадки

Автоматизированы шаги 3 и 5 из списка выше.
Автоматизация того, что вручную делать утомительно, заметно облегчила работу.

Для справки ниже приведено распределение ответственности во всём рабочем процессе.

・Что делают ИИ и автоматизация

• Генерация видео и звука в HeyGen
• Скачивание и упорядочивание созданных материалов
• Проверка соответствия субтитров и реплик
• Выделение сцен-кандидатов
• Импорт и размещение материалов в Premiere
• Предусмотренная первоначальная обработка
• Другие повторяемые типовые операции

・Что делают люди

• Придумывают проекты
• Пишут сценарии
• Занимаются всей режиссурой
• Подробно настраивают каждый материал и применяют эффекты
• Корректируют субтитры
• Проверяют и исправляют обработку ИИ
• Принимают решение о готовности

«Не сделали» не означает «не смогли сделать»

После этой автоматизации осталось немало задач, требующих ручной работы.
Мы оставили их намеренно, оценив соотношение затрат и результата, о котором говорилось в начале.

Например…

• Автоматизировать можно, но человек сделает быстрее
• Нужны решения в зависимости от конкретного случая
• Результат нестабилен
• Расходуется слишком много кредитов ИИ
• Слишком много неоднозначности
• Реализовать можно, но это обойдётся слишком дорого
• Эту часть хотелось делать самому

По таким причинам мы решили не автоматизировать некоторые части.

Если упорядочить структуру видео, вероятно, можно расширить область автоматизации,
и даже полная автоматизация казалась возможной…

Но если сделать это, получится уже не ShortWave.STUDIO.

Система, которая растёт

Эта система только что запущена и, возможно, ещё не совершенна,
но такие внутренние инструменты повышения эффективности следует улучшать по мере использования.

Мы хотим дорабатывать её на основе впечатлений и опыта, полученных при создании контента,
чтобы сделать производственную среду ещё эффективнее.