AICON: платформа для создания AI-видео из текста и изображений

AICON — это открытая платформа для создания видео с помощью искусственного интеллекта, которая предлагает неограниченное рабочее пространство и помощника, работающего с естественным языком. Проект нацелен на создателей контента и разработчиков, позволяя преобразовывать сценарии в персонажей, раскадровки, изображения и видео. Он поддерживает процесс создания контента с помощью визуальной схемы, соединяя этапы генерации на бесконечном холсте, и может быть развернут самостоятельно с использованием Docker.

Зачем нужен AICON?

AICON позволяет пользователям автоматизировать процесс создания видео на основе длинных текста, таких как сценарии и романы. Платформа включает функции, такие как анализ текста, создание ключевых кадров, генерацию озвучки и видеомонтаж. Это полезно для создания художественных фильмов, анимаций и рассказов в различных форматах.

Как установить и запустить?

Рекомендуется развертывание с использованием Docker. Для этого необходимо иметь установленный Docker и Docker Compose v2. Выполни следующие команды:

git clone https://github.com/869413421/ai-moive-studio.git
cd ai-moive-studio

cp .env.production.example .env.production
# Edited .env.production, fill in the configuration for database, Redis, JWT, MinIO etc.

docker compose --env-file .env.production -f docker-compose.prod.yml up -d

После этого доступ к приложению будет по следующим адресам:

• Frontend: http://localhost
• Backend API: http://localhost:8000

Основные возможности

• Movie Studio: Автоматизация создания видео из длинного текста.
• Canvas: Визуальное представление для управления процессом создания контента.
• Picture Narration: Генерация озвучки и изображений для кратких видео.
• Distribution: Интеграция с платформами, такими как Bilibili для публикации видео.

Ограничения

Хотя проект является открытым, использование AI-моделей обременено затратами, которые зависят от выбранного поставщика услуг. Также автоматическая генерация видео не происходит абсолютно сам по себе; пользователю нужно вручную инициировать генерацию контента после проверки рабочего процесса. Важно помнить, что проект требует собственной инфраструктуры для развертывания и работы его компонентов.

AICON — это мощный инструмент для авторов, желающих упростить процесс создания видео, однако важно учитывать требования к настройке и потенциальным расходам на использование AI-моделей.