Интерактивный чат-бот для создания комиксов

Задачей было создание чат-бота для помощи в рекламной кампании. Пользователи должны были иметь возможность написать короткий рассказ для анимированного комикса. На основе сюжета нейронная сеть должна была генерировать изображения и озвучивать рассказ.

Основной задачей было не только генерировать изображения и текст, но и органично и плавно наложить их на всю историю, учитывая переходы между изображениями и сюжетами длиной до 30 кадров.

Этапы разработки проекта:

⬥ Реализация LangChain

⬥ Интеграция с OpenAI API

⬥ Разработка базы данных

⬥ Подготовка модели Stable Diffusion

⬥ Интеграция с моделью SD

⬥ Развертывание

Функциональность:

⬥ Создание комиксов

⬥ Новеллизация графических рассказов

⬥ Создание мультфильмов

⬥ Озвучивание

⬥ Синхронизация губ персонажей

Технологии и сервисы:

⬥ Python

⬥ aiogram

⬥ OpenAI API

⬥ LangChain

⬥ Fine-tuning

⬥ Stable Diffusion

⬥ DALL·E

⬥ MidJourney

⬥ ElevenLabs

⬥ Модель синхронизации губ

⬥ PostgreSQL

⬥ API методов оплаты

⬥ Развертывание на Ubuntu 22.04

Команда разработки:

⬥ UI/UX

⬥ Фронтенд-разработчик

⬥ AI-разработчик

⬥ Python-бэкэнд разработчик

Клиент получил отличный инструмент для своей рекламной кампании. Объединяя издательское дело, физические книги и современные технологии. Пользователи могли оживить сюжеты своих любимых книг.

Этот сервис особенно популярен среди маленьких детей. Родители с удовольствием создавали сюжеты из любимых книг своих детей, вызывая у них настоящий восторг!