ИИ-трансляции
@low_digitalНа этой странице я собрал всю информацию, которую я когда-либо публиковал на тему ИИ-трансляций и прикрепил все необходимые файлы. Многие ролики ссылаются друг на друга, некоторые исходные файлы - обновлялись уже после выхода видеороликов, в них исправлялись ошибки, добавлялся новый функционал. Поэтому, чтобы не запутаться - я опубликовал всё это в хронологическом порядке.
Август 2023
Это самый первый мой ролик на эту тему, здесь подробно описан процесс регистрации в OpenAI, получения API-ключей, настройка подобного стрима "от" и "до". В качестве Unity-клиента и backend используется готовый проект от автора The Dollar Game Store:
Используемые в ролике файлы:
Это второй мой ролик, где описан процесс настройки более функционального проекта от автора porkdevmod:
Используемые в ролике файлы:
Сентябрь 2023
В этом ролике я подробно рассказываю о разных решениях, которые можно использовать для генерации озвучки из текста чужими голосами
В этом ролике я максимально подробно описываю процесс подготовки голосовых моделей и взаимодействия через API именно с RVC TTS
AI STREAM KIT
В этом ролике находится видео-инструкция к AI STREAM KIT.
AI STREAM KIT - это платное ПО предназначенное для коммерческих проектов, которое содержит все возможные интеграции и автоматизации: донаты, telegram-бот, модерация, авто-темы, блокировка пользователей и т.д.
Изначально я опирался на проект от The Dollar Game Store, но в AI STREAM KIT был полностью переписан backend и unity-клиент с нуля и AI STREAM KIT стал полностью уникальным и независимым проектом.
В этом ролике я рассказываю как можно переозвучивать песни чужими голосами с помощью RVC, и как интегрировать этот функционал в ИИ-стримы
Используемые в ролике файлы:
Октябрь 2023
В этом ролике я подготовил видео-инструкцию для второй версии AI STREAM KIT, которая содержит в себе еще больше функционала, а запуск самого проекта занимает значительно меньше времени. AI STREAM KIT 2 - это платное решение, поэтому файлы проекта отсутствуют в общем доступе.
AI STREAM KIT 3
В этом ролике я подготовил видео-инструкцию для третьей версии AI STREAM KIT, которая содержит в себе еще больше функционала, а запуск самого проекта занимает значительно меньше времени. AI STREAM KIT 3 - это платное решение, поэтому файлы проекта отсутствуют в общем доступе.
AI STREAM KIT 4
Начиная с 4-й версии AI STREAM KIT, у данного ПО появляется 3 редакции:
Lite (бесплатная)
Бесплатная версия, доступны только Губка Боб и Патрик, есть как генерация сценариев, так и генерация мешапов, RVC-модели персонажей включены в архив, 1 локация, из интеграций – только комментарии к трансляции на Youtube. Оптимизированный Unity-клиент, с более крутой графикой и жрущий меньше ресурсов. Настраивается также как и 3-я версия.
Скачать AI STREAM KIT 4 Lite: https://drive.google.com/file/d/1fJnS2w0Uac8SABKAp5inEvIObJ45Xlq-/view
Pro (платная, упрощенная)
Из персонажей: Губка Боб, Патрик, Сквидвард, Планктон, Мистер Крабс. Есть как генерация сценариев, так и генерация мешапов, RVC-модели персонажей включены в архив, 10 локаций, из интеграций – только комментарии к трансляции на Youtube. Оптимизированный Unity-клиент, с более крутой графикой и жрущий меньше ресурсов. От AI STREAM KIT 3й версии отличается новыми голосами и оптимизированным Unity-клиентом. Плюс исходники Unity-клиента. Настраивается также как и 3-я версия.
Ultimate (платная, мощная)
Отличается от Pro обилием интеграций: Youtube, Telegram, Discord, Donation Alerts. Есть донаные NPC. Динамический лимит на отправку тем, блокировка пользователей, фильтр запрещении. Плюс исходники Unity-клиента. Полная копия моего стрима. Требует наличия облачного сервера, настраивается также как и 2-я версия.
AI STREAM KIT 6
Пятую версию можно пропустить, так как она просто содержала некоторые улучшения, исправления ошибок и т.д.
Lite (бесплатная)
Бесплатная версия, доступны только Губка Боб и Патрик, есть как генерация сценариев, так и генерация мешапов, RVC-модели персонажей включены в архив, 1 локация, из интеграций – только комментарии к трансляции на Youtube.
Pro (платная, упрощенная)
Из персонажей: Губка Боб, Патрик, Сквидвард, Планктон, Мистер Крабс и Сенди. Есть как генерация сценариев, так и генерация мешапов, RVC-модели персонажей включены в архив, 15 локаций, из интеграций – только комментарии к трансляции на Youtube. Открыты все исходники (Unity, RVC, Python).
Ultimate (платная, мощная)
Отличается от Pro обилием интеграций: Youtube, Telegram, Discord, Donation Alerts. Есть донатные NPC. Динамический лимит на отправку тем, блокировка пользователей, фильтр запрещении, интерфейс модератора. Открыты все исходники (Unity, RVC, Python, Веб-сервер).
Lite-версия доступна для скачивания в моём Telegram-канале:
AI STREAM KIT 7
Это последняя версия AI STREAM KIT, больше обновления не выпускались и я закрыл этот проект.
Скачать AI STREAM KIT 7 Lite можно здесь: https://disk.yandex.ru/d/MTHZVDQOS_ZFRQ
Также были подготовлены текстовые версии инструкций по установке и настройке:
С 01.06.2024 проект AI STREAM KIT закрыт. Редакции Pro и Ultimate больше купить нельзя! Зато можно бесплатно скачать самую полную, самую актуальную версию AI STREAM KIT (ссылка будет ниже).
Февраль 2024
Я подготовил новый проект - ИИ-vtuber, который снижает барьер входа в ИИ-трансляции для энтузиастов. Ты можешь буквально за пару минут создать своего уникального персонажа в редакторе, импортировать его в Unity-проект и запустить бесконечную трансляцию.
Используемые в ролике файлы:
Март 2024
Хоть этот ролик и не относится к теме ИИ-трансляций, но почему-то меня очень много просили в комментариях рассказать, как ИИ-витубера превратить просто в витубера, чтобы пользователь сам мог им управлять, говорить от его лица и т.д.
Декабрь 2024
Проект AI STREAM KIT еще долго дорабатывался (пусть и без публикации обновлений). Появлялись новые локации (всего 20 шт.), появлялись новые персонажи (всего 11 шт.). А в 2024 году backend проекта был еще раз переписан с нуля, но уже не на NodeJS, а на Python.
Актуальные исходники нового AI STREAM KIT без каких-либо ограничений и платных доступов я опубликовал на GitHub: https://github.com/lowdigital/ai-stream-kit
Февраль 2025
Я подготовил новый проект - LATE NIGHT AI, в отличии от AI STREAM KIT, новый проект позволяет запускать ИИ-стримы без Unity, что значительно снижает барьер входа, энтузиастам для запуска своего ИИ-подкаста достаточно лишь:
- нарезать 3 коротких видео-ролика с персонажами и заставкой
- нарезать 2 коротких аудио-файла для клонирования голоса, при озвучке из текста
Исходники проекта доступны на GitHub: https://github.com/lowdigital/late-night-ai
Март 2025
Я немного доработал проект:
- теперь для озвучки используется более продвинутая (но платная) нейросеть hailuo.ai
- появилась смена сцен, теперь разные сценарии запускаются с разными наборами видео, что придет эффект динамичности
- также я добавил красивую анимированную плашку с базовой информацией о трансляции: что тут вообще происходит, куда подписаться, где задавать свои темы, какой сейчас играет сценарий и за чьим авторством, сколько тем еще в очереди и т.д.
А еще подписчики меня просили реализовать крайне странные требования - например, отказаться от использования виртуального сервера для хранения информации об очереди, о сгенерированных сценариях и т.д. (чтобы всё могло работать локально, исключительно на ПК пользователя).
Всё выше описанное решается в течении 5 минут общения с ChatGPT, если сгрузить в него исходники LATE NIGHT AI. Но если вас в ChatGPT забанили и вы не можете разобраться как использовать hailuo.ai и/или как запускать проект локально и/или вам нужен красивый шаблон трансляции - вы можете приобрести LATE NIGHT AI 2: https://t.me/tribute/app?startapp=peny
Платные решения
Для тех, кто хочет максимальный функционал, полный объем всех возможных исходников, готовые примеры и способ запустить свой проект буквально в пару кликов - доступны платные решения
[Купить] Губка Боб Нейросеть (AI STREAM KIT X)
Перейти: https://web.tribute.tg/p/enB
[Купить] Финес и Ферб Нейросеть (AI STREAM KIT X)
Перейти: https://web.tribute.tg/p/enD
[Купить] Гриффины Нейросеть (AI STREAM KIT X)
Перейти: https://web.tribute.tg/p/enE
[Купить] AI VTUBER KIT
Перейти: https://web.tribute.tg/p/enS
[Купить] Комиссар Жибер Нейросеть (LATE NIGHT AI 2)
Перейти: https://web.tribute.tg/p/eny
Что сейчас?
Разобравшись с тем, как всё это устроено - я утратил интерес к этой теме и особо не занимаюсь ею. Я не знаю доступен ли сейчас софт, который использовался в моих гайдах, я не знаю какой новый функционал мог появиться в этом ПО, с какими ошибками можно столкнуться при использовании более свежих версий этого ПО, я не знаю работает ли вообще AI STREAM KIT / AI VTUBER KIT / LATE NIGHT AI сейчас.
Весь мой софт и гайды распространяются "AS IS", какая-либо поддержка - не оказывается, никто не гарантирует, что это будет работать у вас и что вы не столкнетесь с какими-либо ошибками и трудностями.
Если что-то пошло не так, если что-то не работает, если у вас есть какой-то вопрос - я настоятельно рекомендую обратиться к https://chatgpt.com/
Если вы все равно хотите получить помощь с вашим проектом именно от меня - сделать это можно только в рамках платной консультации с почасовой оплатой.
Также вы можете заказать у меня разработку ИИ-стрима "под ключ", с вашими уникальными персонажами / голосами / функционалом.
Контакт для связи: @sendnoodes
Также, я рекомендую подписаться на мой Telegram-канал. Здесь я оставил только самые важные ссылки на файлы / исходники, которые относятся к опубликованным гайдам, но в канале я выкладываю гораздо больше информации по решениям, которые я использовал в своих ИИ-стримах.