Warlock700

Если Вы делали модель с помощью RVC, то с того момента много поменялось - добавили новые алгоритмы, вышла вторая версия претрейна, русские претрейны тоже вышли. К тому же, я больше позиционирую проект не для преобразования результатов из text-to-speech, а для преобразования голоса, будь то один человек, либо же группа "озвучеров". Только в этом случае, как мне кажется, можно получить достойный результат, который не стыдно будет добавлять в моды. Да, полностью согласен - голос узнается слабо на Вашем ролике, повлиял на это ограниченный дата-сет, либо преобразование голоса из text-to-speech результата - сказать трудно. У бармена прям совсем мало фраз, поэтому лучше всего добавить схожих по манере произношения фраз долговцев или других персонажей, которых Вилков озвучивал. Того же Сидоровича из ЧН, к примеру.

Не у всех моделей хватает эмоциональности для TTS. Но Вы можете попробовать найти в глобальной сети TTS хорошим голосом, а затем в последствии преобразовать полученный результат в RVC. Мне кажется, что так лучше будет.

Вы воспользовались TTS какой программы? Вроде как RVC TTS выдает довольно неплохие результаты и, как я заметил, зачастую для женских голосов. Мужские далеко не всегда выходят хорошо.

Совсем нет, но уже не первый месяц занимаюсь данным делом, поэтому определенный базис успел накопиться...)

Практически все, кроме определенных фрагментов в роликах, создано на основе преобразования голоса. RVC Text-to-speech - немного другой проект, хоть так же способен преобразовывать голос, заранее сгенерированной движком Edge. В этом случае Вам либо необходимо скачать его по ссылке: Либо же Вам необходим проект, за основу которого взята оригинальная RVC, но у которой есть собственный разработчик. Говоря иначе - это Fork RVC от Hispano, а именно - Applio. Этот fork способен и обучать голосовые модели, и преобразовывать аудиофрагменты, и имеет свой TTS. В проекте много экспериментальных функций, не все из них разработчик довел до ума: Дополнено 7 минуты спустя Именно так, если говорить о Вилкове. К слову, я уже отсортировал все сюжетные фразы и только там он наговорил в трех частях чистым голосом за 16 минут, а ведь есть еще диалоги NPS для каждой группировки. Так что можно смело сказать, что материала Вилкова достаточно. На очереди сортировка первых двух частей Метро, все так же фразы из сюжета. После того, как я закончу со всем голосами метро и сталкера, выполню окончательную сортировку на основе тембров, высоты и характерных черт, то начну выпускать модели на разных предобученных базах. (их на текущий момент не меньше 3 набралось) После того, как я это сделаю - проект RVC Stalker Voices можно будет считать полностью готовым, пока не выйдет новая версия RVC. Поэтому, по поводу Череватенко, если Вы выполните сортировку - это только ускорит выход модели Бороды и других персонажей, озвученных его голосом, но никак не поможет проекту в целом.

На какой именно голос из сталкера там похож Александр Вилков? Дело в том, что фраз того же Долга в Метро и Сталкер набирается с запасом, даже перебором. А вот другие голоса присутствуют либо в ограниченном количестве, (Сидорович ЧН, Бармен, Новиков) либо же они схожи с тем, которым Виклов озвучивает долговцев.

Если Вы самостоятельно наберете фразы непосредственно из распакованных файлов, без эффектов рации и надетого шлема, то будет замечательно.) К сожалению, но не научился избавляться от данных эффектов, возвращая голосу обычное звучание, поэтому подходит для обучения только чистый голос.

Попробую, но насколько я помню - у него не больше, чем 3-4 минуты набирается. Этого может быть мало для хорошей модели, но попытка - не пытка...)

Протестирована и загружена модель новичков в озвучке Руслана Гофурова. Обновлено описание. Демонстрация возможностей: Дополнено 34 минуты спустя Протестирована и загружена модель Ковальского из Сталкер ЗП и Мельника из Метро 2033. Обновлено описание. Демонстрация возможностей: Дополнено 14 минуты спустя Протестирована и загружена модель Прохорова. Обновлено описание. Демонстрация возможностей:

В зависимости от того, что Вы пытались сделать. Если Вы хотели внедрить Tensorboard в RVC, то да - без этого не обойтись. В остальном - все должно работать сразу, остальные случаи являются исключением. Не смогу сказать, насколько много материала имеется в озвучке Руслана Гофурова. Надо будет полазить в распакованных "ogg`шках"... Дополнено 3 минуты спустя Это все-таки text-to-speech, он зачастую проигрывает преобразованию живого голоса. Но сам факт имеется - голос любой модели можно сделать "говорилкой" текста. Но конкретно применение из ролика такое себе, имхо... И я скорее про содержание, а не озвучивание. Дополнено 20 минуты спустя По преобразованию я на текущий момент могу только предоставить запись со стрима, где в реальном времени занимаюсь процессом. Ролик длинный, присутствуют моменты, в которых занимаюсь не преобразованием, а объяснением, в том числе по созданию AI каверов. Поэтому рекомендовать к просмотру могу только тем людям, у которых есть много свободного времени. Для полноценного и целенаправленного гайда я привык писать сценарий, что займет уйму времени. Порою маленький абзац придумать для персонажа - это задача на минуты 3, а для работы с RVC необходимо создать видеоматериал на минут 20-30, если не больше. Во всяком случае исходя из плана, имеющегося в голове. Для подобного нужно и вдохновение, и много свободного времени. Из своей практики по другим роликам написать сценарий и записать аудиоматериал - это на 15-20 часов чистого времени. Можно, конечно, "отстреляться" за 3-5 минут, но боюсь, что вопросов после такого гайда будет больше, чем ответов. И даже на такой гайд в качестве "галочки" необходимо время. Собственно, запись стрима:

Не сказал бы, что процесс трудный. Что RVC, что Voice-Changer - проекты скомпилированные. Для них даже не требуется устанавливать Python, все уже есть папке программы с прописанными путями и зависимостями. С некоторыми модификациями посложнее будет, ведь всего-то требуется: Скачать подходящий архив с RVC; Распаковать; Переместить от имеющейся модели файл .pht в папку assetc\weight, а .index в в папку logs; Запустить .bat файл и пользоваться. Как по мне - сложнее подбирать параметры для преобразования голоса, поскольку это процесс не только творческий, но и требовательный к оригинальной аудиодорожке. Для получения хорошего результата может потребоваться не раз перезаписать голосовой фрагмент.

Основная сложность - наличие качественного микрофона и производительных комплектующих. Наибольшие требования имеются к преобразовании голоса в реальном времени, в то время как для преобразования готового аудиоматериала со снижением производительности устройства увеличивается время на получение готового файла.

Протестирована и загружена модель Лесника. Обновлено описание. Демонстрация возможностей: Дополнено 42 минуты спустя Протестирована и загружена модель коменданта Халецкого. Обновлено описание. Демонстрация возможностей:

Протестирована и загружена модель майора Дегтярева. Обновлено описание. Демонстрация возможностей: Дополнено 5 минуты спустя Протестирована и загружена модель отца Валерьяна. Обновлено описание. Демонстрация возможностей: Дополнено 6 минуты спустя Протестирована и загружена модель Чехова и других бойцов Свободы, озвученных Григорием Германом. Обновлено описание. Демонстрация возможностей:

Пока только от других пользователей. Постараюсь в ближайшее время создать ролик и напишу текстовую инструкцию. На примере создания AI Cover и сообщения для одного из пользователей, который задал тот же вопрос: Вам необходимо скачать программу RVC-Project, к примеру с официального репозитория разработчика: https://huggingface.co/lj1995/VoiceConversionWebUI/tree/main Если у Вас видеокарта от Nvidia с поддержкой CUDA ядер, то качайте архив RVC1006Nvidia.7z, а если AMD, либо нет CUDA ядер, то RVC1006AMD_Intel.7z. После того, как архив скачан и распакован - запускаете .bat файл go-web.bat и перейдите на сервер RVC. Чтобы было возможным подменять голос - модель нужно добавить. Необходимо файл расширения .pht переместить в папку ...\RVC\assets\weights, файл расширения .index советую разместить в папке ...\RVC\logs. Инструкция для Voice-Changer, так же с ютуба: Дополнено 4 минуты спустя А если разработки в данном направлении продолжаться, а так же переделаю свои голосовые модели, то остальное останется за малым - найти человека с хорошим поставленным голосом и актерскими талантами и дело в шляпе...)

Здравствуйте, Сталкеры. Ни для кого не секрет, что нейросети сейчас развиваются семимильными шагами, в свою очередь хотел бы Вам представить возможности одной из них. RVC-Project - проект, чьей основной задачей является обучение голосовых моделей и преобразование с их помощью аудиофайлов. Достаточно нескольких минут в качестве образца речи, чтобы получить практически идентичный голос, сохранив основные его черты, и я не мог пропустить такую возможность в отношении сталкерских голосов. Мною было обучено несколько моделей, основанных на речи персонажей из вселенной Сталкер. Для наглядной демонстрации предоставляю Вашему вниманию видеоролик, где собраны примеры по всем моделям, которые успел выпустить на текущий момент. Созданные модели не являются финальными версия, по мере возможностей они будут улучшаться и переобучаться в случае создания новых алгоритмов или улучшения обучения, выхода новых версий RVC, а так же при использовании новых версий предобученных баз. На текущий момент предобученная база основана на англоязычном дата-сете, в связи с чем в иных языках появляются заметные уху артефакты. Существуют неофициальные предобученные русскоязычные базы, под которые со временем будут переобучены все модели. Ссылки на них будут добавлены в данной теме по мере их выхода. Развитие проекта - патчноут: 13.02 - обучена модель Чехова и других свободовцев, озвученных голосом Григория Германа, проходит тестирование; 13.02 - обучена модель группировки Наемники, проходит тестирование; 13.02 - обучена модель Лесника, проходит тестирование; 13.02 - обучена модель речи Андрея Прохорова, основанная на черновых и релизных фразах, проходит тестирование; 13.02 - обучена модель Дегтярева, проходит тестирование; 13.02 - обучена модель коменданта Халецкого, проходит тестирование; 15.02 - протестирована и загружена модель Дегтярева; 15.02 - протестирована и загружена модель отца Валерьяна; 15.02 - протестирована и загружена модель Чехова и других бойцов Свободы в исполнении Григория Германа; 20.02 - протестирована и загружена модель Лесника; 21.02 - протестирована и загружена модель коменданта Халецкого; 22.02 - обучается, а в последствии будет протестирована модель новичков в озвучке Руслана Гофурова; 23.02 - обучена модель Лебедева, проходит тестирование; 04.03 - протестирована и загружена модель новичков в исполнении Руслана Гофурова; 04.03 - протестирована и загружена модель голосов персонажей, озвученных Андреем Прохоровым; 04.03 - протестирована и загружена модель Ковальского из ЗП и Мельника из первых двух частей Метро 2033; 14.03 - протестирована и загружена модель Лебедева; 06.04 - протестирована и загружена модель голосов персонажей, озвученных Иваном Розиным; (Гонта, Гаваец и др.) 29.04 - загружена оффтоп модель Мельника из Метро 2033 Исход. 17.05 - протестированы и загружены модели (разные претрейны) персонажей, озвученных голосом Алексея Череватенко (Борода, Ной и др.) Ссылки на программное обеспечение, примеры использования голосовых моделей, ссылки на их скачивание: