Skip to content
This repository has been archived by the owner on Oct 1, 2021. It is now read-only.

Обучение нейронки #21

Open
Misterpin opened this issue Nov 20, 2020 · 8 comments
Open

Обучение нейронки #21

Misterpin opened this issue Nov 20, 2020 · 8 comments

Comments

@Misterpin
Copy link

Доброго времени суток!
Как начать С НУЛЯ обучать нейронку? (т.е не нужен pretrained model)

@vlomme
Copy link
Owner

vlomme commented Nov 20, 2020

Не скачивать веса

@Misterpin
Copy link
Author

Насколько я правильно понял, в колабе, который Вы привели как пример, нужно лишь не запускать два блока, где скачивание и распаковка архива pretrained, тогда нейронка обучается с нуля, так? И насколько большой объем файла вместо ex.wav должен быть, чтобы желаемый голос у нейронки был почти идеален?

@Misterpin
Copy link
Author

Preparing the encoder, the synthesizer and the vocoder...
Traceback (most recent call last):
File "demo_cli.py", line 67, in
encoder.load_model(args.enc_model_fpath)
File "/content/Multi-Tacotron-Voice-Cloning/encoder/inference.py", line 33, in load_model
checkpoint = torch.load(weights_fpath)
File "/usr/local/lib/python3.6/dist-packages/torch/serialization.py", line 581, in load
with _open_file_like(f, 'rb') as opened_file:
File "/usr/local/lib/python3.6/dist-packages/torch/serialization.py", line 230, in _open_file_like
return _open_file(name_or_buffer, mode)
File "/usr/local/lib/python3.6/dist-packages/torch/serialization.py", line 211, in init
super(_open_file, self).init(open(name, mode))
FileNotFoundError: [Errno 2] No such file or directory: 'encoder/saved_models/pretrained.pt'
Ругается что нет предобученной модели

@vlomme
Copy link
Owner

vlomme commented Nov 20, 2020

В калабе нет обучения
Для хорошего качества надо 1000 голосов и 1000 часов записей

@kerisac
Copy link

kerisac commented Dec 16, 2020

В калабе нет обучения
Для хорошего качества надо 1000 голосов и 1000 часов записей

а есть смысл доучивать pretrained модель которую предоставили? и сколько итераций должно быть для "хорошего качества"?
Есть ли готовая модель, которая хотя бы слегка похоже клонирует русскую речь?

@michaelgfeldman
Copy link

Добрый день!
А модель encoder, веса к которой вы предоставляете уже дообучена на русской речи или используеться оригинальный encoder с Real-Time-Voice-Cloning? (я знаю, что можно использовать encoder обученый только на англ речи но я использую его для задачи голосовой биометрии и хотел повысить качество эмбедингов дообучив и на русской речи)
Спасибо!

@webbrows
Copy link

В калабе нет обучения
Для хорошего качества надо 1000 голосов и 1000 часов записей

А для одного голоса сможет обучится? т.е нужно копирование одного голоса

@fancat-programer
Copy link

Если вам нужно копирование одного голоса - обучите обычный tacotron 2(в идеале 40+ часов).

Sign up for free to subscribe to this conversation on GitHub. Already have an account? Sign in.
Labels
None yet
Projects
None yet
Development

No branches or pull requests

6 participants