+추가1)
Applio 외에서도 돌아가는 수정버전 뜸
(1) KLM v7
일부 번역: deepl (추가공지를 제외하고 영어/한국어 같이 올라와있음
한국어 사전학습모델인 KLM7 쉐어버전의 배치2 입니다.
Applio 에서 테스트 되었으며 RVC v2 / RVMPE / 32k, 40k, 48k 사전모델이 준비되어 있습니다.
차별자와 생성자를 사전학습 모델로 Applio에서 테스트 되었습니다. 압축된 데이터를 Applio가 설치되어 있는 폴더 안 rvc\pretraineds\pretraineds_custom 에 압축을 풀어준 후 이용하시면 됩니다.
KLM은 영어 외 다른 국가의 언어의 이용도 가능하지만 한국어에 가장 많은 정보를 담고 있고 특히 보컬과 관련된 데이터를 기반에 두고 있습니다.
추신 :
KLM을 마법의 도구로 사용하지 마십시오. 텐서보드와 모니터링을 통해 충분한 학습이 이뤄지는지 항시 지켜보아야 하며 가능한 할 수 있는 만큼의 최대한의 데이터셋 정리를 사전에 하여 가장 클린하고 이상적인 소스를 이용하면 할수록 더 많은 디테일을 살릴 수 있게 도울 것입니다.
(똥을 아무리 이쁘게 꾸며도 이쁜 똥이 되는 근본적인 법칙을 무시할 수 없습니다.)
10분짜리 데이터셋이 있다고 가정할때 최고의 퀄리티로 5분짜리 데이터셋을 준비할 수 있다면 그 5분의 데이터를 이용하시되 그 5분을 살리기 위해 적지 않은 노력을 하셔야 합니다. model maker 채널등을 통해 많은 AI huber들이 토론하는 내용을 토대로 다양한 테스트를 해보시길 권장드립니다.
Batch 1 :
10 Actors and Vocalist's Voice, Vocal Data
Batch 2 :
22 Actors and Vocalist's Voice, Vocal Data
Model Link - https://huggingface.co/SeoulStreamingStation/KLMv7s/resolve/main/KLMv7s_Batch2.zip?download=true
업데이트 -
메인 라인에서 오류가 발생한다는 피드백을 받았습니다. 문제가 해결될 때까지 Applio를 사용해 주세요.
번역 : deepl
(2)
나는 OV2, snowie 도 applio에서 훈련되었다고 생각합니다 ...
오류가 발생하고 우리가 통합한 일부 코드의 잘못이라면 오류가 잘 식별되는 즉시 해결될 것입니다. 이전에 그 오류를 보았지만 다른 클라이언트에서 applio로 사전 학습된 모델로 학습하는 데 문제가 없었기 때문입니다.
최근까지 사전 학습 모델은 더 알려지지 않은 세계였으며 이 경우 의도하지 않은 코드에 버그가있을 수 있습니다.
많은 노력이 들어간 만큼 다른 사람의 작업을 존중하는 것이 중요하다고 생각합니다.
얼마 전에 RVC의 제작자가 설정하고 우리가 따르는 표준이 있지만, 누군가가 전환점을 표시하고 발전을 위해 변경해야하는 시점이 있을 것입니다. 왜냐하면 표준이 이미 포기 된 프로젝트에 의해 설정되어야한다면이 기술의 미래는 거의 없기 때문입니다...
버그가 발견되면 (테스트중인 이론이 있음) 적용되고 이미 훈련 된 사전 학습된 된 형식에 대한 범용 형식으로 변환기가 제공됩니다.
1. KLMv7 2차 사전학습모델 나옴.
2. 근데 applio에서 학습하다가 오류나서 applio에서밖에 안 돌아감
(2)는 applio가 아예 코드를 뜯어 고쳐서 새로 만든 수준의 프로그램이라 그런지, 1006/mangio에 비해 너무 표준이랑 떨어져 있어서(=모델 호환성이 자주 씹창나서) rvcdisconnected 제작자가 applio 존나 깐 말에 대해 applio 제작자가 한 답변.
RVCDisconnected를 비롯한 일부 코랩들은 죄다 업뎃이 끊겨서 되려 안정적인 mangio 기반이라 applio에서만 돌아가는 사전학습모델은 못 씀.
Applio 제작자는 RVC가 사실상 버려진 수준으로 업뎃을 안 하는데, 거기에 맞추는 것에 대해 불만이 좀 있는 듯
실제로 얘가 다 뜯어고치면서 쓸만한 기능이나 편의성이 여러가지 들어가기도 했고 열심히 하는 거 같긴 함
근데 학습방식 바꾸겠다고 다른 RVC에서는 안 돌아가는 applio 독자 모델 규격 되었다가 롤백한 적이 있기도 했고, 이번에 applio에서만 돌아가는 사전학습모델도 그렇고 applio가 갈라파고스화 되버리는 경우가 종종 있어서 욕 하는 쪽이 이해가 안 되는 건 아닌지라...
암튼 최근에 applio에서 학습한 커스텀 사전학습모델을 applio외에서 사용하면 오류나는 원인 발견하면 고치겠다 캄
