https://huggingface.co/microsoft/wavecoder-ultra-6.7b
mit 라이센스
openai 데이터로 만들었다네… ms 는 사용해도 되는건가? ㅋㅋㅋㅋ
그나저나 humanEval 이 놀랍네요.
데이터세트 생성하면 안된다는거죠? 자기들만 만들 수 있다는거군요!
WaveCoder 모델은 OpenAI 모델에 의해 생성된 합성 데이터에 대해 훈련된다. 모델과 데이터 세트를 사용할 때 OpenAI의 이용 약관에 주의를 기울이십시오.
Model | HumanEval | MBPP(500) | HumanEval Fix(Avg.) | HumanEval Explain(Avg.) |
---|---|---|---|---|
GPT-4 | 85.4 | - | 47.8 | 52.1 |
WaveCoder-DS-6.7B | 65.8 | 63.0 | 49.5 | 40.8 |
WaveCoder-Pro-6.7B | 74.4 | 63.4 | 52.1 | 43.0 |
WaveCoder-Ultra-6.7B | 79.9 | 64.6 | 52.3 | 45.7 |