카카오의 한국어 AI언어모델 KoGPT, 점수 과장됐다
(aitimes.com)- 카카오브레인이 만든 GPT-3 모델의 한국어 특화 버전 KoGPT의 성능을 본래 점수보다 높게 공개
- 코드상 문제로 테스트 과정에서 초기화를 하지 않고 평가한 점수 그대로 기입
- 리포트에 밝힌 점수보다 5점 정도 낮아.. 평가 공정성 훼손
- 카카오브레인이 만든 GPT-3 모델의 한국어 특화 버전 KoGPT의 성능을 본래 점수보다 높게 공개
- 코드상 문제로 테스트 과정에서 초기화를 하지 않고 평가한 점수 그대로 기입
- 리포트에 밝힌 점수보다 5점 정도 낮아.. 평가 공정성 훼손