▲KoAlpaca - 한국어 Alpaca 모델 (github.com/Beomi)33P by xguru 2023-03-19 | ★ favorite | 댓글 1개 스탠포드의 Alpaca 모델 학습방식과 동일한 방식으로 학습 백본모델로 Polyglot-ko 5.8B 와 LLaMA 7B 를 이용 LLaMA는 한국어 데이터셋 학습이 부족해서 한국어 성능이 낮음, 한국어 모델을 추가로 학습 LLaMA의 52k 명령어 데이터 셋은 DeepL API로 번역 함께 보면 좋은 글 β Code Alpaca - 코드 생성 명령으로 훈련된 LLaMA Koala: 학술 연구를 위한 대화형 모델(LLaMA기반 챗봇) 오픈소스 언어 모델의 현재 Alpaca: GPT-3.5 수준의 강력한 오픈소스 Instruction-Following 모델 Awesome-Korean-LLM : 한국어 오픈소스 LLM awesome list 댓글과 토론 인증 이메일 클릭후 다시 체크박스를 눌러주세요 ▲luckydaun 2023-03-19 [-]오... 정말 이 생태계가 엄청나게 빠른 속도로 발전하고 있네요. 기존 Transformer 모델도 한국어 현지화 모델과 범용 모델간의 성능차이가 엄청 크던데, 좋은 오픈소스네요. 답변달기