7P by xguru 2023-03-27 | favorite | 댓글과 토론
  • OpenAI가 공개한 chatgpt-retrieval-plugin을 LLaMA에서 활용하는 PoC
  • 연동은 성공이지만 제한적임:
    • LLaMA 모델 자체가 ChatGPT에 비해 파인튜닝이 필요(Alpaca처럼)
    • API스키마를 읽어서 API호출을 만드는 부분이 잘 안됨. OpenAPI 스키마에 대한 파인튜닝도 필요할 듯
  • 미래를 위해서 Foundation Model Plugin Protocol을 제안 (SMTP, LSP 같이)
    • Model-agnostic : GPTx, LLaMA, Bard 등의 모든 파운데이션 모델 지원
    • Modal-Agnostic : 텍스트 포함 다양한 입력/출력도 지원