1P by GN⁺ | ★ favorite | 댓글 1개
  • a16z는 오픈소스 AI가 AI 생태계의 핵심 기반이라고 보고, 개발자들의 자원 격차를 줄이기 위해 Open Source AI Grant를 시작함
  • 폐쇄형 모델과 경쟁하는 오픈소스 모델이 늘면서, 개인과 소규모 팀의 미세조정·최적화 작업이 모델 활용성을 끌어올리고 있음
  • 지원 대상은 instruction-tuning, 검열 없는 LLM, 로컬 실행용 양자화, 추론 도구, LLM 보안 연구처럼 기술 경계를 넓히는 프로젝트임
  • 오픈소스 AI는 모델 규모가 커질수록 미세조정에도 많은 GPU 컴퓨팅 자원이 필요해, 전통적 인프라 프로젝트보다 자원 부담이 큼
  • 이 보조금은 투자나 SAFE note가 아니며, 수혜자는 재무적 수익 압박 없이 오픈소스 작업을 이어갈 수 있음

a16z Open Source AI Grant 발표

  • a16z는 Open Source AI Grant program으로 소수의 오픈소스 개발자를 보조금 형태로 지원함
  • 지원금은 투자나 SAFE note가 아니며, 개발자가 재무적 수익을 만들어야 한다는 압박 없이 작업을 계속하도록 돕는 구조임
  • a16z는 번성하는 오픈소스 생태계가 AI의 미래를 만드는 데 필수적이라고 봄

폐쇄형 모델과 경쟁하는 오픈소스 AI

  • 오픈소스 생태계에서는 폐쇄형 대안과 경쟁하는 오픈소스 모델이 등장하고 있음
  • 수백 개의 소규모 팀과 개인이 모델을 더 유용하고 접근 가능하며 성능 좋게 만들기 위해 작업 중임
  • 이런 프로젝트는 오픈소스 AI의 기술 수준을 끌어올리고, 기술에 대한 더 견고하고 포괄적인 이해를 돕는 역할을 함

GPU 자원이 병목이 되는 이유

  • 프로젝트를 만드는 사람들은 작업을 끝까지 추진하거나 장기적으로 유지할 자원이 부족한 경우가 많음
  • AI 프로젝트에서는 전통적 인프라보다 자원 문제가 더 크게 드러남
    • 모델 미세조정에도 상당한 GPU 컴퓨팅 자원이 필요함
    • 오픈소스 모델이 커질수록 필요한 자원도 함께 늘어남

보조금이 향하는 작업 영역

  • 지원 대상은 오픈소스 AI 모델과 도구의 실용성을 높이는 여러 작업을 포함함
    • 기본 LLM에 대한 instruction-tuning
    • 검열 없는 LLM 미세조정
    • 저전력 머신에서 모델을 실행하기 위한 최적화
    • 모델 추론을 위한 새로운 도구 구축
    • LLM 보안 이슈 연구
    • 그 밖의 오픈소스 AI 관련 작업

첫 번째 보조금 수혜자와 프로젝트

댓글과 토론

Hacker News 의견들
  • AI grant 수혜자 중 한 명이고, fast.ai에서 하는 일을 지원받게 되어 a16z에 매우 감사함
    내 grant는 Lambda Labs의 Scalar 서버 구매에 쓰였고, 이전 세대 A6000 GPU 8장으로 구성할 수 있었음
    NVIDIA가 최근 그중 3장을 제공해줬고, Lambda Labs도 원가로 제공해준 덕분이기도 함
    a16z는 이 grant를 제공했다는 사실을 알리는 것 외에는 지분이나 대가를 전혀 요구하지 않았고, 과정도 매우 매끄러웠음
    양식도 거의 없었고 한 장짜리 계약서만 서명했으며, 계약은 명확하고 공정했고 a16z가 어떤 권리도 받지 않는다고 명시되어 있었고, 서버 구매 대금도 바로 송금해줬음

    • 여기서 말하는 이전 세대 A6000 GPU는 “RTX A6000”과 “RTX 6000 Ada Generation”을 구분하는 것임
      전자는 Ampere 아키텍처로 GeForce 30 시리즈에 해당하고, 후자는 Ada 아키텍처로 GeForce 40 시리즈에 해당함
      Nvidia는 기술 세대 이름을 USB Implementers Forum만큼 형편없이 지어도 된다고 확신하는 듯함
    • a16z가 grant 제공 사실을 알리는 것 외에는 지분이나 대가를 요구하지 않았고, 계약서에 어떤 권리도 받지 않는다고 명시했다는 건 꽤 관대한 방식이고 정직한 사업자라는 강한 신호로 보임
    • 필요한 곳에, 고마워할 사람에게, 아무 조건 없이 지원이 들어가는 사례를 보니 정말 기쁨
      이런 일이 더 많았으면 좋겠고, jph00의 작업에 행운을 빔
  • HN 여러분, 이 새로운 이니셔티브를 발표하게 되어 매우 기쁨
    이 프로그램은 상업 회사를 추구하지 않는 개인, 팀, 해커를 지원하도록 설계되었음
    그럼에도 이런 프로젝트들은 오픈소스 AI의 최전선을 밀어 올리고, 기술이 발전하는 과정을 더 견고하고 포괄적으로 이해하는 데 도움을 줌
    작게나마 기여하게 되어 자랑스럽고, 첫 cohort와 이 분야에 기여하는 모두에게 감사함

    • 좋은 프로젝트라고 생각함
      개인이 서로 다른 학습 데이터 아이디어로 이 분야에 기여하려면 먼저 스스로를 입증해 관심을 받아야 하는지, 아니면 제안서를 제출할 방법이 있는지 궁금함
      내 경우 연산 비용이 꽤 비싸서 개념 증명용 테스트 몇 번은 감당할 수 있지만 그 이상은 어렵고, 4090 한 장으로는 llama70b를 1it/s보다 빠르게 돌릴 수 없음
    • GPU는 어디서 확보하는지 궁금함
  • 목록에 oobabooga가 있어서 매우 반가움
    모두가 각자 다른 방식으로 기여하고 있고, ooba는 여러 모델을 시험해볼 수 있는 훌륭한 포털 역할을 해줌
    README에도 텍스트 생성 분야의 automatic 1111 같은 존재가 되고 싶다고 되어 있음
    나 같은 입문자가 이 새로운 세계를 탐색하기에 ooba는 좋은 진입점임

  • 현재 grant 수혜자들을 보면 축하하고 싶음
    모두 영향력이 큰 개인이나 팀이고, 충분히 조사해서 돈이 가야 할 곳에 넣었다는 게 드러남

  • 초보 질문인데, 25,000달러가 있으면 GPU 몇 장을 사서 “GPU Poor”를 지원하는 데 보탤 수 있을까?
    이런 걸 직접 구축하는 DIY 가이드 같은 게 있는지 궁금함
    현금을 기부하고 싶다기보다는 GPU 몇 장을 어떻게든 세팅해서 사람들이 원가에 쓸 수 있게 하고 싶음

    • 25K면 서버를 빌릴 돈이 되거나, 대충 조립해서 8x4090 머신 비슷한 걸 만들 수 있음
      대부분이 돌리고 싶어 하는 8xA100, 8xH100 서버는 20만 달러가 넘고, 돈이 있어도 지금은 구하기 매우 어려울 가능성이 큼
    • vast.ai를 쓰면 이런 제공을 시작할 수 있고, 호스팅 문서도 꽤 있음: https://vast.ai/docs/hosting/hosting
      특정 사용자 집단으로 제한할 수는 없겠지만, vast.ai를 쓰는 쪽은 거대 기업보다는 주로 작은 회사, 개인, 연구자일 테니 사실상 “GPU Poor”를 돕는 셈임
    • 그 예산이라면 사는 것보다 스팟/임대 인스턴스를 쓰는 편을 솔직히 추천함
      A100은 시간당 약 2달러 정도이고, 어려운 부분은 큰 할당량을 확보하는 것임
      학습 작업은 어차피 꽤 들쭉날쭉해서, 큰 단일 실행 전에 작은 실험을 많이 돌리는 경우가 흔함
    • 악의를 덧씌우려는 건 아니지만, 이건 자원을 기부한다기보다는 콘도를 사서 임대료로 대출을 갚는 것에 더 가깝지 않나 싶음
    • 위치는 동부 해안, 뉴욕이라고 가정함
  • 이건 정말 멋짐
    목록에 내가 쓰던 도구들이 많이 보여서 금전적 지원을 받는 걸 보니 좋음
    Ollama도 곧 목록에 들어가면 좋겠음
    시험해보고 싶은 재미있는 아이디어가 있는데, 아마 8X A100 몇 시간과 EvolveInstruct 스타일 데이터가 필요해서 1,000달러 이상 들 것 같음
    grant #2에 합류할 수 있을지 보려고 코드를 준비해보려 함

    • 좋음, MVP 잘 되길 바람
      의견도 정말 고맙고, Ollama 쪽 사람들과도 만나고 있음
  • 사람들이 의존하는 다른 오픈소스 LLM 프로젝트는 뭐가 있을까?
    향후 grant 수혜자 아이디어를 찾는 차원임
    좋은 이니셔티브이고 첫 선정도 훌륭하며, 관리 보수를 아주 잘 쓰는 방식임
    추가 후보를 생각해보려 해도 TheBloke, vLLM, oobabooga처럼 내가 추천했을 만한 곳이 이미 포함되어 있어서 어렵다
    향후 수혜자 후보로는 MLC LLM, ExLlama, text-generation-inference의 오픈소스 포크, AutoGPTQ가 떠오름

    • 훌륭한 제안이고 고마움
  • 관련된 분들 축하함
    이게 어느 정도 브랜딩/마케팅 동기를 가진다는 걸 알더라도, a16z가 최근 몇 년간의 crypto나 얕은 미디어 양산보다 실제 고충 해결에 더 맞춰지는 모습은 좋음
    계속 이렇게 해주면 좋겠고, 더 많은 “thought leader”와 벤처캐피털도 따라오길 바람

    • 아니, 여전히 세상을 구하는 중임
      다만 이제는 crypto가 아니라 AI로 구한다는 차이만 있음
      https://a16z.com/2023/06/06/ai-will-save-the-world/
    • 이 이니셔티브가 실제 고충 해결에 도움이 된다는 데 동의함
      다만 “Crypto”를 옹호하려는 건 아니지만, 실제 고충을 해결한다는 기준은 꽤 주관적이지 않나 싶음
      예를 들어 많은 사람과 회사에는 광고 클릭률을 높이고 crypto/gas 수수료를 줄이는 것도 실제 고충이자 필요일 수 있지만, 그 문제가 내게 중요하지 않을 뿐일 수 있음
  • 놀라움
    첫 선정이 정말 탄탄하고, 자연스럽게 일어나는 유기적 실험의 큰 부분이 이들에 직접 의존하고 있음

  • “Eric Hartford: 검열 없는 LLM 미세조정”이 진행된다는 게 매우 기쁨
    LLM은 매우 가치 있는 도구가 될 텐데, 이런 도구에 검열이 내장되는 건 꽤 불안함
    안전과 윤리라는 명목으로 Word가 “나쁜 단어”를 입력하지 못하게 막는 상황을 상상해보면 됨