9P by xguru 6일전 | ★ favorite | 댓글 1개
  • xAI의 미션은 우주의 본질을 이해하는 것, 이를 위해 진실 추구를 최우선으로 하는 AI인 Grok을 개발
  • Grok 3는 Grok 2보다 10배 이상 향상된 성능을 보여주며, 이는 뛰어난 팀의 노력과 대규모 컴퓨팅 자원 덕분
    • Grok은 하인라인의 소설 '낯선 땅 이방인'에서 화성에서 자란 인물이 쓴 말로 "뭔가를 완전하고 깊이 있게 이해한다"
    • 공감(Empathy)도 중요한 요소로 작용
  • xAI는 17개월 전 첫 모델을 시작했으며, Grok 1은 314B(3140억) 개의 파라미터를 가진 모델이었음
    • 이후 Grok 1.5, Grok 2를 거쳐 Grok 3 개발로 이어졌으며, 성능이 비약적으로 향상됨
  • 데이터 센터: xAI는 자체 데이터 센터를 구축하여 Grok 개발을 가속함
    • 첫 번째 10만 GPU 클러스터를 가동하는데 122일 걸렸고, 이후 92일 만에 용량을 두 배(200K)로 늘렸음
    • 이는 세계 최대 규모의 완전 연결된 H100 클러스터로, 이 모든 GPU와 컴퓨팅 파워로 그록을 개선해왔음
  • Grok 3: Grok 2 대비 10배 이상 향상된 성능 (실제로는 15배 이상)
    • 1월 초에 사전 학습을 마쳤고, 현재도 계속 학습 중
  • 벤치마크: Grok 3는 일반 수학적 추론, 과학 관련, 코딩 분야에서 뛰어난 성능을 보임
    • 작은 버전인 Grok3 Mini도 경쟁자들과 대등한 수준
    • 특히 고등학교 수학 경시대회(AIME) 문제에서 최고 수준의 성과를 기록
    • 최신 챗봇 평가(Cha Arena)에서 ELO 점수 1,400 이상을 기록하며 모든 모델 중 1위를 차지

Grok 3의 새로운 기능

  • 고급 추론(Advanced Reasoning)
    • Grok 3는 단순한 답변을 내놓는 것이 아니라, 깊이 있는 사고 과정을 거쳐 답을 찾는 기능을 갖춤
    • 문제를 분석하고, 오류를 찾고, 다양한 가능성을 탐색하는 능력을 강화
    • 실제 사례:
      • 화성 여행 궤적 계산: 지구-화성 왕복 궤도를 시뮬레이션하여 시각적으로 출력
      • 새로운 게임 개발: 테트리스(Tetris)와 주마(Zuma)를 결합한 새로운 게임을 즉석에서 생성
  • Grok 3의 실시간 학습 능력
    • 매일 새로운 개선이 이루어지고 있으며, 하루 차이로도 성능 차이가 나타남
    • 테스트 과정에서도 모델이 지속적으로 발전하고 있음
  • Grok 3를 활용한 엔지니어링 개선
    • Grok 3는 내부적으로도 코딩과 문제 해결에 수백 시간의 작업을 단축시킴
    • 수학 및 경쟁 프로그래밍 문제 해결을 통해, 스스로 오류를 감지하고 수정하는 능력을 학습

차세대 기능: Grok 3 기반 에이전트

  • Deep Search (딥 서치)
    • 새로운 AI 검색 엔진, 일반 검색 엔진보다 더 깊이 있는 정보를 찾아줌
    • 여러 사이트의 정보를 분석하고, 최신 정보를 비교하여 가장 신뢰할 수 있는 답변을 제공
    • 예시:
      • 다음 스타쉽(Starship) 발사 일정 조회
      • Path of Exile 인기 빌드 분석
      • March Madness 농구 대회 우승 예측
  • AI 음성 비서(Voice Assistant)
    • 사용자가 실제 대화하듯이 Grok과 소통할 수 있는 기능이 추가될 예정
    • Grok은 단순한 텍스트 변환이 아니라, 목소리 톤, 감정, 억양 등을 고려하여 자연스럽게 대화 가능

Grok 3 출시 및 미래 계획

  • 출시 일정
    • 오늘부터 Grok 3의 베타 버전이 Premium+ 가입자에게 제공
    • X(구 트위터) 앱에서 업데이트를 하면 새로운 기능을 사용할 수 있음
    • 독립형 웹사이트 grok.com전용 Grok 앱(iOS/Android) 출시
  • 새로운 구독 옵션: Super Grok
    • 가장 최신 기능을 빠르게 체험하고 싶은 사용자들을 위한 Super Grok 구독 모델 출시
  • 향후 계획
    • Grok 3 API 출시 예정 (수주 내)
    • Grok 3 오픈소스 공개 예정 (향후 몇 달 내)
    • 더 강력한 차세대 클러스터 구축 중 (기존의 5배 성능)
    • AI 게임 스튜디오를 설립하여 AI 기반 게임 개발에 박차를 가할 예정

결론

  • Grok 3는 AI 모델의 새로운 차원을 열고 있으며, xAI는 이를 더 발전시키기 위해 노력 중
  • 강력한 추론 능력, AI 기반 검색 엔진, 음성 비서 기능을 통해 Grok은 점점 더 진정한 AI 조력자로 발전 중
  • Elon Musk는 앞으로 AI가 Fields Medal(수학계의 노벨상)과 같은 학문적 성과를 달성할 것이라고 전망
Hacker News 의견
  • Karpathy는 Grok의 초기 인상을 OpenAI의 o1-pro 수준이라고 표현함
  • Grok가 한 벤치마크에서 최고 수준에 도달했음
  • LLM 분야의 경쟁이 치열해져 소비자에게 좋은 소식임
    • 독점적인 기업이 모든 가치를 흡수하지 않기를 바람
  • 적은 비용으로도 최첨단 LLM을 구축할 수 있다는 증거가 있음
  • 녹화된 내용이 영감을 주지 못했음
    • 새로운 것이 없었고, 이미 알고 있는 내용이었음
  • 많은 사람들이 OpenAI를 모방하고 있다고 생각함
    • OpenAI가 여전히 무엇을 할 수 있는지를 보여주고 있다고 봄
  • xAI가 빠르게 따라잡았다는 점은 인정해야 함
    • 모델뿐만 아니라 제품에서도 앞서고 있음
  • 경쟁적인 Grok의 가장 좋은 결과는 ChatGPT의 대중적 인식을 깨는 것일 수 있음
  • Karpathy는 이것이 o1-pro 수준이라고 믿음
  • OpenAI가 기술적 장벽이 없다는 것을 다시 증명함
    • Elon의 OpenAI 인수 제안이 타당하다고 봄
  • Elon은 중국에서 인기가 많아 AI 엔지니어를 쉽게 확보할 수 있음
    • xAI/XSpace/Neurallink 주식을 제공할 수 있음
  • OpenAI의 가치를 1000억 달러 이상으로 평가하는 투자자들에게 행운을 빔
  • Grok 2의 가중치를 공개할 계획임
  • LLM이 개인화된 광고를 삽입하는 미래를 상상해 봄