NotebookLlama - 구글 NotebookLM의 오픈 소스 버전

 (github.com/meta-llama)
1P by GN⁺ | ★ favorite | 댓글 1개
  • NotebookLlama 레시피의 기존 GitHub 페이지는 구현 문서가 아니라 새 위치로 이동했음을 알리는 안내 페이지임
  • 새 위치는 Building a Notebook Llama: A Step-by-Step Guide 문서로 연결됨
  • 기존 경로 본문에는 같은 이동 안내가 반복되어 있어, 실제 내용은 새 문서에서 확인해야 함
  • 기존 북마크와 스크립트가 이 GitHub 경로를 참조한다면 새 URL로 업데이트가 필요함
  • 현재 페이지에는 설치법, 코드 구조, 실행 절차 같은 NotebookLlama 사용법이 포함되어 있지 않음

NotebookLlama 레시피의 새 위치

기존 경로를 쓰는 경우

  • 기존 북마크나 스크립트가 이 GitHub 페이지를 가리킨다면 새 문서 URL로 바꿔야 함
  • 현재 GitHub 페이지 본문에는 이동 안내와 감사 문구가 반복되어 있음

현재 페이지에 없는 내용

  • 이 페이지에는 NotebookLlama의 설치법, 코드 구조, 실행 절차, 기능 설명이 포함되어 있지 않음

함께 보면 좋은 글 β

GN⁺   [-]
Hacker News 의견들

  • NotebookLM “에피소드”를 들을수록 Google이 기존 멀티모달 기반 모델 위에서 바로 팟캐스트를 생성하는 2인 대화 모델을 학습시킨 것 같다는 확신이 커짐
    두 화자가 서로 끼어들고 겹쳐 말하는 방식이 소름 끼칠 정도로 인간 같음
    실제 팟캐스트와 녹취록을 대규모로 두고, 녹취록에서 합성 “입력 자료”를 만들어 학습 샘플로 넣었을 가능성도 있어 보임
    예를 들어 The Daily 한 에피소드를 가져와 한 언어 모델이 그 팟캐스트 내용을 요약하는 가상의 글을 쓰게 한 뒤, 그 글을 2인 화자 모델에 넣고 출력 오디오를 녹취해 입력 글과 얼마나 잘 맞는지 보는 식일 수 있음
    핵심 세부사항을 놓치고 있을 수도 있지만, 이 팟캐스트의 자연스러움이 단순 텍스트 녹취록에서 나올 수는 없다고 봄

    • swyx의 흐름을 이어가면, 이 TTS는 Google이 드디어 지하실에 묵혀두던 Soundstorm을 내놓은 것일 가능성이 큼
      https://google-research.github.io/seanet/soundstorm/examples...
    • 좋은 소식과 나쁜 소식이 있는데, 그렇게 하지는 않았음
      오디오 모델을 이끈 엔지니어를 인터뷰한 첫 팟캐스트가 있었음: https://www.latent.space/p/notebooklm
      요약하면 대본과 오디오는 별도로 생성된다고 확인했지만, TTS 모델은 오픈소스나 상용으로 접근 가능한 것보다 훨씬 앞서 학습된 상태임
    • NotebookLM에 비슷한 느낌을 받았지만 이상한 점도 하나 봤음
      가끔 진행자 A가 말하고 있는데 갑자기 진행자 B가 그 문장을 끝내버림
      보통 이럴 때는 A가 B에게 무언가를 설명하거나 질문에 답하는 중이라 맥락상 말이 안 되는데, 어떻게 해석해야 할지는 모르겠지만 흥미로운 현상임

  • 이건 사실 꽤 명확하게 오픈소스가 아님: https://github.com/meta-llama/llama-recipes/blob/d83d0ae7f5c...
    LICENSE 파일도 없으니, 지금은 이 코드를 많아야 참고용으로만 쓸 수 있을 것 같음

    • 그대로 쓰기에는 그다지 유용해 보이지 않지만, 탐구하는 접근법 자체는 평문으로 명확하고 잘 문서화돼 있음
      그대로 사용할 수 없더라도 공개 지식에 대한 기여로는 충분히 고마워할 만함
    • README에 적힌 내용과 달라서 실수일 수도 있음: https://github.com/meta-llama/llama-models/blob/main/models/...
      여기서는 Meta Llama 3.2의 라이선스를 가리키고 있음
    • 고맙지만 그래도 그냥 쓸 생각임

  • 이걸 보니 좋음. 기술 좋아하는 사람들은 NotebookLM을 무시하면 위험함
    내가 아는 똑똑하지만 딱히 기술적인 사람들은 대부분 NotebookLM을 압도적으로 AI 킬러 앱처럼 받아들였음
    70대 부모님과 8살 아이 모두 이걸 보고 놀라서 계속 가지고 놀고 있음
    아래에서 누가 짚었듯이, 여기서 말하는 건 정확히 “팟캐스트” 기능임

    • 팟캐스트를 듣지 않는 입장에서는 NotebookLM으로 팟캐스트를 만들지 않으면 어떤 위험을 겪게 되는지 모르겠음
    • 많은 사람에게 멋져 보이는 이유는 이해하지만, 나에게는 시간 절약의 반대임
      말하자면 시간을 잡아먹는 도구에 가까움
      어떤 사람들, 심지어 개발자들까지 글을 읽지 못하거나 긴 텍스트에 위축되기 때문에 존재 의미가 생기는 영상들과 같은 느낌임
      아주 짧은 텍스트 페이지에도 영상을 붙여야 겨우 일부 완화되는 경쟁상 불리함이 있음
    • 잘 모르겠음. “똑똑하지만 기술적이지 않은” 사람들이 읽지 못한다는 뜻인가?
      다른 팟캐스트를 무시하듯 이것도 무시하면 무엇을 놓치게 되는지 모르겠음
      팟캐스트로 뭔가를 배웠다는 사람을 거의 본 적이 없고, 대개 쓸 일 없는 다른 분야의 흩어진 지식 정도였음
    • NotebookLM 전반을 말하는 건지, 아니면 구체적으로 팟캐스트 묘기를 말하는 건지 궁금함
    • 어떤 글이나 블로그 포스트에 대한 NotebookLM 팟캐스트를 들을 때마다, 그냥 같은 글을 AI 텍스트 음성 변환으로 읽어주는 쪽이 훨씬 나았을 것 같았음

  • 지난 몇 달 동안 NotebookLM 비슷한 것, 개인화 뉴스 팟캐스트를 만들어보려 했음 (https://www.tailoredpod.ai)
    가장 큰 문제는 기존의 좋은 TTS API들이 너무 비싸서, Google 모델에 내부 접근권이 없는 일반 회사는 NotebookLM 같은 제품을 만들기 어렵다는 점임
    OpenAI가 그나마 가격 대비 품질이 괜찮은 TTS API를 제공하지만, 그래도 몇 시간 분량 오디오를 무료로 생성하기에는 너무 비쌈
    오픈소스 TTS 모델도 천천히 따라오고 있지만 아직 강한 하드웨어가 필요함. 예: https://github.com/SWivid/F5-TTS

    • 사용자가 있나요? TTS가 병목이면 도울 수 있을지도 모름. 이메일은 프로필에 있음
    • “강한 하드웨어”라면 어느 정도를 말하는지 궁금함

  • TTS 엔진 선택이 꽤 이상함
    오픈 TTS 시스템 기준으로는 어느 것도 최신 수준에 가깝지 않음
    XTTSv2나 새 F5-TTS가 훨씬 나은 선택이었을 것임

    • 그런 엔진을 쓰도록 코드를 언제든 업데이트할 수 있음
      Meta가 GitHub에 뭔가를 공개하는 건 “최고”를 내놓으려는 게 아니라 개념 증명을 주려는 것에 가까움
      그런 TTS 시스템들의 라이선스도 중요해서, 단순히 열려 있다는 것만으로는 부족함
      사용자용 제품이었다면 분명 더 나은 TTS를 썼을 것임
    • 페이지의 개선 필요 항목에 이렇게 적혀 있음:
      “음성 모델 실험: TTS 모델이 자연스럽게 들리는 정도의 한계입니다. 더 나은 파이프라인과 더 잘 아는 사람의 도움으로 개선될 수 있을 것입니다. PR 환영합니다! :)”

  • 샘플 출력이 매우 별로임
    멋진 데모이긴 하지만, NotebookLM 팀이 이미 사용 가능한 것과 거의 같은 기반 모델로 얼마나 큰 히트 제품을 만들어냈는지만 더 강조해 줌

  • 이게 오픈소스 NotebookLM이라기보다는 iPython 노트북 안의 몇 가지 실험에 더 가까운 것 같음
    NotebookLM이 LLM 수준에서 하는 일은 특별히 새롭지 않고, 흥미로운 건 다른 제품들과 다르게 제품으로 포장한 방식이라고 봄
    “팟캐스트” 부분도 사실 큰 말뭉치에 대한 소개나 개요에 가깝고, 훨씬 유용한 건 그 말뭉치를 봇과 대화하면서 인용 출처를 받는 기능임
    다만 이 예시는 LLM으로 프로토타이핑이 매우 빠르다는 점을 보여줌
    API를 아직 만져보지 않은 사람이라면 한번 시도해보길 권함

    • 동의하지 않음
      NotebookLM의 새로움은 두 진행자가 서로 끼어들고 말이 겹치는 방식에 있음
      다른 오픈소스 솔루션은 그렇게 하지 못하고 그냥 번갈아 말할 뿐임

  • LLaMA 모델을 지원하는 또 다른 Jupyter 기반 노트북 솔루션도 있음: https://raku.land/zef:antononcube/Jupyter::Chatbook
    데모 영상은 여기 있음: https://youtu.be/zVX-SqRfFPA

  • 이건 팟캐스트만 만들어주는 것 맞나?
    NotebookLM의 다른 기능에 더 관심이 있음
    팟캐스트는 재미있지만 기믹에 가까움

    • 반대로, 팟캐스트 기능을 여러 번 사용했고 많은 사람에게 공유했음
      원래라면 소화하지 못했을 복잡한 정보를 이해하는 데 좋은 시스템이자 매체였음

  • 이걸 휴대폰에서 로컬로 돌릴 수 있으면 꽤 멋질 것 같음
    업무 문서, 예를 들어 제품 요구사항 문서를 받으면 운전 중 들을 수 있게 팟캐스트로 바꿔주는 상황을 상상해봄
    생산성이 크게 오르고 컴플라이언스 문제도 걱정하지 않아도 될 것 같음

    • ChatGPT나 Claude가 운전 중 쓸 수 있는 Android Auto 앱을 만들어주면 좋겠음
답변달기