▲

구글, 웹 검색 제품 및 Programmable Search Engine 기능 업데이트

 (programmablesearchengine.googleblog.com)
1P by GN⁺ 21시간전 | ★ favorite | 댓글 1개
  • Google은 Programmable Search Engine(프로그래머블 검색 엔진) 을 개편해 웹사이트별, 엔터프라이즈, 전체 웹 검색 등 세 가지 사용 사례별 솔루션으로 단순화함
  • 사이트 전용 검색은 ‘Programmable Search Element’로 통합되어, 최대 50개 도메인까지 무료로 지정 가능
  • 고급 기능이 필요한 기업 고객은 Vertex AI Search를 통해 AI 기반 대화형 검색과 엔터프라이즈급 기능을 이용 가능
  • 전체 웹 검색이 필요한 파트너는 별도 신청을 통해 Google의 전체 인덱스 접근이 가능한 풀 웹 검색 솔루션을 사용 가능
  • 모든 전환은 2027년 1월 1일까지 완료해야 하며, 이번 변화는 개발자 파트너에게 더 집중된 검색 경험을 제공하기 위한 조치임

Programmable Search Engine의 진화

  • Programmable Search Engine은 학술기관부터 소매 웹사이트까지 다양한 파트너가 자체 사이트 내 검색 기능을 제공하도록 지원
  • Google은 앞으로 각 사용 사례에 맞춘 고도화된 솔루션을 제공해 사용자와 파트너 모두에게 더 높은 품질의 검색 경험을 보장할 계획
  • 이번 개편은 제품 단순화와 현대화를 목표로 하며, 사용 목적에 따라 최적의 도구를 선택할 수 있도록 구조를 재정비함

검색 요구별 명확한 경로

  • 사이트 전용 검색: Programmable Search Element(‘Search Element’)가 특정 콘텐츠 중심의 검색 경험을 구축하는 최적 도구로 유지
    • 최대 50개 도메인까지 지정 가능하며, 특정 청중을 대상으로 한 콘텐츠에 적합
  • 엔터프라이즈급 검색: AI 기반 대화형 검색과 엔터프라이즈급 그라운딩 기능을 제공하는 Google Vertex AI Search를 지속 제공
  • 전체 웹 검색: 지정된 도메인 외의 전체 웹 인덱스를 검색해야 하는 파트너를 위해 풀 웹 검색 솔루션을 제공
    • 해당 기능 사용을 원할 경우 Google 폼을 통해 관심 등록 및 세부 정보 요청 가능

더 강력한 도구로의 전환 계획

  • Google은 파트너가 새 솔루션의 잠재력을 최대한 활용할 수 있도록 전환 기간을 2027년 1월 1일까지로 설정
  • Search Element 사용자 중 50개 이하 도메인을 검색하는 경우, 기존 기능을 그대로 유지 가능
  • 50개 초과 도메인 또는 ‘Search the entire web’ 옵션을 사용하는 경우, 풀 웹 검색 솔루션으로 전환 필요
    • 전환 완료 시한은 2027년 1월 1일
  • Custom Search JSON API 사용자는 50개 이하 도메인에서는 Vertex AI Search로, 전체 웹 검색이 필요한 경우 풀 웹 검색 솔루션으로 전환 가능

새로운 엔진 설정 변경

  • 2026년 1월 20일 이후 생성되는 모든 신규 엔진은 ‘Sites to search’ 기능을 반드시 사용해야 함
  • 기존 엔진은 영향을 받지 않으며, 2027년 1월 1일까지 ‘Search the entire web’ 옵션 사용 가능
  • 이 변경은 더 집중된 제품 개발과 향상된 검색 경험 제공을 위한 기반 마련

향후 방향

  • Google은 이번 진화를 통해 개발자 파트너에게 더 나은 검색 경험과 맞춤형 도구를 제공할 계획
  • Programmable Search Engine 팀은 파트너와 함께 미래의 검색 생태계를 구축하겠다는 의지를 표명
▲
GN⁺ 21시간전  [-]
Hacker News 의견들

  • Google이 Programmable Search(구 Custom Search) 의 정책을 조용히 변경했음
    이제 새 검색 엔진은 최대 50개의 도메인만 검색할 수 있고, 기존의 전체 웹 검색 기능은 2027년 1월 1일까지 종료 예정임
    전체 웹 검색이 필요한 경우, 이제는 Vertex AI Search 같은 엔터프라이즈 솔루션을 위한 “관심 등록 폼”으로 안내함
    가격 공개도 없고, 응답 보장도 없음
    사실상 인디·니치 검색엔진 시대의 종말을 의미하는 변화로 보임
    관련 공지 링크: Google 지원 문서

    • DuckDuckGo는 Microsoft Bing Custom Search를 사용 중이며, 훨씬 안정적인 시스템이라고 생각함
      Google처럼 언제든 서비스를 종료할 걱정이 없음
      customsearch.ai
    • 만약 Google이 항소에서 패소하거나 Partial Stay 요청이 기각되면, 법원 판결에 따라 Google은 “Qualified Competitors”에게 전체 웹 검색을 공급 의무를 지게 됨
      관련 문서: 법원 판결 PDF
    • 나는 직접 자체 웹 인덱스를 구축했음. 현재 3,400만 개 문서를 색인 중임
      greppr.org
      타인의 인프라에 의존하는 건 위험함. Google Graveyard는 실제로 존재함
    • “search the entire web” 기능이 있었다는 걸 오늘 처음 알았음
      사실상 Google이 자기 검색을 포장해 다른 사람이 광고 붙여서 팔 수 있게 했던 셈이라 놀라움
    • 이번 변경으로 영향을 받는 니치 검색엔진이 어떤 것들인지 궁금함

  • 이번 사례는 독점 API에 의존하는 위험성을 잘 보여줌
    Twitter API 제한처럼, 플랫폼이 점점 생태계를 닫아가는 전형적인 패턴임
    대안으로는

    1. Meilisearch, Typesense 같은 도구로 자체 인프라 구축
    2. SerpAPI 같은 우회 서비스 사용(단, Google이 법적 조치 중)
    3. 데이터 소스를 직접 통제하는 특화 검색엔진으로 전환
      핵심 교훈은 ‘핵심 가치를 스스로 소유해야 한다’는 것임
      Google의 메시지는 명확함 — “인디 검색은 끝났음, 엔터프라이즈 요금을 내거나 떠나라”는 뜻임

  • 관련 논의: Kagi와 Google 판결의 영향

    • Kagi 글에 따르면 Google은 웹 인덱스 데이터(크롤 메타데이터, 스팸 점수 등) 를 원가 수준으로 제공해야 함
      그런데 이번 조치가 그 판결과 모순되는 것처럼 보임
      아마도 Google이 기존 통합 방식을 없애고, Kagi나 Ecosia 등이 불편한 방식으로 데이터를 구매하게 만들려는 듯함

  • 유럽에서는 Qwant와 Ecosia가 자체 검색 인덱스를 구축하기 위해 협력 중임
    EUSP 프로젝트

    • 좋은 시도이지만 너무 늦게 시작해서 영향력이 제한적일 것 같음
      그래도 2025년 말까지 프랑스 검색 쿼리의 30%를 목표로 함
      프로젝트 상세

  • 이번 변화는 사실상 Startpage와 Ecosia 같은 Google 기반 화이트라벨 검색엔진에 큰 타격을 줄 것임
    Bing 외에 대안이 거의 없는데, AI 기업들(Perplexity, Anthropic)은 자체 인덱스를 구축한 듯함

    • 참고로 Mojeek은 90억 페이지 이상을 색인한 자체 웹 검색 API를 제공함
      Mojeek API

  • 나는 “Google Search in a TUI”라는 토이 프로젝트를 만들고 있었는데, 이번 정책으로 완전히 방향을 바꾸게 됨
    원래 Brave Search를 백엔드 옵션으로 추가하려 했는데, 이제는 기본값으로 바꿀 예정임
    이번 변화가 결정적인 계기가 되었음

  • 나도 직접 토이 검색엔진을 만들어보고 싶은데, 실제로 해본 사람이 있는지 궁금함

    • 나는 2021년에 시작해서 지금은 11억 문서를 색인 중임
      단일 서버로 운영하지만, 규모 확장과 품질 유지가 가장 어려움
      수백만 문서까지는 쉽지만, 수십억 단위로 가면 완전히 다른 문제임
      개발일지: Marginalia Devlog
      실제 검색엔진: Marginalia Search
      현재 인덱스 압축 작업 중이라 성능이 다소 떨어짐
    • YaCy라는 분산형 검색엔진도 있음
      사용자들이 웹을 크롤링하고 서로의 인덱스를 공유하는 토렌트형 구조임
      실제 검색엔진으로는 부족하지만 개념은 흥미로움
    • 하지만 Google이 아니면 웹 크롤링 차단에 부딪히기 쉬움

  • 요즘 AI 크롤러가 폭증했다는데, 그렇다면 새로운 전체 웹 데이터셋이 많이 생겼을 것 같음
    이런 데이터셋을 API로 제공하지 못하는 이유가 뭔지 궁금함 — 품질 문제인지, 업데이트 주기 때문인지
    사실상 새로운 비즈니스 기회가 될 수도 있음

    • “AI 크롤러가 서버를 마비시킨다”는 말은 과장임
      1990년대 하드웨어로도 수십억 요청을 처리할 수 있었음
      페이지를 매번 생성하지 않고 변경 시에만 갱신하면 충분함

  • Bing, Ecosia, Qwant 같은 경쟁 인덱스가 정말로 객관적으로 열등한지, 아니면 단순히 Google의 관성 때문인지 궁금함
    이번 변화가 오히려 경쟁 촉진으로 이어질 수도 있을까 생각함

    • Bing은 최근 API를 종료했고, 원래도 비용이 매우 높았음
      지금은 프로그래밍 방식으로 검색결과를 얻을 방법이 거의 없음
    • Google Programmable Search의 장점은 무료이고, AdSense 연동으로 수익화도 가능했음
      반면 Bing은 쿼리당 요금을 부과함
      Ecosia와 Qwant는 Bing과 라이선스 계약을 맺어 일반 사용자보다 저렴하게 사용 중임
    • 영어 검색에서는 다른 인덱스도 충분히 쓸 만하지만, 소수 언어 검색에서는 Google이 거의 유일한 선택지임
      다른 엔진이 그 규모에 도달하기는 어려움
    • Bing의 인덱스는 Google보다 작고, Reddit 같은 사이트는 Google과 독점 검색 계약을 맺고 있어서 결과 품질이 떨어짐
    • 영어 외 언어에서는 대부분 품질이 형편없음, 수십억 사용자가 여전히 Google에 의존할 수밖에 없음
답변달기