2022년 Google, 수억 개 ‘해적’ URL을 색인 전 차단

 (torrentfreak.com)
1P by GN⁺ | ★ favorite | 댓글 1개
  • Google은 USPTO의 불법복제 대응 전략 질의에 맞춰, 합법 콘텐츠의 가용성과 검색 차원의 차단·강등을 핵심 대응 축으로 제시함
  • 2022년 웹 양식으로 접수된 6억 8천만 개 이상 URL 가운데 40% 이상은 Google Search 색인에 없었고, 검색 결과에 뜨기 전에 차단됨
  • 이런 선제적 삭제 요청은 DMCA 의무가 아니지만 권리자들이 대규모로 활용하며, Google은 해당 알림을 사이트 강등 신호에도 반영함
  • Super Bowl, UFC, World Cup 같은 라이브 이벤트에서는 불법 중계가 시작되기 전 예고 페이지도 사전 통지 대상이 될 수 있음
  • 반복 신고 사이트는 검색 결과에서 강등되며, Google은 강등된 사이트가 Search 클릭을 평균 89% 잃는다고 설명함

불법복제 대응의 출발점

  • Google은 USPTO의 향후 불법복제 전략·정책 질의에 답하며 합법 콘텐츠의 가용성을 강조함
  • 20년 넘는 관찰에서 충족되지 않은 소비자 수요가 불법복제의 핵심 동인으로 작용해 왔다고 봄
    • 합법 공급이 수요를 충족하지 못하면 사용자는 불법복제 콘텐츠를 찾음
    • 더 낫고 편리한 합법 대안을 제공하는 것이 불법복제 대응 방법 중 하나임
  • YouTube Music과 YouTube TV는 공급 측면에서 역할을 하며, 검색엔진도 사용자를 불법복제 콘텐츠에서 멀어지게 하도록 조정됨
  • Google은 다른 온라인 서비스 제공자처럼 DMCA 삭제 요청을 처리함
    • 권리자는 Google 검색 결과에서 불법복제 콘텐츠 링크를 발견하면 URL 삭제를 요청할 수 있음
    • 지난 10년 동안 이런 요청은 70억 건 발생함

색인 전 차단과 검색 강등

  • Google은 이미 색인된 URL을 제거하는 데 그치지 않고, 검색엔진에 색인되기 전 신고된 URL도 차단하는 선제적 삭제를 지원함
    • 이 조치는 DMCA가 요구하는 의무는 아님
    • 권리자는 콘텐츠가 Google에 잡히기 전에 신고할 수 있음
  • 2022년 웹 양식으로 접수된 6억 8천만 개 이상 URL 중 40% 이상은 접수 당시 Google Search 색인에 없었음
    • Google은 이런 웹페이지가 검색 결과에 나타나기 전에 차단함
    • 해당 알림은 사이트 강등 신호에도 활용됨
  • 아직 불법복제가 실제로 발생하지 않은 경우에도 삭제 알림이 가능함
    • Super Bowl, UFC 이벤트, World Cup 축구 경기 같은 인기 라이브 방송의 불법 스트림 예고 페이지가 대상임
    • 권리자는 향후 라이브 이벤트를 불법 스트리밍하겠다고 광고하는 웹페이지를 사전 통지할 수 있음
  • 신고된 저작권 URL은 점수표에 추가되며, 자주 신고되는 사이트는 검색 결과에서 적극적으로 강등됨
    • Google은 강등된 사이트가 Search 클릭을 평균 89% 잃는다고 설명함
    • 새 도메인으로 리디렉션해 강등을 피하는 것도 더 어렵게 만들었다고 함
  • Google의 USPTO 제출 서한 전체는 PDF로 공개되어 있음

함께 보면 좋은 글 β

GN⁺   [-]
Hacker News 의견들

  • Yandex는 Google이나 Bing이 쓸모없는 스팸만 내놓는 검색에서 놀라울 정도로 좋음
    Google에서 “watch $MOVIE free”를 검색하면 실제 보유 여부와 상관없이 Netflix, Hulu, Prime, Disney 같은 결과가 먼저 나오고, 나머지는 실제로는 없으면서 있는 척하는 검색 최적화 스팸임
    반면 Yandex는 보통 첫 결과가 바로 원하는 720p나 1080p 영상이고 헛소리가 거의 없음
    예전 Google에 있던 “저작권 삭제 요청으로 제거된 URL을 보려면 클릭” 같은 푸터가 그리움
    스트리밍 서비스는 다 결제하고 있지만, 캐나다에서는 시리즈 영화 5편 중 1편은 Netflix, 2편은 Paramount, 3편은 현지에서 제공 안 됨, 4·5편은 Disney나 Crave에 있는 식이라 지침. TV 시즌도 마찬가지임

    • Google에서 “Watch Oppenheimer Free”를 검색하면 대부분 악성코드나 가짜 미디어 구매 사이트가 나오고, “왜 아직 Netflix나 Hulu에 없는가” 같은 검색 최적화 스팸이 섞여 있음
      결과가 아예 없는 것보다 훨씬 나쁨
    • Yandex 역이미지 검색도 저작권 이유로 거세되지 않았음
      예전 Google 같아 보이지만 러시아어 결과가 훨씬 많음
    • 아직도 Google에서 이런 문구가 나옴: “Google에 제출된 법적 요청에 따라 이 페이지에서 3개 결과를 삭제했습니다… LumenDatabase.org에서 요청 내용을 볼 수 있습니다”와 “미국 DMCA에 따른 신고로 1개 결과를 삭제했습니다…”
      해당 서비스에 가면 이메일을 요구하지만 일회용 이메일로도 원래 차단된 URL을 익명으로 확인할 수 있음
      토렌트 검색할 때 가끔 아직도 이 방식을 쓰고, 클릭 몇 번만 더 하면 됨
    • Yandex Translate도 많은 언어, 특히 동아시아권 언어에서 훨씬 나음
      단어와 동의어를 개별적으로 볼 수 있는 기능은 속어를 볼 때 정말 큰 도움이 됨
    • Yandex.ru는 정치적으로 러시아에 맞지 않는 것만 빼면 검열 없는 인터넷에 가까워 보이고, yandex.com은 영화 검색에서 그만큼 유용한 결과를 주지 않음
      Google.com은 이제 너무 검열되고 망가진 느낌임

  • 제목이 꽤 오해를 부름. 제목처럼 Google이 스스로 나서 URL을 금지한 게 아니라, 저작권자가 콘텐츠가 색인된 뒤가 아니라 색인되기 전에 Google 삭제 요청 양식을 제출한 것으로 보임
    “Search는 제출 시점에 아직 색인에 없는 웹페이지에 대한 통지도 받습니다. 그럼에도 그런 웹페이지가 검색 결과에 나타나지 않도록 선제적으로 차단하고, 이 통지를 강등 신호에 적용합니다”

    • 읽어보면 URL을 포함 허용 목록에서 선제적으로 배제하는 쪽에 가까워 보임
      만약 그 색인 블랙리스트에 접근할 수 있다면 온갖 보기 흉한 것들이 들어 있을 것 같음
    • “차이 없는 구분”임

  • “20년 넘게 우리는 충족되지 않은 소비자 수요가 불법복제의 핵심 동력이라는 것을 봐 왔습니다. 합법적 공급으로 수요가 충족되지 않으면 사용자는 불법복제 콘텐츠를 찾습니다. 그래서 불법복제에 대응하는 가장 좋은 방법 중 하나는 더 좋고 편리한 합법적 대안을 제공하는 것입니다”라고 Google이 씀
    Google이 사람들을 애 취급함. “불법복제”를 정의해 보라. 그리고 누가 그걸 집행해야 하는가
    Google은 검색 엔진과 기타 서비스를 하는 회사일 뿐이고, 집행에 관여해서는 절대 안 됨. 더구나 단독으로 관여하고 그걸 자랑하게 놔두면 안 됨
    법 집행은 법 집행 기관이 하는 것이지 Google이 하는 게 아님. 경찰이었다면 내 영역을 침범한 이 월권에 크게 화가 났을 것임

    • “불법복제”의 정의는 DMCA에 꽤 명확하게 나와 있으니 말장난할 필요가 없음
      Google이 완전히 불법적인 콘텐츠에도 계속 링크해야 한다는 말인가? 사기, 아동 성착취물, 마약까지 전부 Google 색인에 있어야 한다는 뜻인가
      전 세계에는 꽤 명확한 법들이 있고, 어떤 나라는 특정 사이트에 링크하는 것만으로도 불법으로 봄
      불법복제 이용자들은 새 Google을 싫어할 수 있겠지만, Google이 이렇게 해야 한다는 게 뻔하지 않은 척할 일은 아님

  • 컴퓨터를 잘 아는 사람들이 왜 아직도 Google Search를 쓰는지 가끔 궁금함
    떠올릴 수 있는 거의 모든 검색어에서 DuckDuckGo나 Yandex가 꾸준히 더 나은 결과를 줌

    • Google은 답답할 정도로 나쁨. 검색어 앞에 “-”를 붙여 제외해도 그 단어가 첫 수십 개 결과 제목에 그대로 들어 있음
      DuckDuckGo는 약간 낫지만, “-”가 해당 단어를 완전히 없애는 게 아니라 결과 수를 줄인다고 하며 상위 3개 중 하나는 여전히 걸림
      예를 들어 -order를 쓰면서 switch나 rearrange를 검색하고 싶으면 Google에서는 망함. Google은 이 단어들을 서로 바꿔 쓸 수 있거나 충분히 관련 있다고 보고 -order를 완전히 무시함
      Google을 쓰면서 내가 컴퓨터 문맹이 된 것 같음
    • 방금 Yandex를 써봤는데 모든 검색에서 Google보다 나아 보임
      놀랍고, 한동안 기본 검색으로 써보겠음
    • DuckDuckGo는 내 검색어 대부분에서 형편없고 Google과 같은 검색 최적화 스팸 문제를 겪는 듯함
      Yandex는 러시아와의 연관 때문에 신뢰하기 어렵다는 게 안타까움. 검색 품질 자체는 꽤 좋음
      스팸 결과만 나오는 검색에는 Bing Chat을 쓰기 시작했는데, Bing이 직접 답변에서는 거짓말하거나 오도하더라도 근거로 제시하는 링크는 대체로 꽤 좋음
    • Google과 DuckDuckGo를 둘 다 쓰고, 브라우저나 기기에 따라 Brave Search도 쓰는데, 보통은 Google이 나에게 더 나음
    • DuckDuckGo와 Google을 오가며 씀
      평범한 검색어를 넣을 때는 Google이 실제로 찾던 결과를 갖고 있을 때가 있음

  • 이게 수리할 권리 같은 영역에도 영향을 주는지 궁금함
    서비스 매뉴얼이나 회로도 같은 유용한 정보 상당수는 거의 불법복제 영역에 걸쳐 있을 텐데, 최근 훨씬 찾기 어려워진 걸 느낌

    • 지난달 초, 1980년대 이동무선기기의 절판된 매뉴얼을 찾다가 Yandex까지 쓰게 됨
      Google에는 아무것도 없었고 Yandex에도 거의 없었지만, 그래도 답을 조립할 만큼은 있었음
    • 나도 마찬가지고, 그게 Yandex를 더 많이 쓰게 된 이유 중 하나임
      여기 다른 사람들이 말한 것처럼 꽤 잘 작동함

  • 이 금지가 사기와 기만적 디자인 패턴이 있는 불법복제 사이트와는 관련 없는 건가? 마지막으로 uBlock Origin 없이 The Pirate Bay에 들어갔을 때 “당첨되었습니다”나 “지금 무료 스트리밍” 같은 질 나쁜 문구의 광고, 가짜 검색 결과, 성인 광고, UI 위에 보이지 않는 클릭 영역이 새 탭으로 수상한 전체화면 광고를 여는 것들에 폭격당했음
    그런 링크를 따라가 보진 않았지만, 결국 악성코드 설치나 신용카드 입력 요구로 이어졌을 것 같음
    Google 검색 알고리즘이 그런 사이트를 강등하거나 금지한다면 이해할 수 있음. 많은 사람이 이런 사기에 걸릴 것임

    • 이 스레드에서는 그런 검색어의 Google 결과에 사기·악성코드가 더 많이 포함된다고들 함
      실제로 그런지는 모르겠음

  • 저장된 링크에서도 제거함
    https://torrentfreak.com/google-removes-pirate-sites-from-us...

  • 흥미롭게도, 이건 Google에 통지를 보내는 사람들이 Google보다 더 최신 색인을 갖고 있다는 뜻임
    The Pirate Bay가 아직도 의미 있는 곳인지, 아니면 새 경쟁자가 있는지 궁금함
    저작권자들이 직접 크롤러를 돌릴 수도 있지만 그건 그럴 가능성이 낮고 차단하기도 쉬워 보임

  • 최근 Google 검색 때문에 겪는 고생은 이 이미지와 같음: https://bigmemes99.funnyjunk.com/pictures/I+hate+google+so+m...

  • YouTube와 다른 Google 운영 서비스는 TV 프로그램 업로드 같은 불법복제 단속에 최선을 다해야 함
    수익화할 수 없는 사이트에서만 아무도 원하지 않는 “정의”를 과시하는 건 우스움

답변달기