구글이 나에게 완벽한 웹사이트를 망치게 한 사건 (2023)

광고로 인한 사이트 품질 저하 사례 연구

• 저자는 오랫동안 운영해온 사이드 프로젝트 사이트인 "Apportionment Calculator"에 광고를 달기로 결정함.
• Apportionment Calculator는 10년간 구글 검색 결과 최상위를 유지하고 있던 간단하고 유용한 사이트였음.

구글의 광고 정책으로 인해 발생한 문제들

• 구글은 광고를 게재하기 위해서는 사이트에 많은 양의 콘텐츠가 있어야 한다고 요구함.
• 하지만 콘텐츠의 질은 중요하지 않았음.
• 저자는 ChatGPT를 이용해 역사, 시, 수수께끼, 블로그 등 엄청난 양의 쓰레기 콘텐츠를 생성함.
• 예를 들어 블로그에는 국회의원 정수 배분에 집착하는 커플과 그들의 애완동물에 관한 황당한 이야기가 담겨 있었음.
• 이런 과정을 거친 후에야 겨우 구글은 사이트에 광고를 허락해줌.

사례 연구의 결론

• 구글의 광고 정책은 사이트들로 하여금 엄청난 양의 쓰레기 콘텐츠를 만들도록 유도함.
• 사이트 운영자 입장에서는 유용한 콘텐츠보다 많은 양의 콘텐츠 생산에 치중하게 됨.
• 결과적으로 인터넷은 광고와 저품질 콘텐츠로 넘쳐나게 되었음.
• "한 가지 일을 잘하자(DOTADIW)" 원칙을 따르던 유용한 사이트들이 설 자리를 잃어가고 있음.

GN⁺의 의견

• 광고 수익 모델은 결국 콘텐츠의 질을 떨어뜨리는 결과를 초래하는 것 같습니다. 광고에 의존하지 않는 수익 모델을 고민해봐야 할 것 같네요.

• 이런 문제를 해결하기 위해서는 사용자가 직접 원하는 콘텐츠에 비용을 지불하는 구독형 모델을 도입하는 것도 한 방법이 될 수 있겠어요. Substack이나 Patreon 같은 서비스가 대안이 될 수 있을 거예요.

• ChatGPT가 엄청난 잠재력을 가졌지만, 이를 악용해 쓰레기 콘텐츠를 양산하는 데 사용될 수 있다는 점은 경계해야 할 것 같아요. AI 윤리에 대한 사회적 합의와 가이드라인 마련이 시급해 보입니다.

• 콘텐츠 검색과 랭킹에 있어 단순히 양보다는 질을 평가할 수 있는 알고리즘 개발이 필요해 보여요. 구글도 검색 품질 개선을 위해 지속적으로 노력해야 할 것 같네요.

• 궁극적으로는 건강한 인터넷 생태계 조성을 위해 크리에이터를 지원하고 양질의 콘텐츠가 정당한 보상을 받을 수 있는 다양한 수익 구조 마련이 필요할 거예요. 광고 중심의 단선적 접근에서 벗어나, 창의적인 대안들이 나올 수 있기를 기대합니다.

[GN⁺]

Hacker News 의견들

• 작년에 친구와 함께 Nürburgring 초보 방문자용 웹사이트를 만들었음
  첫 방문 때 아쉬웠던 기본 정보를 제공했고, 친구는 위치와 경로를 보여주는 맞춤 지도 UI에 많은 시간을 썼고, 나는 꼼꼼히 조사한 콘텐츠를 많이 작성함
  나중에는 대형 렌터카 회사 중 한 곳에서 협업 가능성을 보자고 초대받았는데, 방문자에게 콘텐츠가 매우 유용했고 공식 캘린더보다 우리 캘린더가 쓰기 쉽다고 봤기 때문임
  검색엔진을 통해 꾸준히 방문자가 들어왔고 성장도 계속됐지만, 3월에 Google이 새 알고리즘을 배포한 뒤 검색 결과에서 사실상 사라져 방문자가 80% 감소함
  많은 시간을 들인 재미있는 프로젝트가 이제는 컴퓨팅 자원 낭비처럼 됐고, Google이 인터넷의 문지기 노릇을 하는 게 싫음

  • Google은 “이 사이트 순위가 좋네. AdSense가 있나? 없네. 순위 내려”처럼 행동하는 듯함
  • 이 문제를 어떻게 풀 수 있을지 궁금함
    큐레이션이라는 작업이나 목표를 개인들에게 분산하려면 어떻게 해야 하고, 전문 큐레이터 발굴을 어떻게 장려하고 가능하게 할 수 있을까?
  • 내 친구는 체코 유학 정보에 관해서는 단연 최고의 웹사이트를 운영함
    15년간 노력했고, 훌륭한 글 수백 개가 있으며, 모든 콘텐츠를 정기적으로 갱신함
    그런데 러시아어로 “education in Czech Republic”을 Google에서 검색하면 상위 100위에도 들지 못함
    1위 사이트는 예비 학생들에게 상당히 과도한 비용을 청구하는 회사 소유이고, 오래됐거나 틀린 정보도 실려 있음
  • 약간 반대로 보자면, 트래픽의 80%가 Google에서 무료로 오고 있었던 셈임
    SEO를 없애면 더 공정하고 일관된 콘텐츠 전파 방식이 저절로 생길 거라는 뜻일까?
    특히 젊은 층은 Google을 떠나는 것 같지만, TikTok 같은 더 불투명하고 덜 공정한 알고리즘으로 가는 느낌임
    Google은 불완전하지만 한동안은 사람들이 그 사이트를 찾게 도와줬고, 앞으로 더 어두운 길이 있을까 걱정됨

• 이 상황은 우리 자신 때문에 더 나빠졌음
  예전에는 인바운드 링크가 좋은 품질 신호였고, 더 많은 사람이 링크할수록 더 중요한 사이트로 여겨졌음
  링크 팜과 SEO 저질 업자들이 항상 악용하긴 했지만, 요즘은 사람들이 더 이상 웹페이지와 웹사이트를 갖지 않고 Twitter, Facebook 같은 사일로에 정보를 넣기 때문에 합법적인 인바운드 링크를 얻기가 거의 불가능함
  이런 서비스들은 링크에 nofollow나 ugc를 붙여 SEO에 반영되지 않게 함
  결과적으로 링크 신호는 링크 팜과 유료 미디어에서만 나오다시피 하고, 수상한 전술로 인터넷을 더럽히지 않으면 검색 결과에 나타나기 어렵게 됨
  우리는 스스로의 선택으로 투표권을 잃었음

  • 검색엔진이 정말 nofollow 링크를 전혀 세지 않는지 확신하기는 어려움
    원래 목적은 알지만 완전히 무시한다고 보면 놀라울 것 같음
    이 페이지 https://developers.google.com/search/blog/2019/09/evolving-n...에서도 nofollow로 설정해도 모든 링크를 순위 산정에 활용한다고 말함
  • nofollow 링크보다 로그인 벽 뒤의 콘텐츠가 문제임
    크롤러가 찾을 수 없는 콘텐츠는 없는 것이나 마찬가지라서, 비로그인 사용자에게 상당량의 콘텐츠를 막는 Facebook이나 Xitter 같은 사이트가 문제임
  • 유일한 신호가 링크 팜에서 나온다면, 그래도 형편없는 콘텐츠와는 꽤 좋은 상관관계가 있음
    단지 Google이 생각하는 방향과 반대일 뿐임
  • 콘텐츠 사이트를 운영하는데 SEO 회사가 돈을 주고 글을 실어달라고 하면, Google 검색 결과 페이지의 안녕을 위해 거절해야 하는 건가?

• 인터넷은 SEO 쓰레기 매립지임 (https://news.ycombinator.com/item?id=20256764)
  약 5년 전에도 SEO가 검색을 망치고 있다는 관련 논의가 있었음
  Google은 검색을 수년째 망쳐왔는데도 독점과 두꺼운 낯짝 덕분에 계속 버티는 듯함

  • “매립지”라는 표현이 정확해 보임
    방금 DDG에서 5/16-24 볼트용 탭 드릴 크기를 검색했더니 이런 쓰레기가 나왔음: https://shuntool.com/article/what-size-drill-os-used-for-a-5...
    최악의 예는 아니고, AI 생성 쓰레기 더미 속에 올바른 정보가 묻혀 있긴 하지만, 드릴 크기를 4개나 알려줘서 참고용으로 쓸 수 없음
    인터넷이 더 이상 정확한 정보를 준다고 믿을 수 없어 Machinery's Handbook 종이책으로 돌아갔음
    10년 전에는 10-24 체결구의 클리어런스 홀을 쉽게 검색할 수 있었는데, 이제는 믿을 수 없는 AI 잡동사니가 나옴
    변하지 않는 표를 찾는 일에서조차 종이책이 온라인 차트보다 낫게 된 건 얼마나 퇴보한 건가
  • 다 같이 Google 사용을 멈춰야 하지만, 대안들이 어떤 면에서는 아직 충분히 좋지 않음
    아마 가장 나은 건 Kagi겠지만, 현실적으로 “보통 사람들”은 검색엔진 서비스에 돈을 내지 않음
    “보통 사람들”은 Google, Google Chrome, 인터넷의 차이도 잘 모를 가능성이 큼
  • 곧 올 합성 콘텐츠의 겨울 때문에, 앞으로 몇 년 안에 AltaVista나 Mozilla식 디렉터리에 다시 의존하게 될 수도 있음
    광고가 Google의 재정적 뼈대이기 때문에 Google이 광고 사업을 멈출 방법은 없어 보임
    어떤 의미에서는 대학 과제였던 검색 가능한 게시판으로 되돌아와, 여기 HN 같은 형태에 기대고 있는 셈임
  • 이 논의는 Ben Gomes가 Google에서 밀려났다는 최근 글보다도 이전임
    내 느낌으로는 2019년 전부터 이미 검색 품질이 나빠지고 있었음
    [0] https://news.ycombinator.com/item?id=40133976
  • Larry Page와 Sergey Brin은 Stanford로 돌아가 박사후연구원을 해야 할 듯함
    물론 아이러니임

• 광고 차단기가 없으면 레시피 사이트가 얼마나 끔찍해 보이는지는 맞는 말이지만, 이 부분은 그냥 틀렸음:
  URL만 봐도 저 사이트들이 무가치한 블로그 스팸이라는 걸 알 수 있다
  스크린샷의 세 결과 중 적어도 둘은 Cookie and Kate, Sally's Baking Addiction 같은 정상적인 베이킹 사이트이고, 온라인에서 대체로 신뢰받는 출처임
  세 번째는 잘 모르겠지만, Google은 실제로 신뢰할 만한 블로그의 레시피를 잘 강조한 것으로 보임
  다만 침입적인 광고 때문에 그 사이트들의 사용 경험이 망가졌다는 점은 여전히 맞음

  • Cookie and Kate를 방금 찾아봤음
    iPad에서 Crispy Roasted Chickpeas의 장황한 설명을 지나 실제 재료까지 가려면 화면을 7번 튕겨야 했음
    재료 목록은 페이지의 작게 찌그러진 조각에 들어 있었고, 동시에 둘러싼 광고가 4개나 되는지 세는 동안 팝업이 전부 가리며 뉴스레터 가입을 권했음
    레시피 자체는 좋아 보임. 병아리콩, 올리브유, 소금, 향신료—이런, 블로그 글을 훔쳐버렸네
    그래도 그 사이트는 무가치한 블로그 스팸에 해당한다고 봄
  • 최근 몇 년 동안 레시피를 많이 찾아보지 않은 것 같아 웃음이 났음
    레시피 검색 결과의 95%는 잡소리와 광고이고, 재료를 확인하는 데만 몇 분씩 걸릴 때도 있음
    아내와 나는 요즘 쓰레기 더미를 뒤지지 않으려고 즉흥적으로 요리함
    실제로 추천할 만한데, 이전 경험을 바탕으로 대충 만들어도 가끔 꽤 잘 나옴
    아니면 단순화한 레시피를 바인더에 넣어 주방 근처에 두면 됨
    레시피 찾으려고 Google에 가는 건 어떻게든 피하는 게 좋음

• 이제 시가총액 상한을 둘 때가 됐을지도 모름
  시가총액이 모든 아프리카 국가 GDP의 중앙값을 넘으면 회사를 쪼개는 식임
  인터넷을 통제하는 Borg는 더 이상 없어야 하고, 수직 통합을 막는 데 도움이 될 것임
  분할된 자회사들이 담합하면 진짜 기업 사형제를 적용해, 주식 가치는 전액 손실, 채권자는 절반 손실, 자산은 공개 경매로 넘겨야 함
  Google은 지금 규모로 존재하면 안 되고, Apple, Microsoft, nVidia도 마찬가지임

  • 시가총액이 사이트 수익화와 무슨 관련이 있는지 모르겠음
    Google이 더 작아지면 이 사이트가 광고주에게 더 매력적으로 보일 거라는 뜻인가?
    광고 회사가 더 많아지면 이 사이트의 가치가 올라간다는 건가?
  • 시가총액은 올바른 신호가 아니고, 수직 통합이 핵심이라고 봄
    최악의 독점적 행태는 거의 항상 한 회사가 공급망의 여러 부분을 통제할 때 생김
    수직 통합이 인기 있는 이유도 당연히 그것 때문임
  • “모든 아프리카 국가 GDP” 같은 임의의 상한을 정하면 많은 사람이 너무 높다거나 낮다고 다툴 것임
    임의 기준이라 반박할 근거도 약함
    해결책은 멋져 보이지만 실제로는 단순함
  • Nvidia는 이런 일률적 규칙이 왜 작동하지 않는지 보여주는 좋은 예임
    Nvidia는 사실상 GPU라는 꽤 특화된 한 가지 일을 하고 있고, IMF 기준 아프리카 국가 GDP 중앙값에 맞춰 200억 달러 미만짜리 10개 이상으로 쪼개는 건 완전히 불필요함
    게임용 GPU만 해도 지난 1년 이익이 약 60억 달러였고, 시가총액은 AI 시장에서 훨씬 더 크게 나오는 걸 알고 있음
    더 강한 반독점법은 분명 필요하지만, 시가총액 제한은 방법이 아님
  • 이런 선호가 정부에도 적용되면 좋겠음
    어떤 정부도 일정 비율 이상의 인구나 생산 능력을 지배해서는 안 됨

• “다른 회사들은 단순히 Google 광고 재판매상이거나, 매우 수상하고, 멀웨어 다운로드를 유도한다는 리뷰가 있었다”는 말은 정말 맞음
  예전에 내 도구들을 광고로 수익화하려고 여러 번 시도했는데, 유일한 방법은 AdSense를 쓰는 것이었음
  말 그대로 품질 있는 대안이 하나도 없다는 게 황당함

  • 웃기게도 일부 Google 재판매상은 Google보다 더 많이 지급함
    어떻게 가능한지 모르겠고, 투자자 돈을 태우는 중인 듯함
  • Microsoft에도 광고 네트워크가 있지 않나?
  • AdSense에도 사람들을 이동통신사 결제로 구독에 끌어들이는 준사기 광고가 있음
    사이트 운영자 입장에서도 막기 어려운데, 계속 새 계정으로 나타나는 것 같음

• 웃기면서도 비극적인 걸 뜻하는 단어가 있을까? 여러 번 크게 웃었음
  이렇게 우울한 주제를 이렇게 웃기게 만든 글쓴이에게 찬사를 보냄

  • 그런 단어는 tragicomic임
    https://www.merriam-webster.com/dictionary/tragicomic
  • 세계가 높은 수준에서도 온갖 방식으로 완전히 미쳐 돌아간다는 게 웃김
  • 읽을 때는 비극적이라기보다 그냥 웃기다고만 느꼈음
  • 정확히 찾는 말은 아닐 수 있지만, schadenfreude가 있음

• 물론 Google이 웹사이트를 나쁘게 만든 건 아니고, 사이트 운영자가 그렇게 바꾼 것임
  순전히 실무적으로 보면 사이트를 바꾼 건 Google이 아니라 본인임
  이유는 사이트를 수익화하고 싶었기 때문이고, 비용만 충당하려는 목적이었더라도 인터넷의 사업 모델이 광고라서 먼저 광고를 떠올린 것임
  하지만 이 사이트는 특정 작업을 수행하는 도구이고, 누가 쓰는지 명확하지 않음
  많은 사람이 쓴다 해도 AdSense에 신호를 별로 주지 못함
  반대로 AdSense는 타깃 사용자 기반 광고를 파는 서비스라서, 원래 사이트는 AdSense에 거의 쓸모가 없음
  그렇다면 방문자에게 어떤 광고가 떠야 한다고 생각하는가? 사용자 맥락을 추론하는 다른 사이트의 탐색 기록에서 파생된 광고인가?
  임의의 쓰레기 웹사이트를 보는 사용자가 특가 제안에 더 쉽게 산만해질까, 아니면 구체적인 이유로 아주 특정한 작업을 하러 온 사용자가 광고에 더 쉽게 산만해질까?
  문제는 Google이 아니라, 웹을 수익화하는 능력이 광고에서 시작해 광고로 끝난다는 점임
  그래서 “무언가를 하는” 사이트는 광고와 궁합이 나쁘고, 자금도 부족해짐
  솔직히 대체 수익화에 대한 묘안은 없고, 가능한 다른 모델은 본업 수입 일부로 사이트를 직접 후원하는 정도임
  물론 그게 원래 하던 모델이었고, 벗어나고 싶었던 방식이기도 함

  • 배경 해석이 흥미로움
    “Google이 사이트 운영자에게 강제로 시킨 건 아니다”라는 말은 맞음
    누가 “X가 나에게 Y를 하게 만들었다”고 할 때마다, 80~90년대 액션 영화 악당이 산업 시설 배경에서 주인공을 몰아붙이며 “네가 날 이렇게 만들었어!”라고 외치는 장면이 떠오름
    엄격한 개인 책임 관점에서는 아무도 당신에게 아무것도 시키지 않고, 선택은 항상 본인의 것이라는 경계가 중요함
    하지만 이 이야기는 그것만이 아님
    Google은 멀쩡한 웹사이트를 망치도록 인센티브를 제공하고 있음
    “사실 Google이 아니라 인터넷, 사람, 기술, 경제학, 열역학 때문”이라고 빠져나갈 수도 있지만, 같은 핵심은 남음
    Google도 이것을 선택했음
    한쪽에는 개인 책임 기준을 적용하면서 다른 쪽은 맥락과 인센티브 때문에 면제한다면 불공평해 보임
  • Google이 사이트 운영자에게 무언가를 강제로 바꾸게 한 건 아니며, 광고를 싣지 않고 사이트를 바꾸지 않을 선택은 분명 있었음
    하지만 사이트 운영자가 AdSense를 쓰기로 결정한 순간, 그 서비스를 쓰려면 Google 요구사항에 맞게 사이트를 바꿔야 했음
    핵심은 광고를 싣기 위해 원래 트래픽을 가져오던 내용과 무관한 쓸모없는 정보를 대량으로 추가해야 했다는 것임
    첫 시도는 왜 거절됐고, 웹사이트를 객관적으로 더 나쁘게 만든 뒤 최종 시도는 왜 승인됐을까?
    사이트에 추가해야 했던 무의미한 정보가 요즘 Google 검색 품질 저하에 기여하고 있고, 이 글은 그 하락을 설명하는 흥미로운 예임
  • “누가 이 사이트를 쓰는지 불명확하다”는 부분은 원래 추적과 분석이 알아내야 하는 것 아닌가?
    광고는 사이트만큼이나, 아니 그 이상으로 방문자 맞춤형이어야 한다고 생각했음
    AdSense가 “타깃 사용자” 기반으로 광고를 판다면 원래 사이트가 쓸모없다는 주장은 어느 정도 맞을 수 있음
    하지만 AI 생성 장황한 글만으로 사이트가 AdSense 심사를 통과할 수 있었다면, 그 글들이 사이트에 타깃 인구통계 라벨을 붙이는 AI나 기계적 작업자에게 어떤 도움을 주는지 모르겠음
  • 도구는 오히려 SEO 강화 수단으로 수익화하는 게 가장 잘 맞음
    그 도구는 페이지 순위가 매우 높을 수 있으니, 도구와 다른 만든 도구들에서 “Made with love by congressblog.com” 같은 링크를 걸고, congressblog.com에 의회 관련 콘텐츠를 많이 채우면 그 사이트에 광고를 붙여 수익화할 수 있었음
    계산기를 망칠 필요는 없었음
    다른 수익화 수단으로는 제휴 링크도 가능함
  • 업데이트된 사이트가 왜 더 나은지 모르겠음
    심사를 통과했으니 더 나은 게 분명하다는 건가?
    글 전체는 심사 과정이 얼마나 우스꽝스럽고 결함이 있으며, 어떤 결과를 낳는지만 보여줌

• Buy Me A Coffee 같은 대체 수익화 방식을 생각해봤는지 궁금함
  “이 작업은 무료로 하고 있습니다 🥺” 같은 괜찮은 메시지를 붙이면 꽤 돈이 들어올 수도 있음
  아니면 수익화할 수 있는 사람에게 사이트를 파는 게 최선일지도 모름
  Google Ads가 원하는 사이트가 아니라는 건 안타깝지만, 대안을 찾는 건 운영자 몫임

  • 광고는 여기서도 충분히 viable해야 함
    광고 생태계가 망가졌다는 걸 개인이 고쳐야 할 일로 만들면 안 됨
    간단한 도구 하나에 커피 한 잔 전체를 부탁하는 것도 썩 맞지 않고 참여자가 많을 것 같지 않음
    소액 후원을 요청할 좋은 방법도 없음
  • 왜 대안을 찾는 책임이 운영자에게 있어야 하나?
    독점과 독점을 향해 가는 기업들이 소비자와 기업 모두에게 해롭다는 걸 인정하면 되는 것 아닌가?
  • “이 작업은 무료로 하고 있습니다” 같은 메시지가 꽤 돈을 벌어준다는 근거가 궁금함
    내가 알기로는 사용자가 후원을 받는다는 걸 알 수 있게 배너를 넣어야 함
    원글 작성자도 지원 페이지에서 후원을 받는데, 사실 그걸 놓친 셈임
    대부분은 후원하지 않기 때문에, 결국 사람들이 싫어하지만 돈은 주는 배너를 사람들이 싫어하면서 돈도 안 주는 배너로 바꾸는 일이 되기 쉽음
  • 예전 방식으로 광고를 할 방법이 있을지도 모름
    회사를 직접 연락해서 광고를 직접 만들면 됨
    왜곡된 AI 중개자가 필요 없음

• 약 2년 전에도 비슷한 일을 겪었음
  관측값과 고도를 바탕으로 산의 적설량을 알고리즘으로 추정하는 사이트를 만들면 멋질 것 같았음
  매우 거친 추정이었지만, 고도 차이가 1만 피트 이상 날 수 있는 1제곱마일 관측값만 쓰는 것보다는 나았음
  호스팅 비용을 내려고 Google Ads를 조금 붙이려 했더니, 긴 형식의 콘텐츠 설명을 추가할 때까지 거절당함
  그래서 유용한 차트와 표 대신 위치, 알고리즘, 검색, 고도가 적설량에 미치는 영향 등을 장황하게 설명하는 글을 넣게 됨
  너무 멍청해서 프로젝트 전체를 삭제하고 다시는 돌아보지 않았음
  실제로 유용했다면 도구를 더 개선하고 구독료를 받을 수도 있었겠지만, 현대 웹에 대해 냉소적으로 변했고 그냥 포기한 뒤 등산하러 갔음

  • 그래서 레시피 웹사이트들이 악마가 꾼 열병 같은 모양이었구나
    재료에 닿으려면 텍스트, 동영상, 광고 블록 30개를 지나 1마일을 스크롤해야 하고, 조리법까지 또 1마일을 내려가야 함
    그런 사이트들은 전부 금지해야 한다고 생각했는데, 이제 보니 Google이 그런 걸 장려하고 있었음
    30년 전 기본 HTML 사이트보다 사용성이 극단적으로 퇴보했음
    문화적·정치적으로 엄청난 규모에서 뭔가 심각하게 잘못됐음
  • Amazon 제휴 계정으로 직접 광고를 만들 수 있을지 궁금함
    예전에는 실제 제품 리뷰에 써봤는데, 어떤 식으로 우회적으로 붙일 수 있을지도 생각해보게 됨