GN⁺ 2025-04-17 | parent | ★ favorite | on: 2025 AI Index Report(hai.stanford.edu)
Hacker News 의견
  • 이 보고서의 데이터를 Google Drive의 CSV 파일로 제공하여, 이를 SQLite 데이터베이스로 변환해 Datasette Lite로 탐색할 수 있게 했음
    • 가장 흥미로운 테이블은 다양한 모델에서의 편향 예시를 보여줌
  • 11번 항목(AlphaFold3 vs Vina, Gnina 등)에 대한 반박을 Substack에 게시했음
    • Gnina는 Vina의 결과를 신경망으로 재평가한 것이라 동일한 우려가 적용됨
    • AI에 대해 낙관적이지만, 이번 비교는 잘못되었음
    • 새로운 약물 후보에 일반화할 수 있는 방법이 필요하지만, 반복적인 데이터셋으로 평가되었음
  • AI가 인간보다 뛰어나다는 보고서를 자주 보지만, 일상적인 문제 해결에 도움을 받지 못했음
    • Claude에게 수백 줄의 코드와 문제 위치를 제공했지만, 문제를 해결하지 못했음
    • LLM이 특정 출력에 집착하는 경향이 있음
    • Google 검색과 비슷하게, 구체적인 검색을 시도해도 같은 결과를 반환함
  • 환경 영향에 대한 장이 없다는 점이 놀라움
    • 유럽, 특히 프랑스에서는 AI 사용을 비판하는 주요 논점임
    • 예술 도용, 일자리 파괴, 허위 정보 생성 용이성, 저소득 국가 AI 트레이너의 근무 조건 등이 포함됨
    • 개인적으로 AI에 반대하지 않으며, 피드에서 자주 보는 논점을 나열한 것임
  • 각 장이 개별 PDF로 제공되며, 전체 보고서는 456페이지임
  • "AI의 까다로운 벤치마크 성능이 계속 개선되고 있음"
    • 더 많은 AI 모델이 이러한 권위 있는 벤치마크에 맞춰 조정되고 있다고 느낌
  • 웹사이트가 이미지를 새 탭에서 열기 어렵게 만드는 이유에 대한 질문이 있음
    • URL을 복사하면 노이즈 이미지로 연결되지만, AWS S3에서 원본 이미지를 다운로드할 수 있음
    • 비기술적 사용자를 겁주기 위한 것인지 의문임
  • Stanford의 과거 AI 보고서는 상당하고 비판적이었음
    • 현재 보고서는 여러 작은 보도 자료를 하나로 묶은 것처럼 보임
    • AI가 대학에서 기업으로, 연구 논문에서 보도 자료로 이동했음
    • OpenAI의 GPT 관련 보도 자료는 유용한 정보 없이 통계만 나열했음
  • 생활 수준이 향상될 것이라고 확신함
    • 동일한 시간에 더 효과적인 작업을 수행할 수 있어 생산성이 증가하고 비용이 저렴해질 것임
    • 주식 시장에서 이 효과가 어떻게 나타날지는 확신하지 못함
  • 미국이 여전히 최고 AI 모델을 생산하지만, 중국이 성능 격차를 좁히고 있음
    • 대부분의 연구자는 국가가 아닌 똑똑한 사람들과 멋진 것을 만드는 데 집중함
    • 세계 유일의 제조 강국과의 전쟁을 원하지 않음
    • 중국과의 AI 경쟁에서 미국이 R&D에 진지하게 임한다면 좋겠지만, 원하지 않음