AWS는 S3의 압축을 gzip에서 zstd로 바꿔서 30% 정도 크기를 줄였음

• Yann Collet가 만든 zstd가 얼마나 쓸데없는 것을 줄여줬냐는 질문에 대해서, Adrian Cockcroft가 대답한 내용
• S3의 Exabyte 규모에서 30%는 엄청난 규모의 비용 절감임
• 트위터도 HDFS에서 zstd로 바꾸면서 매년 수백억원(~ mid 8 figs/yr)을 절감했다고

[alstjr7375]

우버 또한 GZIP/SNAPPY에서 ZSTD로 변경했습니다.
https://www.uber.com/en-TW/blog/cost-efficiency-big-data/

[jaehong747]

zstd 엄청나군요!

링크에 압축성능 비교자료가 있어서 공유합니다.
https://github.com/facebook/zstd

[jaehong747]

오늘 zstd 처음 사용해봤습니다.
mac에 기본 내장되어있었군요.

압축하기: "zstd file" => file.zst
압축풀기: "unzstd file.zst" => file

[xguru]

• 압축 알고리즘 르네상스
• 파일시스템 업그레이드로 SSD비용 수백만불 절약한 후기
• Arch Linux 가 패키지 압축 도구를 xz에서 Zstandard로 교체