9P by xguru 2020-05-12 | favorite | 댓글 3개

- 크롤링 방식이 아닌 브라우저의 네트웍 트래픽 캡쳐방식
ㅤ→ 로그인된 상태로 모든 미디어 파일 및 복잡한 자바스크립트, 동적 컨텐츠까지 캡쳐가능
- WARC 표준으로 녹화해서 나중에 인터랙티브하게 다시 보기 가능
- AutoPilot 으로 유명 웹사이트의 캡쳐 자동화
- 온라인 버전 및 Electron 으로 된 Desktop용 실행파일 / Player 제공 (윈/맥/리눅스)

와 이런 것도 표준이 있었다니... 근데 네트워크 방식이면 ssl 지원이 되나요?

이것도 표준 규격이 있었군요?
예전에 파이어폭스 개발자 도구에 비슷한 기능이 추가되었던 걸로 기억하는데, 문제는 제 맥북에서는 너무 느려서 도무지 쓰기가 힘들더라고요. 파일 크기도 정말 크고. 이건 좀 나을지 모르겠습니다.

인스타그램은 AutoPilot 적용하면 자동으로 스크롤하면서 유저피드를 주루룩 캡쳐합니다.
무한 스크롤되는 페이지에는 완전 적합하진 않아서, 이번에 변경된 페이스북은 캡쳐가 잘 안되네요.

WARC 표준 https://iipc.github.io/warc-specifications/