1P by qnfw3175 18시간전 | ★ favorite | 댓글 4개

설치형, 혹은 웹ui 인터페이스 등 ai를 사용할때 인풋과 아웃풋, 프로세스의 동작(웹검색이나, 실행권한, 실행 등) 이러한 시스템적으로 보여지는 모든 행위들을 로깅하는 도구나 프로젝트가 있을까요?

부분적으로라도 좋습니다. 상용 서비스라던지,
클로드 코드같은경우 cmd에서 calude처서 클로드 실행하고 이후 인풋과 아웃풋, 돌아가면서 클로드 프로세스가 실행한 작업(네트워크, 로컬행위 등)에 대한 로깅...

댓글과 토론

argos 엿나 커서마피아? 토스 개발자 출신 바이브코딩 하시는 분이 운영하시는 서비스가 있는데, 셀프호스팅도 가능하고 api키나 플랜에서 여러 계정을 모니터링 할 수 있고 얼마나 세션이 돌았고 툴은 무엇을 썻고 등등 말씀하시는 기능들이 있을 것 같네요.

클로드만 됐었나 기억은 잘 안나는데, 맞춤형으로 만드실거면 뜯어봐도 좋을 것 같습니다.

클로드 코드 쪽이라면 cc-token-saver (https://github.com/ww-w-ai/cc-token-saver) 를 한번 써보세요.

Claude Code는 세션마다 transcript (.jsonl)에 모든 인풋/아웃풋과 tool 호출(파일 읽기, 쓰기, bash 실행, 웹 요청 등)을 기록하는데, cc-token-saver가 이걸 파싱해서 세션별로 뭘 했는지, 토큰을 어디에 얼마나 썼는지 HTML 대시보드로 시각화해줍니다. "이 세션에서 AI가 어떤 파일을 건드리고, 몇 번 명령을 실행하고, 비용이 얼마 들었는지" 한눈에 볼 수 있어요.

특히 /continue 스킬은 트랜스크립트를 분석해서 기존의 세션들을 복원하는 기능인데, 트랜스크립트 분석 기능은 동일하게 쓸 수 있기 때문에 "/continue ~한 경우에 대해 인풋, 아웃풋, 네트워크 정보 분석해." 이렇게 지시하셔도 됩니다. (LLM 이 알아서 적당히 변형해서 적용)

ai 만이 아니라 strace 나 여러가지 디버깅툴을 쓰면 됩니다.
서비스정도로 잘 만드실꺼면 ebpf 기반의 툴을 보시면 되요.

질문 자체를 제미나이에 넣어보니 몇 개가 나오네요. 이렇게 찾아보셨는지요?