dsq - JSON,CSV,Excel,Parquet 등에 SQL쿼리 실행하는 CLI도구

- 오픈소스 데이터 IDE인 DataStation이 별도로 공개한 Go 기반 CLI 오픈소스
ㅤ→ 내부에서 Datastaion 라이브러리와 SQLite를 사용

$ dsq testdata.json "SELECT * FROM {} WHERE x > 10"

- 여러개의 파일을 넘기고 각각을 별도의 테이블로 하여 Join 가능
$ dsq users.csv ages.json "select {0}.name, {1}.age from {0} join {1} on {0}.id = {1}.id"

- 파이핑 지원
$ dsq users.csv "SELECT * FROM {} ORDER BY CAST(age AS INT) DESC" | jq
$ cat testdata.csv | dsq -s csv "SELECT * FROM {} LIMIT 1"

- CSV를 JSON으로 변환
$ dsq testdata.csv "SELECT * FROM {}"

- 지원포맷 : CSV, TSV, JSON, NDJSON, Parquet, Excel, ODS, Apache Error Logs, Apache Access Logs, Nginx Access Logs

[xguru]

- SQ - swiss-army knife for data https://news.hada.io/topic?id=3841
- q - CSV 파일에 SQL쿼리 하기 https://news.hada.io/topic?id=3000