Crul
모든 웹페이지 또는 API를 무료로 쿼리해주는 도구
Features
- 웹페이지의 내용을 읽거나, API를 호출하여 테이블 형태로 파싱
- 다양한 정렬, 필터링, 컬럼 제어등 기능 제공
- S3, Kafka, Splunk 등 30개 이상의 데이터 저장소로 Export 지원
- 스케줄링 가능(인터벌 지정)
- 이전 결과에서 변경된 부분만 추출 가능(Incremental Changes)
- 웹페이지 스크릿샷 저장 가능
- MacOS 데스크탑 앱 또는 Docker 이미지로 제공
- 차후에 오픈소스로 공개하는 것을 목표