Heritrix
Heritrix는 robots.txt를 존중하고 디지털 보존을 위해 설계된 보관 수준의 웹 규모 크롤링을 위한 확장 가능한 오픈 소스 웹 크롤러입니다.
점수
30
사용자 평가
3.0
무료/체험 지원
지원됨
시작 가격
--
마지막 업데이트
8월 04, 2026
개요
Heritrix이란?
Heritrix는 Internet Archive의 오픈 소스 웹 크롤러 프로젝트로, 향후 연구를 위해 디지털 유물을 수집하고 보존하기 위한 아카이브 품질의 웹 규모 크롤링을 위해 설계되었습니다. 구성 가능한 공손 정책과 함께 robots.txt 및 META nofollow 태그를 존중합니다.
Heritrix은 무엇에 사용되나요?
주요 기능
- 오픈 소스 및 확장 가능
- robots.txt 및 META nofollow를 존중합니다.
- 구성 가능한 공손 정책
- 웹 규모 아카이브 크롤링
- WARC 파일 출력
Heritrix 사용 방법은?
시스템에서 Heritrix를 다운로드 및 실행하고, 인터페이스 또는 REST API를 통해 크롤링 작업을 구성하고, 시드 URL 및 정중함 설정을 지정하고, 크롤링을 시작하여 웹 콘텐츠를 WARC 파일에 보관하세요.
대안 도구
대안 도구를 찾을 수 없습니다
장점 & 단점
장점
- 무료 및 오픈 소스
- 높은 맞춤화 가능성
- 대규모 아카이빙에 적합
- 적극적인 커뮤니티 지원
단점
- 기술적인 설정이 필요합니다
- 내장된 클라우드 배포 없음
- 초보자를 위한 가파른 학습 곡선
사용 사례
- 도서관의 디지털 보존
- 연구를 위한 웹 아카이빙
- 규정 준수 및 기록 보관
- 과거 데이터 수집
Heritrix 가격
무료 플랜
상세 가격 정보가 없습니다
사용자 리뷰
3.0
5점 만점
3.0
아직 리뷰가 없습니다
이 도구의 첫 번째 리뷰어가 되세요!