Heritrix
Heritrix is the Internet Archive's open-source, extensible, web-scale, archival-quality web crawler project. - GitHub - internetarchive/heritrix3: Heritrix is the Internet Archive's open-source, extensible, web-scale, archival-quality web crawler project.
Genel Bakış
Heritrix nedir?
Heritrix, İnternet Arşivi'nin açık kaynaklı web tarayıcı projesidir; gelecekteki araştırmalar için dijital eserleri toplamak ve korumak üzere arşiv kalitesinde, web ölçeğinde tarama için tasarlanmıştır. Yapılandırılabilir nezaket politikalarıyla robots.txt ve META nofollow etiketlerine saygı duyar.
Heritrix ne için kullanılır?

Üst Özellikler
- Açık kaynak ve genişletilebilir
- robots.txt ve META nofollow'a saygı duyar
- Yapılandırılabilir nezaket politikaları
- Web ölçeğinde arşiv taraması
- WARC dosya çıktısı
Heritrix nasıl kullanılır?
Heritrix'i sisteminize indirin ve çalıştırın, arayüzü veya REST API'si aracılığıyla tarama işlerini yapılandırın, çekirdek URL'leri ve nezaket ayarlarını belirleyin ve web içeriğini WARC dosyalarına arşivlemek için taramaya başlayın.
Alternatif Araçlar
Artılar & Eksiler
Artılar
- Ücretsiz ve açık kaynak
- Yüksek düzeyde özelleştirilebilirlik
- Büyük ölçekli arşivlemeye uygun
- Aktif topluluk desteği
Eksiler
- Teknik kurulum gerektirir
- Yerleşik bulut dağıtımı yok
- Yeni başlayanlar için dik öğrenme eğrisi
Kullanım Durumları
- Kütüphaneler için dijital koruma
- Araştırma için web arşivleme
- Uyumluluk ve kayıt tutma
- Tarihsel veri toplama
Heritrix Fiyatlandırması
Kullanıcı Değerlendirmeleri
Henüz değerlendirme yok
Bu aracı değerlendiren ilk kişi ol!