Atur cara mengikut crawler.archive.org

Projek arkib merangkak membina Heritrix: crawler web yang fleksibel, boleh diperluas, teguh, dan berskala yang mampu menangkap, mengarkib, dan menganalisis kepelbagaian penuh dan keluasan kandungan internet yang boleh diakses