Saya ingin mengikis semua halaman dan subhalaman situs web (dengan mengikis, maksud saya menyimpan semua konten online ke file HTML lokal).
Apa utilitas terbaik untuk merayapi semua halaman? Idealnya, saya ingin menentukan berapa banyak lapisan dalam untuk dikikis.
Jawaban:
Anda memiliki dua opsi:
Anda dapat menggunakan wgetutilitas baris perintah seperti:
wget -rl 10Ganti 10dengan jumlah level yang ingin Anda rekur ulang.
Atau, Anda bisa menggunakan SiteSucker . Aplikasi GUI yang mengunduh situs web secara rekursif. Anda juga dapat menentukan seberapa jauh untuk muncul kembali dengan SiteSucker.
