Membuat `wget` tidak menyimpan halaman

Saya menggunakan wgetprogram ini, tetapi saya ingin tidak menyimpan file html yang saya unduh. Saya ingin itu dibuang setelah diterima. Bagaimana aku melakukan itu?

Anda dapat mengarahkan output wget ke / dev / null (atau NUL di Windows):

wget http://www.example.com -O /dev/null

File tidak akan ditulis ke disk, tetapi akan diunduh.

Jika Anda tidak ingin menyimpan file, dan Anda telah menerima solusi mengunduh halaman /dev/null, saya kira Anda menggunakan wget untuk tidak mendapatkan dan mem-parsing konten halaman .

Jika kebutuhan Anda yang sebenarnya adalah untuk memicu beberapa tindakan jarak jauh, periksa apakah halaman itu ada dan seterusnya saya pikir akan lebih baik untuk menghindari mengunduh halaman tubuh html sama sekali.

Mainkan dengan wgetopsi untuk mengambil hanya apa yang benar-benar Anda butuhkan, yaitu header http, status permintaan, dll.

• dengan asumsi Anda perlu memeriksa halaman itu ok (yaitu, status yang dikembalikan adalah 200) Anda dapat melakukan hal berikut:

  wget --no-cache --spider http://your.server.tld/your/page.html
  

• jika Anda ingin mengurai server kembali header lakukan hal berikut:

  wget --no-cache -S http://your.server.tld/your/page.html
  

Lihat halaman manual wget untuk opsi lebih lanjut untuk bermain.
Lihat lynxjuga, sebagai alternatif untuk wget.

$ wget http://www.somewebsite.com -O foo.html --delete-after

Jika Anda juga ingin mencetak di konsol hasil yang dapat Anda lakukan:

wget -qO- http://www.example.com

Alternatif lain adalah dengan menggunakan alat seperti curl, yang secara default menampilkan konten jarak jauh stdoutdaripada menyimpannya ke file.

Periksa opsi "-spider". Saya menggunakannya untuk memastikan situs web saya aktif dan mengirimi saya email jika tidak. Ini adalah entri khas dari crontab saya:

46 */2 * * * if ! wget -q --spider http://www.rochesterflyingclub.com/ >/dev/null 2>&1; then echo "Rochester Flying Club site is down" ; fi

Jika Anda perlu merayapi situs web menggunakan wget dan ingin meminimalkan ...

Untuk kotak * NIX dan penggunaannya wget, saya sarankan melompati penulisan ke file. Saya perhatikan pada kotak Ubuntu 10,04 saya yang wget -O /dev/nullmenyebabkan wget untuk membatalkan unduhan setelah unduhan pertama.
Saya juga memperhatikan bahwa wget -O real-filemenyebabkan wget untuk melupakan tautan yang sebenarnya pada halaman. Itu bersikeras index.htmluntuk hadir di setiap halaman. Halaman seperti itu mungkin tidak selalu ada dan wget tidak akan mengingat tautan yang telah dilihat sebelumnya.

Untuk merangkak tanpa menulis ke disk, yang terbaik yang saya hasilkan adalah sebagai berikut

 mkdir /dev/shm/1   
 cd /dev/shm/1
 wget --recursive --relative --no-parent ...

Perhatikan tidak ada -O fileopsi. wget akan menulis ke direktori $ PWD. Dalam hal ini, itu adalah sistem file tmpfs RAM saja . Menulis di sini harus memintas churn disk (tergantung ruang swap) DAN melacak semua tautan. Ini harus merayapi seluruh situs web dengan sukses.

Setelah itu tentu saja

 rm --recursive --force /dev/shm/1/*

Gunakan opsi --delete-after, yang menghapus file setelah diunduh.

Sunting: Ups, saya baru tahu bahwa sudah dijawab.

Menurut doc bantuan (wget -h), Anda dapat menggunakan opsi --spider untuk melewati unduhan (versi 1.14).

Download:
  -S,  --server-response         print server response.
       --spider                  don't download anything.