Pertanyaan yang diberi tag «wget»

wget - utilitas baris perintah untuk mengunduh konten secara non-interaktif (dapat dipanggil dari skrip, tugas cron, terminal tanpa dukungan X-Windows, dll.)

2
Unduh daftar file jika belum ada
Jika saya memiliki daftar URL yang dipisahkan oleh \n, apakah ada opsi yang dapat saya berikan wgetuntuk mengunduh semua URL dan menyimpannya ke direktori saat ini, tetapi hanya jika file belum ada?
11 wget  download  options 

4
Apakah ada cara untuk menonaktifkan wget dari mendapatkan file dari direktori induk ke kedalaman tertentu?
wget memiliki opsi untuk -npmenonaktifkan file dari direktori induk mana pun. Saya membutuhkan sesuatu yang serupa tetapi sedikit lebih fleksibel. Mempertimbangkan: www.foo.com/bar1/bar2/bar3/index.html Saya ingin mendapatkan segalanya tetapi tidak "lebih tinggi" (dalam hierarki pohon) daripada bar2(!). Jadi bar2juga harus diambil tetapi tidak bar1. Apakah ada cara untuk membuat wget lebih selektif? …
11 wget  mirror  tree 

5
Tidak dapat menghapus dari github, kesalahan handshake sslv3
Kami memiliki skrip yang mengunduh mod security dari github yang baru-baru ini mulai gagal. Server menjalankan CentOS 6 tetapi RHEL 6 mungkin memiliki masalah yang sama. Outputnya adalah: # wget https://github.com/downloads/SpiderLabs/ModSecurity/modsecurity-apache_2.7.1.tar.gz --2014-07-22 18:49:46-- https://github.com/downloads/SpiderLabs/ModSecurity/modsecurity-apache_2.7.1.tar.gz Resolving github.com... 192.30.252.129 Connecting to github.com|192.30.252.129|:443... connected. HTTP request sent, awaiting response... 302 Found Location: https://cloud.github.com/downloads/SpiderLabs/ModSecurity/modsecurity-apache_2.7.1.tar.gz …
10 centos  wget  github 


1
Memperoleh md5 saat wget
Saya sedang wgetfile besar (lebih dari 100GB) dan kemudian membandingkan md5sum saya dengan jumlah yang diposting di repositori. Percaya atau tidak, md5sumperlu waktu tidak berjalan untuk menjalankan file sebesar ini, jadi saya ingin mendapatkan jumlah secara paralel dengan unduhan. Apa cara terbaik untuk melakukan ini? Saya tidak melihat wgetopsi untuk …
10 wget  checksum 

3
Bagaimana saya bisa meneruskan argumen yang disimpan pada variabel ke WGET
Saya sedang menulis skrip bash yang banyak menggunakan wget. Untuk mendefinisikan semua parameter umum di satu tempat, saya menyimpannya di variabel. Berikut sepotong kode: useragent='--user-agent="Mozilla/5.0 (Windows NT 6.1; WOW64; rv:27.0) Gecko/20100101 Firefox/27.0"' cookies_file="/tmp/wget-cookies.txt" save_cookies_cmd="--save-cookies $cookies_file --keep-session-cookies" load_cookies_cmd="--load-cookies $cookies_file --keep-session-cookies" function mywget { log "#!!!!!!!!!# WGET #!!!!!!!!!# wget $quiet $useragent $load_cookies_cmd …

2
Unduh file dengan nama sebenarnya oleh wget
Saya mencoba mengunduh file melalui HTTP dari situs web menggunakan wget. Ketika saya menggunakan: wget http://abc/geo/download/?acc=GSE48191&format=file Saya hanya mendapatkan file yang dipanggil index.html?acc=GSE48191. Ketika saya menggunakan: wget http://abc/geo/download/?acc=GSE48191&format=file -o asd.rpm Saya dapat asd.rpm, tetapi saya ingin mengunduh dengan nama sebenarnya, dan tidak ingin secara manual mengubah nama file yang diunduh.
9 filenames  wget 


3
unduh hanya beberapa byte pertama dari halaman sumber
Saya mengunduh halaman sumber HTML situs web menggunakan cURLperintah. Masalahnya adalah, saya tidak ingin sebagian besar konten di halaman. Saya hanya perlu 100 baris pertama dari halaman sumber. Apakah ada cara untuk menghentikan pengunduhan halaman setelah beberapa baris pertama? Saat ini, saya memiliki perintah di bawah ini yang bekerja tetapi …
9 wget  curl 


3
wget tidak mendukung https
Saya ingin mengunduh https://example.commenggunakan wgetperintah, tetapi tertulis "protokol tidak didukung / tidak dikenal". Saya mencoba menggunakan --secure protocol=''tetapi itu tidak berhasil. Saya mengunduh file tar dari GNU wget dan mencoba mengkonfigurasi itu tetapi saya gagal. Ini adalah contoh dari apa yang saya lihat: bash-2.05$ wget https://www.facebook.com/ https://www.facebook.com/: Unknown/unsupported protocol. bash-2.05$ …
9 wget  https 


2
Katakan jangan sampai spider URL cocok dengan suatu pola?
Saya ingin menguji bagaimana situs saya akan berperilaku ketika jelajahi. Namun, saya ingin mengecualikan semua URL yang mengandung kata "halaman". Saya mencoba: $ wget -r -R "*page*" --spider --no-check-certificate -w 1 http://mysite.com/ The -Rbendera seharusnya menolak pola URL yang mengandung kata "halaman". Kecuali bahwa itu tampaknya tidak berhasil: Spider mode …
8 wget  url 

5
Bash: Cara tercepat untuk menentukan dimensi gambar dari URL
Saya mencoba mencari metode yang sangat cepat dalam menentukan dimensi suatu gambar. Saya tahu saya bisa membuat gambar dan kemudian menggunakan imagemagick untuk menentukan tinggi dan lebar gambar. Saya khawatir ini mungkin bukan cara tercepat untuk melakukannya. Saya juga khawatir harus menginstal imagemagick ketika saya hanya membutuhkan sebagian kecil fungsi. …

2
Apakah ada alat yang bagus selain SeleniumRC yang dapat mengambil halaman web termasuk konten pasca-dicat oleh JavaScript?
Salah satu kelemahan utama curladalah bahwa semakin banyak situs memiliki konten utama yang dilukis oleh respons JavaScript AJAX yang terjadi setelah respons HTTP awal. curltidak pernah mengambil konten pasca-dicat ini. Jadi untuk mengambil jenis-jenis halaman web dari baris perintah, saya telah dikurangi untuk menulis skrip di Ruby yang mendorong SeleniumRC …
8 wget  http  html  curl  selenium 
Dengan menggunakan situs kami, Anda mengakui telah membaca dan memahami Kebijakan Cookie dan Kebijakan Privasi kami.
Licensed under cc by-sa 3.0 with attribution required.