Pertanyaan yang diberi tag «bingbot»

Saat ini saya mengarahkan semua koneksi non-HTTPS ke HTTPS, dan mendukung TLS v1, TLS v1.1, dan TLS v1.2. Saya mengkonfigurasi ulang server pengujian saya untuk hanya menerima cipher suite yang sangat terbatas dan aman dan hanya TLSv1.2. Setelah menjalankan uji SSL Labs, saya perhatikan bahwa grafik kompatibilitasnya menunjukkan perayap Bing …

12 seo  search-engines  https  googlebot  bingbot 

Setelah menulis sejumlah bot, dan melihat sejumlah besar bot acak yang merayapi sebuah situs, saya bertanya-tanya sebagai seorang webmaster, bot apa yang benar-benar layak dibiarkan masuk ke sebuah situs? Pikiran pertama saya adalah membiarkan bot ke situs berpotensi membawa lalu lintas nyata ke sana. Apakah ada alasan untuk mengizinkan bot …

11 seo  web-crawlers  robots.txt  googlebot  bingbot