Haruskah saya memblokir halaman arsip Wordpress dari mesin pencari?

Saya menggunakan WordPress dan /sample-post/URL untuk posting saya dan /yyyy/mm/untuk arsip.

Google telah mengindeks situs sepenuhnya.

Karena arsip saat ini menampilkan posting lengkap, saya berpikir bahwa saya tidak boleh membiarkan Google mengindeks halaman arsip karena mengandung posting penuh dan itu akan menjadi duplikat konten. Jadi robots.txt saya berisi:

Disallow: /2009/
Disallow: /2010/
Disallow: /2011/
Disallow: /2012/
Disallow: /2013/
Disallow: /2014/
Disallow: /2015/

Apakah Anda pikir ini adalah praktik yang baik atau akankah itu merusak peringkat dan / atau jangkauan saya?

— cherouvim
sumber

Pos yang bagus, hanya untuk memperjelas, maksud Anda memblokir semua kecuali kategori? Hal yang membuat masalah ini menarik perhatian saya adalah melakukan pencarian gambar Google dan menunjukkan 4 gambar yang sama, dari tag / arsip, halaman, pos dan rumah! Ini di rumah sebagai bagian dari slider (posting unggulan). Jadi, apa manfaat kategori dari halaman dan posting saja? Atau maksud Anda campuran atau ketiganya? Saya juga menggunakan Yoast tetapi sangat baru dalam hal ini.

Memang, Anda perlu menghindari duplikat konten di situs Wordpress Anda. Wordpress sering menghasilkan duplikat konten antara kategori, arsip, dan tag.

Untuk memperbaiki masalah ini, Anda dapat memblokir URL arsip di robots.txt tetapi opsi terbaik adalah meletakkannya <meta name="robots" content="noindex, follow">di halaman arsip untuk menghindari agar URL ini tidak diindeks oleh Google.

Untuk melakukan ini, Anda dapat mengunduh plugin Wordpress SEO dari Yoast . Saat plugin diinstal, Anda memiliki opsi untuk meletakkan meta ini di mana pun Anda inginkan (pada halaman arsip, pada halaman tag, pada halaman kategori ...). Anda dapat pergi ke menu plugin: SEO => Judul dan meta .

Menurut pendapat saya, praktik terbaik untuk SEO adalah meletakkan meta ini pada halaman arsip dan tag dan membiarkan Google merangkak halaman kategori. Saya selalu menghindari duplikat konten di situs Wordpress seperti ini.

— Zistoloen
sumber

Namun saya perhatikan daripada membuang noindex, nofollow, Google terkadang masih mengindeks halaman-halaman itu jadi saya memutuskan untuk meletakkan halaman-halaman itu ke robots.txt. Saya menulis posting blog tentang: vladopandzic.com/search-engine-optimization-seo/…

— Vlado Pandžić