Mengatur Robots Meta Tag SEO Friendly dan Tidak Crash dengan Robots.txt - HadaCircle

1 Februari 2017

Mengatur Robots Meta Tag SEO Friendly dan Tidak Crash dengan Robots.txt

Cara Mengatur Robots Meta Tag SEO Friendly dan Tidak Crash dengan Robots.txt - Pada dasarnya, Meta Tag Robots dan Robots.txt memiliki fungsi yang sama, yaitu mengarahkan mesin pencari untuk mengindeks hanya yang anda izinkan. Jadi keduanya harus saling melengkapi

Meta Robots

Contoh

Robots.txt

User-agent: *
Allow: *
Disallow: /search (tidak mengizinkan mengindeks halaman label dan pencarian)

Sama maksudnya dengan

Lihat pint yang saya tandai, jika di buat meta tagnya seperti berikut

<b:if cond='data:blog.searchLabel'>
  <meta name="robots" content="noindex,nofollow">
</b:if>

<b:if cond='data:blog.searchQuery'>
  <meta name="robots" content="noindex,nofollow">
</b:if>

Lalu sekarang untuk mendapatkan settingan terbaik, kami sarankan untuk mengabaikan Robots.txt anda, dalam artian setting dan biarkan, jangan buat perubahan. Perubahan yang lebih fleksibel ialah menggunakan Meta Tag saja. Ikuti langkah berikut, dan selanjutnya, jika ingin merubah pengaturan, jangan apa-apakan Robots.txt nya, tapi rubah meta tagnya.

1. Langkah pertama edit Robots.txt di menu Blogger > Setting > Search Preferences > Edit Custom robots.txt

HAPUS SEMUA DAN GANTI
__________________________________robots.txt

User-agent: *
Allow: *

Sitemap: http://www.hadacircle.com/sitemap.xml
  (situs anda).


Lihat http://hadacircle.com/robots untuk settingan robots ini secara Live

Ini akan mematikan fungsi robots.txt sebagai pemfilter index karena selanjutnya yang memegang izin indeks adalah meta tag

2. SIMPAN

3. Masukkan Meta Tag Sebelum </head>

Berikut Pilihannya


  <b:if cond='data:blog.searchQuery'>
  <meta name="robots" content="noindex,nofollow">
  </b:if>

<b:if cond='data:blog.searchLabel'>
  <meta name="robots" content="index,follow">
</b:if>

<b:if cond='data:blog.pageType == "archive"'>
  <meta name="robots" content="index,follow">
</b:if>

 <b:if cond='data:blog.pageType == "error_page"'>
 <meta name="robots" content="noindex,nofollow">
</b:if>

<b:if cond='data:blog.url == data:blog.homepageUrl'>
  <meta name="robots" content="index,follow">
</b:if>

<b:if cond='data:blog.pageType == "item"'>
   <meta name="robots" content="index,follow">
</b:if>


<b:if cond='data:blog.pageType == "static_page"'>
<meta name="robots" content="index,follow">
</b:if>


<!--atur halaman url tertentu -->
<b:if cond='data:blog.url == data:blog.canonicalHomepageUrl + "2014/08/foo.html"'>
<meta name="robots" content="noindex,nofollow">
</b:if>

4. Simpan Template

Dengan begitu maka akan sesuai settingan Robots.txt dan Robots Meta Tag.

Tutorial Webmaster, Blogger
Comments


EmoticonEmoticon