Cara Memperkuat SEO dengan robots.txt Dulu, sangat tidak mungkin untuk membuat file robots.txt di blogger, namun semua itu kini sudah menjadi kenyataan sehingga kita dapat lebih mengintrol file mana saja yang boleh diakses Search engine dan mana saja yang tidak boleh di akses.
User-agent: Googlebot
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*?*
Disallow: /*?
User-agent: ia_archiver
Disallow: /User-agent: duggmirror
Disallow: /User-agent: *
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /trackback/
Disallow: /feed/
Disallow: /tag/
Disallow: /author/
Disallow: /category/Sitemap: http://namadomainanda.com/sitemap.xml
Sitemap: http://namadomainanda.com/sitemap.xml.gz
 |
| Cara Memperkuat SEO dengan robots.txt Tag header robot khusus Untuk membuat beberapa aturan bagi search engine seperti noindex arsip dan sebagainya, kini tidak perlu memasang kode meta tag yang kadang menyulitkan, anda tinggal klik sesuai dengan keinginan |
 |
| Cara Memperkuat SEO dengan robots.txt |
.jpg)
.jpg)