Cara Edit Robot.txt Untuk SEO Cara Edit Robot.txt Untuk SEO

Cara Edit Robot.txt Untuk SEO

Cara Edit Robot.txt Untuk SEO

Image Source : Webseoanalytics

Cara Edit Robot.txt Untuk SEO - Halo sahabat Berguru SEO setelah kemarin membahas Pengertian Dan Ciri-Ciri Konten SEO Friendly Maka kali ini Berguru SEO akan membahas Cara Edit Robot.txt Untuk SEO

Robots.txt adalah file teks pada server dalam bahwa Anda dapat menulis direktori mana dan halaman web atau link tidak harus dimasukkan untuk hasil pencarian. Ini berarti Anda dapat membatasi bots mesin pencari untuk menjelajah beberapa direktori dan halaman web atau link dari website atau blog. Sekarang robots.txt yang tersedia untuk Blogger. Di Blogger opsi pencarian berhubungan dengan Label. Jika Anda tidak menggunakan label bijak per post Anda melarang harus merangkak dari link pencarian.Di Blogger oleh link pencarian default adalah dianulir merangkak. Dalam robots.txt ini Anda juga dapat menulis lokasi file sitemap Anda. Sitemap adalah file yang terletak di server yang berisi permalinks semua posting 'website atau blog. Sebagian sitemap ditemukan dalam xml format seperti sitemap.xml. Saat Blogger bekerja pada sitemap.xml. Sekarang Blogger membaca entri sitemap melalui pakan. Dengan metode ini terbaru 25 posting diserahkan ke mesin pencari. Jika Anda ingin mesin pencari bots hanya bekerja pada terbaru 25 posting maka Anda harus menggunakan robots.txt tipe 1 diberikan di bawah ini. Dalam Robots.txt Google Adsense bot diperbolehkan untuk menjelajah seluruh blog untuk kinerja Adsense terbaik. 

Robots.txt Tipe 1

User-agent: Mediapartners-Google Disallow:

User-agent: * Disallow: / search Disallow: / b

Allow: /

Sitemap: http://berguruseo.blogspot.com/feeds/posts/default?orderby=updated

Catatan Penting: Jangan lupa untuk mengubah http://techprevue.blogspot.com dengan alamat blog atau domain kustom.

Jika Anda ingin mesin pencari bots merangkak terbaru 500 posting maka Anda perlu menggunakan berikut jenis robots.txt 2. Jika Anda sudah memiliki lebih dari 500 posting di blog Anda maka Anda dapat menambahkan satu lagi sitemap garis disorot dalam warna merah.


Robots.txt Tipe 2

User-agent: Mediapartners-Google Larang:

User-agent: * : / search Disallow: / b

Allow: /Sitemap: http://berguruseo.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500

Sitemap: http://berguruseo.blogspot.com/atom.xml?redirect=false&start-index=501&max-results=500Catatan Penting: Jangan lupa untuk mengubah http://techprevue.blogspot.com dengan alamat blog atau domain kustom.

Ekspresi matematika untuk Blogger robots.txt sitemap entri:

• Sitemap: http://berguruseo.blogspot.com/atom.xml?redirect=false&start-index = (m * 0) 1 & max-results = m

• Sitemap: http://berguruseo.blogspot.com/atom.xml?redirect=false&start-index = (m * 1) +1 & max-results = m

• Sitemap: http://berguruseo.blogspot.com/atom.xml?redirect=false&start-index = (m * 2) +1 & max-results = m

• Sitemap: http://berguruseo.blogspot.com/atom.xml?redirect=false&start-index = {m * 3} 1 & max-results = m

• Sitemap: http://berguruseo.blogspot.com/atom.xml?redirect=false&start-index = {m * n} 1 & max-results = m

Dimana m = 500 dan n = 1, 2, 3, 4, ..., n.

Jika Anda telah mengorganisir posting label dalam format baik dan pengalaman yang baik dari Search Engine Optimization ( SEO ) maka Anda dapat menghapus baris berikut

Disallow: / search

Paling penting jika Anda tidak ingin mengirimkan setiap posting blogger atau halaman untuk mesin pencari maka Anda dapat menambahkan mereka seperti itu:
Untuk Pos tambahkan baris seperti itu

Disallow: / tttt / bb / post-name.html

Untuk Halaman tambahkan baris seperti itu
Disallow:: / p / halaman-name.html

Itulah Cara Edit Robot.txt Untuk Keperluan SEO semmoga membantu