Cara Setting Custom Robot.txt di Blogspot untuk SEO yang Lebih Baik

Sampai sekarang, Anda telah belajar, Cara menggunakan alat Blogger Sitemap Generation untuk SEO yang lebih baik, Hari ini, saya akan menunjukkan kepada Anda cara untuk menggunakan "Robot.txt" file di blog blogger.com untuk mendapatkan yang terbaik dari Search Engine. Kita bisa menyesuaikan default "Robot.txt" file dari blogger untuk manfaat kita sehingga dikenal sebagai Custom Robot.txt. Sebelum menggunakannya, Anda harus memiliki informasi yang lengkap tentang kata kunci yang digunakan dalam file ini. Apakah Anda seorang pemula atau pengguna tingkat lanjut, hal itu tidak terlalu menjadi masalah karena saya memberikan informasi lengkap tentang Robot.txt dan kata kunci yang berbeda dan tag yang digunakan dalam file ini.

Apakah Custum Robot.txt?

File robot.txt tidak terlalu rumit. Ini hanyalah sebuah file teks yang berisi beberapa baris kode sederhana. Setiap web master menyimpan file ini di root situs web mereka atau server blog. Ini menginstruksikan kepada Search Engine untuk mengindeks atau membatasi posting tertentu atau halaman website atau blog. mesin pencari selalu mengintai file robot.txt dan kemudian halaman web sesuai dengan petunjuk yang ada di file robot.txt. Hal ini sangat membantu karena, dalam banyak kondisi, Anda tidak ingin mesin pencari untuk mengindeks halaman tertentu Anda. Sebagai contoh-Setiap halaman DEMO atau halaman lain yang tidak berguna bagi anda.

Memahami Kata Kunci dan Tag dari Robot.txt berbeda

Ketika Anda akan membuka file Robot.txt di blogger, Anda akan melihat Kode di bawah ini diberikan:

User-agent: Mediapartners-Google

Disallow:

User-agent: *

Disallow: /search

Allow: /

Sitemap: http://fe-blogger.blogspot.com/feeds/posts/default?orderby=UPDATED

Anda harus memahami arti dari setiap kata kunci sebelum menerapkannya. Untuk mempelajari segala sesuatu tentang mereka, baca penjelasan di bawah ini diberikan:

Penjelasan Line 1 dan 2

User-agent: Mediapartners-Google

Disallow:

Kode yang disebutkan di atas hanya berguna untuk para blogger, yang menggunakan iklan Google Adsense di blog mereka. Sebenarnya, kode yang disebutkan di atas membantu Robot Google Adsense untuk melayani iklan yang lebih baik di blog Anda. Jika Anda tidak menggunakan Google Adsense di blog Anda, akan lebih baik bagi Anda untuk meninggalkan bagian ini. 

Penjelasan Line 3 :: "User-agent: *"

User-agent: *

Seperti yang Anda semua tahu, tanda bintang (*) tanda ini biasanya digunakan untuk "Membiarkan Semua" dalam pemrograman. Di sini digunakan untuk semua semua jenis robot untuk mengunjungi blog Anda. 

Kata kunci berikutnya adalah sangat penting karena mereka bertindak sebagai penjaga. Mereka membatasi dan memungkinkan Search Engine Bot untuk mengunjungi baik lengkap atau bagian tertentu. Untuk penjelasan lengkap, lihat di bawah: 

Penjelasan Line 4: 

“Disallow:/search”

Disallow:/search

Blogger secara otomatis menambahkan kode ini di folder robot.txt mereka yang mau menghentikan robot Search Engine dari melihat semua jenis link yang mencakup kata kunci "pencarian" setelah nama domain. Sebagai contoh, di bawah ini diberikan label akan diabaikan:

http://fe-blogger.blogspot.com/search/label/SEO-Tips

Itu berarti, mesin pencari tidak akan menunjukkan hasil yang muncul melalui link di atas karena mengandung "/ search" kata kunci setelah nama domain.

Gunakan "Disallow:" kata kunci untuk memblokir Search Engine Bot itu dari merangkak beberapa posting tertentu?

Seperti yang telah saya beritahukan kepada Anda sebelumnya, "Disallow:" adalah kata kunci yang sangat penting yang dapat digunakan untuk menyembunyikan tulisan dan halaman dari mesin pencari yang berbeda.

1. Sembunyikan Post tertentu dari mesin pencari

Jika Anda tidak ingin robot mesin pencari untuk menjelajah setiap pos tertentu kemudian gunakan format di bawah ini:

Disallow:/yyyy/mm/your-post-url

Pada kode di atas, ganti "yyyy" dengan tahun ini, "mm" dengan bulan yang tepat dan "Post-url-anda" dengan url dari posting tertentu. Sebagai contoh- 

Jika Anda ingin mencegah sebuah pos yang terletak di http://fe-blogger.blogspot.com/2013/11/custum-widget-label-cool-effec-untuk.html , Anda harus menggunakan kode di bawah ini. Pastikan, Anda tidak menambahkan nama domain dalam file Robot.txt:

Disallow:/2013/06/blogger-custom-robot-txt-setup.html

Catatan- Jika Anda menggunakan permalink kustom untuk posting blog Anda, gunakan url yang sama yang telah digunakan oleh Anda. 

2.Sembunyikan halaman khusus dari Search Engine 

Dengan menggunakan metode yang disebutkan di atas, Anda juga dapat melarang halaman khusus. Hanya menggunakan format yang diberikan di bawah ini

Disallow:/p/your-page-url

Pada kode di atas, ganti "page-url-Anda" dengan url dari halaman tertentu Anda. Sebagai contoh-Untuk menyembunyikan halaman yang terletak di http://fe-blogger.blogspot.com/2013/11/custum-widget-popular-posts-untuk.html, Anda dapat menambahkan kode di bawah ini diberikan dalam file robot.txt Anda:

Disallow:/p/our-services.html

Apa yang akan terjadi setelah menghapus "Disallow: / search" dalam file robot.txt?Seperti yang saya memberitahu Anda sebelumnya, "Disallow:" tindakan kata kunci sebagai penjaga. Jika Anda akan menghapus kode ini, robot Search Engine akan merangkak dan mengindeks segala sesuatu (semua isi dan halaman web) yang hadir di blog Anda. 

Memahami 5th Baris: "Allow:/"

Allow: /

Kode tersebut di atas adalah seperti gerbang utama blog Anda. Jika Anda telah menghapus kode "Disallow:" , mesin pencari akan menjelajah semua jenis link di blog Anda. Setiap file Robot.txt harus berisi kode ini.

Memahami Line Terakhir: Sitemap

Sitemap standar yang muncul di Robot.txt file blogger yang diberikan seperti di bawah ini:

Sitemap: http://fe-blogger.blogspot.com/feeds/posts/default?orderby=UPDATED

Kode sitemap yang disebutkan di atas memberitahu bots mesin pencari untuk menjelajah hanya 25 posting terbaru dari blog Anda. Jika Anda ingin meningkatkan frekuensi ini, gunakan kode di bawah ini :

Cara Instruksikan Bots Search Engine merangkak 500 Posts baru pada blog Anda?

Cukup gunakan kode di bawah ini diberikan dalam file robot.txt:

Sitemap: http://fe-blogger.blogspot.com/feeds/posts/default?orderby=UPDATED

Sitemap: http://fe-blogger.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500

Pada kode di atas, ganti "http://fe-blogger.blogspot.com/" dengan url blog anda. 

Cara Instruksikan Bots Search Engine merangkak 2000 Posts baru pada blog Anda? 

Cukup gunakan kode di bawah ini diberikan:...

Sitemap: http://fe-blogger.blogspot.com/feeds/posts/default?orderby=UPDATED

Sitemap: http://fe-blogger.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500

Sitemap: http://fe-blogger.blogspot.com/atom.xml?redirect=false&start-index=500&max-results=200

Pada kode di atas, ganti "http://fe-blogger.blogspot.com/" dengan url blog anda. 

Cara setup kustom Robot.txt file dalam Blogger.com Blog? 

Cukup ikuti langkah di bawah ini diberikan:

Pertama-tama, Sign in ke Akun Blogger Anda. Dalam Dashboard Blogger, Klik "Settings". Angka di bawah ini diberikan menunjukkan hal yang sama:

Pada Pengaturan, Klik pada "Preferensi Penelusuran" jika anda menggunakan settingan bahasa indonesia. Setelah melakukan hal itu, Anda akan melihat layar baru di sisi kanan. Cukup klik pada link "Edit" yang muncul di sebelah "Disabled" pilihan "Custom Robot.txt" pilihan. Angka di bawah ini diberikan menunjukkan segalanya dengan jelas.

Sekarang, Cukup aktifkan opsi ini dengan memilih tombol "Ya". Setelah memilih "ya", Anda akan melihat layar seperti di bawah ini: 

jika Anda sudah tahu segala sesuatu tentang kata kunci dan tag yang berbeda sehingga menerapkan satu, yang cocok untuk anda.

Sekarang, Anda sudah tahu segalanya tentang file Robot.txt jadi gunakan untuk hasil yang terbaik. Sembunyikan isi (yang tidak berguna di blog Anda) dari mesin pencari. 

Penjelasan di atas disediakan cukup mudah untuk memahami dan melaksanakan. Namun, jika Anda masih menemukan kesulitan untuk memahami atau menghadapi masalah apapun, jangan ragu untuk bertanya kepada saya melalui komentar.