Gambar Bootstrap 3

Cara Paling Aman Setting Robot.txt dan Tag Tajuk Robot khusus pada Blogger

mengatur konfigurasi robot.txt dan tag tajuk robot khusus pada blogger itu sangat penting. Kenapa?

Karena hal ini akan memudahkan blog kita untuk dirayapi mesin pencari google. Jika blog kita sulit untuk dirayapi mesin pencari.


Hal ini berpengaruh pada tingkat SEO blog kita. Masalah yang sering terjadi pada robot.txt ini biasanya adalah masalah pada bagian search.


Banyak dari pengguna google search console mempertanyakan masalah tersebut.

Banyak juga orang yang salah dalam settingan robot.txt, sehingga berpengaruh pada blog mereka.

Oleh karena itu, kali ini saya akan memberikan tips mengatur robot.txt dan tag tajuk robot khusus pada blogger yang benar dan aman.

Settingan robot.txt yang aman


Settingan ini adalah settingan default blogger, tapi bukan berarti tidak efektif. Saya sendiri menggunakam settingan ini, dan terbukti aman. Berikut robot.txt nya.

User-agent: Mediapartners-Google
Disallow:

User-agent: *
Allow: /
Disallow: /search

Sitemap: https://www.blogger-kamu.blogspot.com/sitemap.xml

Keterangan:


1. User-agent: Mediapartners-Google (ini menandakan blog anda menggunakan adsense) kalau tidak menggunakan adsense, diamkan saja

2. Disallow:
( ini harus tetep disallow)

3. User-agent: * ( semua mesin robot pencari)

4. Disallow: /search ( tidak mengizinkan perayapan pada search maupun setelahnya)

5. Allow: / (yang diizinkan untuk dirayapi selain yang disallow)

6. Sitemap: https://blogger-kamu.blogspot.com/sitemap.xml ( bagian yang ini adalah sitemap blog kalian)

Kita liat di no.4 disitu bertuliskan disallow: /search

Artinya: robot.txt tidak diizinkan untuk merayapi bagian search maupun setelahnya.

Misalnya saja https://blog-kamu.com/search/label/tutorial

Berarti robot.txt tidak akan merayapi pada bagian search/label/tutorial

Cara menerapkan robot.txt pada blogger


Kalian harus masuk ke blogger kalian. Kemudian kalian klik setelan > search preference. Kemudian aktifkan robot.txt khusus dan masukan robot.txt yang sudah saya jelaskan diatas. Seperti ini contohnya


Settingan tag tajuk robot khusus yang benar


Untuk mengaktifkan tag tajuk robot khusus, kalian harus pergi ke setelan > search preference > tag tajuk robot khusus.

Kalian aktifkan tag tajuk robot khusus tersebut. Kemudian kalian setting seperti gambar dibawah ini.


Kenapa saya hanya menceklis di bagian search dan archive?

Karena dibagian situlah, bagian yang sulit untuk dirayapi mesin pencari google.


Jadi kalian ceklis seperti gambar saya diatas. Saya sendiri menggunakan settingan seperti itu. Jadi aman kok.

Kesimpulan


Jadi agar blog menjadi lebih SEO, penting adanya peran dari robot.txt, kita harus memaksimalkan fungsi robot.txt dengan baik agar blog kita menjadi lebih SEO friendly.


Demikian tutorial dari saya, jika kalian ingin memberikan saran, silahkan kalian berikan melalui komen karena saya juga pasti melakukan kesalahan.

Terima kasih.




Show comments
Hide comments

1 Response to "Cara Paling Aman Setting Robot.txt dan Tag Tajuk Robot khusus pada Blogger"

Iklan Atas Artikel

Iklan Tengah Artikel 1

Iklan Tengah Artikel 2

Iklan Bawah Artikel