Pengertian Robot.txt beserta Fungsinya - Apa yang kalian ketahui tentang Robot.txt ? Pengertian Robot.txt adalah file yang memberi tahu crawel mesin telusur untuk halaman dan file yang dapat atau tidak dapat diindeks oleh crawel dari situs kalian. File tersebut digunakan untuk menghindari pemuatan - pemuatan berlebihan pada situs kalian.
Robot.txt merupakan sebuah alat untuk merayapi blog atau website kalian menggunakan boot (googleboot). Robot.txt digunakan untuk mengontrol halaman tertentu yang ingin diinfeksi dan tidak diinfeksi oleh perayap atau googleboot.
Fungsi Robot.txt ?
Robot.txt berfungsi untuk mengelola trafik crawel ke situs atau website kalian dan terkadang untuk menghilangkan atau menyembunyikan beberapa file dan halaman tertentu. Tergantung pada jenis file yang digunakan.Biasanya blog tanpa menyeting robot.txt hasilnya kurang maksimal dimensinya pencarian google. Karena halaman - halaman atau file tertentu tidak dibatasi ataupun jadi lebih dibatasi keberadaannya. Fungsi dari robot.txt sangat banyak bagi situs dan sangat vital seperti perayap yang merayapi seluruh bagian situs kalian.
Cara mengaktifkan Robot.txt di blogspot dan blogger
Dibawah ini adalah cara mengaktifkan robot.txt dengan sangat mudah. Mari kita simak langkah - langkahnya dibawah ini sob...1. Langkah pertama Robot.txt bisa kalian setting di menu draft blogger, buka draft blogger.
2. Langkah kedua setelah masuk ke draft blogger kalian buka setelan -> Preferensi penelusuran.
3. Disitu kalian bisa mengaktifkan dan menyeting robot txt secara manual.
4. Fokus pada bagian perayapan dan pengindeksan
5. Buka pada bagian robot.txt Khusus lalu aktifkan namun sebelum kalian bisa mengaktifkan fitur ini kalian harus daftarkan blog kalian ke webmaster/ search console (nama baru dari webmaster tools).
6. Jika kalian sudah mangaitkan blog dengan google search console. Kalian ambil file robot.txtnya
Seperti gambar diatas yang saya block warna ungu itulah file robot.txt yang harus kalian salin.
7. Setelah kalian copy file robot.txt tadi langkah berikutnya kalian masuk ke draft blogger lagi ke bagian setelan preferensi penelusuran, nah pastekan file robot txt tadi ke bagian robot.txt khusus, nanti hasilnya akan seperti dibawah ini
1. Langkah pertama kalian buka blogger ->setelan -> Preferensi penelusuran. Memang caranya hampir sama seperti menyeting robot txt khusus.
2. Langkah kedua kalian aktifkan tag tajuk robot untuk menyetingnya lihat gambar dibawah ini
Diatas adalah cara mengatur tag tajuk robot supaya hasilnya maksimal blog kalian Dimata search engine. Namun jika kalian ingin mengaturnya sendiri juga ngga papa itu pengaturan yang saya pakai selama ini.
Nah setelah kalian membaca artikel saya ini kedepannya semoga menambah ilmu dan bermanfaat bagi kalian. Pengertian robot txt beserta fungsinya dan cara menyeting robot txt sudah saya jelaskan. Semoga mengerti jika belum begitu paham silahkan komentar dibawah ini.
