{"id":1399,"date":"2017-11-13T05:17:46","date_gmt":"2017-11-13T05:17:46","guid":{"rendered":"http:\/\/wordpresshostingindonesia.com\/?p=1399"},"modified":"2017-11-13T05:17:47","modified_gmt":"2017-11-13T05:17:47","slug":"mengenal-apa-itu-file-robots-wordpress","status":"publish","type":"post","link":"https:\/\/wordpresshostingindonesia.com\/2017\/11\/13\/mengenal-apa-itu-file-robots-wordpress\/","title":{"rendered":"Mengenal Apa Itu File Robots WordPress"},"content":{"rendered":"

 <\/p>\n

Pernah mendengar yang namanya Robot.txt dan penasaran cara menggunakan ke website kamu? Kebanyakan website memiliki file robot.txt begitu juga WordPress yang memiliki file Robots WordPress. Pada post kali ini, saya akan coba membahas mengenai file Robots WordPress.<\/p>\n

Apa Itu File Robots WordPress?<\/h3>\n

Sebelum kita berbicara mengenai file Robots WordPress, penting untuk mengenal istilah ‘robots’ yang ada di dalam website. Robots merupakan salah satu tipe bots yang mengunjungi semua website yang ada di intersnet, salah satu contohnya adalah crawler search engine seperti miliki Google. Bots ini akan mengunjungi semua website dan membantu search engine seperti Google Search mengindeks website kita di engine milik mereka dan memberikan ranking.<\/p>\n

Secara umum bots merupakan hal yang baik bagi website kita, atau bisa dibilang dibutuhkan. Tetapi mungkin tidak semua halaman website kamu ingin dikunjungi bots agar tidak diindeks seperti halaman login misalnya. File robot.txt ini memiliki fungsi untuk mengontrol bagaimana bots berinteraksi dengan website kita. Kita bisa memblokir bots secara keseluruhan, atau membatasi akses ke beberapa halaman website tertentu.<\/p>\n

Kenapa Setiap Website Harus Mempertimbangkan Memiliki File Robot.txt?<\/h3>\n

File robot.txt yang disusun dengan sangat baik memiliki dua keuntungan utama:<\/p>\n