Skip to main content

Apa itu robots.txt?

Robots.txt adalah sebuah file yang diletakkan di root directory. File ini merupakan file yang mempunyai tugas tersendiri pada saat - saat tertentu. File ini sangat berguna saat suatu situs mesin pencari seperti google akan mengindex situs Anda. File robots.txt merupakan file utama yang akan di cari oleh mesin pencari dalam hal untuk meminta permisi seputar direktori atau file mana saja yang boleh di index oleh mereka (sreach enggine). File ini juga berguna sebagai langkah proteksi awal untuk halaman - halaman atau direktori - direktori tertentu yang mengandung privasi atau kerahasiaan dalam situs Anda.
Penggunaan file robots.txt tentunya harus sesuai dengan namanya agar bisa berjalan di website Anda. Untuk penulisan sintak - sintak tertentu dalam file robots.txt harus menggunakan huruf kecil semua. Itu merupakan beberapa syarat dalam pembuatan file robots.txt. Pada beberapa CMS file robots.txt ini memang sudah disediakan sekaligus dalam kumpulan file - file cms tersebut. File ini dapat kita kostumisasi sesuai keinginan kita hanya dengan sedikit pengetahuan tentang file robots.txt tapi ingat juga kesalahan terkadang bisa berakibat fatal!. Sekian dan terimakasih.

Comments

  1. wah baru tau saya. Tq infonya. Mantabs..

    ReplyDelete
  2. @cintabatik: sama-sama...
    thanks yaa udah mampir... :)

    ReplyDelete
  3. baru tau nih, thanks ya infonya. walking dong ke blog saya, masih newbie sih.

    ReplyDelete
  4. @Yuni: sama-sama, thanks ya udah berkunjung...
    saya sudah berkunjung ke blog Anda, blognya mantap :)

    ReplyDelete
  5. mantap gan,.jd pngen coba ni..:D

    ReplyDelete
  6. @Bagus: thanks yaa udah berkunjung...
    Mmm,...
    silahkan di coba.
    semoga berhasil... :)

    ReplyDelete

Post a Comment

*jika Anda belum terdaftar di KoFa Style Blog, harap memilih profil Nama/URL sebelum memposting komentar.

Popular posts from this blog

Konsep dan Hirarki DNS

DNS adalah suatu bentuk database yang terdistribusi, dimana pengelolaan secara lokal terhadap suatu data akan segera diteruskan ke seluruh jaringan (internet) dengan menggunakan skema client-server. Suatu program yang dinamakan name server, mengandung semua segmen informasi dari database dan juga merupakan resolver bagi client-client yang berhubungan ataupun menggunakannya. Struktur dari database DNS bisa diibaratkan dengan dengan struktur file dari sebuah sistem operasi UNIX. Seluruh database digambarkan sebagai sebuah struktur terbalik dari sebuah pohon (tree) dimana pada puncaknya disebut dengan root node. Pada setiap node dalam tree tersebut mempunyai keterangan (label) misalnya, .org, .com, .edu, .net, .id dan lain-lainnya, sampel penggunaan pada  www.aceh-id.com yang relatif rerhadap puncaknya (parent).Ini bisa diibaratkan dengan relative pathname pada sistem file UNIX,seperti direktori bin, usr, var, etc dan lain sebagainya. Pada puncak root node dalam sebuah sistem DNS di

Cara Install Puppy Linux di USB

Hi All!!! Malam ini ada lattop mau di install ulang... Tapi sayangnya banyak data yang tersimpan di c:\ termasuk beberapa data proyek kecil - kecilan yang minggu depan mesti diserahkan sama vendor... huffff... pusing deh. Tapi saat menulis tulisan ini semua hampir teratasi. Ya!!! Puppy linux solusinya. Jadi biar lebih mermamfaat mending di tulis aja di blog kofa-style biar kalau Ada yang mampir seperti yang sedang membaca ini bisa dapat bantuan kalau tidak banyak ya barang sedikit saja. Oke kita mulai saja... Mengapa Puppy? jawabnya karena mudah dan ringan untuk keperluan system operasi bootable sekedar buat back up data dan memperbaiki error partisi pada windows XP.

Navigasi Halaman Blog dengan Javascript

Page Navigation atau Navigasi Halaman berfungsi untuk mempermudah para pengunjung untuk menjelajahi blog kita dengan melihat halaman per halaman. Bagi pengguna Wordpress, tentunya sudah tidak asing lagi dengan Page Navigasi seperti yang Anda lihat pada gambar disamping, karena biasanya template-template wordpress sudah menyediakan fasilitas ini. Bagi pengguna Blogspot, harus menambahkan sintak JavaScript dibawah ini. berikut cara-caranya: Login ke Blog Anda pilih Rancangan kemudian klik tab Edit HTML masukkan kode dibawah ini sebelum kode ]]></b:skin> .showpageNum a { color:#FFF;padding:4px 10px; margin:0 2px; text-decoration:none; -webkit-border-radius:2px;- moz-border-radius:2px; background:#848484 } .showpageOf { color:#222; margin:0 6px 0 0 } .showpageNum a:hover { background:#222; color:#FFF } .showpagePoint { color:#FFF; text-shadow:0 1px 2px #333; padding:4px 10px; margin:0 2px; -webkit-border-radius:2px; -moz-border-radius:2px; background:#222; text-de