Penjelasan dan Cara Setting Custom Robot.txt di Blogger

Penjelasan dan Cara Setting Custom Robot.txt di Blogger - Robot.txt di blogger (Blogspot) hanyalah berupa virtual file yang dapat disetting melalui pengaturan secara OnPage, karena kita tidak diberikan akses ke root direktory seperti pada blog atau situs yang menggunakan self hosting. Fungsi dari robots.txt ini adalah untuk mengoptimasi search engine (SEO) halaman blogger yang termasuk di dalamnya postingan, archived dan homepage sehingga postingan bisa terindeks lebih akurat di search engine, atau bisa diibaratkan rambu lalulintas bagi crawler mesin pencari seperti googlebot saat sedang meng-crawl konten atau isi blog kita.

File robots.txt memungkinkan kita untuk mengontrol dan memberikan izin bagi crawler search engine, mana konten blog yang boleh di akses dan mana konten blog yang tidak boleh diakses. Pada pengaturan file robots.txt ini hanya dikenal dua macam perintah yaitu DISALLOW untuk perintah larangan peng-indexan dan ALLOW untuk perintah mengizinkan peng-indexan.

Sebagai contoh bagi setiap blog yang menggunakan platform Blogger rata-rata akan menggunakan robots.txt seperti berikut:

User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Allow: /

Sitemap: http://www.example.com/feeds/posts/default?orderby=updated

penjelasan dari robot.txt diatas :

Mediapartners-Google adalah robot dari Google Adsense, dan biarkan seperti defaultnya karena jika Anda salah mengubahnya maka iklan yang ditayangkan tidak akan menyesuaikan dengan konten Anda.

Baris berikutnya adalah untuk semua robot yang ditandai dengan tanda bintang (*). Pada konfigurasi defaultnya jelas terlihat bahwa label dari blog kita sudah disetting untuk tidak terindeks dengan menulis Disallow: /search.

Perlu di ingat bahwa tanda garis miring ( / ) di ibaratkan sebagai homepage Anda, jadi misalkan Anda ingin supaya label terindeks jangan hanya mengisi dengan garis miring seperti ini Disallow: / karena itu sama saja Anda tidak memperbolehkan robot menelusuri blog Anda,
tapi menjadi seperti contoh di bawah ini:

User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow:
Allow: /

Sitemap: http://www.example.com/feeds/posts/default?orderby=updated

Dengan konfigurasi seperti di atas maka semua artikel dan label akan terindeks. Dan untuk memblock robot di halaman tertentu, Anda cukup menulis seperti berikut:

User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /p/daftar-isi.html
Allow: /

Sitemap: http://www.example.com/feeds/posts/default?orderby=updated

Note:
memecahkan masalah paginasi yang muncul di blogspot setelah kita menghapus Disallow: /search maka kita bisa menggunakan pengaturan seperti berikut untuk memblock halaman paginasi:

User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search?updated-min=
Disallow: /search?updated-max=
Disallow: /search/label/*?updated-min=
Disallow: /search/label/*?updated-max=
Allow: /

Sitemap: http://www.example.com/feeds/posts/default?orderby=updated

Setelah mengubahnya pastikan semuanya sesuai seperti apa yang kita inginkan dengan mengunjungi www.example.com/robots.txt.

Note :
- Ganti Example.com dengan domain Anda.
- Gunakan dengan hati-hati. Jika salah menggunakan fitur ini maka blog Anda bisa diabaikan oleh mesin pencari.

Demikian Artikel Penjelasan dan Cara Setting Custom Robot.txt di Blogger
Semoga Bermanfaat

Cara Agar Postingan Blog Cepat Terindex Google - Yahoo - Bing

Cara Agar Postingan Blog Cepat Terindex Google - Yahoo - Bing, sebenarnya tips SEO ini sudah banyak diulas oleh para blogger maupun pakar SEO, namun disini saya akan mengulas kembali dengan cara seperti yang saya lakukan di blog ini.

Cara Cepat Terindex Search Engine Google

Terindeks oleh search engine adalah hal yang sangat penting bagi kemajuan dan perkembangan blog/website anda, tanpa di indeks blog anda akan kesepian pengunjung dan menjadi percuma meskipun anda menulis konten yang fresh dan berkualitas namun tetap saja konten anda akan sia-sia, nah disinilah pengetahuan SEO itu berfungsi agar konten pada blog anda dikenali dan terindex oleh mesin pencari seperti Google, Yahoo, Bing maupun search engine lainnya karena hampir 60% pengunjung akan datang dari mesin pencari, Ada beberapa teknik atau strategi yang harus anda terapkan Agar Postingan Blog Cepat Terindex.

1. Submit Sitemap ke Search Engine Google/Bing
Sitemap adalah sebuah daftar isi yang menerangkan tentang apa yang ada pada blog/website anda, sitemap disini bukan daftar isi yang seperti ada pada halaman melainkan sitemap yang berupa XML, XML adalah sebuah bahasa yang hanya dimengerti oleh search engine. Untuk pengguna Wordpress bisa membuat sitemap dengan plugin, dan untuk pengguna Blogspot biasanya sudah terintegrasi, seperti pada contoh dibawah.

    http://www.tutorblogger.com/sitemap.xml
    http://www.tutorblogger.com/atom.xml?redirect=false&start-index=1&max-results=500
    http://www.tutorblogger.com/feeds/posts/default?orderby=updated

Silahkan submit sitemap anda pada Google Webmaster Tools, untuk Bing/Yahoo silahkan submit ke Bing Webmaster Tools.


2.  Link Building Agar Postingan Cepat Terindex Mesin Pencari
Agar Postingan Blog Cepat Terindex Search Engine anda harus membangun link ke halaman post anda, jangan hanya mencari link mengarah ke homepage saja, carilah link dofollow yang mengarah ke konten anda. Hal ini juga akan membuat blog anda menjadi populer dan terpercaya di mata search engine, mesin pencari seperti Google sangat senang dengan blog/web yang mempunyai link dofollow yang relevan yang mengarah ke halaman blog anda dan Google Pagerank pun bisa anda dapatkan.


3. Cara Cepat Terindex Google Dengan Social Bookmark/Social Media

Salah satu cara yang sangat cepat agar blog anda terindex mesin pencari adalah dengan membagikan (share) konten anda pada situs social bookmark yang banyak di jumpai sekarang ini seperti Twitter, Facebook, Digg, Linkedin,dll ataupun situs social bookmark Indonesia seperti Infogue, lintas.me, ,dll. Selain itu blog anda juga akan mendapatkan traffic dari situs social media tersebut.


4. Internal Linking Dalam Halaman Blog/Website
   
   Jika anda ingin halaman baru pada situs anda diindeks cepat maka internal linking akan menjadi sangat berguna. Sebutkan halaman baru anda dengan anchor text link, dan perbarui (update) halaman yang sudah terindeks sebelumnya dengan menyertakan link ke halaman baru anda (pastikan pembahasan pada konten anda sebelumnya cocok dengan konten anda yang baru).
   
   Linking halaman situs anda bukan hanya tentang membangun external backlink. Hal yang sangat penting juga adalah membangun link dalam website anda (internal linking) yang akan mengingatkan mesin pencari tentang kehadiran konten baru pada situs anda.


5. Ping website/blog untuk memanggil Google/Bing spider
   
   Ping pada mulanya merupakan metode untuk blogger untuk memperingatkan mesin pencari pada konten baru di blog mereka. Namun, telah berkembang di mana setiap orang dapat menggunakannya untuk memperbarui (update) bukan hanya blog tapi juga website tradisional
   
   Ping adalah sarana yang sangat berguna untuk memberitahukan mesin pencari dan direktori untuk pembaruan dalam konten anda.
   Ada banyak situs layanan ping online yang tersedia. Beberapa yang terbaik adalah:
   
   
   • pingoat.com
   • pingler.com
   • pingomatic.com
   
   
6. Komentar Pada Blog Agar Cepat Terindex Search Engine
   
   Blog dengan pembaca yang aktif dan banyak konten baru akan di crawled secara teratur oleh search engine, dengan berkomentar pada blog seperti itu maka anda akan mendapatkan imbas dari popularitasnya dan akan mendapatkan halaman sendiri diindeks dengan cepat. Cobalah mengomentari posting terakhir pada blog-blog yang sudah terkenal dan mempunyai ranking tinggi, ini adalah cara yang sangat efektif untuk mendapatkan halaman baru diindeks cepat dan pastikan bahwa anda menggunakan halaman yang ingin diindeks sebagai URL website anda ketika berkomentar tidak hanya halaman muka (homepage) saja.


7. Update Konten Blog/Website Secara Teratur
   
   Pastikan anda memperbarui situs anda secara teratur, konten yang fresh adalah penting untuk mendapatkan halaman baru diindeks. Jika konten yang ada pada blog anda sudah basi maka search engine tidak akan menjelajahi (crawl) blog anda secara teratur, Di sisi lain, jika anda menjaga blog anda segar dan diperbarui (meskipun memperbarui halaman indeks) maka spider mesin pencari akan terus datang kembali. Sebagai alasan kenapa banyak blog mempunyai peringkat baik dan konten nya terindeks cepat tidak lain adalah karena si pemilik blog sering memperbarui situs mereka dengan konten baru yang segar.
   
   Itulah beberapa tips seo tentang Cara Agar Postingan Blog Cepat Terindex Google - Yahoo - Bing seperti yang telah saya praktekkan di blog ini, bila ada kekurangan dan saran lain bisa disampaikan melalui komentar.

Semoga Bermanfaat...

Kumpulan tweet lucu, bijak, galau dan romantis terbaru 2013

Kumpulan tweet lucu, bijak, galau dan romantis terbaru yang pasti bikin kamu senyum-senyum sendiri ngebacanya! penasaran?? Oke mulai .. *kemudian DJ muter lagu dangdut*

---

Aku akan mencintaimu sampai si BISU berbicara kepada si TULI bahwa si BUTA melihat si LUMPUH berjalan.

---

Dibilang "TEMEN" bukan, dibilang "PACAR" juga bukan #deritakenaPHP

---

*panggilan* Pas Temenan : Gue-Elo | Pas Jadian : Aku-Kamu | Pas Putus : Siapa yah?? *pura-pura gak kenal*

---

Tuhan memang tidak selalu memberikan apa yang kita INGINKAN, tapi Tuhan selalu memberikan apa yang kita BUTUHKAN.

---

Udah siang nih, kamu jangan lupa makan yah biar gak mati, ntar kalo kamu mati, siapa lagi yang bisa MATI-in perasaan aku selain kamu??

---

Ujian mah gak usah dibawa tegang, tegangnya nanti aja pas liat mantan lagi ijab qobul =D

---

Nyamuk mah kaya hujan, beraninya keroyokan -_-

---

Mau tau gak persamaannya kamu sama Yogyakarta?? | Apa tuh?? | sama-sama ISTIMEWAA | aaaa so sweet :*

---

Cinta itu ibarat BBM, mungkin gebetan bisa "membacanya" tapi belom tentu bisa "membalasnya".

---

Tuhan menciptakan masalah bukan untuk membuat kita menyerah, tapi untuk membuat kita lebih dewasa.

---

Photoshopmu mengalihkan dompetku #salahlagu

---

Ternyata satu tambah satu itu emang dua, aku kira KITA -,-

---

*ketemu mantan* Motornya kenapa? mogok? | iya nih, bensinya habis | sini aku bantu dorong | bener nih?? | iya bener, aku bantu dorong sampe jurang terdekat!! | anjeeerrrrrrrrr

---

Bila 1.000 caraku tidak mampu meluluhkan hatimu, akan kugunakan 10.000 cara lagi untuk meluluhkannya :')

---

Kopi sama susu aja bisa BERSATU, masa kita engga --,

---

Dimana ada KEMAUAN disitu pasti ada Jalan dan dimana ada JALAN disitu ada LAHAN PARKIRAN.

---

Aku boleh yah simpan semua foto kamu? | untuk apa emang?? untuk nakut-nakutin yah? | iya, untuk nakutin semua rasa kangen aku yang berlebihan ini sama kamu :*

---

Cowok romantis itu bukan cowok yang PUITIS, tapi cowok yang gak akan pernah buat ceweknya NANGIS!

---

Dibilang "PACAR" bukan, dibilang "MANTAN" juga bukan #deritahubungandigantung

---

Jadi malam minggu ini lagi-lagi cuma di rumah?? hahahahhahahahahhahahahaha sama ._.

---

Tawuran berani, tapi giliran disuruh nembak gebetan gak berani -_-

---

*planning entar malem* Pacaran : Pulang - Mandi - Jalan | LDR : Pulang - Mandi - Telponan | Jomblo : Pulang - Mandi - Sabunan *entah mau ngapain*

---

Tunggu postingan berikutnya yah..
Atau follow and cek favorite di @tawatiwiIndo