Apa itu duplikat konten ?

Penyebab duplikat konten

Dampak duplikat konten terhadap SEO blog

Mengatasi / mencegah duplikat konten

• Pengertian dan fungsi robots txt
• Pengertian dan bagian-bagian URL

Contoh konfigurasi robots.txt

Bagian-bagian konfigurasi robots.txt:

Format (sintak)

Grup Intruksi

Intruksi (directives)

• Disallow : Path URL
  Tidak mengizinkan target user agent grup yang bersangkutan untuk dapat mengindex konten dengan path URL yang bersangkutan.
• Allow : Path URL
  Mengizinkan target user agent grup yang bersangkutan untuk dapat mengindex konten dengan path URL yang bersangkutan.

• User-agent : * Mulai grup 1. Nama user agent diisi dengan simbol *. Hal ini berarti pengaturan yang terdapat pada grup 1 diperuntukkan untuk semua crawlers. Lebih jauh tentang simbol * akan kita bahas nanti.
• Disallow : /search Intruksi yang diterapkan untuk grup 1. Tidak mengizinkan target crawlers grup 1 untuk dapat mengindex konten dengan path URL yang dimulai dengan query /search
• Allow : /search/label/ Intruksi lainnya yang juga diterapkan untuk grup 1. Mengizinkan target crawlers grup 1 untuk dapat mengindex konten dengan path URL yang dimulai dengan query /search/label/
• User-agent: Mediapartners-google Mulai grup 2. Nama user agent ditentukan secara spesifik (Mediapartners-google). Hal ini berarti intruksi yang terdapat pada grup 2 hanya diperuntukkan untuk crawler dengan nama Mediapartners-google. Dalam hal ini, Mediapartners-google adalah nama user agent untuk crawler Google adsense.
• Disallow: Intruksi yang diterapkan untuk grup 2. Pada intruksi ini, Path URL tidak didefinisikan. Fungsi dari pengaturan ini adalah mengizinkan crawler yang disebutkan pada grup 2 untuk dapat mengindex semua konten web.
• Sitemap : http://www.wiblogger.com/atom.xml Menginformasikan URL sitemap xml kepada semua crawlers. Ini bertujuan untuk mempermudah crawler dalam mengindex setiap konten yang dikehendaki (untuk diindex).
  
  
  Baca juga: Cara submit sitemap blog di google search console

Mendefinisikan Target User Agent (Pembuka grup)

Mendefinisikan Path URL pada intruksi

Penggunaan simbol * (bintang) dan $ (dollar) pada Path URL

Penggunaan simbol *

Penggunaan simbol $

Mengenai URL Sitemap

Mengenai User Agent Crawlers Google

Informasi user agent untuk berbagai crawler

Contoh-contoh

1. Apa itu robots.txt ?
2. Fungsi robots.txt
3. Cara kerja robots.txt
4. Beberapa informasi lainnya terkait robots.txt
5. Kapan webmaster membutuhkan robots.txt ?
6. Apakah setiap website harus memiliki robots.txt ?

Apa itu robots.txt ?

Fungsi robots.txt

Cara kerja robots.txt

1. Menjelajahi konten halaman
2. Mengindek halaman (meletakkan halaman pada database mereka) untuk akhirnya akan ditampilkan pada hasil penelusuran.

Beberapa informasi lainnya terkait robots.txt

• Untuk dapat ditemukan oleh web crawler, file robots.txt harus berada pada direktori akar website. File robots.txt adalah file publik. Dengan kata lain, semua orang dapat melihat file robots.txt ini dengan mengetikkan "robots.txt" setelah domain utama (misal http://www.wiblogger.com/robots.txt).
• Penamaan file robots.txt bersifat case sensitive, nama file harus berupa "robots.txt" (huruf kecil semua).
• Setiap subdomain memiliki file robots.txt yang berbeda dari domain utama. Dengan kata lain, crawler tidak menggunakan file robots.txt yang terdapat pada domain example.com untuk subdomain blog.example.com.
• Semua mesin pencari pupoler akan patuh pada konfigurasi robots.txt. Namun, perlu anda ketahui bahwa tidak semua crawlers akan mengikuti intruksi yang terdapat dalam file robots.txt. Ada banyak pihak yang menjalankan crawler untuk tujuan tertentu di internet, sebut saja misalnya program email scrapers. Crawlers jenis ini tentu akan mengabaikan robots.txt. Jadi, penerapan robots.txt ini tidak menjamin halaman / data anda tertutup untuk semua pihak.

Kapan webmaster membutuhkan robots.txt ?

• Mencegah duplikat konten pada mesin pencari
• Mencegah mesin pencari untuk mengindek file tertentu pada website (Misal: file gambar, PDF atau lainnya)
• Memberikan informasi lokasi sitemap

Apakah setiap website harus memiliki (mengaktifkan) robots.txt ?

• Cara settings / konfigurasi robots.txt

Fungsi Halaman Sitemap

Cara membuat halaman sitemap

• Pertama, buat halaman statis baru.
  
  
  
• Beri judul "Daftar isi" atau "Sitemap" (atau apapun yang anda kehendaki). Copy dan paste semua kode dibawah ini kedalam Editor Laman dengan mode HTML.
  
  
  Kode (CSS & Javascript)

  <!-- Sitemap by wiBlogger.com -->

  <style>

  #w-sitemap-wrapper {font-size:13px}

  #w-sitemap-wrapper li {position:relative;padding:.385em 0 .385em 6.923em;border-top:none;border-bottom:1px solid #f6f6f6}

  #w-sitemap-wrapper span {position:absolute;left:0;color:#bd8b56}

  #w-sitemap-wrapper a {font-weight:bold}

  #w-sitemap-loading-msg {height:100px;line-height:100px;text-align:center;font-weight:bold;letter-spacing:1px;font-size:18px;color:#bbbbbb}

  </style>

  
  

  <script>

  (function(c,m){var h=window;var l=document;var e="w-sitemap-wrapper";var g="w-sitemap-loading-msg";var b=h.location;var n=b.protocol;var f=b.hostname;var k=0;l.write("<div id='"+e+"'><ol></ol><div id='"+g+"'>"+m+"</div></div>");var a=l.getElementById(e);var d=l.getElementById(g);var j=l.getElementById(e).getElementsByTagName("ol")[0];function i(o){var p=l.createElement("script");p.src=n+"//"+f+"/feeds/posts/summary?alt=json-in-script&callback=wijs_get_sitemap&start-index="+o+"&max-results=150";a.appendChild(p)}h.wijs_get_sitemap=function(E){var A=E.feed.entry;var u=parseInt(E.feed.openSearch$totalResults.$t);var x=A.length;var w="";for(var s=0;s<x;s++){var o=A[s];var C=o.title.$t;var p;var D=o.link;var y=D.length;for(var r=0;r<y;r++){if(D[r].rel==="alternate"){p=D[r].href;break}}var z=o.published.$t;var q=z.substring(0,4);var t=z.substring(5,7);var v=z.substring(8,10);var B=c.replace("dd",v).replace("mm",t).replace("yyyy",q);w+="<li><span>"+B+"</span><a href='"+p+"'>"+C+"</a></li>"}j.innerHTML+=w;k+=x;if(k<u){i(k+1)}else{d.parentNode.removeChild(d)}};i(1)})("dd/mm/yyyy","Loading......");

  </script>

• Publikasikan laman.
  
  
  

Hasil

Tambahan

• 13px
  Ukuran font
• 18px
  Ukuran font text loading
• #f6f6f6
  Kode warna HTML untuk border
• #bd8b56
  Kode warna HTML untuk waktu publikasi
• #bbbbbb
  Kode warna HTML untuk text loading
• Loading......
  text yang ditampilkan pada proses loading
• dd/mm/yyyy
  Format waktu publikasi. dd adalah tanggal, mm adalah bulan, yyyy adalah tahun. Misal, jika format ini anda ganti menjadi dd-mm-yyyy, hasil akan berupa 28-01-2018. Selain pembatas, anda juga bisa menyesuaikan urutan data.

Menambahkan sitemap pada menu navigasi blog

• Untuk mempercepat proses indeks postingan, selalu luangkan waktu untuk melakukan fetch as google setiap kali anda menerbitkan postingan baru.
• Terkait fitur Fetch as google di google search console, anda bisa melakukan fetch halaman sitemap ini dengan memilih opsi mode pengindeksan "Rayapi URL ini dan link langsungnya".
  
  
  
  
  Direkomendasikan untuk melakukan hal ini setidaknya satu bulan sekali untuk menjaga agar setiap postingan anda tetap terindek oleh google.

• Perbedaan laman dan post
• Cara membuat daftar isi didalam postingan blog
• Membuat halaman Privacy policy, Discalimer, dan Contact Us
• Mengenal tipe-tipe halaman blogger

Apa itu blogwalking dalam artian yang sebenarnya ?

Fakta dilapangan tentang blogwalking

Blogwalking sehat

Blogwalking tidak sehat

Meningkatkan trafik / pengunjung

Untuk faktor ini, benar memang pengunjung blog akan meningkat, ini jelas karena mereka memiliki kesepakatan untuk saling mengunjungi blog masing-masing. Namun, berbicara tentang manfaat yang diberikan, peningkatan pengunjung yang bersumber dari kegiatan ini hampir tidak memberikan manfaat sama sekali. Pada kebanyakan kasus, blogwalking jenis ini cendrung akan berdampak buruk terhadap SEO blog. Kenapa ? Hal ini karena pada umumnya, mereka akan saling mengunjungi blog dalam durasi yang sebentar (mungkin kurang dari 2 menit).

Hal ini tentu akan buruk untuk SEO blog. Walaupun secara resmi hingga saat ini pihak google tidak menyatakan bahwa durasi kunjungan adalah salah satu parameter yang mereka gunakan dalam menentukan pringkat halaman. Berdasarkan opini dan pengamatan pribadi (dan masuk akal), lamanya durasi kunjungan akan memberikan efek positif pada mesin pencari. Ini membuktikan bahwa halaman anda dapat memenuhi kebutuhan pembaca. Sebaliknya, jika rata-rata durasi kunjungan ini berlangsung cepat, sangat masuk akal jika google memponis halaman yang bersangkutan sebagai halaman dengan low-quality content.

Mendapatkan banyak komentar

Salah satu kegiatan lainnya yang dilakukan saat blogwalking adalah saling berkomentar. Tujuan seperti ini umumnya dilakukan agar blog terlihat populer dan memiliki banyak respon dari blogger lainnya. Atau, sebagian dari mereka mungkin akan menjawab bahwa kegiatan seperti ini sebagai salah satu bentuk dari menjalin silaturahmi. Tentu tidak ada salahnya jika tujuannya memang untuk menjalin silaturahmi, namun, sebagian besar saya yakin tidak (benar-benar) melakukan blogwalking untuk tujuan silaturahmi. Lagipula, jika memang untuk silaturahmi, kenapa tidak dilakukan melalui media komunikasi yang mereka gunakan saat membuat kesepakatan ?

Saling klik Iklan

Saling klik iklan merupakan kegiatan baru dalam blogwalking. Seingat saya, belum ada kegiatan seperti ini pada saat saya memulai kegiatan blogging (2009 - 2011). Ada mungkin, namun sangat jarang sekali. Ini jelas merupakan kegiatan yang tidak sehat sama sekali. Mereka melakukan kegiatan manipulasi klik iklan untuk mendapatkan penghasilan. Hal ini jelas melanggar kebijakan media periklanan (khususnya media periklanan berbasis pay per click seperti Google AdSense misalnya).

Mengenai pengunjung dan popularitas yang didapat dari kegiatan Blogwalking (anggaplah) tidak sehat

Mengenai backlink komentar

1. Apa itu daftar isi postingan ?
2. Proses pembuatan daftar isi
3. Pemasangan pada postingan
4. Tips dan Informasi tambahan

1. Apa itu daftar isi postingan ?

2. Cara membuat daftar isi di dalam postingan

1. Langkah 1:
   Berikan ID unik pada tag pembungkus untuk elemen yang hendak disertakan pada daftar isi.
2. Langkah 2:
   Buat link dengan URL tujuan yang mengandung Anchor dengan nama ID elemen yang telah didefinisikan pada langkah 1.

Langkah 1: memberikan ID unik pada elemen

Pada antarmuka pembuatan postingan, beralih ke mode HTML dan berikan ID unik pada elemen yang hendak dijadikan target pada link daftar isi (dalam contoh ini adalah setiap elemen heading h2). Berikut adalah contoh tag HTML sebelum dan setelah diberikan atribut ID.

Tag H2 tanpa ID

<h2>Text</h2>

Tag H2 dengan ID

<h2 id='daftarisi-1'>Text</h2>

Postingan terkait:
Mengenal antarmuka pembuatan postingan Blogger - (Dasar)
Cara membuat postingan yang SEO - (Rangkuman SEO)

Hal penting yang harus anda ketahui adalah ID harus bersifat unik. Dengan kata lain, setiap ID harus berbeda dengan ID lainnya (dalam satu halaman). Anda bisa membuat ID untuk kebutuhan daftar isi ini dengan format yang konsisten, seperti misalnya daftarisi-1, daftarisi-2, dan seterusnya.

Pemberian ID tidak hanya terbatas pada tag h2 saja, anda bisa memberikan ID pada semua tag HTML, baik itu div, img, dan lain sebagainya.

Langkah 2: Membuat link yang mengarah pada elemen dengan ID tertentu

Selanjutnya, setelah setiap elemen yang dikehendaki telah memiliki ID unik, buat link dengan URL tujuan yang mengarah pada elemen tersebut. Adapun pembuatan link jenis ini dilakukan dengan cara mengisi URL tujuan dengan anchor berupa ID elemen yang dikehendaki.

Link dengan anchor

<a href='#daftarisi-1'>Text</a>

Lebih jauh tentang URL dan bagian-bagian URL bisa anda baca pada halaman: Pengertian dan bagian-bagian URL.

3. Pemasangan daftar isi pada postingan

<ol>

<li><a href='#daftarisi-1'>Text</a></li>

<li><a href='#daftarisi-2'>Text</a></li>

<li><a href='#daftarisi-3'>Text</a></li>

</ol>

Penting ...!

<a href='https://www.blogger.com/blogger.g?blogID=123123123123123#namaid'>Text</a>

• Tip:
  Definisikan ID dengan format yang konsisten untuk setiap bagian yang hendak disertakan pada daftar isi. Misal daftarisi-1, daftarisi-2, daftarisi-3 dan seterusnya.
• Info:
  Terkait pendefinisian ID, untuk anda yang masih belum begitu mengenal bahasa HTML, anda mungkin bingung tentang apa yang dimaksud dengan ID Unik. Dalam hal ini, sautu ID harus berbeda dengan ID lainnya pada halaman atau postingan yang sama. Dengan kata lain, anda hanya bisa menggunakan nama ID tertentu sebanyak satu kali dalam satu postingan. Hal yang perlu diketahui disini adalah ruang lingkup unik ini hanya berlaku per-halaman. Saya misalkan jika pada suatu postingan anda mendefinisikan ID dengan nama daftarisi-1 dan daftarisi-2, untuk postingan yang akan anda terbitkan selanjutnya, anda tetap bisa menggunakan ID daftarisi-1 dan daftarisi-2. Ya, sifat unik ini hanya berlaku per-halaman (bukan semua halaman).
• Tip:
  Untuk lebih mudahnya, anda bisa menyertakan format penulisan HTML daftar isi diatas pada Template Entri.

Cara menggunakan Fetch as Google

1. Login ke Dashboard Google search console untuk blog yang bersangkutan, pada menu Perayapan (Crawl) pilih Fetch as Google.
   
   
   
2. Selanjutnya, masukkan Patch URL Postingan pada text box yang tersedia. Disini, cukup masukkan patch URL tanpa domain utama (hostname). Saya ambil contoh untuk URL postingan ini, bagian yang berwarna merah adalah Patch URL.
   
   
   URL

   http://www.wiblogger.com/2018/01/fetch-as-google.html

   
   
   Post terkait:
   Mengenal apa itu URL dan bagian-bagian URL
   
   
   
3. Selanjutnya, klik Ambil (Fetch). Seperti yang anda lihat, selain Ambil, terdapat juga opsi Ambil dan Render (Fetch and render). Lebih jauh tentang ini akan anda jumpai pada poin berikutnya. Setelah anda mengklik ambil, Pada daftar link, klik Minta pengindeksan.
   
   
   
4. Terdapat 2 opsi perayapan yaitu Rayapi URL ini saja dan Rayapi URL ini dan link langsungnya.
   
   
   
   
   
   

   Rayapi URL ini saja

   Mengintruksikan robot google untuk hanya merayapi halaman dengan URL yang telah diberikan.
   
   
   
   
   
   

   Rayapi URL ini dan link langsungnya

   Mengintruksikan robot google untuk juga merayapi halaman-halaman yang tertaut secara langsung. Dengan kata lain, tidak hanya halaman dengan URL yang telah diberikan yang akan dirayapi, setiap link yang terdapat pada halaman tersebut juga akan dirayapi.
   
   
   
   
   Fitur ini digunakan untuk mengindeks banyak halaman sekaligus, sebut saja misalnya halaman daftar isi blog (Halaman yang berisi semua link postingan blog. Lebih jauh pembuatan daftar isi blog bisa anda baca pada post: Cara membuat halaman daftar isi blog secara otomatis. Jumlah permintaan dengan fitur ini dibatasi hanya 10 kali perbulan.
   
   Kembali pada prosedur selanjutnya, pilih opsi yang anda kehendaki. Untuk sekarang, cukup pilih opsi pertama (Rayapi halaman ini saja). Verifikasi captcha dan kirim.
   
   
   
5. Selesai !
   
   
   
   
   Pada kasus normal, proses pengindeksan postingan dengan fetch as google ini umumnya hanya membutuhkan waktu beberapa menit (kurang dari 10 menit).
   
   
   
   
   
   Fetch as Google merupakan salah satu kegiatan rutin yang dilakukan oleh sebagian besar blogger. Usahakan untuk selalu melakukan Fetch as Google setiap kali anda menerbitkan postingan baru. Sebagai informasi tambahan, jika postingan anda tetap tidak terindeks setelah lebih dari 20 menit, lakukan fetch ulang.

Tentang fitur Ambil dan Render

Apa itu sitemap ?

• Sitemap adalah sebuah file (umumnya berformat XML) yang berisi URL halaman-halaman sebuah situs
• Didalam sitemap, terdapat URL halaman dan beberapa informasi terkait lainnya yang dalam hal ini telah diizinkan oleh pemilik situs untuk di-index oleh mesin pencari
• Menambahkan sitemap di Google Search Console bertujuan untuk membantu mesin pencari google dalam menjelajahi isi / postingan blog yang kita kelolah.
• Untuk blog dengan platform blogging blogger.com, file sitemap ini dapat diakses dengan URL: domain-utama/atom.xml

Cara Submit Sitemap Postingan Blogger di Google search console

• Buka dashboard search console untuk blog yang bersangkutan, pada menu sidebar, klik Perayapan (Crawl) dan pilih Peta situs (Sitemaps).
  
  
  
• Klik Tambahkan/Uji Peta situs.
  
  
  
• Masukkan path dan parameter URL dibawah ini pada form yang tersedia.
  
  
  Sitemap postingan

  atom.xml?redirect=false&start-index=1&max-results=150

  
  Postingan Terkait:
  Mengenal pengertian dan bagian-bagian URL
• Terakhir, klik Kirim.
  
  
  
• Sampai pada tahap ini, sitemap telah berhasil ditambahkan. Klik Segarkan halaman (Refresh).
  
  
  
• Anda akan melihat antamuka menu sitemap yang menginformasikan status index untuk sitemap yang bersangkutan. Disini, status index masih tertunda. Ya, google membutuhkan waktu untuk memproses sitemap anda. Proses ini biasanya akan belangsung selama beberapa jam (atau mungkin bisa sampai 1 hari).
  
  
  

<!-- Postingan 151 hingga 300 -->

atom.xml?redirect=false&start-index=151&max-results=300

<!-- Postingan 301 hingga 450 -->

atom.xml?redirect=false&start-index=301&max-results=450

<!-- dan seterusnya -->

Sitemap Laman Statis

sitemap-pages.xml