SEO Pertemuan 3

Anatomi Algoritma & Cara Kerja Mesin Pencari

2

Tahap 1: Crawling (Perayapan)

Crawling adalah proses di mana Googlebot mengunduh teks, gambar, dan video dari halaman yang ditemukan melalui link di internet.

Bagaimana Googlebot Menemukan URL?

Internal & Eksternal Link

Cara utama — bot mengikuti tautan dari halaman yang sudah dikenal.

XML Sitemap

Peta situs yang Anda submit ke Google Search Console.

Manual Submission

Menggunakan fitur URL Inspection di GSC.

Redirect Chain

Google mengikuti 301/302 redirect ke URL tujuan.

Dua Konsep Kritis di Crawling

Robots.txt — File Protokol

File teks di root domain (domain.com/robots.txt) yang memberi instruksi ke bot. Jika Anda menulis Disallow: /private/, Googlebot tidak akan merayapi folder itu.

⚠ Robots.txt memblokir crawling, bukan indexing. Jika halaman sudah terindeks sebelumnya, ia tetap bisa muncul di SERP.

Crawl Budget — Anggaran Perayapan

Googlebot punya keterbatasan sumber daya. Setiap situs diberi "anggaran" waktu & jumlah halaman yang bisa di-crawl per hari. Budget besar untuk situs populer, kecil untuk situs baru/kecil.

💡 Cara hemat crawl budget: Perbaiki error 404, hindari duplikasi URL, percepat response server, gunakan robots.txt untuk mengecualikan halaman tidak penting.

3

Tahap 2: Indexing (Pengindeksan)

Tidak semua halaman yang di-crawl akan diindeks. Google akan menganalisis teks, tag HTML, merender JavaScript, dan memutuskan apakah halaman layak disimpan di database raksasa bernama Google Caffeine.

Canonicalization

Jika Google menemukan beberapa URL dengan konten sama (misal versi HTTP vs HTTPS, atau ?warna=merah vs ?warna=biru), Google akan memilih 1 URL utama (canonical) dan membuang sisanya agar tidak dianggap duplikat.

Solusi: pasang tag <link rel="canonical"> di setiap halaman untuk memberi tahu Google URL mana yang harus dipilih.

JavaScript Rendering (WRS)

Website modern (React, Vue, Angular) menyusun konten via JavaScript. Googlebot harus menjalankan kode JS dulu (Web Rendering Service) untuk melihat konten sesungguhnya — proses ini memakan waktu & sumber daya ekstra.

Solusi: gunakan SSR (Server-Side Rendering) atau SSG (Static Site Generation) agar konten langsung terlihat.

Halaman yang Diindeks
  • Konten unik & bernilai
  • Struktur HTML bersih
  • Dapat diakses publik (tidak login)
  • Meta robots: index, follow
Halaman yang Ditolak
  • Konten duplikat / thin content
  • Halaman noindex
  • Konten spam / auto-generated
  • Halaman login / internal dashboard

Insight SEO

"Kalau halaman Anda sudah di-crawl tapi tidak muncul di Google, cek dulu apakah ia benar-benar terindeks. Buka Google Search Console → URL Inspection → ketik URL halaman."

4

Tahap 3: Ranking (Pemeringkatan)

Terjadi dalam hitungan milidetik saat pengguna menekan tombol Enter. Google mencari miliaran halaman di indeksnya, menyaring yang paling relevan dengan kueri, lalu mengurutkannya menggunakan 200+ faktor peringkat (ranking signals).

3 Sinyal Peringkat Utama

1. Konten

Seberapa baik halaman menjawab intent pengguna. Kualitas, kedalaman, keunikan, dan E-E-A-T.

2. Backlink

Tautan masuk dari situs tepercaya sebagai "rekomendasi digital". Kuantitas + kualitas + relevansi backlink.

3. UX / Page Experience

Kecepatan (Core Web Vitals), mobile-friendliness, HTTPS, dan ketiadaan pop-up yang mengganggu.

🤖 Peran AI dalam Ranking Google

Google bukan lagi sekadar pencocok kata kunci. Sejak 2015, Google menggunakan AI (Artificial Intelligence) untuk benar-benar memahami apa yang Anda maksud. Mari kita bedah 3 AI utama dengan analogi sederhana.

Evolusi Kecerdasan Google

2015
RankBrain
"Paham maksud meski kata beda"
2019
BERT
"Paham konteks kalimat"
2021
MUM
"Paham teks + gambar, 75 bahasa"
2024
AI Overviews
"Jawab langsung di SERP"

Kesimpulan: Kenapa Ini Penting untuk SEO?

Ketiga AI ini menunjukkan satu tren jelas: Google semakin pintar memahami konten seperti manusia. Artinya:

  • Taktik lama (keyword stuffing, artikel tipis) semakin tidak efektif
  • Konten yang manusiawi, mendalam, dan jujur justru makin diuntungkan
  • SEO sekarang bukan "trik", tapi membuat konten terbaik untuk manusia
5

Konsep YMYL — Your Money or Your Life

Google memberi perlakuan lebih ketat pada topik tertentu yang dapat berdampak besar pada kesehatan, keuangan, keselamatan, atau kebahagiaan seseorang. Kategori ini disebut YMYL (Your Money or Your Life).

Kesehatan

Info medis, obat, gejala penyakit

Keuangan

Investasi, pinjaman, pajak

Keamanan

Keselamatan publik, hukum

Berita

Info aktual, politik, bencana

Implikasi SEO

Untuk topik YMYL, Google menuntut standar E-E-A-T yang lebih tinggi. Artikel kesehatan harus ditulis dokter, artikel keuangan harus oleh analis bersertifikat, dsb. Konten anonim berkualitas rendah hampir pasti tidak akan naik peringkat.

⚙️ Pipeline Pemrosesan Google

Klik setiap tahapan di bawah untuk melihat apa yang sebenarnya terjadi di server Google. Ketiga tahap ini berjalan berurutan — jika gagal di satu tahap, halaman tidak akan muncul di SERP.

1. Crawling

Penemuan URL

2. Indexing

Penyimpanan & Analisis

3. Ranking

Pemeringkatan Kueri

Tahap 1: Crawling (Perayapan)

Crawling adalah proses di mana Googlebot mengunduh teks, gambar, dan video dari halaman yang ditemukan di internet melalui link (tautan).

File Robots.txt

Sebelum merayapi situs, bot mengecek file robots.txt di root server. Jika webmaster memasang instruksi Disallow, bot akan berhenti dan halaman gagal masuk ke tahap berikutnya.

Crawl Budget

Googlebot punya batas waktu & sumber daya per website. Jika server lambat atau terlalu banyak error 404, bot akan pergi sebelum merayapi halaman penting Anda.

Tahap 2: Indexing (Pengindeksan)

Tidak semua halaman yang di-crawl akan diindeks. Google menganalisis teks, tag HTML (Title, Meta), merender Javascript, dan menyimpan datanya di database raksasa Google Caffeine.

Canonicalization

Jika Google menemukan dua halaman dengan konten sama (HTTP vs HTTPS, varian warna produk), Google memilih satu URL utama (Canonical) dan membuang sisanya.

Rendering JS

Website modern (React/Angular) butuh Google menjalankan JavaScript dulu. Proses ini memakan waktu & komputasi ekstra (WRS - Web Rendering Service).

Tahap 3: Ranking (Pemeringkatan)

Terjadi dalam hitungan milidetik saat pengguna menekan Enter. Google mencari miliaran halaman di indeksnya yang paling relevan, lalu mengurutkannya menggunakan 200+ faktor peringkat.

3 Sinyal Peringkat Utama:

  • Relevansi & Kualitas Konten: Seberapa baik halaman menjawab intent pengguna (kerangka E-E-A-T).
  • Backlink (Otoritas): Tautan masuk dari website tepercaya sebagai "rekomendasi digital".
  • User Experience (UX): Kecepatan loading (Core Web Vitals), keramahan mobile, dan ketiadaan pop-up mengganggu.

🛡️ Framework E-E-A-T

Sejak maraknya hoaks & spam, Google memakai Quality Raters (manusia) untuk menilai kualitas algoritma mereka menggunakan panduan E-E-A-T. Konsep ini diterapkan lebih ketat pada situs YMYL (Your Money or Your Life). Klik setiap kartu untuk melihat detail.

Experience

Pengalaman Nyata

Klik

Experience

Ditambahkan Google akhir 2022. Bukti bahwa penulis benar-benar memiliki pengalaman langsung dengan topik/produk yang dibahas.

Contoh: Review HP yang menyertakan foto asli penulis memegang HP, bukan sekadar spesifikasi hasil copas.

Expertise

Keahlian

Klik

Expertise

Menilai pengetahuan / keterampilan penulis. Apakah ia pakar di bidangnya?

Contoh YMYL: Artikel resep obat penyakit jantung harus ditulis Dokter (Expert), bukan penulis lepas biasa.

Authority

Otoritas Sumber

Klik

Authoritativeness

Reputasi website & kreator di mata industri/orang lain. Otoritas didapat dari rekomendasi ahli lain.

Contoh: Jika Wikipedia & situs berita ternama sering memberikan backlink ke web Anda sebagai sumber, otoritas Anda naik.

Trust

Kepercayaan

Klik

Trust (Inti E-E-A-T)

Komponen paling penting. Mengukur sejauh mana halaman akurat, aman, dan dapat diandalkan. Walau punya Experience & Expertise, jika web berisi penipuan atau menyembunyikan identitas perusahaan (tidak transparan), Trust hancur.

How Search Works (Official)

Kredit: Google Search Central (YouTube)

📝 Kuis Pertemuan 3

5 soal pilihan ganda. Pilih satu jawaban untuk setiap soal, lalu klik Periksa Jawaban. Skor akan muncul otomatis.

💬 Diskusi Kelompok

Sesuai metode Self-Directed Learning, bagi kelas menjadi kelompok 4–5 orang. Pilih 2 dari 4 prompt di bawah untuk dibahas 15 menit, lalu presentasikan hasilnya.

Prompt 1

Diagnosis Masalah Indexing

Anda membuat artikel baru 2 minggu lalu. Sudah muncul di GSC tapi tidak ada traffic. Bagaimana urutan langkah diagnosis Anda (mulai dari cek indexing, canonical, sampai cek kompetitor)?

Prompt 2

Website Berita vs YMYL

Sebuah portal berita lokal ingin menaikkan traffic untuk topik kesehatan. Strategi E-E-A-T seperti apa yang harus mereka terapkan agar artikel mereka dipercaya Google?

Prompt 3

Crawl Budget Terbuang

Sebuah e-commerce punya 10.000 URL, tapi 5.000 di antaranya adalah halaman filter warna/ukuran yang menghasilkan konten hampir sama. Bagaimana solusi Anda menghemat crawl budget?

Prompt 4

Masa Depan SEO dengan AI

Dengan munculnya AI Overviews (2024), apakah ranking tradisional masih relevan? Bagaimana ketiga tahap (crawling, indexing, ranking) akan bertransformasi dalam 5 tahun ke depan?

Catatan Diskusi

Otomatis tersimpan
M2 Berikutnya