Mata Kuliah: Search Engine Optimization (BDL2749) — 3 SKS
Program Studi Bisnis Digital — Politeknik Mardira Indonesia
Dosen Pengampu: Ir. Sena Kurniawan, S.T., M.M., M.Kom
SEOPertemuan 3
Anatomi Algoritma & Cara Kerja Mesin Pencari
Progress3/16
Pertemuan 3 — Sisi Teknis
Membedah Dapur Mesin Pencari
Di balik kotak pencarian yang sederhana, terdapat infrastruktur komputasi paling rumit di dunia. Hari ini kita masuk ke sisi teknis: bagaimana bot membaca kode, menangani duplikasi, dan menilai otoritas website — plus framework E-E-A-T yang menentukan nasib konten Anda.
Estimasi
TM: 2×50' PT: 2×60' | M: 2×60'
Metode
Self-Directed & Contextual
Bobot
5% dari nilai akhir
Penilaian
Tugas kelompok: diagram + presentasi
Sub-CPMK
Mahasiswa mampu menjelaskan cara kerja mesin pencari (crawling, indexing, ranking) beserta faktor pemeringkatan dan peran AI, serta menerapkan pemahaman E-E-A-T & YMYL dalam penilaian kualitas konten.
Indikator Capaian
✓ Menggambarkan proses crawling hingga ranking
✓ Menjelaskan peran AI dalam ranking
✓ Menerapkan framework E-E-A-T pada studi kasus
Target Belajar Anda
0 / 6 selesai
Centang setelah Anda benar-benar memahami tiap poin. Progress otomatis tersimpan di browser.
Saya dapat membedakan crawling, indexing, dan ranking
Saya memahami fungsi robots.txt & crawl budget
Saya memahami canonicalization & JS rendering
Saya dapat menyebutkan 3 sinyal peringkat utama Google
Saya dapat menjelaskan 4 komponen E-E-A-T
Saya memahami kriteria konten YMYL
1
Bagaimana Google Melihat Web?
Google memproses miliaran halaman web setiap hari melalui 3 tahap berurutan: Crawling → Indexing → Ranking. Jika satu tahap gagal, halaman Anda tidak akan pernah muncul di hasil pencarian, sebagus apa pun kontennya.
🔑 Analogi Perpustakaan: Bayangkan Google sebagai perpustakaan raksasa.
• Crawling = Petugas berkeliling kota untuk mengumpulkan buku baru
• Indexing = Petugas menyusun buku di rak dengan kategori & kartu katalog
• Ranking = Pustakawan merekomendasikan buku terbaik saat Anda bertanya
1 Crawling
Googlebot menemukan URL baru & mengunduh kontennya.
2 Indexing
Konten dianalisis, disortir, dan disimpan di database Google.
3 Ranking
Halaman relevan diurutkan saat pengguna mengetik kueri.
💡 Tips: Untuk visualisasi interaktif ketiga tahap ini, buka tab "Pipeline 3 Tahap" di atas.
2
Tahap 1: Crawling (Perayapan)
Crawling adalah proses di mana Googlebot mengunduh teks, gambar, dan video dari halaman yang ditemukan melalui link di internet.
Bagaimana Googlebot Menemukan URL?
Internal & Eksternal Link
Cara utama — bot mengikuti tautan dari halaman yang sudah dikenal.
XML Sitemap
Peta situs yang Anda submit ke Google Search Console.
Manual Submission
Menggunakan fitur URL Inspection di GSC.
Redirect Chain
Google mengikuti 301/302 redirect ke URL tujuan.
Dua Konsep Kritis di Crawling
Robots.txt — File Protokol
File teks di root domain (domain.com/robots.txt) yang memberi instruksi ke bot. Jika Anda menulis Disallow: /private/, Googlebot tidak akan merayapi folder itu.
⚠ Robots.txt memblokir crawling, bukan indexing. Jika halaman sudah terindeks sebelumnya, ia tetap bisa muncul di SERP.
Crawl Budget — Anggaran Perayapan
Googlebot punya keterbatasan sumber daya. Setiap situs diberi "anggaran" waktu & jumlah halaman yang bisa di-crawl per hari. Budget besar untuk situs populer, kecil untuk situs baru/kecil.
💡 Cara hemat crawl budget: Perbaiki error 404, hindari duplikasi URL, percepat response server, gunakan robots.txt untuk mengecualikan halaman tidak penting.
3
Tahap 2: Indexing (Pengindeksan)
Tidak semua halaman yang di-crawl akan diindeks. Google akan menganalisis teks, tag HTML, merender JavaScript, dan memutuskan apakah halaman layak disimpan di database raksasa bernama Google Caffeine.
Canonicalization
Jika Google menemukan beberapa URL dengan konten sama (misal versi HTTP vs HTTPS, atau ?warna=merah vs ?warna=biru), Google akan memilih 1 URL utama (canonical) dan membuang sisanya agar tidak dianggap duplikat.
Solusi: pasang tag <link rel="canonical"> di setiap halaman untuk memberi tahu Google URL mana yang harus dipilih.
JavaScript Rendering (WRS)
Website modern (React, Vue, Angular) menyusun konten via JavaScript. Googlebot harus menjalankan kode JS dulu (Web Rendering Service) untuk melihat konten sesungguhnya — proses ini memakan waktu & sumber daya ekstra.
Solusi: gunakan SSR (Server-Side Rendering) atau SSG (Static Site Generation) agar konten langsung terlihat.
Halaman yang Diindeks
Konten unik & bernilai
Struktur HTML bersih
Dapat diakses publik (tidak login)
Meta robots: index, follow
Halaman yang Ditolak
Konten duplikat / thin content
Halaman noindex
Konten spam / auto-generated
Halaman login / internal dashboard
Insight SEO
"Kalau halaman Anda sudah di-crawl tapi tidak muncul di Google, cek dulu apakah ia benar-benar terindeks. Buka Google Search Console → URL Inspection → ketik URL halaman."
4
Tahap 3: Ranking (Pemeringkatan)
Terjadi dalam hitungan milidetik saat pengguna menekan tombol Enter. Google mencari miliaran halaman di indeksnya, menyaring yang paling relevan dengan kueri, lalu mengurutkannya menggunakan 200+ faktor peringkat (ranking signals).
3 Sinyal Peringkat Utama
1. Konten
Seberapa baik halaman menjawab intent pengguna. Kualitas, kedalaman, keunikan, dan E-E-A-T.
2. Backlink
Tautan masuk dari situs tepercaya sebagai "rekomendasi digital". Kuantitas + kualitas + relevansi backlink.
3. UX / Page Experience
Kecepatan (Core Web Vitals), mobile-friendliness, HTTPS, dan ketiadaan pop-up yang mengganggu.
🤖 Peran AI dalam Ranking Google
Google bukan lagi sekadar pencocok kata kunci. Sejak 2015, Google menggunakan AI (Artificial Intelligence) untuk benar-benar memahami apa yang Anda maksud. Mari kita bedah 3 AI utama dengan analogi sederhana.
Evolusi Kecerdasan Google
2015
RankBrain
"Paham maksud meski kata beda"
2019
BERT
"Paham konteks kalimat"
2021
MUM
"Paham teks + gambar, 75 bahasa"
2024
AI Overviews
"Jawab langsung di SERP"
2015
RankBrain
Machine Learning Pertama
"Penerjemah maksud pencarian"
💡 Analogi: Bayangkan resepsionis hotel berpengalaman. Tamu bilang "eh itu lho, yang buat mandi airnya anget" — resepsionis langsung paham: "Oh, water heater." Tamu tidak perlu sebut kata itu persis.
❌ Sebelum RankBrain
Google mencocokkan kata kunci literal. Query harus sama persis dengan teks halaman.
✅ Setelah RankBrain
Google memahami maksud meski kata berbeda. Sinonim & variasi mulai dianggap.
🎯 Contoh nyata: Cari "cara bikin kopi tanpa mesin" → Google tetap munculkan hasil tentang manual brewing, V60, pour over, kopi tubruk meski halaman tidak menyebut "tanpa mesin".
📌 Dampak ke SEO Anda
Boleh pakai sinonim & variasi kata — tidak harus repetitif
LSI Keywords (kata terkait) jadi penting: artikel kopi bahas biji, seduh, aroma, rasa
Keyword stuffing mulai tidak efektif
2019
BERT
Bidirectional Encoder Representations from Transformers
"Pembaca kalimat utuh yang paham konteks"
💡 Analogi: Kata "bank" bisa berarti bank keuangan, bank sampah, atau bank darah — tergantung kalimatnya. Sebelum BERT, Google baca kata satu-per-satu. Setelah BERT, Google baca kalimat lengkap untuk tahu mana "bank" yang dimaksud.
❌ Sebelum BERT
Google baca "obat untuk apa" sebagai 3 kata terpisah. Kata sambung "untuk", "tanpa", "kecuali" diabaikan.
✅ Setelah BERT
Google paham "obat untuk apa" = pertanyaan tentang fungsi obat. Kata sambung jadi sangat penting.
🎯 Contoh nyata: Cari "resep kue tanpa telur untuk anak alergi" → BERT paham kata "tanpa" & "untuk" → hasilnya resep bebas telur & ramah alergi, bukan resep kue biasa.
📌 Dampak ke SEO Anda
Tulis dengan bahasa natural seperti manusia bicara
Gunakan kalimat lengkap, bukan tumpukan kata kunci
Long-tail keyword (query panjang & spesifik) makin berharga
❌ Hindari: "resep kue telur alergi anak resep kue mudah"
2021
MUM
Multitask Unified Model
"Asisten jenius serba bisa — 1000x lebih kuat dari BERT"
💡 Analogi: Bayangkan asisten jenius yang bisa baca teks, lihat gambar, dengar audio sekaligus, menguasai 75 bahasa tanpa translate, dan bisa menggabungkan 10+ sumber untuk jawab pertanyaan rumit.
❌ Sebelum MUM
Google hanya jawab pertanyaan sederhana (1 topik, 1 bahasa, 1 format). Harus tanya bertahap.
✅ Setelah MUM
Bisa jawab pertanyaan kompleks yang butuh gabung berbagai sumber, format, & bahasa sekaligus.
🎯 Contoh nyata: Tanya Google: "Saya sudah hiking Gunung Fuji. Mau hiking gunung mirip tapi di Amerika."
MUM paham karakter Fuji (tinggi, cuaca, kesulitan) → cari gunung serupa di Amerika → bandingkan & rekomendasi. Sebelum MUM, Google hanya bisa jawab "tinggi Gunung Fuji".
📌 Dampak ke SEO Anda
Konten multimodal: teks + gambar + video + infografis
Artikel mendalam & komprehensif lebih diuntungkan
Bangun Topical Authority — kuasai satu topik dari A-Z
Bahasa Indonesia dapat perlakuan setara dengan Inggris
Kesimpulan: Kenapa Ini Penting untuk SEO?
Ketiga AI ini menunjukkan satu tren jelas: Google semakin pintar memahami konten seperti manusia. Artinya:
Taktik lama (keyword stuffing, artikel tipis) semakin tidak efektif
Konten yang manusiawi, mendalam, dan jujur justru makin diuntungkan
SEO sekarang bukan "trik", tapi membuat konten terbaik untuk manusia
5
Konsep YMYL — Your Money or Your Life
Google memberi perlakuan lebih ketat pada topik tertentu yang dapat berdampak besar pada kesehatan, keuangan, keselamatan, atau kebahagiaan seseorang. Kategori ini disebut YMYL (Your Money or Your Life).
Kesehatan
Info medis, obat, gejala penyakit
Keuangan
Investasi, pinjaman, pajak
Keamanan
Keselamatan publik, hukum
Berita
Info aktual, politik, bencana
Implikasi SEO
Untuk topik YMYL, Google menuntut standar E-E-A-T yang lebih tinggi. Artikel kesehatan harus ditulis dokter, artikel keuangan harus oleh analis bersertifikat, dsb. Konten anonim berkualitas rendah hampir pasti tidak akan naik peringkat.
Poin Kunci Pertemuan Ini
1. Google memproses web melalui 3 tahap: Crawling → Indexing → Ranking.
Suharto, A., & Haerudin, H. (2026). Optimasi Mesin Pencari. Tangerang: UNPAM Press.
⚙️ Pipeline Pemrosesan Google
Klik setiap tahapan di bawah untuk melihat apa yang sebenarnya terjadi di server Google. Ketiga tahap ini berjalan berurutan — jika gagal di satu tahap, halaman tidak akan muncul di SERP.
1. Crawling
Penemuan URL
2. Indexing
Penyimpanan & Analisis
3. Ranking
Pemeringkatan Kueri
Tahap 1: Crawling (Perayapan)
Crawling adalah proses di mana Googlebot mengunduh teks, gambar, dan video dari halaman yang ditemukan di internet melalui link (tautan).
File Robots.txt
Sebelum merayapi situs, bot mengecek file robots.txt di root server. Jika webmaster memasang instruksi Disallow, bot akan berhenti dan halaman gagal masuk ke tahap berikutnya.
Crawl Budget
Googlebot punya batas waktu & sumber daya per website. Jika server lambat atau terlalu banyak error 404, bot akan pergi sebelum merayapi halaman penting Anda.
Tahap 2: Indexing (Pengindeksan)
Tidak semua halaman yang di-crawl akan diindeks. Google menganalisis teks, tag HTML (Title, Meta), merender Javascript, dan menyimpan datanya di database raksasa Google Caffeine.
Canonicalization
Jika Google menemukan dua halaman dengan konten sama (HTTP vs HTTPS, varian warna produk), Google memilih satu URL utama (Canonical) dan membuang sisanya.
Rendering JS
Website modern (React/Angular) butuh Google menjalankan JavaScript dulu. Proses ini memakan waktu & komputasi ekstra (WRS - Web Rendering Service).
Tahap 3: Ranking (Pemeringkatan)
Terjadi dalam hitungan milidetik saat pengguna menekan Enter. Google mencari miliaran halaman di indeksnya yang paling relevan, lalu mengurutkannya menggunakan 200+ faktor peringkat.
3 Sinyal Peringkat Utama:
Relevansi & Kualitas Konten: Seberapa baik halaman menjawab intent pengguna (kerangka E-E-A-T).
Backlink (Otoritas): Tautan masuk dari website tepercaya sebagai "rekomendasi digital".
User Experience (UX): Kecepatan loading (Core Web Vitals), keramahan mobile, dan ketiadaan pop-up mengganggu.
🛡️ Framework E-E-A-T
Sejak maraknya hoaks & spam, Google memakai Quality Raters (manusia) untuk menilai kualitas algoritma mereka menggunakan panduan E-E-A-T. Konsep ini diterapkan lebih ketat pada situs YMYL (Your Money or Your Life). Klik setiap kartu untuk melihat detail.
Experience
Pengalaman Nyata
Klik
Experience
Ditambahkan Google akhir 2022. Bukti bahwa penulis benar-benar memiliki pengalaman langsung dengan topik/produk yang dibahas.
Contoh: Review HP yang menyertakan foto asli penulis memegang HP, bukan sekadar spesifikasi hasil copas.
Expertise
Keahlian
Klik
Expertise
Menilai pengetahuan / keterampilan penulis. Apakah ia pakar di bidangnya?
Contoh YMYL: Artikel resep obat penyakit jantung harus ditulis Dokter (Expert), bukan penulis lepas biasa.
Authority
Otoritas Sumber
Klik
Authoritativeness
Reputasi website & kreator di mata industri/orang lain. Otoritas didapat dari rekomendasi ahli lain.
Contoh: Jika Wikipedia & situs berita ternama sering memberikan backlink ke web Anda sebagai sumber, otoritas Anda naik.
Trust
Kepercayaan
Klik
Trust (Inti E-E-A-T)
Komponen paling penting. Mengukur sejauh mana halaman akurat, aman, dan dapat diandalkan. Walau punya Experience & Expertise, jika web berisi penipuan atau menyembunyikan identitas perusahaan (tidak transparan), Trust hancur.
Cara Meningkatkan E-E-A-T
Buat halaman Author Bio lengkap (foto, pengalaman, sertifikasi, LinkedIn)
Cantumkan sumber referensi pada setiap klaim (link ke riset/berita)
Tampilkan kontak & alamat perusahaan jelas (footer, About Us)
Raih backlink dari situs otoritatif di niche Anda
Tampilkan customer testimonial, review, dan studi kasus nyata
Update konten berkala agar tetap relevan & akurat
How Search Works (Official)
Kredit: Google Search Central (YouTube)
📝 Kuis Pertemuan 3
5 soal pilihan ganda. Pilih satu jawaban untuk setiap soal, lalu klik Periksa Jawaban. Skor akan muncul otomatis.
💬 Diskusi Kelompok
Sesuai metode Self-Directed Learning, bagi kelas menjadi kelompok 4–5 orang. Pilih 2 dari 4 prompt di bawah untuk dibahas 15 menit, lalu presentasikan hasilnya.
Prompt 1
Diagnosis Masalah Indexing
Anda membuat artikel baru 2 minggu lalu. Sudah muncul di GSC tapi tidak ada traffic. Bagaimana urutan langkah diagnosis Anda (mulai dari cek indexing, canonical, sampai cek kompetitor)?
Prompt 2
Website Berita vs YMYL
Sebuah portal berita lokal ingin menaikkan traffic untuk topik kesehatan. Strategi E-E-A-T seperti apa yang harus mereka terapkan agar artikel mereka dipercaya Google?
Prompt 3
Crawl Budget Terbuang
Sebuah e-commerce punya 10.000 URL, tapi 5.000 di antaranya adalah halaman filter warna/ukuran yang menghasilkan konten hampir sama. Bagaimana solusi Anda menghemat crawl budget?
Prompt 4
Masa Depan SEO dengan AI
Dengan munculnya AI Overviews (2024), apakah ranking tradisional masih relevan? Bagaimana ketiga tahap (crawling, indexing, ranking) akan bertransformasi dalam 5 tahun ke depan?