Deteksi bot dan CAPTCHA saling berkaitan namun merupakan teknologi anti-bot yang berbeda. Deteksi bot berjalan secara diam-diam untuk mengidentifikasi lalu lintas otomatis. CAPTCHA menghadirkan tantangan eksplisit untuk memverifikasi manusia. Banyak situs menggunakan keduanya secara berlapis.
Perbedaan utama
| Fitur | Deteksi Bot | CAPTCHA |
|---|---|---|
| Pengguna melihatnya | Tidak (tidak terlihat) | Ya atau sebagian (v3/Turnstile tidak terlihat) |
| Saat itu berjalan | Terus menerus pada setiap permintaan | Di pos pemeriksaan tertentu (login, pendaftaran, checkout) |
| Respons terhadap bot | Blokir, batasi tarif, atau sajikan data palsu | Tantangan saat ini |
| Apa yang dianalisisnya | Header, TLS, IP, perilaku, sinyal browser | Respons tantangan + sinyal perilaku |
| Contoh | Manajemen Bot Cloudflare, Akamai, DataDome, PerimeterX | reCAPTCHA, Turnstile, GeeTest, hCaptcha |
| Dapat diselesaikan dengan CaptchaAI | Tidak secara langsung | Ya |
Cara kerja deteksi bot
Sistem deteksi bot menganalisis setiap permintaan sebelum mencapai aplikasi:
- sinyal browser TLS — Hash JA3/JA4 mengidentifikasi perpustakaan klien
- HTTP header — Urutan, keberadaan, dan nilai header
- Reputasi IP — Pusat data vs perumahan, riwayat penyalahgunaan
- Pola permintaan — Kecepatan, urutan, waktu
- Tantangan JavaScript — Bisakah klien mengeksekusi JS?
- sinyal browser — Kanvas, WebGL, font, plugin
- Analisis perilaku — Mouse, keyboard, peristiwa sentuh
Penyedia deteksi bot umum
| Penyedia | Metode deteksi | Penggantian CAPTCHA |
|---|---|---|
| Manajemen Bot Cloudflare | Tantangan TLS + JS + ML | Halaman Turnstile atau Challenge |
| Manajer Bot Akamai | TLS + sinyal browser + perilaku | Tantangan khusus |
| DataDome | Tantangan JS + sinyal browser | CAPTCHA khusus atau reCAPTCHA |
| PerimeterX (HUMAN) | Perilaku + sinyal browser | Tantangan khusus |
| Imperva | Beberapa lapisan | reCAPTCHA |
Cara kerja CAPTCHA
CAPTCHA diterapkan pada titik tertentu yang memerlukan verifikasi:
- Pengguna mencapai tindakan yang dilindungi (login, checkout, formulir)
- Tampilan widget CAPTCHA (terlihat atau tidak terlihat)
- Tantangan disajikan atau analisis diam dijalankan
- User/solver menyelesaikan tantangannya
- Token dibuat dan diverifikasi oleh backend
- Akses diberikan atau ditolak
Pendekatan berlapis
Sebagian besar situs modern menggunakan keduanya:
Request → Bot Detection Layer → CAPTCHA Layer → Application
↓ ↓
Block obvious bots Challenge suspicious users
Contoh alur:
- Deteksi bot menganalisis sinyal browser TLS yang dilewati → (tampak seperti Chrome asli)
- Deteksi bot memeriksa lintasan IP → (IP perumahan)
- Deteksi bot memeriksa sinyal perilaku → yang mencurigakan
- CAPTCHA dipicu sebagai pemeriksaan sekunder
- User/solver menyelesaikan CAPTCHA
- Akses diberikan
Menangani keduanya dalam web scraping
Langkah 1: Lewati Deteksi Bot
- Gunakan sinyal browser asli (Puppeteer dengan konfigurasi standar)
- Gunakan egress jaringan yang diotorisasi
- Tetapkan header yang tepat (User-Agent, Accept, dll.)
- Terapkan pola permintaan yang realistis
Langkah 2: Selesaikan CAPTCHA saat muncul
import requests
# Check if response contains a CAPTCHA
if "g-recaptcha" in page_source:
# Solve with CaptchaAI
token = solve_recaptcha(sitekey, page_url)
elif "cf-turnstile" in page_source:
token = solve_turnstile(sitekey, page_url)
elif "challenge" in page_source and "cloudflare" in page_source:
cookie = solve_cloudflare_challenge(page_url, proxy)
Langkah 3: Tangani eskalasi deteksi
Situs dapat meningkatkan perlindungan:
- Permintaan pertama: Respon normal
- Setelah banyak permintaan: Pembatasan tarif
- Setelah pembatasan tarif: tantangan CAPTCHA
- Setelah CAPTCHA gagal: larangan IP
- Setelah rotasi IP: Larangan sinyal browser
Pertanyaan Umum
Bisakah CaptchaAI menangani deteksi bot?
CaptchaAI memecahkan CAPTCHA, bukan deteksi bot. Untuk melewati deteksi bot, Anda memerlukan kerahasiaan browser, manajemen proxy, dan pola permintaan yang tepat. CaptchaAI menangani lapisan CAPTCHA yang dipicu oleh deteksi bot.
Mana yang lebih sulit dipecahkan?
Deteksi bot umumnya lebih sulit karena berjalan terus menerus dan menganalisis banyak sinyal. CAPTCHA adalah respons terhadap tantangan — setelah diselesaikan, Anda mendapatkan token.
Apakah saya memerlukan penanganan anti-bot dan penyelesaian CAPTCHA?
Biasanya ya. Deteksi bot mencegah Anda mencapai CAPTCHA, dan CAPTCHA mencegah Anda mengirimkan formulir. Anda perlu menangani kedua lapisan.
Bagaimana jika saya lolos deteksi bot tetapi masih mendapatkan CAPTCHA?
Situs mungkin menampilkan CAPTCHA pada tindakan tertentu terlepas dari skor botnya. Login, registrasi, dan checkout seringkali selalu memerlukan verifikasi CAPTCHA.
Panduan Terkait
- Cara Kerja Cloudflare Challenge
- Rotasi Proxy untuk Scraping CAPTCHA
Siap memecahkan CAPTCHA? Dapatkan kunci API CaptchaAI Anda dan mulai berintegrasi hari ini.
