Cara menggunakan
- Pilih format log. Format combined bawaan cocok untuk default Nginx dan Apache; untuk format kustom, tempel baris log_format dari nginx.conf.
- Pilih atau letakkan satu atau beberapa file log (.gz juga bisa), atau tempel beberapa baris.
- Baca statistik crawler, permintaan per jam, kode status, URL teratas, URL 404, IP, referrer, dan User-Agent.
Penjelasan opsi
- Deteksi crawler
- Googlebot, Bingbot, Baiduspider, YandexBot, Applebot, dan crawler mesin pencari lain, serta crawler AI seperti GPTBot dan ClaudeBot, dikenali dari User-Agent. Buka sebuah crawler untuk melihat URL yang paling sering diambilnya.
- IP pengunjung asli
- Jika format menyertakan $http_x_forwarded_for, alamat pertamanya dipakai sebagai IP pengunjung — berguna di belakang CDN atau reverse proxy.
- Ukuran file
- File dibaca per potongan di browser Anda, jadi log berukuran ratusan MB pun bisa; kecepatan tergantung pada komputer Anda.
Cara satu baris menjadi record
Setiap baris dicocokkan dengan format log dan dipecah menjadi kolom. Permintaan Googlebot ini dalam format combined default:
66.249.66.1 - - [10/Oct/2026:13:55:36 +0800] "GET /blog/post-1 HTTP/1.1" 404 153 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
dibaca sebagai IP 66.249.66.1, metode GET, jalur /blog/post-1, status 404, 153 byte, tanpa referrer. Waktunya dikonversi memakai selisihnya (+0800) menjadi saat yang tepat, 05:55:36 UTC, sehingga baris dari server di zona waktu berbeda sejajar di grafik per jam, dan user agent dikenali sebagai Googlebot, sehingga baris itu menambah satu hit dan satu 404 pada crawler tersebut.
Di balik CDN, tambahkan "$http_x_forwarded_for" di akhir format. Baris yang berakhir dengan "203.0.113.7, 10.0.0.2" kemudian dihitung untuk 203.0.113.7, alamat pertama, dan bukan untuk proxy.
Pertanyaan yang sering diajukan
Apakah log saya diunggah?
Tidak. File hanya dibaca dan dihitung di browser Anda, dan hilang saat Anda menutup halaman.
Apakah setiap Googlebot di log benar-benar Google?
Tidak — User-Agent mudah dipalsukan. Tempel IP yang mencurigakan ke pemverifikasi IP crawler untuk memastikannya lewat reverse DNS.
Mengapa banyak baris tidak cocok?
Log memakai format lain. Panel hosting sering mengubah log_format; salin yang benar-benar dipakai nginx.conf Anda ke log_format kustom.
Privasi
Alat ini berjalan sepenuhnya di browser Anda. File dan teks Anda diproses di perangkat Anda dan tidak pernah diunggah ke server kami.