🚀 Hosting cPanel • Unlimited Bandwidth • cPanel Control Panel • Unlimited Domain • Gratis SSL & Backup     Order Sekarang
🚀 Hosting Budget Hemat • Unlimited Bandwidth • cPanel Control Panel • Unlimited Domain • Gratis SSL & Backup     Order Sekarang
🛡️ VPN WireGuard High Speed • IP Private • Up to 14 Users • Custom PubKey • Secure Tunnel • Traffic Monitoring     Order Sekarang
📧 Email Hosting Professional • Unlimited Accounts • Anti Spam & Virus • Full Backup • Webmail & POP3/IMAP Support     Order Sekarang
🐧 VPS Linux NVMe • KVM Virtualization • Full Root Access • Pilihan OS Lengkap • Network 1 Gbps • Setup Instan     Order Sekarang

Robots.txt Generator

Visual builder untuk membuat file robots.txt yang valid guna mengatur akses perayaban mesin pencari ke website Anda.

Customer Support
Customer Support

Hubungi kami untuk informasi bantuan

Live Chat
Web Tools Menu
Network & Connectivity
Uptime Checker Monitor ketersediaan website.
Cek IP Saya Lihat alamat IP publik Anda.
DNS Checker Verifikasi DNS record domain.
Port Scanner Cek port terbuka pada server.
HTTP Header Viewer Lihat header respons URL.
Security & SEO
SSL Checker Periksa detail sertifikat SSL.
Whois Checker Lihat informasi domain.
Redirect Checker Lacak rantai redirect URL.
Robots Generator Buat file robots.txt visual.
Email Health Checker Cek MX, SPF, DKIM, DMARC.
Developer Tools
JSON Formatter Validasi & rapikan data JSON.
Base64 Tool Encode/Decode data Base64.
URL Encoder Encode/Decode URL-safe string.
HTML Entities Konversi karakter HTML.
Hash Generator Buat MD5, SHA, BCRYPT hash.
Case Converter Ubah UPPER/lower/camelCase.
Lorem Ipsum Hasilkan teks placeholder.
Server & Utilities
PHP-FPM Calculator Optimalkan pool PHP-FPM.
Cron Job Generator Buat ekspresi cron tab.
Regex Tester Uji pola PHP Regular Expression.
Password Generator Buat kata sandi kuat.
CSR & Cert Decoder Baca detail CSR atau SSL.
Konfigurasi Dasar
Aturan Khusus (Disallow)

Jalur ini akan diblokir untuk dirayapi oleh robot.

Hasil Preview
Pertanyaan Umum (FAQ)
File **robots.txt** harus diletakkan di direktori utama (root directory) website Anda. Contoh: `https://contoh.com/robots.txt`. Jika diletakkan di sub-folder, robot mesin pencari tidak akan menemukannya.
- **Disallow**: Memberitahu robot mesin pencari untuk tidak merayapi (crawl) halaman atau folder tertentu.
- **Allow**: Digunakan untuk mengizinkan perayapan pada sub-folder atau halaman tertentu di dalam folder yang sebelumnya di-Disallow.
**Robots.txt** hanya melarang perayapan (crawling), bukan pengindeksan. Jika ada website lain yang menautkan (link) ke halaman tersebut, Google mungkin masih mengindeksnya. Untuk benar-benar mencegah pengindeksan, gunakan tag `noindex`.
**Tidak.** File robots.txt bersifat publik dan dapat dilihat oleh siapa saja dengan mengetikkan `/robots.txt` di akhir URL. Jangan gunakan robots.txt untuk menyembunyikan informasi sensitif seperti folder admin privat atau data rahasia.

Deploy Your Servers with Computing ID

From professional business to enterprise, we’ve got you covered!

REGISTER
Products
Resources
Company
Address

PT Intprism Computing Technology (Computing ID) adalah penyedia layanan VPS murah dan infrastruktur cloud berkualitas tinggi yang berfokus pada performa dan keandalan. Kami menawarkan berbagai pilihan server mulai dari VPS Windows, VPS Linux, VPS Forex, hingga VPS Mikrotik CHR untuk berbagai kebutuhan bisnis dan trading. Selain layanan VPS terbaik, kami juga menyediakan registrasi domain, web hosting, serta jasa pembuatan modul dan addons WHMCS custom. Dengan infrastruktur modern dan dukungan teknis berpengalaman, Computing ID hadir sebagai solusi hosting dan server yang aman, cepat, dan terjangkau. Bergabunglah dengan ribuan pelanggan yang telah mempercayakan transformasi digital mereka bersama kami.

Computing ID logo

Copyright 2026 Computing ID. All Rights Reserved