Generator File robots.txt Visual

Buat aturan robots.txt, blokir perayap AI, dan tautkan peta situs XML Anda.

Pembuat robots.txt — Blokir Bot AI

Buat robots.txt yang valid: izinkan atau blokir crawler, kecualikan folder pribadi, blokir bot AI, dan tautkan sitemap Anda.

Cara Penggunaan

  1. Pilih izinkan atau blokir seluruh situs.
  2. Tambahkan jalur yang dikecualikan dan, bila perlu, blokir bot AI.
  3. Salin atau unduh file robots.txt.

Pertanyaan Umum

Di mana robots.txt diletakkan?

Di root domain: https://domainanda.com/robots.txt.

Apakah robots.txt menyembunyikan halaman dari Google?

Tidak sepenuhnya: ia mencegah perayapan; untuk tidak diindeks gunakan tag noindex.

Alat Terkait

Generator Peta Situs XMLGenerator File Standar LLMs.txtPelacak Rantai Pengalihan & Kode Status

Simulator Google SERP

Perhitungan lebar piksel yang akurat untuk desktop dan ponsel agar judul tidak terpotong di Google.

Schema JSON-LD & Standar AI

Hasilkan skema JSON-LD yang valid dan buat file robots.txt serta llms.txt standar untuk bot AI.

100% Privasi di Browser

Analisis dan pembuatan instan di browser Anda tanpa mengirim data ke server eksternal.