# robots.txt untuk tslaw.id # Disusun 27 Sep 2026 — versi yang menggantikan robots.txt bawaan Yoast User-agent: * Allow: / # --- Area administrasi ------------------------------------------------------- # Jangan dirayapi, tapi admin-ajax.php wajib tetap boleh karena dipakai # tema dan plugin untuk memuat konten di halaman depan. Disallow: /wp-admin/ Allow: /wp-admin/admin-ajax.php Disallow: /wp-login.php # --- Hasil pencarian internal ------------------------------------------------ # Setiap kata kunci pencarian menghasilkan URL baru berisi artikel yang sama. # Kalau dibiarkan, Google menyimpan ratusan halaman duplikat. Disallow: /?s= Disallow: /search/ # --- Arsip penulis ----------------------------------------------------------- # Yoast sudah mengeluarkan author-sitemap.xml dari sitemap, jadi Google tidak # lagi menemukannya lewat sitemap. URL /author/ tetap bisa dibuka dan tidak # punya tag noindex, jadi di sini diblokir agar tidak dirayapi. Disallow: /author/ # --- Feed dan komentar ------------------------------------------------------ Disallow: /feed/ Disallow: /comments/feed/ Disallow: /*?replytocom= # --- Pintu lama -------------------------------------------------------------- # xmlrpc.php sering jadi sasaran percobaan masuk otomatis. Disallow: /xmlrpc.php # --- Berkas yang boleh dirayapi --------------------------------------------- # Gambar dan dokumen di folder unggahan tetap dibuka karena dipakai di # pencarian gambar dan pratinjau sosial. Allow: /wp-content/uploads/ Sitemap: https://www.tslaw.id/sitemap_index.xml