User-agent: * Allow: / Disallow: /dashboard Disallow: /api Disallow: /login Disallow: /signup Disallow: /gallery/ Disallow: /share/ # Sitemap dibangkitkan dari DB oleh API, jadi artikel blog ikut masuk. Dia hidup # di bawah /api karena cuma /api/* yang di-route gateway ke boothos-api — dan # `Disallow: /api` di atas akan ikut memblokirnya, sebab crawler tidak akan # mengambil sitemap yang dilarang robots.txt. Allow yang lebih spesifik menang. Allow: /api/sitemap.xml Sitemap: https://boothos.id/api/sitemap.xml