User-agent: * Allow: / Sitemap: https://psemitoisy.com/sitemap.xml # Bloquear acceso a carpetas internas Disallow: /admin/ Disallow: /private/ Disallow: /includes/ Disallow: /cgi-bin/ # Bloquear archivos específicos Disallow: /*.json$ Disallow: /*.xml$ Disallow: /*.txt$ Disallow: /*.log$ # Permitir explícitamente acceso a sitemap Allow: /sitemap.xml