# robots.txt zu https://syfit.de/ # Allgemeine Regeln für alle Crawler User-agent: * # Verzeichnisse, die nicht indexiert werden sollen Disallow: /cgi-bin/ Disallow: /wp-admin/ Disallow: /wp-includes/ Disallow: /wp-content/cache/ Disallow: /trackback/ Disallow: /feed/ Disallow: /comments/ Disallow: */trackback/ Disallow: */feed/ Disallow: */comments/ Disallow: */wp-json/wp/v2/users/ # Medien & wichtige Dateien dürfen indexiert werden Allow: /wp-admin/admin-ajax.php Allow: /wp-content/uploads/ Allow: /*.css$ Allow: /*.js$ # Sitemap eintragen Sitemap: https://syfit.de/page-sitemap.xml