mikaela.github.io/robots.txt

24 lines
447 B
Plaintext

User-agent: *
Allow: /$
Allow: /*.html$
Allow: /blog/$
Allow: /blog/feed.xml
Allow: /blog/feed.en.xml
Allow: /blog/feed.fi.xml
Allow: /irc/$
Allow: /matrix/$
Allow: /n/$
Allow: /robots.txt
Allow: /sitemap.xml
Allow: /sitemaps.xml
Disallow: /
Disallow: /*.asc$
Disallow: /*.json$
Disallow: /*.sig$
Disallow: /*.txt$
Disallow: /*.toml$
Disallow: /*.xml$
Disallow: /txt/
Sitemap: https://aminda.eu/sitemap.xml
Sitemap: https://aminda.eu/sitemaps.xml