# robots.txt für www.wg-gesucht.de
# Gibt an, welche Seiten nicht durch Crawler durchsucht werden sollen

#User-agent: Googlebot-Image
#Disallow: /

# picsearch.com
User-agent: psbot
Disallow: /

# trovit.com
User-agent: trovitBot
Disallow: /

# cityreview.org
User-agent: cityreview
Disallow: /

User-agent: DataForSeoBot
Disallow: /

User-agent: rogerbot
Disallow: /

User-agent: dotbot
Disallow: /

User-agent: *
Allow: /.well-known/assetlinks.json
Disallow: /angebot-bearbeiten.html
Disallow: /gesuch-bearbeiten.html
Disallow: /eintrag-loeschen.html
Disallow: /nachricht-senden.html
Disallow: /qs.php
Disallow: /userdata.php
Disallow: /api/
Disallow: /security-information.html