# for all user agents
User-agent: *

# dont index these files
Disallow: /admin/
Disallow: /logs/
Disallow: /scripts/
Disallow: *.pdf
Disallow: /lokales/wetteraukreis/buedingen/8438281.htm
Disallow: /nachrichten/politik/ausland/8498830.htm
Disallow: /lokales/aus-der-nachbarschaft/lauterbach/9177979.htm