User-agent: *
Disallow: /*/cgi/
Disallow: /edit/
Disallow: /schulung/*
Disallow: /themen/testseite/*
Disallow: /ub/_intern/*
Disallow: https://www2.physik.uni-bielefeld.de/*
Disallow: /uni/einrichtungen-organisation/rektorat/rektoratsmitglieder/*
Disallow: /_internal/
Disallow: /cgi-bin/
Disallow: /Universitaet/*
Disallow: /(de)/*
Disallow: /(en)/*
Disallow: /<-en,de>/*
Disallow: /<en>/*
Disallow: /<de>/*
Disallow: /<-en>/*
Disallow: /<-de>/*
User-agent: SemrushBot
Crawl-delay: 5