User-agent: *
Disallow: /adventadvent/	# adventadvent verbieten
Disallow: /www/				# www verbieten
Crawl-delay: 10			# zeit zwischen zwei aufrufen vom selben server
Request-rate: 1/5			# eine seite pro 5 sekunden aufrufen