# Robots.txt file for domain: http://www.boeken-plus.nl # All robots will spider the domain User-agent:* Sitemap: http://www.boek-plus.nl/sitemap.categories.php Sitemap: http://www.boek-plus.nl/sitemap.products.php Sitemap: http://www.boek-plus.nl/sitemap.products.php?start=50000