AccuOfNietBot
AccuOfNietBot/1.0 leest openbare productpagina’s en campagnegidsen. De crawler houdt per domein minimaal twee seconden tussen verzoeken, bewaart antwoorden tijdelijk en volgt robots.txt.
AccuOfNietBot/1.0 leest openbare productpagina’s en campagnegidsen. De crawler houdt per domein minimaal twee seconden tussen verzoeken, bewaart antwoorden tijdelijk en volgt robots.txt.