Probabilmente si tratta di crawler di motori di ricerca.