Un rastreador web, también denominado araña o crawler, es una tecnología de base en forma de un robot para la indexación de contenidos en aplicaciones web. Algunos ejemplos son la indexación web realizada por los motores de búsqueda o el escaneo y explotación de...