Araña

Una araña (también llamada rastreador o robot) es un programa automatizado que los motores de búsqueda utilizan para encontrar e indexar páginas web. «Recorre» la Web visitando una página, analizando su contenido y siguiendo los enlaces que contiene. Cada página nueva que descubre la araña se agrega al índice del motor de búsqueda, lo que ayuda a ampliar y actualizar la Web que se puede buscar.

Cuando una araña visita una página web, normalmente encuentra enlaces a otras páginas. En un sitio web típico, la mayoría de los enlaces apuntan a páginas del mismo sitio (enlaces internos), mientras que una cantidad menor de enlaces apunta a páginas de otros sitios web (enlaces externos). Seguir estos enlaces permite a la araña saltar de un sitio a otro y continuar creando el índice. Debido a que las estructuras de enlaces están interconectadas, las arañas regresan periódicamente a las páginas que ya han visitado. Volver a rastrear las páginas ayuda a los motores de búsqueda a detectar contenido nuevo, hacer un seguimiento de las actualizaciones de las páginas y medir cuántas otras páginas enlazan con cada página.

NOTE: La palabra «araña» también puede usarse como verbo, por ejemplo: «La araña del motor de búsqueda rastreó mi sitio ayer».