Resumen

Este documento propone una contramedida avanzada contra los rastreadores web distribuidos. Investigamos otros métodos para la detección de rastreadores y analizamos cómo los rastreadores distribuidos pueden evadir estos métodos. Nuestro método puede detectar rastreadores distribuidos al centrarse en la propiedad de que el tráfico web sigue una distribución de potencia. Cuando ordenamos las páginas web por el número de solicitudes, la mayoría de las solicitudes se concentran en las páginas web más solicitadas con mayor frecuencia. Además, habrá algunas páginas web que los usuarios normales generalmente no solicitan. Sin embargo, los rastreadores solicitarán estas páginas web porque sus algoritmos están diseñados para solicitar de manera iterativa al analizar las páginas web para recopilar cada elemento que los rastreadores encuentran. Por lo tanto, podemos suponer que si algunas direcciones IP se utilizan con frecuencia para solicitar las páginas web que se encuentran en el área de la cola larga de un gráfico de distribución de potencia, esas direcciones IP pueden clasificarse como

• Materias:Cifrado de búsqueda Ataque criptográfico Seguridad en Internet
• Subjects:Search encryption Cryptographic attack Internet Security
• Palabras claves:Propone; Avanzado; Contramedida; Distribuido; Rastreadores web; Detección; Algoritmos; Direcciones IP; Experimental; Resultados; Falsos positivos; Basado en la frecuencia; Umbral
• Keywords:Proposes; Advanced; Countermeasure; Distributed; Web-crawlers; Detection; Algorithms; IP addresses; Experimental; Results; False positives; Frequency-based; Threshold