El 99% del tráfico de internet es de bots según un creador de sitio web
Un análisis de tráfico de internet realizado por Nick Gray, creador de PatronView, muestra que el 99% del tráfico de su sitio web es generado por bots. Esto se traduce en una gran cantidad de solicitudes de acceso a su servidor, lo que puede tener un impacto significativo en su factura mensual.
Gray comenzó a medir la actividad de los rastreadores de internet en su sitio web y descubrió que por cada página vista real, había 214 solicitudes procedentes de bots. Entre los bots que más solicitudes realizaban se encontraban Claude-Searchbot y Amzn-SearchBot, utilizados por Claude y Amazon respectivamente. En el caso de Claude-Searchbot, se solicitaban 420.680 páginas en una semana, mientras que solo se enviaban 12 usuarios a su sitio web.
“Estos accesos provenían de navegadores Chrome automatizados alojados en AWS y Azure, así como de redes de proxies residenciales, que pueden ser especialmente difíciles de detectar”
La situación se complica aún más cuando se trata de bots camuflados, que pueden ser difíciles de identificar. En abril, PatronView recibió 3,6 millones de accesos en un solo día procedentes de 361.844 direcciones IP distintas, la mayoría ubicadas en China. Estos accesos provenían de navegadores Chrome automatizados alojados en AWS y Azure, así como de redes de proxies residenciales, que pueden ser especialmente difíciles de detectar.
Para proteger su sitio web, Gray ha implementado un mecanismo de bloqueo que utiliza sistemas CAPTCHA y filtra navegadores sospechosamente antiguos. También ha aplicado límites de velocidad y ha bloqueado determinados países y rastreadores. Después de implementar estas medidas, el tráfico de bots se redujo significativamente, y solo un 0,24% de los CAPTCHA fueron resueltos. Gray concluye que no se puede confiar en herramientas como Google Analytics para medir el tráfico real de un sitio web, y que es necesario mirar los logs del servidor para obtener una visión precisa. La solución que propone es cobrar por el acceso de los bots, lo que podría ayudar a reducir el tráfico no deseado y a proteger los sitios web de los dueños.
