Combien de robots y a-t-il sur Internet ?

Apr 30 2021

Réponses

LeandroBirman Sep 19 2019 at 16:01

Salut,

Leandro de ClickCease ici,

Aujourd’hui, plus de la moitié du trafic Internet provient de robots.

Les humains représentent 48 % du trafic Internet total, le reste étant de 52 %, composé de trafic de robots, de bons et de mauvais robots.

Le trafic des robots est essentiellement un trafic non humain vers un site Web. Le trafic des robots est le résultat d’applications logicielles exécutant des tâches automatisées. Les robots peuvent effectuer des tâches répétitives très rapidement, à un rythme que les êtres humains ne peuvent tout simplement pas gérer.

Grâce à cette capacité à effectuer rapidement des tâches répétitives, les robots peuvent être utilisés pour le meilleur comme pour le pire. Les « bons » robots peuvent, par exemple, vérifier les sites Web pour s'assurer que tous les liens fonctionnent. En revanche, de « mauvais » robots peuvent être utilisés pour cibler des sites Web à fort trafic, suffisamment pour submerger et détruire le site.

Différents types de trafic de robots

Afin de mieux comprendre ce qu'est le trafic de robots, il faut examiner les différents types de trafic de robots, qui peuvent inclure des robots d'exploration pour les moteurs de recherche comme Google, ou des robots malveillants utilisés pour attaquer des sites Web. Différents types de trafic de robots peuvent inclure :

« Bons robots »

  • SEO : les robots des moteurs de recherche explorent, cataloguent et indexent les pages Web, et les résultats sont utilisés par les fournisseurs de recherche comme Google pour fournir leur service.
  • Surveillance de sites Web : ces robots surveillent les sites Web et leur santé pour des problèmes tels que les temps de chargement, les temps d'arrêt, etc.
  • Agrégation : ces robots rassemblent des informations provenant de divers sites Web ou parties d'un site Web et les rassemblent en un seul endroit.
  • Scraping : Au sein de cette catégorie, il existe à la fois des « bons » et des « mauvais » robots. Ces robots « récupèrent » ou « extraient » des informations sur des sites Web, par exemple des numéros de téléphone et des adresses e-mail. Le scraping (quand il est légal bien sûr) peut être utilisé à des fins de recherche par exemple, mais peut également être utilisé pour copier illégalement des informations.

Mauvais robots »

  • Spam : Ici, les robots sont utilisés à des fins de spam, souvent dans la section « commentaires » des sites Web.
  • DDoS : les robots peuvent être utilisés pour faire tomber votre site avec une attaque par déni de service
  • Fraude publicitaire : des robots peuvent être utilisés pour cliquer automatiquement sur vos annonces
  • DDoS et attaques malveillantes : Un Botnet est un réseau d'ordinateurs infectés par des logiciels malveillants et contrôlés en groupe, souvent à l'insu de leurs propriétaires.

Détecter le trafic des robots est une première étape importante pour garantir que vous bénéficiez de tous les avantages des bons robots (comme apparaître dans les résultats de recherche de Google) tout en empêchant les mauvais robots de vous coûter cher.
Pour déterminer comment détecter le trafic des robots, le meilleur point de départ est Google Analytics.

Si vous vous demandez : « Puis-je voir le trafic des robots dans mon compte d'analyse ? », la réponse est : vous pouvez certainement en avoir une indication. Vous devez savoir à quoi faire attention et vous pourrez obtenir une indication du trafic des robots, mais vous ne trouverez peut-être pas de preuve irréfutable.

Les ratios clés à suivre ici sont :

  • Taux de rebond
  • Pages vues
  • Métriques de chargement de page
  • Durée moyenne de la session

Si vous avez d'autres questions sur le bot, faites-le-nous savoir.

SteveLeh1 Sep 16 2019 at 17:16

Pour citer Carl Sagan, « des milliards et des milliards ». En général, j’ai découvert qu’environ 37,9 % de tout le trafic Internet était constitué de robots sur des sites Web. En 2018, 20,4 % du trafic sur le Web était généré par des robots. Je n’ai pas trouvé de chiffres exacts indiquant combien de robots sont sur Internet, et il ne serait pas utile à un ingénieur logiciel de connaître ce fait. D'ici la fin de cette année, il y aurait une augmentation, dont la plupart ne seraient pas signalées, et l'augmentation pourrait dépasser de loin ce que j'ai signalé.