L'homme perplexe

Magasinez autour de vous, SEO Inside les gens du Web. Les robots d'exploration. Ils sont partout. La plupart des visiteurs ne sont pas des humains, mais ils sont alternativement des robots ou des plans créés pour effectuer des tâches programmées. Ce sont les abeilles employées de votre Internet, ainsi que les hommes de main. Certains robots d'exploration vous aident à actualiser votre offre Facebook ou à déterminer comment classer les résultats finaux de la recherche sur Internet; d'autres robots se font passer pour l'humanité et exécutent des attaques DDoS écrasantes. Le total, les robots - négatifs et positifs - sont responsables de 52 pour cent du trafic du site Web, par rapport à un enregistrement alternatif de la société de sécurité Imperva, qui concerne un examen annuel du processus des robots en ligne. La statistique de 52% est significative car elle représente une pointe de la balance étant donné que le record de l'année dernière, qui identifiait les visiteurs individuels ont dépassé le trafic de robots la première fois depuis au moins 2012, lorsque Imperva a commencé à suivre l'exercice de robots en ligne. Désormais, la revue la plus à jour, qui dépendra d'une évaluation de près de 17 milliards de dollars de sessions de sites Internet sur 100 000 domaines, affiche que les robots d'exploration sont de retour au sommet. En dehors de cela, mais les robots dangereux détiennent l'avantage sur les robots d'assistance, qui ont été responsables de 29% et 23% de tout le trafic du site Web, respectivement. «La statistique la plus alarmante de ce document est également l'une des foules les plus constantes qu'il observe», écrit Igal Zeifman, directeur marketing d'Imperva, dans un article sur l'analyse. «Pendant cinq ans auparavant, chaque visiteur du site Internet sur trois était un robot d'attaque.» Placé d'une manière différente: plus de 94 pour cent des 100 000 domaines contenus dans l'enregistrement ont subi une ou plusieurs attaques de robots au cours des 90 jours ouvrables examinés par Imperva. Les sites qui sont nettement moins favorisés par les êtres humains - tel qu'évalué par le trafic - ont tendance à attirer beaucoup plus de déplacements des robots d'exploration. "Simplement réglé", a écrit Zeifman, "de bons robots exploreront votre site et de terribles robots essaieront de le pirater, quelle que soit sa notoriété avec les humains. Ils vont même continuer à accéder à un site Web en l'absence de tous les visiteurs humains. » Bien que les robots aimeraient essayer des sites Internet même si les humains ne le sont généralement pas, l'action des robots est susceptible de correspondre aux actions des hommes en ligne. Par exemple, le robot d'aide en ligne le plus animé est ce que l'on appelle un «récupérateur de flux», et c'est le type de robot qui aide à actualiser le festin Fb d'une personne sur l'application de téléphonie mobile du site. L'explorateur de flux de Facebook, à lui seul, comprenait 4,4% du trafic en ligne, sur la base de cette déclaration - ce qui se trouve être peut-être spectaculaire, mais pas tout à fait inattendu. Fb est en fait un monstre, et son trafic de robots l'illustre bien. Dans l'ensemble, les récupérateurs de flux ont représenté plus de 12% du trafic du site Web l'année dernière. Les robots des moteurs de recherche en ligne, les araignées d'extraction d'informations industrielles et les robots de vérification de sites Internet sont probablement les autres robots d'exploration utiles que vous avez tendance à expérimenter en ligne. (Autrement dit, si vous prenez en compte l'assortiment de vos données personnelles pour promouvoir des finalités précieuses.) Les robots qui obtiennent des informations fonctionnent de manière invisible, tandis que les autres robots sont plus simples à repérer. En réalité, les robots et les personnes se confondent souvent. Les spambots apparaissent dans les sections de commentaires et les robots d'exploration de Twitter obstruent les délais des gens avec tout le reste, du marketing à la campagne politique, à l'activisme social, en passant par des absurdités. Ces types de robots d'exploration ne sont généralement pas agréables, mais ils ne sont pas vraiment dangereux. Pour les vrais méchants, nous utilisons des robots d'indexation utilisés pour les attaques DDoS. Ils comprenaient environ 24% du trafic en ligne global l'année dernière. Les principaux contrevenants de cette classe comprenaient le logiciel malveillant Nitol, un robot appelé Cyclone conçu pour imiter les excellents robots d'exploration de Google, et le malware Mirai, un virus informatique qui a provoqué des interruptions massives du Web aux États-Unis en octobre. Parmi les autres mauvais robots à gérer, citons les grattoirs de détails non autorisés, les spambots et les récupérateurs à la recherche de vulnérabilités de protection à utiliser. Collectivement, ils représentaient environ 5% du trafic en ligne. Et bien qu'Internet soit principalement constitué de robots d'exploration, nous commençons tout juste à voir le Bot Era acquérir la condition. Sur la base de la société de recherche sur les marchés CB Observations, plus d'une douzaine de startups de robots soutenues par le capital d'entreprise ont augmenté leur sphère de financement initiale l'année dernière.