L’augmentation du trafic non vu
3 novembre 2012
En un an, d’octobre 2011 à octobre 2012, sur les deux principaux sites qu’héberge ce serveur, le trafic non vu par Awstats (spiders, bots, crawlers, …) est passé de 129.67% à 150.82% du trafic vu ! Cela pourrait être dû au logiciel lui-même, incapable de prendre en compte les dernières évolutions. Or, sur un des deux sites, le poids du trafic non vu a légèrement diminué par rapport au trafic vu. L’explication ne peut donc pas être là.
La montée des « émergents »
La diminution du volume de 4% du search Google a été imputée à des nouveaux usages liés à la mobilité. C’est sans doute vrai. Il faudrait aussi y ajouter l’augmentation de l’usage du RSS (qui n’est plus l’apanage de quelques spécialistes, en grande partie liée aussi à la montée du mobile). Nous pourrions aussi évoquer la généralisation de l’usage des réseaux sociaux tels que Facebook, Twitter ou Scoop.it !
A l’observation des passages des bots et des spiders en tout genre, Google semble avoir perdu un peu de sa superbe, même s’il faut encore faire un distinguo subtil entre le passage des bots, le crawl et l’indexation. La capacité de Google à indexer le Web en temps réel reste intacte. Mais, il semble qu’il y ait chez d’autres acteurs la volonté et les moyens pour tâcher de faire aussi bien que Google. Le search est en train de devenir « multi-culturel » et Google n’est pas le monde.
Un article écrit le 27 octobre 2012 relatif au projet d’aéroport du Grand Ouest se retrouve en 1ère position dans les SERP de Baidu et d’Exalead.
Données sur le passage des principaux bots
Ces données sont issues de l’observation des statistiques de la journée du 2 novembre des deux sites hébergés sur ce serveur !
| Hits | Editeur | Dsfc | Vm | Total | Poids |
| Googlebot | 2 512 | 3 318 | 5 830 | 31.4% | |
| AhrefsBot | Ahrefs | 1 688 | 1 830 | 3 518 | 19.0% |
| bingbot+msnbot | Microsoft | 746 | 2 685 | 3 431 | 18.5% |
| VoilaBot | Orange | 1 751 | 1 316 | 3 067 | 16.5% |
| Yandex | Yandex | 258 | 942 | 1 200 | 6.5% |
| WASALive-Bot | WASALive | 118 | 331 | 449 | 2.4% |
| Baiduspider | Baidu | 96 | 254 | 350 | 1.9% |
| archive.org_bot | Archive.org | 0 | 274 | 274 | 1.5% |
| Sogou web spider | Sogou | 14 | 246 | 260 | 1.4% |
| Exabot | Exalead | 63 | 120 | 183 | 1.0% |
| Total Bots | 7 246 | 11 316 | 18 562 | 100.0% | |
| Total Hits | 38 158 | 46 731 | 84 889 | ||
| Bots/Hits | 19.0% | 24.2% | 21.9% | ||