J’ai acheté une série de noms de domaines. Certains ont été activés, la plupart non. Je me suis fait un p’tit truc pour pour étudier les bots, crawler et autres spiders que les outils de recherche utilisent pour remplir leurs bases de données. Rappelez-vous, on fait dans les statistiques Web après tout. Il y a deux constats frappants :
Google knows everything
Google est passé sur mes sites actifs plusieurs fois. Mais Google est aussi passé sur mes sites inactifs, c’est-à -dire qui n’ont aucun liens vers eux et dont je n’ai pas soumis l’URL. Merde, comment il fait ça?
Personne n’est au courant de ces domaines, sauf GoDaddy. Je me dis que c’est peut-être des services de Whois publics, mais ils ne doivent pas être a jour aussi rapidement. Et de toute façon, la plupart ne listent pas les domaines. Il faut les rechercher. Ce que Google ne fait pas. Enfin, je pense.
Google is alone on the search planet
Mon fichier de logs de crawlers est plein. Plein des traces des bots de Google. Les autres? Rien. Niet. Nada. Pas de Yahoo! ou de MSN. Ha non, MSN est là . Mais timide parmi tout ce Google. Comment espèrent-ils devenir une alternative à Google s’ils ne sont pas aussi agressifs dans l’indexation de nouveau contenu?
Bref, c’est surprenant oui et non. On connaît Google pour la qualité de ses produits et ses innovations. Ils ne sont pas l’outil de recherche #1 pour rien. Mais qu’ils découvrent des trucs invisible au commun des mortels, it’s spooky comme ils disent.
**T'aimes ce billet? Dis-le à tes potes sur Facebook!
Google est registrar et j’imagine qu’ils doivent avoir accès aux bases de données de l’ICANN.
Ha ouais, ça a du sens. Mais pourquoi crawler un site qui n’est pas soumis ni lié à d’autres?
Yop, il y a aussi le fait que si tu as installé la barre Google, celle-ci envoi à Google des informations sur les sites visités. Sur plusieurs forums on parle que le moteur de recherche, s’il connaît pas une url soumis par la Google Bar, il viendra dans quelques temps.
A+
Bonjour à tous. Simplement corroborer les dires de Steph. En même temps, de lire Steph, ca me rassure. Car, à voir les logs des visites des robots qui indexe les sites web, mon site est sur le web que depuis la mi-mars et y’a pratiquement que googlebot qui est venu le voir, je confirme même qu’il vient presque tout les jours… Bref moi je trouves ca étrange, c’est même plus de l’agressivité. Ou simplement que nos site sont sur une liste noire/de surveillance!
Sur ce, Steph continue ton excellent travail. Lecteurs, profitez-en pour aller voir mon site : http://www.queryatall.com
Bonne journée.
Google est registraire.
Google est plus agressif
Google joue la game SEO
Google recrute le contenu même non référencé.
Avez-vous remarqué qu’il revient même sur des sites banni.
Google recrute du contenu plus que les autres , pas que pour les résultats de recherche…
Indexé un site même lié nulle part ne veut pas dire qu’il ne soit pas interessant en soit, il peut être une niche corporative, un site d’association… pour son historique son suivi de montée en puissance cela peut être aussi interessant du coup google peut lui eviter la fameuse sandbox ou néamoins la limiter. Dans tous les cas c’est une données de plus pour sa pertinence vis à vis des internautes et de sa connaissance des activités future du web.
Ah! Y’a pas à dire, Gougeule, c’est les plusse forts
Juste pour leur slogan «Don’t be evil», je les aime d’un amour profond, durable et inconditionnel. Voilà , c’est écrit, c’est avoué, assumé, condamnez ce garde-robe, je n’y reviendrai plus!
Google et GODADDY marchent main dans la main. GoDaddy a intégré les outils webmaster tools de google dans leur console de gestion…