Piwigo.org

YannCo · 2009-08-07 11:01:39

Salut,

Que ce soit avec Astat ou WhoisOnline, il n'est (me semble t'il) pas possible de distinguer clairement les robots, google et autres.

Je pensais qu'en créant un ou des groupes (google, yahoo...) et en leur affectant des users par tranche d'IP, on pourrait ainsi avoir des stats plus concrètes vis à vis du nombre de visiteurs réels puis par robots.

Un nouveau plugin pourrait être envisagé mais je pense que whoisonline devrait être capable de gérer ça avec quelques modifications supplémentaires.

SNF69 · 2009-08-07 12:55:03

Salut,

Whois Online, au niveau du radar, te propose cette information en mettant un petit "SE" sous la date du premier accès (en sachant que c'est un possible robot, donc rien de certains !).

Par contre si tu veux retirer ces connexions de tes stats, là le plugin ne le propose pas en effet.

Seb

YannCo · 2009-08-07 13:08:39

Merci,

Effectivement y a bien ce petit "SE", ce qui serait bien c'est d'avoir un affichage avec et sans les robots, puis éventuellement pouvoir confirmer, ajouter des robots.

Là mes stats sont sympas mais fausses :D à titre d'informations, je préférerais voir des stats plus concrètes

SNF69 · 2009-08-07 14:31:01

Pour avoir des stats plus complète avec extraction des robots je consulte les stats de mon hébergeur car lui il a tout ;o)) pour Whois Online c'est déjà une très bonne base pour connaitre un peux mieux le mouvement sur son site et les origines de ses visiteurs.

Perso je le consulte au moins une fois par jour pour suivre l'activité de mes membres et c'est bien plus simple que se connecter chez mon hébergeur ;o)

Seb

grum · 2009-08-07 21:29:02

pour connaitre si le visiteur est un robot il faudrait à minima :
- soit accéder au logs du serveur
- soit modifier l'enregistrement des stats (y incorporer un champ "navigateur")

sans accès à ses informations, il n'est pas évident de savoir que le visiteur est un bot...
si tu détectes une activité étrange sur une adresse IP, avec AStat tu vérifies via le lien "GeoIP" s'il s'agit par exemple de google, puis tu peux les mettre la liste noire.

un whois sur une adresse google t'indiques que la plage 66.249.64.0 - 66.249.95.255 leur est attribuée

Code:

~$ whois 66.249.64.0

OrgName:    Google Inc. 
OrgID:      GOGL
Address:    1600 Amphitheatre Parkway
City:       Mountain View
StateProv:  CA
PostalCode: 94043
Country:    US

NetRange:   66.249.64.0 - 66.249.95.255 
CIDR:       66.249.64.0/19 
NetName:    GOOGLE
NetHandle:  NET-66-249-64-0-1
Parent:     NET-66-0-0-0-0
NetType:    Direct Allocation
NameServer: NS1.GOOGLE.COM
NameServer: NS2.GOOGLE.COM
NameServer: NS3.GOOGLE.COM
NameServer: NS4.GOOGLE.COM
Comment:    
RegDate:    2004-03-05
Updated:    2007-04-10

OrgTechHandle: ZG39-ARIN
OrgTechName:   Google Inc. 
OrgTechPhone:  +1-650-318-0200
OrgTechEmail:  arin-contact@google.com

au besoin, ouvre une demande dans mantis (projet AStat) pour gérer les plages d'IP dans la liste noire

YannCo · 2009-08-08 11:39:29

Salut,

Je n'avais pas vu cette fonction de liste noire, un tri par IP me convient, me suffit, c'est très bien comme ça !

Merci pour l'astuce ;)

VDigital · 2009-08-19 10:59:30

J'ai bien prévu de filtrer dans Whois Online les accès des Robots connus.
Je n'ai simplement pas eu encore l'occasion de développer le filtre.

J'envisage de regarder comment je pourrais dans un prochaine version:
- afficher au survol le nom du robot.
- ajouter ou retirer le robot de la liste noire.

@+

Piwigo.org

Annonce

#1 2009-08-07 11:01:39

Détection des robots

#2 2009-08-07 12:55:03

Re: Détection des robots

#3 2009-08-07 13:08:39

Re: Détection des robots

#4 2009-08-07 14:31:01

Re: Détection des robots

#5 2009-08-07 21:29:02

Re: Détection des robots

Code:

#6 2009-08-08 11:39:29

Re: Détection des robots

#7 2009-08-19 10:59:30

Re: Détection des robots

Pied de page des forums