Le vendredi 19 mars 2010 à 15:40 +0100, Vincent Panel a écrit :
> 2010/3/19 Vincent Panel <[email protected]>:
> > 2010/3/19 Lombard Marianne <[email protected]>:
> >> Bonjour à tous
> >>
> >> Le site a connu une période d'indisponibilité ce matin pendant quelques
> >> heures. Cette indisponibilité est liée à un pic de charge majeur sur le
> >> serveur.
> >> Nous soupçonnons une page visitée par un bot d'indexation du moteur de
> >> recherche Yahoo mais nous ignorons encore laquelle.
> >>
> >
> > On dirait plutôt un deni de service à première vue (voir un
> > distributedDoS si on est protégé contre le DoS). Un bot pourrait à la
> > limite augmenter un peu la charge, mais là, c'est énorme ! Je suppose
> > qu'il existe des moyens de protection contre ça au niveau apache ou au
> > niveau pile réseau -> à investiguer.
> >
> > Merci pour le prompt rétablissement de la situation, en tout cas.
> >
> 
> Après investigation, je n'ai rien trouvé de probant. En fait, apache
> n'a pas eu plus de connexions que d'habitude si on regarde les logs.
> Par contre, ipconntrack a augmenté sérieusement sur munin (ce qui veut
> dire que les connexions ouvertes n'ont pas été fermées et pas
> nécessairement qu'il y a eu une augmentation du nombre de connexions)
> et les processes se sont entassés en attente. Je pense plutôt à un
> problème système.
> 
> On a "sar" qui tourne et semble donner des stats intéressantes, mais
> je ne crois pas qu'il donne des stats par process, je ne connais pas
> bien l'outil : si quelqu'un veut investiguer de ce côté là. Les logs
> systèmes ne semblent rien indiquer de très spécial, à part des
> conséquences de l'augmentation de la charge. ssh affiche un petit
> message d'erreur à 07:00, par rapport à OVH qui a tenté de se
> connecter (comme chaque jour, apparemment) mais je ne crois pas que ça
> ait causé le problème. Le problème semble avoir eu lieu à 7:00 pile ce
> matin, donc c'est quasiment sûr que c'est pas un humain derrière.

Je pense que le problème est simplement du aux bots qui ont indexés les
pages trac ( a ce que j'ai vu, il y en a eu 3/4 en même temps ). Le
problème a commencé vers 7h00 en effet, et on voit les urls de trac à ce
moment. Comme on utilise des bases de données sqlite, trac bloque assez
vite en cas de connexions simultanées ( vu que trac ne supporte pas les
accès concurrents avec le plugin sqlite ). Donc la charge a grimpé de
manière linéaire assez vite.

Au moment du reboot, la moitié des connexions étaient du à yahoo.
Ensuite peut être qu'il y a eu un problème d'ordre réseau chez ovh
( genre un filtrage alacon qui fait que les connexions n'ont jamais été
fermé ), mais j'ai des gros doutes ( je mentionne ça uniquement par
souci de complétude ).

-- 
Michael Scherer

_______________________________________________
Association mailing list
[email protected]
http://www.mandrivafr.org/mailman/listinfo/association

Répondre à