Blog de l'équipe de Polytechnique.org

Comme indiqué dans la lettre exceptionnelle que nous avons émise courant novembre 2016, nous avons rencontré une perturbation sur les redirections des adresses polytechnique.org entre le 26 et le 31 octobre. Il s'agit d'un problème tout à fait distinct de celui mentionné dans la lettre d'octobre qui n'avait, lui, occasionné que des retards.

En effet, certains fournisseurs d'emails (SFR, Orange, Laposte et, dans une moindre mesure, Free) ont décidé de rejeter plus largement les emails qui leur étaient envoyés par notre serveur.

Lors de ce transfert, ces fournisseurs appliquent un anti-spam qui peut rejeter les emails considérés comme indésirables (ceux-ci sont alors perdus, pas simplement placés dans une catégorie différente). Cet anti-spam serveur utilise en bonne partie une notion de réputation informatique, qui compte pour part importante dans l'algorithme. Ceci ne pose généralement pas de problème, nos serveurs disposant habituellement d'une bonne réputation. Néanmoins, pendant la période en question, pour une raison encore en cours d’investigation mais probablement suite à une dégradation de cette réputation, ces anti-spam ont été jusqu'à rejeter près de la moitié des emails que nous leur transmettons.

De nombreux facteurs sont impliqués dans le calcul de cette réputation, mais majoritairement, c'est le fait qu'un email accepté soit par la suite classifié comme spam (par l'utilisateur ou par un algorithme) qui dégrade la réputation d'un serveur. Si celui-ci envoi trop d'emails indésirables, sa réputation diminue et l'anti-spam se fait alors plus drastique.

Dans le cadre d'un service de redirection, c'est particulièrement complexe, car nous sommes considérés comme émetteurs de tous les emails que nous redirigeons. Ainsi, si quelqu'un envoie un spam à une adresse polytechnique.org, et que par la suite nous le redirigeons vers une adresse orange.fr, du point de vue de l'hébergeur Orange, nous sommes l'émetteur.

C'est en partie pour cette raison que, dans le réglage recommandé de notre anti-spam personnel, nous filtrons les messages les plus certainement indésirables, et rajoutons un tag pour ceux dont nous sommes moins sûrs. Cela réduit la proportion d'emails indésirables transmis, et donc améliore la réputation de nos serveurs.

Cela étant, sur la période du 26 au 31 octobre, nous avons pu constater des taux de rejet très importants, résultant en de nombreux faux positifs rejetés. Dans le détail, SFR est monté jusqu'à 55% de rejet, Orange à 45% et laposte.net à 40%. Free a aussi vu son taux de rejet monter à 15% le 26 et 27 octobre, et était donc impacté, quoique dans une moindre mesure.

Ce problème est désormais résolu. Néanmoins, nous nous employons à en identifier les causes pour qu'il ne puisse plus se reproduire à l'avenir. Il est possible que nous ayons laissé passer une vague de spam non-détectée, ou bien qu'un fournisseur de réputation ait décidé de dégrader notre note. Quoi qu'il en soit, le problème s'est résolu naturellement à la fin du mois.

Reste la problématique des emails perdus pendant cette période. Du côté de l'hébergeur, pas d'espoir : les emails étaient simplement rejetés. Cela étant, dans un tel cas, l'émetteur de l'email reçoit une notification de rejet+ (un message envoyé par "mailer-daemon").

Nous offrons cependant un service palliant ce genre de difficultés : le service de stockage de secours, qui stocke une copie des emails transitant par nos serveurs sur ces derniers, pour une période d'environ 30 jours. Ainsi, les camarades qui ont activé ce service (il n'est pas activé par défaut, vu les implications potentielles en terme de vie privée) peuvent récupérer leurs emails perdus dessus (et ce même pour les mails dont l'expéditeur a reçu une notification de rejet).

Autre solution, pour ceux utilisant plusieurs redirections, les emails filtrés ne sont pas les mêmes partout et certains hébergeurs (notamment Gmail) n'ont pas été affectés du tout, permettant donc de récupérer tous les emails perdus sans limite de durée.

Vous n'avez pas les droits suffisants pour lire ce billet :
Vous devez vous authentifier

Samedi 21 février, nous avons migré nos services depuis notre ancien serveur de production (djali) vers un nouveau serveur plus puissant (svoboda), acheté grâce à la générosité de nos camarades -- merci à tous ceux qui ont fait un don !

Les sites web Polytechnique.org et Polytechnique.net sont désormais plus réactifs et agréables à utiliser. Nous pouvons également acheminer plus rapidement les emails vers les grosses listes de diffusion et lutter plus efficacement contre le spam.

La migration devait s'effectuer de 14h à 20h. Seuls les forums n'ont pas été entièrement transférés dans ce délai. La migration s'est passée sans problèmes majeurs. Elle s'est accompagné de brèves coupures de services, la plus longue ayant été celle du site web, hors-ligne pendant environ une heure et quart. Les services de mail n'ont pas subi d'interruption ; les envois sur les listes de diffusion ont été retardés d'environ une demi-heure.

Tous nos principaux services tournent maintenant sur le nouveau serveur. Il ne reste sur l'ancien que le serveur DNS principal de nos domaines et l'outil de support, qui sera migré bientôt. Ensuite, nous installerons sur djali la gestion des journaux d'activité et la supervision, afin de remplacer un serveur nommé mnemosyne. Ce dernier remplacera murphy, le serveur de développement, qui sera mis en retraite définitivement, achevant le rajeunissement de notre parc.

Bonne navigation sur notre site web !

Comme vous l'avez peut-être vu sur le site, ou dans la newsletter de mai, Polytechnique.org intègre maintenant les services de Google Apps. Mais pourquoi Google Apps ? Qu'est ce que ça implique pour Polytechnique.org ? Et est-ce que ça change quelque chose pour les X ?

D'abord, qu'est ce que Google Apps ?
C'est un service hébergé de Google (SaaS, Software as a Service, comme disent nos amis américains) qui met à disposition tous les produits de communication de Google sur notre propre domaine. Cela inclus par exemple le webmail GMail, la suite bureautique en ligne Google Docs, ou la messagerie instantanée GTalk. La version Premier de Google Apps est normalement payante, mais du fait de notre statut d'association d'anciens, nous bénéficions gratuitement de la version Education.

Pourquoi Google Apps ?
Tout simplement parce qu'un certain nombre de nos camarades n'ont pas de boîte mail avec une qualité de service acceptable ! Polytechnique.org vous offre un service de redirection mail de qualité, mais nous n'offrions pas jusque là de service de stockage des mails. Plutôt que d'offrir un tel service nous même, développé avec des ressources humaines insuffisantes pour cela et nécessitant une infrastructure bien plus importante que ce que nous avons pour pouvoir offrir un vrai service de qualité, nous avons choisi d'externaliser. D'autant plus que Google Apps arrive tout prêt et marche même lorsque le réseau de l'École, sur lequel nous sommes herbergé, décide de nous lacher !

Et ma vie privée hein ? Vous avez l'air d'oublier que Google = Satan !
Non, non, nous n'avons pas oublié ! D'ailleurs nous aussi nous sommes X, et nous nous sentons concernés pas la sécurité de nos informations ! Pour faire simple: Google n'a par défaut aucune information sur aucun Polytechnicien -- pas même le nom. Bien sûr, si tu choisis de profiter des services de Google Apps, et en particulier de la redirection des emails, Google aura accès à ces informations. Mais il n'en saura pas plus que si tu utilisais GMail, et pas plus que Microsoft ou Yahoo si tu utilisais leur service de messagerie !

Quelques liens

• La page Google Apps sur Polytechnique.org;
• Un accès direct à la page d'accueil de Google Apps;
• Un accès direct à tes mails sur Google Apps, si tu as activé le service.