Instapaper : après une panne, des archives partielles jusqu'à vendredi

Instapaper : après une panne, des archives partielles jusqu’à vendredi

Cinq minutes trop tard

Avatar de l'auteur
Vincent Hermann

Publié dans

Internet

13/02/2017 4 minutes
12

Instapaper : après une panne, des archives partielles jusqu'à vendredi

Instaper a subi la semaine dernière une importante panne, dont les conséquences peuvent encore se sentir. L’éditeur a expliqué la situation, jouant la carte de la transparence. Cependant, les utilisateurs ne doivent pas compter sur un rétablissement complet du service avant vendredi au plus tard.

Instaper, à l’instar de Pocket, est un service permettant de stocker des liens en vue d’un visionnage plus tard. On pourrait le considérer comme un gestionnaire amélioré de favoris, avec des fonctionnalités supplémentaires de classement ainsi qu’un mode lecture allégé permettant de se concentrer sur le texte, particulièrement en environnement mobile.

Une panne de 31 heures

Mercredi dernier, le 8 février, une panne s’est déclarée. Sans que l’on sache pourquoi, il était devenu impossible de sauvegarder des nouveaux liens dans les comptes. Rapidement, l’éditeur (qui a été racheté par Pinterest) explique le problème : le prestataire de service retenu pour le stockage dans le cloud a averti que la base de données avait atteint une limite, rendant impossible l’ajout de nouvelles entrées. D’où l’impossibilité d’enregistrer de nouveaux liens.

Résultat, une panne monstre de 31 heures, alors même que l’entreprise se flatte d’un joli score de 99,3 % de disponibilité de service. Mais alors que l’équipe s’évertuait à remettre la situation d’aplomb, elle estimait encore pouvoir le faire dans la journée du 9 février. Peine perdue, puisqu’aujourd’hui encore, le service n’est que partiellement actif.

Nouvelle base de données et archives partielles

Dans un deuxième billet de blog, Instapaper indique en effet qu’il n’y a pas eu de miracle possible : les techniciens n’ont pas pu simplement étendre la base de données qui était utilisée. Les 31 heures de panne tiennent de fait compte d’une imposante migration des données de l’ancienne base vers une nouvelle. Malheureusement, cette transition ne s’est pas faite sans heurt.

Aucune donnée n’a été perdue, mais Instapaper n’a pu restaurer que partiellement le service pour accélérer autant que possible le retour des archives. Ces dernières ne sont ainsi disponibles qu’à partir du 20 décembre : tous les liens sauvegardés avant cette date ne sont pas accessibles. Ils attendent simplement d’être « réactivés », l’éditeur indiquant que l’exportation complète prend beaucoup plus de temps que prévu.

Retour à la normale pour le 17 février au plus tard

Évidemment, la question que se posent les utilisateurs est de savoir quand le service sera pleinement opérationnel à nouveau. Selon Instapaper, tout devrait être rentré dans l’ordre pour vendredi (17 février) au plus tard. Il n’indique cependant si la remise en service se fera progressivement – par lots successifs d’utilisateurs – ou si elles seront disponibles pour tous en même temps.

Instapaper a tout de même restauré la fonctionnalité principale, à savoir la sauvegarde des liens. En rouvrant les archives des sept dernières semaines avant l’incident, il est probable que la majorité des utilisateurs aient recouvert l’essentiel de leurs liens. Cependant, de la même manière que pour la panne ayant frappé GitLab récemment, on s’étonne du manque de mesures en prévision d’un tel cas de figure.

On découvre en effet que l’équipe en charge des incidents a dû contacter le prestataire pour apprendre que la base de données avait atteint ses limites. Il n’y aurait pas eu d’alerte interne sur l’état de la base de données, ou émise par le prestataire pour signaler à son client qu’il arrivait aux limites de ce qu’il était possible. On espère donc qu’Instapaper aura cette fois mis en place les bons signaux pour ne plus se retrouver au pied du mur à l’avenir.

Écrit par Vincent Hermann

Tiens, en parlant de ça :

Sommaire de l'article

Introduction

Une panne de 31 heures

Nouvelle base de données et archives partielles

Retour à la normale pour le 17 février au plus tard

Fermer

Commentaires (12)


Sois je chipote, soi je suis pas réveillé, mais ça veut dire quoi:



Cependant, les utilisateurs ne doivent pas compter sur un rétablissement complet du service avant vendredi au plus tard.

?



Si ça ne peut être ni plus tôt ni plus tard, bah c’est vendredi point barre, non? <img data-src=" />



Sinon, c’est beaucoup utilisé comme service? Jamais entendu parler. Après si c’est une petite boîte grandissante comme Gitlab, bah ça ne m’étonne pas plus que ça. Dans le cas de Gitlab, ils font évoluer leur infra avec le temps, mais ils sont partis d’à peu près rien pour finir par héberger des dizaines de milliers de dépôts gratuitement dans un laps de temps assez réduit. Quand t’as pas les poches remplies à la base c’est difficile de blinder l’infra au départ. Bref je ne sais pas si c’est le même genre de situation pour instapaper, mais moi ça ne me choque pas plus que ça qu’une entreprise ait une infra à la hauteur de la taille de son business.



EDIT: Tiens d’ailleurs jsuqu’où NXI pousse le vice en matière de backup/monitoring?








gogo77 a écrit :



Sois je chipote, soi je suis pas réveillé, mais ça veut dire quoi:



  ?       






 Si ça ne peut être ni plus tôt ni plus tard, bah c'est vendredi point barre, non? <img data-src=">  






 Sinon, c'est beaucoup utilisé comme service? Jamais entendu parler. Après si c'est une petite boîte grandissante comme Gitlab, bah ça ne m'étonne pas plus que ça. Dans le cas de Gitlab, ils font évoluer leur infra avec le temps, mais ils sont partis d'à peu près rien pour finir par héberger des dizaines de milliers de dépôts gratuitement dans un laps de temps assez réduit. Quand t'as pas les poches remplies à la base c'est difficile de blinder l'infra au départ. Bref je ne sais pas si c'est le même genre de situation pour instapaper, mais moi ça ne me choque pas plus que ça qu'une entreprise ait une infra à la hauteur de la taille de son business.&nbsp;








 Je suis assez d'accord jusqu'à un certain point, qui est la différence avec Gitlab      






Ici on parle d'Instapaper, "qui a été racheté par Pinterest"      

Et Pinterest:





Le&nbsp;16&nbsp;mars&nbsp;2015, à la suite d’une&nbsp;levée de fonds&nbsp;de 367 millions de dollars, le site atteint une valorisation record de 11 milliards de dollars2, soit le double de sa valorisation précédente. Le site n’est actuellement pas coté en bourse.

Avec cet argent t’as quand même moyen de mieux gérer la situation









gogo77 a écrit :



EDIT: Tiens d’ailleurs jsuqu’où NXI pousse le vice en matière de backup/monitoring?



Sur disquettes 5” ¼ d’après mes sources



Ok merci pour l’info, effectivement ça se justifie un moins du coup.


Punaise les types en charge de gérer leur infra stockage sont de belles quiches, pour ne pas avoir vu ou pas pris en compte le manque d’espace …


A mon avis ils ont prévenus qui de droit depuis longtemps et finalement ça a pété.


Le “miracle” des services cloud …

Certaines de mes connaissances se demandent pourquoi je garde tout en local …


Erreur grossière de la part de leurs admins. gérer le stockage et la sauvegarde c’est la base


Rien ne dit si les admin ont remonté l’alerte et qu’elle a été ignorée comme presque à chaque fois quand il faut sortir le portefeuille …


C’est vrai que l’origine de la panne est… cocasse pour rester poli. Dommage, Instapaper reste un excellent service depuis pas mal d’années maintenant.








Juju251 a écrit :



Le “miracle” des services cloud …

Certaines de mes connaissances se demandent pourquoi je garde tout en local …





Justement en principe le miracle des services cloud c’est la scalabilité… <img data-src=" />



Là c’est pas du cloud c’est des gars qui stockent les données sur le disque dur du voisin &nbsp;<img data-src=" />



Pff, voila ce que c’est d’utiliser SQL Server Express, on atteint vite la limite…











PèrePatience a écrit :



Rien ne dit si les admin ont remonté l’alerte et qu’elle a été ignorée comme presque à chaque fois quand il faut sortir le portefeuille …









C’est clair…





Today at 1AM PT we completely restored the Instapaper service, including access to all archives. We performed the restoration without losing any of your older articles, changes made to more recent articles or articles saved after recovering from the outage.We apologize for the extended downtime and the time it took to regain access to your complete archives. Instapaper has operated as a high availability service over the last nine years without many hiccups. The root cause of this outage was both difficult to predict and prevent, and the nature of the outage is extremely rare and unlikely to recur. We appreciate your patience during this time.



&nbsphttps://medium.com/making-instapaper/instapaper-outage-cause-recovery-3c32a7e9cc…