Tous les systèmes sont opérationnels

Stickied Incidents

mardi 15 août 2023

nitter.fdn.fr Instance Nitter : erreur « Tweet not found »

Suite à de nouveaux changements côté Twitter (encore…), toutes les instances sont bloquées car la consultation des tweets nécessite à un compte. Le problème est identifié sur le Git de Nitter, ticket 983. La recherche ne fonctionne également pas.

L'équipe adminsys

  • Service arrêté définitivement...

  • Ça n'aura pas durée très longtemps (quelques jours voire heures), les comptes invités (guest accounts) ne peuvent plus être généré via l'API X/Twitter. En attente d'une nouvelle solution, s'il y en a une…

  • Depuis hier soir, suite une mise à jour vers Debian 12 afin d'utiliser Nim 1.6.10 et l'utilisation de la branche guest_accounts, Nitter est de nouveau fonctionnel ! À voir combien de temps ce sera fonctionnel car les jetons sont limités à 500 appels / 15 minutes et les jetons ne peuvent être générés depuis la même IP qu'une fois toutes les 24 heures avant que l'instance soit limitée par X/Twitter.

  • Maintenance Planifiée
    xDSL / FTTH : maintenance pour mise à jour du logiciel d'un équipement

    Chers adhérents, chères adhérentes,

    Ielo nous fait part de cette maintenance :

    • Caractéristiques de l'opération : Mise à jour du logiciel de l'équipement
    • Référence de la maintenance : #212854
    • Début (heure locale) : 2024-02-27 23:00:00 (CET / UTC+0100)
    • Fin (heure locale) : 2024-02-28 06:00:00 (CET / UTC+0100)
    • Temps de coupure : 1 heure
    • Impact : Coupure franche xDSL / FTTH collecté par Ielo

    À noter : la collecte xDSL/FTTH Ielo est redondée sur les deux datacenters Parisiens dans lesquels est présent FDN, il n'y aura donc, normalement, pas de coupure. Nos LNS feront en sorte que le second datacenter prenne le relais mais vous êtes prévenu, au cas où ;-).

    L'équipe adminsys

    Incidents antérieurs

    vendredi 24 février 2023

    80.67.169.12 ns0.fdn.fr : résolutions DNS KO

    Bonsoir,

    ns0.fdn.fr ne semble plus répondre aux requêtes DNS ou très difficilement depuis cet après-midi, gros pic de requêtes.

  • Tout est stable depuis les dernières modifications. L'incident qui était sous surveillance est donc clos. Les adminsys surveillent toujours et quelques ajustements pouvant encore être nécessaire prochainement (l'ouverture ayant été de plus officialisée à l'AG).

    • L'ajout d'un listener thread dnsdist semble résoudre les problèmes restants en IPv4
    • La table conntrack était pleine => iptables a été modifié pour ne plus tracker les requêtes DNS entrantes et interne au serveur
  • État des lieux :

    • La VM était injoignable par tous moyens (ping, SSH, console), un stop/start a été nécessaire
    • Des tests avec PowerDNS Recusor ont été faits (afin de remplacer Unbound) mais même symptômes (timeouts), même avec des requêtes censés être dans le cache
    • Ensuite un trop grand nombre de session a été identifié, entraînant des timeouts très réguliers, rendant la résolution DNS quasiment impossible. Contourné temporairement (désactivation des modules conntrack), en attendant une solution définitive (refonte iptables)
    • Unbound seul en frontal semble fonctionnel (donc sans dnsdist)
  • samedi 4 février 2023

    Bibliogram : arrêt du service

    Bonjour,

    Le service bibliogram n'est plus maintenu depuis septembre 2022, de nombreux dysfonctionnements étaient présents rendant le service quasiment inutile. La VM a donc été stoppée le 01/02/2023. Voir https://cadence.moe/blog/2022-09-01-discontinuing-bibliogram

    L'équipe adminsys

    lundi 1 août 2022

    nitter.fdn.fr Instance indisponible : rate limited

    L'instance nitter.fdn.fr est indisponible, elle est « rate limited » par Twitter. Aucune solution pour le moment.

    L'équipe adminsys FDN.

  • Incident résolu. La cause était un défaut de configuration sur ns0.fdn.fr ayant entraînant une surcharge CPU et donc des timeout dans les requêtes DNS.

    L'équipe adminsys FDN.

  • invidious.fdn.fr 504 Gateway Time-out

    L'instance invidious.fdn.fr n'est actuellement pas disponible, nous cherchons la cause. Vous tenant informé.

    L'équipe adminsys FDN.

  • Incident résolu. La cause était un défaut de configuration sur ns0.fdn.fr ayant entraînant une surcharge CPU et donc des timeout dans les requêtes DNS.

    L'équipe adminsys FDN.

  • lundi 18 juillet 2022

    Bibliogram : erreur 502 Bad Gateway lors de consultation des profils

    Bonsoir,

    Un bug touche actuellement la visualisation des profiles, à savoir les URL du type : https://bibliogram.fdn/fr/u/. Leur consultation est donc impossible, résultant d'une erreur nginx "502 Bad Gateway". Le bug en question est consultable ici : https://todo.sr.ht/~cadence/bibliogram-issues/63 Pas de résolution prévue pour le moment. Toutes les instances sont visiblement concernées.

    Vous tenant informé.

    Bonne soirée, Votre équipe adminsys.

  • Un patch est sorti le 24/07 à 16h48. Instagram a restructuré la page web, ce qui rendait la consultation des profils impossible avec l'ancienne méthode. Une nouvellement méthode, IWeb a été mise en place, commit https://git.sr.ht/~cadence/bibliogram/commit/c2d7aca1cb9e0ebba2de3e1ef7c2327f3e118be4 pour plus d'infos. Nous avons appliqué ce patch à 1h36 le 25/07. C'est désormais fonctionnel :).

    Bonne semaine, L'équipe adminsys FDN.