Held IT - Incident met Git-bewerkingen – Incidentdetails

Incident met Git-bewerkingen

OpgelostVerminderde prestaties1 uur 43 minuten

Getroffen

GitHub

Verminderde prestaties van 8:57 PM naar 10:37 PM, Operationeel van 10:37 PM naar 10:41 PM

GitHub → Git Operations

Verminderde prestaties van 8:57 PM naar 10:37 PM, Operationeel van 10:37 PM naar 10:41 PM

  • OpgelostUTC

    Op 3 november 2026, tussen 15:00 UTC en 22:37 UTC, waren Git-bewerkingen via HTTPS op GitHub.com verminderd. Clones, fetches en pushes via HTTPS waren traag en sommige mislukten. Voor ongeveer de helft van het Git HTTPS-verkeer liep de mediane reactietijd op van minder dan 100 milliseconden tot wel 5 seconden. Gemiddeld was het foutpercentage 0,65% en piekte het naar 1,29% van de verzoeken aan de service. Git-bewerkingen via SSH werden niet beïnvloed.

    Dit kwam door een opeenstapeling van overtollige verbindingen op de hosts die Git HTTPS-verkeer bedienen, waardoor hun netwerkcapaciteit verzadigd raakte en trage en mislukte reacties ontstonden voor alle clients die door deze hosts werden bediend.

    We hebben het incident verholpen door een clientverkeerspatroon bij onze load balancers te blokkeren en deze opnieuw te laden, waardoor de overtollige verbindingen vrijkwamen. De blokkering verhinderde ook dat sommige gebruikers van één externe integratie Git-bewerkingen via HTTPS konden uitvoeren, totdat we deze op 4 november om 13:26 UTC verwijderden.

    We werken eraan om sneller te waarschuwen bij aanhoudende Git HTTPS-latentie en ervoor te zorgen dat maatregelen van de load balancer onmiddellijk effect hebben op bestaande verbindingen.

  • MonitoringUTC

    De verslechtering die invloed had op Git Operations is verholpen. We monitoren om de stabiliteit te waarborgen.

  • UpdateUTC

    We zien een aanzienlijke verbetering, hoewel sommige Git-bewerkingen voor een klein aantal klanten traag kunnen zijn. We markeren dit als verholpen en blijven dit monitoren.

  • UpdateUTC

    Onze oplossing is uitgerold en klanten zouden verbeteringen moeten gaan zien in Git Operations. We blijven updates geven over de status van de oplossing.

  • UpdateUTC

    We hebben het probleem met Git Operations geïdentificeerd en beginnen met het uitrollen van een oplossing. We laten je weten zodra we herstel zien.

  • OnderzoekenUTC

    We onderzoeken meldingen van verminderde prestaties voor Git Operations