Held IT - Incident met Pull Requests, Git Operations en Issues – Incidentdetails

Incident met Pull Requests, Git Operations en Issues

OpgelostGedeeltelijke storing2 uur

Getroffen

GitHub

Verminderde prestaties van 9:49 AM naar 11:30 AM, Operationeel van 11:30 AM naar 11:50 AM

GitHub → Git Operations

Verminderde prestaties van 9:49 AM naar 11:30 AM, Operationeel van 11:30 AM naar 11:50 AM

  • OpgelostUTC

    Op 4 november 2026, tussen 09:35 UTC en 11:43 UTC, ondervonden klanten periodiek fouten en time-outs op GitHub.com, voornamelijk bij acties die data wegschrijven. Op het hoogtepunt mislukte ongeveer 20% van de schrijfbewerkingen voor pull requests (zoals mergen, reageren en reviewen), samen met ongeveer 10% van het aanmaken en bewerken van issues en 10–15% van het bewerken van projectitems. Git-pushes via SSH, REST- en GraphQL API-verzoeken, uploads voor codescanning, releases en package-bewerkingen werden eveneens getroffen, en ongeveer 1% van de Actions-runs liep meer dan vijf minuten vertraging op of kon niet starten. Al met al mislukte op het dieptepunt bijna 4% van alle verzoeken aan GitHub.com. Leesacties werden grotendeels niet beïnvloed, en het na korte tijd opnieuw proberen van een mislukte actie slaagde meestal wel.

    Het incident werd veroorzaakt door een piek aan gelijktijdige updates naar hetzelfde databaserecord, waardoor alle beschikbare verbindingen naar een van onze primaire databases bezet raakten. Hoewel die contentie verdween, bleef de opgebouwde wachtrij van verzoeken onze databaseverbindingslaag overbelasten, en herstelde deze niet vanzelf. We hebben het incident verholpen door over te schakelen naar een nieuwe primaire database-host. De meeste diensten herstelden om 11:31 UTC, en Actions herstelde om 11:43 UTC.

    Sinds het incident hebben we het codepad dat de contentie veroorzaakte uitgeschakeld, de verwerkingscapaciteit van onze databaseverbindingslaag met 50% verhoogd, en hebben we alerting toegevoegd om dit type overbelasting eerder te detecteren. Daarnaast verbeteren we onze procedures zodat we in vergelijkbare situaties sneller kunnen overschakelen.

  • MonitoringUTC

    De verminderde prestaties die Actions beïnvloedden, zijn verholpen. We monitoren om de stabiliteit te waarborgen.

  • UpdateUTC

    De verminderde prestaties met betrekking tot API-verzoeken, Git-bewerkingen, Issues en Pull Requests zijn verholpen. We monitoren om de stabiliteit te waarborgen.

  • UpdateUTC

    We werken momenteel aan het verhelpen van verhoogde foutmeldingen en incidentele storingen die GitHub treffen, waaronder Pull Requests, Git Operations en Issues. Sommige verzoeken kunnen mislukken of vertraging oplopen terwijl we werken aan het herstellen van de service. We geven een nieuwe update zodra er meer informatie beschikbaar is.

  • UpdateUTC

    API Requests ondervindt verminderde prestaties. We blijven dit onderzoeken.

  • UpdateUTC

    We onderzoeken verhoogde foutmeldingen en periodieke storingen die GitHub treffen, waaronder Pull Requests, Git Operations en Issues. We blijven gebruikers op de hoogte houden terwijl we aan een oplossing werken.

  • UpdateUTC

    Pull Requests ondervindt verminderde beschikbaarheid. We blijven dit onderzoeken.

  • UpdateUTC

    Actions ondervindt verminderde prestaties. We blijven dit onderzoeken.

  • OnderzoekenUTC

    We onderzoeken meldingen van verminderde prestaties voor Git Operations, Issues en Pull Requests