Held IT - Incident met Webhooks – Incidentdetails

Tussen 14:24 en 14:53 UTC op 13 augustus 2026 overbelastte een routinematige achtergrondtaak voor het verwijderen van een organisatie een belangrijke gedeelde database, waardoor meerdere GitHub-services kortstondig meer fouten en tragere reacties gaven. Het sterkst getroffen was de webhook-beheer-API, met kleinere impact op Git-bewerkingen, pull requests, issues, packages, inloggen en Copilot. De impact verdween vanzelf rond 14:53 UTC zodra de taak was voltooid; we hebben het incident om 15:36 UTC opgelost.

Getroffen gebruikers kunnen een korte toename van fouten en tragere reacties hebben ervaren, voornamelijk bij het aanmaken, weergeven of bijwerken van webhooks, met kleinere effecten op pull requests, issues, packages en Git-bewerkingen. Storingen piekten rond 14:37 UTC gedurende enkele minuten tot ongeveer 1%.

Om toekomstige incidenten te voorkomen, hebben we al een update uitgebracht die het veiligere verwijderingstraject voor organisaties inschakelt, samen met limieten op verwijderingsblokkeringen op databases. Voortbouwend op deze wijzigingen, voeren we een audit uit van alle bulkverwijderings- en opschoontaken die naar gedeelde databases schrijven om soortgelijke problemen in de toekomst te voorkomen.

We hebben tijdelijk een achtergrondtaak uitgeschakeld die de impact veroorzaakte. Op dit moment is de impact volledig verholpen.

De verminderde prestaties met betrekking tot Git Operations, Issues, Packages, Pull Requests en Webhooks zijn verholpen. We monitoren de situatie om de stabiliteit te waarborgen.

We onderzoeken momenteel een korte verslechtering van de service voor Git-operaties (met name pushes), issues, pull requests, package registry en webhooks tussen 14:32 en 14:46 UTC. We hebben de oorzaak van de verslechtering geïdentificeerd en onderzoeken mitigatiestrategieën om herhaling te voorkomen.

Packages ondervindt verminderde prestaties. We blijven dit onderzoeken.

Git Operations ondervindt verminderde prestaties. We blijven dit onderzoeken.

Issues ondervindt verminderde prestaties. We blijven dit onderzoeken.

Pull Requests ondervindt verminderde prestaties. We blijven dit onderzoeken.