Incident met GitHub Actions en Pages

Overzicht

Dit incident is opgelost. Bedankt voor uw geduld en begrip terwijl we dit probleem hebben aangepakt. Een gedetailleerde analyse van de bronoorzaak (root cause analysis) zal worden gedeeld zodra deze beschikbaar is.

---

Logboek van updates

7 augustus 2026

02:04 UTC - Opgelost Het incident is opgelost.

02:03 UTC - Update Tijdens het incident raakten sommige Actions Runner Controller (ARC) runner-pods vast in een inactieve status (idle state). Betrokken gebruikers kunnen deze pods verwijderen met kubectl of hun Actions Runner Controller-applicatie opnieuw implementeren. ARC zal automatisch vervangende runners aanmaken.

De volgende releases van Actions Runner en Actions Runner Controller zullen een automatisch herstelmechanisme bevatten, waardoor deze handmatige stappen in de toekomst niet meer nodig zijn.

Sommige gebeurtenissen die workflows triggeren, waaronder push- en pull-request-gebeurtenissen, werden tijdens het incident niet verwerkt en kunnen niet automatisch opnieuw worden afgespeeld. Klanten moeten mogelijk de triggerende actie herhalen door een nieuwe commit te pushen, de pull-request bij te werken of, indien van toepassing, de workflow handmatig opnieuw uit te voeren.

00:59 UTC - Update Er wordt onderzoek gedaan naar meldingen dat sommige Actions Runner Controller-runners langer dan verwacht nodig hebben om te herstellen. Er volgt een update zodra het onderzoek vordert.

00:06 UTC - Monitoring De degradatie is beperkt. We monitoren de situatie om de stabiliteit te waarborgen.

00:05 UTC - Update De degradatie die Actions en Pages beïnvloedde, is beperkt. We monitoren de situatie om de stabiliteit te waarborgen.

00:01 UTC - Update Systeembrede wachtrijen zijn geleegd en nieuwe taken worden verwerkt zoals verwacht. De oplossing voor self-hosted runners die geen taken oppikten, is volledig uitgerold.

• Workflow-triggers via webhooks zijn hersteld naar volledige doorvoersnelheid.
• GitHub Pages, Copilot code review en de Copilot coding agent vertonen herstel.
• Migraties met behulp van GitHub Enterprise Importer blijven als voorzorgsmaatregel gepauzeerd.

We monitoren alle getroffen services voor een blijvend herstel en zullen spoedig een nieuwe update geven.

6 augustus 2026

23:13 UTC - Update Er zijn fixes geïmplementeerd die voorkomen dat runners ongeldige taken toegewezen krijgen, en er worden extra stappen ondernomen om de achterstand aan getroffen taken weg te werken. De voltooiingspercentages voor actieve workflows zijn aanzienlijk verbeterd en liggen nu op 99%. De wereldwijde wachtrijen voor hosted runner-toewijzing zijn bijna weggewerkt en de concurrency-wachtrijen voor klanten worden verwerkt. Er is een aanvullende wijziging doorgevoerd om de verwerking van de achterstand aan taakverzoeken te versnellen.

De doorvoersnelheid voor webhook-getriggerde Actions-workflows wordt geleidelijk hersteld terwijl de systeemstabiliteit wordt gemonitord. Er is een fix geïmplementeerd voor self-hosted runners die geen taken oppikten; deze wordt stapsgewijs geactiveerd.

GitHub Pages, Copilot code review en de Copilot coding agent kunnen nog steeds last hebben van incidentele fouten of vertragingen. Migraties via GitHub Enterprise Importer blijven gepauzeerd.

22:18 UTC - Update De voortgang bij het oplossen van het probleem met GitHub Actions zet door. Er is een fix uitgerold die voorkomt dat runners taken toegewezen krijgen die niet langer geldig zijn; hierdoor stijgen de voltooiingspercentages. Voor workflow-runs die starten, is het succespercentage aanzienlijk gestegen naar 97%. Standaard- en grotere runners werken de wachtrijen nu weg. Er wordt gewerkt aan een wijziging om problemen met bestaande self-hosted runners die geen taken oppikken te beperken.

Webhook-triggers blijven geknepen (throttled) om het herstel te ondersteunen. Veel push- en pull-request-gebeurtenissen triggeren nog geen nieuwe workflow-runs; we werken aan het veilig herstellen van de volledige doorvoersnelheid.

GitHub Pages, Copilot code review en de Copilot coding agent kunnen nog steeds fouten of vertragingen vertonen. Migraties via GitHub Enterprise Importer blijven gepauzeerd.

21:30 UTC - Update De werkzaamheden aan GitHub Actions worden voortgezet. Webhook-triggers blijven geknepen ter ondersteuning van het herstel, waardoor veel push- en pull-request-gebeurtenissen geen nieuwe workflow-runs triggeren.

Er is vastgesteld dat runners taken toegewezen krijgen die niet langer geldig zijn. Er wordt een wijziging uitgerold om dit aan te pakken; zowel GitHub-hosted als self-hosted runners zijn hiervan getroffen.

Copilot code review, de Copilot coding agent en GitHub Pages kunnen fouten of vertragingen vertonen. Migraties via GitHub Enterprise Importer zijn gepauzeerd ter ondersteuning van de mitigatie-inspanningen.

20:34 UTC - Update De werkzaamheden aan GitHub Actions worden voortgezet. Webhook-triggers zijn momenteel geknepen om te helpen bij het herstel; ongeveer 15% van de webhooks wordt verwerkt, waardoor veel gebeurtenissen (zoals pushes en pull requests) geen workflows triggeren. Van de in de wachtrij geplaatste taken is ongeveer 65% succesvol, een verbetering ten opzichte van de 30 tot 40% eerder tijdens dit incident.

De resterende impact is beperkt tot runners die vastzitten in het opnieuw proberen van taken die niet meer beschikbaar zijn. Zowel GitHub-hosted als self-hosted runners zijn getroffen en we werken aan hun herstel.

Copilot code review, de Copilot coding agent en migraties via GitHub Enterprise Importer kunnen eveneens beïnvloed zijn.

19:43 UTC - Update De werkzaamheden aan GitHub Actions worden voortgezet. De capaciteit blijft beperkt, waardoor taken vertraging kunnen oplopen of kunnen mislukken tijdens het geleidelijke herstel. Klanten die self-hosted runners gebruiken, kunnen fouten of rate limiting ervaren wanneer runners zich registreren.

Copilot code review, de Copilot coding agent en migraties via GitHub Enterprise Importer kunnen eveneens beïnvloed zijn. Webhook-leveringen kunnen vertraagd zijn. De engineers blijven actief bezig met de oplossing.

18:46 UTC - Update Er wordt gewerkt aan een probleem dat meerdere GitHub-services beïnvloedt. Workflow-runs mislukken nog steeds of zijn vertraagd in het opstarten, en sommige taken in de wachtrij kunnen timen. Taken die gebruikmaken van GitHub-hosted runners zijn bijzonder getroffen door de beperkte capaciteit.

Klanten met self-hosted runners kunnen fouten of rate limiting zien bij registratie. Copilot code review, de Copilot coding agent, hosted runners en migraties via GitHub Enterprise Importer kunnen eveneens beïnvloed zijn. Webhook-leveringen kunnen vertraagd zijn. Het herstel duurt langer dan verwacht.

18:11 UTC - Update Workflow-runs mislukken of zijn vertraagd, en sommige taken in de wachtrij timen uit. Klanten met self-hosted runners kunnen fouten of rate limiting ervaren bij registratie. Copilot code review, de Copilot coding agent, hosted runners en migraties via GitHub Enterprise Importer kunnen beïnvloed zijn. Webhook-leveringen kunnen vertraagd zijn. Er zijn verdere mitigaties toegepast en er wordt gewerkt naar volledig herstel.

17:40 UTC - Update Er zijn diverse mitigaties toegepast en er wordt momenteel een verdere fix uitgerold over alle getroffen systemen. Workflow-runs mislukken of zijn vertraagd, en sommige taken in de wachtrij timen uit. Copilot code review, de Copilot coding agent, hosted runners en migraties via GitHub Enterprise Importer kunnen beïnvloed zijn. Webhook-leveringen kunnen vertraagd zijn.

17:02 UTC - Update De werkzaamheden aan GitHub Actions worden voortgezet. Workflow-runs mislukken nog steeds of zijn vertraagd, en sommige taken in de wachtrij timen uit. Sommige verzoeken aan de Actions API geven fouten terug. Klanten die migraties uitvoeren met GitHub Enterprise Importer kunnen fouten zien. Er zijn verschillende mitigaties toegepast en er wordt nu een verdere fix uitgerold.

16:33 UTC - Update Actions en Pages ervaren een verminderde beschikbaarheid. Het onderzoek hiernaar wordt voortgezet.

16:27 UTC - Update (Actions) De werkzaamheden aan GitHub Actions worden voortgezet. Sommige workflow-runs zijn nog steeds vertraagd of lukken niet om te voltooien, en sommige verzoeken aan de Actions API geven fouten terug. Klanten die migraties uitvoeren met GitHub Enterprise Importer kunnen eveneens fouten zien.

16:27 UTC - Update (Pages) Pages ervaart verminderde prestaties. Het onderzoek wordt voortgezet.

16:19 UTC - Update Pages functioneert normaal.

15:53 UTC - Update Pages ervaart verminderde prestaties. Het onderzoek wordt voortgezet.

15:45 UTC - Update Er wordt onderzoek gedaan naar fouten die GitHub Actions beïnvloeden. Sommige workflow-runs starten niet of mislukken halverwege, en sommige verzoeken aan de Actions REST API geven fouten terug. Sommige klanten kunnen onverwachte rate limiting in hun workflows ervaren. De engineers hebben de bron van de verstoring geïdentificeerd en werken aan een mitigatie.

15:41 UTC - Update Actions ervaart een verminderde beschikbaarheid. Het onderzoek wordt voortgezet.

15:22 UTC - Onderzoek Er wordt onderzoek gedaan naar meldingen van verminderde prestaties voor Actions.