Logic4 - Vermindering van performance op websites – Incidentdetails

Incident Verschillende Websites Down of verminderde performance - 07-04-2025

Incident Type: Webshop Downtime/Performance Issues
Ernst: Hoog
Getroffen Functionaliteit: Meerdere Webshops

Tijdstempels:

• Gerapporteerd om: 14:34

• Impact begon om: 14:51

• Opgelost om: 15:05

Duur:

• Tijd om op te lossen: 14 minuten

• Totale duur: 31 minuten

Samenvatting: Op 7 april 2025 ondervonden meerdere Logic4 gebruikers een tijdelijke downtime of verminderde performance door een groot aantal verzoeken naar de resetcache pagina. Dit leidde tot een overbelasting van het cachesysteem, wat een tijdelijke onderbreking van deze service veroorzaakte.

Incident Tijdlijn:

• 14:30: Groot aantal verzoeken ontvangen vanuit een specifiek IP-adres

• 14:33: Eerste meldingen komen binnen

• 14:57: Webshops beginnen weer normaal te functioneren

• 15:10: Alle webshops volledig operationeel

Bijdragende Factoren:

• De Logic4 gebruiker in kwestie had de resetcache pagina niet beveiligd met een wachtwoord

• Geen rate limiting op verzoeken de achterliggende cache te verversen

• Nieuwe cachingservice kon niet omgaan met deze hoge aantallen verzoeken

Mitigerende Acties:

• Het DevOps team heeft bepaald verkeer geblokkeerd en diverse websites gereset

Geïdentificeerde Risico's:

• Soortgelijke incidenten kunnen in de toekomst optreden als er onderstaande maatregelen niet worden getroffen

Opvolgacties:

• Alle klantomgevingen controleren en samen met de gebruikers beveiligen met een wachtwoord

• Strikte rate limits implementeren op specifieke pagina's

• Beveiligingsmaatregelen in de cachingservice verbeteren om overbelasting te voorkomen

We hebben belangrijke verbeterpunten geïdentificeerd en hebben al maatregelen genomen om soortgelijke incidenten in de toekomst te voorkomen. Bedankt voor uw begrip en voortdurende steun.

De webservers zijn weer stabiel. We onderzoeken momenteel nog de oorzaak van de eerdere problemen.

De problemen lijken inmiddels verholpen. We zijn nog bezig met het achterhalen van de oorzaak.