Blue10 experienced a critical incident on September 13, 2024, lasting 2h 41m. The incident has been resolved; the full update timeline is below.
Update timeline
- investigating Sep 13, 2024, 02:37 PM UTC
We zien problemen naar voren komen op login.blue10.com waardoor het tijdelijk niet mogelijk is om in te loggen in Blue10. Afhankelijk van de authenticatiemethode zie je één van de volgende foutmeldingen: - De combinatie van e-mailadres en wachtwoord is onjuist. Klik hier als je je wachtwoord niet meer weet en/of opnieuw wilt instellen. - Er is een onbekende fout opgetreden. Als je deze melding nogmaals krijgt, neem contact op met Blue10 via [email protected] of +31 (0)88 2583100. Daarnaast ervaren gebruikers die al ingelogd zijn, problemen in Blue10 zoals het ontbreken van gegevens op het Dashboard. We zijn aan het onderzoeken hoe dit komt en gaan het zo snel als mogelijk oplossen. We houden je op de hoogte en hopen je zo snel mogelijk bericht te geven dat het inloggen weer werkt. Onze excuses voor het ongemak.
- resolved Sep 13, 2024, 05:18 PM UTC
Het is weer mogelijk om in te loggen in Blue10. De problemen die in de namiddag naar voren kwamen, werden veroorzaakt door werkzaamheden op de authenticatiedienst van Blue10. We hebben herstelwerkzaamheden uitgevoerd waardoor inloggen in Blue10 weer mogelijk is. Log je in met een e-mailadres en wachtwoord en heb je tijdens de verstoring (vandaag tussen 15:15 en 18:45 uur) je wachtwoord gewijzigd? Dan werkt dit nieuwe wachtwoord niet meer. Je kan succesvol inloggen met je oude wachtwoord. Lukt dit toch niet? Dan kan je een nieuw wachtwoord aanmaken via https://login.blue10.com/Password/Forgot. Bij deze sluiten we het incident en delen we op een later moment een postmortem op onze Statuspage.
- postmortem Sep 24, 2024, 12:02 PM UTC
Op vrijdag 13 september tussen 15:15 uur en 18:45 uur vond er een verstoring plaats die leidde tot tijdelijk verlies van toegang voor klanten en enkele gemiste e-mails, die later zijn hersteld. In deze update delen we meer informatie over het incident, de uitgevoerde acties en vervolgacties om herhaling in de toekomst te voorkomen. **Aanleiding** Het incident was het gevolg van een menselijke fout tijdens onderhoudswerkzaamheden. Deze werkzaamheden moesten plaatsvinden in een demo-omgeving, maar door een fout in de configuratie werden ook de klantomgevingen meegenomen. **Gevolgen** De bovengenoemde configuratiefout had twee gevolgen: 1. Alle gebruikers werden buitengesloten uit hun Blue10-omgeving en verloren tijdelijk toegang. 2. E-mails die naar Blue10 werden verstuurd, werden wel verwerkt, maar niet correct doorgestuurd naar de klantomgevingen. **Oplossingen** De gevolgen zijn als volgt opgelost: 1. Herstel van toegang tot Blue10: door het herstellen van een recente back-up werden ontbrekende verbindingen weer gelegd en kregen gebruikers weer toegang tot hun omgevingen. 2. Herstel van niet-verwerkte binnenkomende e-mails: het e-maildomein is gecontroleerd en missende e-mails zijn geïdentificeerd. Hierdoor zijn alle missende e-mails zijn op maandag 16 september tussen 10:00 en 11:00 opnieuw verwerkt en afgerond. **Vervolgacties** Om dergelijke incidenten in de toekomst te voorkomen, is er een beveiligingsmaatregel ingevoerd. Grote wijzigingen worden automatisch geblokkeerd, tenzij de beveiliging expliciet wordt uitgeschakeld. De kans op herhaling van dit incident door een menselijke fout is hierdoor geminimaliseerd.