Blue10 experienced a major incident on December 12, 2023 affecting Twinfield, lasting 20h 8m. The incident has been resolved; the full update timeline is below.
Affected components
Update timeline
- investigating Dec 12, 2023, 12:40 PM UTC
We zien in onze monitoring problemen naar voren komen dat een geïmporteerd document niet wordt geconverteerd naar een document in Blue10. Hierdoor kan je op het Dashboard de melding 'Documenten in behandeling' zien. We zijn aan het onderzoeken hoe dit komt en gaan het zo snel als mogelijk oplossen. We houden je op de hoogte.
- monitoring Dec 12, 2023, 02:43 PM UTC
We zien dat het proces rondom het importeren van nieuwe documenten sinds 14:10 uur weer doorloopt. Als gebruiker kan je nog wel een vertraging ervaren voordat een document beschikbaar is in Blue10. Dit komt door de nasleep van de verstoring. Door de verstoring zijn er 1.030 documenten in de foutmelding Conversiefout terechtgekomen. We zijn nu bezig om de documenten met de foutmelding opnieuw te verwerken zodat deze beschikbaar komen in Blue10. Verloop van de verstoring De verstoring werd getriggerd doordat één van de onderdelen van het importproces tegen een limiet aan liep. Tijdens het converteren van een document maakt Blue10 gebruik van een Pdf-rasterizer. Met deze tool kan Blue10 een geïmporteerd document omzetten om deze te verwerken in documentherkenning. Vervolgens is het document beschikbaar om verder te verwerken in Blue10. Rond 11:30 uur liep de Pdf-rasterizer tool tegen een limiet aan en liep dit proces vast. We hebben daarom het proces opgeschaald zodat nieuw, geïmporteerde documenten weer terechtkomen in Blue10. Sinds 14:10 uur doorlopen nieuw, geïmporteerde documenten succesvol het importproces. De focus ligt nu op het verwerken van de documenten met de foutmelding Conversiefout.
- resolved Dec 13, 2023, 08:48 AM UTC
Sinds maandagmiddag 12 december 16:00 uur zien we geen vertraging meer in het importproces en werkt het importeren van een document weer zoals je van ons gewend bent. Ook zijn de 1.030 documenten, met de foutmelding Conversiefout, sinds dinsdagochtend 13 december 07:00 uur verwerkt en beschikbaar in het splits- of valideerscherm. Ondernomen acties n.a.v. de verstoring De verstoring werd getriggerd doordat één van de onderdelen (de Pdf-rasterizer tool) van het importproces tegen een limiet aan liep. Het gebruik van de Pdf-rasterizer tool is opgeschaald zodat geïmporteerde documenten weer terechtkomen in Blue10. We gaan het achtergrondproces van deze tool optimaliseren, zodat dit onderdeel van het importproces niet meer kan vastlopen.