We hebben de processen voor het importeren van e-mails met bijlages nu 24 uur actief gemonitord en zien geen vertragingen meer optreden. Het importproces functioneert weer zoals je dat van ons mag verwachten. We sluiten dit incident daarom dan ook hierbij af.
We zijn nog wel met Microsoft Azure support verder aan het onderzoeken hoe we herhaling in de toekomst kunnen voorkomen.
Posted May 06, 2021 - 14:57 CEST
Update
We hebben de processen voor het importeren van e-mails met bijlages nu 24 uur actief gemonitord en zien geen vertragingen meer optreden. Het importproces functioneert weer zoals je dat van ons mag verwachten. We sluiten dit incident daarom dan ook hierbij af.
We zijn nog wel met Microsoft Azure support verder aan het onderzoeken hoe we herhaling in de toekomst kunnen voorkomen.
Posted May 06, 2021 - 14:56 CEST
Monitoring
De work around die we gisterenavond geïmplementeerd hebben, werkt naar behoren. De wachtrij die gisteren was ontstaan, was laat in de avond al ingelopen en vandaag hebben we nog geen vertragingen ondervonden bij het importeren van e-mails met documenten in Blue10. Het importproces functioneert door deze workaround nog wel op gereduceerde snelheid.
We blijven het importproces monitoren, zodat we kunnen ingrijpen indien nodig. Om die reden zetten we de status van dit incident op monitoring. We hebben contact gehad met Microsoft Azure Support, maar zij kunnen ons nog geen uitsluitsel geven over de precieze oorzaak van de problemen op Microsoft Azure die wij ervaren. Zodra wij terugkoppeling hebben ontvangen van Microsoft en zij het issue hebben opgelost, kunnen wij het importproces weer op volledige snelheid laten draaien en sluiten we het incident definitief af.
Posted May 05, 2021 - 15:41 CEST
Update
Vanmiddag om 13.50 zagen we dat het importproces van binnenkomende e-mails abrupt gestopt was. Op dat moment zagen we ook andere problemen optreden binnen Microsoft Azure, ons hostings-platform voor het beschikbaar stellen van Blue10. Het lukte o.a. niet om onderliggende Microsoft processen te benaderen, waarmee we een nieuw importproces voor binnenkomende e-mails uit wilden rollen en beschikbaar wilden maken om de e-mails via een bypass te verwerken.
Rond 17.00 uur konden we weer nieuwe resources aanmaken binnen MS Azure, waardoor we weer nieuwe code konden uitrollen en een bypass konden maken. Deze bypass gaf niet het gewenste effect en gaf dezelfde problemen als het reguliere importproces.
Rond 19.00 uur hebben we een work around gevonden, waarmee we met gereduceerde snelheid weer e-mails kunnen importeren in Blue10. Op dit moment (dinsdagavond) wordt de wachtrij, die vanmiddag ontstaan is, weggewerkt en worden alle ontvangen e-mails weer verwerkt in Blue10.
We hebben vanmiddag direct de hulp van Microsoft Azure support ingeschakeld en zijn gezamenlijk op zoek naar de oorzaak van de problemen die wij ervaren. We zijn in afwachting van de bevindingen van Azure support. Op moment dat zij de oorzaak binnen Azure gevonden en gemitigeerd hebben, kunnen wij het importproces van binnenkomende e-mails weer op volledige snelheid laten draaien.
Als we een update hebben over dit incident, melden we deze via onze statuspage.
Posted May 04, 2021 - 21:38 CEST
Investigating
We zien in onze monitoring problemen naar voren komen waardoor binnenkomende e-mails niet geconverteerd worden naar documenten in Blue10.
We zijn aan het onderzoeken hoe dit komt en houden je op de hoogte via onze Statuspage.