Iristel incident

Calls failing across Canada (denial-of-service attack) / Appels en échec partout au Canada (attaque par déni de service)

Minor Resolved View vendor source →

Iristel experienced a minor incident on November 15, 2021 affecting Hosted PBX / Cloud Calling and SIP Peerings and 1 more component, lasting 2d. The incident has been resolved; the full update timeline is below.

Started
Nov 15, 2021, 04:11 PM UTC
Resolved
Nov 17, 2021, 04:18 PM UTC
Duration
2d
Detected by Pingoru
Nov 15, 2021, 04:11 PM UTC

Affected components

Hosted PBX / Cloud CallingSIP PeeringsToll FreeOntarioQuebecBritish ColumbiaAlbertaManitobaSaskatchewanNova Scotia

Update timeline

  1. investigating Nov 15, 2021, 04:11 PM UTC

    We have lost connectivity to our core network. The cause is not known yet. We will post more as we learn it. --- Nous avons perdu la connectivité avec notre cœur de réseau. La cause n'est pas encore connue. Nous publierons plus de détails dès que possible.

  2. monitoring Nov 15, 2021, 04:19 PM UTC

    Connectivity is back. We are monitoring. --- La connectivité est rétablie. Nous surveillons la situation.

  3. investigating Nov 15, 2021, 05:11 PM UTC

    Connectivity to our core network has failed again, for the second time today. Our engineers are investigating. --- La connectivité avec notre cœur de réseau est de nouveau interrompue, pour la deuxième fois aujourd'hui. Nos ingénieurs enquêtent.

  4. investigating Nov 15, 2021, 06:47 PM UTC

    Our engineers are narrowing down the cause and working on a fix. No restoration time yet. --- Nos ingénieurs cernent la cause et travaillent à un correctif. Aucune heure de rétablissement prévue pour le moment.

  5. monitoring Nov 15, 2021, 06:51 PM UTC

    Our engineers have put a fix in place, and services are coming back. We are monitoring. --- Nos ingénieurs ont appliqué un correctif et les services se rétablissent. Nous surveillons la situation.

  6. investigating Nov 15, 2021, 08:06 PM UTC

    Services are failing intermittently again. Our engineers are working on it. No restoration time yet. --- Les services échouent de nouveau par intermittence. Nos ingénieurs s'en occupent. Aucune heure de rétablissement prévue pour le moment.

  7. monitoring Nov 16, 2021, 05:27 AM UTC

    Services are being restored. Our engineers are monitoring them. --- Les services sont en cours de rétablissement. Nos ingénieurs les surveillent.

  8. identified Nov 16, 2021, 01:39 PM UTC

    We are working to resolve the issue fully by 19:00 UTC today. --- Nous travaillons à régler complètement le problème d'ici 19 h UTC aujourd'hui.

  9. identified Nov 16, 2021, 05:22 PM UTC

    Some calls still have audio problems, drop, or take longer to connect. These problems are part of this incident and should stop by 19:00 UTC. --- Certains appels présentent encore des problèmes audio, sont coupés ou prennent plus de temps à s'établir. Ces problèmes font partie de cet incident et devraient cesser d'ici 19 h UTC.

  10. identified Nov 16, 2021, 07:28 PM UTC

    We are close to a full fix. Expected restoration: 21:45 UTC today. --- Nous approchons d'un rétablissement complet. Rétablissement prévu : 21 h 45 UTC aujourd'hui.

  11. identified Nov 16, 2021, 08:17 PM UTC

    Our measurements show clear improvement. Expected restoration is still 21:45 UTC. --- Nos mesures montrent une nette amélioration. Le rétablissement est toujours prévu à 21 h 45 UTC.

  12. monitoring Nov 16, 2021, 11:20 PM UTC

    We have completed our network changes, and traffic is back to normal. No further changes are planned. We are monitoring the whole network. --- Nous avons terminé nos modifications du réseau et le trafic est revenu à la normale. Aucune autre modification n'est prévue. Nous surveillons l'ensemble du réseau.

  13. resolved Nov 17, 2021, 04:18 PM UTC

    Resolved. Our engineers worked with our denial-of-service mitigation partners, and the network has been stable for 24 hours. - Start: 16:11 UTC on November 15, 2021 - End: 23:20 UTC on November 16, 2021 - Cause: a denial-of-service attack on our network - Service came back for short periods on November 15, from 16:19 to 17:11 UTC and from 18:51 to about 20:06 UTC. On November 16, some calls had audio problems, drops and connection delays until 23:20 UTC. We apologize for the disruption. --- Résolu. Nos ingénieurs ont travaillé avec nos partenaires de protection contre les attaques par déni de service, et le réseau est stable depuis 24 heures. - Début : 16 h 11 UTC le 15 novembre 2021 - Fin : 23 h 20 UTC le 16 novembre 2021 - Cause : une attaque par déni de service visant notre réseau - Le service a été rétabli pendant de courtes périodes le 15 novembre, de 16 h 19 à 17 h 11 UTC et de 18 h 51 à environ 20 h 06 UTC. Le 16 novembre, certains appels ont présenté des problèmes audio, des coupures et des délais d'établissement jusqu'à 23 h 20 UTC. Nous sommes désolés des inconvénients causés.