Calls failing in Ontario (upstream provider blocking) / Appels en échec en Ontario (blocage chez un fournisseur en amont)

Update timeline

1. investigating Mar 27, 2025, 12:28 AM UTC

   We have connectivity problems in Ontario. Calls in and out are affected. We are investigating. --- Nous avons des problèmes de connectivité en Ontario. Les appels entrants et sortants sont touchés. Nous enquêtons.

2. investigating Mar 27, 2025, 01:54 AM UTC

   We suspect a disruption of IP connectivity into our Toronto data centre. Our engineers are still investigating. --- Nous soupçonnons une perturbation de la connectivité IP vers notre centre de données de Toronto. Nos ingénieurs poursuivent leur enquête.

3. identified Mar 27, 2025, 03:40 AM UTC

   Our engineers have found the cause: our upstream provider is blocking our IP addresses for some internet providers. The extent of the blocking is not known yet. We have opened a ticket with the provider. --- Nos ingénieurs ont trouvé la cause : notre fournisseur en amont bloque nos adresses IP pour certains fournisseurs Internet. L'étendue du blocage n'est pas encore connue. Nous avons ouvert un billet auprès du fournisseur.

4. monitoring Mar 27, 2025, 04:03 AM UTC

   Our engineers have applied a fix. Service has been restored since 03:48 UTC. We are monitoring. --- Nos ingénieurs ont appliqué une correction. Le service est rétabli depuis 3 h 48 UTC. Nous surveillons la situation.

5. resolved Mar 27, 2025, 02:36 PM UTC

   Thu, 27 Mar 2025 01:38:00 +0000: We have connectivity problems in Ontario. Calls in and out are affected. We are investigating. Nous avons des problèmes de connectivité en Ontario. Les appels entrants et sortants sont touchés. Nous enquêtons. [Investigating] Thu, 27 Mar 2025 01:54:00 +0000: We suspect a disruption of IP connectivity into our Toronto data centre. Our engineers are still investigating. Nous soupçonnons une perturbation de la connectivité IP vers notre centre de données de Toronto. Nos ingénieurs poursuivent leur enquête. [Identified] Thu, 27 Mar 2025 03:40:00 +0000: Our engineers have found the cause: our upstream provider is blocking our IP addresses for some internet providers. The extent of the blocking is not known yet. We have opened a ticket with the provider. Nos ingénieurs ont trouvé la cause : notre fournisseur en amont bloque nos adresses IP pour certains fournisseurs Internet. L'étendue du blocage n'est pas encore connue. Nous avons ouvert un billet auprès du fournisseur. [Watching] Thu, 27 Mar 2025 04:03:00 +0000: Our engineers have applied a fix. Service has been restored since 03:48 UTC. We are monitoring. Nos ingénieurs ont appliqué une correction. Le service est rétabli depuis 3 h 48 UTC. Nous surveillons la situation. [Fixed] Thu, 27 Mar 2025 14:36:00 +0000: Resolved. Start: 00:28 UTC on March 27, 2025 End: 03:48 UTC on March 27, 2025 Cause: our upstream provider blocked our IP addresses for some internet providers; symptoms were failed calls and one-way audio We apologize for the disruption. Résolu. Début : 0 h 28 UTC le 27 mars 2025 Fin : 3 h 48 UTC le 27 mars 2025 Cause : notre fournisseur en amont a bloqué nos adresses IP pour certains fournisseurs Internet; les symptômes étaient des appels en échec et de l'audio unidirectionnel Nous sommes désolés des inconvénients causés.

6. resolved Mar 27, 2025, 02:36 PM UTC

   Resolved. - Start: 00:28 UTC on March 27, 2025 - End: 03:48 UTC on March 27, 2025 - Cause: our upstream provider blocked our IP addresses for some internet providers; symptoms were failed calls and one-way audio We apologize for the disruption. --- Résolu. - Début : 0 h 28 UTC le 27 mars 2025 - Fin : 3 h 48 UTC le 27 mars 2025 - Cause : notre fournisseur en amont a bloqué nos adresses IP pour certains fournisseurs Internet; les symptômes étaient des appels en échec et de l'audio unidirectionnel Nous sommes désolés des inconvénients causés.