OmniChat incident

Instabilidade no serviço de catálogo de produtos

Resolved after 3 hours 21 minutes, affecting Integração VTEX and Pedidos and 1 more, on September 9, 2026.

postmortem Sep 23, 2026, 07:50 PM UTC

### **O que aconteceu?** No dia 9 de setembro, entre 10h00 e 10h56, identificamos uma instabilidade no serviço de catálogo de produtos. Ela causou falhas na consulta, na atualização e na sincronização de produtos, coleções e pedidos nas integrações de e-commerce \(VTEX, LINX, Shopify, Magento e Wake\), inviabilizando a operação dos clientes utilizando essas integrações. ### **Causa Raiz:** A Engenharia da OmniChat identificou que a origem do problema estava em uma manutenção planejada da nossa infraestrutura. Como parte de um projeto para aumentar a resiliência da plataforma, estamos migrando um dos nossos serviços internos, do qual o catálogo de produtos depende, para uma arquitetura com redundância em múltiplas regiões. Durante essa migração, uma alteração de configuração que deveria afetar somente o nosso ambiente de testes também foi aplicada ao ambiente de produção. Com isso, o endereço usado para acessar esse serviço interno foi removido. Sem conseguir localizá-lo, o serviço de catálogo de produtos deixou de funcionar corretamente. ### **Resolução e prevenção:** A Engenharia da OmniChat tomou conhecimento dos primeiros relatos às 10h02 do dia 9 de setembro. A partir desse momento, o time responsável iniciou imediatamente a investigação para identificar a origem do problema e reduzir os impactos. Às 10h20, a causa foi identificada. Às 10h56 do mesmo dia, uma correção foi aplicada: os serviços afetados passaram a usar o novo endereço dedicado, já disponível em múltiplas regiões, e o funcionamento da plataforma foi normalizado. O serviço seguiu em monitoramento até as 13h23, sem novas ocorrências. Para evitar a recorrência e aumentar a resiliência dos nossos serviços, estamos adotando as seguintes melhorias: * Verificações automáticas após cada deploy de infraestrutura, para confirmar que os serviços continuam acessíveis por quem depende deles; * Conclusão da migração dos serviços dependentes para o novo endereço com redundância em múltiplas regiões, eliminando a dependência do endereço antigo.

Started
Sep 09, 2026, 01:02 PM UTC
Resolved
Sep 09, 2026, 04:23 PM UTC
Duration
3h 21m
Detected by Pingoru
Sep 09, 2026, 01:02 PM UTC

Affected components

Integração VTEXPedidosProdutosColeçõesIntegração LINXIntegração ShopifyIntegração MagentoIntegração Wake

Update timeline

  1. investigating Sep 09, 2026, 01:02 PM UTC

    Estamos investigando relatos de instabilidade no serviço de catálogo de produtos. O problema afeta parte dos usuários da plataforma OmniChat e pode causar lentidão ou falhas na consulta, atualização e sincronização de produtos. Nossa equipe segue trabalhando na identificação da causa e fornecerá novas atualizações assim que houver mais informações disponíveis.

  2. identified Sep 09, 2026, 01:20 PM UTC

    Identificamos a causa da instabilidade que está impactando o serviço de catálogo de produtos. Nossa equipe já está atuando na resolução do problema e fornecerá novas atualizações em breve.

  3. identified Sep 09, 2026, 01:56 PM UTC

    A instabilidade no serviço de catálogo teve a causa resolvida. Nossa equipe segue monitorando o serviço para garantir estabilidade.

  4. monitoring Sep 09, 2026, 01:56 PM UTC

    A fix has been implemented and we are monitoring the results.

  5. resolved Sep 09, 2026, 04:23 PM UTC

    Após o período de monitoramento, não identificamos novas ocorrências relacionadas ao serviço de catálogo de produtos. O serviço permanece operando normalmente. Lamentamos o transtorno e agradecemos a compreensão. A confiabilidade da plataforma é nossa maior prioridade, e seguimos trabalhando continuamente para oferecer uma experiência cada vez mais estável e segura.

  6. postmortem Sep 23, 2026, 07:50 PM UTC

    ### **O que aconteceu?** No dia 9 de setembro, entre 10h00 e 10h56, identificamos uma instabilidade no serviço de catálogo de produtos. Ela causou falhas na consulta, na atualização e na sincronização de produtos, coleções e pedidos nas integrações de e-commerce \(VTEX, LINX, Shopify, Magento e Wake\), inviabilizando a operação dos clientes utilizando essas integrações. ### **Causa Raiz:** A Engenharia da OmniChat identificou que a origem do problema estava em uma manutenção planejada da nossa infraestrutura. Como parte de um projeto para aumentar a resiliência da plataforma, estamos migrando um dos nossos serviços internos, do qual o catálogo de produtos depende, para uma arquitetura com redundância em múltiplas regiões. Durante essa migração, uma alteração de configuração que deveria afetar somente o nosso ambiente de testes também foi aplicada ao ambiente de produção. Com isso, o endereço usado para acessar esse serviço interno foi removido. Sem conseguir localizá-lo, o serviço de catálogo de produtos deixou de funcionar corretamente. ### **Resolução e prevenção:** A Engenharia da OmniChat tomou conhecimento dos primeiros relatos às 10h02 do dia 9 de setembro. A partir desse momento, o time responsável iniciou imediatamente a investigação para identificar a origem do problema e reduzir os impactos. Às 10h20, a causa foi identificada. Às 10h56 do mesmo dia, uma correção foi aplicada: os serviços afetados passaram a usar o novo endereço dedicado, já disponível em múltiplas regiões, e o funcionamento da plataforma foi normalizado. O serviço seguiu em monitoramento até as 13h23, sem novas ocorrências. Para evitar a recorrência e aumentar a resiliência dos nossos serviços, estamos adotando as seguintes melhorias: * Verificações automáticas após cada deploy de infraestrutura, para confirmar que os serviços continuam acessíveis por quem depende deles; * Conclusão da migração dos serviços dependentes para o novo endereço com redundância em múltiplas regiões, eliminando a dependência do endereço antigo.

Your product runs on more than OmniChat

Add the vendors you depend on and get one message when any of them reports trouble. Free for 3 vendors, no card.

Add your stack →