OmniChat experienced a major incident on January 8, 2025 affecting Marketing Studio, lasting 1h 31m. The incident has been resolved; the full update timeline is below.
Affected components
Update timeline
- investigating Jan 08, 2025, 01:50 PM UTC
Hoje, dia 08/01/2025 às 10:20 foi detectado um problema no cadastramento e disparo de campanhas do Marketing Studio. Estamos investigando o ocorrido e traremos mais informações em breve.
- monitoring Jan 08, 2025, 02:08 PM UTC
Realizamos uma manutenção de emergência nos serviços do Marketing Studio para resolver o problema e o serviço retornou ao seu funcionamento normal. Estamos monitorando os serviços e investigando mais a fundo a causa raiz que causou a instabilidade.
- resolved Jan 08, 2025, 02:52 PM UTC
Foi identificado que a falha ocorreu devido a uma instabilidade na obtenção de uma dependência externa ao serviço. Estamos trabalhando na melhoria do processo de detecção e velocidade de restabelecimento deste tipo de falha. O problema com a plataforma foi resolvido. Lamentamos o transtorno e agradecemos a paciência. Tenha certeza de que a confiabilidade do sistema é uma prioridade para a Omnichat, e estamos fazendo aprimoramentos contínuos para tornar a sua experiência cada vez melhor. O postmortem será publicado nos próximos dias com maiores detalhes sobre o incidente.
- postmortem Jan 16, 2025, 11:56 AM UTC
## Postmortem - Incidente no Marketing Studio ### O que aconteceu? No dia 08 de janeiro de 2025 às 10:20 \(horário de Brasília\), a equipe de suporte da OmniChat identificou um problema que impactava o cadastramento e disparo de campanhas no Marketing Studio. O incidente foi comunicado publicamente às 10:20, e uma manutenção de emergência foi realizada para restaurar o funcionamento normal do serviço. O incidente foi considerado resolvido às 11:08 do mesmo dia. ### Causa Raiz: Após uma investigação detalhada, a equipe de Engenharia da OmniChat identificou que o problema foi causado por uma instabilidade na obtenção de uma dependência externa crítica ao funcionamento do serviço. Essa dependência apresentou problemas intermitentes, o que gerou falhas na execução das operações principais do Marketing Studio, como o cadastramento e disparo de campanhas. ### Resolução e prevenção: * Às 10:20, a equipe iniciou a investigação do incidente. * Uma manutenção de emergência foi realizada às 10:40 para mitigar os impactos da dependência externa, incluindo a configuração de redundâncias para assegurar a estabilidade. * O funcionamento do serviço foi normalizado às 11:08, com monitoramento reforçado para garantir a estabilidade. Para evitar que problemas semelhantes ocorram no futuro, aprimoramos o processo de detecção e prevenção deste tipo de erro, garantindo maior agilidade na identificação e mitigação de problemas similares, evitando impactos na qualidade e disponibilidade de nossas funcionalidades. A OmniChat está comprometida em melhorar continuamente nossa tecnologia e operações para evitar interrupções e degradações do serviço. Agradecemos sua paciência e pedimos desculpas novamente por qualquer impacto em sua organização.