Is OmniChat down?

Identificamos uma degradação no retorno da META no envio de mensagens. Em breve traremos mais informações sobre.

We are continuing to work on a fix for this issue.

A Meta publicou um status page oficial confirmando a instabilidade na WhatsApp Business API. Estamos acompanhando a resolução por parte deles. Você pode verificar os detalhes direto no painel da Meta: https://metastatus.com/whatsapp-business-api

A Meta informou em sua página oficial que os serviços da WhatsApp Business API foram normalizados às 14h10 (horário de Brasília). No momento, nossa equipe segue monitorando o fluxo de envios e retornos para garantir a estabilidade total da plataforma. Você pode verificar os detalhes direto no painel da Meta: https://metastatus.com/whatsapp-business-api

Não identificamos mais problemas do lado da Meta e o problema foi dado como resolvido.

Estamos enfrentando erros no processamento dos dados, o que está impactando a atualização dos dashboards. Como resultado, as informações exibidas nos painéis podem estar temporariamente desatualizadas. Nossa equipe já está atuando na identificação e correção da causa do problema para normalizar o processamento e restabelecer a atualização dos dados o mais breve possível.

Identificamos e corrigimos a instabilidade que estava impactando o processamento de mensagens no Dashboard de Coerência.

O serviço de classificação de coerência foi restabelecido após a aplicação das correções e melhorias na plataforma. Além disso, está sendo realizado o reprocessamento dos dados que deixaram de ser classificados durante o período de indisponibilidade, garantindo a atualização e a consistência das informações. Nossa equipe segue acompanhando e monitorando o reprocessamento até a sua conclusão, assegurando a normalização completa do serviço.

Nossa equipe segue acompanhando e monitorando o reprocessamento até a sua conclusão, assegurando a normalização completa do serviço.

Os dados do Dashboard da plataforma já estão atualizados e refletindo o cenário atual. O postmortem será publicado nos próximos dias com mais detalhes sobre o incidente e as ações realizadas para sua resolução.

### O que aconteceu? Na manhã do dia 05 de junho, identificamos que os Dashboards de Experiência do Whizz estavam apresentando informações desatualizadas. O incidente impactou temporariamente o processamento e a atualização dos dados, resultando em defasagem nas informações exibidas nos painéis. ### Causa Raiz: A equipe de Engenharia da OmniChat identificou que a origem do problema estava em um serviço interno responsável pela integração entre nossos sistemas e a API de IA do Google. Durante o período do incidente, esse serviço apresentou uma instabilidade crítica, ocasionando degradação no processamento dos dados e comprometendo a atualização dos Dashboards de Experiência do Whizz. Como consequência, as informações exibidas nos painéis permaneceram desatualizadas até a normalização completa do serviço. ‌ **Resolução e prevenção:** A Engenharia da OmniChat tomou conhecimento do incidente na manhã do dia 05 de junho. A partir desse momento, a equipe responsável iniciou imediatamente a investigação e adotou ações para mitigar os impactos observados. Durante o processo de análise, foram realizadas avaliações detalhadas dos serviços envolvidos, permitindo a identificação da causa raiz e a implementação das correções necessárias. Às 17h20 do dia 10 de junho, foi concluída uma manutenção emergencial que restabeleceu a estabilidade do serviço e normalizou a atualização dos dashboards. Como medida preventiva para aumentar a resiliência da plataforma e reduzir a probabilidade de recorrência desse tipo de incidente, estamos implementando as seguintes melhorias: * Reestruturação dos fluxos de integração entre nossos sistemas internos e a API de IA do Google. * Implementação de mecanismos adicionais de resiliência e recuperação automática em caso de falhas de comunicação. * Ampliação do monitoramento e dos alertas relacionados ao processamento e atualização dos dados. * Revisão dos procedimentos operacionais para identificação e resposta mais rápida a incidentes semelhantes.

Entre 11h49 e 12h00, nossa plataforma apresentou uma instabilidade pontual devido a falhas na comunicação com um provedor externo (Meta). O comportamento da API da Meta foi normalizado às 12:00. O que aconteceu: Uma instabilidade na API da Meta. Causa Raiz: As mensagens enviadas sofreram um atraso de 30 segundos a 1 minuto para serem processadas. Impacto: Essa demora causou uma percepção de lentidão no fluxo de mensagens diretamente dentro da nossa plataforma.

Estamos investigando casos de lentidão nas operações de envio de mensagens na plataforma. Em breve, compartilharemos mais informações.

Identificamos a causa da lentidão: as mensagens enviadas para a Meta estavam levando entre 5 e 10 minutos para retornar, o que gerava a percepção de demora no envio das mensagens na plataforma.

A fix has been implemented and we are monitoring the results.

A plataforma encontra-se totalmente operacional. O postmortem será publicado nos próximos dias com maiores detalhes sobre o incidente.

Identificamos uma instabilidade na comunicação com os serviços da OpenAI entre 12:00 e 12:45 de hoje (27/05). Durante este intervalo, nossos protocolos de contingência foram acionados automaticamente para garantir a continuidade da operação.