Robbu Outage History

Started Sep 15, 2025, 03:27 PM UTC· resolved Sep 15, 2025, 04:59 PM UTC

1. investigating Sep 15, 2025, 03:27 PM UTC

   Identificamos uma lentidão nos disparos de Webhooks para os endpoints cadastrados na plataforma. Aplicamos um procedimento de contingência para garantir que os disparos não fiquem parados e seguimos monitorando a estabilidade do serviço. Em paralelo, nossa equipe está atuando na identificação da causa raiz para evitar que o problema volte a ocorrer.

2. resolved Sep 15, 2025, 04:59 PM UTC

   O serviço atual de Webhooks ainda está baseado em uma arquitetura pouco escalável, o que limitou sua capacidade de lidar com picos de volume de eventos. Essa limitação ocasionou a lentidão percebida pelos clientes. Foi aplicado um procedimento de contingência para garantir que os disparos não ficassem parados, restabelecendo o funcionamento do serviço em caráter emergencial. Estamos em processo de migração da arquitetura de Webhooks para um modelo moderno baseado em serviços de containers isolados por cliente. Essa nova abordagem permitirá maior escalabilidade, resiliência e isolamento de falhas, evitando que o problema volte a acontecer em situações de alto volume.

Read the full incident report →

Started Sep 06, 2025, 11:00 AM UTC· resolved Sep 06, 2025, 11:00 AM UTC

1. resolved Sep 06, 2025, 12:37 PM UTC

   Identificamos que as rotas que listam os números de whatsapp e exibição de templates não estavam sendo exibidas em tela. Foi feito o rollback de uma versão estável até que a versão atual seja corrigida.

Read the full incident report →

Started Sep 05, 2025, 11:30 AM UTC· resolved Sep 05, 2025, 11:30 AM UTC

1. resolved Sep 05, 2025, 02:49 PM UTC

   Identificamos que as instâncias do serviço Invenio Center estão com lentidão ou apresentando indisponibilidade em algumas rotas.

Read the full incident report →

Started Sep 04, 2025, 07:11 PM UTC· resolved Sep 05, 2025, 12:04 PM UTC

1. investigating Sep 04, 2025, 07:11 PM UTC

   Identificamos que as instâncias do serviço Invenio Live estão retornando erro 503 – Service Unavailable, resultando em falhas nas chamadas de API.

2. monitoring Sep 04, 2025, 07:38 PM UTC

   A conexão com as APIs foi reestabelecida. Estamos investigando as causas do incidente.

3. resolved Sep 05, 2025, 12:04 PM UTC

   A causa foi detectada e foi aberto um processo interno para ajustar

Read the full incident report →

Started Sep 01, 2025, 04:32 PM UTC· resolved Sep 01, 2025, 11:00 PM UTC

1. investigating Sep 01, 2025, 04:32 PM UTC

   Identificamos que algumas APIs intermediárias estão retornando erro, resultando em falhas intermitentes nas chamadas. Parte dos clientes pode estar enfrentando lentidão ou indisponibilidade temporária em requisições para essas APIs impactando diretamente nos Chatbots.

2. monitoring Sep 01, 2025, 09:18 PM UTC

   Neste momento, os ajustes necessários já foram aplicados e seguimos monitorando o comportamento das APIs para garantir a estabilidade do serviço.

3. monitoring Sep 01, 2025, 10:03 PM UTC

   Neste momento, os ajustes necessários já foram aplicados e seguimos monitorando o comportamento das APIs para garantir a estabilidade do serviço.

4. resolved Sep 02, 2025, 04:41 PM UTC

   O incidente foi concluído

Read the full incident report →

Started Aug 18, 2025, 12:41 PM UTC· resolved Aug 18, 2025, 07:58 PM UTC

1. investigating Aug 18, 2025, 12:41 PM UTC

   Identificamos velocidade abaixo do usual no processamento de alguns bots. O evento está sob investigação para voltarmos o mais rapidamente possível à normalidade.

2. identified Aug 18, 2025, 12:57 PM UTC

   O problema de lentidão no processamento dos bots foi identificado. Nossa equipe já está atuando para mitigar os efeitos e restabelecer o funcionamento normal o mais rápido possível. Durante este período, algumas mensagens ainda podem apresentar atraso. Manteremos todos informados até a completa normalização.

3. resolved Aug 18, 2025, 07:58 PM UTC

   O incidente de lentidão no processamento dos bots foi totalmente resolvido. Nossos sistemas já estão operando normalmente e todas as mensagens estão sendo processadas sem atrasos. Agradecemos pela compreensão e acompanhamento durante este período. Continuaremos monitorando para garantir a estabilidade da plataforma.

Read the full incident report →

Started Aug 12, 2025, 11:30 AM UTC· resolved Aug 12, 2025, 11:30 AM UTC

1. resolved Aug 12, 2025, 01:36 PM UTC

   Identificamos uma sobrecarga na fila de entrada de mensagens do WhatsApp em nosso ambiente. Os workloads responsáveis pelo processamento não escalaram corretamente, resultando em um aumento no volume da fila e lentidão no recebimento e processamento das mensagens. Essa situação também afetou o desempenho dos bots, causando atrasos nas interações.

2. postmortem Aug 12, 2025, 01:37 PM UTC

   No dia de hoje, tivemos uma **sobrecarga na fila de entrada das mensagens de WhatsApp**. Isso fez com que o processamento ficasse mais lento, gerando atrasos na entrega das mensagens para os bots. O sistema que processa as mensagens não aumentou a capacidade de trabalho de forma correta quando o volume cresceu, causando o acúmulo na fila. Refizemos todas as regras de escalonamento automático, garantindo que, sempre que houver aumento de demanda, o processamento seja ajustado automaticamente para evitar lentidões. O serviço já está **estável e operando normalmente**. Seguimos monitorando para garantir que o problema não volte a ocorrer.

Read the full incident report →

Started May 29, 2025, 01:49 PM UTC· resolved May 29, 2025, 02:19 PM UTC

1. investigating May 29, 2025, 01:49 PM UTC

   Identificamos uma intermitência na plataforma da Positus, que está afetando a comunicação via nossas APIs. Esse problema pode impactar o envio e recebimento de mensagens de forma parcial ou total. A equipe da Positus já foi acionada e está trabalhando para resolver a instabilidade. Seguimos monitorando e informaremos assim que houver normalização.

2. resolved May 29, 2025, 02:19 PM UTC

   Prezados, tudo bem? 1-Estamos enfrentando uma intermitência em nossas APIs, o que pode causar instabilidades ou falhas temporárias na comunicação com nossos serviços. Nossa equipe técnica já está atuando com prioridade máxima para identificar a causa e restabelecer a normalidade o mais rápido possível. 2- Informamos que a intermitência identificada anteriormente em nossas APIs foi normalizada. A comunicação com nossos serviços foi restabelecida e os sistemas estão operando normalmente. Continuamos monitorando para garantir a estabilidade total da aplicação. Agradecemos pela paciência e compreensão durante o período de instabilidade..

Read the full incident report →

Started May 23, 2025, 01:30 PM UTC· resolved May 23, 2025, 01:30 PM UTC

1. resolved May 23, 2025, 02:03 PM UTC

   1 – Identificamos anteriormente uma falha na comunicação em algumas APIs do LIVE, o que causava lentidão e falha no carregamento das conversas na plataforma, impactando o bom funcionamento do sistema. 2 – Serviço normalizado! A equipe de engenharia aplicou as correções necessárias e o sistema encontra-se operando normalmente. Agradecemos pela paciência e compreensão durante esse período.

Read the full incident report →

Started Apr 10, 2025, 06:37 PM UTC· resolved Apr 10, 2025, 08:43 PM UTC

1. identified Apr 10, 2025, 06:37 PM UTC

   Prezados, Boa Tarde! 1-Informamos que estamos enfrentando uma falha temporária em nossos sistemas de comunicação, o que está causando lentidão no processo e resultando a erros nas Apis. Agradecemos pela paciência e compreensão durante esse período.

2. identified Apr 10, 2025, 07:24 PM UTC

   Estamos cientes do problema e já estamos trabalhando para resolvê-lo o mais rápido possível.

3. resolved Apr 10, 2025, 08:43 PM UTC

   Prezados informamos que todos os nossos serviços foram reestabelecidos.

Read the full incident report →

Started Feb 03, 2025, 01:00 PM UTC· resolved Feb 03, 2025, 01:20 PM UTC

1. resolved Feb 03, 2025, 05:06 PM UTC

   Prezados, Gostaríamos de informar que a falha temporária que afetava o envio de mensagens de resposta e causava lentidão no atendimento já foi completamente solucionada. Todos os sistemas de comunicação estão novamente operando normalmente, e os serviços seguem funcionando com a qualidade e agilidade que sempre prezamos. Agradecemos pela paciência e compreensão de todos durante esse período de interrupção e reforçamos que nossa equipe continua à disposição para qualquer necessidade.

Read the full incident report →

Started Jan 21, 2025, 06:30 PM UTC· resolved Jan 21, 2025, 06:45 PM UTC

1. resolved Jan 22, 2025, 07:39 PM UTC

   Prezados, Informamos que houve uma falha na comunicação do IDR (Identificador de Requisição) após o processo de rollback realizado. A requisição retornou ao estado anterior sem a devida atualização, resultando em inconsistências nos dados. Ações Imediatas: Verificação da integridade das transações pós-rollback. Monitoramento contínuo das falhas de comunicação para identificação e correção dos possíveis pontos de erro. Reavaliação das etapas do rollback e ajustes necessários no processo de comunicação. Prazo para resolução: 15 minutos. Agradecemos pela paciência e seguimos com monitoramento interno.

Read the full incident report →

Started Jan 10, 2025, 12:47 PM UTC· resolved Jan 11, 2025, 06:52 PM UTC

1. investigating Jan 10, 2025, 12:47 PM UTC

   Prezados, Estamos enfrentando uma falha na comunicação entre o nosso serviço e a META ao tentar conectar uma conta de Facebook/Instagram no Invenio Center -> Canais -> Face/Insta. Durante o processo, estamos recebendo um erro proveniente do nosso aplicativo Robbu Connection. Já estamos cientes do problema e iniciamos as investigações para identificar a causa e encontrar uma solução o mais rápido possível.

2. resolved Jan 15, 2025, 12:24 PM UTC

   This incident has been resolved.

Read the full incident report →

Started Dec 26, 2024, 03:07 PM UTC· resolved Dec 26, 2024, 03:09 PM UTC

1. investigating Dec 26, 2024, 03:07 PM UTC

   Informamos que no momento estamos enfrentando problemas de comunicação com as APIs. Isso pode afetar o funcionamento normal dos serviços que dependem dessas integrações. Nossa equipe está trabalhando para resolver a situação o mais rápido possível.Produto afetado:Invenio LIVE Pedimos desculpas pelo inconveniente e agradecemos pela compreensão

2. resolved Dec 27, 2024, 10:19 PM UTC

   This incident has been resolved.

Read the full incident report →

Started Dec 11, 2024, 06:14 PM UTC· resolved Dec 12, 2024, 06:14 PM UTC

1. resolved Dec 13, 2024, 06:14 PM UTC

   Prezados, Gostaríamos de informar que a Meta, provedora da API do WhatsApp Business, enfrentou uma intermitência que afetou o funcionamento de várias funcionalidades, incluindo o gerenciamento de contas do WhatsApp Business e a solução On-Premises. A falha foi identificada nas áreas de "Cloud API" e "Local Storage", mas a Meta já conseguiu resolver os problemas e os serviços foram restaurados com sucesso. Pedimos desculpas pelos inconvenientes causados durante o período de interrupção e agradecemos pela compreensão de todos. Continuamos acompanhando a situação para garantir que não haja mais impactos

Read the full incident report →

Started Nov 06, 2024, 06:17 PM UTC· resolved Nov 06, 2024, 06:17 PM UTC

1. resolved Dec 13, 2024, 06:17 PM UTC

   Estamos enfrentando uma intermitência temporária que pode impactar o desempenho ou a disponibilidade de algumas APIs. Nossa equipe já está atuando para restabelecer a normalidade o mais rápido possível. Agradecemos pela paciência e compreensão. Continuaremos fornecendo atualizações sobre o progresso da resolução.

Read the full incident report →

Started Oct 30, 2024, 10:45 AM UTC· resolved Oct 30, 2024, 06:12 PM UTC

1. investigating Oct 30, 2024, 10:45 AM UTC

   Estamos enfrentando uma instabilidade temporária que está afetando o desempenho das APIs do Live. A equipe técnica já está ciente e trabalhando para resolver o problema o mais rápido possível Agradecemos a paciência enquanto trabalhamos na resolução da lentidão nas APIs do Live. Identificamos a causa raiz do problema, que estava relacionada a problemas a Camada do Azure (Microsoft) afetando todos os clientes cloud. Informamos que a lentidão nas APIs do Live foi resolvida. Identificamos que a causa raiz estava na camada de infraestrutura da Microsoft Azure, impactando temporariamente nossos serviços. A Microsoft já realizou as correções necessárias em seus sistemas, e nossos serviços foram estabilizados. Status Atual: As APIs do Live estão funcionando normalmente. Monitoramento adicional está em andamento para garantir a continuidade do desempenho. Agradecemos a compreensão e paciência durante esse período. Estamos à disposição para quaisquer dúvidas.

2. resolved Dec 13, 2024, 06:12 PM UTC

   This incident has been resolved.

Read the full incident report →