LivePix incident

Falha no serviço de inferência

Major Resolved View vendor source →

LivePix experienced a major incident on May 8, 2026 affecting AI Inference Service, lasting 2h 54m. The incident has been resolved; the full update timeline is below.

Started
May 08, 2026, 12:32 AM UTC
Resolved
May 08, 2026, 03:26 AM UTC
Duration
2h 54m
Detected by Pingoru
May 08, 2026, 12:32 AM UTC

Affected components

AI Inference Service

Update timeline

  1. identified May 08, 2026, 12:32 AM UTC

    Estamos enfrentando instabilidade em nosso provedor de inferência de GPU, responsável pela geração de vozes por IA. Como consequência, algumas mensagens podem apresentar atraso para serem reproduzidas na transmissão. Já estamos acompanhando a situação e atualizaremos este status assim que houver novidades.

  2. identified May 08, 2026, 12:57 AM UTC

    Como medida paliativa, desativamos temporariamente as vozes afetadas para preservar a estabilidade da transmissão. Elas serão reativadas assim que o provedor normalizar o serviço, e as mensagens enviadas com essas vozes durante o incidente serão exibidas após a normalização.

  3. identified May 08, 2026, 01:05 AM UTC

    O incidente gerou um acúmulo de cerca de 7 mil mensagens na fila de processamento, causando atraso na exibição de novas mensagens na transmissão. Já estamos escalando a infraestrutura para acelerar o processamento.

  4. identified May 08, 2026, 01:22 AM UTC

    A fila de mensagens foi drenada e novas mensagens já estão sendo exibidas normalmente. Atenção: se você clicou em "play" manualmente em alguma mensagem pelo dashboard durante o incidente, ela pode ter sido reproduzida na transmissão mais de uma vez — uma para cada clique.

  5. monitoring May 08, 2026, 02:46 AM UTC

    O serviço do provedor de inferência foi restaurado, as vozes afetadas foram reativadas e todas as mensagens pendentes já foram processadas.

  6. resolved May 08, 2026, 03:26 AM UTC

    This incident has been resolved.