Hiper had 27 outages in the last 2 years totaling 112h 16m of downtime — averaging 1.1 incidents per month.
There were 27 Hiper outages since September 4, 2024 totaling 112h 16m of downtime. Each is summarised below — incident details, duration, and resolution information.
Neste momento estamos passando por uma instabilidade no Hiper Gestão . A investigação da causa raiz já está em andamento e em breve traremos novas informações.
Nossa equipe identificou e resolveu o incidente. No momento, todos os serviços estão operando normalmente e seguimos monitorando o ambiente para garantir a estabilidade.
Descrição do caso: nossos times identificaram um aumento abrupto no consumo de CPU do cluster principal de hospedagem do Hiper Gestão. Neste momento, estamos atuando para mitigar os impactos do incidente. Impacto: instabilidade no acesso ao Hiper Gestão.
Informamos que o incidente foi resolvido. Permanecemos monitorando o sistema para garantir a continuidade e estabilidade das operações.
Identificamos uma alta carga de processamento em um dos bancos de dados das nossas aplicações que está impactando a performance do sistema. Neste momento, nossos times estão atuando para mitigar os impactos deste incidente e em breve traremos novas informações.
Identificamos o que causou a alta carga de processamento em um dos nossos bancos de dados e já aplicamos a correção. Os serviços do Hiper Gestão e de sincronização foram impactados, sendo a consulta de produtos a principal atividade afetada. No momento, o sistema está operando normalmente e seguimos monitorando de perto para garantir a estabilidade.
Estamos enfrentando uma instabilidade no Hiper Gestão. Nossa equipe já está atuando na investigação e trabalhando para normalizar o serviço o mais rápido possível. Assim que tivermos novas informações, atualizaremos por aqui.
Estamos cientes da instabilidade no Hiper Gestão e seguimos investigando a causa do problema. Nossa equipe continua trabalhando para identificar a origem e restabelecer o serviço com segurança. Novas atualizações serão publicadas assim que disponíveis.
A instabilidade no Hiper Gestão foi resolvida e os serviços já estão operando normalmente. Seguimos monitorando o ambiente para garantir a estabilidade.
Estamos enfrentando instabilidade na sincronização de dados entre o Hiper Caixa e o Hiper Gestão. Nossa equipe já está investigando ativamente o incidente.
Identificamos a causa raiz da instabilidade na sincronização entre Hiper Caixa e Hiper Gestão. Nossa equipe está trabalhando ativamente na implementação da correção.
A causa raiz foi identificada e corrigida com sucesso. A sincronização entre Hiper Caixa e Hiper Gestão está funcionando normalmente em todos os ambientes.
Estamos investigando uma degradação de performance que afeta alguns componentes de nossa infraestrutura. Durante o incidente, observamos momentos de indisponibilidade temporária, e atualmente alguns serviços podem apresentar lentidão intermitente. Nossa equipe técnica está analisando a causa do problema e trabalhando para restaurar a performance normal o mais rápido possível. Próxima atualização: Assim que tivermos novas informações ou uma estimativa de normalização.
Atualização: Os tempos de resposta das aplicações voltaram aos níveis normais e todos os serviços estão operando normalmente. Nossa equipe continuará monitorando o desempenho para garantir a estabilidade do ambiente.
Encerramento do incidente: O incidente foi resolvido e todos os componentes da infraestrutura estão operando normalmente. O desempenho das aplicações permanece estável e seguimos monitorando para garantir a continuidade dos serviços.
Identificamos um aumento atípico no consumo de CPU do servidor de banco de dados. Nossa equipe está analisando o comportamento do ambiente e ajustando os recursos necessários para garantir que o desempenho permaneça estável.
Nossa equipe segue analisando o aumento atípico de consumo de CPU no servidor de banco de dados. Ainda não identificamos a causa raiz, porém o ambiente permanece estável e sem impacto relevante para os usuários finais. Continuaremos monitorando de perto e publicaremos novas atualizações assim que tivermos mais informações ou mudanças de cenário.
Identificamos a causa raiz do aumento atípico de consumo de CPU no servidor de banco de dados e aplicamos as correções necessárias no ambiente. Após a implementação, o comportamento do servidor retornou à normalidade e as métricas de desempenho seguem estáveis sob monitoramento. Não há mais impacto para as aplicações e o incidente é considerado encerrado. A análise apontou que o problema estava relacionado a uma condição específica de execução de consultas/processos no banco de dados, que gerava uso excessivo de CPU. Foram realizados ajustes de configuração/otimização e revisadas as rotinas envolvidas para evitar recorrência. Agradecemos a compreensão de todos durante o período de investigação e correção do incidente.
Identificamos uma instabilidade no módulo de edição múltipla de produtos, que pode impactar a alteração de dados dos produtos. Nossa equipe técnica já está investigando a causa raiz e trabalhando para restabelecer o serviço o mais rápido possível. Manteremos você informado assim que houver novos avanços na resolução do problema.
Corrigimos o problema na realização de edições múltiplas de produtos, e os dados já podem ser alterados normalmente. No entanto, seguimos investigando uma falha relacionada à exclusão de dados de produtos, que ainda permanece indisponível. Nossa equipe técnica está analisando a causa raiz e trabalhando para restabelecer o serviço o mais rápido possível.
Identificamos uma falha relacionada à exclusão de dados de produtos, que no momento permanece indisponível. Nossa equipe técnica já analisou a causa raiz e está trabalhando na correção, que tem previsão para ser aplicada amanhã pela manhã. Seguiremos monitorando o cenário e atualizaremos caso haja qualquer novidade.
Concluímos a correção do problema. O serviço já foi restabelecido.
Estamos identificando uma degradação de performance no Hiper Gestão, que pode impactar o tempo de resposta de algumas funcionalidades do sistema. Nossa equipe técnica já está investigando a causa raiz e trabalhando para restabelecer a performance normal o mais rápido possível. Novas atualizações serão publicadas assim que houver progresso. Agradecemos pela compreensão.
Identificamos uma possível causa relacionada à degradação de performance no Hiper Gestão e nossa equipe já está trabalhando na implementação da solução. Seguimos monitorando o ambiente e novas atualizações serão publicadas conforme avançarmos. Agradecemos pela compreensão.
A causa do problema de performance no Hiper Gestão foi identificada e as ações corretivas já foram aplicadas. O serviço encontra-se totalmente normalizado e seguimos monitorando para garantir sua estabilidade. Agradecemos pela paciência e compreensão.
Notamos que alguns componentes de infra estão performando de forma degradada no momento. Podendo, assim, ocorrer uma lentidão no uso do Hiper Gestão. Já estamos atuando para resolver a situação.
A causa do incidente foi identificada e a correção já foi aplicada. Estamos acompanhando a estabilidade do Hiper Gestão para garantir o pleno funcionamento.
Identificamos um leve impacto no Serviço de Sincronização, pois alguns dados estavam acumulados no banco de dados. Porém isso já está se normalizando.
Performance do Hiper Gestão e Serviço de Sincronização estabilizados e operacionais.
Descrição do caso: identificamos um erro ao acessar a tela de pedido de venda do Hiper Gestão quando o usuário não é administrador da conta. Neste momento, nosso times estão atuando para corrigir o erro. Impacto: erro ao acessar a tela de pedido de venda do Hiper Gestão quando o usuário não é administrador da conta.
Atualização do caso: a correção para o problema de acesso a tela de pedido de venda do Hiper Gestão está em testes neste momento. Após concluída a validação, será liberada no ambiente de produção do produto. Impacto: erro ao acessar a tela de pedido de venda do Hiper Gestão quando o usuário não é administrador da conta. Previsão de solução: 45 minutos.
Atualização do caso: a correção já foi liberada no ambiente de produção e o acesso à tela de pedido de vendas do Hiper Gestão foi restabelecido. Seguimos monitorando para garantir que nenhum erro adicional seja evidenciado. Impacto: sem impactos.
Atualização do caso: nenhum erro adicional foi identificado, dessa forma, encerramos o comunicado deste problema.
Descrição do caso: Processamento de Banco de dados alto afetando ao APP Gestão Horário de início: 09:55 Impacto: Lentidão no APP Gestão Previsão de solução: sem previsão Causa: em análise Ações: Verificando o que pode estar ocorrendo
Algumas consultas estavam deixando o processamento do banco mais lentos. Fizemos as liberações manuais das consultas e o desempenho voltou à normalidade.
Identificamos que o Hiper Gestão e a sincronização do Hiper Caixa estão passando por instabilidades. Estamos investigando o problema, neste momento.
Atualização do caso: identificamos a causa raiz do incidente como sendo um problema de performance em consultas do fluxo de sincronização no banco de dados do Hiper Gestão. Neste momento, nossos times estão atuando para mitigar o impacto do incidente e possibilitar a correção do problema. Em paralelo, identificamos um problema de capacidade no provedor de nuvem que está impactando o tempo para alocação de novos recursos. Impacto: - Indisponibilidade da sincronização do Hiper Caixa e Hiper Vendas com o Hiper Gestão; - Lentidão no acesso ao Hiper Gestão e sincronização com o Hiper Loja.
Atualização do caso: nossos times conseguiram estabilizar a carga do banco de dados do Hiper Gestão, normalizando o acesso ao Hiper Gestão e sincronização com o Hiper Loja. Neste momento, estamos atuando para restabelecer a sincronização do Hiper Gestão com o Hiper Caixa e Hiper Vendas. Impacto: - Indisponibilidade da sincronização do Hiper Caixa e Hiper Vendas com o Hiper Gestão. Enquanto a sincronização do Hiper Caixa e Hiper Vendas não é restabelecida, recomendamos que o cliente utilize estas aplicações em modo offline. Assim que a sincronização for restabelecida, as operações sincronizarão normalmente.
Solução aplicada e sistema operando em sua normalidade.
Estamos investigando o problema ocorrido.
Encontramos o problema. A aplicação está voltando ao funcionamento.
Problema identificado e solução aplicada.
Descrição do caso: identificamos um aumento no tempo de resposta do Hiper Gestão às 09h55. A causa raiz já foi identificada e nossos times estão mitigando o impacto nesse momento. Impacto: alguns usuários podem identificar lentidão no acesso ao Hiper Gestão.
Atualização do caso: às 10h33, após as ações de mitigação do problema, os indicadores normalizaram. Neste momento, o acesso deve estar completamente normalizado. Nossos times seguem atuando para conter qualquer impacto residual. Durante o evento, foram coletadas evidências da causa raiz que estão em análise neste momento para que possamos endereçar a correção definitiva. Impacto: sem impacto no momento.
Atualização do caso: após análise ostensiva das evidências coletadas durante o incidente, constatamos que o principal agravante de impacto tem relação com o gerenciamento do pool de conexões do cache da aplicação. A correção para este cenário já foi mapeada e está em desenvolvimento, com previsão de entrega em janeiro/2026. Até lá, redobramos o acompanhamento do monitoramento e mapeamos um playbook para mitigar o problema caso ele ocorra novamente. Durante o incidente, entre 09h55 e 10h33, alguns usuários que tiveram suas requisições processadas em servidores com problema no pool de conexões experimentaram lentidão para realizar as operações.
Incidente resolvido.
Neste momento estamos passando por uma instabilidade no sistema. Já estamos investigando o problema.
Estamos identificando o problema.
Identificamos o problema e a aplicação já está em funcionamento normal. Verificamos que uma consulta estava com o funcionamento fora da sua normalidade. Nosso time identificou a consulta e a corrigiu, voltando assim a utilização da CPU para o patamar normal.
Descrição do caso: identificamos uma anomalia no tempo de resposta do Hiper Gestão à partir das 09h45, após este evento, nossos times iniciaram a atuação para investigar o problema. Por volta das 10h00, o impacto no tempo de resposta do Hiper Gestão intensificou ocasionando lentidão. Estamos neste momento atuando para identificar a causa raiz e mitigar o problema. Impacto: lentidão no Hiper Gestão.
Atualização do caso: nossos times identificaram uma possível causa do problema e implementaram um ajuste para mitigar o impacto. Por volta das 10h55, os indicadores normalizaram. Seguimos atuando para validar se a correção foi efetiva e a causa raiz foi identificada. Impacto: sem impacto no momento.
Atualização do caso: realizamos mais uma ação por volta das 12h00 para mitigar qualquer impacto relacionado ao incidente. Apesar disso, desde às 10h55, nenhum impacto adicional foi evidenciado no monitoramento do produto. Seguimos atuando para implementar a correção definitiva para a causa raiz deste incidente. Impacto: sem impacto desde 10h55.
Atualização do caso: seguimos monitorando o ambiente, todos os indicadores apresentam estabilidade. Em paralelo, nossos times seguem implementando a correção definitiva para a causa raiz do incidente. Impacto: sem impacto desde 10h55.
Atualização do caso: após o monitoramento contínuo deste incidente, validamos que a causa raiz foi completamente mitigada. Seguiremos trabalhando na implementação de ajustes para minimizar o risco de ocorrerem novos incidentes desta natureza. Identificamos que a anomalia se iniciou às 09h45, com impacto intermitente entre 10h00 e 10h55, ocasionando lentidão em operações relacionadas ao contexto fiscal (emissão de notas, importação de XML e sincronização de operações). A possível causa raiz que foi identificada é uma mudança no processo de inserção de informações no banco de dados do contexto fiscal, que ocasionou oscilação do plano de execução das consultas e, em alguns casos, gerou bloqueios na base de dados.
Descrição do caso: identificamos um alto consumo de CPU nas instâncias de leitura do banco de dados do cadastro de produtos que está impactando operações de leitura relacionadas aos produtos cadastrados no Hiper Gestão. Neste momento, nossos times estão atuando para mitigar os impactos deste incidente. Impacto: lentidão no acesso à informações do cadastro de produtos.
Atualização do caso: identificamos a causa raiz do problema e implementamos algumas ações para mitigar o impacto, após executar estas ações, os indicadores normalizaram e não deve mais ser notado lentidão no acesso à informações do cadastro de produto. A correção definitiva está em etapa de análise neste momento. Impacto: sem impacto.
Atualização do caso: a possível causa raiz do problema foi identificada como sendo uma consulta de leitura que não estava utilizando índices otimizados no banco de dados, nossos times estão desenvolvendo uma melhoria e implementando as ações necessárias para resolver definitivamente este problema. Impacto: sem impacto.
Atualização do caso: nossos times seguirão atuando para implementar as melhorias citadas anteriormente, neste momento, o ambiente está operando normalmente. Caso qualquer impacto adicional seja identificado antes da melhoria ser liberada em produção, reabriremos este incidente.
Descrição do caso: identificamos um alto consumo de CPU no banco de dados do contexto de produtos que está impactando operações de leitura relacionadas aos produtos cadastrados no Hiper Gestão. Neste momento, nossos times estão atuando para mitigar os impactos deste incidente. Impacto: lentidão no acesso à informações do cadastro de produtos.
Atualização do caso: identificamos que após as ações de remediação o impacto do incidente foi mitigado. Seguimos monitorando o ambiente para garantir que nenhum impacto adicional seja identificado. Impacto: sem impactos no momento.
Atualização do caso: após monitorarmos o ambiente, confirmamos que nenhum impacto adicional foi identificado e que o incidente foi solucionado.
Descrição do caso: Identificamos através do nosso monitoramento que por volta das 13h37 o serviço de comunicação com a SEFAZ passou a ter uma elevada taxa de erros para transmissão de NF-e e NFC-e. Desde então estamos analisando os erros com o objetivo de identificar a causa raiz. As evidências até o momento apontam que falha está sendo originada na SEFAZ. Impacto: falha na emissão de NF-e e NFC-e.
Nosso time segue analisando a causa raiz do problema, assim que possível traremos novas atualizações.
Por volta das 14h41 identificamos uma diminuição na taxa de erros sem uma ação por parte do nosso time, o que corrobora a tese inicial de que o problema está sendo originado na SEFAZ. Realizamos testes e constatamos que os erros não ocorreram novamente, porém seguiremos monitorando de perto este caso.
Realizamos um acompanhamento das ocorrências e, após a queda na taxa de erros relatada anteriormente, não identificamos novos casos do problema.
Descrição do caso: a partir das 16h50 identificamos um aumento de erros no acesso ao Hiper Gestão e Portal do Hiperador. A causa raiz foi identificada e, neste momento, nosso time está atuando para mitigar os impactos do problema. Impacto: intermitência no acesso ao Hiper Gestão e Portal do Hiperador. Previsão de solução: 30 minutos.
Atualização do caso: após realizar a tratativa do problema, foi possível restabelecer o acesso ao Portal do Hiperador e Hiper Gestão. Neste momento, nosso time segue atuando para mitigar qualquer impacto residual. Impacto: sem impactos no momento.
Atualização do caso: após realizar as ações de contingência do incidente, foi possível restabelecer completamente o acesso às aplicações e nenhum impacto residual foi identificado. A causa raiz do problema está relacionada ao pool de conexões do serviço de cache utilizado para armazenamento do licenciamento das contas dos usuários do produto. Durante o processo de liberação de novas implementações, temporariamente, o pool de conexões ficou cheio, ocasionando erros intermitentes no acesso ao Hiper Gestão e Portal do Hiperador. Ao identificar a falha, rapidamente foi realizada uma ação de encerramento de conexões do pool, permitindo que o acesso fosse restabelecido. O impacto do incidente pode ter sido identificado pelos usuários entre 16h50 e 17h10. Após este horário, os acessos normalizaram completamente.