Toku Brasil - Instabilidade na plataforma por GCP – Detalhes do incidente

Todos os sistemas operacionais

Instabilidade na plataforma por GCP

Resolvido
Parcialmente indisponível 50 %
Começou em há 8 diasDurado cerca de 4 horas

Afetado

Plataforma Toku

Desempenho degradado undefined 2:50 PM para 6:10 PM, Parcialmente indisponível undefined 6:10 PM para 6:37 PM, Desempenho degradado undefined 6:10 PM para 6:49 PM

Portal de Pagamentos (Clientes)

Desempenho degradado undefined 2:50 PM para 6:10 PM, Parcialmente indisponível undefined 6:10 PM para 6:37 PM, Desempenho degradado undefined 6:37 PM para 6:49 PM

API

Desempenho degradado undefined 2:50 PM para 6:49 PM

Mensageria

Desempenho degradado undefined 2:50 PM para 6:49 PM

BackOffice

Desempenho degradado undefined 2:50 PM para 6:10 PM, Parcialmente indisponível undefined 6:10 PM para 6:37 PM, Desempenho degradado undefined 6:37 PM para 6:49 PM

SFTP

Desempenho degradado undefined 2:50 PM para 6:49 PM

Atualizações
  • Resolvido
    UTC
    Resolvido

    Não identificamos erros há aproximadamente 30 minutos, portanto os sistemas do GCP parecem ter sido restabelecidos.

  • Monitoramento
    UTC
    Monitoramento

    Vemos que os erros estão diminuindo e já levamos vários minutos em melhor estado.

    O portal de pagamentos, o backoffice e a API pública estão funcionando muito melhor. Continuamos monitorando.

  • Atualizar
    UTC
    Atualizar

    O backoffice está um pouco mais estável do que antes, mas ainda apresenta lentidão e intermitências ocasionais.

    O portal de pagamentos pode demorar até 2 minutos em alguns casos, e continuam ocorrendo erros ao tentar realizar pagamentos.

  • Atualizar
    UTC
    Atualizar

    O incidente também está afetando diretamente o acesso e a velocidade do backoffice da Toku, portanto é provável que apresentem problemas ao tentar entrar ou visualizar informações dentro do portal.

  • Identificado
    UTC
    Identificado

    O GCP avisou que aplicou mudanças e que está revisando a recuperação do sistema, mas a intermitência continua.

  • Investigando
    UTC
    Investigando

    Estamos apresentando erros e latência elevada de forma intermitente em alguns serviços, devido a uma falha do Google Cloud Platform, um de nossos provedores de infraestrutura.

    O impacto afeta uma porcentagem muito baixa das operações e não representa uma interrupção total do serviço. Nossa equipe está monitorando de perto a situação e nenhuma ação é necessária da sua parte.