Na madrugada de sexta-feira para sábado, realizamos uma manutenção que atualizou o Firmware do Storage que usamos no rack em que os seus serviços se encontram fisicamente, necessária por motivos de segurança. Após realizarmos a atualização, a disponibilidade do storage foi afetada e tivemos de desligar todo o ambiente, e imediatamente iniciamos contato com a fabricante para entender e resolver o problema.
A maior parte dos serviços já está online, restando apenas apenas alguns poucos casos que ainda estão sendo restabelecidos. A partir das 12h (meio-dia) de sábado conseguimos restabelecer a disponibilidade do ambiente e começamos a religar as máquinas, porém nos últimos servidores a performance na entrega dos dados se mostrou bem abaixo do normal, isto é, o servidor/serviço está lento a ponto de alguns serviços não conseguirem operar normalmente, incluindo banco de dados, sites e alguns e-mails.
A empresa que fornece a solução de storage já está a nível global trabalhando para fornecer uma solução definitiva.
Sentimos imensamente pelo ocorrido e estamos trabalhando sem descanso para restabelecer tudo.