O que é corrupção de dados e você pode evitá-la?

A corrupção de dados é uma das causas mais comuns de perda permanente de dados. No entanto, a prevenção de violações de dados normalmente tem precedência sobre o fim da corrupção, embora ambos os eventos tenham consequências graves. Um arquivo corrompido pode não causar tantos problemas legais quanto uma violação, mas a perda permanente de dados sem dúvida impacta a continuidade dos negócios e seus resultados financeiros.

Este artigo é uma uma introdução à corrupção de dados e aos perigos de não ter backups confiáveis. Continue lendo para aprender sobre as causas mais comuns de corrupção de dados e ver o que sua equipe pode fazer para reduzir a probabilidade de perda permanente de arquivos valiosos.

O que é corrupção de dados?

A corrupção de dados refere-se a qualquer alteração indesejada que ocorre em um arquivo durante o armazenamento, transmissão ou processamento. Um arquivo corrompido pode se tornar inutilizável, impreciso, ilegível ou de alguma forma inacessível para um usuário ou aplicativo relacionado.

A maioria das corrupções de dados ocorre quando um arquivo de alguma forma inverte ou mistura seu código binário (bits de 0s e 1s). Os bits são misturados por vários motivos, incluindo problemas de hardware, problemas de software e erros humanos.

Sintomas comuns de corrupção de dados:

• Um computador fica lento ou continua congelando.
• Falhas repentinas do programa.
• Os nomes dos arquivos continuam mudando para caracteres sem sentido.
• Incapacidade de abrir um arquivo ou pasta.
• Mudanças nos atributos do arquivo.
• Dados realocados ou perdidos.
• Atividade de disco ocupado, independentemente do que está acontecendo no sistema.

Os discos modernos não são muito mais seguros do que os antigos em termos de corrupção de dados - a probabilidade de erros era apenas menor com hardware mais antigo porque armazenava pequenas quantidades de dados em comparação com os dispositivos atuais.

Estudos recentes revelaram quão propensos são os nossos sistemas à corrupção de dados:

• Greenplum testou seus armazéns de dados em grande escala e descobriu que eles enfrentam problemas relacionados à corrupção a cada 15 minutos.
• O CERN realizou um teste de seis meses em 97 petabytes de dados para revelar que cerca de 128 megabytes de dados sofreram corrupção a longo prazo.
• A NetApp testou 1,5 milhão de HDDs ao longo de 41 meses para descobrir mais de 400 mil dados corrompidos (mais de 30 mil instâncias passaram despercebidas pelo controlador RAID).

Corrupção de dados detectada versus não detectada

Cada instância de corrupção de dados se enquadra na categoria detectada ou não detectada:

• A corrupção detectada é um problema relacionado aos dados que a equipe ou o sistema já identificou. A identificação completa requer a descoberta do âmbito e da fonte da corrupção.
• A corrupção de dados não detectada refere-se a alterações de arquivos que ocorrem sem o conhecimento da equipe ou do sistema operacional. Outro nome comum para esse tipo de problema é corrupção silenciosa de dados.

Ambos os tipos de corrupção de dados são prejudiciais, mas o tipo silencioso é mais prejudicial, pois pega você desprevenido em uma situação em que você precisa de dados com urgência. Além disso, se a causa da corrupção for um problema subjacente de hardware ou software, a falha na identificação do problema a tempo colocará outros dados em risco. Por exemplo, uma falha silenciosa que afeta os metadados do sistema de arquivos pode continuar a danificar dados aleatórios à medida que você continua a usar o sistema em seu estado atual.

Ambos os tipos de corrupção de dados são permanentes ou temporários. A diferença entre os dois é que o último permite restaurar um arquivo ao seu estado original (se você tiver backups adequados, é claro).

Esteja ciente de que não há como impedir totalmente a corrupção silenciosa. As falhas são uma parte natural de qualquer sistema, por isso sua equipe deve dedicar recursos para prevenir e monitorar sinais de corrupção de dados.

Causas de corrupção de dados

Aqui estão as causas mais comuns de corrupção de dados:

• Desligamentos inadequados devido a queda de energia ou reinicialização forçada (pressionando e segurando o botão liga/desliga).
• Falhas de hardware (por exemplo, falha no disco rígido devido a superaquecimento, setores defeituosos (hard ou soft), problemas físicos com o "prato" do disco, RAM defeituosa, HDD antigo, problemas na placa-mãe, etc.).
• Infraestrutura de rede defeituosa (problemas com placas de rede (NICs), cabos, roteadores, hubs, switch, etc.).
• Ejetar um disco rígido externo ou dispositivo de armazenamento antes de desconectá-los ou desligá-los.
• Mídia de armazenamento portátil com falha ou degradada.
• Problemas causados por espaço em disco insuficiente.
• Programação incorreta (por exemplo, um bug de código que impede um programa de salvar o progresso de maneira adequada).
• Erros do sistema operacional (como travamento ou congelamento repentino).
• Código malicioso que um usuário instala acidentalmente em um dispositivo, como vírus, malware ou ransomware.
• Erros baseados em software que ocorrem durante a gravação, edição ou transferência de dados para outra unidade.
• Uma atualização de software com falha ou incompatível.
• Um silo dentro do gerenciamento de erros.
• Questões ambientais (temperaturas extremas, nuvens pesadas, interferência de dispositivos domésticos, danos causados por desastres naturais, vibrações externas ou sons altos que desgastam o hardware, etc.).

Como detectar corrupção de dados?

A corrupção de dados acontece em qualquer nível do sistema, desde o host até o meio de armazenamento.

Sinais comuns de corrupção de dados são:

• Falhas repentinas do sistema.
• Desempenho lento e congela.
• Nomes de arquivos ou pastas alterados.
• Arquivos e pastas ausentes ou realocados.
• Obtendo um erro "formato de arquivo inválido" ou "[nome do arquivo] não reconhecido" ao tentar abrir um arquivo.
• Erros regulares de tela azul da morte (BSOD).
• Uma alteração inesperada nas permissões ou atributos do arquivo.
• Sintomas físicos (por exemplo, sons de cliques ou vibração excessiva).

Todos os principais sistemas operacionais notificam o usuário em caso de corrupção de dados. No entanto, você normalmente recebe um alerta depois que a corrupção começa a afetar as informações de vinculação do cluster de arquivos, o que significa que:

• A mensagem chega muito depois de o erro afetar o sistema, o que significa que seus backups provavelmente salvaram dados corrompidos.
• A maioria dos reparos baseados em sistema operacional geralmente corrige problemas de ligação, mas não recupera dados dentro do próprio arquivo.

Em vez de esperar que o sistema notifique sobre um erro, sua equipe de TI deve ter uma abordagem mais proativa para detectar corrupção de dados. Além de verificar os backups regularmente, veja o que mais sua equipe pode fazer:

• Usar checksums é uma ótima maneira de detectar um erro quando a corrupção de dados se comporta como um processo de Poisson. Use também códigos de correção de erros (ECC) para corrigir o problema.
• Se você estiver executando Linux, use software RAID e ZFS para fazer com que a configuração padrão execute a limpeza de dados a cada mês (a mesma abordagem funciona em sistemas Debian e Ubuntu).
• No Windows, execute um script que leia cada arquivo uma ou duas vezes por mês e registre todas as alterações inesperadas.

Como prevenir a corrupção de dados: práticas recomendadas

Embora uma certa quantidade de corrupção de dados seja inevitável, existem maneiras de limitar o número de erros que danificam os dados. Para evitar problemas de corrupção de dados, aplique as práticas recomendadas a seguir.

Faça backups de todos os dados valiosos (e teste-os com frequência)

Ter backups de dados regulares e confiáveis é a maneira mais eficaz de prevenir o impacto da corrupção. Se algo acontecer com o arquivo original, basta restaurar os dados ao estado anterior.

Você não precisa fazer backup de todos os dados, mas apenas de informações confidenciais que prejudicariam seus negócios se você os perdesse. A frequência dos backups depende do valor dos dados. Seus bancos de dados de missão crítica e vinculados à conformidade devem ter backups diários, e backups semanais são suficientes para dados menos vitais.

Vários sistemas de backup também são uma boa jogada comercial. Por exemplo, use uma unidade externa local, um backup na nuvem e armazenamento externo para o mesmo conjunto de dados. É duvidoso que todas as três estratégias falhem ao mesmo tempo.

Outra prática obrigatória é testar os backups regularmente. Se você estiver fazendo backup de dados corrompidos ou se o sistema estiver falhando de alguma forma, o backup não será útil se algo acontecer com o arquivo original.

Configurar limpeza de dados

A limpeza de dados (ou limpeza de dados) é o processo de detecção e correção de dados incorretos, incompletos e duplicados em um banco de dados. Essa técnica de correção de erros é executada como um processo em segundo plano de baixa prioridade que inspeciona periodicamente a memória principal ou o armazenamento em busca de erros. Se a depuração de dados detectar um problema, ela corrige ou remove o problema usando dados redundantes na forma de:

• Diferentes somas de verificação.
• Cópias de dados.

A limpeza de dados resolve os seguintes problemas:

• Vários erros estruturais em conjuntos de dados (erros ortográficos, entradas numéricas erradas, erros de sintaxe, valores ausentes, campos nulos, etc.).
• Dados formatados de forma inconsistente.
• Dados duplicados.
• Informações irrelevantes (por exemplo, uma entrada atípica ou desatualizada).

Embora a limpeza de dados não seja uma medida de prevenção da corrupção de dados, o processo reduz a probabilidade de acumulação de erros e de ficar fora de controle. A limpeza regular também aumenta a integridade geral dos dados.

Fique de olho nos discos rígidos e na integridade da rede

Verificar a integridade dos discos rígidos é essencial para prevenir a corrupção de dados. Use um dos S.M.A.R.T. Ferramentas de diagnóstico (tecnologia de automonitoramento, análise e relatórios), como:

• HDtune.
• HDDScan.
• Informações do CrystalDisk.

De olho no S.M.A.R.T. data permite detectar vários indicadores de confiabilidade da unidade. A maioria das ferramentas também possui um recurso útil para prever quanto tempo um disco tem antes de começar a degradar.

Além disso, monitore regularmente a integridade dos equipamentos de rede. Se você estiver administrando uma sala de servidores interna, você deve implantar um UPS (Fonte de Alimentação Ininterrupta) para dar à sua equipe algum tempo para salvar seu trabalho e desligar os dispositivos em caso de interrupção.

Use software antivírus (e mantenha-o atualizado)

As ferramentas antivírus são uma forte defesa contra ataques cibernéticos que tentam corromper dados. Uma ferramenta impede a execução de cargas quando um dos membros da sua equipe entra em contato com um arquivo ou link malicioso, complemento de software ou anexo de e-mail.

Configure um firewall confiável para proteger todo o tráfego. Outro tipo de segurança de rede a ser considerado é um sistema de detecção de intrusão (IDS) configurado de forma a notificar sua equipe se alguém ou algo começar a alterar os dados.

Altos níveis de segurança cibernética também são vitais na proteção contra ransomware, uma das ameaças mais prejudiciais e difundidas aos seus dados.

Certifique-se de que a equipe entenda como prevenir a corrupção de dados

Preparar os membros da equipe para possíveis cenários de desastre é vital. Sem o treinamento adequado, todas as outras medidas não têm sentido, portanto, certifique-se de que sua equipe saiba:

• Como configurar e usar a ferramenta antivírus designada.
• Quem contatar se descobrirem um arquivo potencialmente corrompido.
• Como ligar e desligar dispositivos corretamente.
• Todos os sinais comuns de corrupção de dados e sistema.
• Não ignorar mensagens ou atualizações do sistema.
• Para solucionar problemas assim que eles ocorrerem.
• Como usar unidades externas e USBs corretamente.
• Como salvar um arquivo sem correr o risco de erro.

Não arrisque aprender sobre corrupção de dados da maneira mais difícil

Imagine perder gigabytes de dados confidenciais de clientes ou todas as suas chaves de criptografia devido a um caso grave de corrupção silenciosa de dados. Esses cenários podem facilmente significar um desastre para qualquer empresa.

Em vez de arriscar eventos potencialmente fatais, comece a pensar em backups adequados antes de perder permanentemente algo de valor.