Tenho uma grande quantidade de arquivos que nunca devem ser alterados, incluindo fotos RAW e arquivos de vídeo. Estou preocupado com a podridão de bits silenciosa.
Eu tenho backups para restaurar arquivos perdidos / corrompidos, mas comparar os arquivos atuais com os backups não é prático (por exemplo, os arquivos de vídeo estão em fitas digitais). Além disso, meu software de backup não fornece funcionalidade para isso.
Existe um software que verifica a lista de pastas, armazena somas de verificação confiáveis e pode validar essa seleção para arquivos adicionados / removidos / modificados (corrompidos)?
Há cerca de 3 TB e 21 milhões de arquivos (uma grande parte deles são arquivos realmente pequenos, obviamente), então o consumo de memória é importante. Ele deve ser executado no Linux e de preferência no OS X também.
Observação : no Linux, já estou executando o ZFS, que tem somas de verificação robustas e scrub
para detectar bitflips. No entanto, não é possível ou prático usar isso ou btrfs no OS X / discos óticos / discos USB que deveriam ser portáteis (ou seja, FAT). Eu prefiro uma solução agnóstica de sistema de arquivos.