Armazenamento, backup e catalogação de fotografias

Aqui, escreva periodicamente posts sobre como armazenar e fazer backup de suas fotos - bem, apenas arquivos. No último post, escrevi um comentário bastante longo, pensei um pouco e decidi implantá-lo no post. Além disso, mudei o método de backup para a nuvem um pouco, pode ser útil para alguém.

Servidor doméstico, onde ocorre o seguinte:

O que deve ser mantido?

O mais importante e volumoso são as fotografias. Ocasionalmente, um vídeo, mas muito ocasionalmente - ocupa muito espaço e leva muito tempo, porque não gosto muito, filmo apenas vídeos curtos que estão na mesma pilha das fotos. Atualmente, o arquivo de fotos ocupa cerca de 1,6 terabytes e está crescendo em torno de 200 gigabytes por ano. Outras coisas importantes são muito menos volumosas e há menos problemas com elas em termos de armazenamento e backup; uma dúzia ou dois gigabytes podem ser amontoados em vários lugares gratuitos ou muito baratos, começando em DVDs e terminando com drives flash e nuvens.

Como é armazenado e feito o backup?

Meu arquivo de fotos inteiro tem cerca de 1,6 terabytes no momento. A cópia principal é armazenada em um SSD de dois terabytes no computador doméstico. Nos cartões de memória, tento não manter as fotos por mais tempo do que o necessário. Na primeira oportunidade, mesclo-as em um desktop ou laptop (quando estiver em trânsito). Embora eu não exclua a unidade flash, se ainda houver espaço. Uma cópia extra nunca é demais. Do laptop na chegada em casa, tudo também cai na área de trabalho.



Uma cópia diária da pasta com fotos é feita no servidor doméstico (com um tipo de espelho baseado no Drivepool, onde a duplicação de pastas importantes é configurada). A propósito, eu ainda recomendo o Drivepool - por todos os anos de uso de uma única falha. Isso simplesmente funciona. Você não precisa apenas olhar para a interface em russo; enviei aos desenvolvedores uma tradução mais decente, mas não sei quando será implementada ( atualização : eles disseram que tentariam no próximo lançamento). Enquanto isso, em russo, este é um programa para gerenciar um pool (gerenciar pool).



É claro que você pode fazer cópias com mais frequência, se muito trabalho tiver sido feito em um dia, então eu posso executar a tarefa à força. Embora agora eu ainda esteja pensando em começar a copiar arquivos alterados, quero parar de manter a área de trabalho ligada o tempo todo, deixando o servidor trabalhar mais. O programa é GoodSync.



Até recentemente, os arquivos do mesmo desktop GoodSync eram carregados na nuvem Onedrive. A maioria dos arquivos que tenho não é pessoal, portanto, carreguei como está, sem criptografia. O que foi pessoal foi carregado por uma tarefa separada, com criptografia.

O Onedrive foi escolhido porque a assinatura do Office 365 Home Premium para 2000 por ano produzia cinco (e agora seis) terabytes na nuvem. Mesmo com peças por terabyte. Agora, no entanto, o brinde aumentou um pouco, mas há algumas semanas ainda havia uma opção para 2600-2700 por ano (é preciso procurar varejistas). Eu previ isso, quando no ano passado a MS elevou os preços e até parou de vender minha assinatura no site, porque eu ativei a assinatura nos próximos cinco anos, ainda havia 1800-2000 caixas à venda (é claro, havia também algumas caixas reservadas) tomar, mas não me atrevi a pensar até agora).



A velocidade de download é o máximo para minha tarifa, de 4 a 5 megabytes / s. À noite, até as 10. Analisei o plano de colisão ao mesmo tempo - é bom lá se megabytes por segundo forem carregados.

Lifetime 5TB por US $ 2-3 com ebay - uma coisa muito aleatória. Para a vida útil pode ser muito curta, até agora três meses é um recorde. Não se trata de fazer backup em um local que possa ser coberto a qualquer momento. Mesmo por um centavo.



Mas agora, devido ao fato de ele ter decidido arrastar parte das tarefas da área de trabalho para o servidor, a cópia para o Onedrive foi transferida para a Duplicati. Que seja beta, mas eu o uso há vários meses e, até agora, ele está funcionando de maneira estável. Como a Duplicati ainda armazena seus backups em arquivos e não em massa, decidi criptografar tudo o que era baixado com ferramentas internas. É tudo a mesma coisa para restaurar, se isso, através da Duplicati, é necessário. Então deixe tudo criptografar.

Como tenho terabytes em pedaços, um backup na nuvem consiste em várias tarefas. É aqui que o backup está sendo carregado na nuvem. 2019 foi inundado rapidamente - havia cinquenta fotos em alguns dias, viajei um pouco até agora e 2018 está caindo lentamente. A velocidade atual de download não é o dia máximo, os canais são carregados e tudo mais.



Na nuvem, a pasta de backup se parece com isso - há muitos arquivos zip, o tamanho do arquivo é ajustado ao criar a tarefa:



Uma vez por mês, faço uma cópia em uma unidade externa, que é armazenada em um armário. Conecto e executo a tarefa com as mãos no mesmo GoodSync. Embora, é claro, seja possível configurar uma inicialização ao conectar um disco - mas nem sempre preciso fazer uma cópia ao conectar o disco.

De uma maneira boa, você precisaria de outro local de armazenamento remoto - o seu e não muito nublado. No meu servidor, localizado na plataforma do provedor, já preparo um disco para esse negócio há muito tempo, mas nem todas as mãos o alcançam. Mas como comecei a arrastar tudo com duplicatas, acho que o farei agora, depois de recarregar tudo no onedrive.

Como é catalogado?

Aqui, a pergunta é dividida em dois - o nível do sistema de arquivos, em que a catalogação está no nível da pasta e a catalogação lógica para mais parâmetros, porque a árvore de pastas ainda possui recursos limitados.

Sim, estou tirando fotos da raiva. Porque você pode criar jpg a partir de matérias-primas a qualquer momento, mas não vice-versa. Uma vez eu gravei em raw + jpg, para que eu pudesse enviar fotos rapidamente para o meu telefone e enviá-las para a Internet (era difícil transferir a raw para o meu telefone). O jpg foi apagado ao copiar para a área de trabalho. Mas agora o telefone começou a me agradar em termos de qualidade da foto (para carregar na Internet), portanto, recusei completamente o jpg nas câmeras. Permaneceu daqueles momentos em que eu não tinha espelho, ou vinha do telefone.



No nível do sistema de arquivos, é algo parecido com isto: no nível superior das pastas, a fonte. Os nomes dos fotógrafos são geralmente.



Um nível mais baixo é o tópico. Todos são mais ou menos iguais, pode haver temas pessoais (por exemplo, "Cães", alguns tópicos podem não ser.



O próximo é o ano. Dentro das pastas do ano por dia. Pode haver sessões de fotos separadas na pasta se as fotos baterem nos tópicos por dia.

Como resultado, o caminho para o arquivo pode ser algo como isto: My \ Trips \ 2018 \ 2018-04-11 Berlin \ French Station \ P4110029.ORF

Tiro fotos com duas câmeras, geralmente por sua vez, mas ocasionalmente tiro as duas comigo - depois as despejo em uma pasta. O principal é que a hora deve ser sincronizada; caso contrário, é necessário calcular a diferença e ajustar a data de gravação para todos os arquivos (no lightroom é simples, mas tedioso considerar a diferença de hora).

Para fotos do telefone, há uma pasta separada no segundo nível, mas, se necessário, a foto pode ser enviada para uma pasta temática.

Catalogação lógica na parte superior das pastas - Adobe Lightroom . É claro que existem muitos programas para catalogar e processar, mas o lightroom combina comigo, é bastante animador (e até oferecem o Photoshop no kit) e, nos últimos dois anos, também se tornou menos lento. Embora, é claro, também haja uma transição completa para o SSD.

Todas as fotos vivem em um diretório. A estrutura de pastas do parágrafo anterior é usada principalmente, além de informações EXIF, geo-tags, tags e marcas de cores. Você também pode ativar o reconhecimento de rosto, mas eu não o uso.

Com base no que foi dito acima, você pode criar "coleções inteligentes" - seleções dinâmicas para propriedades específicas de arquivos - dos parâmetros de gravação ao texto nos comentários.



Todas as tags são armazenadas em arquivos, o histórico de edição está em arquivos XMP ao lado das valas. O catálogo do lightroom é copiado pelo próprio lightroom uma vez por semana para uma pasta específica, de onde ele cai no onedrive. Além disso, por meio do agente veeam, o disco da área de trabalho é derramado no servidor todos os dias - e o diretório é armazenado no disco do sistema.

E o que dizer de todas as fotos? O que, não há outros tipos de arquivos?

Existe, por que não? Os métodos de backup não diferem (se você precisar fazer backup), e os métodos de catalogação dependem do tipo de conteúdo.

Basicamente, a classificação no nível da pasta é suficiente, as tags não são necessárias. Apenas para filmes e programas de TV, é usado um catalogador separado. - Plex Media Server. Ele também é um servidor de mídia, como o nome indica. Mas lá o cavalo não ficava por aí, normalmente é bem classificado se um quarto da biblioteca de filmes, e o resto está na pasta "! Para classificar".