2014 dxdy logo

Научный форум dxdy

Математика, Физика, Computer Science, Machine Learning, LaTeX, Механика и Техника, Химия,
Биология и Медицина, Экономика и Финансовая Математика, Гуманитарные науки




Начать новую тему Ответить на тему На страницу 1, 2  След.
 
 Длительное хранение ценной информации
Сообщение30.05.2016, 21:54 
Заслуженный участник
Аватара пользователя


26/01/14
4601
Интересует следующая гипотетическая ситуация.

Пусть у вас есть некоторая ценная информация в виде компьютерных файлов общим объёмом, скажем, 30 гигабайт. Для вас крайне важно не допустить утраты или порчи этой информации на протяжении многих десятилетий. Дополнительное условие: раз в полгода информация обновляется, обновление затрагивает значительное количество файлов.

Вопрос: как следует хранить эту информацию (на каких носителях, сколько делать копий, как часто приобретать новые носители вместо старых, и т.д.), чтобы сделать вероятность её утраты или порчи (на протяжении многих десятилетий) пренебрежимо малой? Так как речь идёт о больших промежутках времени, то в идеале следует учитывать любые возможные опасности: поломку носителей, пожар в доме, стихийные бедствия, ядерную войну, ... . Понятно, что вряд ли удастся во всех этих случаях понизить до нуля вероятность утраты информации. Но следует приблизиться к этому идеалу как можно ближе. В качестве первого упрощения, можно вначале пренебречь всеми опасностями, кроме первой (поломки носителей).

Информация конфиденциальна и не должна быть доступна никому, кроме вас. (Но вопрос только о её хранении, а не о защите от посторонних глаз - это не рассматриваем.)

Как бы вы стали хранить эту информацию, если бы её субъективная ценность для вас была сравнима с субъективной ценностью вашей собственной жизни?

----------

Сомневался, помещать ли эту тему сюда или в Свободный полёт. Решил сюда; несмотря на некоторую фантастичность условия задачи, мне хочется получить квалифицированный ответ, какие носители надёжнее всего.

Попытки решения. Прочитал, что USB-флэшка (32-гигабайтная) в среднем допускает 10 000 циклов перезаписи, после чего ломается; если же её записать и потом вовсе не трогать, информация на ней может начать портиться через 10-15 лет. Согласно условиям задачи, перезаписывать флэшку придётся только раз в полгода, так что из-за перезаписи флэшка портиться почти не будет. Конечно, на всякий случай стоит иметь несколько копий на нескольких таких флэшках, и, наверное, раз в пять лет приобретать новые. Или это излишне?

Про DVD-диски - противоречивые данные. Кто-то гарантирует их сохранность в течение столетий и тысячелетий; в то же время некоторые эксперименты показывают, что диски могут испортиться и за два года. Мой личный опыт говорит, скорее, о ненадёжности дисков. Напоминаю, что согласно условиям задачи, утрата или порча информации равносильна смерти.

 Профиль  
                  
 
 Re: Длительное хранение ценной информации
Сообщение30.05.2016, 22:34 
Аватара пользователя


18/06/12

499
планета Земля
Read-Only флешки обещают хранить информацию сильно дольше обычных. Если информации будет на несколько порядков больше, чем у вас, то впору задуматься о бобине, она обычно долговечнее хардов. Про мутирование данных лучше забыть, обновления храните как обновления, а не замену. С местом хранения бобины уже сложнее, но вы всё ещё можете использовать несколько облачных сервисов. Но 30 гб слишком много, чтобы расчитывать на бесплатное хранение, да ещё и в нескольких экземплярах - зато вы сможете мутировать данные. Короче, ответ будет сильно зависеть от ваших требований к доступности. Если минимальные - то закопать несколько флешек на разных континентах будет самое то.

 Профиль  
                  
 
 Re: Длительное хранение ценной информации
Сообщение30.05.2016, 22:51 
Заслуженный участник


06/07/11
5627
кран.набрать.грамота
Mikhail_K в сообщении #1127344 писал(а):
Как бы вы стали хранить эту информацию, если бы её субъективная ценность для вас была сравнима с субъективной ценностью вашей собственной жизни?
Имхо, это плохой критерий в подобного рода технических вопросах. Обычно все через деньги считают. Сколько денег вы готовы потратить на спасение собственной жизни? Обычно ответы крутятся вокруг "столько, сколько есть", что применительно к вашему вопросу приводит к совету "купить флешек и винчестеров на все доступные деньги". Потому что 100% гарантии не дает никто. Лучше вести отсчет в деньгах. Сколько денег вы готовы потратить на то, чтобы информация не потерялась?
Кроме дисков и флешек, для хранения данных есть еще всякие облачные сервисы. Там специально обученные люди за деньги занимаются сохранением данных. Можно скомбинировать два-три разных разных способа: облако, рабочий компьютер и флешка/внешний винчестер/DVD. Как только в одном месте что-то пропало, тут же (тут же, а не "да куда оно до воскресенья денется") делать замену.

 Профиль  
                  
 
 Re: Длительное хранение ценной информации
Сообщение30.05.2016, 23:23 
Заслуженный участник
Аватара пользователя


26/01/14
4601
Eimrine, боюсь что Вам придётся объяснить мне значение использованных Вами терминов.

Что такое бобина? Яндекс и Википедия выдают что-то явно не то.
Что значит "мутирование данных"?
"Обновления храните как обновления, а не замену" - в каком смысле? Если обновления затрагивают многие файлы?
"ответ будет сильно зависеть от ваших требований к доступности" - хотелось бы иметь доступ каждые полгода для перезаписи информации в соответствии с её обновлением.

rockclimber в сообщении #1127367 писал(а):
Имхо, это плохой критерий в подобного рода технических вопросах. Обычно все через деньги считают. Сколько денег вы готовы потратить на спасение собственной жизни? Обычно ответы крутятся вокруг "столько, сколько есть", что применительно к вашему вопросу приводит к совету "купить флешек и винчестеров на все доступные деньги". Потому что 100% гарантии не дает никто.

Боюсь, что как раз так считать не стоит. Например, если 5 флэшек, сменяемых каждые пять лет, дают 99.9% гарантии сохранения информации на протяжении века, а 100 флэшек сменяемых каждый месяц дают 99 с большим количеством девяток, то, наверное, я выберу первый вариант: всё-таки 0.1% это пренебрежимо мало. Если же окажется, что все недорогие способы хранения дают гарантию только в 90%, то это большой повод раскошелиться, даже если изначально я не планировал этого. Потому что 10% это много, вряд ли Вы пожалеете какие-то деньги, если узнаете что с вероятностью 10% скоро умрёте, но это можно предотвратить если достать деньги откуда-нибудь.

rockclimber в сообщении #1127367 писал(а):
Как только в одном месте что-то пропало, тут же (тут же, а не "да куда оно до воскресенья денется") делать замену.

А вот очень интересный вопрос - как диагностировать пропажу данных в каком-нибудь месте? Скажем, если из этих 30 Гб значительная часть может понадобиться только десятилетия спустя? Например, на моей флэшке испортился какой-то один файл, но я этого не заметил и дальше с этой флэшки копирую все файлы на новую купленную? Существуют ли какие-нибудь надёжные автоматизированные способы убедиться, что информация не испорчена и не искажена?

 Профиль  
                  
 
 Re: Длительное хранение ценной информации
Сообщение30.05.2016, 23:36 
Аватара пользователя


08/08/14

991
Москва
Есть еще резервное копирование. Потеря любого количества информации равносильна смерти? Или имеет конечную стоимость?

 Профиль  
                  
 
 Re: Длительное хранение ценной информации
Сообщение30.05.2016, 23:58 
Аватара пользователя


18/06/12

499
планета Земля
Mikhail_K в сообщении #1127376 писал(а):
Что такое бобина? Яндекс и Википедия выдают что-то явно не то.
Магнитная лента, которую мы все слушали и смотрели в 90-е, живее всех живых, её до сих пор используют в дата-центрах для холодных копий реально больших массивов информации.

Mikhail_K в сообщении #1127376 писал(а):
Что значит "мутирование данных"?
Использование ячеек памяти для хранение одних, а потом других данных.

Mikhail_K в сообщении #1127376 писал(а):
"Обновления храните как обновления, а не замену" - в каком смысле? Если обновления затрагивают многие файлы?
Храните только diff, примерно как это реализовано в SVN.

Mikhail_K в сообщении #1127376 писал(а):
"ответ будет сильно зависеть от ваших требований к доступности" - хотелось бы иметь доступ каждые полгода для перезаписи информации в соответствии с её обновлением.
В качестве "бэкапа последней надежды" планируйте раз в несколько лет посещать, например, остров Пасхи и спрячьте там 1-2 флешки глубоко в земле. Представьте себе: всех выбранных вами провайдеров взорвут или взломают, все магнитные диски планеты пострадают от аномального излучения, а пароли ко всем облачным сервисам изымут терморектальным криптоанализом, а у вас флешка без перезаписи вне досягаямости ядерных конфликтов. Одну забрал, другую положил, потом на первую может быть можно будет что-то дописать. Острова Карибского бассейна тоже хорошее (классическое) место для драгоценного клада.

 Профиль  
                  
 
 Re: Длительное хранение ценной информации
Сообщение31.05.2016, 00:50 
Заслуженный участник
Аватара пользователя


31/01/14
11017
Hogtown
Eimrine в сообщении #1127394 писал(а):
В качестве "бэкапа последней надежды" планируйте раз в несколько лет посещать, например, остров Пасхи и спрячьте там 1-2 флешки глубоко в земле.

Это экстремально, но вообще надежный бэкап не просто на другом приборе, но на приборе в физически другом месте. Поэтому я дублирую свои важные файлы не только на десктопе дома и лэптопе, но и на оффисном десктопе и одном из облачных мест.

 Профиль  
                  
 
 Re: Длительное хранение ценной информации
Сообщение11.06.2016, 20:36 
Аватара пользователя


07/02/12
1403
Питер
Зашифруйте информацию и залейте в любое облако одной из крупных корпораций. Если параноя мучает - то в два облака.
А на случай ядерной войны копии записывайте на флешку и закапывайте в лесу.

 Профиль  
                  
 
 Re: Длительное хранение ценной информации
Сообщение08.08.2016, 15:34 
Аватара пользователя


27/07/16
556
У меня флэшка на 32 мегабайта все ещё жива :D
А сколько лет прошло с появления флэшки на 32 гигабайта?
Если порты для флэшки не отменят то лучше на ней и хранить..
Только сразу три копии сделать.
И хранить в разных местах.
Больше шансов будет обнаружить хотя бы одну(через пятнадцать лет).

 Профиль  
                  
 
 Re: Длительное хранение ценной информации
Сообщение08.08.2016, 20:16 
Заслуженный участник


11/05/08
32166
У меня гикнулась за всё время лишь одна флэшка -- на один гиг. Примерно десяти-двенадцатилетней давности. Давно уж гикнулась.

По иронии судьбы -- подаренная одной американской подругой (не моей, подругой жены). Когда я её спросил: а нафига она, собссно?... -- она уверенно сообщила: ну как ты не понимаешь, это ж "компьютер в кармане". На что я не менее уверенно промолчал.

Все остальные -- живы (кроме утерянных или украденных).

Жива 4-х-гигобайтница 2006-го или 7-го г.п. Вполне себе жива в том, что касается хранения/переноса, только механически развалилась (но я её изолентой обмотал, так что ничего).

Практически жива её сестрёнка на 8 Г (та же Trancend, и купленная там же в Свердловске, только на год или два позже). Правда, все операционки к ней как-то очень уж деликатны: мол, не полечить ли тебя? Ну пока необходимости нет, и энтузиазма не хватает её как-нибудь низкоуровне форматнуть.

Ну есть ещё трёх(примерно)летняя 64-Гбайтница. Ею я стараюсь не злоупотреблять, хоть и забил под завязку, по свойственному нам всем разгильдяйству.

Короче, вывод. Пока есть ещё юэсби -- флэшки рулят (в сочетании с внешними винтами). А вот оптические диски (пусть даже хоть какие фиолетовые) -- полный отстой. Соотношение "цена-объём" у них уже сейчас как минимум не лучше, чем у винчестеров. И не принципиально намного лучше, чем у флэшек. Но патологически уступают им всем в надёжности.

 Профиль  
                  
 
 Re: Длительное хранение ценной информации
Сообщение08.08.2016, 20:21 
Заслуженный участник


02/08/11
6874
rockclimber в сообщении #1127367 писал(а):
Кроме дисков и флешек, для хранения данных есть еще всякие облачные сервисы. Там специально обученные люди за деньги занимаются сохранением данных.
Такие сервисы делятся на два вида: 1) очень дорогие, так что обычному человеку совсем не по карману; 2) не гарантирующие сохранность и целостность доверенных данных.

 Профиль  
                  
 
 Re: Длительное хранение ценной информации
Сообщение08.08.2016, 20:25 
Заслуженный участник


11/05/08
32166
Genaa в сообщении #1142757 писал(а):
А сколько лет прошло с появления флэшки на 32 гигабайта?

Практически нисколько. Т.е. они как мелькнули на горизонте пару лет назад -- так и исчезли с горизонту.

 Профиль  
                  
 
 Re: Длительное хранение ценной информации
Сообщение09.08.2016, 01:05 
Заслуженный участник
Аватара пользователя


04/09/14
5003
ФТИ им. Иоффе СПб
Просто, если вдруг кто-то не знает. Флешка по принципу своего действия не предназначена для хранения вечных ценностей. Только сиюминутное, не больше чем лет на десять.

 Профиль  
                  
 
 Re: Длительное хранение ценной информации
Сообщение09.08.2016, 01:13 
Заслуженный участник
Аватара пользователя


28/07/09
1178
Правило 3 2 1

 Профиль  
                  
 
 Re: Длительное хранение ценной информации
Сообщение09.08.2016, 09:43 
Аватара пользователя


27/07/16
556
Каждые пять лет копируем ценности со старой флешки на новую.

 Профиль  
                  
Показать сообщения за:  Поле сортировки  
Начать новую тему Ответить на тему  [ Сообщений: 18 ]  На страницу 1, 2  След.

Модераторы: Karan, Toucan, PAV, maxal, Супермодераторы



Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей


Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения

Найти:
Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group