Сжатие видео-данных для долгосрочного хранения

[DemISdx]

SomePupil в сообщении #1699492 писал(а):

Поэтому обращаюсь с надеждой к Вам, дорогие форумчане: возможно ли как-нибудь сжать данные таких объемов хотя бы до сотни Петабайтов?

Как вариант можно использовать в качестве файловой системы ZFS.
Она умеет жать на лету. Можно менять степень сжатия (но будет действовать только на вновь пишущиеся данные) и т.п.
Но вхождение в то, как оная работает гораздо сложнее, да и требования к железу тоже не просты.
При этом устойчивость, по сравнению с RAID, гораздо выше.

Почитайте в сети.

[Martynov_M]

SomePupil
Ваш пост, скорее всего, можно расценивать как привлечение внимание к известной проблеме:

Цитата:

40% мирового интернет-трафика приходится на порно-сайты. Каждый год среднестатистический взрослый человек просматривает в среднем 15 фильмов для взрослых.

Тут напрашивается вопрос: Почему нельзя генерировать порно-контент с помощью ИИ? Зачем привлекать людей для этой отрасли?

[sf1]

SomePupil в сообщении #1699771 писал(а):

Эээ... То, что мы их заказали вместе с вакуумными камерами?

Нет.
Вы пишете:

SomePupil в сообщении #1699492 писал(а):

Памяти купленных Blu-Ray попросту не хватает, а докупить, во-первых, для нас дорого (даже если скидываться, это уже другие масштабы), во-вторых, хлопотно присобачивать новые диски к настроенной RAID-системе.

Поэтому я и спрашиваю - как вы собрались "присобачивать" оптические диски к RAID-системе?

[SomePupil]

sf1 в сообщении #1699865 писал(а):

Поэтому я и спрашиваю - как вы собрались "присобачивать" оптические диски к RAID-системе?

Не эти диски) Диски - внутри RAID или как их называют... Накопители?

-- 27.08.2025, 17:30 --

Эх, не силён я в этом...

[Sender]

SomePupil в сообщении #1699492 писал(а):

Договорились скинуться на Blu-Ray с RAID-контроллерами и вакуумными камерами.

Это несерьёзно. Нужны более футуристичные технологии, например
https://ru.wikipedia.org/wiki/Eternal_5D

Цитата:

Eternal 5D или Superman memory crystal — технология оптической записи информации с очень высокой плотностью и долговечностью, разработанная учёными Исследовательского центра оптоэлектроники (англ. Optoelectronics Research Centre) Саутгемптонского университета.

Носитель информации представляет собой наноструктурированный прозрачный материал, запись производится с помощью фемтосекундного лазера, работающего в режиме синхронизации мод. Таким методом возможно записать до 360 терабайт информации на один кристалл; расчётный срок хранения информации составляет порядка нескольких миллиардов лет.

[mihaild]

RAID для такой задачи избыточен - он предназначен для ситуации, когда данные изменяются. Для Вашего случая достаточно сгенерировать par файлы в желаемом количестве и записать на отдельные диски.

Sender в сообщении #1717726 писал(а):

Нужны более футуристичные технологии

Было уже довольно много технологий, обещавших срок хранения от тысяч до миллиардов лет, на практике живущих 10-20 лет. С blue-ray, на самом деле, тоже никто не может надежно сказать, что они проживут хотя бы сотню лет, но всё же у них более долгая и более массовая история.

А вообще для бэкапов нужен не один сверхнадежный источник, а несколько регулярно проверяемых (с заменой вышедших из строя), можно не очень надежных.

[Anton_Peplov]

mihaild в сообщении #1718169 писал(а):

Было уже довольно много технологий, обещавших срок хранения от тысяч до миллиардов лет, на практике живущих 10-20 лет.

Можно несколько примеров?

[mihaild]

Anton_Peplov в сообщении #1718171 писал(а):

Можно несколько примеров?

Ок, про миллиарды лет, я, видимо, неправильно помнил - это были проекты, которые так ничего коммерческого и не выпустили.
Просто сильно завышенные обещания надежности - самые известные были, видимо, у gold cd. С золотом, конечно, ничего не происходит, а вот органические краски долго не хранятся.
Еще история с M-дисками, которые до сих пор продаются - у них тихо поменяли технологию. Старую достаточно интенсивно тестировали, а новую, насколько я понимаю, никто толком не проверял - но обещают про неё всё то же, что про старую.