Каталог
Среда, 23 мая 2018 14:17
Храните самолеты на магнитных лентах
короткая ссылка на новость:
17 апреля 2018 года в «Рособоронэкспорте» прошло заседание Комитета по информационно-коммуникационным технологиям Союза машиностроителей России на тему: «Создание долговременных архивов продукции ОПК». Мы полагаем, неограниченному кругу читателей сайта nix.ru будет интересно познакомиться с отчетом об этом мероприятии и узнать, на каких носителях дешевле всего хранить цифровые архивы.
Начинаем, как обычно, с самых любопытных цитат.
«Boeing и Airbus активно занимаются этим вопросом. Им важно, каким образом будет открываться 3D-модель их самолета через 50 лет».
«А у нас до сих пор существует ГОСТ, который называется «Микрофильмы и документы на правах подлинника», где сказано, что документацию нужно микрофильмировать. Этот ГОСТ действующий».
«С 3D-модели делают чертеж, а с него – микрофильм, который и сдают в архив. Ситуация странная».
«Сама проблема технически яйца выеденного не стоит, все сложности носят организационный характер».
«На данный момент ленты уже обгоняют по скорости чтения данных дисковые накопители, если не брать твердотельные диски. Но твердотельные диски для длительного хранения данных – это затратная идея».
«На сегодняшний день лента позволяет в 15-20 раз более плотно разместить информацию на единицу емкости в стойке, чем жесткий диск. Хранение на ленте обходится в 6 раз дешевле, чем на диске».
«В случае с нашим решением всегда нужно включать голову. Хотя напрямую нам этого никогда и не говорили, но наверняка это одна из причин недоверия к российскому программному продукту».
На долгую память
Важность проблемы подчеркнул во вступительном слове Александр Петров, ответственный секретарь Комитета по информационно-коммуникационным технологиям.
«Проблема долговременного хранения данных очень актуальна. К сожалению, у нас этой задаче уделяется мало внимания, хотя крупные зарубежные компании, типа Boeing и Airbus, активно занимаются этим вопросом. Им важно, каким образом будет открываться 3D-модель их самолета через 50 лет. Жизненный цикл современных изделий – это десятки лет. А у нас до сих пор существует ГОСТ, который называется «Микрофильмы и документы на правах подлинника», где сказано, что документацию нужно микрофильмировать. Этот ГОСТ действующий. Его никто не отменял. Организации продолжают делать микрофильмы того, что они разрабатывают. Специализированные фирмы не справляются с заказами, а самое главное, все понимают, что сделать микрофильм 3D-объекта, мягко скажем, затруднительно. Поэтому с 3D-модели делают чертеж, а с него – микрофильм, который и сдают в архив. Ситуация странная».
Александр Щеляев, руководитель отдела маркетинга ООО «Тесис», рассказал об организационных сложностях архивирования данных, а также о том, почему не стоит хранить цифровые файлы в оригинальных форматах.
«Проблемы хранения документации существует везде. Когда в Атлантике упал A340, который долго искали и только спустя несколько лет обнаружили его самописцы, мало кто знал, что возникла и другая проблема: по запросу европейских и американских органов следствия была запрошена вся документация на этот самолет, но чтобы ее собрать по всем предприятиям консорциума, потребовалось более полугода».
«Сегодня самые продвинутые ребята – это американцы, потому что у них есть требования Пентагона, есть концепция цифрового производства, когда все описывается в виде электронной модели. У них все это диктуется сверху, исходя из прагматичной идеи сокращения издержек на разработку и эксплуатацию».
«Если говорить про наши реалии, то у нас отсутствует какая-либо нормативная действующая база. Есть старые технологии – микрофиши. А недавно общались с коллегами, у которых возникла проблема, как обеспечить считывание данных с проволоки».
«Самая печальная вещь, с которой приходится сталкиваться, когда старые кадры уходят, а новые не всегда компетентны, состоит в том, что существующая парадигма хранения рабочей документации не несет в себе знаний, с помощью которых было создано изделие. Если взять людей с одного предприятия и дать им документацию с другого предприятия даже из той же отрасли, то и при условии высокой квалификации и большого опыта работы потребуются огромные усилия, чтобы поднять этот архив и организовать производство с нуля. Возникает вопрос, какой объем данных закладывать в эти долговременные системы архивирования и какова их цель? Если мы исходим из того, что какие-то предприятия будут жить вечно и передача знаний осуществляется у них внутри, то это одна ситуация. Но если, как у нас в последние 30 лет, целые коллективы распадаются и знание непонятно куда уходит, то имеет смысл задать вопросы о необходимости расширения объемов данных, которые необходимо хранить в этих архивах».
«Сама проблема технически яйца выеденного не стоит, все сложности носят организационный характер».
«Популярна идея хранить документацию в оригинальном формате системы разработки. Но CADовские системы развиваются стремительно, и нет гарантии того, что завтра версия, которую вы использовали, будет жива. Мы часто приводим этот пример: пытались передать построения из ранней версии Catia в позднюю. Тупо эти построения открываем, а результат получается разный. Сохраняли вроде Boeing 747, открыли – а там Cessna».
Андрей Никонов, руководитель отдела ООО «4х4 УК», рассказал о преимуществах долговременного хранения информации на магнитных лентах.
«Самые популярные сейчас носители – это жесткие диски и магнитные ленты. Технология хранения данных на магнитных лентах развивается. В 80-е годы их емкость исчислялась килобайтам, а сейчас – терабайтами. На данный момент магнитные ленты рассматриваются как основное средство долговременного хранения данных. Срок хранения составляет 20-25 лет при соблюдении некоторых требований: температурный режим, периодическая перемотка и так далее».
«С дисками все гораздо сложнее, потому что у них средний срок хранения данных – 5-7 лет».
«На данный момент ленты уже обгоняют по скорости чтения данных дисковые накопители, если не брать твердотельные диски. Но твердотельные диски для длительного хранения данных – это затратная идея».
«Один из больших минусов лент – невозможность считывать с них отдельные файлы. Необходимо сначала скопировать с ленты всю информацию на другое устройство».
«Каждые 2-3 года появляется новое поколение магнитных лент. Особенность этой технологии в том, что мы можем записать на одном и том же стримере, устройстве записи, ленту предыдущего поколения, а прочитать – ленты двух предыдущих поколений. Для лент более ранних поколений придется искать старые стримеры».
«В год цифровые данные, хранящиеся на системах хранения данных предприятий, растут больше чем на 30%. Из них активные данные, которые постоянно находятся в операционной деятельности, составляют 20-30%. К остальным данным обращаются очень редко. Но некоторые организации, не задумываясь, хранят их на больших скорострельных дисках».
«На сегодняшний день лента позволяет в 15-20 раз более плотно разместить информацию на единицу емкости в стойке, чем жесткий диск. Хранение на ленте обходится в 6 раз дешевле, чем на диске».
Ну а в конце заседания возникла тема ПО и форматов, в которых надо хранить данные. Разумеется, эта тема рассматривалась и через призму импортозамещения. Роман Баркалов, главный специалист отдела стратегического развития ГК «Рэлекс», рассказал об отечественной СУБД Линтер. Все вроде хорошо, но насторожила одна фраза.
«Зачастую от Линтера требуют того же, что и от Oracle. Все привыкли, что Oracle большинство ситуаций обрабатывает сам, а в случае с нашим решением всегда нужно включать голову. Хотя напрямую нам этого никогда и не говорили, но наверняка это одна из причин недоверия к российскому программному продукту».
Холдинг НИКС – это сеть из более чем 100 магазинов цифровой техники по всей России; это инжиниринговый центр по проектированию высокотехнологичных производств «Проектмашприбор», на 75% принадлежащий компании НИКС и на 25% – Госкорпорации «Ростех»; это нанотехнологическая лаборатория, в стенах которой разработаны и изготовлены сканирующие туннельные микроскопы, проведены работы по квантованию проводимости молибдена, ведутся исследования по квантовым вычислениям; это агропромышленный комплекс «Тюринский» площадью 19 100 га в Тульской области, который по производительности труда сопоставим с немецкими фермерскими хозяйствами.
Источник: НИКС - Компьютерный Супермаркет
Комментарии к статье из сети в Вконтактеоткрыть страницу обсуждения |
Эйнсток Файр |
Все админы делятся на тех кто не делает бекапы и на тех, кто уже делает. |
23-05-2018 16:46 ответить |
Валерий Саранчук |
3D-модель на чертёж, чертёж на диафильм, диафильм на магнитную ленту... |
23-05-2018 18:50 ответить |
eskimo82 |
R>Мы полагаем, неограниченному кругу читателей сайта nix.ru будет интересно познакомиться с отчетом об этом мероприятии и узнать, на каких носителях дешевле всего хранить цифровые архивы. Тема носителей в статье не раскрыта. Поэтому заслуженный минус. Самые популярные сейчас носители – это жесткие диски и магнитные ленты. Технология хранения данных на магнитных лентах развивается. В 80-е годы их емкость исчислялась килобайтам, а сейчас – терабайтами. На данный момент магнитные ленты рассматриваются как основное средство долговременного хранения данных. На этой позитивной ноте статью можно завершать: те люди надолго застряли в прошлом веке. |
24-05-2018 00:36 ответить перенести в VK |
Эйнсток Файр |
>На этой позитивной ноте статью можно завершать: те люди надолго застряли в прошлом веке. 2017, http://www.cnews.ru/news/top/2017-11-23_v_moskve_zapustili_tsod_na_magnitnyh_lentah_dlya Инвестиции 3data в проект ArcTape составили десятки миллионов рублей Емкость используемых картриджей составляет до 6 ТБ (LTO7, скорость чтения 300 Мбайт/с). Находит в библиотеке соответствующий картридж, после чего робот достает его из стойки и передает для чтения в одно из соответствующих устройств (ридеров). Операция с выбором роботом нужного картриджа занимает до 1 минуты. Энергозатраты на чтение данных с магнитных лент выше, чем у винчестеров. После считывания информация передается в кеш, созданный на базе традиционных жестких дисков, откуда она уже считывается пользователем. "Ранее система ЦОДов Open Compute Project отказалась от использования магнитных лент" https://3data.ru/en/services/cloud/arctape Archive up to 40 TB (30 cartridges)1500 RUB/month Archive up to 133 TB (100 cartridges)1200 RUB/month Archive up to 399 TB (300 cartridges)900 RUB/month Archive up to 665 TB (500 cartridges)750 RUB/month Сравним. Возьмём диск на 10 TB, 5 штук - по 23 тыр, соберём из них raid-5 на 40 TB, это 5*23=115 тыр. делим 115000/1500 = 6.3 года. MBTF у диска 285 лет. Ну я даже не знаю, что тут сказать... Может ещё электроэнергию посчитать? Но диски можно и остановить программно... Обзор сервисов хранения файлов: 2018-01, https://www.pcmag.com/roundup/306323/the-best-cloud-storage-providers-and-file-syncing-services Обзор онлайн-сервисов по бекапу: 2018-05, https://www.lifewire.com/online-backup-services-reviewed-2624712 у DropBox стоимость 20$/пользователя в месяц (~1300 рублей) при нелимитированном объёме (хм, получается, что у того ленточного хранилища цены в принципе сравнимые) https://www.google.com/drive/pricing/ 10 TB = 6990 RUB / month 40 TB = 27960 RUB / month ... |
24-05-2018 03:56 ответить перенести в VK |
eskimo82 |
ЭФ>Сравним. Возьмём диск на 10 TB ... соберём из них raid-5 на 40 TB и вскоре начнем перманентно ожидать перестроение райда из-за деградации. У современных ширпотребных дисков большой емкости слишком большая удельная вероятность ошибки. Такая, что диски обьемом больше 1-2Tb не рекомендуются к использованию в RAID5/50/60 etc. The reason why RAID 5 might not be reliable for large disk sizes is that statistically, storage devices (even when they are working normally) are not immune to errors. This is what is termed UBE (sometimes URE), for Unrecoverable Bit Error rate, and it is quoted in full-sector errors per number of bytes read. For consumer rotational hard disk drives, this metric is normally specified at 10^-14, meaning that you will get one failed sector read per 10^14 bytes read. (Because of how exponents work, 10^-14 is the same thing as one per 10^14.) 10^14 bytes might sound like a big number, but it's really just a handful of full read passes over a modern large (say 4-6 TB) drive. With RAID 5, when one drive fails, there exists no redundancy whatsoever, which means that any error is non-correctable: any problem reading anything from any of the other drives, and the controller (whether hardware or software) won't know what to do. At that point, your array breaks down. На этой (неожиданной) ноте повторим паузу, до того момента когда вы сделаете оценку по оптическим дискам. |
28-05-2018 03:02 ответить перенести в VK |