Введение

Формальные усилия, направленные на обеспечение доступности и пригодности для использования цифровой информации, имеющей долгосрочную ценность.

В библиотечной и архивной науке цифровое сохранение — это формальный процесс, обеспечивающий доступность и долгосрочную пригодность для использования цифровой информации, представляющей собой постоянную ценность. Он включает в себя планирование, распределение ресурсов и применение методов и технологий сохранения, а также сочетает в себе политики, стратегии и действия для обеспечения доступа к переформатированному и "цифровому по происхождению" контенту, несмотря на проблемы, связанные с выходом из строя носителей информации и технологическими изменениями. Целью цифрового сохранения является точное воспроизведение аутентифицированного контента с течением времени. Ассоциация библиотечных коллекций и технических служб, секция сохранения и переформатирования Американской библиотечной ассоциации, определила цифровое сохранение как сочетание "политик, стратегий и действий, обеспечивающих доступ к цифровому контенту с течением времени". Согласно глоссарию библиотекаря Harrod's, цифровое сохранение — это метод поддержания "жизнеспособности" цифровых материалов, чтобы они оставались пригодными для использования, поскольку технологический прогресс делает исходные характеристики аппаратного и программного обеспечения устаревшими. Необходимость цифрового сохранения в основном обусловлена относительно коротким сроком службы цифровых носителей. Широко используемые жесткие диски могут выйти из строя через несколько лет по различным причинам, таким как повреждение шпиндельных двигателей, а флеш-память (используемая в SSD, телефонах, USB-накопителях и картах памяти, таких как SD, microSD и CompactFlash) может начать терять данные примерно через год после последнего использования, в зависимости от температуры хранения и объема записанных на нее данных в течение срока службы. В настоящее время доступны архивные диски, но они рассчитаны всего на 50 лет и являются проприетарным форматом, продаваемым только двумя японскими компаниями — Sony и Panasonic. M DISC — это формат на основе DVD, который заявляет о возможности хранения данных в течение 1000 лет, но для записи на него требуются специальные оптические приводы, а для чтения содержащихся на нем данных — все более редкие оптические приводы; кроме того, компания, разработавшая этот формат, обанкротилась. Данные, хранящиеся на магнитных лентах LTO, требуют периодической миграции, поскольку старые ленты не могут быть прочитаны новыми накопителями LTO. RAID-массивы можно использовать для защиты от сбоев отдельных жестких дисков, однако необходимо следить за тем, чтобы не смешивать диски из разных массивов.

Оценка

Архивная оценка (или, альтернативно, отбор) – это процесс выявления записей и других материалов, подлежащих сохранению, посредством определения их постоянной ценности. При принятии этого решения обычно рассматривается несколько факторов. Это сложный и критически важный процесс, поскольку сохранившиеся отобранные записи определят понимание исследователями данного собрания записей или фонда. В модели «Цепочки сохранности» (COP), разработанной проектом InterPARES 2, оценка идентифицируется как A4.2. Архивная оценка отличается от финансовой оценки, определяющей рыночную стоимость. Архивная оценка может проводиться однократно или на различных этапах комплектования и обработки. Макрооценка, представляющая собой функциональный анализ записей на высоком уровне, может выполняться даже до поступления записей в архив для определения того, какие записи следует приобрести. Более детальная итеративная оценка может проводиться в процессе обработки записей. Оценка применяется ко всем архивным материалам, а не только к цифровым. В цифровой среде было предложено сохранять больше записей, чем традиционно сохранялось после оценки аналоговых материалов, главным образом благодаря сочетанию снижения стоимости хранения и наличию развитых средств поиска, позволяющих исследователям находить ценность в записях с низкой информационной плотностью. В аналоговой среде такие записи могли быть уничтожены или сохранена лишь репрезентативная выборка. Однако выбор, оценка и приоритизация материалов должны тщательно рассматриваться с учетом способности организации ответственно управлять всем объемом этих материалов. Библиотекам, и в меньшей степени архивам, часто предлагают одни и те же материалы в нескольких различных цифровых или аналоговых форматах. Они предпочитают выбирать формат, который, по их мнению, обладает наибольшим потенциалом для долгосрочного сохранения содержания. Библиотека Конгресса разработала перечень рекомендуемых форматов для долгосрочного сохранения, которые могут быть использованы, например, при поступлении в Библиотеку экземпляров для депонирования авторских прав непосредственно от издателя.

Идентификация (идентификаторы и описательные метаданные)

В цифровом сохранении и управлении коллекциями обнаружение и идентификация объектов облегчаются использованием присвоенных идентификаторов и точных описательных метаданных. Идентификатор – это уникальный ярлык, используемый для ссылки на объект или запись, обычно представленный в виде числа или строки, состоящей из чисел и букв. Являясь важнейшим элементом метаданных, включаемых в запись базы данных или инвентаризацию, он используется совместно с другими описательными метаданными для различения объектов и их различных экземпляров. Описательные метаданные содержат информацию о содержании объекта, такую как название, автор, тема, дата и т.д.

Другим распространенным способом идентификации файла является его имя. Внедрение протокола именования файлов необходимо для обеспечения согласованности и эффективного обнаружения и извлечения объектов в коллекции, особенно при оцифровке аналоговых носителей. Использование соглашений об именовании файлов, таких как формат 8.3 или стандарт Warez, обеспечит совместимость с другими системами и упростит миграцию данных. Выбор между описательными (содержащими описательные слова и числа) и неописательными (часто случайно сгенерированными числами) именами файлов обычно определяется размером и масштабом коллекции. Однако имена файлов не подходят для семантической идентификации, поскольку они являются непостоянными метками для конкретного местоположения в системе и могут быть изменены без изменения битового профиля цифрового файла.

Совершенство

Краеугольным камнем цифрового сохранения является "целостность данных", под которой понимается гарантия того, что данные "полны и не подверглись изменениям во всех существенных аспектах". Программа, предназначенная для поддержания целостности, призвана "обеспечить точную запись данных в соответствии с первоначальными намерениями и гарантировать их идентичность при последующем извлечении". Следует избегать непреднамеренных изменений данных, и необходимо разработать ответственные стратегии для их выявления и реагирования на них в соответствии с установленными процедурами. Однако, в процессе цифрового сохранения может потребоваться внесение изменений в контент или метаданные посредством разработанных и задокументированных политик. Организации или частные лица могут выбирать сохранение как оригинальных версий контента с проверкой целостности, так и модифицированных версий с соответствующими метаданными сохранения. Принципы обеспечения целостности данных распространяются и на модифицированные версии, поскольку необходимо сохранять и защищать их текущее состояние от непреднамеренных изменений. Целостность записи обеспечивается посредством сохранения на битовом уровне, проверки контрольных сумм и ведения полного журнала всех действий по сохранению, выполненных с этой записью. Эти стратегии обеспечивают защиту от несанкционированных или случайных изменений.

Фиксированность

Фиксированность файла – это свойство цифрового файла оставаться неизменным. Проверка фиксированности файла – это процесс подтверждения того, что файл не был изменен или изменен по сравнению с предыдущим состоянием. Эта задача часто обеспечивается созданием, проверкой и управлением контрольными суммами. Хотя контрольные суммы являются основным механизмом мониторинга фиксированности на уровне отдельных файлов, важным дополнительным аспектом мониторинга фиксированности является учет файлов. В то время как контрольные суммы определяют, был ли файл изменен, учет файлов определяет, был ли файл в заданной коллекции создан, удален или перемещен. Отслеживание и отчетность об учете файлов является фундаментальным компонентом управления цифровыми коллекциями и обеспечения фиксированности.

Характеристика

Характеризация цифровых материалов — это определение и описание типа файла и его ключевых технических характеристик, которые часто фиксируются в технических метаданных, отражающих технические атрибуты, такие как среда создания или производства.

Устойчивость

Цифровая устойчивость охватывает широкий спектр вопросов и проблем, способствующих долговечности цифровой информации. В отличие от традиционных, временных стратегий и более надежных решений, цифровая устойчивость подразумевает активный и непрерывный процесс. Цифровая устойчивость делает акцент не столько на конкретном решении или технологии, сколько на создании гибкой инфраструктуры и подхода, ориентированного на совместимость, постоянное обслуживание и непрерывное развитие. Цифровая устойчивость включает в себя действия, предпринимаемые сегодня для обеспечения доступа и доступности в будущем. Непрерывное обслуживание, необходимое для цифрового сохранения, сопоставимо с успешным, веками продолжающимся, общественным уходом за Уффингтонским Белым Конем (по мнению Стюарта М. Шибера) или святилищем Исэ (по мнению Джеффри Шнаппа).

Рентабельность

Воспроизводимость относится к сохраняющейся способности использовать и получать доступ к цифровому объекту с сохранением его основных значимых характеристик.

Устаревание физических носителей

Устаревание физических носителей может наступить, когда для доступа к цифровому контенту требуются внешние зависимости, которые больше не производятся, не обслуживаются и не поддерживаются. Внешние зависимости могут включать в себя аппаратное обеспечение, программное обеспечение или сами физические носители. Например, ленты DLT использовались для резервного копирования и сохранения данных, но в настоящее время не применяются.

Устаревшее формат

Устаревание формата файла может произойти, когда внедрение новых форматов кодирования вытесняет использование существующих форматов, или когда связанные с ними средства просмотра становятся недоступными. Хотя используемые форматы файлов будут различаться в зависимости от возможностей архивных учреждений, в профессиональном сообществе существует общепринятое мнение, что выбранные форматы файлов должны быть "открытыми, стандартными, не проприетарными и хорошо зарекомендовавшими себя" для обеспечения долгосрочного архивного хранения. При выборе устойчивых форматов файлов следует учитывать такие факторы, как раскрытие информации, степень распространения, прозрачность, самодокументируемость, внешние зависимости, влияние патентов и механизмы технической защиты. Дополнительные критерии выбора устойчивых форматов файлов включают "долговечность и зрелость формата, адаптацию в соответствующих профессиональных сообществах, интеграцию информационных стандартов и долгосрочную доступность необходимого программного обеспечения для просмотра". "Глубокое понимание существенных характеристик цифровых объектов критически важно для разработки передовых практик цифрового сохранения. Это помогает в оценке и отборе, процессах, в ходе которых принимается решение о том, какие существенные характеристики цифровых объектов стоит сохранять; это способствует разработке метаданных сохранения, оценке различных стратегий сохранения и определяет дальнейшую работу по разработке общих стандартов в сообществе сохранения".

Подлинность

Будь то аналоговые или цифровые, архивы стремятся сохранять записи как достоверное отражение того, что было первоначально получено. Подлинность определяется как «…достоверность записи как таковой; то есть качество записи, которое соответствует заявленному и не подвергалось изменениям или повреждениям». Подлинность не следует путать с точностью; неточная запись может быть приобретена архивом, и ее подлинность будет сохранена. Содержание и смысл этой неточной записи останутся неизменными. Для обеспечения и предоставления доказательств того, что смысл записей не был изменен на протяжении всего времени их хранения в архиве, может использоваться сочетание политик, процедур безопасности и документации.

Доступ

Усилия по цифровому сохранению в основном направлены на обеспечение возможности принятия решений в будущем. Если архив или библиотека выберет ту или иную стратегию, содержание и связанные с ним метаданные должны сохраняться, чтобы позволить действующей стороне принимать или не принимать решения по своему усмотрению.

Метаданные сохранения

Метаданные сохранения являются ключевым фактором обеспечения цифрового сохранения и включают техническую информацию об цифровых объектах, сведения о компонентах цифрового объекта и его вычислительной среде, а также информацию, документирующую процесс сохранения и правовые основания. Они позволяют организациям и частным лицам отслеживать историю владения и ответственности. Preservation Metadata: Implementation Strategies (PREMIS) – это общепринятый стандарт, определяющий основные, реализуемые метаданные сохранения, необходимые большинству репозиториев и учреждений. Он содержит рекомендации и руководства по их использованию, а также разработан общий словарь терминов для сообщества.

Сохранение цифровой информации (1996)

Проблемы долгосрочного сохранения цифровой информации признаются архивным сообществом на протяжении многих лет. В декабре 1994 года Группа исследовательских библиотек (RLG) и Комиссия по сохранению и доступу (CPA) сформировали целевую группу по архивированию цифровой информации с основной целью изучения мер, необходимых для обеспечения долгосрочного сохранения и непрерывного доступа к цифровым записям. Окончательный доклад, опубликованный целевой группой (Garrett, J. and Waters, D., ed. (1996). "Preserving digital information: Report of the task force on archiving of digital information"), стал фундаментальным документом в области цифрового сохранения, который помог сформулировать ключевые концепции, требования и задачи. Целевая группа предложила разработку национальной системы цифровых архивов, которая взяла бы на себя ответственность за долгосрочное хранение и доступ к цифровой информации; ввела понятие доверенных цифровых репозиториев и определила их роли и обязанности; выявила пять характеристик целостности цифровой информации (содержание, неизменность, референция, происхождение и контекст), которые впоследствии были включены в определение информации о сохранении в Справочной модели открытой архивной информационной системы; и определила миграцию как важнейшую функцию цифровых архивов. Концепции и рекомендации, представленные в докладе, заложили основу для дальнейших исследований и инициатив в области цифрового сохранения.

ОАИС

Для стандартизации практики цифрового сохранения и предоставления набора рекомендаций по внедрению программ сохранения была разработана и опубликована в 2012 году Референтная модель открытой архивной информационной системы (ОАИС). ОАИС охватывает все технические аспекты жизненного цикла цифрового объекта: прием, архивное хранение, управление данными, администрирование, доступ и планирование сохранения. Модель также рассматривает вопросы метаданных и рекомендует прикреплять к цифровому объекту пять типов метаданных: идентификационная информация, происхождение (включая историю сохранения), контекст, достоверность (индикаторы подлинности) и представление (формат, структура файла и то, что придает смысл битовому потоку объекта).

Доверенная модель цифрового репозитория

В марте 2000 года Группа исследовательских библиотек (RLG) и Центр компьютерных библиотек онлайн (OCLC) начали сотрудничество с целью определения характеристик цифрового репозитория для исследовательских организаций, опираясь на развивающийся международный стандарт – Референтную модель для открытой архивной информационной системы (OAIS). В 2002 году они опубликовали работу "Надежные цифровые репозитории: атрибуты и обязанности". В этом документе "Надежный цифровой репозиторий" (TDR) определяется как "репозиторий, миссия которого – обеспечение надежного и долгосрочного доступа к управляемым цифровым ресурсам для определенного сообщества пользователей, как сейчас, так и в будущем". TDR должен обладать следующими семью характеристиками: соответствие Референтной модели для открытой архивной информационной системы (OAIS), административная ответственность, организационная устойчивость, финансовая состоятельность, технологическая и процедурная целесообразность, безопасность системы, процедурная подотчетность. Модель Надежного цифрового репозитория описывает взаимосвязь между этими характеристиками. В докладе также рекомендовано совместное развитие сертификации цифровых репозиториев, моделей для кооперативных сетей и обмен исследованиями и информацией о цифровом сохранении, в том числе в отношении прав интеллектуальной собственности. В 2004 году Генри М. Гладни предложил альтернативный подход к сохранению цифровых объектов, заключающийся в создании "Достоверных цифровых объектов" (TDO). TDO – это цифровые объекты, способные подтверждать свою подлинность, поскольку они содержат запись, фиксирующую историю их использования и изменений, что позволяет будущим пользователям удостовериться в целостности содержимого объекта.

InterPARES

Международное исследование постоянных аутентичных записей в электронных системах (InterPARES) – это совместная исследовательская инициатива, возглавляемая Университетом Британской Колумбии, которая направлена на решение проблем долгосрочного сохранения подлинных цифровых записей. Исследование проводится фокус-группами из различных учреждений в Северной Америке, Европе, Азии и Австралии с целью разработки теорий и методологий, которые послужат основой для стратегий, стандартов, политик и процедур, необходимых для обеспечения достоверности, надежности и точности цифровых записей с течением времени. Под руководством профессора архивоведения Лучианы Дюранти проект начался в 1999 году с первого этапа, InterPARES 1, который продлился до 2001 года и был сосредоточен на определении требований к подлинности неактивных записей, создаваемых и поддерживаемых в крупных базах данных и системах управления документами, разработанных государственными учреждениями. InterPARES 2 (2002–2007) был посвящен вопросам надежности, точности и подлинности записей на протяжении всего их жизненного цикла, а также исследовал записи, созданные в динамичных условиях в ходе художественной, научной и онлайн-деятельности государственных органов. Третий пятилетний этап (InterPARES 3) был начат в 2007 году. Его цель – использовать теоретические и методологические знания, полученные в рамках InterPARES и других исследовательских проектов в области сохранения, для разработки руководств, планов действий и учебных программ по долгосрочному сохранению подлинных записей для малых и средних архивных учреждений.

Вызовы

Наследие общества было представлено на различных носителях, включая камень, пергамент, бамбук, шелк и бумагу. В настоящее время значительный объем информации существует в цифровой форме, такой как электронные письма, блоги, социальные сети, веб-сайты национальных выборов, онлайн-фотоальбомы и ресурсы, содержание которых изменяется со временем. Цифровые медиа упрощают создание и обновление контента, но одновременно возникают серьезные проблемы с его сохранением – как технические, так и экономические. В отличие от традиционных аналоговых объектов, таких как книги или фотографии, где пользователь имеет непосредственный доступ к контенту, цифровой объект всегда требует программной среды для отображения. Эти среды быстро развиваются и меняются, что угрожает непрерывности доступа к информации. Физические носители, форматы данных, аппаратное и программное обеспечение устаревают, создавая значительные риски для сохранности контента. В многих случаях появления новых технологий возникают существенные трудности в поддержании подлинности, неизменности и целостности объектов с течением времени, что связано с недостатком опыта работы с конкретными цифровыми носителями. И хотя некоторые технологии могут оказаться более надежными с точки зрения емкости хранения, обеспечение комплекса мер для сохранения неизменности объекта в процессе управления представляет собой сложную задачу. Особую проблему при сохранении программного обеспечения как цифрового контента представляет обычно недоступность исходного кода, поскольку коммерческое программное обеспечение обычно распространяется только в скомпилированном двоичном виде. Без исходного кода адаптация (портирование) на современное оборудование или операционные системы зачастую невозможна, поэтому требуется эмуляция исходной аппаратной и программной среды. Еще одной потенциальной проблемой сохранения программного обеспечения является авторское право, которое часто запрещает обход механизмов защиты от копирования (Закон о цифровом тысячелетии об авторском праве), особенно в случае, когда программное обеспечение становится «сиротским» (Abandonware). В 2003 году была одобрена временная отмена действия некоторых положений Закона о цифровом тысячелетии об авторском праве, разрешающая обход защиты от копирования для Internet Archive, который создал архив «старинного программного обеспечения» с целью его сохранения. Эта отмена была продлена в 2006 году, а с 2009 года действует бессрочно, в ожидании дальнейших нормативных актов «для целей сохранения или архивного воспроизведения опубликованных цифровых произведений библиотеками и архивами». Программа архива GitHub сохраняет весь открытый исходный код GitHub в защищенном хранилище на Шпицбергене, на замороженном норвежском острове, в составе Арктического мирового архива, кодируя его в виде QR-кодов. Каждый твит состоит из 50 полей метаданных. Экономические проблемы цифрового сохранения также значительны. Программы сохранения требуют существенных первоначальных инвестиций, а также постоянных затрат на прием данных, управление данными, хранение данных и оплату труда персонала. Ключевой стратегической проблемой является то, что, несмотря на значительное текущее и постоянное финансирование, выгоды от этих программ в основном получают будущие поколения.

Слои архивирования

Различные уровни безопасности можно представить в виде трех слоев: "горячий" (доступные онлайн-репозитории) и "теплый" (например, Интернет-архив) слои имеют общий недостаток – зависимость от электроники, и оба они будут уничтожены в случае повторения мощной геомагнитной бури XIX века, известной как "Событие Каррингтона". Арктический мировой архив, хранящийся на специально разработанной пленке с галоидным серебром и рассчитанный на срок службы более 500 лет, представляет собой более надежный способ сохранения данных, с архивированием, планируемым каждые пять лет. Существует ряд дополнительных стратегий, которые отдельные лица и организации могут использовать для активной защиты от потери цифровой информации.

Освежает

Обновление — это передача данных между двумя копиями одного и того же носителя информации для предотвращения повреждения данных или их изменения со временем.

Репликация

Создание дублирующих копий данных в одной или нескольких системах называется репликацией. Данные, существующие в единственном экземпляре в одном месте, крайне уязвимы к сбоям программного или аппаратного обеспечения, преднамеренным или случайным изменениям, а также к стихийным бедствиям, таким как пожары, наводнения и т.п. Цифровые данные имеют больше шансов сохраниться, если они реплицированы в нескольких местах. Реплицированные данные могут создавать сложности при обновлении, миграции, версионировании и контроле доступа, поскольку данные распределены по нескольким местам. Понимание цифрового сохранения предполагает понимание того, как создается и воспроизводится цифровая информация. Поскольку цифровую информацию (например, файл) можно точно скопировать до уровня бита, возможно создание идентичных копий данных. Точные дубликаты позволяют архивам и библиотекам управлять, хранить и обеспечивать доступ к идентичным копиям данных в различных системах и/или средах.

Эмуляция

Эмуляция – это воспроизведение функциональности устаревшей системы. По словам ван дер Ховена, «Эмуляция фокусируется не на цифровом объекте, а на аппаратной и программной среде, в которой объект отображается. Она направлена на (воссоздание) среды, в которой цифровой объект был первоначально создан». Примерами служат возможность копирования или имитации другой операционной системы. К таким примерам относятся эмуляция Atari 2600 на системе Windows или эмуляция WordPerfect 1.0 на Macintosh. Эмуляторы могут быть разработаны для приложений, операционных систем или аппаратных платформ. Эмуляция стала популярной стратегией для сохранения функциональности старых игровых систем, как, например, в проекте MAME. Возможность использования эмуляции в качестве универсального решения обсуждается в академическом сообществе (Granger, 2000). Раймонд А. Лори предположил, что универсальный виртуальный компьютер (UVC) может быть использован для запуска любого программного обеспечения в будущем на пока неизвестной платформе. Стратегия UVC использует комбинацию эмуляции и миграции. Стратегия UVC пока не получила широкого распространения в сообществе по цифровому сохранению. Джефф Ротенберг, один из главных сторонников использования эмуляции для цифрового сохранения в библиотеках, в партнерстве с Koninklijke Bibliotheek и Nationaal Archief Нидерландов, разработал программное обеспечение Dioscuri – модульный эмулятор, успешно работающий с MS DOS, WordPerfect 5.1, играми для DOS и другим программным обеспечением. Другой пример эмуляции как формы цифрового сохранения можно увидеть на примере Университета Эмори и архива Салмана Рушди. Рушди передал в дар библиотеке Университета Эмори устаревший компьютер, который был настолько старым, что библиотека не смогла извлечь документы с жесткого диска. Чтобы получить доступ к документам, библиотека эмулировала старую программную систему и смогла скопировать документы со старого компьютера.

Инкапсулирование

Этот метод утверждает, что сохраненные объекты должны быть самоописывающимися, фактически "связывая контент со всей информацией, необходимой для его расшифровки и понимания". Эта информация может быть использована в будущем при разработке эмуляторов, средств просмотра или конвертеров с помощью машиночитаемых спецификаций. Метод инкапсуляции обычно применяется к коллекциям, которые будут оставаться неиспользуемыми в течение длительного времени. Это позволяет заменять аппаратные или программные компоненты с минимальным влиянием на систему сохранения. Этот метод может быть основан на виртуальных сетях данных и напоминает информационную модель OAIS (в частности, архивный информационный пакет).

Приложение метаданных

Метаданные – это данные о цифровом файле, включающие информацию о создании, правах доступа, ограничениях, истории сохранения и управлении правами. Метаданные, связанные с цифровыми файлами, могут пострадать от устаревания формата файла. ASCII считается наиболее надежным форматом для метаданных, поскольку он широко распространен, обратно совместим при использовании с Unicode и использует символы, читаемые человеком, а не числовые коды. Он сохраняет информацию, но не сохраняет информацию о ее структуре. Для большей функциональности следует использовать SGML или XML. Оба языка разметки хранятся в формате ASCII, но содержат теги, обозначающие структуру и формат.

Оценка и сертификация репозиториев хранения

Ниже описаны некоторые из основных фреймворков для оценки и сертификации репозиториев цифрового сохранения. Более полный список поддерживается Центром исследовательских библиотек США.

ТРАС

В 2007 году CRL/OCLC опубликовала документ Trustworthy Repositories Audit & Certification: Criteria & Checklist (TRAC), позволяющий цифровым репозиториям оценить свою способность надежно хранить, мигрировать и обеспечивать доступ к цифровому контенту. TRAC основан на существующих стандартах и лучших практиках для надежных цифровых репозиториев и включает в себя набор из 84 критериев аудита и сертификации, сгруппированных в три раздела: организационная инфраструктура, управление цифровыми объектами и технологии, техническая инфраструктура и безопасность. TRAC "предоставляет инструменты для аудита, оценки и возможной сертификации цифровых репозиториев, определяет требования к документации для проведения аудита, описывает процесс сертификации и устанавливает соответствующие методики для оценки надежности и устойчивости цифровых репозиториев".

Драмбора

Метод аудита цифровых репозиториев на основе оценки рисков (DRAMBORA), разработанный Центром цифрового кураторства (DCC) и DigitalPreservationEurope (DPE) в 2007 году, предоставляет методологию и инструментарий для оценки рисков цифровых репозиториев. Этот инструмент позволяет репозиториям проводить оценку самостоятельно (самооценку) или передать процесс на аутсорсинг. Процесс DRAMBORA состоит из шести этапов и направлен на определение мандата, характеристику базы активов, выявление рисков, а также оценку вероятности и потенциального влияния этих рисков на репозиторий. Аудитор должен описать и задокументировать роль, цели, политики, деятельность и активы репозитория, чтобы выявить и оценить риски, связанные с этой деятельностью и активами, и определить соответствующие меры для их управления.

Каталог критериев

Немецкая инициатива nestor (сеть экспертов по долгосрочному хранению цифровых ресурсов), финансируемая Министерством образования и научных исследований Германии, разработала каталог критериев для надежных цифровых хранилищ в 2004 году. В 2008 году была опубликована вторая версия этого документа. Каталог, ориентированный главным образом на учреждения немецкого культурного наследия и высшего образования, определяет рекомендации по планированию, внедрению и самооценке надежных цифровых хранилищ длительного хранения. Каталог критериев nestor соответствует терминологии эталонной модели OAIS и состоит из трех разделов, охватывающих вопросы организационной структуры, управления объектами и инфраструктуры и безопасности.

Проект PLANETS

В 2002 году проект PLANETS ("Сохранение и долгосрочный доступ через сетевые услуги"), являющийся частью 6-й рамочной программы ЕС по исследованиям и технологическому развитию, решал ключевые задачи цифрового сохранения. Главной целью проекта PLANETS было создание практических сервисов и инструментов для обеспечения долгосрочного доступа к цифровым культурным и научным ресурсам. Проект Open Planets завершился 31 мая 2010 года. Результаты проекта в настоящее время поддерживаются организацией-правопреемником – Фондом Open Planets. 7 октября 2014 года Фонд Open Planets объявил о переименовании в Фонд Open Preservation, чтобы отразить текущее направление деятельности организации.

ПЛАТЬТ

Инструмент планирования для надежных электронных репозиториев (PLATTER) – это инструмент, разработанный DigitalPreservationEurope (DPE) для помощи цифровым репозиториям в определении собственных целей и приоритетов с целью завоевания доверия заинтересованных сторон. PLATTER предназначен для использования в качестве дополнения к инструментам DRAMBORA, NESTOR и TRAC. Он основан на десяти основополагающих принципах для надежных репозиториев и определяет девять стратегических планов, охватывающих такие области, как комплектование, сохранение и распространение контента, финансы, персонал, планирование преемственности, техническая инфраструктура, спецификации данных и метаданных, а также планирование действий в чрезвычайных ситуациях. Инструмент позволяет репозиториям разрабатывать и поддерживать документацию, необходимую для прохождения аудита.

ISO 16363

Система "аудита и сертификации надежных цифровых репозиториев" была разработана Консультативным комитетом по системам космических данных (CCSDS) и опубликована в качестве стандарта ISO 16363 15 февраля 2012 года. Расширяя референсную модель OAIS и основываясь преимущественно на контрольном списке TRAC, стандарт был разработан для всех типов цифровых репозиториев. Он содержит подробную спецификацию критериев, по которым можно оценить надежность цифрового репозитория. Рабочая группа CCSDS по аудиту и сертификации репозиториев также разработала и представила второй стандарт, определяющий операционные требования к организациям, планирующим предоставлять услуги аудита и сертификации репозиториев в соответствии с ISO 16363. Этот стандарт был опубликован как ISO 16919 – "Требования к организациям, осуществляющим аудит и сертификацию потенциально надежных цифровых репозиториев" – 1 ноября 2014 года.

Лучшая практика

Хотя стратегии сохранения различаются в зависимости от типа материалов и учреждений, следование общепризнанным национальным и международным стандартам и практикам является важнейшей частью деятельности по цифровому сохранению. Передовые или рекомендуемые практики определяют стратегии и процедуры, которые могут помочь организациям внедрять существующие стандарты или предоставлять рекомендации в областях, где формальные стандарты еще не разработаны. Передовые практики в цифровом сохранении постоянно развиваются и могут охватывать процессы, выполняемые с контентом до или в момент его внесения в цифровой репозиторий, а также процессы, выполняемые с сохраненными файлами после внесения с течением времени. Передовые практики также могут применяться к процессу оцифровки аналоговых материалов и могут включать создание специализированных метаданных (таких как технические, административные и правовые метаданные) в дополнение к стандартным описательным метаданным. Сохранение материалов, изначально созданных в цифровом формате, может включать преобразование форматов для обеспечения долгосрочного сохранения или улучшения доступа. Ни одно учреждение не может позволить себе разработать все необходимые программные инструменты для обеспечения долгосрочной доступности цифровых материалов. Таким образом, возникает проблема поддержания репозитория общих инструментов. Библиотека Конгресса занималась этим на протяжении многих лет, пока эту роль не перенял Реестр цифровых инструментов сохранения, находящийся в общественном доступе.

Сохранение видеоигр

В 2007 году в рамках проекта Keeping Emulation Environments Portable (KEEP), входящего в 7-ю рамочную программу ЕС по исследованиям и технологическому развитию, были разработаны инструменты и методологии для обеспечения доступности цифровых программных объектов в их исходном окружении. Цифровые программные объекты, такие как видеоигры, могут быть утрачены из-за цифрового устаревания и недоступности необходимого устаревшего оборудования или программного обеспечения операционной системы; такое программное обеспечение часто называют abandonware. Поскольку исходный код зачастую больше недоступен, эмуляция является единственной возможностью для сохранения. KEEP предоставил платформу для эмуляции, помогающую в создании таких эмуляторов. Проект KEEP был разработан Винсентом Жогеном, впервые представлен в феврале 2009 года и координировался Элизабет Фрейр из Национальной библиотеки Франции. Проект MAME, разрабатываемый сообществом, ставит своей целью эмуляцию любых исторических компьютерных игр, включая аркадные, консольные и другие, на аппаратном уровне для последующего архивирования. В январе 2012 года проект POCOS, финансируемый JISC, организовал семинар по вопросам сохранения игровых сред и виртуальных миров.

Научные исследования

В 2020 году исследователи сообщили в препринте, что они обнаружили "176 журналов открытого доступа, которые из-за отсутствия полных и открытых архивов исчезли из сети между 2000 и 2019 годами, охватывая все основные исследовательские дисциплины и географические регионы мира", и что в 2019 году только около трети из 14 068 журналов, проиндексированных DOAJ, обеспечивали долгосрочное сохранение своего контента. Некоторые результаты научных исследований размещаются не на веб-сайте научного журнала, а на других платформах, таких как репозитории исходного кода, например GitLab. Интернет-архив заархивировал многие – но не все – утраченные научные публикации и сделал их доступными в сети. Согласно анализу Интернет-архива, "18 процентов всех статей открытого доступа, опубликованных с 1945 года, то есть более трех миллионов, не заархивированы нами или другой организацией по сохранению, кроме самих издателей". Недавние достижения в области технологий привели к разработке 3D-рендеринга зданий в виртуальном пространстве. Традиционно здания в видеоиграх приходилось отрисовывать с помощью кода, и многие игровые студии создавали высокодетализированные визуализации (например, в Assassin's Creed). Однако, поскольку большинство специалистов по сохранению не являются высококвалифицированными командами профессиональных программистов, университеты начали разрабатывать методы с использованием 3D-лазерного сканирования. Подобную работу предпринял Национальный тайваньский университет науки и технологий в 2009 году. Их целью было "создать 3D-модели существующего исторического здания, Дом Дона Нан Куана, для удовлетворения потребности в цифровом сохранении". С большим успехом им удалось отсканировать Дом Дона Нан Куана с помощью громоздких камер весом 10 кг (22 фунта) и внести лишь незначительные корректировки в тех местах, где детализация сканеров была недостаточной. Недавно, в 2018 году, в Калве (Германия) команда провела сканирование исторической церкви Святых Петра и Павла, собирая данные с помощью лазерного сканирования и фотограмметрии. "Текущая башня церкви высотой около 64 м, ее архитектурный стиль – неоготика конца XIX века. Церковь включает в себя главный неф, хор и два боковых нефа с трибунами по обе стороны. Церковь имеет богатую историю, которая проявляется в различных элементах и архитектурных стилях. Два небольших окна между хором и башней – самые старые сохранившиеся части, датируемые XIII веком. Церковь была реконструирована и расширена в XVI (расширение нефа) и XVII веках (строительство трибун) после разрушений, вызванных Тридцатилетней войной (1618–1648). Однако церковь была снова сожжена французской армией под командованием генерала Мелака в конце XVII века. Нынешний орган и кафедра сохранились с тех времен. В конце XIX века церковь была перестроена, а старый купол Вельш был заменен нынешней неоготической башней. Другие работы того периода включают верхнюю часть кафедры, скамьи хора и корпус органа. Витражи хора датируются концом XIX и началом XX века, а некоторые окна нефа – серединой XX века. После окончания Второй мировой войны некоторые элементы неоготики были заменены на чисто готические, такие как алтарь церкви, а также некоторые рисунки на стенах и потолке". Такое архитектурное разнообразие представляло собой вызов и возможность объединить различные технологии в большом пространстве для достижения высокого разрешения. Результаты оказались довольно хорошими и доступны для просмотра в сети.

Образование

Программа "Образование и охват в области цифрового сохранения" (DPOE), функционирующая в рамках Библиотеки Конгресса, способствует сохранению цифрового контента посредством совместной сети преподавателей и специалистов по управлению коллекциями, работающих в учреждениях культурного наследия. В состав DPOE входят сотрудники Библиотеки Конгресса, Национальная сеть тренеров, Руководящий комитет DPOE и сообщество сторонников цифрового сохранения. По состоянию на 2013 год в DPOE работали 24 преподавателя в шести регионах Соединенных Штатов. В 2010 году DPOE провела оценку потребностей, обратившись к архивистам, библиотекарям и другим информационным специалистам по всей стране. На основе результатов оценки и аналогичных учебных программ по цифровому сохранению, разработанных такими организациями, как LYRASIS, Educopia Institute, MetaArchive Cooperative, Университет Северной Каролины, DigCCurr (Digital Curation Curriculum) и Корнеллский университет (ICPSR Digital Preservation Management Workshops), рабочая группа преподавателей DPOE разработала учебную программу. Основные принципы этой программы также основаны на принципах, изложенных в документе "A Framework of Guidance for Building Good Digital Collections" Национальной организации по информационным стандартам (NISO). В Европе совместную программу по цифровому кураторству предлагают Гумбольдтский университет в Берлине и Королевский колледж Лондона, уделяя особое внимание как цифровым гуманитарным наукам, так и технологиям, необходимым для долгосрочного сохранения. Программа магистратуры по управлению информацией и сохранению (в цифровой сфере), предлагаемая HATII при Университете Глазго, существует с 2005 года и является пионерской в этой области.

Примеры инициатив

Библиотека Конгресса основала Национальный альянс по цифровому управлению, который сейчас поддерживается Федерацией цифровых библиотек. Британская библиотека отвечает за ряд программ в области цифрового сохранения и является одним из основателей Коалиции по цифровому сохранению и Фонда открытого сохранения. Их стратегия цифрового сохранения находится в открытом доступе. Национальный архив Великобритании также стал инициатором различных проектов в области цифрового сохранения. Центр передового опыта в области цифрового сохранения создан в CDAC, Пуна, Индия, как флагманский проект в рамках Национальной программы цифрового сохранения (NDPP), финансируемой Министерством электроники и информационных технологий правительства Индии. Для поддержки цифрового сохранения разработан ряд продуктов с открытым исходным кодом, включая Archivematica, DSpace, Fedora Commons, OPUS, SobekCM и EPrints. Коммерческий сектор также предлагает программные инструменты для цифрового сохранения, такие как Rosetta от Ex Libris Ltd., Preservica Cloud, Standard и Enterprise Editions, CONTENTdm, Digital Commons, Equella, intraLibrary, Open Repository и Vital.

Масштабные инициативы

Многие исследовательские библиотеки и архивы начали или собираются начать масштабные инициативы по цифровому сохранению (LSDIs). Основными участниками LSDIs являются культурные учреждения, коммерческие компании, такие как Google и Microsoft, и некоммерческие организации, включая Open Content Alliance (OCA), Million Book Project (MBP) и HathiTrust. Главная цель этих организаций – расширить доступ к научным ресурсам. Около 30 культурных учреждений, включая 12-членный Комитет по институциональному сотрудничеству (CIC), заключили соглашения о цифровизации с Google или Microsoft. Некоторые из этих учреждений участвуют в Альянсе открытого контента и проекте «Миллион книг». Часть библиотек участвует только в одной инициативе, а другие диверсифицировали свои стратегии оцифровки, участвуя в нескольких проектах. Три основные причины участия библиотек в LSDIs: обеспечение доступа, сохранение и научно-исследовательская деятельность. Предполагается, что цифровое сохранение обеспечит доступность библиотечных материалов для будущих поколений. Библиотеки несут ответственность за гарантию постоянного доступа к своим фондам и обязаны архивировать свои цифровые материалы. Библиотеки планируют использовать оцифрованные копии в качестве резервных копий на случай, если произведения перестанут издаваться, придут в негодность, будут утеряны или повреждены.

Арктический архив

Арктический мировой архив — это хранилище для сохранения исторических и культурных данных из разных стран, включая исходный код с открытым доступом.