Программное обеспечение XenData для ленточных и облачных библиотек

Программные продукты XenData Archive Series X32 и X64 Editions могут управлять одной или несколькими автоматизированными ленточными библиотеками на базе Windows-сервера и создавать цифровые видео архивы, оптимизированные под требования современной медиа-индустрии с учетом необходимости разумного бюджетирования. Решения на базе X32 и X64 проверены множеством заказчиков и используются множеством компаний по всему миру

Решения на базе X32 и X64 обладают высокой производительностью, гарантированными процедурами многоразового чтения\записи в режиме реального времени. Кроме того, решение представляет цифровой видео архив в качестве стандартной файловой системы Windows, что позволяет использовать ее в сочетании с множеством программ и приложений. Создаваемый видео архив также может быть масштабирован от терабайт к петабайтам. Для структур, работающих с особенно большими объемами информации, решение может быть построено на базе MX64 Edition XenData Archive Series, функционирующего на нескольких серверах для обеспечения исключительно высокого уровня передачи данных

Версия 7 программного обеспечения XenData Archive Series доступна в двух редакциях:

❖ LTO Server Edition / Серверная версия LTO

❖ Cloud File Gateway Edition / Версия облачного файлового шлюза

Версия LTO Server Edition может быть расширена за счет добавления программных расширений. К ним относятся расширение Optical Disc Archive, которое добавляет возможность архивирования на накопители и библиотеки Sony Optical Disc Archive, а также расширение Cloud File Gateway, которое добавляет возможность архивирования в облачное хранилище

Управление многоуровневой библиотекой

Программное обеспечение XenData Archive Series работает в операционной системе Windows и обеспечивает высокопроизводительное архивирование на ленточные картриджи LTO, картриджи Sony Optical Disc Archive (ODA) и облачное хранилище, в том числе в Azure Blob Storage, Amazon S3 и Wasabi S3. Файлы представлены в стандартной структуре файлов/папок, которые могут использоваться совместно по сети. Этот непатентованный подход к интерфейсу означает, что приложения на основе файлов могут записывать и читать из LTO, ODA или облачного хранилища без модификации. API-интерфейсы также доступны для взаимодействия с архивом, но они не требуются, что позволяет избежать необходимости изменять каждое приложение, использующее архив

Сервер, на котором используется программное обеспечение Archive Series, всегда включает в себя выделенный том управляемого диска, который используется программным обеспечением XenData для повышения производительности. Выделенный том диска используется для хранения метаданных файловой системы, кэширования файлов для чтения и записи, а также для хранения файлов, которые должны храниться в сети

Программное обеспечение LTO Server Edition из серии Archive Series может быть лицензировано для управления одной или несколькими роботизированными библиотеками LTO и/или одним или несколькими автономными дисками LTO. После установки расширения архива оптических дисков программное обеспечение может быть лицензировано для поддержки одной или нескольких роботизированных библиотек ODA и/или автономных накопителей ODA. После установки расширения Cloud File Gateway, с расширением архива оптических дисков или без него, программное обеспечение Archive Series можно лицензировать для поддержки одной или нескольких учетных записей Object Storage. На рисунке ниже показана система со всеми типами хранилищ, подключенных и управляемых программным обеспечением

Программное обеспечение Archive Series поддерживает три уровня многоуровневого хранения:

❖ Online, с экземпляром файла в дисковом кеше. Онлайн-файлы считываются непосредственно из дискового кеша. Когда файлы находятся в сети, также могут быть дополнительные экземпляры файла в LTO, ODA или хранилище объектов, и в этом случае время хранения файла на диске определяется определяемыми пользователем политиками хранения диска

❖ Near-line, по крайней мере, с одним экземпляром файла на доступном картридже LTO, картридже ODA или в учетной записи Object Storage и без экземпляра на кэш-диске. Картридж LTO или ODA будет находиться в подключенной роботизированной библиотеке или на автономном диске. При чтении околострочных файлов они восстанавливаются из LTO, ODA или объектного хранилища. Политики хранения диска определяют, как долго файл будет храниться в кэше диска после его чтения

❖ Offline, без экземпляра на кэш-диске и с одним или несколькими экземплярами на картриджах LTO или ODA, все из которых были экспортированы с доступных дисков и библиотек. Попытка прочитать файл, находящийся в этом состоянии, завершится неудачей, и будет доставлено сообщение, информирующее пользователя об идентификаторах картриджей, содержащих данные

Независимо от количества роботизированных библиотек LTO или ODA, количества автономных дисков LTO или ODA и количества учетных записей Object Storage, управляемых программным обеспечением Archive Series, все файлы в архиве отображаются в пределах одной буквы логического диска Windows на сервере независимо от того, находятся ли эти файлы в кэше диска, в оперативном или автономном хранилище

Запись файлов в архив

Файловая система, управляемая программным обеспечением Archive Series, отображается как одна буква логического диска. Доступ к нему можно получить через сетевой ресурс или через приложение, работающее на том же компьютере, что и Программное обеспечение серии Архив. Когда файлы записываются в систему, они всегда сначала записываются на кэш-диск, как показано ниже для системы с одной библиотекой LTO

После завершения копирования файла на диск он будет записан в архивное хранилище (картриджи LTO/ODA или облачное хранилище)

Когда файл был записан в назначенное ему место, он становится доступным для сброса из кэша. После сброса полный файл больше не сохраняется в дисковом кеше. Сброшенный файл имеет все те же свойства, что и исходный, за исключением того, что установлен атрибут Microsoft offline, указывающий, что полный файл больше не доступен немедленно. Операция сброса освобождает место на кэш-диске, поскольку размер представления файла на диске составляет всего несколько килобайт

Сброс файла может быть запланирован сразу после того, как файл будет успешно записан в LTO, ODA или облачное хранилище. В качестве альтернативы, это может быть запланировано на определенное время после того, как файл был записан или прочитан в последний раз. Другой вариант заключается в том, что некоторые файлы могут постоянно храниться в кэше диска, а также записываться в архивное хранилище. Правила, определяющие, как долго полный файл будет храниться на диске, определяются с помощью консоли управления многоуровневым хранилищем. Правила хранения могут быть разными для разных типов файлов и для разных папок

Чтение файлов из архива

Когда дело доходит до чтения файлов, они легко восстанавливаются независимо от того, хранится ли файл в дисковом кеше или в ближней линии LTO, ODA или в облачном хранилище. В показанном ниже случае, когда экземпляры файла есть как на диске, так и в LTO, ODA или Object Storage, файл просто восстанавливается с диска

Когда файл сбрасывается с кэш-диска и полный файл находится в ближайшем LTO, ODA или облачном хранилище, он автоматически восстанавливается непосредственно из архивного хранилища

Offline файлы появляются в файловой системе Windows, но когда к ним обращается программа, возвращается сообщение, указывающее, что файл недоступен. Кроме того, программное обеспечение Archive Series помещает в журнал событий Windows сообщение, в котором указывается, какие картриджи с данными содержат файл

Когда XenData Alert Module сконфигурировано, также генерируются экранные сообщения и оповещения по электронной почте, в которых указывается имя файла и картриджи, содержащие файл

Основные функции:

❖ Стандартный файловый интерфейс. Система, работающая с программным обеспечением Archive Series, принимает все типы файлов — от MXF до документа WORD — и представляет их в единой структуре файлов/папок Windows. Файлы записываются и извлекаются из архива так же, как со стандартного дискового тома или сетевого ресурса

❖ Стандартные сетевые протоколы. Помимо поддержки сетевых протоколов CIFS/SMB, NFS и FTP, к нему можно получить локальный доступ в виде буквы логического диска

❖ Удаленный доступ. Добавление интерфейса сервера S3 позволяет обращаться к архиву как к облачному хранилищу. Используя этот интерфейс, файлы можно записывать и считывать из архива из любой точки мира, используя быстрый и безопасный протокол HTTPS. Эта функциональность требует дополнительной лицензионной подписки

❖ Управляет дисковым кэшем. Пользователь определяет политики дискового кэширования, которые можно настроить для разных типов файлов и папок, что позволяет сохранять на диске часто используемые файлы

❖ Поддерживает ленточные форматы LTFS и TAR. Это позволяет избежать проприетарных форматов и привязки к вендору

❖ Поддержка картриджей WORM LTO и ODA

❖ Картриджи LTO и ODA с описанием. Каждый картридж LTO или ODA содержит все метаданные файловой системы, необходимые для восстановления всех хранящихся на нем файлов. Это позволяет легко перемещать отдельные картриджи LTO и ODA между архивными системами

❖ Репликация картриджей LTO. Программное обеспечение автоматически создает реплики картриджей LTO, которые можно экспортировать из библиотеки для хранения вне офиса

❖ Динамическое расширение групп картриджей LTO и ODA. Система будет динамически расширять группы картриджей LTO и ODA в соответствии с потребностями в емкости. Это означает, что система работает автоматически с библиотекой LTO или ODA без необходимости вмешательства человека

❖ Checksum Verification. Программное обеспечение Archive Series реализует автоматическую операцию контрольной суммы для всех данных, записываемых в LTO, хранилище BLOB-объектов Azure, Amazon S3 и Wasabi S3

❖ Перенос картриджа LTO. Можно настроить определяемые пользователем политики, чтобы разрешить или запретить перенос файлов на несколько картриджей LTO. Кроме того, передача нескольких файлов и папок будет автоматически распределяться между несколькими картриджами

❖ Ручной выбор и сброс файлов из дискового кэша. Операция предварительной выборки создает экземпляр файла в дисковом кэше, копируя его из LTO, ODA или Object Storage. Операция сброса удаляет данные файла с диска на свободное место, заменяя их файлом-заглушкой

❖ Оптимизация при восстановлении. Система восстанавливает очередь файлов в кратчайшие сроки из LTO и ODA. Запросы на восстановление обрабатываются в порядке, сводящем к минимуму ненужное перемещение ленты и замену дисков ODA. Это значительно сокращает общее время восстановления при восстановлении нескольких небольших файлов из LTO или ODA

❖ Частичное восстановление файлов. При работе с очень большими файлами часто требуется прочитать только часть файла. Например, это часто происходит с многогигабайтными видеофайлами, когда запрашивается короткий клип. Программное обеспечение Archive Series поддерживает частичное восстановление файлов (PFR) из LTO, ODA и Object Storage на основе запросов на восстановление файлов с указанными диапазонами байтов. Сопутствующий продукт, XenData Workflow API, расширяет эту функциональность, обеспечивая PFR на основе диапазонов временного кода

❖ Переход с одного типа хранилища на другой. Функция переупаковки позволяет переносить файлы, хранящиеся в одном типе хранилища, в другой без изменения имени файла и пути. Примеры: переход от одного поколения LTO к более позднему поколению; миграция с LTO в облачное хранилище

❖ Оптимизация емкости LTO и ODA. Перезаписываемые картриджи LTO и ODA можно переупаковать, чтобы восстановить место из удаленных и перезаписанных файлов

❖ Управление версиями файлов. Программное обеспечение обеспечивает всесторонний контроль версий файлов, когда файлы хранятся в LTO или ODA. Это означает, что удаленные файлы и старые версии файлов могут быть восстановлены из LTO или ODA (если только файлы не были очищены с помощью операции переупаковки)

❖ Локальная синхронизация файлов и папок. Утилита FS Mirror синхронизирует любую структуру файлов и папок на доступном сетевом ресурсе или на локальном компьютере с архивным томом и наоборот. Эта функциональность лицензируется отдельно

❖ Глобальная синхронизация нескольких архивов LTO или ODA. Добавление интерфейса сервера S3 и службы синхронизации XenData связывает несколько архивов LTO, создавая единую глобальную файловую систему, доступную из любой точки мира. Эта функциональность требует дополнительных лицензионных подписок

❖ Резервное копирование и восстановление метаданных. Предоставляется утилита резервного копирования и восстановления метаданных файловой системы, которая обеспечивает быстрое восстановление системы в случае восстановления после сбоя дискового кэша

❖ Отправка предупреждений. В комплект входит программный модуль, обеспечивающий отправку предупреждений по электронной почте и на экран. Они адаптированы к потребностям системных операторов, системных администраторов и персонала ИТ-поддержки

❖ Системные отчеты. Генератор отчетов позволяет создавать, сохранять и восстанавливать различные отчеты о файлах, управляемых системой

❖ Стандартная безопасность файлов. Многоуровневое хранилище, управляемое программным обеспечением Archive Series, полностью интегрируется с моделью безопасности Microsoft Windows, основанной на Active Directory. Решение можно установить в домене или рабочей группе

При использовании расширения для облачных решений Cloud File Gateway доступны следующие функции:

❖ Поддерживает импорт объектов, созданных сторонними приложениями. Контейнеры или корзины, созданные сторонними приложениями, такими как Azure Storage Explorer, AzCopy или Wasabi Explorer, можно импортировать в файловую систему шлюза

❖ Планировщик выгрузки в облачное хранилище. Оптимизирует временные окна выгрузки, откладывая копирование в облачное хранилище, что позволяет оптимизировать пропускную способность Интернета при высокой нагрузке

❖ Шифрование. Все данные, передаваемые между облачным хранилищем и Cloud File Gateway, используют протокол связи HTTPS с шифрованием на уровне защищенных сокетов (SSL)

❖ Multi-Site синхронизация. Несколько экземпляров облачного файлового шлюза можно синхронизировать с помощью службы XenData Multi-Site Sync. Она предоставляет глобальную файловую систему, доступную с каждого шлюза и подключенных к ним сетей. Это идеально подходит для совместной работы по всему миру и обмена файлами на нескольких сайтах. Служба Multi-Site Sync обеспечивает немедленную синхронизацию глобальной файловой системы на всех шлюзах