| К началу раздела «Решения для хранилищ данных» | ||
| Более полный поиск по теме Вашего запроса (наберите его в окне поиска) |
Сжатие данных при передаче их удаленным рабочим группам осуществляет
информационный интегратор LogPostman, представленный фирмой «Сигма-Прокси» на выставке «Нефтегаз-2000» в
«Экспоцентре». В частности, для многомерных моделей коэффициент сжатия
может достигать 150. Ряд геофизических
данных, для работы с которыми разработана технология «Сигма», может представлять из себя, например, трехмерную
модель залежей с плавной регулировкой
прозрачности слоев и с возможностью
произвольных вырезов.
Пользователь может регулировать степень
сжатия и, соответственно, уровень погрешности (шума), вносимый в сжимаемый сигнал. Специальный режим позволяет запретить искажение сигнала процедурой сжатия,
но и в этом случае коэффициент упаковки
геофизического материала значительно
выше, чем при применении пассивных алгоритмов Хоффмана. При работе с сигналом
пользователь имеет возможность визуально
оценить качество сжатого сигнала, сравнив с
оригиналом. Для гармонических сигналов
есть возможность сравнения по спектру, фазам, энергиям и др. (см. рисунок).
А.
П. БАРСУКОВ, журнал "ТКТ", № 12, 2000 г. (через эту ссылку можно бесплатно скачать справочник)
|
Из архива-2009. Конференция компании CA: технологии защиты, восстановления и моделирования данных |
8 декабря 2009 года. Среди вопросов,
рассмотренных на конференции - схемы построения репликации данных,
особенности создания и управления системами резервного копирования в
пространственно-распределенных конфигурациях, пути построения
«необслуживаемых» офисов, тенденции развития аппаратного оборудования для
резервного копирования и дедупликации данных. Компания CA
специализируется на разработке программного обеспечения в области
управления ИТ-ресурсами. Была партнером Олимпийских Игр в Америке по обеспечению
информационной безопасности. Разработчик таких популярных продуктов как CA
ARCserve Backup, CA XOsoft, CA Unicenter, CA Storage Resource Manager и т.д. Техническая конференция компании СА «Новейшие
технологии защиты, восстановления и моделирования данных» - уже вторая в 2009 году.
Со вступительным словом к участникам конференции обратилась
Наталья Перова, руководитель направления Recovery Management and Data Modeling в
России и СНГ, CA. Она отметила, что компания CA
остается «законодателем мод» на рынке решений для резервного
копирования. Сейчас ARCserve - это больше, чем резервное копирование. В новой
версии ARCserve Backup rl2.5 включены такие функции как:
■ Дедупликация данных
• Способ снижения объемов памяти для хранения резервных копий данных.
■ Приборная панель и расширенные отчеты (SRM)
• Встроенная функциональность для получения данных о среде резервного
копирования, включая информацию об устройствах и программном
обеспечении для обеспечения хранения данных.
■ Контроль доступа и аудит
• Улучшенная модель разграничения доступа к ресурсам резервного
копирования.
■ Поддержка виртуализации и пофайловое восстановление
• Резервное копирование и восстановление образов и файлов виртуальных
машин, а также пофайловое восстановление с образов.
■ Поддержка Oracle RMAN и 64-битных платформ
■ Управление паролями
• Возможности по управлению паролями помогают защищать шифрованные
копии данных
■ Проверка читаемости лент
• Позволяет удостоверится, что данные на лентах восстановимы
Программа конференции включала также следующие выступления:
■
Перспективы развития программных продуктов CA Arcserve Backup и CA XOsoft (Fritz Arthur, Sr Consultant, Technical Sales CA)
■
Новая функциональность CA Arcserve12.5 (Олег Платонов, директор УЦ Компьютер-Пресс Технологии)
■
Выбор аппаратной архитектуры при построении системы резервного копирования
данных (Синютин Андрей, зам. директора департамента компании "Интерпроком Лан")
■
Линейка продуктов CA - Data Modeling (Thierry Brunet, Principal Consultant, Technical Sales, CA)
■
Примеры использования Erwin и Bpwin (Thierry Brunet, Principal Consultant, Technical Sales, CA)
■
Практические схемы построения систем резервного копирования на базе программных
продуктов CA ARCserve Backup и CA XOsoft (Олег Платонов, директор УЦ Компьютер-Пресс Технологии)
■
Опыт использования программного продукта CA ARCserve Backup в ОАО "Альфа-Банк"
(Олег Сидякин, ОАО "Альфа-Банк")
Обзор продуктов, представленных в материалах конференции
█ CA ARCserve Backup - эффективное средство
защиты данных с широким диапазоном централизованных и удобных в работе
инструментов управления, объединяющее инновационную технологию дедупликации
данных, управление ресурсами хранения (SRM), технологию резервного копирования с
диска на диск с последующим копированием на ленту (D2D2T), резервное копирование
на виртуальные ленточные библиотеки (VTL) и другие всесторонние средства
защиты,
делающие его одним из самых безопасных, надежных и эффективных на рынке
защиты информации, расположенной на физических и виртуальных серверах.
Принимая во внимание огромные объемы данных, которые ежедневно создают,
передают и используют современные предприятия, необходимо, чтобы
организации имели в своем распоряжении средства, позволяющие быстро
возобновить бизнес-процессы в случае аварийной ситуации или разрушения.
И, поскольку зависимость от этих данных возрастает, растут также количество,
вариативность и серьезность рисков, с которыми предприятие сталкивается каждый
день, включая все вирусы, несанкционированно установленное программное
обеспечение и случайное или намеренное повреждение данных в случае
программных сбоев или стихийных бедствий. Для поддержания безопасности и
развития надёжности инфраструктуры, организации необходимы надёжные средства защиты данных, используя которые можно оперативно
восстановить утраченную информацию.
CA ARCserve Backup поможет гарантировать надежность и доступность ваших данных
путем предоставления инструментов, которые обеспечат защиту информации внутри организации. CA ARCserve Backup
поддерживает работу с рядом операционных систем, а также предоставляет ряд следующих основных функций:
▪
Централизованное управление и администрирование Использует
трехуровневую архитектуру, которая позволяет администраторам из
единого центра, охватывающего локальные и удаленные серверы и ресурсы,
управлять, изменять и контролировать процессы резервного копирования и
восстановления, устройства хранения, журналы регистрации и предупреждений,
каталоги, лицензии продукта и отчеты.
▪
Поддержка резервного сохранения и восстановления. Компания предоставляет специальные программные агенты для поддержки основных
приложений и гарантии целостности данных,
путем защиты журнала транзакций, архива, системного журнала и всех связанных
с ними данных.
▪ Гибкие методы резервного копирования Включают резервное копирование
на диски, ленты, D2D2T, поддержку VTL, снапшотов Microsoft Volume ShadowCopy
Service и аппаратных снапшотов; мультиплексирование и многопоточность.
Работая комплексно, эти средства обеспечивают высокую производительность и
безопасность процессов резервного копирования и восстановления, которые
соответствуют определенным потребностям информационных ресурсов
и баз данных.
▪
Эффективные процессы резервного копирования. Используются
запатентованные методы дедупликации данных и SRM, которые исключают
избыточные данные, снижают затраты на хранение, и позволяют сохранять
большее количество точек восстановления для данного диска, а также дают
информацию, помогающую повысить производительность и надежность
систем резервного копирования, хранения и серверных сред.
▪ Интеграция с продуктом CA XOsoft Replication позволяет просмотреть
и сделать копию дублируемых данных, вернуть данные на рабочий или резервный
сервер, создавать синтетические полные резервные копии, просматривать отчеты CA XOsoft
Replication и запускать графический пользовательский интерфейс CA XOsoft
Replication (GUI) из пользовательского интерфейса CA ARCserve GUI.
▪ Оптимизированиое для глобальных сетей резервное копирование удалённых офисов позволяет дублировать офисные данные на
центральном сервере данных и осуществляет надежное резервное копирование
удаленных серверов, что избавляет от необходимости производить локальное
копирование с использованием магнитной ленты.
▪ Защита виртуальных серверов позволяет включать технологии VMware и Microsoft
Hyper-V virtualization в вашу резервную стратегию — это увеличит
гибкость и производительность вашей среды.
▪ Поддержка б4-разрядпых платформ позволяет задействовать
производительность и масштабируемость 64-разрядных платформ на
серверах резервного копирования и защищает приложения, работающие с
64-разрядными операционными системами.
▪
Возможность интеллектуального восстановления данных. Переадресовывает работу по восстановлению другим медиа-средствам,
содержащим аналогичные данные, без какого-либо ручного вмешательства, что
уменьшает возможность ошибок, которые могли бы отрицательно повлиять на
процессы восстановления.
▪
Поддержка инкрементальных и дифференциальных копий средствами VSS сокращает время, требуемое для защиты приложений, которые
поддерживают технологию Microsoft VSS.
Приборная
панель CA ARCserve Backup включает встроенный отчет о ресурсах хранения (SRM),
предоставляющий информацию о текущем положении дел, позволяя контролировать
сервер, сеть и производительность средств хранения данных с одного
централизованного рабочего места
■ Новые Оособенности и функциональные возможности CA ARCserve Backup
rl2.5:
▪ Интегрированная дедупликация данных. Повышает экономический эффект
при резервном копировании на жесткие диски. Экономия достигается за счет
увеличения продолжительности хранения данных на дисках, сокращения
потребности в дисковой памяти для резервных копий, а также возможностью
интегрировать дедупликацию в уже имеющуюся у вас среду резервного
копирования.
▪ Расширенная поддержка виртуализации Позволяет сохранять резервные
копии как на уровне образа, так и на уровне файла в средах VMware и Microsoft
Hyper-V Server 2008. Позволяет составлять расписание полного, на
уровне
образа, и ежедневного инкрементального резервного копирования в соответствии
с вашими нуждами. В дополнение новая «одношаговая» технология
восстановления предоставляет простой и быстрый метод восстановления данных на виртуальных серверах.
▪ Панель отчетов о ресурсах хранения (SRM) Предлагает графическое
представление всей вашей среды резервного копирования со всеми
протекающими в ней процессами. Это позволяет наблюдать за статусом всех
текущих процессов резервного копирования, обнаруживать критические
(занимающие наибольшее время) узлы, быстро находить сохраненные данные,
определять, зашифрованы ли данные и существует ли копия для аварийного
восстановления, а также отслеживать объем доступной дисковой и оперативной
памяти на всех серверах одновременно.
▪ Контроль доступа и аудит. Позволяет интегрировать метод аутентификации
Windows в процессы аудита и контроля ролей. Повышает ваши возможности по
определению и контролю информации о том, кто из пользователей имеет полный
доступ к резервным ресурсам, а кто ограниченный.
▪ Управление ключами шифрования. Обеспечивает возможности управления
паролем для шифровальных ключей, что уменьшает время, затрачиваемое на
восстановление зашифрованных резервных копий, и избавляет от необходимости
постоянно запрашивать пароль при каждом восстановлении.
технология проверки носителей. Проверяет, все ли носители для
резервного копирования обеспечивают чтение и запись данных, а также
формирует отчет об исправности используемых носителей.
▪ Совместимость с Oracle RMAN и 64-разрядными платформами. Поддерживает
и упрощает резервное копирование баз данных Oracle как на 32- разрядных, так и
на 64-разрядных платформах.
▪ Пакеты для удаленной установки агентов. Приложение-помощник позволит одновременно инсталлировать и обновить
CA ARCserve Backup агенты на
нескольких удаленных машинах. Таким образом вы всегда можете быть уверенны
в том, что используете наиболее позднюю версию всех агентов вашей резервной
среды.
■
Взгляд на управление бизнесом в области IT (EITM).
В качестве ключевого компонента Инфраструктуры Управления Восстановлением, CA ARCserve Backup предоставляет функциональные возможности, которые
помогут максимально увеличить производительность, эффективность и
результативность основных мер по восстановлению данных. CA ARCserve Backup
объединяет контроль и управление процессами резервирования, хранения,
обеспечения безопасности и управления сервисами. Он также является составной
частью стратегии СА EITM, которая помогает предприятию объединить, упростить
и обезопасить IT, чтобы успешнее управлять рисками, затратами, обслуживанием
и гарантировать, что меры по восстановлению и обеспечению доступности
информации в точности соответствуют целям бизнеса.
█ Семейство продуктов CA XOsoft помогает сохранять доступность и надежность
ресурсов, обеспечивая высокую
производительность и в то же время защищая активы, которые поддерживают и
предотвращают широкий спектр угроз. Эти продукты помогают вашей организации
понять цели непрерывности бизнес-процесса и аварийного восстановления через:
• Дублирование в режиме реального времени
• Истинную непрерывную защиту данных
• Мониторинг приложений
• Обработку отказа и обработку после отказа
• Автоматизированную проверку восстановления при аварии
• Интеграцию резервного копирования, предлагающую автоматизированное
управление моментальным снимком Microsoft Virtual SourseSafe (VSS)
Семейство продуктов CA XOsoft использует эти качества в трех разных продуктах,
которые объединяются, чтобы предложить возможности, необходимые для
постоянной доступности и восстанавливаемости:
• CA XOsoft™ Replication
• CA XOsoft™
High Availability
• CA XOsoft™ Content Distribution
■ CA XOsoft Replication помогает обеспечить доступность
критических бизнес-систем, приложений и данных даже при неожиданных сбоях и
стихийных бедствиях. Для этого CA XOsoft Replication предлагает непрерывное,
оптимизированное под глобальную сеть дублирование приложений, которое
поддерживает платформы Windows, Linux и UNIX. Имеющаяся в продукте функция
перемотки данных обеспечивает интегрированную постоянную защиту данных, которая
дополняет процессы резервного копирования и восстановления почти мгновенным
восстановлением, что помогает достичь даже самых смелых целей по объему и
времени в отношении всего информационного капитала.
Кроме того, CA XOsoft Replication обеспечивает комплексный инструмент миграции,
который помогает перемещать данные из среды тестирования к производственным
серверам в режиме реального времени и поддерживать синхронизацию, пока вы не
будете готовы перейти к новой системе независимо от того, происходит ли
перемещение
с физического на физический (P2P), с физического на виртуальный (P2V) или с
виртуального на виртуальный (V2V) сервер.
■ Ведущий продукт в семействе CA XOsoft - CA XOsoft
High Availability расширяет возможности CA XOsoft Replication дополнительным контролем в
режиме реального времени и функцией автоматизированной обработки отказа и
обработки после отказа. В дополнение к функциям CA XOsoft Replication, этот продукт
контролирует состояние защищенных приложений и в случае обнаружения проблемы
автоматически сообщает об этом соответствующему IT администратору.
В зависимости от серьезности ситуации и типа задействованной системы, это
предупреждение запускает автоматическую обработку отказа или позволяет
администратору одним нажатием кнопки выполнить обработку отказа или обработку
после отказа. Программное обеспечение также перемещает общие файлы туда, куда
нужно, помогая обеспечивать доступ пользователей к разрешенным приложениям и
данным без заметного снижения эффективности работы.
CA XOsoft
High Availability копирует данные по глобальной сети и контролирует доступность
приложений в режиме реального времени
■ CA XOsoft™ Content Distribution
позволяет
собирать информацию из различных источников, объединять ее в одном месте и
передавать ее внутри всей организации. Продукт поддерживает широкий диапазон
потребностей в распределении данных, в том числе сбор информации из филиалов,
объединение операций для их обработки в центральной базе данных и группировку
распределенных по узлам данных для централизованного резервного копирования и
архивирования.
CA XOsoft™ Content Distribution является подходящим средством для распространения
среди всех корпоративных пользователей такой информации справочного содержания,
как прейскуранты, правила, коммерческие материалы, руководства для пользователей
и
новости. Этот продукт устраняет проблему несогласованности в работе
персонала филиальной сети, оставляя контент в центральном репозитарии, и внося
изменения в целевые серверы вашей организации в соответствии с графиком.
■
Переход непрерывности бизнес-процесса на следующий уровень.
Являясь стандартной функцией CA XOsoft Replication и CA XOsoft
High Availability,
технология постоянной защиты данных CA XOsoft Assured Recovery и CA XOsoft Data
Rewind CDP значительно расширяет возможности семейства продуктов,
позволяя
использовать способы обеспечения непрерывности бизнес-процесса и аварийного
восстановления, которые дают еще большую гарантию доступности и надежности
данных, приложений и системы.
▪ CA XOsoft Assured Recovery упрощает проверку аварийного
восстановления. В 1Т-среде изменения неизбежны - компоненты аппаратных
средств требуют замены,
программное обеспечение требует обновлений, меняется персонал. Поскольку каждое
из
этих действий может оказывать влияние на эффективность или стабильность систем
аварийного восстановления, важно проводить регулярную проверку восстановления.
CA XOsoft Assured Recovery дает возможность проводить оперативную комплексную
проверку, внесенную в график вручную или автоматически, серверов
аварийного
восстановления без нарушения производственной среды и без воздействия на «живые»
активы.
К тому же, эта функция усиливает стороннюю защиту с помощью простого, быстрого
моментального снимка Microsoft VSS, помогая вашей организации восстановить
удаленные файлы или отыскать более ранние версии баз данных. Снимки можно
хранить в виде папок или символов диска, обеспечивая легкий доступ, как через
графический интерфейс, так и через интерфейс командной строки. Вы можете
определять квоты управления моментальными снимками, которые помогают
соотносить использование дискового пространства с потребностями в восстановлении.
Наконец, CA XOsoft Assured Recovery включает поддержку веб-серверов Microsoft
Exchange, SQL Server, SharePoint Server, IIS и сервер базы данных Oracle.
Дополнительная
поддержка для других приложений или дополнительные настройки можно получить
через создание простых сценариев или пакетных файлов.
▪ Технология постоянной защиты данных CA XOsoft Data
Rewind CDP заполняет пробелы в восстановлении Технология дублирования данных в режиме реального
времени является основной особенностью многих решений аварийного восстановления,
и в некоторых случаях она служит первым уровнем защиты организации. Однако у
этого
метода есть одна явная слабая сторона - если данные повреждены на исходном
сервере, то вероятнее всего они будут повреждены и на резервном сервере. А по
причине того, что большинство механизмов дублирования не может определить, когда
та или иная информация не используется, это создает потенциально опасные пробелы
в
защите аварийного восстановления.
Технология CA XOsoft Data
Rewind CDP восполняет пробелы, образующиеся в
результате
повреждения данных, непрерывно фиксируя и храня всю информацию, которая была
переписана на целевых или резервных серверах. Это позволяет создать наиболее
приемлемый способ гранулированного восстановления, при котором можно вернуться
назад к моменту, предшествующему сбою, снижая, таким образом, количество
потерянной или поврежденной информации.
По причине того, что технология CA XOsoft Data
Rewind CDP интегрируется с CA XOsoft Replication и CA XOsoft
High Availability, она включает в себя приоритезацию родных
приложений, которая помогает администраторам определить точку возврата
данных.
К тому же, из-за того, что эта функция усиливает технологии резервного
копирования
или моментального снимка, она снижает использование дискового пространства и
требует, чтобы вы хранили только изменения между резервными копированиями и
моментальными снимками.
■
Все продукты семейства CA XOsoft содержат множество возможностей, которые
слаженно работают с целью обеспечения надежных мер для непрерывности бизнес-процессов и аварийного восстановления. Ключевые возможности семейства продуктов
включают в себя:
- Доступность многоуровневых данных и приложений.
- Легкость в использовании и развертывании.
- Прозрачные и автоматизированные операции.
- Рентабельные процессы.
• Многоуровневое использование данных и приложений. Семейство
Продуктов CA XOsoft предлагает надежную, многоуровневую возможность использования, как
данных, так и приложений через асинхронное дублирование в режиме реального
времени, которое обеспечивает быструю и эффективную передачу данных между
производственным и восстановительным сервером. Кроме того, автоматизированный
контроль аварийного восстановления, поддерживающий приложения, использует
легкодоступные мгновенные снимки VSS, которые обеспечивают опции быстрого
восстановления файлов.
Функции применения и использования дополнительных данных включают в себя:
- Защиту операционной системы через Защиту Состояния Системы и Синхронизацию Реестра.
- Точки общей интеграции для стороннего или объединенного резервного копирования.
- Встроенную технологию перемотки CDP, заполняющую пробелы в защите, которые
образуются после большинства систем дублирования.
- Триггеры перезагрузки или узлов кластера, которые меняются из системы
управления, графического интерфейса пользователя или командной строки.
- Жесткий порядок записи, который гарантирует постоянное дублирование данных.
- Доступ пользователя к элементам Microsoft
Exchange Server, в том числе к
вложениям,
примечаниям и задачам, без помощи администратора.
- Полный поиск и индексацию текста.
• Легкость в использовании и развертывании Поддержка дублирования Р2Р, Р2V и V2V позволяет семейству продуктов CA XOsoft учитывать широкий диапазон
потребностей в отношении непрерывности бизнес-процессов и переноса данных.
Интегрированная поддержка технологии VMware и Microsoft Hyper-V помогает
улучшить надежность и доступность виртуализованных активов. Кроме того,
поддержка таких важных приложений, как Microsoft SharePoint Server, SQL Server и
Exchange Server, Microsoft IIS Web services и Blackberry Enterprise Server
автоматизирует
конфигурацию, проверку, контроль и обработку отказа/восстановления после отказа.
Дополнительные функции включают в себя:
- Централизованную и масштабируемую систему управления на базе Интернет-технологий, которая охватывает все функциональные возможности семейства
продуктов без необходимости устанавливать много «клиентов управления».
- Главный центр оповещения с функцией настраиваемого графического интерфейса
пользователя на базе Интернет-технологий, гибкого сервера, возможности гибкой
группировки и серверов, и обзор инструментальной панели и подробного мониторинга.
- Наглядные программы, которые сокращают кривые обучения и исключают
необходимость запоминать большие описания.
- Эффективный интерфейс командной строки и написания сценариев с
дополнительными методами создания сценариев, которые дают профессиональным
пользователям возможность настраивать каждый аспект продукта.
- Сценарии оценки, которые отслеживают пропускную способность сети до выполнения
оперативного дублирования данных.
- Простые отчеты, которые улучшают планирование, выполняемое перед
развертыванием.
- Установки, обновления и модернизация, которые не требуют перезагрузки сервера,
даже в случае с оперативными данными.
- Встроенные возможности удаленной установки под управлением мастера установки,
которые помогают обновлять или использовать любое число серверов одним
шагом без необходимости перезагрузки.
- Единые для всего семейства продуктов установку,
графический интерфейс
пользователя и командную строку.
- Услугу контроля высокой доступности, которая обеспечивает непрерывное
управление и составление отчетов о вашей среде XOsoft, даже если сам сервер
обслуживания управления поврежден.
- Поддержку английского, французского, немецкого, итальянского, испанского,
бразильского португальского, упрощенного и традиционного китайского и японского
языков.
• Прозрачные и автоматизированные операции. Характерной особенностью семейства
продуктов CA XOsoft является непрерывное асинхронное дублирование
большинства типов данных, в том числе открытые файлы и списки контроля доступа
(ACL), с оптимальным сжатием и минимальным вмешательством специалистов. Кроме
того, семейство продуктов CA XOsoft включает такие основные функциональные
возможности автоматизации, как:
- Эластичные сетевые протоколы, которые быстро восстанавливаются в случае потери
соединения и оптимизируют производительность глобальной сети через
интегрированную настройку, которая смягчает проблемы в работе, вызванные
временем простоя.
- "Родной" 64-битовый механизм дублирования Windows, который позволяет IT
персоналу копировать данные с х86 сервера или х64 сервера на х64 сервер,
увеличивая гибкость и позволяя использовать новейшую технологию сервера.
- Гранулированная настройка пропускной способности в зависимости от сценария,
что
помогает быстро определить допустимые пределы и параметры, снижая риски и
расходы, связанные с перегрузкой сети.
• Рентабельные процессы. Так как продукты CA XOsoft полностью зависят от
аппаратных средств, семейство продуктов CA XOsoft обеспечивает дублирование и
обработку отказа от любой аппаратной платформы или кластера Microsoft к любой
физической или виртуальной платформе без необходимости использовать стороннее
ПО для кластеризации. Дополнительные функции, которые управляют
рентабельностью, включают в себя:
-
Централизованную защиту от сбоев самого широкого диапазона устройств и
приложений, которая помогает быстро получить доход от вложений в технологии
и обеспечить более низкие затраты на их приобретение и использование.
- Гибкую, масштабируемую архитектуру, которая позволяет развертыванию расти в
соответствии с потребностями вашей организации.
- Динамическое дросселирование пропускной способности, которое помогает
отслеживать, контролировать и управлять потреблением сетевых ресурсов.
- Совместимость с технологиями виртуализации Microsoft и VMware, которые
способствуют консолидации сервера, помогая снизить расходы,
связанные с физическими аппаратными средствами, стойко-местами, охлаждением,
потреблением электроэнергии, лицензионными платежами и не только.
█ Ключевые конкурентные факторы CA XOsoft
| Функция | CA XOsoft | Конкурентное предложение |
| Автоматизированная проверка аварийного восстановления |
И CA XOsoft Replication и CA XOsoft High Availability включают в себя CA XOsoft Assured Recovery, который дает возможность администраторам выполнять оперативные, полностью автоматизированные проверки серверов обработки отказа и аварийного восстановления без нарушения производственной среды, без влияния на рабочие информационные активы и без остановки процесса дублирования. Это очень существенный фактор, если принять во внимание тот факт, что многие сервера нелегко отключить с целью проверки. Кроме того, обычная автоматическая проверка аварийного восстановления гарантирует доступность всех прикладных резервных систем и данных. |
Некоторые конкурентные решения могут предложить процессы, похожие на те, что предлагает CA XOsoft Assured Recovery, но при их использовании могут возникнуть проблемы и есть вероятность того, что они не предлагают полную автоматизацию или возможность автоматической работы по заранее определенному графику. Многие решения, которые используют мгновенные снимки Microsoft Virtual SourseSafe (VSS) для возврата объема данных копии сервера в то состояние, которое было до проверки, требуют, чтобы никакие данные прикладных программ или системных файлов не хранились постоянно в системном томе или в папке буфера. CA XOsoft Assured Recovery напротив, использует запатентованную внутреннюю технологию, которая не только сохраняет оригинальную копию данных во время проверки, но также позволяет продолжать дублирование в режиме реального времени на копии сервера, избавляя от необходимости возвращаться к предыдущему состоянию после проверки. |
| Централизованное управление | И CA XOsoft Replication и CA XOsoft High Availability включают в себя интегрированную консоль управления на базе Интернет-технологий, которая помогает пользователям упростить процесс развертывания, управления и создания отчетов по всей среде CA XOsoft. | Многие конкурентные предложения не интегрируют управление, предоставляя администраторам установку многочисленных модулей и управление отдельными графическими интерфейсами пользователей для различных компонентов инфраструктуры. Кроме того, эти решения могут нарушать производственную среду в процессе развертывания обслуживания и установления обновлений и требовать физической установки программного обеспечения администратором в каждом месте. |
| Дублирование с поддержкой приложений | CA XOsoft Replication и CA XOsoft High Availability предлагают готовую поддержку для таких сред, как Microsoft SharePoint Server, Microsoft SQL Server, Microsoft Exchange Server, Microsoft IIS Web, Oracle и Blackberry Enterprise Server, снижая или устраняя необходимость создавать специальный сценарий для обычных приложений. | Многие другие решения могут потребовать специального создания сценария для надлежащего осуществления дублирования в этих средах. И хотя некоторые конкурентные продукты могут предложить технологию, которая помогает администраторам создавать и управлять сценариями, эти решения часто довольно сложны и могут использоваться только для основных однозначных сценариев. CA XOsoft Manager же, наоборот, легко обрабатывает множество сложных сценариев. |
| Интеграция резервного копирования | CA XOsoft Replication и CA XOsoft High Availability тесно связаны с CA ARCserve Backup, что позволяет организациям использовать надежное, комплексное решение по непрерывности бизнес- процессов и аварийному восстановлению одного поставщика. Кроме того, продукты CA XOsoft можно использовать с другими решениями по резервному копированию, в том числе и с Symantec Backup Exec. | Некоторые продавцы могут позволить пользователям делать резервное копирование дублированных данных, но их продукты делают это без какой-либо интеграции или поддержки основных решений по резервному копированию. |
| Постоянная защита данных | CA XOsoft Replication и CA XOsoft High Availability предлагают постоянную защиту данных с технологией Data Rewind, которая дает администраторам возможность быстро и легко восстановить данные после случайного или злонамеренного изменения или повреждения. С этой технологией постоянная защита осуществляется между обычными запланированными резервными копированиями и/или мгновенными снимками, и помогает администраторам достичь целей в отношении объема и времени восстановления. | Многие конкурентные предложения требуют покупки отдельного продукта для выполнения этой функции. |
| Легкость администрирования |
CA XOsoft Replication и CA XOsoft High Availability предлагают улучшенные возможности администрирования, в том числе удаленную установку, автоматическое восстановление после отказа, управление на основе сценария, управление лицензиями, режим оценки, обновление без перезагрузки и не только. | Решения некоторых конкурентов не предлагают подобного уровня простоты. Фактически, многие предложения конкурентов включают принудительную перезагрузку, требуют индивидуального управления серверами и не обеспечивают автоматического восстановления после отказа, что делает общее IT администрирование более сложным и трудоёмким. |
| Межплатформеиная поддержка | CA XOsoft Replication rl2.5 поддерживает приложения UNIX и Linux и централизует управление в среде Windows и NIX/Linux. Кроме того, CA XOsoft Management Console является инструментом на базе Windows, который можно использовать на всех платформах. | Многие другие решения не поддерживают среды UNIX и Linux, а если и поддерживают, то не предлагают централизованной консоли для управления средой. |
| Самозащита |
CA XOsoft Replication и CA XOsoft High Availability предлагают доступность и надежность для CA XOsoft Control Service, ключевого инструмента в управлении системой, устраняя точку серьезного сбоя. |
Многие конкурентные решения не могут увеличить защиту компонентов своей собственной системы.
|
Особо выделим тот факт, что CA XOsoft Assured Recovery делает возможной
автоматизированную, неразрушающую проверку аварийного восстановления, которая
требует ограниченной IT поддержки. Некоторые конкурентные решения
не
предоставляют никаких возможностей проверки аварийного восстановления, а те,
которые предоставляют, могут потребовать ручного тестирования, на которое нужно
больше IT
ресурсов и которое может подвергать клиента большему риску.
■
Как реагировать на то, что могут сказать конкуренты
| ЗАЯВЛЕНИЕ КОНКУРЕНТОВ | РЕАКЦИЯ CA |
| Поскольку CA XOsoft ставит изменения в очередь на диске, а не в памяти, что значительно ограничивает масштабируемость, архитектура CA XOsoft по существу является сложной. Получается, что самое большое развертывание CA XOsoft Exchange Server, например, ограничено несколькими сотнями почтовых ящиков. |
Хотя некоторые другие решения используют и оперативную память, и диск для организации очереди данных, CA XOsoft Replication и CA XOsoft High Availability использует только организацию очереди данных на диске. Мы делаем это в основном потому, что дисководы, используемые в серверах в настоящее время, быстрее и объемнее, чем были два года назад. К тому же, наши внутренние тесты показывают, что организация очереди данных одновременно на диск и в память не повышает эффективности, хотя и жертвует ценным пространством в оперативной памяти. При идеальных условиях работы сети данные будут посылаться в режиме, близком к режиму реального времени, и разница будет незаметна. При неидеальных условиях работы сети оба решения будут использовать организацию очереди данных на диск с минимальным различием. СА не считает этот фактор существенным. Многие крупные предприятия используют CA XOsoft Replication и CA XOsoft High Availability для дублирования данных для почтовых ящиков Exchange Server. Фактически, у нас есть несколько клиентских развертываний Exchange Server с тысячей почтовых ящиков. |
| Поскольку оно ставит так много данных в очередь на диск, механизм CA XOsoft может использовать до 70 процентов процессора сервера в режиме стандартной загрузки. | При надлежащей конфигурации непроизводительные затраты центрального процессора составляют обычно менее 10 процентов во время начальной стадии синхронизации. В режиме дублирования увеличение непроизводительных затрат центрального процессора еще меньше, обычно менее 3 процентов. |
| CA XOsoft не может одновременно дублировать и синхронизировать данные. Вместо этого эти продукты должны ставить операции дублирования в очередь до тех пор, пока не закончится синхронизация, что требует большего количества ввода-вывода для организации очереди и приводит к длительному периоду задержки перед действительной синхронизацией. Это означает, что продукты CA XOsoft ставят клиентов в ситуацию повышенного риска потери данных, так как информация действительно защищена только после того, как закончилась синхронизация и дублирование изменений. | CA XOsoft Replication и CA XOsoft
High Availability отдают предпочтение трафику
синхронизации, а не дублированию данных с
целью как можно скорее получить
синхронизацию данных. В процессе
синхронизации любые изменения в
производственной системе фиксируются
механизмом дублирования и хранятся в местном
буфере на протяжении всего процесса. Когда позволяет пропускная способность сети, эти изменения, находящиеся в буфере, могут быть также направлены в буфер копирования и переданы сразу по завершении синхронизации. Чистый результат - это ускорение защиты. |
| Продукты CA XOsoft не могут
имитировать конфигурацию
производственного Exchange Server в соответствии с целью без стандартного Exchange Server на вторичном сервере. |
И CA XOsoft Replication и CA XOsoft
High Availability могут имитировать данные
настолько просто, насколько это возможно.
Фактически, мы были первыми, кто представил
такую функцию на рынке, и мы до сих пор
ставим ее во главу угла каждого обновления. CA XOsoft Replication и CA XOsoft High Availability автоматически выявляют конфигурацию Exchange Server на производственном сервере и передают ее на точную копию хост-узла. Этот процесс требует от пользователя только установки базового Exchange Server на точной копии сервера и выполнения конфигурации сценария; никакой предварительной конфигурации точной копии среды не требуется. |
| CA XOsoft Replication и CA XOsoft High Availability не предлагают защиту широкого диапазона приложений и сред, которые встречаются на большинстве современных предприятий. | CA XOsoft Replication и CA XOsoft High Availability предлагают готовую поддержку таких сред как Microsoft SQL Server, Microsoft Exchange Server, Microsoft IIS Web services, Oracle и Blackberry Enterprise Server, снижая или устраняя необходимость разработки специального сценария для обычных приложений. |
■
Наиболее часто задаваемые вопросы
• Что означают термины Replication и
High Availability?
В контексте продуктов CA, Replication («репликация») означает процесс
копирования
всех данных приложения с одного сервера на другой через локальную (LAN) или
глобальную (WAN) сеть, используя защищенное соединение (VPN). После того, как
данные
будут скопированы первый раз, на сервер с репликой данных будут посылаться
только
последующие изменения, что обеспечивает эффективное использование пропускной
способности сети. "High Availability" («Высокая доступность») означает возможность
наших
систем отслеживать «здоровье» основного сервера и в случае аварии последнего
автоматически перенаправлять конечного пользователя на сервер с репликой данных.
• Что означают термины Основной Сервер и Сервер Реплики по отношению к
Репликации?
Любой физический или виртуальный сервер, на котором запущенно приложение,
осуществляющее бизнес-процессы, называется «производственным» (production) или
«основным» сервером. «Сервер-реплика» - это резервный сервер, обычно
расположенный
физически вне основного офиса, в специальном месте для резервных серверов. На
него
осуществляется репликация данных для обеспечения непрерывности работы (business
continuity - BC) или аварийного восстановления (disaster recovery - DR).
• Чем являются CA XOsoft Replication и CA XOsoft
High Availability?
CA XOsoft Replication и CA XOsoft
High Availability - продукты СА, обеспечивающие
непрерывность бизнеса и аварийное восстановление для фирм среднего
размера, обычно имеющих удаленные офисы и/или больше чем один центр обработки
данных. CA XOsoft Replication и CA XOsoft
High Availability предоставляют непрерывный
доступ к важным приложениям и данным в случае отказа любого Основного Сервера
системы, запланированного и внезапного отключения, или аварийной ситуации.
• Какие возможности имеются у CA XOsoft Replication и CA XOsoft
High Availability и
чем данные продукты различаются?
Как CA XOsoft Replication, так и CA XOsoft
High Availability предоставляют клиентам;
- Возможности реплицирования, настроенные на конкретные приложения и не
требующие дополнительного кодирования.
- Поддержку различных приложений и платформ.
- Автоматическое тестирование аварийных ситуаций.
- Технологию «обратной перемотки» данных для быстрого восстановления и привязки
к
точкам восстановления.
- Средство оценки необходимой пропускной способности сети.
- Интеграцию с CA
ARCserve Backup.
CA XOsoft
High Availability расширяет возможности CA XOsoft Replication за счет:
- добавления возможности слежения за основным сервером;
- автоматического переключение на резервный сервер при сбоях;
- аварийного восстановления «нажатием одной кнопки».
• Как работают CA XOsoft Replication и CA XOsoft
High Availability?
CA XOsoft Replication и CA XOsoft
High Availability устанавливают программные агенты
на
основных серверах ваших клиентов, чтобы обеспечить асинхронную репликацию на
резервный сервер, который ваши клиенты установили локально или удаленно, а так
же на
центры обработки данных третьих фирм. После первичного процесса синхронизации,
который копирует все специфические данные с основного сервера на резервный -
агенты
поддерживают последний в состоянии идентичности посредством непрерывной
репликации всех изменений, производимых вашими сотрудниками, когда они,
например,
сохраняют файлы, обновляют базу данных или посылают и принимают электронную
почту. Такой процесс репликации изменений позволяет вам минимизировать загрузку
вашей сети.
С помощью CA XOsoft Replication ваши заказчики должны вручную перенаправляться на
резервный сервер. Однако CA XOsoft
High Availability позволяет вашим клиентам
выбирать,
что им наиболее подходит - либо ручное переключение на резервный сервер, либо
полностью автоматизированная, практически мгновенная подмена сервера. Как только
основной сервер вашего заказчика восстановлен или заменен, CA XOsoft Replication и CA XOsoft
High Availability позволят вашим клиентам возвратиться на основное
оборудование и продолжить работу в обычном режиме.
• CA XOsoft Replication и CA XOsoft
High Availability поддерживают как физическую,
так и виртуальную репликацию?
Да, оба продукта поддерживают аппаратно-аппаратную (P2P),
аппаратно-виртуальную
(P2V), виртуально аппаратную (V2P) и виртуально виртуальную (V2V) типы репликаций и
обработки/отката после сбоя. На платформе VMware ESX эти продукты защищают
управляющее приложение VMwareeCentre. Вместе с данными, созданными каждой
виртуальной машиной (VM) - увеличивается защита от перегрузки, надежность и ИТ-производительность. Если в организации ваших заказчиков используется для
виртуализации Microsoft Hyper-V - то эти продукты независимо производят репликацию
и
перенаправление данных с приложения каждой отдельной VM машины без необходимости
для вашего заказчика устанавливать XOsoft-движок на каждую VM машину. Это
облегчает установку CA XOsoft, одновременно увеличивая ИТ- продуктивность и снижая риск.
• Сколько времени занимает перенаправление на репликационный сервер после
отказа
системы или разрушения?
Так как CA XOsoft
High Availability производит постоянный мониторинг основного
сервера
вашего клиента и автоматически выявляет и реагирует на широкий спектр проблем,
он
может предоставить вашему клиенту практически мгновенное перенаправление. CA XOsoft
High Availability также предоставляет возможности ручного перенаправления,
которые ваш заказчик может использовать для перевода операций на резервный
сервер,
когда производятся плановые регламентные работы на основном. С помощью же CA XOsoft Replication ваш заказчик может производить перенаправление на резервный
сервер, в случае необходимости, только вручную.
• Каким CA XOsoft Replication и CA XOsoft
High Availability повлияют на работу
пользователей в случае восстановления системы?
С CA XOsoft
High Availability большинство процессов восстановления прозрачны и ясны
и
не влияют на конечных пользователей вашего заказчика, но в некоторых случаях
последним может понадобиться перезагрузить приложение, с которым они работали,
когда произошла авария. В этом случае самое лучшее - это предупредить персонал о
том,
что они должны перезагрузить приложение в случае перенаправления.
• Каким образом технология «перемотки данных» обеспечивает непрерывную защиту
данных (CDP)?
Как CA XOsoft Replication, так и CA XOsoft
High Availability включают технологию
«перемотки данных», которая предоставляет клиентам интегрированную
непрерывную защиту данных (CDP). «Перемотка данных» фиксирует и сохраняет каждую
запись данных на резервном сервере, например когда файлы, базы данных или
электронная почта создаются, обновляются или удаляются. Если файл, email-сообщение
или запись базы данных случайно удален или изменен — или поврежден вирусом,
некачественным программным обеспечением или каким-либо другим образом —
«Перемотка
Данных» помогает клиентам быстро и легко восстанавливать все данные на
резервном сервере до состояния, предшествовавшего аварийному событию. С этого
состояния конечные пользователи могут продолжить работу на резервном сервере или
администраторы могут вернуть работу на основной сервер в этой точке. CDP - это базовая
способность восстановления, которая необходима вашей организации для того, чтобы
восполнить проблемы в защите данных, вызванные предыдущей практикой
периодических
сохранений и снапшотов ( мгновенных снимков). С ее помощью вы можете достигнуть
лучших «целевых точек восстановления» (RPO) для критических приложений.
• Что такое автоматическое тестирование возможности
восстановления, включенное в эти продукты, и почему это важно?
CA XOsoft Replication и CA XOsoft
High Availability интегрированы с системой автоматического тестирования
возможности восстановления CA XOsoft Assured Recovery. CA XOsoft Assured Recovery позволяет вашим клиентам составлять
расписание
автоматического, повторяющегося тестирования возможности восстановления на
резервных серверах ваших клиентов, приложениях и данных без влияния на их
основное и
резервное окружение или необходимости вмешательства специалистов ИТ. Выполнение
периодического тестирования помогает им гарантировать, что их системы
будут автоматически исполнять как основные функции, так и операции по
восстановлении
в момент их возникновения. Это позволит специалистам ИТ ваших клиентов
сосредоточиться на других важных задачах и обязанностях. Помимо этого CA XOsoft Assured Recovery интегрирована с технологией управления снимками Microsoft Virtual SourseSafe (VSS) - ключевым компонентом надежного процесса
сохранения и восстановления данных.
• CA XOsoft Replication и CA XOsoft
High Availability работают с системами
сохранения
на лентах?
Оба продукта тесно интегрированы с с решением CA
ARCserve Backup, и оба
могут
управляться с помощью CA XOsoft
Management Console. CA
ARCserve Backup XOsoft
предоставляет целевую защиту резервных серверов ваших заказчиков, не вызывая
ощутимых задержек в их рабочей среде. К тому же CA
ARCserve Backup может
использоваться для сохранений периодических VSS снимков на резервном сервере.
Кроме
этого CA
ARCserve Backup,
CA XOsoft Replication и CA XOsoft
High Availability
интегрированны с большинством доступных сегодня систем защиты данных.
• Что нового в
CA XOsoft Replication и CA XOsoft
High Availability rl2.5?
В настоящее время опция CA XOsoft Assured Recovery включена в оба продукта CA XOsoft,
увеличивая полную стоимость (overall value) и сокращая общую стоимость владения (TCO).
Высокая готовность сервиса управления CA XOsoft обеспечивает непрерывный доступ и
управляемость вашей среды, даже если проблемы возникли на самом сервере XOsoft
control service, что увеличивает продолжительность работы и восстанавливаемость в
случае чрезвычайной ситуации.
Поддержка Microsoft SharePoint включает реплицирование и высокую доступность для
Microsoft SharePoint 2007, обеспечивая более широкую защиту для клиентской среды и
уменьшая риск.
Поддержка VMware VCentre обеспечивает реплицирование и высокую доступность для
управления приложением VMware VCentre, улучшая управляемость и увеличивая
защиту
ИТ и производительность.
Поддержка Microsoft Hyper-V high availability предлагает независимое реплицирование и
высокую доступность для различных «гостевых» ОС и приложений, работающих на
Microsoft Hyper-V Server, без необходимости индивидуальной установки CA XOsoft. Все это
упрощает установку CA XOsoft, обеспечивая более широкую защиту, увеличивая ИТ
производительность и уменьшая риск в маштабах всей организации.
Защита состояний системы обеспечивает автоматическое восстановление данных
посредством создания множественных точечных временных копий локального состояния
системы, которые затем реплицируются и сохраняются на резервном сервере. Эти
функциональные возможности помогают уменьшить риск и увеличивают ИТ-
производительность с помощью улучшенной защиты операционной системы и
восстановления.
Синхронизация Реестра облегчает автоматическую DR-защиту избранных
регистрационных ключей, синхронизируя ключевые данные с копиями, сохраненными на
репликационном сервере, увеличивая возможности защиты и восстановления
операционной системы и снижая риск потери.
Поддержка репликаций для UNIX/Linux предоставляет совместимость с различными
UNIX
и Linux системами, расширяя возможности защиты приложений и данных, одновременно
помогая снизить риск и уменьшить общую стоимость владения (ТСО). Оригинальный
64-разрядный движок гарантирует оптимальную работу CA XOsoft на 86-разрядных и
64-разрядных платформах без необходимости тратиться на совместимость WOW
режимов, что улучшит совместимость и ИТ-производительность.
Настройка скорости обмена данными позволяет посценарную разбивку при определении
предела скорости передачи данных и временных параметров, что помогает ограничить
нагрузку, мимнимизировать стоимость использования сети и снизить риск.
Отчеты CDP предоставляют администраторам краткие и детализированные отчеты из
опции «CDP Repository for Exchange", позволяя им отслеживать RTO и RPO в
зависимости
от соглашений уровня обслуживания (SLAs).
Распределение контента (требует продукт CA XOsoft Content Distribution, который лицензируется отдельно) предлагает масштабируемое распределение информации от
100 до 1000 резервных серверов, увеличивая ИТ-производительность и гарантируя
целостность данных в масштабах предприятия.
█ Средство моделирования данных CA ERwin Data Modeler r7.3
- решение в области моделирования данных, которое даёт возможность создавать и
поддерживать базы данных, хранилища данных и модели данных предприятия, помогая
легче модерировать уровни сложности данных, эффективно управлять технологиями
базы данных и правильно соотносить инфраструктуру своих данных с той сферой
деятельности, которую она поддерживает.
■ CA ERwin DM обеспечивает процессы управления
важными данными
CA ERwin DM позволяет визуализировать сложные структуры данных
организации, создавать комплексную учетную запись активов данных и
устанавливать стандарты управления данными в масштабах предприятия. С этой целью CA ERwin DM
помогает проектировать, создавать и управлять
транзакционными системами организации, витринами данных и
хранилищами данных, а также поддерживающие их бизнес-правила и бизнес- описания. CA ERwin DM предлагает инструментарий и функциональные
возможности для поддержания структурной основы ваших потребностей в
управлении информацией и для приложений Business Intelligence (BI), и для проекта
управления основными данными (MDM), и для программы моделирования в
масштабах предприятия.
Через удобный в использовании графический интерфейс, который упрощает
проектирование базы данных и автоматизирует много трудоемких задач, CA ERwin DM ускоряет создание высококачественных, высокоэффективных транзакционных
баз данных и хранилищ данных. К тому же, этот продукт помогает
средствам моделирования данных наглядно представлять требования, способствует
эффективному общению между группами управления данными и заинтересованными
лицами, а также дает возможность разработчикам баз данных решать вопросы и
проблемы, касающиеся разработки, прежде чем в это будут вложены значительные
ресурсы. CA ERwin DM подчеркивает влияние модификации активов
данных и позволяет быстро проверить и внести изменения, что помогает вашей
организации быстрее реагировать на растущие потребности бизнеса.
◊ Основные функции CA ERwin DM
CA ERwin DM включает в себя множество функций, которые в совокупности дают комплексный инструмент моделирования данных, который может легко
поддерживать базу данных, хранилище данных, а также способствовать созданию и
обслуживанию модели данных предприятия.
• Архитектура уровня проектирования. CA ERwin DM совмещает модели данных
с бизнес-требованиями на логическом уровне и с разработкой базы данных на
физическом уровне через поддержку отдельных логических и физических моделей
и традиционную объединенную логически-физическую модель. Кроме того, CA ERwin DM ведет запись взаимосвязей и проектных решений, что позволяет
вам быстро определить воздействие изменений от одного уровня проектирования
до другого.
• Описание стандартов. CA ERwin DM поддерживает описание и обслуживание
стандартов через свой словарь доменов, редактор стандартов именования и
редактор стандартов типов данных. Словарь доменов содержит многократно
используемые атрибуты модели, которые помогают обеспечить последовательное
именование и условное обозначение описаний в вашей организации. Редактор
стандартов именования позволяет вам создать словарь допустимых слов,
сокращений и правил для использования внутри модели. А редактор стандартов
типов данных помогает вам определить стандарты для типов данных, как
определяемых пользователем, так и принимаемых по умолчанию типов данных
конкретной системы управления базой данных.
• Управление большими моделями За счет функций предметных областей и хранимых
отображений CA ERwin DM упрощает процесс управления множеством
объектов модели данных, которые приняты в крупных организациях. Предметные
области делят модель на меньшие, более управляемые подмножества,
предоставляя отдельным проектировщикам возможность выделения объекта.
Хранимые отображения предоставляют множественные графические
представления модели или ее предметных областей, тем самым, облегчая обмен
информацией между специализированными группами пользователей и внутри них.
С CA ERwin DM можно создавать отдельные логические и физические модели данных, а
также новые модели на основе существующих структур
• Полное сравнение (Complete
Compare). Данная функция предоставляет широкие
возможности при автоматизации двунаправленной синхронизации моделей,
сценариев и баз данных. Она сравнивает элементы, отображает их различия и
позволяет вам выбирать, какие различия и куда нужно переместить. Кроме того, при
перемещении изменений модели в базу данных CA ERwin DM может автоматически
сгенерировать сценарий ALTER, изменяющий базу данных.
• Генерация схемы базы данных Оптимизированные шаблоны триггеров
ссылочной целостности и мощный межплатформенный макро-язык поддерживают
настройку триггеров и хранимых процедур, которые вы можете адаптировать под
потребности своего бизнеса. Кроме того, настраиваемые шаблоны облегчают
генерацию законченной физической структуры модели и описаний в соответствии с
целевой базой данных.
• Проектирование хранилищ и витрин данных. CA ERwin DM поддерживает
техники моделирования, специфические для проектирования хранилищ данных,
такие как размерное моделирование по схеме "звезды" или "снежинки", которые
оптимизируют хранилища данных и витрины данных под определенные потребности
вашей организации в отношении производительности и анализа. CA ERwin DM также
собирает и документирует широкий спектр информации о хранилище данных, включая
источники данных, логику трансформации данных и правила управления данными.
• Технология трансформации. Физическая структура базы данных редко
соответствует оригинальной логической структуре, потому что деловые
соображения и требования производительности часто требуют денормализации
таблиц. Для этого технология трансформации CA ERwin DM позволяет реализовать
такой тип изменений, вместе с тем поддерживая целостность структуры оригинала.
•
Отчеты и публикация.
Для обеспечения лучшей коммуникации и координации совместной деятельности CA ERwin DM предоставляет гибкие настраиваемые возможности составления
отчетов и публикации во множестве форматов, включая язык гипертекстовой
маркировки (HTML), формат переносимого документа (PDF), насыщенный текстовый
формат (RTF) и формат текстового файла (TXT). Кроме того, интеграция с
приложением Business Objects Crystal Reports дает большую гибкость в создании
отчетов, позволяя вам использовать опцию открытой связи с базой данных (ODBC)
для создания специальных сообщений.
Графические объекты делают модель более удобной для чтения и помогают в передаче
бизнес-правил и структурных компонентов внутри организации
• Настройка. CA ERwin DM
обеспечивает шаблоны прямой разработки, которые
помогают вам адаптировать генерацию языка определения данных (DDL) к вашим бизнес-потребностям.
• Открытая и интегрированная архитектура. С помощью сторонней интеграции
метаданных и нашего устойчивого интерфейса прикладных программ (API) можно
расширить значение CA ERwin DM в вашей организации. Специальные возможности
включают в себя:
- интеграцию и обмен метаданными
- API и встроенную программу управления
• Интеграция и обмен метаданными обеспечивает возможности импорта и
экспорта под управлением мастера настройки для нестандартного обмена
шаблонными метаданными между более чем 70 стандартизированными
форматами управления моделированием, схемами и форматами метаданных,
включая унифицированный язык моделирования (UML), общую метамодель хранилища (CWM), расширяемый язык маркировки (XML), извлечение, преобразование, загрузку (ETL), интеграцию данных организации (EII), концентраторы управления основными данными (MDM), инструменты BI и различные решения репозиториев метаданных.
• API и встроенная программа управления. Позволяют работать с дополнительными сторонними приложениями при выполнении определенных задач, которые не входят в число предлагаемых семейством продуктов моделирования CA Erwin Modeling.
■
Сопутствующие инструментальные средства семейства продуктов
Семейство
продуктов моделирования CA Erwin Modeling предлагает широкий
диапазон дополнительных инструментальных средств, которые позволяют
использовать информацию в ваших данных в других программах и проектах, и
повышать качество как данных, так и структуры базы
данных. К этим продуктам относятся:
- среда моделирования CA ERwin Model Manager (CA ERwin MM)
- профайлер данных CA ERwin Data Profiler (CA ERwin DP)
- устройство проверки моделей данных CA ERwin Data Model Validator
(СА ERwin DMV)
- средство моделирования процесса CA ERwin Process Modeler (CA ERwin PM)
- опция CA ERwin Saphir Option
- навигатор моделей CA ERwin Model Navigator (CA ERwin MN)
• CA ERwin MM. Дает вам возможность управлять многопользовательским
сотрудничеством, а также метаданными и моделью.
• CA ERwin DP. Выполняет профилирование данных, межсистемный анализ и открытие
первичного/внешнего ключа с экспортом метаданных в CA ERwin DM.
• СА ERwin DMV. Проверяет структурную целостность моделей данных и проверяет
их правильность с точки зрения правил реляционной теории.
• CA ERwin PM. Документирует ключевые бизнес-процессы и визуализирует
воздействие и отношение этих процессов с объектами данных, смоделированными в CA ERwin
DM.
• CA ERwin Saphir Option. Извлекает и хранит детализированные из приложений
планирования бизнес-ресурсов (ERP), включая SAP R/3, SAP BW, Oracle PeopleSoft
Enterprise, Oracle JD Edwards Enterprise One, Oracle Siebel и Oracle eBusiness
Suite, а
также переводит часто запутанные условные обозначения, принятые в таких
системах, в более знакомые величины.
• CA ERwin MN. Обеспечивает доступ к модели в режиме «только чтение» большому
количеству корпоративных пользователей и технических специалистов.
■
Новые возможности CA ERwin DM r7.3
CA ERwin DM r7.3, последний цикл CA ERwin DM, включает много новых
особенностей и функциональных возможностей, разработанных с целью помочь улучшить возможности управления данными.
Особые возможности включают в себя:
- Улучшенное текущее состояние и поддержку базы данных.
- Улучшенный обмен метаданными.
- Возможность гибкого составления отчетов.
- Средство запроса SQL.
- Настраиваемые шаблоны прямой разработки.
- Интеграцию Microsoft Visual Studio Team System Database
Edition 2008 (VSTS DB Edition).
- Усовершенствования Complete
Compare.
■
Улучшенное текущее состояние и поддержка базы данных
Теперь CA ERwin DM осуществляет расширенную встроенную реляционную поддержку Teradata v2.6 и v12, DB2 z/os v9, Oracle 11.x, а также новую поддержку сервера SQL Server 2008. Кроме того, текущее состояние и поддержка базы данных охватывают
усовершенствования в области прямой разработки (FE), обратного проектирования
(RE), полного сравнения (CC) и пользовательского интерфейса (UI).
■ Улучшенный обмен метаданными
CA ERwin DM r7.3 обеспечивает улучшенный
двунаправленный обмен метаданными через поддержку следующих новых
интерфейсов:
- Cognos ReportNet QueryStudio
- Oracle Business Intelligence Answers
- Oracle Business Intelligence Enterprise Edition
- Oracle Business Intelligence Server
- Oracle У\/агепоизе ВиПаег
- SAP MDM Hub
- Sypherlink Harvester
■
Возможность гибкого создания отчётов
CA ERwin DM r7.3 предлагает новую
функцию создания отчетов на основе открытого интерфейса взаимодействия с
базами данных, соединенную с Crystal Reports 2008, которая обеспечивает простой
механизм создания заранее определенных и узкоспециализированных отчетов,
которые могут фильтровать, форматировать, отбирать, управлять и публиковать
определенные метаданные от любой модели в вашей среде.
■
Средство запроса SQL
Новое средство запроса SQL улучшает эффективность
операций моделирования, давая пользователям возможность делать запрос
информации в базе данных и каталоге, быстро просматривать метаданные модели и
проверять синтаксическую структуру отчета без необходимости изучать и
использовать для каждой задачи различный продукт. Кроме того, все запросы могут
сохраняться, совместно и многократно использоваться разработчиками модели,
моделями и функциями программы.
■
Настраиваемые шаблоны прямой разработки
CA ERwin DM позволяет
изменять способ создания языка определения данных через вовлечение
полнофункциональных, удобных в работе шаблонов. Теперь CA ERwin DM
предлагает интегрированный редактор шаблонов прямой разработки и скриптовый
макроязык (TLX), который дает возможность создавать, просматривать и
изменять некомпилированные файлы шаблона базы данных, используемые в
разработке настраиваемых сценариев для создания схемы прямой разработки и
изменения ALTER. Кроме того, редактор шаблона прямой разработки включает
широкий диапазон опций для управления созданием схемы, давая вам возможность
просматривать и печатать специфические для базы данных особенности
стандартных шаблонов, создавать обновленные шаблоны на основе
организационных стандартов и по мере необходимости разрабатывать новые
шаблоны. К тому же, все макросы, поддерживаемые в настоящий момент CA ERwin DM, доступны в обновленном редакторе шаблонов прямой
разработки.
■
Интеграция Microsoft Visual Studio Team System Database
Edition 2008 (VSTS DB Edition)
Интеграция Microsoft Visual Studio Team System
Database Edition 2008 объединяет
ведущее решение для структуры неоднородной базы данных в отрасли и
специальную разработку SQL сервера и среды управления жизненным циклом. Это
дает всестороннюю платформу, с которой ваша организация может управлять
разработкой и использованием важных приложений SQL сервера. Кроме того, эта
интеграция позволяет разработчикам модели:
- визуально проектировать, определять и генерировать объекты, управляемые VSTS
DB Edition;
- осуществлять обратное проектирование существующих моделей CA ERwin DM
в
объекты VSTS DB Edition, в том числе извлечение данных о схеме из баз данных,
отличных от SQL Server 2008;
- осуществлять прямую разработку управляемых VSTS DB Edition объектов в CA ERwin DM
для визуализации и отчетов метаданных.
■ Усовершенствования Complete Compare
CA ERwin DM r7.3 продолжает упрощать
функциональную возможность Complete Compare через ряд усовершенствований, которые повышают общее удобство и простоту
использования, включая автоматическое разрешение определяемых пользователем
свойств (UDP), выбор диапазона и объекта, разрешение печати, выполнение
загрузки по запросу и ряд других.
◊
Модели данных ~ центр вашей информационной
структуры
Если вы разрабатываете хранилище данных, проект по управлению основными
данными, проект по управлению данными или BI приложение, CA ERwin DM дает ту
основу, которая необходима для получения устойчивой модели данных и
динамичной информационной инфраструктуры, и помещает вашу модель данных в
центр вашей информационной инфраструктуры. Таким образом, CA ERwin DM может
помочь:
- сократить недостатки разработки;
- сделать возможными стандартизацию и сотрудничество;
- максимально снизить риски разработки и обслуживания;
▪
Сократить недостатки разработки.
Через документирование бизнес-правил и определений в логической модели данных
и через совмещение этих правил с физической моделью данных, используемой
вашими платформами для разработки баз данных, вы можете способствовать
обеспечению последовательности по всей организации, а также поддержать
многократное использование. Таким образом, вам будет легче устранить дефекты и
ошибки в процессе моделирования данных и разработать более устойчивые,
эффективные модели данных.
▪
Сделать возможными стандартизацию и сотрудничество
С возможностями обмена метаданными, которые охватывают инструментальные
средства и проекты всей организации, CA ERwin DM помогает позаботиться о
том, чтобы информационные стандарты, созданные в вашей модели данных, были
видны и доступны другим группам и средствам внутри организации. По существу, CA ERwin DM продвигает сотрудничество и коммуникацию внутри
организации, обеспечивая большую маневренность и чувствительность к
меняющимся потребностям бизнеса.
▪
Максимально снизить риски разработки и обслуживания
Исключая возможность того, что дефекты будут мешать проектированию, и
создавая благоприятные условия для стандартизированного моделирования,
которому благоприятствует сотрудничество и коммуникация, CA ERwin DM помогает значительно снизить риски разработки и обслуживания и снижает затраты на
такие действия.
◊ Еще о преимуществах семейства продуктов CA ERwin DM r7.3 Modeling
▪
СА понимает, что моделирование данных лежит в основе ваших проектов,
направленных на работу с данными, и в течение 20 лет присутствия на рынке
основное внимание уделяет моделированию данных. Многие продавцы рекламируют
моделирование данных как побочный продукт разработки приложений, архитектуры
предприятия или моделирования приложений, СА смотрит на это иначе;
моделирование данных - наша основная задача, и CA представляет богатый
выбор инструментальных средств и лучших методов для моделирования данных.
▪ Интеграция.
Для облегчения процесса моделирования данных, на котором сосредоточены все
ваши усилия по управлению данными, CA ERwin предлагает двунаправленный обмен
метаданными с большим разнообразием платформ Database, MDM концентраторов,
инструментальных средств Data Integration, инструментальных средств Business
Intelligence, репозиториев метаданных Metadata Repositories, других инструментальных
средств моделирования и т.д. Устойчивый API CA ERwin упрощает программную
интеграцию так, чтобы вы могли создать специальную интеграцию со своими
приложениями собственной разработки.
▪
Профилирование Данных. CA ERwin Data Profiler - это новое предложение, которое позволяет
сравнивать
реальные экземплярные данные с вашей проектной моделью. Общесистемные
возможности профилирования позволяют вам сравнить качество и точность ваших
данных между гетерогенными системами, включая унаследованные системы. Для
неописанных унаследованных систем CA ERwin Data Profiler может вывести
первичные и внешние ключи, основанные на шаблонах данных, что позволяет
выбрать наиболее подходящий метод на основе ваших данных и экспортировать эти
вновь обнаруженные структуры в CA ERwin Data Profiler.
▪
Составление отчетов.
Новая возможность составления отчетов с использованием и открытого доступа к
базе метаданных CA ERwin Business Objects Crystal Reports. При наличии
таких инструментов информационные активы, хранящиеся в CA ERwin DM, могут
использоваться многими заинтересованными лицами и во многих проектах в пределах
вашей организации.
█ Место дедупликации данных в архитектуре резервного копирования D2D2T
■ Достоинства и ограничения ленточных систем
▪
Достоинства лент. Эволюция ленточной технологии позволяет ей
оставаться лидером в плотности хранения информации, обеспечивая при этом
минимальную стоимость такого хранения. Одиночный привод технологии LTO-4 может
передавать данные на скорости 120 Мб/сек или 864 Гб/час и сохранять порядка 800
Гб
данных без компрессии (порядка 1,6 Тб с компрессией) на одном картридже.
Мультидрайвная ленточная библиотека может запросто "проглотить" несколько терабайт
данных, стекающихся в типовой ЦОД, с еще более высокими показателями RTO
(Recovery Time Objective) в соответствии с принятыми в организации требованиями
SLA.
Ленточная библиотека, занимающаяся управлением приводами и лентами, может быть
легко переконфигурирована в соответствии со стоящими перед IT службой
организации
задачами. Возможность извлечения лент из устройства для их последующего
надежного
хранения в течение нескольких лет вне территории организации позволяет решить
целый
ряд задач по сохранности критически важной для бизнеса информации, готовности к
ее
восстановлению в случае возможных катастроф или инцидентов, соответствовать
требованиям регулирующих органов по сохранности информации. Использование
встроенной в LTO-4 функции шифрования и совершенной системы управления ее
ключами позволяет надежно защитить сохраняемую информацию, что практически не
влияет на производительность самого процесса резервирования.
Комбинация высокой емкости лент и их небольших размеров делает процесс
перемещения огромных объемов информации эффективным как по времени, так и по
цене. Передача данных по сети, пусть даже сжатых и зашифрованных, может
поглотить
массу времени и сетевых ресурсов. Во многих случаях передача зашифрованных
данных
на лентах может быть намного более эффективной процедурой, чем их передача по
сетям WAN, менее чувствительной к возможньм узким местам по маршруту передачи.
Современное поколение ленточных библиотек обладает еще большей общей
эффективностью проведения операций с лентами за счет встроенной
системы RAS (Reliability, Availability, Serviceability), которая позволяет проактивно отслеживать
состояние всех критически важных компонент библиотеки и окружающей сети,
незамедлительно информировать ответственный персонал о любом критически важном
изменении в окружении. Некоторые производители ленточных систем пошли еще
дальше, и внедрили дополнительный функционал, позволяющий, например,
анализировать и оценивать уровень целостности информации, хранимой на ленте,
проводить самодиагностику системы, автоматически обновлять свои внутренние
программные коды, проводить диагностику сети по маршруту передачи данных.
Основное преимущество лент состоит в их комбинации стоимости и
портативности. В то время, как новые дисковые технологии, включая дедупликацию,
сужают разрыв между стоимостью и продолжительностью хранения информации, лента
по прежнему остается абсолютным лидером, самым дешевым носителем для длительного
хранения при максимально возможной на сегодня плотности хранимых данных. Лента
до
сих пор обладает наилучшими показателями по совокупной стоимости владения (ТСО -
Total Cost of Ownership), расходам за место, энергию и охлаждение (можно
сказать, что
лента - это самая "зеленая" технология хранения на сегодня). Кроме того
благодаря своей
портативности она позволяет переносить огромные массивы данных при минимально
необходимых для этого времени и цене, что позволяет использовать ее для
перемещения
информации между двумя дисковыми системами, находящимися в противоположных
частях страны или даже мира.
▪
Ограничения лент.
Несмотря на то, что ленты идеально подходят для длительного хранения информации
и
быстрого потокового копирования больших массивов данных, они значительно менее
эффективны, когда речь заходит об обращении с небольшими объемами данных,
особенно при произвольном доступе к ним. Время резервирования множества
небольших
наборов данных может значительно увеличиться, кроме того оно сильно зависит от
настроек процесса копирования на ленту, которые используются ПО резервного
копирования.
Линейная запись, используемая в лентах для потокового копирования информации,
также
имеет свои особенности. Когда необходимо восстановить файлы, находящиеся в
середине, а уж тем более в конце ленты, в первую очередь необходимо ленту
смонтировать и пропустить все предшествующие данные, прежде чем будет получен
доступ к необходимым. Еще большие задержки возникают в случае, если лента уже
извлечена из библиотеки и находится в защищенном хранилище вне серверной
комнаты,
или даже на другой территории. Приходится констатировать очень неважные
показатели
параметра RTO для рассмотренных случаев.
Зачастую в небольших офисах или на удаленных площадках следить за резервным
копирование приходится слабо разбирающимся в этом людям, иногда даже не IT-специалистам. Это может привести к серьезным проблемам и на первый взгляд
незаметным дополнительным расходам, особенно когда речь идет о регулярном
обслуживании системы, или возникновении неисправностей.
▪ Идеальная среда для лент.
Ленты идеально подойдут организациям, располагающим постоянно доступным IT
администратором, где характеристики производительности лент удовлетворяют
требованиям системы резервирования, когда данные должны храниться длительное
время, и когда наименьшая стоимость хранения единицы информации является
определяющим фактором.
■
Достоинства и ограничения обычных дисковых систем
▪
Достоинства дисковых систем.
Неструктурированные данные, такие как домашние директории пользователей,
почтовые
ящики, индивидуальные настольные системы, являются наиболее быстро растущей
частью систем хранения данных, и именно они требуют, как правило, большинства
операций файлового восстановления. Возможность поддерживать произвольный доступ
при чтении/записи, таким образом, является непременным условием для систем,
занимающихся хранением этих неструктурированных данных. Дисковым приводам не
нужна способность поддерживать устойчивый поток данных для оптимальной
производительности, они обеспечивают произвольный доступ к хранящимся на них
данным. Поскольку передача неструктурированных данных от сервера к устройству
резервного копирования не представляет собой устойчивый поток, именно диски
могут
обеспечить эти операции лучше, чем ленты.
Существует 2 основных подхода по использованию дисковых систем как устройств для
копирования: использовать обычные RAID системы, либо специальные системы с
эмуляцией виртуальной ленточной библиотеки (VTL - Virtual Tape Library). Каждый
из
подходов позволяет увеличить производительность как резервирования, так и
восстановления, поэтому во многих системах сегодня диски используются как
промежуточный уровень для обеспечения быстрой обработки как минимум части
заданий
по резервированию. Дисковые системы обладают также избыточной надежностью,
обеспечиваемой применением современных RAID массивов, что предоставляет
дополнительный уровень сохранности данных.
Направление задания резервирования на диск, представленный в виде диска, LAN или
сетевого ресурса, во многих случаях является самым простым вариантом, походящим
для защиты данных в небольших организациях. По мере того, как данные растут,
становится
все более сложным разделять данные для сохранения, предвидеть темпы их роста. Со
временем дробление данных может замедлить производительность системы. По мере
роста объема томов представление дисковых ресурсов как VTL становится более
предпочтительным. Представление VTL может обеспечить лучшую потоковую скорость
в сравнении с обычным диском, кроме того становится более гибким
конфигурирование и
возможность предоставления доступа к такой системе.
Самая очевидная сильная сторона использования дисков для резервирования
заключается
в их способности предоставлять быстрый и простой доступ к любым хранимым данным.
В силу этой особенности минимальны задержки при восстановлении, данные, хранимые
на диске, начинают читаться в течение секунд. Для сравнения, для доступа к
данным,
хранимым на ленте в библиотеке, может понадобиться несколько минут, а если они
хранятся на лентах вне библиотеки - несколько часов и даже дней.
▪
Ограничения дисковых систем.
За более высокую производительность и надежность дискового резервного
копирования
приходится расплачиваться большей ценой. Пусть и не настолько же дорогая, как
основная дисковая система в организации, дисковая система для резервного
копирования
характеризуется намного более высокими операционными расходами, существенно
более
высокой стоимостью владения, чем ленты. Данные, хранимые на дисках, в
действительности более уязвимы в плане фатальных повреждений, а иногда даже
потери
всей площадки, даже не смотря на защиту RAID. В случае с ленточными системами
лента
просто может быть перемещена для начала процесса аварийного восстановления
(Disaster Recovery). С данными же на дисковой системе резервного копирования необходимы
дополнительные действия, чтобы предоставить аналогичный уровень защиты.
Дисковые системы резервного копирования могут быть хороши для краткосрочного,
может быть даже для среднесрочного хранения данных. Даже если данные никогда не
меняются и не растут, такая система не является экономически эффективной
платформой
для длительного хранения. Тогда мы имеем дело с неэффективным использованием
очень
дорогого ресурса, поскольку дисковая система поднята и работает из года в год,
даже
если обращение к данным носит очень нерегулярный, даже случайный характер.
Обычные дисковые системы являются наименее "зелеными" компонентами в ЦОДе,
особенно в сравнении с ленточными системами, или дисковьми системами с функцией
дедупликации данных, особенно когда речь идет о длительном хранении информации.
В случае, когда диски используются как единственные устройства для резервного
копирования (D2D), могут возникнуть серьезные проблемы с емкостью и сохранностью
данных. До того как добавить новую емкость, может истечь время жизни старых
сессий
резервного копирования, т.е. занимаемое ими место может быть перераспределено
для новых заданий. С одной стороны запуск процесса удаления старых заданий из-за
недостатка места может быть расценен как преимущество. Хотя данная стратегия
действительно во многих случаях жизнеспособна, едва ли не каждая компания
ограничена корпоративньми либо государственными требованиями по хранению
определенных типов данных в течение многих лет. Является доказанным тот факт,
что
хранение неизменных данных на дисках в течение нескольких лет является
экономически
нецелесообразным, даже с использованием самых современных технологий сжатия
данных.
Но самым сильным ограничением, давшим толчок к активному переходу на дисковые
системы с функцией дедупликации, стала высокая стоимость владения
обычными дисковыми массивами, а также необходимость создания дублированных
массивов данных для обеспечения доступности данных на случай их потери на
основной
площадке. Даже исключая данные, которым не нужна защита на случай катастрофы,
оставшиеся, в зависимости от их размера и периодичности регулярного
резервирования
требуют настолько много дискового пространства для хранения, что обычные
дисковые
системы становятся чрезвычайно дорогими в качестве носителя для резервных копий
данных предприятия. Даже постоянно увеличивая емкость дисковых систем невозможно
угнаться за экспоненциальным ростом количества генерируемых данных, что вновь и
вновь ставит дисковые системы перед жестким вопросом соответствия задачам,
стоящим
перед компьютерными сетями, и особенно теми из них, которые наиболее
требовательны
в плане высокой производительности.
▪
Идеальная среда для обычных дисковых систем.
Системы резервного копирования на базе традиционных дисковых систем идеально
подходят для высокопроизводительных систем защиты данных, когда устойчивый поток
данных не всегда возможен, особенно если источник данных содержит
неструктурированные данные, передаваемые в режиме старт-стоп. Дисковый бекап
идеален также для случая частых обращений на восстановление данных, особенно
когда
речь идет о небольших массивах данных, или даже индивидуальных файлах. Говоря о
стратегии для систем с большим или интенсивно растущим количеством операций с
данными, традиционные дисковые системы идеально смотрятся как кэш для уменьшения
окна копирования и предоставления большего дополнительного времени для
последующего перемещения данных на носители для длительного хранения, такие как
ленты. Дисковые системы резервного копирования идеально подходят также там, где
нет
речи об аварийном восстановлении после сбоев, или где нет необходимости в
хранении
данных на протяжении месяцев и лет.
■
Достоинства и ограничения дисковых систем с дудупликацией
данных
▪
Определение дедупликации данных.
Согласно определению SNIA (Storage Networking Industry Association - "Дедупликация"
осуществляется путем отслеживания массивов данных или потоков ввода/вывода на
уровне ниже файлового, и хранением, и/или передачей только уникальных данных.
Определение 'что есть дедупликация' основывается на методах, используемых для
оценки, идентификации, отслеживании и избежании дублирования. Процесс дедупликации включает в себя обновление данных слежения, хранение и/или
пересылку
данных, которые являются новыми и уникальными, и манкировании любых
дублированных данных. Проще говоря, дедупликация исключает избыточность данных
на уровне ниже
файлового, используя одну из несколько систем для хранения только уникальных
данных. Для резервного копирования, где большинство IT подразделений хранит
огромное количество повторяющихся данных снова и снова, ее значение необычайно
велико.
▪
Достоинства дедупликации данных.
Дедупликация более чем на 90% снижает требования к дисковой емкости, необходимой
для проведения регулярных операций резервного копирования, а также к пропускной
способности канала при проведении репликации данных, так как устраняется
необходимость пересылки дублированных элементов. Преимущество для пользователя
заключается в том, что он получает больше точек восстановления системы, а также
в
возможности проводить восстановления намного быстрее и чаще. Поскольку дудуплицированные данные менее требовательны к полосе пропускания канала и им
необходимо существенно меньше времени для перемещения из одного ЦОДа в другой,
удаленная репликация резервируемых данных становится еще одной реальной
технологией для защиты от катастроф. Ведь без дедупликации лишь у некоторых
удаленных филиалов компаний была возможность (каналы), либо достаточное
количество времени для проведения репликации сохраненных данных.
С дедупликацией данных становится обычным делом встречать людей, хранящих на
дисках ежедневные бекапы на протяжении недель и даже месяцев, реплицирующих свои
данные в удаленные ЦОДы для долгосрочного хранения, причем передаются только те
данные, которые действительно требуют такого хранения. Полные резервные копии на
ленты делаются при этом лишь раз в несколько дней. Большинство заданий
восстановления делается с локальных дисковых систем, причем хранящаяся на них
информация надежно защищена путем создания резервных копий, хранящихся на
удаленных площадках. Как часть данной многоуровневой архитектуры, меньшее
количество лент отправляется на хранение вне серверной комнаты для длительного
хранения на случай непредвиденных событий. Имея на вооружении быструю репликацию
данных, можно консолидировать задания резервного копирования в одном ЦОДе, что
просто и в плане управления, и в плане администрирования хранения на лентах.
Вместо
того, чтобы иметь множество небольших ленточных устройств на каждой удаленной
площадку или в филиале, регулярно отправляющих ленты на хранение в Центр,
множество дисковых систем с функциями дедупликации и репликации могут пересылать
уникальные данные в основной ЦОД, где затем они уже будут перемещены для
длительного хранения на лентах.
Наиболее сильная сторона дудуплицированных дисков состоит в том, что используя
их,
пользователь существенно снижает совокупную стоимость владения системой (ТСО).
Ведь действительно, значительно уменьшается количество стоек, заполненных
обычными
дисками, а кроме того снижаются затраты на управление системой резервного
копирования на удаленных площадках за счет использования репликации данных.
Можно
достичь определенной экономии в расходах на энергию, охлаждение, занимаемое
системой место даже при самых скромных значениях коэффициента дедупликации.
Помимо снижения параметра ТСО для таких дисковый систем, удаленная репликация
позволяет уменьшить операционные расходы за счет уменьшения количества ленточных
систем на удаленных площадках и хранимых там лент.
▪ Ограничения дедупликации данных.
Не в любой среде и не на любых типах
данных можно ощутить преимущества дедупликации. Среды, отличающиеся высокими темпами роста данных или высокими темпами их изменения, обычно характеризуются слишком большим количеством уникальных данных ото дня ко дню, чтобы позволить существенно уменьшить размер резервируемых
данных. Для данных, которые почти полностью уникальны (зашифрованные данные), или обладающие очень малой способностью к сжатию (цифровые изображения), эффект от использования дедупликации будет минимальным. Эффект будет невелик и для данных, которые не сохраняются время от времени, или когда сохраняемые данные состоят из изображений с значительным количеством уникальных данных. Для примера, четыре полные бекапа, созданные за четыре последовательных дня,
будут иметь высокий показатель повторяемости данных, в то время как четыре бекапа, созданные в первый день каждого календарного квартала, будут обладать гораздо меньшей похожестью.
Дедупликация данных также неминуемо вносит некоторое количество дополнительной нагрузки в систему, что влияет на ее производительность, и влечет за собой
некоторые технологические изменения там, где происходит перегрузка. Дедупликация на
источнике (Source based de-duplication), когда технология встроена в ПО, работающее в
первичной
среде передачи данных, накладывает дополнительную нагрузку на промышленные
сервера, результатом чего может быть замедление работы как заданий резервного.
копирования, так и самих приложений. Дедупликация на приемнике (Target based
de-duplication), когда приложение пересылает данные на систему-приемник, которая дедуплицирует их при получении, также может существенно замедлить работу в сети.
Поточные системы обрабатывают данные на лету, т.е. дополнительная нагрузка также
может привести к замедлению заданий резервирования.
Отсроченная, или так называемая постобработка, изначально предполагает получение
и
данных от источника и сохранение их на дисках приемника с последующей их дедупликацией вне окна резервного копирования, т.е. дедупликация не замедляет
задание
резервного копирования, однако необходимо большее свободное дисковое
пространство.
Адаптивный метод, предложенный Quantum, предполагает дедупликацию на лету, но с
созданием дискового буфера. Процесс ведет себя как традиционный поточный метод
на
большинстве систем среднего класса, но может подстраиваться под скорость потока
данных для избежания замедления задания резервного копирования, т.е. окно
резервного
копирования по прежнему остается в приемлемых пределах. Новейшее поколение
систем дедупликации, среди которых модель DXi7500 является первой, позволяет выбирать
различные методы дедупликации для различных заданий резервного копирования, т.е.
пользователь может получить именно ту комбинацию производительности и
используемого дискового пространства, которая наилучшим способом будет
соответствовать именно его уникальной комбинации данных.
▪ Идеальная среда для дедупликации данных.
Системы дедупликации идеально подходят для случаев, когда резервируемые данные
обладают некоторой обоснованной избыточностью. По сути, чем выше избыточность
данных, тем более эффективной будет система дедупликации. Комбинация данных с
высокой избыточностью и частых, полных циклов резервного копирования,
увеличивает
экономию выделяемой емкости и производительность восстановления данных.
Примерами могут служить почтовые системы, системы совместного пользования,
системы управления активами, виртуальные серверы (резервирование системы, ее
конфигурации и связанных данных) и домашние директории/файлы совместного
доступа.
Компании, заинтересованные в уменьшении количества, или вообще в отказе от
ленточных библиотек в своих удаленных офисах или филиалах, могут связать свои
дисковые устройства дедупликации и в защищенном режиме реплицировать данные
между территориально распределенными площадками, автоматизируя свои бизнес
процессы обеспечения непрерывности/восстановления бизнеса. Это, в свою очередь,
может уменьшить административные затраты и увеличить общую надежность системы
резервного копирования.
■
Архитектура D2D2T и воздействие на нее дедупликации данных.
Дисковая система с функцией дедупликации меняет правила для систем D2D2T.
Комбинация таких дисковых систем с лентами и соответствующим управляющим
программным обеспечением позволяет пользователю воспользоваться большим
количеством дополнительных преимуществ в дополнение к типичной системе D2D2T:
-
соответствовать более строгим требованиям SLA (Service Level Agreement) и
соответствующим значениям RPO и RTO за счет сохранения большего количества
бекапов на дисках, а не на лентах;
- уменьшить операционные расходы (место, энергия, охлаждение) за счет работы с
меньшим количеством устройств при большей емкости данных;
- добиться более быстрой репликации данных, чтобы избавиться от лент на
удаленных площадках, как следствие - уменьшение операционных и
административных расходов;
- централизация операций с лентой, т.е. увеличение безопасности и уменьшение
рисков потери данных;
-
уменьшение суммарной стоимости владения (TCO) за счет уменьшения
количества дисковых систем, необходимых для резервирования, а также
уменьшения количества лент, создаваемых, сопровождаемых, копируемых,
транспортируемых и хранящихся вне стен организации.
Дисковые системы с функцией дедупликации данных обеспечивают сравнительную
производительность и надежность традиционных дисковых систем при значительной
экономии полезной емкости (до 90% и выше). Такое улучшение
утилизации
дискового пространства позволяет сохранять больше данных и на более длительные
периоды времени, обеспечивает лучшую производительность процесса восстановления
данных, что позволяет соответствовать существенно более жестким требованиям по
RPO
(Recovery Point Objective) и RTO.
Дедупликация делает удаленную репликацию более быстрой и легкой. Располагая
дедуплицированной резервной копией, можно передавать в централизованное
хранилище
данных только уникальную информацию. Параллельно с локальной оптимизацией
данных, оптимизируется и процесс передачи данных. Обладая эффективной
репликацией,
теперь возможно заменить ленточные библиотеки в удаленных офисах на дисковые
системы с функцией дедупликации и реплицировать данные в единый центр хранения
данных или резервный центр, где вся информация будет храниться уже на лентах
продолжительное количество времени.
▪
Воздействие дедупликации на совокупную стоимость владения (ТСО).
Добавив дедупликацию к типичной системе архитектуры D2D2T можно добиться
уменьшения расходов на систему до 400% согласно исследованию, опубликованному
Clipper Group. Документ содержит расчет, согласно которому стоимость хранения 1
Тб
данных на обычных SATA дисках и на LTO-4 лентах имеет соотношение 23:1, если
диски
не использовали дедупликацию. Когда появлялась дедупликация, экономия дискового
пространства достигала 90%, что существенно влияло и на стоимостное соотношение.
Исследование проводилось на многоуровневой системе резервного копирования,
использовавшего копирование диск-на-диск как буфер при копировании на ленточную
библиотеку для длительного хранения.
Дисковая система с функцией дедупликацииможет существенно изменить краткосрочное
хранение и ТСО для многоуровневой системы резервного копирования. Даже при
консервативном значении коэффициента дедупликации, равном 20 (Clipper Group
называет эффективным значением этого коэффициента в диапазоне 1:10 - 1:100),
становится возможным заменить 20 полок с обычными дисками всего лишь на одну
полку дисков с функцией дедупликации. Это двадцатикратное увеличение эффективной
емкости существенно уменьшает затраты на энергию, охлаждение, занимаемое место,
то
есть те самые ключевые факторы, которые и определяют совокупную стоимость
владения
системой (ТСО).
Помимо того, что происходит замена обычных дисков, использование дедупликации
приводит к изменению регламента использования лент. Благодаря дедупликации и
репликации данных из удаленных офисов мы получаем защиту данных, сходную с той
которую обеспечивало бы удаленное хранение на ленте. Обладая такой
альтернативной защитой можно изменить цикл использования лент - еженедельные и ежемесячные
задания резервного копирования могут быть использованы вместо прежних ежедневных
полных, либо инкрементальных копий. В зависимости от характера бизнеса компании
использование лент для некоторых задач вообще может быть прекращено, что
позволит
сфокусировать их использование в основном для долгосрочного хранения данных, для
удаленного хранения на случай чрезвычайных ситуаций.
■
Многоуровневое решение Quantum для защиты данных
Quantum предлагает многоуровневое решение для резервного копирования данных
архитектуры D2D2T, состоящее из высокопроизводительных виртуальных дисковых
библиотек (семейство DX), дисковых систем с запатентованными технологиями
дедупликации и репликации (семейство DXi) и обширной продуктовой линейки
автоматизированных ленточных библиотек (семейство Scalar). Для обеспечения
дополнительной безопасности ленты могут хранить зашифрованные данные и
обслуживаться развитой системой управления ключами шифрования.
Quantum предлагает компоненты единой системы резервного копирования,
объединенные удобным средством управления аппаратурой - Quantum Vision, которое
позволяет обнаруживать, сопровождать и управлять каждым компонентом этой системы
с
единой консоли. Кроме того, вся система резервного копирования может
обслуживаться
единой сервисной организацией, что позволяет сделать данный общий программный
центр доступным для удаленного мониторинга и диагностики.
Даже на уровне отдельных компонент данной большой системы Quantum предлагает
комплексный подход к решению стоящих задач. Устройство DXi7500, например, представляет собой дисковую систему класса
Enterprise, которая объединяет в
себе сразу
несколько технологий. Оно может функционировать и как обычная дисковая система,
представленная в сети как виртуальная дисковая библиотека или обычное NAS
устройство с очень достойной производительностью, и как система для резервного
копирования с функцией дедупликации и возможностью удаленной репликации
сохраняемых данных.
Возможность выбора политик проведения дедупликации делает модель DXi7500 очень
гибкой, что позволяет пользователям применять различные методы дедупликации для
различных заданий резервного копирования для достижения оптимального баланса
между производительностью и емкостью системы. Существует также возможность
прямого создания лент, что позволяет данным автоматически мигрировать с дисков
на
ленты для длительного хранения, причем данный перенос идет в фоновом режиме и не
влияет на производительность самого процесса резервного копирования. Данная
опция DXi7500 полностью поддерживает пакеты приложений резервного копирования,
обладающие возможностью организации автоматической миграции данных, включая
функцию NetBackup 6.5 Direct-to-Tape от Симантек.
Добавляя шифрование во время процесса репликации (очень важная опция семейства
DXi) и при хранении на лентах, т.е. на всех этапах процесса резервного
копирования, мы
получаем высокоинтегрированное решение, которое позволяет достичь оптимального
баланса между производительностью и стоимостью системы на всем протяжении жизни
пользовательской информации.
Продолжение раздела «Решения для хранилищ данных»
|
Ретроспектива |
«Only the Paranoid Survive» — книга председателя
совета директоров корпорации Intel Эндрю Гроува, представленная журналистам
стран СНГ в ходе телемоста с автором. В книге рассматриваются кризисные
ситуации, с которыми компании сталкиваются в своей деятельности, и различные
варианты преодоления кризисов. При этом автор опирается на собственный опыт
антикризисного управления компанией. Именно Эндрю Гроув возглавлял Intel в
судьбоносные периоды её 35-летней истории, когда решался вопрос самого
существования корпорации и вырабатывал наиболее оптимальные методы борьбы с
кризисами. В книге рассказывается не только о том, как преодолеть кризисы, но и
содержатся рекомендации по обращению кризисных ситуаций в свою пользу.
В своей работе Эндрю Гроув приводит примеры успешного преодоления корпорацией
кризисов, вызванных, в частности, появлением на рынке конкурентов — японских
производителей модулей памяти, а также обнаружением ошибки в процессоре Intel
Pentium. Эти эпизоды истории Intel стали хрестоматийными и активно используются
ведущими бизнес-школами в качестве примеров удачного проведения антикризисных
компаний.
«У всех кризисов есть одна замечательная черта: рано или поздно они
заканчиваются. Те, кто помнит эту простую истину и продолжает, несмотря ни на
что, наращивать свой потенциал, имеет наилучшие шансы выйти из кризиса
победителем.»
Потенциал информационных технологий использовать активнее призвал
российскую «бизнес-элиту» президент и главный директор по операциям корпорации
Intel Пол Отеллини на состоявшемся в Москве Бизнес-форуме Intel. Лейтмотивом
доклада Отеллини стала оценка информационных технологий и построенной на их базе
IT-инфраструктуры как действенного инструмента повышения эффективности ведения
бизнеса и осуществления функций госуправления в современных условиях, когда
наблюдается «замораживание» или даже сокращение бюджетов, выделяемых мировыми
бизнес-структурами на развитие собственной сферы IT.
Массовое обновление технологической компьютерной базы, последний раз
происходившее в конце прошлого века в преддверии «Проблемы-2000», позволило в
значительной мере модернизировать компьютерный парк корпоративного сегмента
рынка. Однако, жизненный цикл аппаратного обеспечения, в среднем составляющий
3-4 года, сегодня подходит к концу. Продление сроков использования устаревшего
оборудования повышает бизнес-риски: ведёт к возрастанию стоимости владения и
поддержки аппаратной части, увеличению вероятности отказа комплектующих,
снижению уровня информационной безопасности в силу использования старого ПО. По
оценкам Intel, стоимость эксплуатации старого ПК старше трёх лет на 25% выше
стоимости поддержки более современного устройства. В то же время, как, например,
показывает опыт многих компаний, при замене настольных компьютеров на мобильные
ПК производительность труда сотрудника возрастает на 20-25%, а по мнению
экспертов Intel, «мобильные» сотрудники работают на 3-8 часов в неделю больше.
А. Барсуков, журнал "ТКТ" № 11, 2003 г. (через эту ссылку можно бесплатно скачать справочник)
Стандарт MPEG-2: комментируют специалисты.
На Втором международном конгрессе НАТ «Прогресс технологий телерадиовещания»
в ряде докладов была затронута проблематика процессов сжатия сигнала. Ниже приводятся выдержки из докладов, частично служащие ответами на вопросы, с которыми обращаются читатели в редакцию «ТКТ».
П. Волланд. Snell & Wilcox.
Чтобы наиболее эффективно использовать цифровые каналы и сохранять качество, вещатели должны тщательно следить за выходными сигналами кодеров
сжатия и мультиплексоров транспортных потоков. Фирма Snell & Wilcox создала для этого набор средств.
Без предобработки сигналов многоступенчатыми блоками
шумоподавления и фильтрации нельзя рассчитывать на эффективное сжатие кодерами
MPEG — это обстоятельство обусловило широкое применение аппаратуры серии Prefix.
На основе достижений фирмы в области измерения сигналов MPEG был создан такой элемент передающих комплексов, как источник аварийных заставок и тест-таблиц
Sentinel
(«Страж»). Он непрерывно контролирует наличие и корректность основных компонентов транспортного потока и
выборочно заменяет неисправные программные потоки на
резервные, хранящиеся в его памяти.
В течение длительного периода многие организации будут
продолжать применять имеющееся в эксплуатации оборудование, использующее высокоскоростные (несжатые) цифровые сигналы. На практике это означает декодирование всех
сжатых сигналов до стандартного формата 270 Мбит/с, микширование на высокой скорости и вновь сжатие. Операции
компрессии-декомпрессии становятся многократными. Однако технология MOLE впервые обеспечивает свободное от потерь перекодирование, переключение и монтаж цифровых потоков
MPEG в ТВ-студиях. Сигнал MPEG содержит описание
всех решений сформировавшего его кодера. При обычном декодировании MPEG эти сведения используются однократно
(только для разжатия сигнала) и недоступны последующим звеньям тракта. Поэтому повторное сжатие добавляет новые искажения. Напротив, декодер
MOLE сохраняет сведения и
включает их в свой выходной сигнал, поэтому последующий
кодер сжатия просто повторяет действия первого кодера и искажения не накапливаются.
М. Грудзинский.
А. Гринкевич.
Б. Титков. НИИТ.
Алгоритмы стандарта MPEG-2
(ISO/IEC 13818) совершенствуются
под контролем MPEG Video Group.
Информационной основой для исследователей служат тестовые модели (ТМ), позволяющие получить
представление о качестве алгоритмов MPEG-2, используемых
в кодеках систем компрессии. Последней полной версией
является модель ТМ-5 с возможностью её компьютерного воспроизведения при использовании программного пакета
mpeg2v1.2(С). Изучение ТМ-5 дает возможность выявить главные направления поиска путей дальнейшего улучшения алгоритмов кодирования на основе
MPEG-2. Очевидно, что для
оптимизации кодирующей эффективности этого стандарта
необходимо повысить эффективность действия следующих
алгоритмов:
• оценки и компенсации движения объектов в последовательности кадров;
• дискретного прямого косинусного преобразования (ДКП);
• оптимизации работы буфера кодера;
• адаптивной генерации таблиц квантизации коэффициентов ДКП.
Примерно 80-95% времени кодирования занимает процесс оценки движения объектов в видеопоследовательности
кадров. Быстрые алгоритмы оценки движения являются
ключом к решению проблемы сокращения временной избыточности. Существуют алгоритмы, позволяющие ускорить
процедуру оценки движения в сотни и даже тысячи раз. Однако это не приводит к столь же решительному ускорению
работы всей системы в целом и повышению качества восстановленного изображения. Только комплексная оптимизация всех потенциальных резервов
MPEG-2 позволяет улучшать возможности существующих сегодня алгоритмов. За
счет предложенных и реализованных авторами алгоритмов
иерархического оценивания движения объектов в последо-вательности кадров,
быстрого целочисленного косинусного
прямого дискретного преобразования, управления буфером
кодера с предотвращением переполнений и частичного его заполнения, адаптивной процедуры формирования ДКЛ таблиц квантизации удалось увеличить скорость работы модифицированной модели ТМ-5 в 25-30 раз и улучшить качество декодированных изображений от 27-29 до 31-33 дБ.
Ю. Зубарев,
НИИР.
Ввиду близкого завершения работ по международной стандартизации в области цифрового телевещания в докладе приводятся соображения по созданию новых
систем спутникового непосредственного
телевещания (СНТВ) в цифровом виде на основе стандарта MPEG-2/DVB, который необходимо узаконить в России с
учетом последних результатов стандартизации, проводимой
международными организациями в 1998-1999 гг. на начальном этапе практического внедрения цифрового ТВ-вещания.
С этой целью НИИР к концу 1998 г. планирует завершить
разработку «Временных норм на параметры передачи ТВ-сигналов с цифровой компрессией по распределительным спутниковым каналам» как нормативной основы для широкого
внедрения цифрового спутникового ТВ-вещания в России.
Р Грейвс, NTSC. Цифровой телевизионный стандарт ATSC построен из четырех отдельных слоев, связанных друг с другом. Верхний — это слой изображения, определяющий форматы
изображения, включая массив пикселей, соотношение сторон и частоту кадров. Второй
— слой компрессии цифровых сигналов, где для видеосигналов принят стандарт MPEG-2, а для аудиосигналов
— Dolby AC-3 5.1. Третий — слой транспорта пакетированных данных,
где данные различного типа организованы в отдельные пакеты, в частности, «программа 1-видео», «программа 2-аудио»
и вспомогательные данные. Здесь также применяется стандарт MPEG-2. Нижний — слой передачи информации; он
определяет тип модуляции и схему кодирования каналов.
А. Мкртумов,
Л. Севальнев,
ВНИИТР.
Сложность контроля за качеством работы
кодеков MPEG-2 заключается в том, что
оценка их работы по известным измерительным сигналам аналогового телевидения не дает полной картины искажений,
возникающих при компрессии видеоданных (хотя такая проверка позволяет
выявить дефекты в аналоговых частях кодека, не связанных с
компрессией). Разработка новых методов для оценки качества
ТВ-изображений при компрессии видеоданных включает два
этапа. Первый этап включает субъективную экспертную оценку качества ТВ-изображения по методике, разработанной в АО
ВНИИТР для проверки качества изображения в трактах телецентров и принятой в виде ОСТ 58-18-96 «Техническая база
производства телерадиопродукции. Методы сертификации. 4.1.
Телепродукция». Предварительно отбираются высококачественные фрагменты из реальных ТВ-программ, содержащие
сюжеты с различными видами движений, и записываются на
высококачественном цифровом ВМ, в котором не используется компрессия видеоданных при записи. Для субъективной
оценки качества ТВ-изображения кодеков MPEG-2 воспроизводимый с полученной эталонной кассеты видеосигнал кодируется и декодируется в кодекс, после чего записывается на второй высококачественный цифровой ВМ. Записи повторяются
при различных скоростях передачи видеоданных в кодеке MPEG-2, в результате чего получается контрольная видеокассета. В дальнейшем производится субъективная оценка качества ТВ-изображений при воспроизведении видеосигналов с
эталонной и контрольной кассет.
Второй этап включает выбор и экспериментальную проверку критерия объективной оценки качества ТВ-изображения при компрессии видеоданных. Выбранный критерий должен позволять, используя эталонные испытательные изображения, получить путем их измерения цифровой результат, однозначно характеризующий качество ТВ-изображения. Некоторые исследования показывают, что при разработке объективного критерия оценки качества ТВ-изображения в системах с компрессией видеоданных за основу может быть принята средняя ошибка восстановления ТВ-отсчета за кадр.
А. Дворкович,
А. Соколов,
НИИ Радио. В докладе приведена классификация характерных искажений видеосигналов,
вносимых в изображение цифровым кодированием по стандарту MPEG. Рассмотрены основные типы искажений,
обусловленных как внутрикадровой, так
и межкадровой обработкой видеосигнала. Проанализировано влияние основных параметров
MPEG на вносимые искажения. Анализируются изображения, для которых характерные искажения становятся наиболее заметными: анализ позволяет выработать требования к синтезированным тестовым
видеопоследовательностям, которые могут использоваться
как адекватный инструмент для анализа качества работы
цифровых каналов видеопередачи, основанных на алгоритме
кодирования MPEG.
Приводятся результаты разработки тестовых изображений
для анализа качества кодирования MPEG. Показано, что стандартные тестовые сигналы, используемые для анализа качества
передачи аналогового телевидения, неприменимы для оценки
качества цифрового MPEG-кодирования изображений. Для
анализа цифровых каналов необходимы сигналы, сопряженные по спектру с каналом передачи данных. Показано, что для
цифровых каналов возможно применение модифицированных
измерительных сигналов, близких к стандартным сигналам
аналогового телевидения, но обладающих специальной формой, обеспечивающей ограничение их спектра.
Разработаны тестовые изображения относительно простой
формы, которые могут использоваться для исследований эффективности MPEG-кодеров. Приводятся тестовые видеопоследовательности, выявляющие специфические искажения при цифровом кодировании статических и динамических изображений.
Для анализа внутрикадровых искажений могут быть использованы статические элементы изображения в виде плавных наклонных одномерных или двумерных волн яркости и
цветности, а также наклонные переходы яркости. Для анализа искажений, обусловленных межкадровым кодированием,
эффективно использование движущихся с различными скоростями контрастных объектов на фоне плавных и резких
переходов яркости и цветности. Даны примеры динамических таблиц, применимых для оценки эффективности цифрового кодирования видеосигналов при наличии на входе кодирующих устройств и на выходе декодирующих устройств
систем PAL или SECAM.
Анализируются принципы реализации генератора тестовых сигналов для оценки качества
MPEG-кодирования. Исследованы возможности цифровой генерации компонентных
сигналов и полного цветового ТВ-сигнала. Рассмотрена проблема визуализации основных параметров
MPEG-потока,
принимаемого декодером, позволяющей быстро и эффективно оценить качество кодирования и составить представление
о заложенных в кодер технических решениях. Представлена
компьютерная программа декодера MPEG, реализующая такие принципы визуализации параметров видеопотока. Она
позволяет наблюдать на фоне восстановленной последовательности кадров типы макроблоков, коэффициенты квантования, вектора движения макроблоков, а также записывать
протокол декодирования потока. А. Барсуков, журнал "ТКТ" № 1,
1999 г. (через эту ссылку можно бесплатно скачать справочник)
АЛГОРИТМ
СЖАТИЯ ВИДЕОДАННЫХ НА ОСНОВЕ ТРЕХМЕРНОГО ВЕЙВЛЕТ ПАКЕТНОГО РАЗЛОЖЕНИЯ. Схема
трехмерного многополосного прямого и обратного вейвлет-разложения кратности D.
По докладу С. Н. Кириллова, Е. В. Косткиной на конференции "Современное
телевидение"
Технологии компрессии для пересылки изображений документов
были рассмотрены в докладе Технического Университета Силезии на конференции
«EVA'2000 Москва». Наиболее практикуемыми для этой цели авторы доклада назвали форматы
GIF и JPEG. Формат GIF
обычно используется для сжатия изображений, содержащих небольшое количество цветов, поэтому он не очень подходит для распространения изображений в
реальном живом цвете или в серой шкале
цвета. Гораздо лучшие результаты дает
формат JPEG, осуществляющий разделение хроматической информации, квантование информационных коэффициентов
DCT и Huffman-кодирование данных. Но,
хотя коэффициент компрессии порядка
40:1 легко достигается без большой потери качества, формат JPEG также не очень
подходит для компрессии документов:
документ содержит много высокочастотных объектов, таких как буквы и
рисунки, а элиминирование высокочастотных объектов при трансформации
ведет к существенным потерям качества
при воспроизведении документа (при повышении коэффициента компрессии
текст искажается и даже становится неразборчивым). Чтобы сделать документ читаемым, необходимо делать файл
JPEG
большого размера и это становится основным препятствием при создании, например, эффективной Интернет-библиотеки.
В итоге, обычно принимается решение о
переводе документа в двуцветный вид, а
затем применяется компрессия в стандарте CCITT (разработки Fax Group 3 или Fax
Group 4), обеспечивающем разборчивость
текста при большом коэффициенте сжатия — правда, ценой полной потери информации о цвете, который, наряду с текстурой бумаги, стилем почерка или техникой печати нередко более важен, чем информационное содержание документа,
которое в большинстве случаев пользователю уже известно.
В последнее время GIF, JPEG и факсовые форматы заменяются новыми
форматами, основанными на волновом
принципе, ориентированном на прямую
компрессию документов, отсканированных с высоким качеством. Для распространения оцифрованных документов по компьютерным сетям среди
волновых форматов наибольший интерес представляют три: DjVu, LuraDocument и
MrSID.
• Формат DjVu, разработанный AT&T Bell Labs, представляет изображение используя три слоя.
— Маска, являющаяся двуцветным представлением текста и рисунков. Этот слой,
сжимаемый без потерь, показывает, какой
пиксель относится к переднему плану (текст,
рисунки, подписи), а какой — к фону (текстура бумаги и пр.).
— Второй уровень представляет цвета
фона, используя трансформацию, основанную на волновом кодировании.
— Третий уровень содержит информацию
о переднем плане изображения.
Формат DjVu позволяет точно воспроизвести документ, отсканированный с
разрешением 300 dpi, уменьшив размер файла
с 25 МБайт до 100-200 кБайт. Рекомендуется
для компрессии страниц книг, газет, цветных
фотографий, каталогов и т. д.
• Формат LuraDocument1 (LDF), разработанный компанией LuraTech, так же как и
DjVu разделяет документ на текст и фон, что
позволяет достичь высокого коэффициента
компрессии — до 200:1. Одно из основных
достоинств формата — значительная экономия дисковых и сетевых ресурсов.
• Формат MrSID, разработанный компанией LizardTech, предназначен для кодировки больших изображений высокого разрешения. Он уменьшает первоначальные размеры
файла, сохраняя качество изображения. Рекомендуется для сжатия больших файлов сканированных документов, фотографий, старых книг, газет и, особенно, больших географических карт. А.
Барсуков, журнал "ТКТ", № 2, 2001 г. (через эту ссылку можно бесплатно скачать справочник,
авторские материалы которого разрешено использовать для написания таких работ,
как эссе, сочинение, доклад, реферат, курсовая работа, дипломная работа,
бакалаврская / магистерская работа, диссертация)