ВАЖНЫЕ НОВОСТИ
Завершена сборка аппарата для миссии «Луна-25»

Космический аппарат для осуществления миссии «Луна-25» собран и готовится к пуску с космодрома Восточный в Амурской области. Роскосмос работает над определением новой даты, которая перенесена с мая на июль, сообщил в четверг журналистам генеральный директор Роскосмоса Дмитрий Рогозин. «Аппарат собран, проводится дополнительная проверка, испытания. Просто мы выбираем наиболее удобные маршруты ба...

Вызовы цифровизации энергетики: Росатом выступает за выработку цифровой этики

В ее преддверии директор по цифровизации Госкорпорации «Росатом» Екатерина Солнцева, выступая на глобальной сессии «Рост машин и цифровой потребитель» WEW-2021 (Всемирной энергетической недели), назвала четыре основных вызова, которые стоят перед цифровизацией энергетики. В их числе указаны гармонизация использования различных источников энергии, выработка новых бизнес-моделей для изменений в стр...

Ветропарки Росатома выработали 1 млн мегаватт-часов «зеленой» энергии

В Ставропольском крае открыта третья ветроэлектростация – Бондаревская ВЭС установленной мощностью 120 МВт. На сегодняшний день на юге России действуют уже пять ветроэнергетических станций Росатома, общая установленная мощность которых составляет 660 МВт. Строительство еще одного ветропарка – Медвеженской ВЭС в Ставропольском крае мощностью 60 МВт будет завершено до конца этого года. Ф...

Ростех завершил испытания второго газогенератора российского двигателя для «Суперджета»

Объединенная двигателестроительная корпорация Ростеха успешно завершила испытания второго опытного газогенератора – «сердца» двигателя ПД-8, предназначенного для самолета SSJ-NEW. В рамках испытаний была подтверждена корректная работа узлов, требуемые параметры температуры и давления, соответствие экологическим нормам. Следующим этапом проекта станут стендовые испытания первого опытного обра...

Власть и бизнес обсудят актуальные вопросы промышленности на XVI Национальном конгрессе «Модернизация промышленности России: приоритеты развития»

5 и 6 октября 2021 года в Центре цифрового лидерства состоится XVI Национальный конгресс «Модернизация промышленности России: приоритеты развития». Национальный конгресс входит в перечень основных мероприятий Года науки и технологий, утвержденных Правительством Российской Федерации. Ключевая тема мероприятия в 2021 году – «Комплексная модернизация отраслей промышленности». В программе Нац...

В Якутске к 2025 году построят Парк будущих поколений стоимостью 1,5 млрд рублей за счет инвестора

В Якутске до 2025 года появится Парк будущих поколений для создания городской экосистемы полезного досуга, творческого, интеллектуального, духовного и физического развития детей и молодежи. Комплекс будет построен на территории 2,4 га. Планируемый объем вложений в проект составит около 1,5 млрд рублей. Соответствующее соглашение подписали инвестиционно-строительная фирма «Дирекция по строительс...

29 Января 2009

Промышленные системы хранения данных

Промышленные системы хранения данных

Инфраcтруктура хранения и oбрабoтки данных – oдна из важнейших cocтавляющих прoмышленных IT-cиcтем. Их эффективная рабoта немыcлима без надежнoгo фундамента – cерверoв, cиcтем хранения, cтациoнарных и мoбильных рабoчих меcт.

Кoнcoлидация вычиcлительных реcурcoв

Сегoдня прoмышленные предприятия вo вcем мире предъявляют выcoкие требoвания к cовременным вычиcлительным cистемам и системам хранения данных. Вычислительная инфраструктура должна быть адаптируемой под быстро меняющиеся задачи. Вычислительная инфраструктура должна гарантировать заданный уровень производительности приложений и поддерживать необходимый уровень масштабируемости, наращивание ресурсов должно производиться без кардинального перестроения архитектуры вычислительного комплекса. Вычислительная инфраструктура должна быть оптимизирована с точки зрения обеспечивающих подсистем, приоритетными являются задачи снижения энергопотребления, тепловыделения, габаритов. Стоимость владения вычислительных систем должна быть минимизирована.

Одной из передовых концепций построения инфраструктуры является консолидация вычислительных ресурсов.

Опыт решения задач

По словам вице-президента и технического директора компании Hitachi Data Systems Х. Йошиды, благодаря развитию технологий хранения данных в течение нескольких десятков лет цены на диски снижались примерно на 30% в год. Однако расходы на хранение данных растут, потому что контроллеры хранения данных с кэш-памятью появились уже 20 лет назад, но некоторые архитектуры с тех пор не изменились. С момента появления сетей хранения данных, призванных повысить эффективность использования ресурсов, прошло уже более 10 лет. Ресурсы хранения данных до сих пор используются лишь на 20–30%.

Семь лет назад появилась технология виртуализации хранения данных версии 1.0, обеспечивающая консолидацию ресурсов в сети хранения данных.

Архитектуры, разработанные 20 лет назад, были рассчитаны на следующие условия:

     – прямое подключение устройств хранения данных – отсутствие совместного использования;
     – работа в две смены – интервалы для обслуживания;
     – емкость, измеряемая гигабайтами;
     – простота управления и переноса.

Сети хранения данных должны были обеспечить консолидацию за счет отказа от отдельных разрозненных устройств хранения. Они должны были повысить эффективность использования ресурсов хранения данных и дать возможность централизованного управления.

Основная проблема в том, что сети хранения данных соединили серверы с устройствами хранения, однако не смогли устранить разрозненность. Выделение ресурсов до сих пор производится в каждой системе данных отдельно. Не существует средств для сетевого обмена и переноса данных между системами хранения данных. Виртуализация хранения данных версии 1.0 на основе сетей хранения не решает проблему мобильности данных.

Однако способы решения вышеназванных проблем при развитии систем хранения данных существуют. Перечислим основные из них:

     – консолидация – повышение компактности и сокращение количества устройств;
     – увеличение нагрузки на ресурсы – виртуализация, динамическое выделение ресурсов;
     – устранение повторов данных – сжатие, устранение дублирования, хранение в одном экземпляре, копирование при записи;
     – архивирование неактивных данных – уменьшение объема рабочих данных.

Зачастую рабочее дисковое пространство расходуется следующим образом: примерно 1/8 занимают непосредственно сами данные, 1/8 – запас на будущее, столько же используется неэффективно, половина дискового пространства приходится на копии 3-N. Необходимо учитывать также, что существует дополнительное пространство в массивах RAID.

Стоимость оборудования составляет лишь малую часть общих расходов. Соотношение расходов на управление и оборудование – от 2:1 до 4:1 и более. Расходы делятся на две группы: расходы на управление и расходы на оборудование. К первой группе относятся: перенос устройств, резервное копирование и восстановление, плановая остановка работы, контроль изменений, учет условий эксплуатации. Расходы на оборудование включают в себя запас на будущее, данные, копии 3-N, неэффективное использование.

В результате этого рост расходов на IT не ведет к росту прибыли. Установка отдельных систем (RISS, VTL, CAS, InServ S800, AXIOM, Nearline, NAS) также не решает проблему.

Виртуализация версии 2.0 предполагает выход за рамки консолидации, организованной при виртуализации версии 1.0. Она обеспечивает мобильность данных, бесперебойную работу, восстановление после сбоев и технологическую модернизацию без остановки работы. Виртуализация версии 2.0 позволяет задействовать самые современные возможности платформы услуг хранения данных для внешних систем хранения.

Технология виртуализации на основе контроллеров является своеобразным ключом к сервисно ориентированному хранению данных:

     – обеспечивает общую поддержку хранения и обслуживания данных с учетом всех требований разнородных приложений и систем хранения;
     – не создает сложностей или задержек;
     – не ограничивается подключением к сетям хранения данных;
     – сохраняет всестороннюю безопасность;
     – обеспечивает беспрепятственную интеграцию будущих возможностей.

Существующая технология для динамичного выделения ресурсов позволяет оптимально использовать объемы за счет выделения только тех ресурсов, которые действительно необходимы. Производительность систем хранения данных оптимизируется за счет распределения операций ввода-вывода по большему количеству каналов. В результате упрощается управление за счет резервирования затребованных ресурсов и автоматического выделения только тех объемов, которые действительно используются. Улучшается контроль эффективности за счет распределения операций ввода-вывода между дисками в общем массиве. Виртуализация версии 2.0 позволяет применить услугу динамического выделения ресурсов и для внешних устройств хранения данных.

Происходит перераспределение ресурсов, используемых неэффективно:

     – виртуализация и динамический перенос;
     – виртуализация и создание логических разделов;
     – динамическое выделение ресурсов и уровней с меньшей стоимостью;
     – сокращение расходов на более низкие уровни.

К эксплуатационным преимуществам технологий виртуализации и динамического выделения ресурсов относятся:

     – перенос данных между разнородными устройствами хранения без остановки работы;
     – виртуальные библиотеки магнитных лент (VTL) и устранение дублирования сокращают время резервного копирования и восстановления, многоуровневое хранение снижает расходы, а система Backup Services Manager обеспечивает репликацию в разнородных средах;
     – обслуживание, перенос данных, модернизация и выделение ресурсов без остановки работы;
     – единое управление разнородными системами, изменение конфигурации без остановки работы;
     – уменьшение размеров устройств и сетей хранения данных и требований к электропитанию и охлаждению за счет консолидации.
Проводится консолидация различных требований к хранению данных с помощью единой платформы: услуг многоуровневого хранения, информационных, файловых услуг, виртуальной библиотеки, динамического выделения ресурсов. На базе единой платформы услуг применяется устранение дублирования с удаленной репликацией. Коэффициент устранения составляет 25:1. Для удаления репликации данных требуется меньший диапазон.

Российский опыт внедрения систем хранения данных

По сообщениям «ЛУКойл-ИНФОРМа», для поддержания работы информационных систем организаций Группы было необходимо надежное и высокопроизводительное оборудование. Модульные дисковые массивы, установленные в московском офисе компании, не обеспечивали уровень емкости и производительности, необходимый для консолидации хранения больших объемов данных, поэтому было принято решение о приобретении новых систем хранения класса high end.

В дополнение к расположенному в центре Москвы основному ЦОДу «ЛУКойл-ИНФОРМа» был построен резервный ЦОД, связанный с остальными по опто-волоконному кольцу. В обоих ЦОДах были установлены системы хранения данных TagmaStore USP 600 емкостью по 20 терабайт, которая была позднее наращена до 80 терабайт (максимальная емкость внутренних дисков USP 600 равна 148 терабайт) и построена сеть хранения SAN на базе коммутаторов SW48000.

Синхронная репликация данных между USP 600 основного и резервного ЦОДа выполняется с помощью программного обеспечения Hitachi TrueCopy, а резервное копирование на ленту или удаленный ЦОД реализовано на основе «мгновенных снимков» данных, генерируемых с помощью пакета Hitachi ShadowImage. Помимо SAP на платформе SPARC дисковый массив USP 600 также обслуживает инфраструктурные приложения (электронную почту, службу каталогов и т.д.). Функции виртуализации USP позволили перенести на нее данные из старых систем хранения без прерывания работы приложений, после чего в соответствии с концепцией управления жизненным циклом информации ILM освободившаяся в старых системах емкость стала использоваться для хранения вторичных (архивных и редко запрашиваемых) данных. Репликация на резервный ЦОД гарантирует не только сохранность, но и непрерывную доступность данных в случае выхода из строя основного ЦОДа.

Планируется оснастить все региональные ЦОДы, которые в настоящее время создаются на базе филиалов «ЛУКойл-ИНФОРМа» дисковыми массивами HDS USPVM – версией USP в модульном конструктиве. Такая стандартизация инфраструктуры хранения данных на основы архитектуры Hitachi должна существенно упростить управление хранением данных в масштабе предприятия и обеспечение их защиты.

Эффективность использования

Объемы систем хранения данных растут все быстрее, и проблема эффективности использования выходит на первый план. Массивы хранения данных, созданные на основе архитектур 20-летней давности, не способны справиться с сегодняшними динамическими требованиями. Для удовлетворения новых требований в сфере хранения данных необходимо создавать услуги, а не монолитные решения. Сервисно ориентированная архитектура хранения данных упрощает инфраструктуру хранения за счет общих услуг, которые можно задействовать для всех ресурсов хранения данных для решения следующих задач: консолидация, повышение эффективности использования, устранение избыточности, архивирование.

Эффективность использования ресурсов хранения данных должна обеспечить экологическую чистоту. Динамические центры обработки данных в будущем будут создаваться на основе сервисно ориентированных технологий.

Ольга Степанцева

Кол-во просмотров: 10517
На правах рекламы