IBM Spectrum Scale
Высокопроизводительное масштабируемое ПО для хранения данных и службы обработки корпоративных данных с возможностями глобального объединения
Масштабируемая высокопроизводительная глобальная параллельная файловая система
Современные предприятия и организации создают, анализируют и сохраняют намного больше данных, чем когда-либо ранее. Появляющиеся в организации и в облаке островки данных затрудняют управление системами и увеличивают расходы. Чтобы стать лидером в своей отрасли, нужно не только анализировать информацию быстрее конкурентов, но и успешно управлять стремительным ростом инфраструктуры. Базовая информационная архитектура организации, предоставляющая аналитическую информацию, должна с одинаковой надежностью, безопасностью, эффективностью и высоким быстродействием поддерживать как задачи работы с гибридным облаком, большими данными и искусственным интеллектом, так и традиционные приложения. IBM Spectrum Scale™ решает все эти задачи, так как это высокопроизводительное параллельное решение для управления данными с возможностями доступа к файловым и объектным данным обладает также встроенными функциями архивирования и аналитики.
Новые возможности IBM Spectrum Scale
Kubernetes и IBM Spectrum Scale
Функции контейнерного хранилища обеспечивают контейнеризацию IBM Spectrum Scale и доступ к кластерным данным с высокопроизводительных узлов Spectrum Scale.
Читать краткий обзор решения (PDF, 256 КБ)
Расширенное управление файлами (AFM) для хранения объектов
В состав высокопроизводительной глобальной файловой системы теперь входит встроенное хранилище объектов, которое предоставляет доступ NVMe к данным объектного хранилища.
Читать краткий обзор решения (PDF, 256 КБ)
Cloudera и IBM Spectrum Scale
Теперь коннектор IBM Spectrum Scale Hadoop поддерживает Cloudera Analytics.
Читать спецификацию (PDF, 391 КБ)
Мгновенная интеграция с IBM Cloud Pak for Data и IBM Watson
Поддержка получения данных в реальном времени в IBM Spectrum Discover открывает новые возможности для решения задач ИИ.
Читать краткий обзор решения (PDF, 256 КБ)
Преимущества
Превосходная масштабируемость
Архитектура, не имеющая узких мест, обеспечивает максимальную пропускную способность и минимальное время отклика, недостижимое с обычными NAS.
Аналитика с учетом данных
С помощью Spectrum Scale можно не только расширять архитектуру хранения данных, но и в кратчайшие сроки автоматически переносить файлы и объекты на оптимальный уровень хранения.
Глобальное сотрудничество
Возможность доступа к данным из любого места ускоряет работу приложений на периферии сети, в центре обработки данных и по всему миру.
Целостность и безопасность данных
Функции идентификации, шифрования, защиты, стирающего кодирования и репликации позволяют удовлетворить не только деловые, но и законодательные требования.
IBM Spectrum Scale является центральным элементом информационной архитектуры IBM Storage для обработки данных и ИИ
Высокопроизводительное корпоративное хранилище
Гибкие базовые компоненты (периферия, ядро, облако)
Корпоративные службы обработки данных IBM Spectrum Scale
Не железом единым: IBM Software Defined Storage
Концепции и причины возникновения SDS (Software Defined Storage) – систем хранения, базирующихся на функционале программного обеспечения, иногда без привязки к конкретной архитектуре или аппаратной платформе, лежат в первую очередь в требованиях компаний. Сегодняшний бизнес любой компании все больше и больше движется в сторону развития аналитики, BigData, облаков и социальных медиа, которые не взаимоисключают друг друга, но дополняют общую архитектуру решений своими требованиями. Так для примера наиболее эффективные внедрения BigData не обходятся без использования аналитики. Социальные медиа уже не могут существовать без облачных сервисов и тесной их интеграции с интерфейсами социальных платформ.
В итоге приходим к тому, что влияние технологий и требований потребителей влияет на бизнес в целом, требуя более быстрого доступа к инсайтам, приводя к повышению требований к разработке новых приложений и возникновению новых конкурентов. И это все на фоне гигантского роста объемов информации, появления новых задач и внедрения облака как элемента инфраструктуры.
На фоне всего этого становится тяжелее описать требования использования СХД под весь спектр новых задач и условий. Возникает необходимость освободить данные от ограничений аппаратной платформы и перестроить их для работы с новыми бизнес процессами и приложениями. Уровни сервисных требований вводят в заблуждение IT-руководителей, привыкших к стандартным методам хранения, создавая ситуации “слепого” добавления объемов, изоляции данных в “островах” хранения, необоснованной дупликации информации, что, в свою очередь, приводит к увеличению цикла обслуживания сетей хранения, росту цены решений, усложнению процессов внутри компаний и отсутствию гибкости инфраструктуры.
Именно из-за появления таких проблем и задач возникла концепция SDS. Согласно IDC, Software Defined Storage – это связка ПО систем хранения, которая может быть установлена на любой коммодити-сервер (платформа х86, гипервизор или облако) или другую вычислительную платформу, и предоставлять весь спектр услуг по хранению и объединению существующих ресурсов размещения данных, позволяя мобильно перемещать и перераспределять мощности хранения между этими ресурсами в зависимости от требований.
Основными атрибутами SDS являются:
— работа на коммодити платформе – без специализированных аппаратных платформ или компонентов;
— полный набор услуг по хранению – эквивалентно традиционным аппаратным системам;
— объединение (федерация) множества существующих ресурсов хранения: внутренние диски, облако, другие внешние СХД или облачные\объектные платформы.
— “Shared nothing” архитектуру – архитектуру распределенного вычисления, в которой любая нода вычислительного узла является самодостаточной;
— Горизонтально или вертикально масштабируемую модель.
Software Defined Storage делится на три группы: базирующийся на файловом доступе, объектный доступ и блочный доступ.
Компания IBM выделяет три основных характеристики SDS в дополнение к выше изложенным:
Автоматически настраиваемое решение корпоративного класса, позволяющее внедрить “облачную” инфраструктуру хранения за минуты.
Глубочайший анализ и оптимизация “on permise” (на площадках заказчика) систем хранения и облачных СХД – безопасность, цена, производительность – с использованием аналитики.
Лучшая автоматизация процессов размещения и управления данных между носителями информации, системами хранения, облаками для достижения как уровней сервисного соглашения, так и уменьшения цены решения.
IBM анонсировала новую линейку программного обеспечения, которая покрывает те или иные задачи, решаемые SDS. Общее название – IBM Spectrum Storage. Она включает в себя как набор уже известных технологий, так и новейшие разработки.
Из известных стоит выделить IBM SAN Volume Controller, который на рынке с 2004 года и успешно помогает заказчикам консолидировать объемы хранения и избавиться от проблем одновременного управления СХД от разных вендоров и разных классов в пределах одной инфраструктуры, а также упрощает выделение объемов, перемещение данных между разными аппаратными платформами без остановки работы хостов, добавление уровней хранения и автоматизацию процессов перемещения и миграции между ними. SVC позволяет “спрятать”, по сути, любую Fibre Channel систему хранения и за интерфейсом самого аплайенса, и добавить функциональности виртуализированным хранилищам, в том числе функционал компрессии данных на лету, даже тех СХД, которые никогда не умели этого делать.
В разрезе нового семейства ПО SAN Volume Controller будет называться IBM Spectrum Virtualize.
IBM Spectrum Controll – софт по автоматизации управления и оптимизации инфраструктуры хранения с возможностью предоставления порталов самообслуживания, глубокой аналитики и рекомендаций по настройке. Ранее был известен как Virtual Storage Center, который включает в себя значительно переделанный и улучшенный Tivoli Productivity Center.
IBM Spectrum Protect является усовершенствованной версией Tivoli Storage Manager, обеспечивающей систему бэкапов и архивирований по графикам, интенсивности нагрузок и критериям. Конечно, не обошлось и без алгоритмов по проверке данных и технологий восстановления. Полноценная поддержка совместной работы заложена в само понятие семейства продуктов Spectrum Storage. Так и в случае с доработанным IBM Spectrum Archive, который основывается на базе Liner Tape File System, позволяющим получать доступ к данным на ленточных носителях как к сетевой папке или сетевому примонтированному диску.
Кроме названных выше продуктов в семейство вошли еще два «новичка» – IBM Spectrum Scale и IBM Spectrum Accelerate. Первый основывается на GPFS и представляет собой готовую платформу с открытыми API для тесной интеграции с Social Media, Hadoop, IBM BigInsight. Позволяет объединять как СХД, так и локальные серверные диски. Имеет возможность консолидировать объем из разных источников вплоть до создания многоуровневого хранилища на базе пулов объема, состоящих из локальных дисков, сети хранения, файловых или объектных хранилищ, и облачных ресурсов. Интерфейсы Spectrum Scale позволяют создавать файлы в едином пространстве имен и при этом хранить данные в зависимости от типа, даты, пользователя или группы на разных уровнях. Автоматически перемещать информацию между физическими ресурсами вплоть до переноса в облако или на Spectrum Archive по истечению срока хранения. На сегодняшний день тот же Hadoop полностью поддерживает и может разворачиваться на базе файловой системы Spectrum Scale вместо «родной» HDFS.
Архитектура решения сегодня позволяет масштабироваться до значений в Yottabytes и не имеет физического ограничения по месту нахождения аппаратных элементов, позволяя собирать географически распределенные системы в один интерфейс управления с одинаковым набором политик и правил.
Второй продукт, IBM Spectrum Accelerate, является программной реализацией уникальной архитектуры GRID, которая лежит в основе системы XiV. Поддерживает весь набор функций системы хранения XiV, может выступать как полноценный партнер при настройке удаленного зеркалирования. Точно так же, как и аппаратная платформа, поставляется по полезному объему. Пользователю не нужно будет задумываться о типе рейда, количестве дисков в рейд группе или о том, как правильно настроить систему для работы с той или иной нагрузкой. IBM Spectrum Accelerate использует любой сервер на площадке заказчика как аппаратную платформу. Это означает, что не нужно покупать диски или систему хранения, достаточно выделить как минимум три сервера, соответствующих минимальным требованиям, и получить полноценную СХД, обладающую всеми характеристиками аппаратного аналога. Это идеальное решения для пользователей с разнородной нагрузкой и высокими рисками.
Два новых продукт в линейке Spectrum Storage — это лишь часть стратегии дальнейшего развития. Весь перечисленный функционал и все продукты, упомянутые выше, в той или иной мере доступны в облаке IBM SoftLayer и готовы для использования клиентами. Компания IBM также выпустила на рынок новый продукт на базе PCI-E Flash технологии Flash System 900 и систему с интегрированным управлением и широким набором функционала Flash System V9000. Предыдущее поколение таких систем показало высочайшие результаты на независимых тестированиях и у ряда украинских заказчиков.
Стратегия и шаги к развитию Software Defined Storage являются одним из наиболее перспективных на рынке IT. Сегодняшние бизнесы в той или иной мере все более и более подвержены проблемам управления, контроля и аналитики инфраструктур, что в значительной мере усложняется из-за большого количества независимых аппаратных платформ, выполняющих одну и ту же функцию, но под разные задачи. Возможность упростить, автоматизировать, оптимизировать и анализировать такие инфраструктуры играет немаловажную роль в показателях CAPEX и OPEX любой компании.
IBM Elastic Storage System
Простые и масштабируемые компоненты высокопроизводительных решений IBM Spectrum Scale для гибридных облачных СХД
Упрощенный подход к хранению данных для внедрения ИИ и модернизации гибридного облака
IBM Elastic Storage System (ESS) — современная реализация программно-определяемой системы хранения данных для ИИ и больших данных, отличающаяся простотой развертывания и высокой масштабируемостью. Высокопроизводительная технология хранения NVMe с малым временем отклика, а также глобальная файловая система и службы обработки данных IBM Spectrum Scale с поддержкой до 8 Ибайт обеспечивают возможность расширения емкости узлов ESS 3200 и ESS 5000 до нескольких йоттабайт в одной объединенной глобальной СХД от периферии до ЦОД и общедоступного облака. Консолидируя требования к системе хранения данных и устраняя разрозненность в ряде платформ, в числе которых Kubernetes и Red Hat OpenShift, IBM ESS помогает повысить эффективность, снизить расходы на приобретение, упростить управление хранением данных и обеспечить поддержку требовательных приложений за счет высокой производительности в масштабе всей организации.
Основные возможности ESS 3200 и ESS 5000
Преимущества IBM ESS Storage System 3200 для вашего бизнеса
IBM Elastic Storage System 3200 (ESS 3200) поможет с легкостью справиться с актуальными задачами в области управления данными для аналитики. ESS 3200 — это проверенное решение для управления данными, упакованное в компактный форм-фактор 2U. За счет невероятно быстрого хранилища NVMe, а также простых и быстрых процедур установки и модернизации контейнеризованного ПО ускоряется окупаемость вложений в ИИ, глубокое обучение и высокопроизводительные вычисления. Самое высокое качество аппаратного и программного обеспечения помогает полноценно использовать процессоры, требующие большого объема данных, показывая лучшую в отрасли производительность. Решение ESS 3200 совместимо со всеми моделями IBM Elastic Storage System.
Преимущества
Быстрая окупаемость
ESS 3200 объединяет ПО IBM Spectrum Scale для управления файлами и флэш-хранилище NVMe, что позволяет добиться потрясающей производительности, простоты и пропускной способности 80 Гбит/с в каждой системе 2U.
Эффективность работы
Установка контейнерного ПО и высокоэффективный графический пользовательский интерфейс управления минимизируют трудозатраты ИТ-персонала и требования к квалификации. Уплотненное хранилище в компактном корпусе 2U способствует уменьшению занимаемого места в ЦОД.
Надежность
Программный алгоритм кодирования избыточности обеспечивает восстановление данных и при этом требует меньше места по сравнению с репликацией данных. Операции восстановления в этом случае могут выполняться за несколько минут, а не часов или дней, и не прерывают работу служб.
Гибкость развертывания
Хранилище доступно во множестве конфигураций: от десятков до сотен терабайт емкости в одном блоке 2U. Его можно развернуть как автономную периферийную систему или расширять, добавляя дополнительные системы ESS 3200 или IBM Elastic Storage System.
Преимущества IBM ESS 5000 для вашего бизнеса
IBM ESS 5000 — продукт семейства Elastic Storage System с горизонтальным масштабированием емкости узлов до нескольких петабайт. Решение объединяет в себе программно-определяемое хранилище IBM Spectrum Scale Storage и серверы на базе процессора IBM POWER9® с мощными ресурсами ввода-вывода. Консолидация требований к системе хранения данных во всей организации в системах IBM ESS 5000 и ESS 3200 на базе NVMe помогает повысить эффективность, снизить расходы на приобретение и обеспечить поддержку требовательных приложений, связанных с ИИ, высокопроизводительными вычислениями, аналитикой и (или) СХД высокой емкости, которые обычно нужны для здравоохранения, СМИ, государственного и финансового секторов.
Единое унифицированное пространство имен обеспечивает масштабирование конфигурации ESS 5000 от нескольких терабайт до сотен петабайт и даже эксабайт, а также помогает устранить разрозненность данных. IBM Spectrum Scale — это параллельная файловая система, которая лежит в основе IBM ESS 5000 и обеспечивает повышение пропускной способности по мере расширения. Она обеспечивает интеграцию с предыдущими моделями ESS для защиты инвестиций и предлагает более экономичные варианты конфигурации, такие как облачное хранилище и IBM Tape. IBM Spectrum Scale помогает справиться с разрозненностью данных и узкими местами, упростить управление хранением данных и ускорить доступ к данным.
Преимущества
Быстрая окупаемость инвестиций
IBM Spectrum Scale позволяет объединить в одном кластере 8 Ибайт узлы ESS 3200, ESS 3200 и IBM Spectrum Scale, которые могут размещаться на ресурсах организации или в общедоступном облаке.
Повышение эксплуатационной эффективности
Установка контейнерного ПО и высокоэффективный графический пользовательский интерфейс управления минимизируют трудозатраты ИТ-персонала и требования к квалификации. Емкость одного узла в конфигурации 13,5 ПБ.
Надежное восстановление
Программный алгоритм кодирования избыточности обеспечивает восстановление данных и при этом требует меньше места по сравнению с репликацией данных. Операции восстановления в этом случае могут выполняться за несколько минут, а не часов или дней, и не прерывают работу служб.
Гибкость развертывания
Решение ESS 5000 доступно в широком диапазоне конфигураций — от одного корпуса емкостью 500 ТБ до 8 корпусов емкостью 13,5 ПБ. Его можно развернуть как автономную периферийную систему или масштабировать, добавляя дополнительные системы ESS 3200 или IBM Elastic Storage System.
Поддержка огромных объемов данных
IBM ESS 5000 способен обеспечить пропускную способность до 55 Гбит/с и поддерживает горизонтальное масштабирование емкости с помощью IBM Spectrum Scale до нескольких эксабайт. Средства управления помогают контролировать растущий объем данных и обеспечивают их оптимальное распределение по уровням.
Интеграция хранилища NVMe
IBM ESS 5000 может работать в кластере с системами IBM ESS 3200, обеспечивая эффективное и простое хранилище NMVe с горизонтальным масштабированием для ИИ, высокопроизводительных вычислений и множества других задач.
Простой и интуитивно понятный графический интерфейс
Интегрируйте инструменты управления системами и ПО за счет понятных процедур развертывания графического пользовательского интерфейса Spectrum Scale в ЦОД или в общедоступном облаке с улучшенным контейнерным ПО.
Программное обеспечение IBM Spectrum Storage для архитектуры, управляемой данными
Полная линейка программного обеспечения для хранения данных с возможностями ИИ, меняющая экономику хранения данных в локальной среде и в гибридном облаке.
Удовлетворите потребности архитектуры, управляемой данными
Оптимизируйте управление данными, их защиту и хранение с помощью семейства решений IBM Spectrum Storage, включающего продукты SDS для предприятий любого размера.
IBM Spectrum Storage Suite
IBM Spectrum Storage Suite позволяет контролировать рост объемов данных и подготовиться к переходу в облако с помощью специально подобранного набора решений SDS, предлагаемого по предсказуемой цене с привлекательными вариантами лицензирования. Благодаря использованию одного и того же удобного интерфейса продукты в составе IBM Spectrum Storage Suite максимально облегчают и удешевляют процесс внедрения SDS.
IBM Storage Suite for IBM Cloud Paks
Добавьте службы обработки корпоративных данных в контейнерные среды с помощью гибкого решения в области программно-определяемых СХД для гибридного облака. В основе IBM Storage Suite for IBM Cloud Paks лежат продукты семейства IBM Spectrum Storage, а также предложения Red Hat с открытым исходным кодом, которые позволяют упростить развертывание решений IBM Cloud Pak, а также ускорить и повысить надежность модернизации и перехода в облако.
Оптимизация управления данными с помощью программного обеспечения IBM Spectrum Storage
Ознакомьтесь с обширным портфелем программных продуктов IBM Spectrum Storage для SDS, общего управления данными и решения современных задач в сфере защиты данных.
Программно-определяемая инфраструктура хранения данных
Безопасное расширение облака
Получите удобные инструменты контроля над ростом объемов данных с менее чем 100 ТБ до нескольких петабайт данных. Обеспечьте целостность и безопасность данных, а также встроенную поддержку гибридных облачных сред.
Масштабируемое управление данными
Оптимизируйте аналитику больших объемов данных и кластерные приложения с помощью высокопроизводительной, масштабируемой системы хранения данных, которая обеспечивает глобальное сотрудничество, упрощает рабочие процессы и снижает затраты за счет многоуровневого хранения в облаке.
Создание гибридного мультиоблака
Добавьте функции гибридного облака к локальной системе хранения данных IBM и других поставщиков. Зеркальное копирование между локальным и облачным ЦОД для задач аварийного восстановления, DevOps и пр.
Управленческие решения
Организуйте комплексное управление инфраструктурой
Эффективно управляйте инфраструктурой программно-определяемых, виртуальных, физических, файловых и объектных систем хранения данных. Упростите переход к новой рабочей нагрузке и обновленной инфраструктуре с помощью предсказательной аналитики.
Оптимизация инфраструктуры хранения данных
Управляйте сложностью, сократите затраты и оптимизируйте поддержку с помощью IBM Cloud. Проверенные временем передовые инструменты IBM для управления данными с технологиями IBM Research в области ИИ.
Подбор и классификация неструктурированных данных
Определите и каталогизируйте неструктурированные данные и данные резервных копий для упрощения поиска данных в целях оптимизации анализа, управления и хранения.
Современные решения для защиты данных
Обеспечьте защиту данных при масштабировании
Масштабируемая защита данных на физических файловых серверах, в приложениях и виртуальных средах. IBM Spectrum Protect™ поддерживает масштабирование до миллиардов объектов на один сервер резервного копирования, а также позволяет сократить затраты на инфраструктуру резервного копирования.
Быстрое восстановление и повторное использование данных
Раскройте потенциал своих данных за счет повышения качества и скорости разработки, тестирования и аналитики. IBM Spectrum Protect Plus™ — это современное решение для защиты данных, предлагающее практически мгновенное восстановление, репликацию, хранение и повторное использование.
IBM Spectrum Discover
Наличие исчерпывающего представления о данных не только упрощает их обработку и применение ИИ, но также ускоряет систематизацию и анализ
Преимущества IBM Spectrum Discover для вашего бизнеса
Упростите структуру ИИ за счет быстрого обнаружения, подготовки и оптимизации файлов и объектов, чтобы быстрее добиваться нужных результатов и повысить эффективность работы. Оцените преимущества простой интеграции IBM Watson Knowledge Catalog и IBM Cloud Pak™ for Data для получения дополнительной ценности и аналитической информации. Управление и обслуживание неорганизованных данных требует больших финансовых затрат, поскольку дублирующиеся данные и управление ими повышают стоимость и риски безопасности для организации. IBM Spectrum Discover предлагает высокоэффективные функции получения, сопоставления данных, визуализации и активации, которые позволяют создать успешную оптимизированную ИИ-инфраструктуру.
Преимущества
Экономия времени
Автоматизируйте каталогизацию неструктурированных данных, собирая метаданные по мере их создания. IBM Spectrum Discover поддерживает различные файловые и объектные системы хранения данных от IBM и других поставщиков.
Повышение производительности
Обеспечьте исчерпывающий анализ, объединив системные метаданные с пользовательскими тегами, чтобы повысить эффективность работы администраторов СХД и любых пользователей, которые выполняют поиск информации в хранилищах больших массивов данных.
Легкость интеграции
Используйте возможности API Action Agent, пользовательских тегов и основанных на политиках рабочих процессов для более глубокой проверки содержимого; задействуйте данные в процессах ИИ, машинного обучения и аналитики.