В конце октября российская компания «РЭЙДИКС», разработчик производительных решений для хранения данных провела в Технопарке «Сколково» технологический форум по хранению данных «ПРОSTOR», на котором более чем 200 представителям партнеров-интеграторов и руководителям коммерческих и государственных организаций были представлены новые разработки для построения современных СХД. На форуме свои разработки представили эксперты компаний Broadcom, Elastifile, HGST (бренд Western Digital), Micron, Mellanox, SanDisk (бренд Western Digital), Panasonic и самой компании «РЭЙДИКС».

Открывая форум, Андрей Федоров, генеральный директор «РЭЙДИКС» отметил: «Как площадка для взаимодействия мировых экспертов индустрии „ПРОSTOR“ определяет тренды развития накопителей и технологий хранения в России и за рубежом и позволяет оценить действующие и будущие технологии СХД. При этом новые технологии испытывались в разнородных условиях, начиная с экспертов индустрии и заканчивая потенциальными заказчиками в корпоративном секторе и госструктурах. Именно таким образом мы стремимся формировать объективную картину индустрии СХД».

Как подчеркнула в своем докладе Эстер Спаньер, директор по развитию бизнеса Western Digital, потоки данных неуклонно возрастают во всех сферах, где используются ИТ — производство, финансы, социальная сфера, где используется аналитика, моделирование, машинное обучение, искусственный интеллект, мобильность, Интернет вещей: «При этом накапливаемую информацию можно условно разделить на два типа — Большие данные, требующие архивирования и масштабирования СХД, и Быстрые данные, для обработки которых нужна высокая производительность систем хранения. В связи с этим разрабатываются различные архитектуры СХД, обладающие различными показателями латентности, пропускной способности, потребляемой мощности и стоимости. Известно, что скорости записи блоков данных на носители в СХД на несколько порядков медленнее, чем запись этих данных в память, используемую в системах хранения. Это позволило разрабатывать новые технологии обработки данных в памяти (Memory-Centric Computing) и создавать новые архитектуры систем хранения, затрагивающие такие направления исследований как интерфейсы памяти, фабрики на базе памяти с малой латентностью, конвергентные кэши памяти. Так, Intel разработала программную платформу Purely, которая предусматривает обработку информации в кэш-памяти, дополняемой модулями высокоскоростной кэш-памяти NVMe, ранее применяемых для хранения данных. Эксперименты показали, что при этом достигается увеличение производительности почти на 80%».

Технологию программной обработки данных в кэш-памяти разрабатывает и компания ScaleMP, и первые образцы ее систем хранения с использованием такой технологии появились на рынке уже в 2016 г. Причем за счет использования ресурсов кэш-памяти в системах этой компании удалось сократить объем основной памяти в 4 раза.

В свою очередь компания Micron выпустила серии модулей памяти NVDIMM, которые обеспечивают как прямой доступ системы к основной памяти DRAM, так и к накопителям флеш-памяти. В последнем случае эти накопители не зависят от сбоев системы, сохраняя данные за счет встроенных в флеш-модули автономного источника питания. Это обеспечивает полную сохранность данных и доступ к ним в случаях аварий и перебоев в электропитании.

Известно, что производительность накопителей на флеш-памяти значительно выше жестких дисков. Поэтому многие производители выпустили all-flash модели СХД для решения задач высокопроизводительных вычислений, моделирования, обработки информации с системах Интернета вещей. «Можно предполагать, что дальнейшее существование жестких дисков подходит к концу, но это не так, — заявил Григорий Никонов, системный инженер HGST (бренд Western Digital). — По прогнозам аналитиков, объем накапливаемых в мире данных за следующие два года возрастет в 10 раз и составит 44 Зетабайт, и их нужно будет хранить. Как показал анализ рынка, только во II квартале 2017 г. емкость всех выпущенных жестких дисков составила 158 Экзабайт, а емкость проданных за первое полугодие флеш-накопителей всего 15 Экзабайт. Это говорит о том, что жесткие диски еще долгое время будут основными носителями информации, и к 2020 г. 90% данных в ЦОДах будут храниться на жестких дисках. Сейчас максимальный объем выпускаемых нами жестких дисков достиг 12 Терабайт, и а течение последних 15-20 лет производители жестких дисков исследовали возможности его увеличения. Неделю назад наши разработчики решили задачу повышения плотности записи на жестких дисках, реализовав технологию с микроволновой поддержкой Microwave Assisted Magnetic Recording (MAMR), которая позволит повысить емкость жестких дисков до 40-50 Терабайт. Промышленный выпуск новых дисков с технологией MAMR нашей компанией намечен на 2019 г. И можно смело утверждать, что жесткие диски будут главенствовать на рынке хранения данных в следующих десятилетиях».

В то же время Ярослав Надпорожский, инженер Broadcom отметил новый тренд в технологиях подключения дисков в СХД: «В настоящее время адаптеры Host Bus (HBA) для подключения отдельных дисков со скоростями передачи 6 Гбит/с все еще выпускаются и будут на рынке до 2020 г. Но наша компания разработала и начала выпуск новых 3-режимных адаптеров MegaRAID, которые позволяют подключать до 8-16 накопителей, включая высокоскоростные накопители NVMe. Один из новых адаптеров рассчитан на скорость 128 Гбит/с и может использоваться для передачи потокового видео или для СХД, используемых для обработки Больших данных. Кроме того, Broadcom разработала для использования в облачных инфраструктурах новую серию адаптеров NetXtreme, обеспечивающих скорости передачи данных по сетям Ethernet от 10 до 100 Гбит/с. При этом разработчики Broadcom считают, что сеть, связывающая СХД с остальной частью инфраструктуры ИТ, является самым узким местом, и предложили заменять используемые соединения SCSi оптическими каналами Fibre Channel

В облачный ЦОД поступают запросы самого различного характера, начиная от писем электронной почты и кончая запросами на обработку баз данных. Это порождает определенные проблемы при создании СХД в ЦОДе, и прежде всего выбор типов носителей для хранения данных. Как рассказала Светлана Лазарева, руководитель исследовательской лаборатории «РЭЙДИКС», ее сотрудниками разработан комплекс программ предиктивной аналитики, позволяющий оптимально использовать SSD-кэш для управления трафиком в СХД. Также в лаборатории разработана методика построения распределеных СХД, для которых предложено распределенное кодирование, позволяющее минимизировать передачу данных по сети и количество чтений с дисков, что обеспечило высокую доступность данных — простой 5 мин. В год.

Другой темой форума стала проблема создания архивов таких типов данных как различного рода документация, Web-архивы, научные данные, библиотеки музыки и видео, которые должны храниться не менее 20 лет. Ее решают «РЭЙДИКС» совместно с компанией Panasonic. В основу предложенной ими технологии создания архивов заложен подход, при котором одна копия данных должна храниться на оптических накопителях. Для доступа к архиву разработана виртуальная файловая система, позволяющая создавать несколько сетевых ресурсов по одному или нескольким сетевым протоколам. Так, при создании архива емкостью 1 Экзабайт на оптических дисках Panasonic емкостью 300 Гбайт гарантирована сохранность данных в течение не менее 40 лет, в то время как ленточные библиотеки не могут сохранять данные более 7 лет, а СХД на дисках требуют за счет их старения замены 25 дисков в день.

Кроме этих тем на форуме также были представлены и обсуждены решения и технологии в рамках различных архитектур СХД.

Источник: Владимир Смирнов, CRN/RE

Версия для печати (без изображений)   Все новости