Гал Наор, генеральный директор StorONE, объясняет на портале Information Age, что делать организациям в условиях, когда флэш-память становится для них экономически обременительной.

Мировой рынок систем хранения данных переживает сдвиг, который мало кто предсказывал и который никто не может игнорировать. Цены на флэш-память увеличиваются темпами, не наблюдавшимися более десяти лет, растут ограничения поставок, а ключевые компоненты становится все сложнее найти. В результате увеличивается разрыв в стоимости между флэш-памятью и жесткими дисками, что подталкивает отрасль к более традиционным методам хранения данных.

Эта проблема актуальна не только для гиперскейлеров или крупных центров обработки данных. Ее последствия распространяются на все сегменты рынка. Любая организация, приобретающая СХД, будь то на несколько терабайт или несколько петабайт, теперь платит значительно больше за тот же объем флэш-памяти. Рост затрат не дает нового прироста производительности, и эта тенденция не показывает признаков обращения вспять. Прогнозы указывают на сохранение давления, поскольку спрос на флэш-память в системах искусственного интеллекта и облачных средах опережает возможности отрасли по ее производству.

Мы вступаем в период, когда организациям необходимо переосмыслить свой подход к балансу производительности и емкости. Экономическая модель, которая поддерживала повсеместное внедрение флэш-памяти, рушится, и теперь требуется более эффективный подход. Интеллектуальное автоматическое распределение по уровням хранения, когда-то считавшееся узкоспециализированной стратегией, стало наиболее реалистичным способом поддержания производительности без чрезмерного роста затрат.

Флэш-память против жестких дисков: разница в цене становится неприемлемой

Почти два года соотношение стоимости жестких дисков и флэш-памяти в расчете на единицу хранения составляло примерно 1:4. Этот необычайно низкий разрыв способствовал ускорению внедрения флэш-памяти, даже для рабочих нагрузок, которые в этом не нуждались. Финансовые потери от перевода всех данных на флэш-память казались настолько незначительными, что их можно было не замечать.

Этот период прошел. За несколько месяцев разница в цене увеличилась до 1:6, а в следующем году отрасль ожидает уровня 1:10. Это не кратковременная коррекция. Она отражает структурный дисбаланс между спросом и предложением. Инфраструктура ИИ экзабайтного масштаба и глобальное расширение облачных технологий требуют огромных объемов флэш-памяти, а текущие производственные мощности не справляются с этим. На любом рынке, где предложение сокращается, а спрос растет, ценообразование следует одной и той же схеме. Каждая организация, независимо от размера, сейчас сталкивается с этой реальностью.

Скрытая проблема: сокращение объема данных работает не везде

Годами технологии сокращения объема данных, такие как сжатие и дедупликация, скрывали реальную экономическую эффективность флэш-памяти. Поставщики полагались на высокие коэффициенты сжатия, чтобы представить привлекательные цены и оправдать развертывание полностью на флэш-памяти.

Однако многие рабочие нагрузки не поддаются эффективному сокращению объема данных, в том числе:

  • задачи резервного копирования;
  • архивы медицинских изображений;
  • наборы данных для обучения ИИ и векторные базы данных;
  • контент видеонаблюдения и медиаконтент;
  • большие наборы неструктурированных данных.

Когда данные невозможно эффективно сжать или дедуплицировать, организация вынуждена оплачивать полную стоимость сырой емкости флэш-памяти. По мере роста цен на флэш-память на 60-120%, такие среды становится все сложнее обосновать с точки зрения затрат.

Бóльшая часть данных холодная. Флэш-память никогда не предназначалась для их хранения

В разных отраслях и сценариях использования прослеживается общая закономерность. Большинство данных становятся холодными вскоре после создания. Они записываются один раз, к ним обращаются кратковременно, а затем они хранятся в течение длительного времени без какой-либо значимой активности. Для холодных данных не требуется низкая задержка, высокий показатель IOPS, высокие рейтинги надежности или премиальные, энергоемкие уровни производительности. Им достаточно надежного хранения по минимально разумной цене. Однако в те годы, когда флэш-память была лишь ненамного дороже жестких дисков, многие организации размещали холодные данные на флэш-системах просто потому, что разница в цене казалась приемлемой. В современных экономических условиях эта модель больше не масштабируется.

Давление со стороны вирусов-вымогателей усугубляет проблему затрат

Рост числа атак вирусов-вымогателей также способствовал внедрению флэш-памяти. Организации стремились к более быстрому резервному копированию, более быстрому восстановлению данных и более длительному хранению снимков. Флэш-память обеспечивала эти преимущества, но в текущих условиях ценообразования ее экономическая эффективность снижается.

Сегодня стоимость устройств резервного копирования на базе флэш-памяти растет, долгосрочное хранение данных на флэш-памяти становится невыгодным, а сохранение глубоких историй на высококачественных носителях больше не соответствует бюджетным ожиданиям.

Организациям по-прежнему необходимо быстрое восстановление данных, но базовая модель хранения для этих данных должна развиваться.

Единственный масштабируемый путь вперед: современное автоматическое многоуровневое хранение, сочетающее флэш-память и жесткие диски без компромиссов

Рынок явно движется к гибридному подходу, основанному на интеллектуальном многоуровневом хранении. Это не многоуровневое хранение данных в прошлом. Современное автоматическое многоуровневое хранение работает на уровне блоков, в режиме реального времени и без вмешательства администратора.

Устойчивая модель включает в себя следующие принципы.

Высокая производительность, когда это необходимо, низкая стоимость, когда это не требуется. Флэш-память остается правильным выбором для горячих данных, рабочих нагрузок с интенсивным вводом-выводом, аналитики, обработки в реальном времени и извлечения признаков с помощью ИИ. По мере охлаждения данные автоматически переносятся на жесткие диски высокой плотности. Пользовательский опыт остается стабильным, а общая стоимость хранения значительно снижается.

Никакого ручного управления. Настоящее автоматическое многоуровневое хранение должно быть полностью автономным. Оно должно обеспечивать непрерывную оптимизацию, прозрачное перемещение данных, стабильную задержку для активных рабочих нагрузок и отсутствие необходимости вручную классифицировать или переносить данные. Цель проста: организация получает производительность на уровне флэш-накопителей, хотя большая часть данных находится на более дешевых носителях.

Одна система, а не несколько изолированных хранилищ. Устаревшие подходы к многоуровневому хранению требовали отдельной флэш-системы, отдельной системы на жестких дисках и ПО, которое пыталось объединить их. Это приводило к накладным расходам на интеграцию, появлению множества интерфейсов управления и неоправданной сложности.

Современная архитектура должна работать на одной унифицированной платформе с одним пространством имен, одним уровнем управления и одним жизненным циклом.

Свобода масштабирования по мере увеличения плотности накопителей. Емкость жестких дисков быстро растет, достигая 30 Тб, 40 Тб и более. Организациям необходимы архитектуры, поддерживающие различные объемы дисков, асимметричное расширение и позволяющие избежать прерывания работы при апгрейдах. Эти возможности критически важны для получения экономической выгоды от технологий жестких дисков нового поколения.

Среды, полностью построенные на флэш-накопителях, также выигрывают от многоуровневого хранения. Даже в средах, где флэш-накопители остаются первичным уровнем производительности, многоуровневое хранение играет важную роль. Долгосрочное хранение снимков, защита от вирусов-вымогателей и глубина архивации могут поддерживаться с гораздо меньшими затратами, когда старые снимки или блоки автоматически переносятся на вторичный уровень в той же системе.

Эпоха ИИ требует эффективности хранения, а не избытка хранилищ

Текущий кризис цен на флэш-накопители — это не просто временный скачок. Он сигнализирует о долгосрочном изменении экономики хранения, вызванном растущим спросом на ИИ, ограничениями цепочек поставок и глобальным ростом объема данных. Мышление, основанное на флэш-накопителях, сложившееся в последнее десятилетие, теперь сталкивается с финансовыми реалиями, которые организации больше не могут игнорировать. Холодные данные не следует размещать на дорогих носителях. Рабочие нагрузки данных, которые плохо сжимаются или дедуплицируются, не следует выполняться в дорогостоящих средах. И организациям не следует платить за пиковую производительность там, где она не требуется.

Более эффективный многоуровневый подход сейчас крайне важен. Интеллектуальное автоматическое многоуровневое хранение обеспечивает производительность флэш-накопителей, когда это необходимо, и экономичность жестких дисков, когда это не требуется. В эпоху масштабного роста объемов данных и непредсказуемых цен на компоненты эффективность превратилась из передовой практики в стратегический императив.