«Надежный инструмент, который закрывает широкий спектр задач»

CNews: Объектное S3 хранилище — одно из базовых решений для работы с неструктурированными данными. В чем главные принципы его работы и чем оно отличается от традиционных блочных хранилищ?

Александр Гришин: S3 представляет собой современный подход к хранению неструктурированных и полуструктурированных данных, оптимизированный для масштабируемости, высокой доступности, географического распределения и отказоустойчивости.

В отличие от блочных хранилищ, где данные разбиваются на блоки фиксированного размера и требуют операционной или файловой системы для управления, объектное S3-хранилище работает с данными как с самостоятельными объектами. Каждый объект состоит из содержимого (payload), уникального идентификатора (ключа) и набора метаданных, по своей структуре напоминая key-value базы данных.

Эти различия напрямую влияют на параметры производительности. Для блочных хранилищ ключевыми метриками являются IOPS (количество операций ввода-вывода в секунду) и задержка (Latency), что делает их оптимальными, например, для виртуализации или работы с базами данных. В то время как для S3 основными показателями выступают пропускная способность, скорость интернет-канала и количество запросов в секунду (RPS). Это решение ориентировано на массовое хранение больших объемов данных (bulk storage), для которых задержка не является критичной.

Функционально S3-хранилище также принципиально отличается. Во-первых, оно изначально разрабатывалось как облачное решение и обеспечивает простой доступ к данным из любой точки мира через HTTP API. Именно поэтому подавляющее большинство мультимедийного контента в интернете — видео, музыка, изображения — хранится именно в S3.

Во-вторых, в S3 отсутствует привычная иерархия каталогов и файлов: все пространство представляет собой плоскую структуру, доступ к элементам которой осуществляется по уникальной комбинации имени бакета и ключа объекта. Это упрощает организацию хранения и повышает гибкость работы с данными. В-третьих, S3 легко масштабируется горизонтально, позволяя хранить эксабайты данных. Это особенно важно для сценариев с большими объемами информации, таких как архивы, резервные копии, мультимедиа или данные от IoT-устройств.

Еще одним важным аспектом является экономичность. На сегодняшний день индустрия не предложила более выгодного способа хранения данных, чем объектное хранилище S3. Например, 100 гигабайт данных в холодном хранилище могут стоить меньше 100 рублей в месяц — при этом обеспечивается высокий уровень надежности и отказоустойчивости.

Таким образом, S3 — это масштабируемое, облачное и экономичное хранилище, идеально подходящее для работы с большими объемами неструктурированных данных в сценариях, где приоритетами являются доступность и надежность, а не минимальная задержка отклика.

Хранение неструктурированных данных действительно является самым частотным кейсом для S3. Но в последнее время не ограничивается только этим. Благодаря таким инструментам как SQL-движки (Trino, Presto, и др) и хранилищам метаданных в формате Iceberg, S3-хранилище cейчас становится одним из лучших выборов для хранения структурированных данных. Тем самым, начиная конкурировать на рынке распределенных СУБД, таких как OpenSearch, ClickHouse, Greenplum и другие.

CNews: Какие ключевые задачи бизнеса помогает решать S3 хранилище Selectel? С какими сценариями его чаще всего используют ваши клиенты?

Александр Гришин: Хранилище должно быть не просто «местом для данных», а частью бизнес-архитектуры. Для бизнеса оно становится фундаментом для построения отказоустойчивых, бесконечно масштабируемых, гибких и при этом экономичных систем хранения. Его архитектура и полная совместимость по API с S3 позволяют безболезненно интегрировать его в существующую инфраструктуру, а мультирегиональность и функции, такие как версионирование, обеспечивают высокую надежность и защиту данных.

Среди ключевых бизнес-задач, которые решает S3, одна из самых частых — резервное копирование и катастрофоустойчивость. Хранилище позволяет надежно сохранять резервные копии в разных регионах и классах хранения — будь то hot, cold или ice. Благодаря поддержке версионирования можно защититься от случайного удаления или перезаписи файлов, что особенно важно в критичных для бизнеса сценариях.

Второе распространенное применение — долгосрочное архивное хранение. Классы cold и ice оптимальны по стоимости для редко запрашиваемых данных, таких как финансовая отчетность, медицинские архивы, научные исследования или видеоматериалы, которые нужно хранить годами.

Третье — хранение мультимедиа и статического контента. Многие клиенты используют S3 как backend для CDN — для раздачи изображений, видео и статики веб-приложений. Это особенно актуально для компаний с высоконагруженными сайтами и медиаплатформами.

Еще один важный сценарий — работа с данными и аналитикой, в том числе структурированными. S3 часто используется как платформа хранения входных датасетов — логов, телеметрии, экспортов из баз данных. Эти данные затем обрабатываются аналитическими движками вроде Spark, Trino и других — напрямую, без необходимости копирования.

И, наконец, интеграция с существующими системами — еще одно сильное преимущество. Благодаря полной совместимости с AWS SDK (набор средств разработки) и наличию множества готовых библиотек, S3 можно легко подключить к CI/CD пайплайнам, резервным системам, BI-инструментам, облачным платформам и CDN-провайдерам. Это делает его универсальным решением для самых разных бизнесов — от стартапов до крупных корпоративных заказчиков.

Таким образом, мы имеем дело с надежным инструментом, который закрывает широкий спектр задач: от хранения резервных копий и мультимедиа до построения аналитических платформ и гибкой интеграции с любыми ИТ-средами.

«Наше решение дает максимально высокий уровень безопасности, особенно актуальный для отраслей с жестким регулированием»

CNews: В этом году вы расширили возможности S3 хранилища и сделали его мультирегиональным. Что это означает для бизнеса и в чем техническое преимущество такого подхода?

Александр Гришин: В прошлом году Selectel запустил поддержку мультирегионального хранения в S3. Теперь клиенты могут размещать свои данные в нескольких физических регионах. При этом архитектура и API остаются едиными, что предоставляет бизнесу дополнительные возможности в плане надежности и производительности.

На практике мультирегиональность обеспечивает высокий уровень катастрофоустойчивости: данные хранятся в независимых географических зонах. Это минимизирует риски потери информации при сбоях в дата-центрах, на каналах связи или в конкретных регионах. Такое решение критически важно для компаний с высокими требованиями к SLA и непрерывности бизнес-процессов.

Кроме того, мультирегиональный подход положительно влияет на производительность. Размещение данных ближе к конечным пользователям снижает задержку (latency) и повышает скорость доступа к контенту, что особенно актуально при работе с большими объемами данных.

С технической стороны мы реализовали единый глобальный API. Он служит единой точкой входа для обращения ко всем регионам, устраняя привязку к физической локации хранения данных.

Можно использовать и региональный эндпоинт (https://s3.ru-3.storage.selcloud.ru) для более быстрого доступа к данным.

Важно отметить, что мультирегиональность построена на нашем собственном программном обеспечении. Это обеспечивает нам полный контроль над архитектурой, возможность глубокой оптимизации под задачи клиентов и полную совместимость с публичной спецификацией AWS S3.

CNews: Для крупных клиентов, особенно с высокими требованиями к безопасности, вы предлагаете выделенное S3 хранилище. Как оно устроено и в чем его преимущество по сравнению с публичным вариантом?

Александр Гришин: Selectel предлагает вариант выделенного объектного S3-хранилища (Dedicated S3), который физически изолирован от публичной инфраструктуры и ориентирован на клиентов с повышенными требованиями к безопасности, контролю и производительности.

Технически это решение построено на выделенных серверных ресурсах — как на уровне хранения (бэкэнда), так и на уровне фронтальных шлюзов S3 API. У каждого клиента свой отдельный эндпоинт, физически размещенный в выбранном регионе или сразу в нескольких — все ресурсы работают только на одного арендатора, без «соседей» по оборудованию или сети. При этом используется тот же S3-протокол и API, что и в публичной версии — совместимость с существующими инструментами (бэкап-агенты, SDK, CDN, BI) сохраняется полностью.

Клиентам доступны все стандартные функции: классы хранения (от hot до ice), версионирование, политики доступа, мультирегиональность. В зависимости от нагрузки мы подбираем аппаратную конфигурацию: от классических HDD до высокопроизводительных NVMe SSD, с различными схемами репликации данных.

Для бизнеса такое решение дает в первую очередь физическую изоляцию — максимально высокий уровень безопасности, особенно актуальный для отраслей с жестким регулированием: финтех, госсектор, медицина. Нет совместного использования ресурсов — все оборудование принадлежит только одному клиенту.

Появляется полный контроль над системой: можно самостоятельно задавать лимиты, настраивать политики, управлять сетевой архитектурой и получать доступ к журналам и метрикам на уровне системы.

Отдельно стоит отметить предсказуемость производительности. За счет отсутствия «шаринга» и возможности тонкой настройки можно добиться стабильной и высокой отдачи: до 100 000 запросов в секунду и до 200 Гбит/сек пропускной способности на одну инсталляцию.

Кроме того, мы поддерживаем кастомную интеграцию и расширенные SLA: вплоть до прямых каналов передачи данных, гибридных сценариев с on-prem и выделенной технической поддержкой.

CNews: Что представляет собой аттестованное хранилище Selectel? Какие сценарии предполагают его использование и какие сертификаты подтверждают соответствие требованиям ИБ?

Александр Гришин: Аттестованное хранилище Selectel соответствует требованиям российского законодательства в области информационной безопасности и предназначено для клиентов, которым необходимо хранить и обрабатывать персональные или конфиденциальные данные в соответствии с регуляторными нормами, включая 152-ФЗ и профильные приказы ФСТЭК 17 и 21.

Оно работает на выделенной инфраструктуре в московском ЦОД группы Берзарина, прошедшем официальную аттестацию. Все меры защиты реализованы с использованием сертифицированных средств защиты информации. Инфраструктура работает в замкнутом контуре с контролем доступа, защищенными каналами, аудитом событий и возможностью интеграции с DLP-средствами, VPN и мониторингом.

При этом оно полностью совместимо с Amazon S3 API и поддерживает все ключевые функции: версии объектов, политики доступа, разные классы хранения и работу через привычные SDK.

Аттестация получена по требованиям ФСТЭК России. Хранилище соответствует первому уровню защищенности персональных данных — это значит, что оно подходит для обработки ПДн 1–4 уровней. Также подтвержден первый класс защищенности государственных информационных систем.

Такое решение используют в первую очередь государственные и муниципальные организации — при создании ГИС, реестров, архивов или облачных платформ, где требуется соблюдение строгих требований ИБ. Также его выбирают финансовые и медицинские компании для хранения пользовательских профилей, истории операций, ЭМК и другой чувствительной информации.

Еще один типичный сценарий — корпоративные клиенты с высокой зрелостью процессов ИБ, у которых есть внутренняя политика по хранению персональных данных и обязательный аудит соответствия.

«Мы строим продукт, исходя из понимания локального контекста и специфики бизнеса в России»

CNews: Какие технические возможности доступны при интеграции объектного хранилища с внешними сервисами? Насколько просто масштабировать решение и обеспечить репликацию при росте нагрузки?

Александр Гришин: S3 хранилище Selectel предоставляет готовую инфраструктуру, в которой масштабирование и отказоустойчивость встроены по умолчанию. Это означает, что клиенту не нужно заниматься настройкой кластера, масштабированием или репликацией вручную — все это уже реализовано в виде управляемого сервиса.

CNews: На какие отличия от крупных зарубежных аналогов вы делаете ставку при развитии продукта? Что позволяет Selectel конкурировать с международными провайдерами в сегменте Object storage?

Александр Гришин: Мы строим продукт, исходя из понимания локального контекста и специфики бизнеса в России. Это позволяет нам конкурировать с международными провайдерами — не копируя их, а предлагая более адаптированное, гибкое и доступное решение, соблюдая при этом международную спецификацию S3 от AWS.

Отдельно стоит выделить простую и прозрачную модель тарификации. У нас нет скрытых платежей и сложных метрик вроде Class A/B requests, early deletion fees или retrieval costs. Нет штрафов за «ранее удаление», или ограничений по скорости выгрузки данных. Все понятно с первого взгляда: хранение, входящий/исходящий трафик и запросы.

Также цены фиксированы в рублях и не зависят от валютных колебаний или иностранных юрисдикций — это критически важно для многих клиентов в условиях импортозамещения и регуляторных ограничений.

CNews: Как вы видите будущее развития решений для хранения данных? Какие новые функции или сценарии использования появятся в ближайшее время в вашем продукте?

Александр Гришин: Вопрос о будущем решений для хранения данных для меня, безусловно, самый интересный. Я считаю, что будущее за умными, управляемыми и экономически эффективными хранилищами, которые глубоко интегрированы в бизнес-процессы заказчиков. Именно так мы видим развитие Selectel S3 и уже активно работаем над этим.

С ростом объемов данных появляются новые сценарии использования: AI/ML, видеонаблюдение, IoT, big data. Все больше компаний работают с видео, аудио, логами, медицинскими изображениями и сенсорными данными. S3 становится ядром для таких проектов благодаря масштабируемости и выгодной стоимости хранения.

По статистике данные в мире удваиваются каждые 2 года. И если вспомнить пирамиду «Иерархии памяти ЭВМ» (скорость, цена, объем), то можно прийти к выводу, что под давлением потребности бизнеса обеспечивать хранение экспоненциально растущего объема данных, индустрия сдвигается вниз этой пирамиды — к более дешевым и объемным хранилищам. Именно там находятся S3.

Еще развиваются подходы Data Lake и Lakehouse. Хранилище превращается в основу аналитических платформ в интеграции с такими инструментами, как уже упомянутые Trino, Apache Iceberg и Kafka. Мы планируем дальнейшую интеграцию с платформами данных, чтобы обеспечить прямой доступ к данным через SQL-инструменты, минуя необходимость пересылки и ETL.

Также, мы внедряем интеллектуальное управление жизненным циклом данных: автоматическое перемещение между классами хранения (Hot → Standard → Cold → Ice), которые позволяют автоматически переводить данные на более дешевые уровни хранения при снижении их активности. Недавно мы выпустили аналог Glacier (класс Ice), скоро появится детализированная логика на уровне объектов.

Наша компания постоянно усиливает безопасность: внедряем новые механизмы IAM и ролей, совместимые с внешними IAM через OIDC. Планируем интеграцию с Secrets Manager и Certificate Manager, что позволит хранилищу работать совместно с системами управления ключами и сертификатами.

В части надежности мы движемся к расширенной репликации: автоматическая межрегиональная репликация и сценарии аварийного восстановления (DR) по гибким схемам — например, ru-7 → ru-1 → ru-6. Это позволит обеспечить отказоустойчивость без ручного вмешательства.

Selectel S3 эволюционирует в полноценную платформу хранения данных, реализующую лучшие мировые практики и совместимую с AWS-спецификацией. Мы ориентируемся на сценарии для крупных B2B-компаний, которым важны прозрачность, высокая производительность, мультирегиональность, безопасность и расширенный набор API-функций. Именно эти направления станут ключевыми в развитии продукта в ближайшие три года.

■ Рекламаerid:2W5zFK4TEfJРекламодатель: АО «Селектел»ИНН/ОГРН: ИНН 7810962785 / ОГРН 1247800067790Сайт: www.selectel.ru