Как использовать S3

Гетти Изображения

Технологии генерируют, потребляют и хранят огромные объемы данных — десятки зеттабайт. Управление, анализ и использование данных сегодня являются более сложными, чем когда-либо.

Одной из технологий, которая появилась для управления данными, является объектное хранилище. Amazon S3 был запущен более десяти лет назад и сделал объект стандартом облачного хранения данных. Это гибкий, безопасный и экономичный способ хранения, управления и использования данных независимо от их типа и использования. Но пользователям не обязательно обращаться непосредственно к Amazon, чтобы воспользоваться преимуществами, поскольку несколько поставщиков предлагают хранилище, совместимое с S3.

Объектное хранилище — идеальный способ хранения данных в облаке, поскольку оно неструктурировано и определяет данные как объект с метаданными и уникальным идентификатором для поиска и доступа к каждой единице данных. Большинство хранилищ данных S3 поддерживают пользовательские метаданные для объектов, чтобы пользователи могли более точно ими управлять.

S3 — крупнейший и самый популярный общедоступный облачный сервис хранения данных, поэтому мир технологий использовал его для разработки интерфейсов и приложений, использующих данные. Термин «совместимость с S3» означает, что хранилище данных использует API S3 для связи с любым подключенным устройством или системой. Первоначально оно относилось к данным, хранящимся в общедоступном облаке; однако хранилище, совместимое с S3, распространилось на локальные и частные облака.

Системы, устройства и приложения, использующие S3 API, должны иметь возможность легко подключаться к S3-совместимым хранилищам независимо от их местоположения или использования.

S3 хранит данные в виде объектов в сегментах, которые являются контейнерами для объектов. Каждый сегмент обычно хранится в определенном регионе, будь то в общедоступном облаке или частном облаке в одном центре обработки данных. Данные не покидают регион, если они специально не перемещены или не реплицированы в другой регион. Эта структура помогает клиентам с задержкой, стоимостью и соблюдением требований.

Пользователи обычно могут хранить любое количество объектов в корзине, но многие хранилища данных S3 ограничивают количество корзин на одну учетную запись. Политики сегментов позволяют контролировать доступ к данным для управления системами, приложениями и пользователями. Они могут добавлять или запрещать разрешения для объектов на основе определенных критериев, таких как запрашивающая сторона, действия S3 и IP-адрес.

Ключ — это уникальный идентификатор объекта в сегменте. Каждый объект в сегменте имеет один ключ, который объединяется с метаданными объекта и информацией сегмента для создания уникального идентификатора объекта.

В зависимости от продукта хранения S3 пользователи также могут включить идентификаторы версий объектов для сохранения, извлечения и восстановления каждой версии каждого объекта, хранящегося в сегментах.

Поставщики предлагают ряд S3-совместимых продуктов и услуг:

Часть: Использование хранилища AWS

Существует несколько типов хранилищ AWS, но эти четыре предложения охватывают файловые, блочные и объектные хранилища. Узнайте, как варианты облачного хранилища сравниваются друг с другом.

Amazon S3, FSx, Elastic File System и Elastic Block Store имеют разную структуру цен, но использование данных остается главным фактором, определяющим стоимость облачного хранилища.

Доступ к общедоступной корзине — распространенная и обсуждаемая проблема безопасности S3. Однако необходимо принять несколько других важных мер безопасности, включая мониторинг и MFA.

Amazon S3 — популярная платформа для объектного хранения. Однако благодаря использованию API-интерфейсов поставщики систем хранения данных могут предложить свой собственный подход к S3, потенциально улучшая управление и снижая стоимость.

Elastic Block Store и Elastic File System — два самых популярных типа хранилищ Amazon. Сравните, как они хранят данные, прежде чем решить, какой из них использовать.