Как создать конфигурацию инвентаря в S3

Конфигурация S3 Inventory помогает управлять хранилищем на AWS. Он создает отчеты аудита о статусе репликации и шифрования объектов S3 для бизнеса, соответствия и нормативных требований. Конфигурация S3 Inventory создает выходные данные, разделенные запятыми (CSV), оптимизированные для Apache столбцы строк (ORC) или Apache Parquet (Parquet).

Это связано с некоторыми затратами, чтобы узнать о ценах, нажмите здесь.

В этой статье мы создадим конфигурацию инвентаризации для хранения метаданных объекта в формате CSV. Мы можем хранить отчеты в том же сегменте, что и исходный сегмент, но мы будем использовать для его хранения другой сегмент, а не сегмент, для которого мы будем создавать эту конфигурацию инвентаризации. Следует отметить, что целевая корзина, в которой будут храниться отчеты, должна находиться в том же регионе AWS, что и исходная корзина.

Чтобы узнать больше о конфигурации инвентаря, посетите официальную документацию AWS здесь.

Предпосылки

1. Аккаунт AWS (создайте, если у вас его нет).
2. 2 сегмента S3 в одном регионе (нажмите здесь, чтобы узнать, как создать сегмент S3).

Что мы будем делать?

1. Войдите в AWS.
2. Создание конфигурации инвентаря

Войти в АВС

Нажмите здесь, чтобы перейти на страницу входа в AWS. Введите свои учетные данные пользователя, чтобы войти в свой аккаунт AWS.

После успешного входа в свою учетную запись AWS вы увидите основную консоль управления AWS, как показано ниже.

Создайте конфигурацию инвентаря

Нажмите на сервисы в левом верхнем углу экрана и найдите S3.

Это главная приборная панель ковша S3. Здесь вы можете увидеть все корзины из вашего аккаунта. Нажмите на сегмент, для которого вы хотите создать конфигурацию инвентаря.

Если в вашей учетной записи не создано ни одного сегмента, создайте 2 сегмента, прежде чем продолжить. Нажмите здесь, чтобы создать сегменты S3, если в вашем аккаунте их нет, прежде чем продолжить. Вы также можете иметь один сегмент и использовать его как для исходного, так и для целевого поля.

На странице обзора сегмента вы можете увидеть несколько вкладок. Нажмите на вкладки управления.

Прокрутите вниз в конце страницы, и вы увидите раздел конфигурации инвентаря. Нажмите кнопку \Создать конфигурацию инвентаря\, чтобы создать свою первую конфигурацию инвентаря.

Дайте имя конфигурации и выберите целевой сегмент, в котором вы хотите сохранить этот отчет. Обратите внимание, что целевой сегмент должен принадлежать к тому же региону, что и исходный сегмент, для которого вы создаете эту конфигурацию инвентаря.

Вы даже можете ограничить область действия, добавив префикс. Это необязательное поле.

Целевой сегмент, в котором будут храниться отчеты, может принадлежать тому же или другому аккаунту. Здесь выбранный сегмент относится к тому же аккаунту и находится в том же регионе, что и исходный сегмент.

Выберите частоту и выходной формат. Вы также можете включить или отключить конфигурацию в соответствии с вашими потребностями. Чтобы опубликовать отчет об инвентаризации, измените статус на «Включить».

Выберите все метаданные, которые должны быть включены для каждого объекта из списка в отчете, и нажмите кнопку «Создать».

После успешного создания конфигурации инвентаризации вы можете увидеть ее на вкладке управления. Обратите внимание, что доставка первого отчета может занять до 48 часов.

После того, как отчет сгенерирован, вы можете проверить корзину назначения и найти под ней отчеты. Создание первого отчета занимает около 48 часов.

Вы можете загрузить отчет после его создания и использовать следующую команду в Linux/Mac для извлечения CSV-файла.

gunzip 20bd9db9-fddd-4cb0-a630-ecfce7bd3c10.csv.gz

Поскольку мы указали выходной формат как CSV, отчет был сгенерирован в формате CSV.

На приведенном выше снимке экрана вы можете видеть, что CSV содержит только несколько дополнительных полей, т.е. он содержит размер, последнее изменение и тип хранилища в качестве дополнительных полей метаданных. Если вас не устраивают эти поля и вы хотите добавить еще несколько, вы можете выбрать эти поля из доступного списка при создании конфигурации инвентаря.

Заключение

В этой статье мы создали конфигурацию инвентаризации, которая хранит метаданные в формате CSV в другом сегменте S3. Мы использовали разные корзины для источника и назначения и выбрали только несколько полей для сохранения в отчете. Вы можете выбрать поля метаданных из доступного списка, которые будут сохранены в отчете в соответствии с вашими требованиями.