Описание возможностей масштабирования объёма хранения кластера

Масштабирование объёма хранения

Как создать бэкап данных бакета на отчуждаемый носитель и восстановить данные. Полный и инкрементальный бэкап.

Бэкапирование и восстановление S3 бакета

Отказоустойчивость

Краткое описание схемы работы Erasure Coding

Бесшовная миграция с внешнего S3

Рекомендации по улучшению производительности решения

Поддержка методов AWS S3

Перенос данных бакета из одного Хранилища в другое

Миграция данных

Работа с S3 Browser

Первые шаги в приложении

Начало работы

Варианты установки и размещения компонентов

Типовые варианты конфигурации

Описание общей архитектуры решения и компонент

Архитектура решения

Расчет требований к инфраструктуре

Требования

С чего начать

Установка Закрома.Хранение

Изменения в архиве поставки

Changelog

Таблица соответствия версий

7.2.3

7.2.2

7.2.1

7.2.0

7.1.0

7.0.1

7.0.0 Версия поставки

Стандартная

Подготовка окружения к установке

Версия Helm чарта

Zakroma-Storage

Zakroma-ZDS

Контейнерная

Конфигурация фильтрации типов событий аудита на уровне инфраструктуры

Настройка событий аудита

Настройка безопасного подключения к Kafka, включая использование TLS/mTLS, SASL, особенности протоколов и параметры клиентской конфигурации

Расширенная конфигурация Kafka

Рекомендации по балансировке S3 API и Admin UI, TLS-терминации, SNI, DNS RR и отказоустойчивым VIP-адресам

Расчёт максимального количества подключений к PostgreSQL

Описание способов авторизации: file/LDAP/keycloak/OIDC

Настройка авторизации

Описывает топики Kafka, их параметры и роли в кластере, включая требования для однокластерной и мультикластерной конфигураций

Настройка Kafka

Настройка PostgreSQL

Настройка окружения

Установка

Описание работы страницы с операциями

Операции

Описание структуры аудит-событий, набора доступных полей при формировании аудит-логов в системе ЗАКРОМА.Хранение

Формат и поля аудит-событий

Настройка ограничений скорости и нагрузки на S3 API в разрезе пользователя, рабочей области и бакета

QoS — управление пропускной способностью S3 API

CLI (Command Line Interface, zcli)

Основные термины и сущности, используемые в документации ZDS

Базовые понятия ZDS

Состояния узлов, дисков, групп хранения и вольюмов в кластере ZDS

Кластер ZDS и состояния компонентов

Список метрик ZDS, доступных для мониторинга через Prometheus и Grafana

Метрики ZDS

Основные параметры конфигурации узлов и кластера ZDS

Конфигурация ZDS

Внешние, внутренние и административные методы API сервиса ZDS

API ZDS

Принципы хранения данных в ZDS, режим EC и роль метаданных

Как ZDS хранит данные

Назначение сервиса ZDS и его место в архитектуре Закрома.Хранение

Что такое ZDS

Назначение и управление версионированием объектов в бакете

Версионирование

Подключение ресурса хранения

Хранилища

Работа с объектами внутри бакета

Просмотр бакета

Управление публичным доступом и видимостью объектов бакета

Публичные бакеты

Как создавать и использовать шаблоны для копирования настроек бакета при его создании

Шаблоны бакета

Настройка и управление правилами CORS для выбранного бакета

CORS

Управление рабочими областями

Рабочие области

Описание типов хранилищ

Типы хранилищ

Как создавать и настраивать бакеты

Бакет (bucket)

Удаление и восстановление бакетов в системе

Удаление бакета

Управление воркерами и настройка шардирования данных бакета

Шардирование

Настройка хранения

Создание и управление политиками доступа пользователей в системе

Политики доступа

Просмотр профиля пользователя

Профиль пользователя

Создание локальных пользователей S3 API в рамках рабочей области

Локальные пользователи рабочей области

Создание, настройка и назначение ролей пользователей системы

Роли

Настройка разрешений и ограничений доступа по IP-адресам

Фильтрация по IP

Временный доступ к S3 через AWS STS (AssumeRole)

STS-токены

Назначение и управление ролями администраторов в системе

Администраторы workspace/bucket

Просмотр, синхронизация и управление пользователями

Пользователи

Управление списками доступа (ACL) бакетов и объектов через S3 API

Поддержка ACL

Создание и управление временными ключами доступа S3

Управление ключами доступа

Создание, редактирование и синхронизация групп пользователей системы

Группы пользователей

Доступ

Принцип работы кластерного режима

Мультикластер

Управление

Механизм оповещения других систем о событиях в хранилище.

Webhooks

Расширение позволяет объединить несколько ресурсов хранения

Расширение

Блокировка версий объектов

ObjectLocking

Правила жизненного цикла данных

Жизненный цикл

Зеркалирование позволяет настроить синхронную и асинхронную репликацию бакета

Зеркалирование

Путь хранения объектов бакета на подключенном хранилище

Формирование пути хранения данных

Позволяет настроить политики хранения объектов в бакете

Настройка хранения бакета

Как подключить хранилище с уже имеющимися данными в нем

Подключение хранилища с данными

Политики хранения

Как загружать, скачивать, синхронизировать, удалять и просматривать объекты через S3 Browser

Пример работы c S3 через S3 Browser

Настройка подключения к ЗАКРОМА.Хранение

Подключение к ЗАКРОМА.Хранение

Использование

Шаблон обращения в поддержку

Трассировка запросов между сервисами на основе OpenTelemetry

Распределённая трассировка запросов

Как проверить имена узлов ZDS в инвентаре Ansible и в конфигурации кластера

Проверка имён узлов ZDS

Инструкция по ротации логов security audit log в БД PostgreSQL

Ротация аудит-лога (запись в БД)

Где находятся логи приложения

Инструкция по базовой проверке работоспособности сервисов Zakroma при стандартной инсталляции

Проверка статуса сервисов

Alert rules

Метрики приложения

Отслеживание задач и статуса системы

Мониторинг

Диагностика и устранение неполадок

Ответы на популярные вопросы по работе с системой

Частые вопросы

Что изменилось в приложении в текущем релизе