О продукте


 - Российская программная реализация объектного S3 хранилища для любых данных (решение в Реестре отечественного ПО №18185).
 - Организация гибридного хранения (on-prem/cloud)
      - Возможность лёгкой организации гибридного хранения для повышения надежности (зеркалирование) или добавления ёмкости (расширение) хранения данных;
      - Возможность объединить уже имеющиеся различные S3-совместимые хранилища, сетевые корпоративные ресурсы, а также обеспечить фоновую миграцию данных между ними без остановки клиентских приложений.
- Геораспределенное хранение (корпоративный CDN)
     - Возможность загрузить данные на сервере в одном регионе, автоматически распространить или закачать объект при запросе клиентского ПО на сервера в других регионах. Это позволяет получать контент с ближайшего сервера, что даёт такое же удобство и скорость, что и облачные сервисы.
- Подключение сетевых папок как S3-хранилища
     - Возможность быстрого подключения накопленного контента для работы с ним через S3 API;
- Фоновая миграция контента в объектное хранилище.
- Настройка жизненного цикла данных
     - Настройка политики автоматического перемещения данных между различными ресурсами хранения (серверами/дисками) в зависимости от частоты обращения к файлу и других параметров.
 - Мультитенанты.
     -  Разделение хранилища на отдельные области для разграничения доступа и точек доступа для разных направлений бизнеса или разных проектов.
-  Повышенная безопасность
     -  Audit log. Все операции с данными фиксируются в отдельном журнале.
     -  Интеграция с SIEM-системами, используемыми службой ИБ;
     -  Фильтр по ip-адресу. Возможность ограничить доступ к данным с конкретных ip-адресов;
     -  Настраиваемая ролевая модель. Создание произвольных ролей как набор разрешений пользователя/администратора на уровне тенанта/бакета/объекта.
- Простая интеграция
     - Поддержка стандарта S3 для подключения современных приложений.
     - Поддержка механизма webhooks для интеграции с корпоративными приложениями.
- Функция видеохостинга
     - Автоматическое транскодирование загружаемого видеофайла для выбора качества видео плеером клиента;
     - Поддержка быстрой перемотки без полной загрузки видеофайла клиентом;
     - Поддержка видео неограниченного размера.
 - Поддержка решения 8х5 / 24х7.


zakroma-main.png

Статья показывает преимущества, которые получает компания при внедрении объектного хранилища Закрома.

Преимущества Закрома.Хранение

## Преимущества использования Закрома.Хранение отдельно или в связке с MINIO перед отдельно стоящим MINIO

В решении ЗАКРОМА унаследованы преимущества, используемого S3-хранилища (MINIO/Ceph/др), и преодолены многие недостатки.

1. **Упрощение поддержки**
MINIO: при развёртывании и росте кластера значительно возрастает сложность поддержки и уровень требуемой квалификации.
ЗАКРОМА: можно развернуть несколько небольших и простых инсталляций MINIO на ЦОДах и объединить их в ЗАКРОМА, дальнейший горизонтальный рост не приводит к увеличению сложности поддержки. 

1. **Возможность организации гибридного хранения (своя и облачная инфр-ра)**
MINIO: не позволяет сочетать своё хранилище и другие типы ресурсы хранения, лимитированная поддержка облачных S3-хранилищ.
ЗАКРОМА: позволяет «на-лету» объединять различные ресурсы хранения (диски, СХД, S3-совместимые хранилища), что позволяет при необходимости расшириться за счет облачных мощностей, настроить внешний и внутренний контур данных.

1. **Независимость от поставщиков иностранного ПО и оборудования. Возможность сочетать разные виды ресурсов хранения**
MINIO: opensource-решение, но при его развёртывании компания так или иначе подстраивает свою инфраструктуру под это решение. При отказе от решения придётся менять инфраструктуру, дорогостоящий проект миграции. В случае использовании в компании нескольких видов S3-хранилищ, их данные не могут быть объединены без сторонних решений. 
<font color="#66CC66">ЗАКРОМА</font>: российской решение, позволяет построить распределенное хранилище, объединяя данные различных S3 и файловых хранилищ. Это позволяет не зависеть от определенного вендора программного или аппаратного обеспечения, мигрировать данные без остановки бизнес-приложений.

1. **Решение в реестре отечественного ПО, при этом с качеством иностранного (наследуются все преимущества minio)** 
MINIO: штаб-квартира в США.
ЗАКРОМА: решение в реестре отечественного ПО.
 
1. **Простая миграция и расширение без остановки бизнес приложений**
MINIO: миграция данных с помощью сторонних приложений, с остановкой бизнес- приложений на переключение.
ЗАКРОМА: миграция данных между любыми хранилищами и расширение без остановки бизнес-приложений. 

1. **Возможность быстрого расширения объёма за счёт любого доступного хранилища без потребности апгрейда инфраструктуры**
MINIO: По опыту эксплуатации, при достижении ограничений дисковой подсистемы, для расширения на другую СХД может потребоваться пересоздание кластера и миграция данных.
ЗАКРОМА: Возможно мгновенное и неограниченное расширение за счет добавления других доступных ресурсов хранения и объединение их в единое хранилище для бизнес-приложений.

1. **Файлы более 5 ТБ (размер неограничен)**
MINIO: Ограничение на размер объекта в 5 ТБ.
ЗАКРОМА: Снято ограничение на размер объекта, что позволяет загружать большие данные с технических устройств.

1. **Преодолены ограничения в производительности MINIO при большом количестве объектов в бакете (проявляется уже на сотнях терабайт)**
MINIO: При большом объеме данных (уже с нескольких сотен терабайт) у MINIO начинаются проблемы с производительностью ввода-вывода данных.
ЗАКРОМА: Решена проблема производительности ввода-вывода данных в MINIO через ЗАКРОМА за счёт оптимизации имён ключей объектов. 

1. **Быстрый листинг (возврат списка) объектов по сравнению с MINIO**
MINIO: На больших объемах данных, у MINIO сильные проблемы с листингом объектов бакета (время может достигать до недели).
ЗАКРОМА: Сняты ограничения с производительностью листинга объектов.

1. **Статистика по кол-ву объектов в бакетах, мониторинг прироста объема данных**
MINIO: Сложно, а иногда невозможно, определить количество объектов в бакетах, суммарный объем данных.
ЗАКРОМА: Есть статистика количества объектов в разрезах Рабочая область / Бакет, показатели прироста данных. 

1. **Поддержка гибких правил политики жизненного цикла объектов в бакетах**
MINIO: В политиках можно оперировать только временем жизни объекта и его удалением или перемещением.
ЗАКРОМА: Можно оперировать и комбинировать различные условия, в том числе по дате последнего обращения, количеству обращений за период, типу файла, размер, тэгам, версии и др. Дополнительно можно настроить политики загрузки объектов, определив, какие объекты в какой ресурс хранения писать, а также с помощью политики настроить равномерное распределение нагрузки по нескольким ресурсам хранения.



minio.png

В статье кратко сравниваются решения ЗАКРОМА и MINIO

Сравнение ЗАКРОМА с MINIO

Партнёры

## Закрома объединяет

Закрома.Хранение не только самостоятельно реализует функцию объектного хранилища, но и может объединять резличные ресурсы хранения, в том числе другие объектные хранилища. Например, нашим партнером является компания YADRO, у которых есть программно-аппаратный комплекс [TATLIN.OBJECT](https://yadro.com/ru/tatlin/object) с поддержкой S3-протокола. В сентябре 2023 года мы провели сертификационные тесты, подтверждающие совместимость продуктов ЗАКРОМА и TATLIN.OBJECT.

![zakroma-as-gateway.png](https://strapi.zakroma.ru/uploads/zakroma_as_gateway_8e6c99342a.png)

## TATLIN.OBJECT

![Сертификат_совместимости_11_2023_YADRO_TATLIN_OBJECT_.jpg](https://strapi.zakroma.ru/uploads/Sertifikat_sovmestimosti_11_2023_YADRO_TATLIN_OBJECT_4b19919ed8.jpg)



tatlin_logo_black.png

В сентябре 2023 был получен сертификат совместимости с TATLIN.OBJECT

Совместимость с TATLIN.OBJECT

Релизы

Всем привет! 

С каждым обновлением ЗАКРОМА.Хранение мы стараемся внедрять новые функциональности, расширять возможности по администрированию и настройке хранилища. 

Мы рады представить вам последние обновления ЗАКРОМА.Хранение, доступные в новом релизе:

**Webhooks** — мощный инструмент для автоматизации и интеграции вашего хранилища с внешними системами. 

**Просмотр объектов в бакете из административной панели** - упрощает процесс управления данными и повышает эффективность администрирования.

**Проверка контрольных сумм** - обеспечивает целостность данных и позволяет оперативно реагировать на потенциальные проблемы хранилища, такие как повреждение объектов.

**Фильтрация операций по IP адресу** - добавляет дополнительный уровень контроля и безопасности, позволяя администраторам видеть и фильтровать манипуляции в хранилище по конкретным IP адресам.

И так, по порядку.

## Webhooks, Webhooks, Webhooks…

В обновлённой версии ЗАКРОМА.Хранение стало возможным создавать вебхуки - механизм, который позволяет одной системе автоматически отправлять данные о событиях в другую систему в режиме реального времени. 

Настройка вебхука может быть осуществлена, как на уровне всего хранилища, так и на уровне бакета.

Список доступных событий, на которые можно настроить вебхук, следующий: 

На уровне хранилища:

- Create Workspace – создание рабочей области
- Delete Workspace – удаление рабочей области
- Update Workspace – обновление рабочей области
- Create Bucket – создание бакета
- Delete Bucket – удаление бакета

На уровне бакета:

- Create Object – создание объекта
- Move Object to Trash – постановка объекта на удаление
- Delete Object – удаление объекта
- Set Object Tags – присвоение нового тега

Другими словами, теперь у вас появилась возможность настройки событийной модели для взаимодействия с внешними системами. 

Если вам необходимо, чтобы внешняя система узнала о создании, удалении или каких-либо ещё манипуляциях с рабочей областью или объектом – вы можете настроить внешнюю системы на получения уведомлений об этом событии. 

Процесс создания и настройки вебхуков чрезвычайно прост и выглядит следующим образом: 

1. Вы создаёте вебхук из административной панели ЗАКРОМА.Хранение, указывая событие, на которое должна реагировать внешняя система.
    ![image5.png](https://strapi.zakroma.ru/uploads/image5_ea7f336986.png)
1. Выбираете тип запроса:
    - POST
    - PUT
    - GET
    ![image8.png](https://strapi.zakroma.ru/uploads/image8_4098c63d0c.png)
    > Методы POST и PUT передают параметры события в формате JSON, а метод GET передаёт параметры события как URL encoded query.
1. Выбираете протокол (http или https) и указываете URL удаленного сервиса, на который будут отправляться запросы при возникновении событий.
1. Указываете метод аутентификации.
![image1.png](https://strapi.zakroma.ru/uploads/image1_547ffc37d4.png)
1. Разработчик удаленного сервиса настраивает свою систему для приема и обработки запросов от вашего вебхука. Это может включать настройку эндпоинта (URL), который будет обрабатывать входящие запросы, и написание логики для обработки данных, полученных в запросах.

Для обеспечения безопасности запросов вебхуков можно использовать несколько типов авторизации:

- Basic: Стандартный способ авторизации по логину и паролю 
- API KEY: Авторизация с использованием специального идентификатора, выданного пользователю 
- Bearer Token: Временный токен 

При настройке через REST API доступны следующие http-методы:


- AddWebhooks – Добавление вебхука
- UpdateWebhook – Редактирование вебхука 
- DeleteWebhooks – Удаление вебхука 
- ReinitWebhooks - Внеплановое обновление настроек вебхука
- ListWebhooks - Получение списка настроенных вебхуков
- ListEvents - Получение списка событий, для которых возможно настроить веб-хук. 

После настройки вебхука, при возникновении в системе события, прописанного в настройках – вебхук посылает REST запрос на указанный адрес, и внешняя система реагирует на него, следуя логике, прописанной разработчиками. Это может быть и простое уведомление о случившемся событии или запуск какого-то дополнительного процесса с содержимым бакета. Например, автоматический запуск обработчика видео при появлении в бакете нового объекта – видеоконтента. 


## Просмотр объектов в бакете

В новой версии ЗАКРОМА.Хранение появилась возможность просмотра содержимого бакета без необходимости подключения внешнего S3-клиента (например, S3 браузера). Администратору доступны операции по удалению, скачиванию объекта, а также обновления списка объектов в бакете прямо из административной панели. 

![image3.png](https://strapi.zakroma.ru/uploads/image3_e38c16d767.png)

Важно отметить, что за возможность просмотра объектов через административную панель, в ЗАКРОМА.Хранение отвечают 2 независимые системы по управлению доступом: ролевая модель и политики доступа. Ролевая модель обеспечивает администратора доступом к самой вкладке «Объекты», а система политик доступа определяет, какие конкретно объекты бакета может просматривать администратор. 

## Проверка контрольных сумм объектов

Для обеспечения целостности и консистентности данных, а также для своевременного получения информации об изменении объекта на уровне файловой системы, в новом релизе появилась функция проверки контрольных сумм объектов в бакете. 

После старта проверки, система запустит процесс анализа и сравнения контрольных сумм всех объектов бакета с хранящимися в системе - теми, которые система получила на входе при загрузке объекта в бакет.

В случае несовпадения контрольных сумм, в настройках бакета на вкладке «Монитор» администратор увидит сообщения о объектах, которые не прошли проверку - повреждённых объектах. Это означает, что объект или какая-то его часть не доступны для пользователя и нужно принять меры - проверить работоспособность узлов хранилища.
![image7.png](https://strapi.zakroma.ru/uploads/image7_a3430a89f2.png)


Проверку контрольных сумм можно настроить по графику – ежемесячно, еженедельно, ежедневно, указав точное время старта проверки (например, ночью, когда нагрузка на систему минимальна). 


![image2.png](https://strapi.zakroma.ru/uploads/image2_73bf1e4a0e.png)

## Фильтрация операций по IP адресу

В новом обновлении ЗАКРОМА.Хранение появилась новая колонка на вкладке «Операции». Теперь вы можете видеть, с какого IP адреса была произведена та, или иная манипуляция в хранилище. Также присутствует возможность фильтрации операций по конкретному IP адресу. 

![image6.png](https://strapi.zakroma.ru/uploads/image6_538f6d69b5.png)

----
Таким образом, в новом релизе ЗАКРОМА.Хранение представлено множество новых возможностей, которые значительно расширяют функциональность и удобство управления вашими данными.

Мы надеемся, что новые функции помогут вам улучшить процессы работы с данными и обеспечат высокий уровень надежности и управляемости вашего хранилища.

Закрома_лого_черный.svg

Рассказываем о новых возможностях в версии 1.18

Новая версия 1.18

Кейсы


Если ваша организация имеет дело с большим объемом видеоконтента: обучающие видео, записи с камер видеонаблюдения, контент для медиасферы, записи переговоров, видеопродакшен - вам необходимо надежное и гибкое решение для хранения и использования этих данных. Таким решением может стать корпоративный видеохостинг - единая система хранения, обеспечивающая хорошую структурированность и быстрый доступ к видеоконтенту.

Объектное хранилище **[ЗАКРОМА.Хранение](/products/storage)**  обладает рядом возможностей, которые обеспечивают бесперебойную доставку видеоконтента до пользователей и позволяют хранить и управлять видеоконтентом наиболее оптимальным и удобным способом.

Давайте рассмотрим каждую из этих возможностей более подробно на примере одной крупной российской компании, которая решила использовать ЗАКРОМА.Хранение для создания корпоративного видеохостинга. 

## Клиент

Одна из крупнейших российских энергетических компаний, один из ключевых игроков на мировом энергетическом рынке.

## Предпосылки

В процессе своей деятельности в организации накопилось большое количество видеоматериалов:

- Образовательный контент - специализированные обучающие видео для помощи инженерам и техническим специалистам лучше понимать сложные процессы и технологии, используемые в компании


- Видеоматериалы, рассказывающие о корпоративных ценностях и культуре компании


- Записи корпоративных встреч, стратегических сессий и вебинаров.

Все эти файлы были разбросаны по разным дискам и серверам, доступ к видео осуществлялся по прямой ссылке на файл, либо на папку, где хранился файл, которая пересылалась от сотрудника к сотруднику по необходимости. Не было единого пространства для хранения видеоматериалов, отсутствовал интерфейс для взаимодействия пользователей с контентом.

Такой подход накладывал ряд ограничений, которые существенно влияли на опыт взаимодействия конечных пользователей с видеоконтентом и снижали эффективность использования ресурсов хранения компании:

\-  	Скорость доступа к видео зависела от месторасположения сервера, на котором хранился файл, и локации пользователя, от которого происходил запрос. А так как география компании очень обширная - подразделения компании разбросаны по всей территории России - пользователям из удаленных регионов зачастую приходилось долго ждать пока видео скачается, либо загрузится для воспроизведения.

\-  	Обычно видеофайлы хранились в единственном экземпляре, в том формате и разрешении, в котором были изначально загружены на сервер. Зачастую, чтобы файл занимал меньше места на диске и удалённым пользователям, либо пользователям с медленным интернет-соединением было проще с ним ознакомиться, требовалось менять формат и разрешение файла. Для этого  было необходимо вручную загрузить файл в конвертер, переформатировать его, сохранить в папку и заново поделиться ссылкой на файл. Это занимало очень много времени и было крайне неудобно.

\-  	Возможности по управление доступом к контенту были также сильно ограничены. Не всегда было понятно, кто загрузил файл, кем были внесены последние изменения.

\-  	Отсутствовала возможность гибкого поиска файлов по дополнительным характеристикам, таким как: когда был снят видеоролик, какая информация содержится в видео, для какого департамента оно было создано, действующие лица и так далее – поиск файла, в случае такой необходимости, осуществлялся только по наименованию, либо по времени появления файла в папке.

\-     Из-за отсутствия централизованной системы хранения видеоконтента трансляция видео на информационные дисплеи в офисах компании была организована крайне неэффективно. Необходимо было либо скачивать файл и воспроизводить его вручную на каждом отдельном дисплее, либо запускать необходимый файл из сети. Затем, в случае необходимости запустить какое-то другое видео, искать его среди многочисленных сетевых папок и каталогов компании. Не было возможности взаимодействовать сразу со всем видеоконтентом.

\-  	Все файлы продолжали храниться на тех же серверах, на которые изначально были загружены. Не было механизма, который бы осуществлял оптимизацию ресурсов хранения – перемещение файла на более удобное хранилище, в зависимости от актуальности видео, важности, частоты использования и других параметров. 

Клиент обратился к нам с целью преодолеть эти ограничения, обеспечить пользователям максимальный комфорт взаимодействия с видеоконтентом и оптимизировать затраты на хранение. Другими словами – создать полноценный корпоративный видеохостинг.


 ## ЗАКРОМА.Хранение для видео
 
 
![ZakromaVideo.png](https://strapi.zakroma.ru/uploads/Zakroma_Video_46fa7e70bf.png)
 
*Особенности ЗАКРОМА.Хранение для создания видеохостинга:*

\-  	ЗАКРОМА.Хранение – объектное хранилище. Это значит, что вы можете хранить файлы любого типа и размера, что критически важно для хранения большого объёма видеоконтента.


\-  	ЗАКРОМА.Хранение работает через протокол S3, который позволяет передавать файл конечному пользователю с любого нужного места, а не с самого начала. Нет необходимости скачивать весь файл целиком. Это обеспечивает возможность быстрой перемотки видео, что является крайне важным для полноценного видеохостинга.


\-  	ЗАКРОМА.Хранение поддерживает технологию вебхуков. Их можно настроить таким образом, чтобы при загрузке нового видеофайла в хранилище автоматически запускался конвертер, который переведёт его в требуемый формат и разрешение. Для этого используется FFmpeg - мультимедийный фреймворк с открытым исходным кодом, который поддерживает множество форматов и кодеков. FFmpeg позволяет эффективно обрабатывать аудио и видео, включая задачи кодирования, декодирования, трансформирования, потоковой передачи и фильтрации.

\-  	В ЗАКРОМА.Хранение предусмотрена возможность использования видеосервера с поддержкой протокола потоковой передачи данных (HLS). Это подключаемый компонент системы, который можно добавить по мере необходимости. С его помощью можно изменять качество видеопотока в зависимости от скорости интернет-соединения пользователя, обеспечивая бесперебойное воспроизведение. Чтение файла будет происходить небольшими блоками и, в случае ухудшения интернет-соединения у пользователя, чтение видео не прервется, а будет воспроизведено с того же места, на котором было остановлено, но уже с другого файла, с более низким качеством, подходящем для текущей скорости соединения. Кроме этого, благодаря использованию протокола HLS, можно организовать трансляцию видеоконтента на любое количество устройств и обеспечить синхронность и высокое качество воспроизведения, независимо от местоположения офисов и скорости интернет-соединения.

\-  	Архитектура ЗАКРОМА.Хранение позволяет организациям создавать свою собственную сеть по доставке контента (CDN) - географически распределенную сетевую инфраструктуру, обеспечивающую быструю доставку контента пользователям. Серверы географически могут располагаются таким образом, чтобы сделать время ответа для пользователя минимальным - выдача контента будет производиться с ближайшего к пользователю, наиболее быстрого сервера.

\-  	ЗАКРОМА.Хранение поддерживает тиринг данных, что позволяет распределить объекты в хранилище таким образом, чтобы наиболее востребованные или новые видеофайлы находились на быстрых серверах и дисках, а менее востребованные — на более медленных и дешёвых.

Взаимодействие с контентом осуществляется через специализированный веб-портал, который реализован на основе back-end [Закрома.Архив](/products/archive). 

Веб-портал поддерживает широкий спектр функций, обеспечивающих удобное и эффективное управление видеоконтентом.

![ZakromaContent.webp](https://strapi.zakroma.ru/uploads/Zakroma_Content_d02faa9781.webp)

## Функциональность портала  ##

***Ролевая модель доступа***

Позволяет настраивать права доступа к видеоконтенту для различных пользователей и групп. Это обеспечивает безопасность данных и контролируемое распространение информации. Администраторы могут назначать роли и права, определяя, кто может загружать, редактировать, удалять и просматривать видео. Например, сотрудники могут иметь доступ только к обучающим видео, тогда как руководство — к конфиденциальным корпоративным записям.

***Управление связями***

Позволяет организовать контент в логические группы и создавать взаимосвязи между отдельными видеороликами. Это может быть полезно для создания плейлистов, серий обучающих видео или связей между видео с похожими темами. 

***Тегирование***

Позволяют добавлять метаданные к каждому видеоконтенту, такие, например, как: проект, для которого было снято видео, место съёмки, уровень конфиденциальности видео, наименование подразделения компании, к которому относится видео и любые другие. Это улучшает организацию и поиск видео, делая контент более доступным и структурированным. 

***Комментарии***

Предоставляет пользователям возможность оставлять свои замечания и обсуждать видеоконтент прямо на веб-портале. 


***Поиск и фильтрация*** 

Позволяют пользователям быстро находить нужный видеоконтент, используя различные критерии поиска. Можно фильтровать видео по дате, атрибутам, тегам, связям с другими видео и другим метаданным. 

***Статусы***

Статусы помогают отслеживать состояние каждого видео, будь то черновик, опубликованное видео, архивное или удалённое. Например, администраторы могут легко найти все черновики видео, которые требуют доработки перед публикацией.
- - -
_Внедрение ЗАКРОМА.Хранение в свою инфраструктуру помогло клиенту обойти ограничения старого подхода, был создан полноценный корпоративный видеохостинг, отвечающий всем современным требованиям и обеспечивающий высокое качество обслуживания пользователей._

corporation--education-video--pc.webp

Создание корпоративного видеохостинга с помощью ЗАКРОМА.Хранение

Корпоративный видеохостинг

## Подтверждена совместимость объектного S3 хранилища ЗАКРОМА.Хранение от Digital Spirit с российской СУБД Postgres Pro

Postgres Professional, разработчик российской СУБД Postgres Pro, и компания-разработчик ПО Digital Spirit объявляют о совместимости своих продуктов. Сертификат, выданный Postgres Professional, подтверждает корректную работу Postgres Pro Standard 16 с версией ЗАКРОМА.Хранение 2.0.1.
Решение ЗАКРОМА добавлено в [список совместимых решений](https://postgrespro.ru/compatible-solutions).

![sert-zakroma-postgrespro.png](https://strapi.zakroma.ru/uploads/sert_zakroma_postgrespro_101506e2b4.png)

**ЗАКРОМА.Хранение** — российское объектное S3-хранилище. Позволяет хранить файлы любого формата из всех систем и от всех пользователей компании в одном месте. С его помощью можно организовать гибридное хранение данных на различных ресурсах хранения.
Новая версия системы позволяет масштабироваться до миллиардов файлов и десятков петабайт. Входит в реестр отечественного ПО, рекомендовано для импортозамещения. 

**[Postgres Pro](https://postgrespro.ru/products/postgrespro/standard)** — отечественная система управления базами данных. Флагманская редакция СУБД, Postgres Pro Enterprise, включает более 100 ключевых разработок, обеспечивающих максимальную надежность и высокую производительность, что позволяет ей решать самые сложные промышленные задачи на предприятиях с высоконагруженными системами. Входит в реестр отечественного ПО и имеет сертификат ФСТЭК.

**Postgres Professional** — разработчик российской системы управления базами данных Postgres Pro. СУБД входит в Единый реестр российского программного обеспечения и выпускается в редакциях: Postgres Pro Enterprise, Postgres Pro Standard, Postgres Pro Shardman, их сертифицированные ФСТЭК версии. Специалисты компании оказывают поддержку полного цикла: аудит, помощь в миграции, техподдержку 24х7 и SLA, обучение, заказные разработки, сертификацию специалистов. По данным исследования ЦСР за 2023 год, компания возглавляет рейтинг российских разработчиков СУБД.
Команда Postgres Professional также активно развивает свободно распространяемую СУБД PostgreSQL. Занимает 1 место в России и 2 — в мире по вкладу в открытый код PostgreSQL.



PostgresPro_logo.png

Подтверждена совместимость с Postgres Pro Standard 16

Совместимость с Postgres Pro


Мы следим за последними тенденциями в области хранения данных и стараемся соответствовать растущим требованиям наших клиентов. В новой версии ЗАКРОМА.Хранение мы полностью переработали ядро приложения и внедрили ряд новых функций, расширив возможности по масштабированию и управлению хранилищем. 

## Что нового?

ЗАКРОМА.Хранение 2.0 - представляет собой значительное обновление, направленное на улучшение масштабируемости, управляемости и безопасности объектного хранилища. 

- Мы реализовали шардирование базы данных - это обеспечивает высокую отказоустойчивость, улучшает производительность и позволяет эффективно масштабировать хранилище по мере роста данных. 
- Добавили локальных администраторов доступа, что позволяет реализовать модель "S3-хранилище как сервис". 
- Добавили разграничение прав к разделам панели администрирования.
- Добавили возможность политик доступа к S3 операциям и объектам.

## Шардирование базы данных

Одним из преимуществ объектного хранилища ЗАКРОМА.Хранение изначально являлась лёгкость горизонтального масштабирования. Вы легко можете увеличить ёмкость хранилища по мере необходимости, просто добавив новые узлы в систему.

Однако, в предыдущей версии ЗАКРОМА.Хранение, была одна особенность, которая ограничивала возможности по масштабированию. Все данные об объектах: состояние объекта, размер, метаданные, хеш-сумма, политики хранения и другие характеристики хранились в единой базе данных. Такой подход не создаёт никаких сложностей, когда мы имеем дело с небольшим количеством объектов в бакете. Однако, когда речь идёт о миллиардах объектов в одном бакете и свыше 10000 запросов в секунду – наличие одной большой базы для хранения информации об объектах могло выступать ограничением для роста. 

Для того, чтобы этого избежать, в ЗАКРОМА.Хранение 2.0 мы полностью переработали ядро приложения и внедрили функцию шардирования - разделение базы данных об объектах на несколько частей – шардов. Теперь нет необходимости хранить одну большую базу данных. Она может быть разделена на несколько шардов (баз данных) и размещаться на одном или нескольких серверах, в зависимости от потребностей. Для удобства управления данными, шарды также можно объединить в сабсеты. 

Логика распределения базы данных на шарды управляется через специальную вкладку на панели администратора. В зависимости от количества объектов, для каждого бакета администратор может указать количество шардов в сабсете и настроить весовые коэффициенты для балансировки нагрузки между шардами. При увеличении количества объектов в бакете или в случае, если какой-либо из шардов перегружен, предусмотрен механизм решардинга средствами приложения -  администратор может добавить новый шард и настроить его для ребалансировки нагрузки.


За обеспечение логики разделения базы данных на шарды и логики распределения запросов к каждому шарду, отвечает специальный сервис - Composer. 

Планирование шардов можно осуществлять из расчета 50 миллионов объектов на один шард и добавлять новые шарды по мере приближения к этой величине.

![scheme20.png](https://strapi.zakroma.ru/uploads/scheme20_79fd90e1ca.png)

Шардирование базы данных – необходимая функциональность, когда речь идёт о хранении больших объёмов данных. 

С её помощью значительно увеличивается пропускная способность системы и снижается время ответа на запросы пользователей, повышаются возможности по масштабирование хранилища, а также отказоустойчивости системы – в случае недоступности одного из шардов, система не будет получать информацию только о части объектов. Таким образом полностью исключается возможность потери доступа к информации о всех объектах хранилища. 

## «Хранилище – как сервис»

#### Управление ролями пользователей в рабочей области/бакетах

В новом обновлении появилась возможность назначать локальных администраторов, которые могут иметь доступ к управлению определенной рабочей областью или бакетом. 

Для этого, на вкладке «Администраторы» вам просто нужно назначить пользователю необходимую роль.

![space-admin1.png](https://strapi.zakroma.ru/uploads/space_admin1_a2c447d2c7.png)
![bucket-admin1.png](https://strapi.zakroma.ru/uploads/bucket_admin1_04581ff9a0.png)

На выбор доступно 3 роли, каждая из которых характеризуется разными возможностями для конкретного пользователя.

**Роль владельца (owner)** рабочей области или бакета - такая роль наделяет пользователя максимально широкими правами по настройке и редактированию - владелец может назначать и отзывать роли другим пользователям, настраивать и удалять рабочую область и входящие в неё бакеты. 

**Роль редактора (maintainer)** - дает право редактировать настройки, но не позволяет удалять рабочую область или бакет.

**Роль просмотрщика (viewer)**  - позволяет позволяет пользователю лишь просматривать настройки бакета или рабочей области без возможности вносить какие-либо изменения. 

![bucket-admin2.png](https://strapi.zakroma.ru/uploads/bucket_admin2_b1149e209e.png)

#### Управление доступом к вкладкам панели управления

Теперь права доступа можно настроить таким образом, чтобы администратор имел доступ только к конкретной вкладке или группе вкладок панели управления. 

Например, для сотрудника по инфобезопасности можно сделать отдельные права, которые ограничивают возможности пользователя просмотром только лишь одной вкладки «Операции» и не позволяют просматривать содержимое остальных вкладок.

![role-add.png](https://strapi.zakroma.ru/uploads/role_add_08bc5db749.png)

Список разрешений, который можно выдать пользователю, следующий:

- Доступ к информации о кластерах
- Полный доступ к мониторам
- Очистка истории операций
- Полный доступ к управлению ролями
- Полный доступ к управлению хранилищами
- Полный доступ к управлению правами пользователей
- Полный доступ к управлению Webhooks

Каждое разрешение соответствует определенной вкладке на панели управления.
![role-add2.png](https://strapi.zakroma.ru/uploads/role_add2_159a477a2d.png)

##  Политики доступа

Теперь стал доступен ещё один мощный механизм управления доступом к хранилищу – каждому пользователю можно назначить права доступа в разрезе S3-операций до конкретного объекта или маски.

Вы всегда можете изменить настройки разрешенных действий для каждого пользователя или группы пользователей, обеспечив тем самым гибкий и индивидуальный контроль доступа к управлению рабочей областью или бакетом. 

Можно ограничить или разрешить доступ к любой поддерживаемой S3 операции по необходимости.

![bucketpoilcy1.png](https://strapi.zakroma.ru/uploads/bucketpoilcy1_bcc2442168.png)

Назначить пользователю или группе пользователей разные политики доступа к объекту или группе объектов можно, просто указав путь к месту, где хранится объект. 


Таким образом, в ЗАКРОМА.Хранение теперь доступны 2 независимые модели управления доступом. Одна для администрирования рабочих областей и бакетов  – ролевая модель, вторая – для контроля доступа к S3 операциям через политики доступа. 

#### Как заключение

Эти изменения делают ЗАКРОМА.Хранение 2.0 идеальным решением для организаций, нуждающихся в надежном и масштабируемом объектном хранилище с расширенными функциями управления доступом и защиты данных.


new-release.png

ЗАКРОМА.Хранение 2.0 - Новое ядро, шардирование базы данных, ролевая модель доступа и многое другое.

Новый релиз: ЗАКРОМА.Хранение 2.0

В статье рассказывается про технические и финансовые преимущества объектного хранилища. Как оценить использование технологии, применительно к Вашей организации.

Статья доступна для просмотра и печати в формате pdf:
[Почему все идут в S3.pdf](https://cloud.digital-spirit.ru/s/YXHeyQnAt7zasBK)

ПочемуS3.png

Чем отличаются файловые и объектные хранилища и почему так популярны становятся последние?

Почему все идут в объектные хранилища?

События

С 16 по 18 октября 2024 года в Сочи прошёл крупнейший в России Форум инновационных финансовых технологий **Finopolis 2024**, который ежегодно собирает ведущих экспертов и профессионалов в области финтеха. В рамках форума компания **Digital Spirit** совместно с партнёром **Bizmatika Consulting** представили решение **ЗАКРОМА** как один из самых передовых отечественных продуктов для создания системы электронного архива и хранения данных.  
**Илья Фридман**, владелец компании **Digital Spirit**, отметил важность участия компании в таком значимом событии:

> "Форум был действительно важным. Мы обменялись мнениями с  лидерами рынка, обсуждали интересные и актуальные для отрасли темы. Особенно приятно было видеть такой живой интерес к нашему продукту. Я уверен, что ЗАКРОМА — это решение, которое будет востребовано во всех финансовых учреждениях, если они хотят построить современную, безопасную и эффективную экосистему для работы с данными."

**Finopolis 2024** стал отличной возможностью для **Digital Spirit** продемонстрировать своё решение представителям крупнейших банков и финансовых организаций страны. В ходе форума было проведено более 70 встреч с потенциальными клиентами и партнёрами. Примечательно, что стенд компании лично посетила **Эльвира Набиуллина**, председатель **Центрального банка России**. Это стало дополнительным подтверждением высокого интереса к отечественным разработкам в области финансовых технологий и отечественному S3 хранилищу **ЗАКРОМА**.
**Finopolis**  - отличная платформа для обмена опытом и укрепления деловых связей. Мы получили ценную обратную связь от представителей крупнейших игроков отрасли, которая послужит дальнейшему развитию и совершенствованию объектного S3 хранилища ЗАКРОМА. 

![collage.jpg](https://strapi.zakroma.ru/uploads/collage_3a962497d0.jpg)



ALEX5185.jpg

Digital Spirit и Bizmatika Consulting представили решение ЗАКРОМА на крупнейшем форуме финансовых технологий Finopolis 2024

ЗАКРОМА на FINOPOLIS 2024

clean-lake-of-data--server--pc--ai--bright-light.png

Последнее время в аналитике данных становится популярна концепция Data Lakehouse. 

Чем же она отличается от предыдущих популярных концепций Data Warehouse и Data Lake ("Озеро данных")? 

В этой статье попытаемся раскрыть этот вопрос.

От концепта Data Warehouse к Data Lakehouse

Компания **«Диджитал Спирит»** выступила спонсором технической конференции **DECKHOUSE CONF 25**, объединившей инженеров, разработчиков и руководителей, заинтересованных в развитии и внедрении современных технологических решений. 
В качестве золотого партнера компании **«Флант» ([Deckhouse](https://deckhouse.ru))** и технологического партнера в области объектного хранения данных **[«ЗАКРОМА»](https://zakroma.ru)**, мы стремились поделиться накопленным опытом успешных внедрений платформы в различных отраслях, а также представить возможности обучения и повышения квалификации специалистов в нашем учебном центре. 
В рамках бизнес-сессии **Илья Фридман** рассказал о пути становления партнерских отношений между **«Диджитал Спирит»** и **АО «Флант»**. 
Благодарим организаторов и участников конференции за возможность непосредственного общения с профессиональным сообществом, проявившим интерес к передовым российским решениям в области контейнеризации.

![collage-deckhouse.jpg](https://strapi.zakroma.ru/uploads/collage_deckhouse_bf600753ec.jpg)

deckhouse-cover.jpg

Компания «Диджитал Спирит» выступила спонсором технической конференции DECKHOUSE CONF 25.

DECKHOUSE CONF 25

Postgres Professional подтвердил совместимость своей утилиты pg_probackup3 для бекапирования базы данных на S3-хранилище [ЗАКРОМА.Хранение](https://zakroma.ru/products/storage).

![sert20250416.png](https://strapi.zakroma.ru/uploads/sert20250416_236003222a.png)

Основные возможности утилиты **pg_probackup3**:

1. **Поддержка объектных S3-хранилищ**: работа с MinIO, Amazon S3, [ЗАКРОМА.Хранение](https://zakroma.ru/products/storage) без промежуточного хранения данных.
2. **Работа с ленточными хранилищами**: поддержка систем резервного копирования на ленточных носителях.
3. **Поддержка NFS версий 4 и 5**: хранение резервных копий в сетевой файловой системе.
4. **Инкрементальное копирование**: три режима для экономии места и ускорения создания/восстановления копий.
5. **Удалённый режим работы**: резервное копирование и восстановление удалённых экземпляров Postgres Pro.
6. **Архивирование внешних каталогов**: резервное копирование файлов и каталогов вне PGDATA (скрипты, конфиги, журналы, SQL-дампы).
7. **Каталогизация резервных копий и архивов WAL**: получение списка копий и метаинформации в текстовом или JSON формате.
8. **API для интеграции**: библиотека libprobackup для взаимодействия с другими приложениями.

Смотрите документацию по [утилите pg_probackup3](https://postgrespro.ru/docs/pg_probackup3/3.0/).

<a href="https://postgrespro.ru/products/postgrespro">![Shaiba.png](https://strapi.zakroma.ru/uploads/Shaiba_352d2367c0.png)</a>

Shaiba.png

Postgres Professional подтвердил совместимость с S3 ЗАКРОМА.Хранение в части утилиты бекапирования.

Добро пожаловать в Блог Закрома

Добро пожаловать в
Блог Закрома