Как работать с Битрикс - корпоративный портал - когда много занято места на Диске

[BYS]

Кто сталкивался с реально большими проектами ?

Интересует как делать правильно Бекап когда слишком много занято места на дисках, то есть речь идет про сотни ТБ.
Есть автоматический Бекап, но он неделю будет делать если портал на 1 ТБ , особенно учитывая что база данных в 100 ГБ при этом.

То есть самой проблемы потом скачать зашифрованный Бекап нет, диски NVME 7500-14000 за ночь справляется, но вот что бы получить этот Бекап на самой Сервере это проблема.

 

[drdroid]

А что вы там храните на сотни ТБ порнуху ? Ох уж этот сферический конь в вакууме, столько, чисто гипотетически, места могут занять только загруженные файлы, типа битрикс диск активно юзают, но я не уверен что сам битрикс нормально потянет такой объём вложений, для таких целей есть специализированны системы которые справляются лучше и которые возможно интегрировать с самим битиксом.
А бекап делается просто средствами виртуальной среды - инкрементные/дифференциальные бекапы, которые позволяют бекапить только изменения, делается снимок состояния системы - снапшот, при следующем резервном копировании тоже снапшот и изменения от снапшота до снапшота бекапятся, либо переносятся на реплику... Можно почитать как работает тот же Veeam Backup & Replication.
Как вариант, если основной объём это файлы вложения то просто в настройках бекапа добавляются каталоги в исключения, и бекап выполняется только ядра системы и базы данных, а файлы бекапятся отдельно подходящими средствами типа rsync, ну и базу данных можно бекапить частично выбрав нужные таблицы, либо внешними средствами.
Плюк ко всему у битрикса есть возможность кластеризации - держать один портал на нескольких нодах, распределять между ними нагрузку и синхронизировать данные.

 

[BYS]

А что вы там храните на сотни ТБ порнуху ? Ох уж этот сферический конь в вакууме, столько, чисто гипотетически, места могут занять только загруженные файлы, типа битрикс диск активно юзают, но я не уверен что сам битрикс нормально потянет такой объём вложений, для таких целей есть специализированны системы которые справляются лучше и которые возможно интегрировать с самим битиксом.
А бекап делается просто средствами виртуальной среды - инкрементные/дифференциальные бекапы, которые позволяют бекапить только изменения, делается снимок состояния системы - снапшот, при следующем резервном копировании тоже снапшот и изменения от снапшота до снапшота бекапятся, либо переносятся на реплику... Можно почитать как работает тот же Veeam Backup & Replication.
Как вариант, если основной объём это файлы вложения то просто в настройках бекапа добавляются каталоги в исключения, и бекап выполняется только ядра системы и базы данных, а файлы бекапятся отдельно подходящими средствами типа rsync, ну и базу данных можно бекапить частично выбрав нужные таблицы, либо внешними средствами.
Плюк ко всему у битрикса есть возможность кластеризации - держать один портал на нескольких нодах, распределять между ними нагрузку и синхронизировать данные.

кластеризации интересно , но на практике никогда не сталкивался.
Может есть какое то видео или советы и инструкция по данному вопросу ?

по поводу что там хранить, то это социальные сети для крупных компаний где в колабы подключаются клиенты и там просто масса различных перебросов и хранение файлов.
Тут даже не в самих файлах дело так как я знаю что можно без папки например upload сделать бекап где будет чисто ядро и база, но тут и сама базы может сотню будет весить и автоматический бекап будет делаться при этом тогда неделю , если не больше )))
Мне просто изначально автоматическое резервное копирование нравиться своей простотой и надежности, но на большие проекты такое себе решение.

 

[sanchozu]

кластеризации интересно , но на практике никогда не сталкивался.
Может есть какое то видео или советы и инструкция по данному вопросу ?

Не поверишь, все есть в официальной доке на официальном сайте, в открытом доступе на русском языке:

Создание кластера master-slave

В «1C-Битрикс: Виртуальная машина» также есть поддержка быстрого развертывания кластерной конфигурации master-slave «1С-Битрикс: Управление сайтом» [ http://www...

dev.1c-bitrix.ru

Модуль "Веб-кластер" в Bitrix Framework

Возможности Веб-кластер [ https://dev.1c-bitrix.ru/learning/course/index.php?COURSE_ID=35&CHAPTER_ID=04750 ] от 1С-Битрикс позволяет использовать: -...

dev.1c-bitrix.ru