Медленное резервное копирование данных с файловых серверов с помощью System Center Data Protection Manager 2019
У меня есть кластер виртуального файлового сервера из 2 виртуальных машин, где каждая виртуальная машина работает с Windows Server 2019 (8 ГБ ОЗУ, 8 виртуальных ЦП ). Файловые серверы хранят свои данные на VHD-наборе, отформатированном в NTFS и с включенной дедупликацией. Имеется около 14 ТБ данных, которые потребляют всего около 6 ТБ из-за дедупликации.
У меня есть физический сервер (64 ГБ ОЗУ, 2 ЦП по 8 ядер с HT, всего 32 логических ядра) с установленными Windows Server 2019 и Microsoft SC DPM 2019. Он использует локальные жесткие диски (RAID6) для хранения данных резервного копирования в Modern Backup Storage (MBS), отформатированных с помощью ReFS.Этот сервер имеет резервный канал 10 GbE с файловыми серверами в той же подсети. Группы защиты, которые выполняют резервное копирование целых виртуальных машин или баз данных SQL, работают хорошо. Но группа защиты, которая выполняет резервное копирование данных кластера файловых серверов, имеет очень низкую производительность.
Полная синхронизация 14 (или 6) ТБ занимает около 70 часов! Это невероятно медленно. Когда он запускается, он имеет пропускную способность около 2-4 Мбит / с на канале 10 GbE (который имеет весь свой потенциал, когда я копирую большой файл вручную). После долгой фазы замедления (~ 1 день) он «разгоняется» до 200-400 Мбит / с, что все еще довольно медленно.
ЦП и оперативная память не кажутся узкими местами ни на одном сервере.
Я обнаружил похожие проблемы здесь и в других местах:
- DPM для файлового сервера - ужасно медленный?
- MS DPM - Низкая производительность проверки согласованности
- Низкая скорость резервного копирования с DPM после запуска резервного копирования через несколько минут
- DPM 2016 MBS Производительность падает по спирали
- Как мы можем улучшить SCDPM?
- DPM 2016 File Server Backup SLOW
Но без рабочего решения. Как я могу ускорить резервное копирование данных?
На данный момент следующие твики принесли значительные улучшения в производительности резервного копирования данных.
Настройки Windows Defender
Настройки Windows Defender по умолчанию замедляют производительность резервного копирования. Я изменил настройки Windows Defender в соответствии с этой статьей и ощутил значительное увеличение производительности резервного копирования. Для достижения того, что описано в этой статье, можно использовать следующие строки PowerShell.
На сервере DPM:
Add-MpPreference -ExclusionPath 'C:\Program Files\Microsoft System Center\DPM\DPM\XSD'
Add-MpPreference -ExclusionPath 'C:\Program Files\Microsoft System Center\DPM\DPM\Temp'
Add-MpPreference -ExclusionPath 'E:\' # Where E:\ is the backup storage drive
Add-MpPreference -ExclusionProcess 'C:\Program Files\Microsoft System Center\DPM\DPM\bin\DPMRA.exe'
Add-MpPreference -ExclusionProcess 'C:\Windows\Microsoft.NET\Framework\v4.0.30319\csc.exe'
Add-MpPreference -ExclusionProcess 'C:\Windows\Microsoft.NET\Framework64\v4.0.30319\csc.exe'
На файловых серверах:
Add-MpPreference -ExclusionProcess 'C:\Program Files\Microsoft Data Protection Manager\DPM\bin\DPMRA.exe'
Включить сжатие по проводам
Активация сжатия по проводам в группе защиты для резервного копирования данных также привела к увеличению производительности резервного копирования. Эта оптимизация описана здесь.
- Щелкните правой кнопкой мыши группу защиты и выберите Оптимизировать производительность... из контекстного меню.
- На вкладке Сеть установите флажок Включить сжатие по проводам.
Настройка реестра
Я еще не тестировал, но в следующих статьях описаны настройки реестра, которые могут еще больше повысить производительность резервного копирования:
- FIX: Heavy memory usage in ReFS on Windows
- ReFS volume using DPM becomes unresponsive on Windows Server 2016
- How To Optimize ReFS Performance With System Center Data Protection Manager?
Tiered Storage
Если вы не переходите на full-flash, перейдите хотя бы на многоуровневое хранилище SSD. Microsoft настоятельно рекомендует использовать многоуровневые хранилища, о чем можно прочитать здесь и здесь. Не используйте только жесткие диски, особенно жесткие диски со скоростью вращения шпинделя 7200 об/мин.
Выбирайте конфигурацию RAID с умом
Хотя RAID6 обеспечивает очень высокую доступность, он имеет почти худшую производительность. RAID5 имеет лучшую производительность, и вы можете использовать RAID5 в сочетании с диском горячего резерва для достижения той же емкости хранения и почти такой же высокой доступности, как у RAID6. Существуют еще лучшие конфигурации RAID, но они также намного дороже.