>Zina: /* Бэкап базы данных */

2024-11-04T08:04:43Z

Бэкап базы данных

Нова сторінка

Бэкап, бекап — резервное копирование сайтов.

* [[Veeam]]
* [[Rsync]]

== Backup на NAS ==

Для хранения бэкапов на NAS используем папку:

\\NAS\backup
/volume1/backup

Доступ к ней по FTP (порт стандартный 21):

* ftp://nas.zina.com.ua:21/backup
* Логин: backup
* Пароль см. здесь: https://info.zina.com.ua/adm/nas#backup

Структура папок:

* dev
* dev2
* hp
** Jira — пока пустая
* prod — сюда автоматически бэкапятся сайты с прода
* Routers — конфиги роутеров, на случай неудачного обновления или изменений настроек
** Mikrotik
* tserver
** 1C
** AllSubmitter
** Users — пока пустая
** WindowsServer2019 — образы диска с Windows Server, пока не настроено
** WTware — конфиги
* Zina-DVD — временная папка, куда собираются файлы для архивирования на DVD
** Design — все дизайнерские папки, без кода
** Webserver — дев-версии и ручные бэкапы сайтов: код, базы данных, info.txt

== Бэкап на Windows Server - robocopy ==

Используем штатную программу коммандной строки <code>robocopy</code>.

* [https://docs.microsoft.com/en-us/windows-server/administration/windows-commands/robocopy robocopy | Microsoft Docs]
* [https://vladimirmalikov.com/%D0%B8%D1%81%D0%BF%D0%BE%D0%BB%D1%8C%D0%B7%D1%83%D0%B5%D0%BC-robocopy-%D0%BF%D1%80%D0%B8%D0%BC%D0%B5%D1%80%D1%8B/ Используем утилиту Robocopy. Примеры.]
* [http://pyatilistnik.org/robocopy-and-examples-of-use-with-parameters/ Robocopy и примеры использования с параметрами | Настройка серверов windows и linux]
* [http://answit.com/utilita-robocopy-i-primeryi-ispolzovaniya/ Утилита robocopy и примеры использования]

'''Параметры robocopy, которые мы используем'''

* <code>/S</code> — копировать рекурсивно, за исключением пустых директорий и файлов (альтернатива <code>/E</code> — копировать с пустыми директориями и файлами)
* <code>/DCOPY:T</code> — копировать метки времени директорий
* <code>/COPY:DAT</code> — копировать атрибуты файлов (DAT — параметры по умолчанию):
** <code>D</code> Data
** <code>A</code> Attributes
** <code>T</code> Time stamps
* <code>/Z</code> — restartable mode — возможность продолжить копирование в случае обрыва
* <code>/M</code> — копировать только файлы с атрибутом "Архивный" и потом его сбросить на конечной стороне. Благодаря этому при следующем копировании будут скопированы только измененные файлы.
* <code>/MIN:1</code> — копировать только файлы ненулевого размера
* <code>/MT:64</code> — Creates multi-threaded copies with N threads. N must be an integer between 1 and 128. The default value for N is 8.
* <code>/R:2</code> — Количество повторных попыток копирования файла в случае, если копирование не удалось. Причем «не удалось» срабатывает и в том случае, если доступ к файлу закрыт. По-умолчанию равно одному миллиону, т.е. бесконечно, поэтому копирование благополучно зависнет на первом же файле, к которому не будет доступа.
* <code>/W:5</code> — Задержка в секундах между попытками копирования. По умолчанию равно 30 секундам.
* <code>/MOVE</code> — Moves files and directories, and deletes them from the source after they are copied.
* <code>/MIR</code> — зеркалирование: эквивалентно <code>/E</code> (копировать с вложенными директориями, в т.ч. пустыми) плюс <code>/PURGE</code> (удалять на конечно стороне файлы и директории, которых уже нет в источнике).

=== Бэкап базы 1С ===

==== В папки с датами ====

<code>C:\Tools\Backup\Backup-1C-DB.bat</code>

<source lang="powershell">
set yyyy=%date:~6,4%
set mm=%date:~3,2%
set dd=%date:~0,2%
set h=%time:~0,2%
set m=%time:~3,2%
set source="C:\1Cv82-Base-Zina"
set destination="\\nas\backup\tserver\1C\%yyyy%-%mm%-%dd%_%h%-%m%"
set log="\\nas\backup\tserver\1C\robocopy.log"
robocopy %source% %destination% /S /DCOPY:T /Z /MIN:1 /MT:64 /R:2 /W:5 /LOG:%log%
</source>

Отличие от бэкапа AllSubmitter:

* параметр <code>/MIN:1</code>, благодаря которому копируются только файлы больше 0 байт;
* отсутствие параметра <code>/M</code>, благодаря чему всегда копируются все файлы, а не только измененные.

==== Зеркалирование ====

<code>C:\Tools\Backup\Backup-1C-full-daily.bat</code>

<source lang="powershell">
set source="C:\1Cv82-Base-Zina"
set destination="\\nas\backup\tserver\1C\full-daily\1Cv82-Base-Zina"
set log="\\nas\backup\tserver\1C\full-daily\robocopy.log"
robocopy %source% %destination% /MIR /DCOPY:T /Z /MT:64 /R:2 /W:5 /LOG:%log%
</source>

=== Бэкап баз AllSubmitter ===

<code>C:\Tools\Backup\Backup-AllSubmitter.bat</code>

<source lang="powershell">
set yyyy=%date:~6,4%
set mm=%date:~3,2%
set dd=%date:~0,2%
set h=%time:~0,2%
set m=%time:~3,2%
set source="C:\AllSubmitter"
set destination="\\nas\backup\tserver\AllSubmitter\%yyyy%-%mm%-%dd%_%h%-%m%"
set log="\\nas\backup\tserver\AllSubmitter\robocopy.log"
robocopy %source% %destination% /S /DCOPY:T /Z /M /R:2 /W:5 /MT:64 /LOG:%log%
robocopy %destination% %destination% /S /MOVE
</source>

Отличия от бэкапа 1С:

* параметр <code>/M</code>, благодаря которому копируются только измененные файлы;
* второй вызов <code>robocopy</code>, который удаляет директорию бекапа, если она оказалась пустой.

==== Зеркалирование ====

<code>C:\Tools\Backup\Backup-AllSubmitter-hourly.bat</code>

<source lang="powershell">
set source="C:\AllSubmitter"
set destination="\\nas\backup\tserver\AllSubmitter\full-hourly\DB\AllSubmitter"
set log="\\nas\backup\tserver\AllSubmitter\full-hourly\DB\robocopy.log"
robocopy %source% %destination% /MIR /DCOPY:T /Z /MT:64 /R:2 /W:5 /LOG:%log%
set source="C:\ProgramData\WebLogAnalyzer\AllSubmitter"
set destination="\\nas\backup\tserver\AllSubmitter\full-hourly\Settings\ProgramData\WebLogAnalyzer\AllSubmitter"
set log="\\nas\backup\tserver\AllSubmitter\full-hourly\Settings\robocopy.log"
robocopy %source% %destination% /MIR /DCOPY:T /Z /MT:64 /R:2 /W:5 /LOG:%log%
</source>

== Бэкап файлов сайта ==

Сначала необходимо открыть терминал и перейти в каталог, в который будет сохранен бэкап.
cd ПУТЬ_К_КАТАЛОГУ

Путь к каталогу можно скопировать из строки адреса Nautilus или Krusader. Путь должен быть локальным, т.е. без <code>ftp://</code> и <code>smb://</code>.

Архивировать лучше не файлы внутри папки, а целиком папку. Потому что при архивировании списка файлов даже через шаблон <code>*</code> в архив не попадают файлы, начинающиеся с точки, типа <code>.htaccess</code>. А если архивировать папку, то все вложенные в нее файлы будут сохранены.

Сделать бэкап папки <code>html</code> в формате <code>tar.gz</code> (наиболее естественный для Linux вариант) и автоматически добавить к имени архива текущую дату:

<source lang="bash">
tar -cvzf `date +%Y-%m-%d_%H-%M`_backup.tar.gz html
</source>

То же в формате zip:

<source lang="bash">
zip -r `date +%Y-%m-%d_%H-%M`_backup.zip html
</source>

Если нужно исключить из архивирования сляшком тяжелую папку — например, <code>sites/default/files/</code>:

<source lang="bash">
tar -czf `date +%Y-%m-%d_%H-%M`_backup.tar.gz html --exclude='sites/default/files/*'
</source>

== Бэкап базы данных ==

Бэкап базы данных со сжатием и именованием файла по текущей дате:

<source lang="bash">
mysqldump -u USER -p DATABASE | gzip > `date +%Y-%m-%d_%H-%M`.sql.gz
</source>

Пароль можно не указывать, тогда он будет запрошен, или можно вставить сразу после параметра <code>-p</code>, без пробела.

С быстрым заполнением параметров (один раз указать имя базы, если имя юзера совпадает с базой), добавлением к имени бэкапа названия базы данных и отображением имени и размера файла в конце:

<source lang="bash">
db='DATABASE'; user=$db; backup=$db'_'`date +%Y-%m-%d_%H-%M`'.sql.gz'; mysqldump -u $user -p $db | gzip > $backup; du -h $backup; unset db user backup
</source>

С отображением прогресса (используется дополнительная программа <code>pv</code>):

<source lang="bash">
db='DATABASE'; user=$db; backup=$db'-'`date +%Y-%m-%d_%H-%M`'.sql.gz'; mysqldump -u $user -p $db | gzip | pv > $backup; unset db user backup
</source>

=== Импорт базы данных из файла дампа .sql ===

mysql -u USER -p DATABASE < FILE.sql

Импорт базы данных их архива <code>.gz</code> и с отображением прогресса:

pv FILE.sql.gz | gunzip | mysql -u USER -p DATABASE

=== Бэкап базы данных на хостинге с локального компьютера ===

Команда, которая соединяется с хостингом по SSH из-под root (нужно будет ввести пароль root) и бэкапит базу с именем <code>ИМЯ_БАЗЫ_ДАННЫХ</code>. Это имя можно узнать из списка "Инструмены > Базы данных" в IspManager или из списка "Databases" в phpMyAdmin http://77.120.105.84/.

<source lang="bash">
db_name='ИМЯ_БАЗЫ_ДАННЫХ'; ssh root@zina.com.ua "mysqldump $db_name --compact | gzip" > $db_name.sql.gz; du -h $db_name.sql.gz; unset db_name
</source>

=== Перенос БД с локального компьютера на удаленный ===

* DB_LOCAL_DBNAME - имя локальной базы данных
* DB_LOCAL_USER - пользователь базы данных на локальном компьютере
* DB_LOCAL_PASS - пароль пользователя на локальном компьютере
* DB_REMOTE_DBNAME - имя удаленной базы данных
* DB_REMOTE_USER - пользователь базы данных на удаленном компьютере
* DB_REMOTE_PASS - пароль пользователя на удаленном компьютере

<source lang="bash">
ssh root@zina.com.ua "mysqldump -h localhost -u DB_LOCAL_USER -pDB_LOCAL_PASS DB_LOCAL_DBNAME | mysql -h 192.168.0.100 -u DB_REMOTE_USER -pDB_REMOTE_PASS DB_REMOTE_DBNAME"
</source>

Пример:
<source lang="bash">
ssh root@zina.com.ua "mysqldump -h localhost -u kozakam_kozakam -pht1cNOWj kozakam_kozakam | mysql -h 192.168.0.100 -u kozakam_kozakam -pht1cNOWj kozakam_kozakam"
</source>

== Бэкап домена/субдомена ==
* ИМЯ_ПОЛЬЗОВАТЕЛЯ - unix-пользователь (владелец домена). Можно посмотреть в IspManager'e, на странице "Учетные записи" > "Пользователи".
* ИМЯ_ДОМЕНА - домен (без www.) из списка доменов пользователя (Страница "WWW домены" IspManager).
user_name='ИМЯ_ПОЛЬЗОВАТЕЛЯ'; domain_name='ИМЯ_ДОМЕНА'; ssh root@zina.com.ua "cd /var/www/$user_name/data/www/$domain_name && tar cz ./" > $domain_name.tar.gz; du -h $domain_name.tar.gz; unset user_name; unset domain_name

== BackUp настроек пользователя Ubuntu ==

~/.bashrc
~/.config/mc/ini
~/.config/xfce4/terminal/terminalrc

== Ссылки ==

* [http://habrahabr.ru/post/122184/ Опытные мелочи-4, или «Померяемся бэкапами?»]
* [http://geonix-gentoo.blogspot.com/2015/04/git.html Автоматический бэкап конфигов и скриптов в Bitbucket]

=== Программы для бэкапа под Windows ===

* [http://www.backup-utility.com/download-for-win7.html AOMEI Backupper Standard for Win7] — Win7 потому что это уменьшенный размер для Windows выше WinXP
* [http://rlab.ru/tools/rsaver.html R.saver – бесплатная программа для восстановления данных - R.LAB]

=== Программы для бэкапа под Linux ===

Самая популярная программа для Linux — Bacula, но, по отзывам, она сложная в настройке. В качестве более простых альтернатив резервного копирования под Linux рекомендуются эти программы:

* [https://www.urbackup.org/ UrBackup - Client/Server Open Source Network Backup for Windows and Linux]
** [https://habrahabr.ru/post/262499/ Быстрая настройка резервного копирования под Linux и не только (UrBackup) / Хабрахабр]
* [https://www.veeam.com/ru/linux-backup-free.html Бесплатное резервное копирование ОС Linux — Veeam Agent для Linux]
* [https://borgbackup.readthedocs.io/en/stable/ Borg — BorgBackup]
** [https://github.com/borgbackup/borgweb Web UI for Borg Backup]
** его предшественник [https://attic-backup.org/ Attic] — развивается медленнее

[[Категория:Хостинг]]
[[Категория:Linux]]

Backup - Історія редагувань

>Zina: /* Бэкап базы данных */