Выбор системы резервного копирования (нужно выбрать)

Обсуждение настройки и работы сервисов, резервирования, сетевых настроек и вопросов безопасности ОС.

Модераторы: SLEDopit, Модераторы разделов

Аватара пользователя
dimugric
Сообщения: 385
Статус: kernel panic
ОС: debian "wheezy", fedora

Выбор системы резервного копирования

Сообщение dimugric »

Всем привет. Выбираю систему резервнго копирования. Основная мысль: система на linux, создаёт дифференциальные и полные архивы по расписаниям (преимущественно файловые помойки из windows) с вебкой для отображения процессов бекапов.
Почитал, попытался посмотреть bacula с её webacula. Вроде и базы хранит в mysql, вроде и вебка есть, но чё-то как-то конфигурится черезчур муторно (хотя, может кто-то считает иначе?)
Глянул backupPC. Смутило что не понятно где базу данных свою хранит, а так особо пока не разбирался.

Кто скажет что лучше или предложит свой вариант решения вопроса - буду рад)
Asus K56CB Intel Core i5 - 3317U, 1.7ГГц/DDR - 6Gb/ SSD - 160Gb/ nvidia GeForce 740M "fedora"
Спасибо сказали:
Аватара пользователя
sash-kan
Администратор
Сообщения: 13939
Статус: oel ngati kameie
ОС: GNU

Re: Выбор системы резервного копирования

Сообщение sash-kan »

dimugric писал(а):
20.08.2012 15:27
вебкой
говорите, пожалуйста, по-русски·

dimugric писал(а):
20.08.2012 15:27
что лучше
лучше всего — регулярность процедуры создания резервных копий·
а инструмент — дело десятое·
Писать безграмотно - значит посягать на время людей, к которым мы адресуемся, а потому совершенно недопустимо в правильно организованном обществе. © Щерба Л. В., 1957
при сбоях форума см.блог
Спасибо сказали:
Аватара пользователя
Goodvin
Ведущий рубрики
Сообщения: 4333
Статус: ⚝⚠⚒⚑⚖☭☞☣☤&

Re: Выбор системы резервного копирования

Сообщение Goodvin »

Попробуйте сесть и подумать.

А подумав, сделать следующее:

1. Составить перечень критериев, важных для Вас, которым должен удовлетворять искомый инструмент.
От наличия каких-то кгнкретных функций до любых прочих параметров.
Но это должны быть четко и внятно сформулированные критерии, с понятными и доступными условиями их проверки.

2. Отранжировать эти критерии по их значимости и влиянию на конечный результат выбора.

3. Погуглить и собрать первичный список существующих систем резервного копирования.
От широко используемых вплоть до самописных скриптов.
Начать отсюда:
Список ПО для резервного копирования

4. Прогнать каждую систему/продукт через список критериев.
Проще всего и нагляднее составить таблицу, аналогичную вот этим:
Раз
Два

5. Отсортировать полученный список/таблицу по степени важности критериев.

6. Протестировать наиболее подходящие экземпляры ПО.

Остальное будет неэффективно.

С уважением,
Ваш К.О.
Спасибо сказали:
Аватара пользователя
ishitori
Сообщения: 502
ОС: gentoo -> archlinux

Re: Выбор системы резервного копирования

Сообщение ishitori »

мы в проекте используем ibm tsm, но её запросто можно прикрутить и для домашнего использования. начиная с 6-й версии, использует в качестве бд db2. правда, без лицензии оно будет работать недолго, а сколько стоит лицензия не знаю :) наверно, не очень дёшево. зато вещь действительно классная :drinks:
морнинг круассан..
Спасибо сказали:
Аватара пользователя
drBatty
Сообщения: 8735
Статус: GPG ID: 4DFBD1D6 дом горит, козёл не видит...
ОС: Slackware-current

Re: Выбор системы резервного копирования

Сообщение drBatty »

dimugric писал(а):
20.08.2012 15:27
Всем привет. Выбираю систему резервнго копирования. Основная мысль: система на linux, создаёт дифференциальные и полные архивы по расписаниям

tar+crond
если мало tar'а, посмотрите на dar
http://emulek.blogspot.ru/ Windows Must Die
Учебник по sed зеркало в github

Скоро придёт
Осень
Спасибо сказали:
Аватара пользователя
Gineaser
Сообщения: 157
Статус: Evrashka
ОС: Arch Linux

Re: Выбор системы резервного копирования

Сообщение Gineaser »

fsbackup
Обезьянка видит - Обезьянка делает...
Спасибо сказали:
Аватара пользователя
dimugric
Сообщения: 385
Статус: kernel panic
ОС: debian "wheezy", fedora

Re: Выбор системы резервного копирования

Сообщение dimugric »

Много лирики в теме появилось. Сравнительный анализ конечно делать думаю не стоит, но попытаюсь более понятно изложить суть вопроса (к слову, перед созданием темы все СПО системы, ну или большая часть основных, как раз была поверхностно изучена).
И так ...
Есть офисная сеть. Довольно большая (серверный парк насчитывает более 25 серверов). Для начала хотелось бы создавать резервные копии файловых помоем (повторюсь, как дифференциальные, так и ежемесячный full backup). Файловых помоек таких n-штук. В идеале не плохо было бы подключить копирование баз данных MySQL (почтовые базы, ftp базы, jabber базы), т.к. сейчас они копируются именно в связке tar-cron.
Продолжаю мысль дальше ...что я имел ввиду под "вебкой". Хотелось бы иметь некую централизованную консоль (в bacula и bacupPC таковая веб консоль присутствует), в которой бы централизованно отображался процесс создания всех резервных копий, расписаний и т.п. В идеале не плохо было бы через такую консоль и распаковывать архивы (читал что бакула должна уметь, но пока не настраивал её).
Изучив обзорную документацию по системам резервного копирования пришёл к выводу, что оптимальным является именно bacula (с консолью управления webacula). Повторюсь, настраивать ещё не начал и здесь именно прошу ответить тех людей, у кого какая-то система развёрнута и как она себя ведёт "в жизни". Мягко говоря не хочется повесить на неё всё перечисленное и через 3 дня обнаружить ряд косяков.
Asus K56CB Intel Core i5 - 3317U, 1.7ГГц/DDR - 6Gb/ SSD - 160Gb/ nvidia GeForce 740M "fedora"
Спасибо сказали:
Аватара пользователя
Goodvin
Ведущий рубрики
Сообщения: 4333
Статус: ⚝⚠⚒⚑⚖☭☞☣☤&

Re: Выбор системы резервного копирования

Сообщение Goodvin »

dimugric писал(а):
21.08.2012 12:51
Много лирики в теме появилось. Сравнительный анализ конечно делать думаю не стоит,
Это Вы неправильно думаете.
Хотя, всё зависит от того, какой результат Вы хотите получить.
Можно потратить пару дней и всё разложить по полочкам, сделав осознанный и осмысленный выбор с предсказуемым результатом.
Или можно тыкать палкой в небо с закрытыми глазами в надежде попасть палкой по яблоку. С риском осознать, что тыкающий находится в гараже, а яблони в этой части континента вообще не растут.
Каждый делает выбор сам.

dimugric писал(а):
21.08.2012 12:51
но попытаюсь более понятно изложить суть вопроса (к слову, перед созданием темы все СПО системы, ну или большая часть основных, как раз была поверхностно изучена).
Ключевое слово "поверхностно". Понимание степени их соответствия задаче, судя по всему, так и не пришло.

dimugric писал(а):
21.08.2012 12:51
И так ...
Есть офисная сеть. Довольно большая (серверный парк насчитывает более 25 серверов). Для начала хотелось бы создавать резервные копии файловых помоем (повторюсь, как дифференциальные, так и ежемесячный full backup). Файловых помоек таких n-штук. В идеале не плохо было бы подключить копирование баз данных MySQL (почтовые базы, ftp базы, jabber базы), т.к. сейчас они копируются именно в связке tar-cron.
Продолжаю мысль дальше ...что я имел ввиду под "вебкой". Хотелось бы иметь некую централизованную консоль (в bacula и bacupPC таковая веб консоль присутствует), в которой бы централизованно отображался процесс создания всех резервных копий, расписаний и т.п. В идеале не плохо было бы через такую консоль и распаковывать архивы (читал что бакула должна уметь, но пока не настраивал её).
Изучив обзорную документацию по системам резервного копирования пришёл к выводу, что оптимальным является именно bacula (с консолью управления webacula). Повторюсь, настраивать ещё не начал и здесь именно прошу ответить тех людей, у кого какая-то система развёрнута и как она себя ведёт "в жизни". Мягко говоря не хочется повесить на неё всё перечисленное и через 3 дня обнаружить ряд косяков.

То есть Вы продолжаете настаивать, чтобы выбор за Вас сделал кто-то другой? ))
Ну, это тоже путь.

Спасибо сказали:
elve
Сообщения: 69
ОС: Gentoo Linux

Re: Выбор системы резервного копирования

Сообщение elve »

Пожалуй, сделаю выбор за топикастера =). Освойтесь с Bacula и будет вам счастье =).
Спасибо сказали:
Аватара пользователя
drBatty
Сообщения: 8735
Статус: GPG ID: 4DFBD1D6 дом горит, козёл не видит...
ОС: Slackware-current

Re: Выбор системы резервного копирования

Сообщение drBatty »

dimugric писал(а):
21.08.2012 12:51
Продолжаю мысль дальше ...что я имел ввиду под "вебкой". Хотелось бы иметь некую централизованную консоль

лично мне хватает терминала.
http://emulek.blogspot.ru/ Windows Must Die
Учебник по sed зеркало в github

Скоро придёт
Осень
Спасибо сказали:
Leon_3
Сообщения: 1

Re: Выбор системы резервного копирования

Сообщение Leon_3 »

Сам ищу ответа на вопрос: Какую систему выбрать для резервирования, и что вы посоветуете.
За то в тебе куча "УМНЫХ" людей которые говорят общими фразами. Это из той же серии - я хочу выглядеть умным, поэтом скажу что бы искале на ГУГЛЕ так как это сотню раз обсуждалось.

Задачи человек обрисовал. А вот ответы белее размазаны и пахнут троллингом (((
Спасибо сказали:
azsx
Сообщения: 3684
ОС: calculate linux, debian, ubuntu

Re: Выбор системы резервного копирования

Сообщение azsx »

я за крон + баш скрипты с любым разумным архивированием tar.gz
Однако rsync также вариант для многих задач.
зы
а бакула хорошая, но слишком сложна для такой мелкой задачи.
Спасибо сказали:
Аватара пользователя
Bizdelnick
Модератор
Сообщения: 21497
Статус: nulla salus bello
ОС: Debian GNU/Linux

Re: Выбор системы резервного копирования

Сообщение Bizdelnick »

Помимо уже перечисленного можно посмотреть в сторону obnam. Но выбор в любом случае надо делать, попробовав разные варианты, или хотя бы осилив документацию.
Пишите правильно:
в консоли
вку́пе (с чем-либо)
в общем
вообще
в течение (часа)
новичок
нюанс
по умолчанию
приемлемо
проблема
пробовать
трафик
Спасибо сказали:
avtlg
Сообщения: 8

Re: Выбор системы резервного копирования

Сообщение avtlg »

мне кажется, что перед тем как решать вопрос по выбору системы резервного копирования, необходимо заиметь структурную и функциональную схему серверной фермы. А если уж задавать вопрос на форуме, то как минимум указать какое используется железо, какие крутятся сервисы, на каких операционках. А то получается как у ТС
dimugric писал(а):
21.08.2012 12:51
Есть офисная сеть. Довольно большая (серверный парк насчитывает более 25 серверов).

и фиг знает, что это за 25 серверов. Толи 25 писишек с Petnium 4 "под столом" админа, толи 2 кластера из 25 HP Proliant DL380 Gen8, разнесенный по разным серверным помещениям с настройенной виртуализацией. Так что
Задачи человек обрисовал. А вот ответы белее размазаны и пахнут троллингом (((

вы не правы. человек попытался описать свои хотелки, но не задачи.
Спасибо сказали:
Аватара пользователя
drBatty
Сообщения: 8735
Статус: GPG ID: 4DFBD1D6 дом горит, козёл не видит...
ОС: Slackware-current

Re: Выбор системы резервного копирования

Сообщение drBatty »

Leon_3 писал(а):
24.07.2013 11:30
Сам ищу ответа на вопрос: Какую систему выбрать для резервирования, и что вы посоветуете.
За то в тебе куча "УМНЫХ" людей которые говорят общими фразами. Это из той же серии

это из серии "как найти женщину?" или "как найти работу?". Даже если полно историй успеха и опыта, кроме общих фраз вы ничего не услышите.

Резервное копирование уникально для каждой системы, и именно потому я пользуюсь самописными bash скриптами. Где-то хорошо юзать rsync, где-то просто tar, а где-то нужна dvcs. Естественно глупо пихать rsync в dvcs, ибо у последней свои способы бекапа. СУБД также бекапится по своему, а вовсе не файлами.
Leon_3 писал(а):
24.07.2013 11:30
я хочу выглядеть умным, поэтом скажу что бы искале на ГУГЛЕ так как это сотню раз обсуждалось.

можно и не в гугле. Можно и здесь поискать. Вот только "идеальной системы" вы не найдёте. А универсальные костыли не нужны. Не тот случай.
http://emulek.blogspot.ru/ Windows Must Die
Учебник по sed зеркало в github

Скоро придёт
Осень
Спасибо сказали:
Аватара пользователя
Goodvin
Ведущий рубрики
Сообщения: 4333
Статус: ⚝⚠⚒⚑⚖☭☞☣☤&

Re: Выбор системы резервного копирования

Сообщение Goodvin »

Leon_3 писал(а):
24.07.2013 11:30
Сам ищу ответа на вопрос: Какую систему выбрать для резервирования, и что вы посоветуете.
За то в тебе куча "УМНЫХ" людей которые говорят общими фразами. Это из той же серии - я хочу выглядеть умным, поэтом скажу что бы искале на ГУГЛЕ так как это сотню раз обсуждалось.

И всем сразу стало понятно, кто на самом деле самый умный.
Для справки: умение пользоваться поиском в гугле и по содержимому форума это среди адекватных людей положительное качество и полезный навык.
Особенно, если тема не одну сотню раз обсуждалась и алчущему истины даны разумные советы о методах формирования критериев поиска и постановки задачи.

Leon_3 писал(а):
24.07.2013 11:30
Задачи человек обрисовал. А вот ответы белее размазаны и пахнут троллингом (((
Перед тем, как отвечать в тему, полезно её прочитать и осознать смысл написанного другими участниками.
Спасибо сказали:
noUser
Сообщения: 138
ОС: Arch

Re: Выбор системы резервного копирования

Сообщение noUser »

Лучше скрипты, т к проще и данные легче восстановить когда нужно и где нужно.
в bacula и backupPC в рузультате получается нечто, что восстановить на другом пк нелья. В backupPC каждый файл сжимается (непонятным способом) и переименовывается. Ну скриптом, наверно, можно восстановить.
В бакуле все совсем грустно. Без бакулы, ее базы и еще каких-то файлов полученную кашу не разобрать. webacul -у еще надо заставить работать, что весьма нетривиально. Проще настроить через webmin, но там удобства нет и толком ничего не настроить. Хоть это и комбаин, а писать костыли придется. Для каких задач он пригоден "как есть" мне непонятно. Клиентские программы (FD) под винду отстают по версиям, возможно их перестали собирать вообще (и отдают только за денежку). Сделать логичную ротацию архивов не получится, вдруг выясняется, что сама бакула старые volume удалять не может. Нужно предвидеть сколько надо бекапить и сколько хранить, создать volume нужных размелов и перезаписывать в них же новые данные. Оверхед по дисковому пространству, т к размер этих volume со временем станет максимально возможным. нужно глубоко покопаться, тогда что-то можно настроить, но как готовое решение оно крайне сомнительно. + скорость архивирования реально доходит до 97-98 мбит/с и упирается в мою сеть при не смертельной нагрузке на клиентский проц.
Спасибо сказали:
Sleeping Daemon
Сообщения: 1450

Re: Выбор системы резервного копирования

Сообщение Sleeping Daemon »

dimugric писал(а):
20.08.2012 15:27
Всем привет. Выбираю систему резервнго копирования. Основная мысль: система на linux, создаёт дифференциальные и полные архивы по расписаниям (преимущественно файловые помойки из windows) с вебкой для отображения процессов бекапов.
Почитал, попытался посмотреть bacula с её webacula. Вроде и базы хранит в mysql, вроде и вебка есть, но чё-то как-то конфигурится черезчур муторно (хотя, может кто-то считает иначе?)
Глянул backupPC. Смутило что не понятно где базу данных свою хранит, а так особо пока не разбирался.

Кто скажет что лучше или предложит свой вариант решения вопроса - буду рад)

fsbackup попробуйте...
http://www.opennet.ru/dev/fsbackup/

Спасибо сказали:
noUser
Сообщения: 138
ОС: Arch

Re: Выбор системы резервного копирования

Сообщение noUser »

Еще Если помойки на винде, то backupPC не умеет теневые копии нативно. Нужно колхозить скрипты, причем на стороне клиента, да ипросто для копирования надо самому rsyncd или что-то подобное настроить, по самбе работает хуже. А бакула умеет.
Спасибо сказали:
pelmen
Сообщения: 1268
ОС: debian

Re: Выбор системы резервного копирования

Сообщение pelmen »

Я написал очень простой скрипт, который по крону 3 раза в неделю делает (грубо говоря):
1) mysqldump --all-bases > /tmp/mysql.dump
2) tar -cjf backup.tar.bz2 /etc/ /home/user/ /tmp/mysql.dump /srv/samba && rm /tmp/mysql.dump
3) echo "backup done" | mail -s "server #1 backup script" admin@domain.com
Вдобавок к этому rsync-ом еженочно делаю синхронизацию /srv/samba с сетевым хранилищем, которое нужно исключительно для быстрого восстановления данных в /srv/samba
Так же в samba настроена корзина, но это уже к бэкапу прямого отношения не имеет
Спасибо сказали: