Вот и прошел почти месяц после сбоя. Почти все восстановили и пережили. Теперь нам нужно было проработать план, как избежать данных проблем в будущем. Бэкапы теперь нужно писать по новой схеме, чтобы не было проблем предыдущими. Поэтому решили пока бэкапиться на два сервере. Причем сервера разные и разнесенные. Сейчас подумываем о установке еще одного сервера за пределами нашей сети и ДЦ. Чтобы на случай пожара .. бэкапы не пострадали. И так .. Первый сервак забирает все через Bacula — правда full делает очень долго. Второй сервак забирает все через rsnapshot. Надеюсь теперь проблем с данными не будет и мы всегда сможем восстановить файлы из любого источника. Третий сервер планируется поставить у нас в офисе. Он будет забирать данные скорее всего с сервера, который использует rsnapshot. Сейчас еще подумываю поднять mysql — slave для репликации данных с основного сервера mySQL и с него же буду делать бэкап баз данных. Тут убивается два зайцы в принципе
1 заяц — это всегда есть сервер БД, который можно использовать если первый вылетит
2 заяц — при создании бэкапа не будут лочится таблицы и базы
3 заяц — можно через mysql proxy использовать второй сервак, как read-only mysql server, тем самым разгрузив основной сервер.

Будем делать и пытаться, чтобы достичь нового уровня.