Backup - не нравится готовое - сделай сам!

05.12.13

База данных - Архивирование (backup)

Без бекапа по жизни - несколько не мой принцип отношения к данным. Но существующие программы, которые я видел, меня не устроили.
Поэтому приложив несколько интелекта я разработал пакет скриптов для создания инкрементальных бекапов.

Скачать файлы

Наименование Файл Версия Размер
iBackup.zip
.zip 865,09Kb
107
.zip 865,09Kb 107 Скачать

Статья не окончена. Допишу полностью, если будут те, кому это интересно. или удалю, если никому не надо.

 

 

Требования следующие:

  • бекап должен быть инкрементальным и время от времени полным
  • формат должен быть открытым
  • программа должна быть бесплатной
  • возможность указания нескольких получателей (с учетом того, что не все могут быть доступны)
  • работать должно быстро
  • должно учитываться удаление файлов
  • должно храниться несколько копий, а устаревшие удалялись автоматически.
  • должна быть возможность назначать пароль для каталога
  • возможность выбора степени сжатия для каталога
  • возможность исключения файлов по каталогу / маске

 

Самая главная проблема - инкрементальный бекап. Многие программы могут делать время от времени полный, а между ними - инкрементальный. Но я не нашел программы, которая бы в случае если файлы не изменялись, не делала бы полный бекап.

Хотелось иметь возможность указания гранулярности анализа данных для формирования полных бекапов. Т.е. у меня несколько десятков каталогов для данных клиентов. И если данные изменились только в одном каталоге, то новый полный бекап нужно делать только для одного каталога. Но в тоже время, я не хочу в настройках указывать каждый каталог - состав постоянно меняется.

Для выполнения этих условий был рожден набор скриптов.

А именно три штуки:

MakeBackup.cmd - стартовый файл, который читает настройки из файла конфигурации.
Запускается без параметров, читает настройки из файла MakeBackup.cfg. Структура файла настроек следующая:

[SRC]
#В этом разделе указыватся источник файлов

#Первый параметр - каталог для архивирования
"C:\Program Files\Total Commander"

#Так же можно указать, какие файлы не требуется архивировать (/x) (указывается не маска файлов, а подстрока входящая в путь файла)
"C:\Program Files\Mdesktop" /x"logs\;.tmp"

#Для вложенного каталога хотим отдельный архив
"C:\Program Files\1cv82" /x"srvinfo\"
"C:\Program Files\1cv82\srvinfo

#Можно указать пароль (/p)
"C:\Program Files\Opera" /pSuperPasword
 
#Можно указать, что для каждого вложенного каталога будет сделан отдельный архив (/s)
D:\Books /s


#Можно указать степень сжатия (/m0...9, по умолчанию - 5)
D:\Photo /m0


[DST]
#Список каталогов - приемников

H:\Backup\
S:\Rebelx\Backup\

[REM]
#Данные в секциях с другими именами не анализируются

 

 продолжение - если кому-то будет интересно это продолжение

 

ниже - черновик

 

 

 
-LD Каталог лог-файлов =
-DS Каталог исходных файлов (возможно использование синтаксиса @filename) (обязательно)
-DD Каталог сохраненных файлов (обязательно)
-MX Маска файлов для исключения (возможно использование синтаксиса @filename) =
-PR Префикс имени архива = backup
-FF Частота создания полных архивов, в днях (рассчитывается с начала года), или W - еженедельно = W
-AT Тип архива: D - дифференциальный, F - полный, А - автоматический выбор = A
-HD Глубина сохранения логов, в днях: 0 - не удалять логи = 7
-BD Глубина сохранения полных копий: 0 - не удалять копии = 2
-7Z Путь к архиватору 7z = 7za.exe
-EX Расширение архива = 7z
-OP Дополнительные опции архиватора =

 

в качестве архиватора указывается 7z.cmd, который запускает 7z.exe с пониженным приоритетом:

@title 7z.cmd - running
start /LOW /B /WAIT 7z_4.65.exe %*

 

См. также

Автоподбор ролей для профилей и групп доступа в любых типовых базах 1С УТ 11, КА 2, ERP2, Розница 2/3, УНФ 16/3, БП 3, ЗУП 3 и подобных (УФ, Платформа 8.3.14+)

Инструменты администратора БД Роли и права 8.3.14 1С:Розница 2 1С:Управление нашей фирмой 1.6 1С:Документооборот 1С:Зарплата и кадры государственного учреждения 3 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х 1С:Зарплата и Управление Персоналом 3.x 1С:Управление нашей фирмой 3.0 1С:Розница 3.0 Платные (руб)

Роли… Вы тратите много времени и сил на подбор ролей среди около 2400 в ERP или 1500 в Рознице 2, пытаясь понять какими правами они обладают? Вы все время смотрите права в конфигураторе или отчетах чтоб создать нормальные профили доступа? Вы хотите наглядно видеть какие права дает профиль и редактировать все в простом виде? А может хотите просто указать подсистему и дать права на просмотр и добавление на объекты и не лезть в дебри прав и чтоб обработка сама подобрала нужные роли? Все это теперь стало возможно! Обновление от 15.12.2023, версия 1.1.

12000 руб.

06.12.2023    2987    15    1    

34

SALE! 20%

Infostart УДиФ: Управление данными и формами

Инструменты администратора БД Инструментарий разработчика Роли и права Платформа 1С v8.3 Конфигурации 1cv8 Россия Платные (руб)

Расширение позволяет без изменения кода конфигурации выполнять проверки при вводе данных, скрывать от пользователя недоступные ему данные, выполнять код в обработчиках. Не изменяет данные конфигурации, легко устанавливается практически на любую конфигурацию на управляемых формах.

10000 8000 руб.

10.11.2023    3558    11    1    

34

SALE! 30%

PowerTools

Инструментарий разработчика Инструменты администратора БД Платформа 1С v8.3 Управляемые формы Конфигурации 1cv8 Россия Платные (руб)

Универсальный инструмент программиста для администрирования конфигураций. Сборник наиболее часто используемых обработок под единым интерфейсом.

3600 2520 руб.

14.01.2013    177767    1074    0    

849

Журнал изменений с восстановлением состояния ссылочных объектов и архивацией по HTTP / COM (расширение + конфигурация, 8.3.14+, ЛЮБАЯ конфигурация)

Архивирование (backup) Журнал регистрации Поиск данных Платформа 1С v8.3 Управляемые формы Конфигурации 1cv8 1С:Управление торговлей 11 Платные (руб)

База данных «сама» меняет данные в документах/справочниках? Тогда данный журнал изменений для Вас! Практически не влияет на скорость записи объектов за счет быстрого алгоритма! Скорость работы почти в 2 раза выше типового механизма "История изменений"! Позволяет следить за изменениями и удалением в любых ссылочных объектах конфигурации, с возможностью архивации по HTTP(!) или COM, и сверткой данных. А так же, может восстановить состояние реквизитов (значения) до момента изменения или удаления объекта из базы. Есть ДЕМО-база где можно самостоятельно протестировать часть функционала! Работает на любых платформах выше 8.3.14+ и любых конфигурациях! Версия 3.1 от 24.08.2023!

19200 руб.

15.05.2017    42522    10    24    

38

Ускоренное проведение документов (x4), устранение ошибок 60/62 счетов и зачет авансов (Бухгалтерия 3.0)

Закрытие периода Инструменты администратора БД Корректировка данных Бухгалтерский учет 1С:Бухгалтерия 3.0 Россия Бухгалтерский учет Платные (руб)

Расширение «Оперативное проведение» в 4 раза уменьшает время проведения документов и закрытия месяца. Является комплексным решением проблем 62 и 60 счетов. Оптимизирует проведение при включенной функциональной опции «Раздельный учет НДС». Используется в более 10 организациях уже 2 года. Совместимо с конфигурацией Бухгалтерия 3.0 (+КОРП).

14400 руб.

29.04.2020    27385    79    146    

59

Система хранения присоединенных файлов в томах на диске

Инструменты администратора БД Платформа 1С v8.3 1С:Комплексная автоматизация 1.х 1С:Управление производственным предприятием Платные (руб)

Конфигурация Комплексная автоматизация 1.1 (и УПП 1.3 тоже) хранит файлы и изображения в справочнике Хранилище дополнительной информации в реквизите Хранилище типа ХранилищеЗначений. Та же история с ВложениямиЭлектроннойПочты. Но при этом присоединенные файлы в Электронном документообороте хранит в томах на диске. Эта доработка позволяет использовать стандартный механизм хранения файлов, изображений и вложений электронных писем в томах на диске. При этом можно разделить тома хранения по объектам конфигурации.

4200 руб.

10.11.2015    61320    88    59    

73

"Менеджер потоков 2.1": УПП: "Восстановление партий"

Инструменты администратора БД Платформа 1С v8.3 1С:Управление производственным предприятием Россия Бухгалтерский учет Управленческий учет Платные (руб)

Как оптимизировать то, что, считалось, не поддается оптимизации? Как повысить доступность базы данных? Как проводить самую «времяемкую» операцию не по паре раз в неделю, а по несколько раз в день*? Ответ есть!

20000 руб.

12.09.2019    11748    5    9    

7

Брандмауэр для сервера 1С Предприятие 8 - внешнее управление сеансами

Инструменты администратора БД Платформа 1С v8.3 Конфигурации 1cv8 Платные (руб)

Управление возможностью начала и возобновления сеансов пользователей по различным условиям, ограничение общего числа возможных сеансов для работы с информационной базой, резервирование возможности работы с информационной базой определенных польззователей, запрет запуска нескольких сеансов для пользователя, журнализация событий начала (возобновления) и завершения (гибернации) сеансов, ведение списка активных сеансов для информационных баз кластера серверов

3600 руб.

06.02.2017    31113    31    18    

47
Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. konfed 16.06.10 11:33 Сейчас в теме
Тема, хоть и старая, но, наверное останеться актуальной до тех пор, пока будут существовать файлы на дисках, а появление решений такой задачи говорит о том, что идеального варианта не существует (наверное пока не существует - кто знает таковой - отзовитесь).
Статья интересная - автор, если сможешь - продолжай, особенно интересно решение 4 пункта функциональных возможностей (и есть ли у автора среди получателей DVD диск?), ну и среди пунктов возможностей может включить специфический для 1С - как быть в случае, если из базы кто-то не вышел.
4. Mogidin 130 16.06.10 12:42 Сейчас в теме
(1) "как быть в случае, если из базы кто-то не вышел."
в начале скрипта послать сообщение net send'ом (если служба сообщений не отключена), предупредить юзверей. после паузы тем же net'ом (только уже не send, а другое, не помню как звать) обрубить все сетевые соединения (если это не критично), и браться за дело.
2. ValeriVP 1303 16.06.10 12:21 Сейчас в теме
ок. постараюсь сегодня дописать.

архивация на DVD не предусматривалась и не делалась.
У меня задача была - архивировать на внешний HDD когда нужный HDD подключался и на сервер время от времени.

специфичных задач архивации (1С, SQL) я тоже не делал - руки не дошли.
3. Mogidin 130 16.06.10 12:37 Сейчас в теме
жду продолжения, или хотя бы файликов, на которые можно посмотреть...
5. ValeriVP 1303 16.06.10 12:59 Сейчас в теме
(3) выложил файлы. так же в архиве заготовки для архивации SQL баз, которая заглохла.
6. ValeriVP 1303 22.06.10 09:51 Сейчас в теме
а дописать все некогда :(
7. пользователь 13.11.11 19:41
Сообщение было скрыто модератором.
...
8. ValeriVP 1303 13.11.11 20:09 Сейчас в теме
а что именно интересно? о чем надо продолжение?
как это работает или надо новый функционал?
9. kr_andr 23.11.11 10:59 Сейчас в теме
10. ValeriVP 1303 23.11.11 11:37 Сейчас в теме
11. пользователь 23.11.11 11:39
Сообщение было скрыто модератором.
...
12. пользователь 23.11.11 11:39
Сообщение было скрыто модератором.
...
13. пользователь 23.11.11 11:40
Сообщение было скрыто модератором.
...
14. пользователь 23.11.11 11:42
Сообщение было скрыто модератором.
...
15. пользователь 23.11.11 11:44
Сообщение было скрыто модератором.
...
16. пользователь 23.11.11 11:45
Сообщение было скрыто модератором.
...
Оставьте свое сообщение