Организация простейшего внешнего хранилища прикрепленных к документу (элементу справочника, ...) файлов на web-сервере, или не засоряем базу 1С

03.06.15

База данных - Чистка данных

Если Вы ощущаете когнитивный диссонанс, когда сталкиваетесь с многогигабайтной базой данных, забитой разношёрстными файлами хранилища дополнительной информации, и Вас, как и меня, не устраивает сама идея хранения бинарных файлов в базе данных, то эта статья, возможно, окажется полезной.

Для решения проблемы с неприличным объёмом базы данных 1C из-за хранения в ней приложенных файлов в справочнике типа "ХранилищеДополнительнойИнформации" и всех вытекающих из этого неудобств, таких как огромного размера выгрузки ИБ и файла бэкапов, было написано следующее. (Данное решение не претендует на замену встроенных механизмов хранения файлов в конфигурациях типа "документооборот" без соответствующей доработки, однако, ничто не мешает доработать описанный принцип под конкретные нужды.)

Принцип довольно прост:

  • Добавляем на форму нужного объекта HTML-поле, в котором будет отображаться web-интерфейс файлового менеджера (по-моему, ограничений на платформу здесь нет, HTML на форме можно было и в 7.7 отобразить, поправьте, если не прав),
  • Берём любой понравившийся web- файловый менеджер, и ставим его на web-сервер (в данной статье как пример взят и изменен под свои нужды дистрибутив простого php файлового менеджера Sabre (изменённая версия на github) как web сервер использовался WAMP с основной кодировкой utf-8. Также все отлчино работает на LAMP. Версия php - предпочитаю свежую, но, возможно, Sabre будет работать и на 5.3 и ниже.)
  • При открытии формы объекта, отображаем на нашей форме файл-менеджер, вызванный с определенными GET-параметрами (например, относительный путь к папке, формируемый из имени и номера объекта). Также, если нужно, можно сделать разделение по ролям, кому можно удалять\редактировать\просматривать, кому - нет и вместо передачи простых GET-запросов хоть XML или JSON через POST и авторизацию прикрутить, как душе угодно)
  • В итоге пользователь может скачивать и прикреплять файлы, подробности процесса остаются для него не очевидными, а сами файлы лежат себе на том же (или другом) сервере в определенном месте, удобно распределенные по папкам - напр. /Документ/325/файл_документа_325.pdf и не захламляют базу.

Реализация:

Рассмотрим довольно простую и быструю реализацию задумки на примере WAMP:

устанавливаем последнюю версию web-сервера (допустим, в папку d:\wamp) Чтобы можно было загружать файлы до 100 мегабайт изменяем php.ini в d:\wamp\bin\apache\apache_ВЕРСИЯ_\bin\

...
post_max_size = 100M
...
upload_max_filesize = 100M
...

Чтобы сервис стартовал автоматически, запускаем services.msc, ищем wampapache64 (если x64) и ставим тип запуска - "Автоматически"

Важно! Чтобы wampmanager.exe при выходе не завершал заодно и работу web-сервера, что, сами понимаете чем чревато, изменяем wampmanager.tpl и wampmanager.ini предварительно завершив wampmanager.exe. Ищем блок [myexit] и комментируем нежелательные действия: wampmanager.ini:

[myexit]
;WAMPMYEXITSTART
;Action: service; Service: wampapache64; ServiceAction: stop; Flags: ignoreerrors
;Action: service; Service: wampmysqld64; ServiceAction: stop; Flags: ignoreerrors
Action:  exit
;WAMPMYEXITEND

wampmanager.tpl:

[myexit]
;WAMPMYEXITSTART
;Action: service; Service: ${c_apacheService}; ServiceAction: stop; Flags: ignoreerrors
;Action: service; Service: ${c_mysqlService}; ServiceAction: stop; Flags: ignoreerrors
Action:  exit
;WAMPMYEXITEND

Далее распаковываем в папку d:\wamp\www\ изменённую вверсия Sabre с github, переходим в браузере на http://localhost/Sabre1c-master/install/ и настраиваем как пожелаем. Создаём папку для загрузок, какую указали (по-умолчанию upload) в d:\wamp\www\Sabre1c-master\ переходим на http://localhost/Sabre1c-master/?CWD=\Тест\123 и загружаем любой файл, проверяем результат в папке d:\wamp\www\Sabre1c-master\upload\Тест\123\ появился загруженный файл.

Работу файл-менеджера проверял как на windows, так и на linux web-серверах, проблем с кодировкой имени файла при загрузке\скачивании удалось избежать. Пробелы в имени файла при загрузке заменяются символами нижнего подчёркивания. Если есть необходимость запретить загружать файлы с расширением, не включенным в список разрешенных, можно раскоментировать и попровить несколько строк в файле core\upload.php:

	$ext_allowed = array('txt', 'jpg', 'pdf', 'zip', 'png');
		if(!in_array(strtolower($extension), $ext_allowed)){
		header('location: ../?action=upload&file=');
		exit;
	}

Теперь идём в 1с и размещаем на нужном документе или справочнике ПолеHTMLДокумента с аналогичным именем и добавляем в функцию модуля ПриОткрытии() код:

// пример для обычных форм 8.X, Документ
Процедура ПриОткрытии(Отказ) {
	Если ДокументОбъект.Номер Тогда
		ЭлементыФормы.ПолеHTMLДокумента.Видимость=Истина;
		// если у вас числовая нумерация, Адрес="http://localhost/Sabre1c-master/?CWD="+"/"+ДокументОбъект.Метаданные().Имя+"/"+Формат(ДокументОбъект.Номер,"ЧГ=0");
		Адрес="http://localhost/Sabre1c-master/?CWD="+"/"+ДокументОбъект.Метаданные().Имя+"/"+ДокументОбъект.Номер;
		ЭлементыФормы.ПолеHTMLДокумента.Документ.URL = Адрес; 
	КонецЕсли;
КонецПроцедуры

// пример для управляемых форм 8.X, Справочник
&НаКлиенте
Процедура ПриОткрытии(Отказ)
	Если Объект.Код Тогда
		Элементы.ПолеHTMLДокумента.Видимость=Истина;
		// если у вас числовая нумерация, Адрес="localhost/Sabre1c-master/?CWD="+"/contacts/"+Формат(Объект.Код,"ЧГ=0");
		Адрес="localhost/Sabre1c-master/?CWD="+"/contacts/"+Объект.Код;
		ПолеHTMLДокумента=Адрес;
	КонецЕсли;
КонецПроцедуры

Готово.

Также можно написать простейшую обработку, чтобы выгрузить все файлы из хранилища в базе в папку на диске.

Процедура ЭкспортФайловХранилищаНажатие(Элемент)
	Путь="d:\wamp\www\Sabre1c-master\upload\"
	ИмяХранилищаДопИнф="ХранилищеДополнительнойИнформации";
	Выборка = Справочники[ИмяХранилищаДопИнф].Выбрать();
	Пока выборка.Следующий() = 1 Цикл
		Попытка
			// если у вас числовая нумерация, ID=Формат(выборка.Объект.Код,"ЧГ=0");
			ID=выборка.Объект.Код;
		Исключение
			Попытка
				// если у вас числовая нумерация, ID=Формат(выборка.Объект.Номер,"ЧГ=0");
				ID=выборка.Объект.Номер;
			Исключение
				ID="null";
			КонецПопытки;
		КонецПопытки;
		
		РезультПуть=Путь + выборка.Объект.Метаданные().Имя + "\" + ID + "\";
		СоздатьКаталог(РезультПуть);
		Если выборка.ИмяФайла <>"" Тогда
			Результ = РезультПуть + СтрЗаменить(выборка.ИмяФайла, "/", " ");
			выборка.Хранилище.Получить().Записать(Результ);
			Сообщить("Выгружен "+Результ);
		КонецЕсли;
	КонецЦикла;
КонецПроцедуры

Всё нижеописанное Вы можете повторить для себя, но исключительно на свой страх и риск. Автор не несет ответственности за возникновение каких-либо проблем.

И удалить выгруженные файлы из БД.

Процедура УдалениеФайловХранилищаНажатие(Элемент)
	Выборка = Справочники.ХранилищеДополнительнойИнформации.Выбрать();
	Пока Выборка.Следующий() Цикл
		Если Выборка.Объект.Метаданные().Имя = "ЗаказПокупателя" Тогда
			ТекЭлемент = Выборка.ПолучитьОбъект();
			Попытка 
				ТекЭлемент.Удалить();
			Исключение 
				Сообщить("Не удалось удалить элемент!" + ТекЭлемент.Код);
			КонецПопытки;
		КонецЕсли;
	КонецЦикла;
КонецПроцедуры

Теперь, чтобы фактический размер БД уменьшился после удаления из нее хлама, осталось только выгрузить и загрузить ИБ.

php web хранилище файлов хранилище дополнительной информации внешнее

См. также

Удаление данных с отбором и построением дерева ссылок в базах 1С 8.1-8.3 УТ 10.3./11, БП 2/3, ЗУП 2.5/3, КА 1.1/2, УНФ 1.6/3.0

Чистка данных Платформа 1С v8.3 Управляемые формы Конфигурации 1cv8 1С:Управление торговлей 10 1С:Управление торговлей 11 Платные (руб)

Данные обработки помогут Вам легко и, главное быстро, выполнить удаление любых данных в Ваших базах 1С на платформах 8.1-8.3. Обработки помогут легко просмотреть связи ссылок в виде дерева, выбрать что удалять, а что нет, используя любые отборы. Это позволит уменьшить объем лишней и не нужной информации в справочниках и документах, планах видов характеристик и др. объектах и облегчит работу с данными пользователям и Вам. Понятное расположение команд и настроек, в сочетании с описанием и справкой, еще упростят процесс. (Обновление от 04.10.2023, версия 4.2)

9600 руб.

22.02.2013    135919    248    144    

418

Универсальное выборочное удаление данных из базы 1С (любые конфигурации на упр.формах: БП 3.0, УТ 11, КА 2, ERP, УНФ, ЗУП 3, Розница и т.д.)

Чистка данных Платформа 1С v8.3 Управляемые формы 1С:Розница 2 1С:Управление нашей фирмой 1.6 1С:ERP Управление предприятием 2 1С:Зарплата и кадры государственного учреждения 3 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х 1С:Зарплата и Управление Персоналом 3.x Платные (руб)

Обработка позволяет удобно выборочно удалить данные из базы 1С. Это могут быть как неиспользуемые элементы справочников, так и неактуальные организации. При этом есть возможность провести анализ пересечений документов с другими организациями и таким образом уберечься от того, что при удалении обороты по другой организации изменятся.

3350 руб.

28.11.2019    24312    46    16    

58

SALE! 10%

Выборочное удаление организаций из баз (управляемые формы), с удалением всех ссылающихся на эти организации данных

Чистка данных Платформа 1С v8.3 Управляемые формы Конфигурации 1cv8 Платные (руб)

Позволяет удалить организации из любых программ на управляемых формах (БП 3.0, УТ 11, КА 2, ERP 2, ЗУП 3.0, УНФ, Розница 2.0 и пр.). Главное требование - программа должна содержать справочник "Организации". Реализован самый быстрый алгоритм непосредственного удаления объектов. Работает даже на базах большого размера. Для ускорения работы алгоритма не запускается проверка контроля ссылочной целостности. Проверку учета можно запустить отдельно с помощью дополнительной обработки. Необходимо перед удалением самостоятельно проверить базу на наличие перекрестных ссылок разных организаций в одном документе. Эту дополнительную обработку проверки перекрестных ссылок по запросу предоставляем бесплатно нашим покупателям.

3980 3582 руб.

16.03.2015    113707    181    75    

217

Замена Номенклатуры+Характеристики

Чистка данных Логистика, склад и ТМЦ Платформа 1С v8.3 План видов характеристик 1С:Комплексная автоматизация 1.х 1С:Управление производственным предприятием 1С:ERP Управление предприятием 2 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х Платные (руб)

Настраиваемая обработка, позволяющая заменить пару: Номенклатура+Характеристика в документах, их движениях и независимых регистрах сведений. Без перепроведения. Поможет, если вы по каким-то причинам решили отказаться от характеристик

3600 руб.

04.08.2015    41111    88    70    

49

Удаление битых ссылок 1С в базе без монопольного режима

Чистка данных Платформа 1С v8.3 Конфигурации 1cv8 Платные (руб)

Если в вашей информационной базе крутится очень много данных, или база должна быть доступна 24/7 (как в моем случае), или же вы боитесь запускать тестирование и исправление, НО существует потребность удалить битые ссылки, тогда эта обработка сможет Вам помочь. Обработка выявляет битые ссылки как в самих объектах метаданных, так и в их табличных частях(!), а так же может их удалить.

2400 руб.

23.08.2021    9260    15    3    

20

Очистка дублей в синхронизированных базах (УТ, БП, РТ, УНФ)

Чистка данных Управляемые формы Конфигурации 1cv8 Россия Платные (руб)

Решение по удалению дублей позволяет определить связанные элементы в двух синхронизированных базах в качестве оригиналов и избежать необходимости ручного сравнения объектов в базах перед синхронизацией.

3960 руб.

27.06.2018    18807    10    3    

15

Очистка регистров сведений от записей по помеченным на удаление элементам

Чистка данных Платформа 1С v8.3 Конфигурации 1cv8 Платные (руб)

в современных конфигурациях стало очень много регистров сведений, хранящих вспомогательную и периодическую информацию и администраторы информационных систем стали сталкиваться с проблемой удаления помеченных на удаление объектов, так как ссылки на них хранятся в многочисленных регистрах сведений. Помочь почистить базу от ненужных записей предназначенная данная внешняя обработка на управляемой форме, которая ищет записи во всех регистрах сведений по помеченным на удаление объектах и очищает по ним записи их после использования данной обработки дальше можно смело пользоваться типовой обработкой удаление помеченных на удаление и проблем с удалением не возникнет! Удачи всем!

1200 руб.

21.01.2022    7125    5    6    

9

Очистка кэша 1С. Исполнитель

Чистка данных Инструментарий разработчика Платформа 1С v8.3 Абонемент ($m)

Очередная вариативная очистка кэша 1С с помощью Исполнителя 3.0.2.2.

1 стартмани

25.10.2023    4531    4    SerVer1C    25    

22
Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. Prometeus2011 210 03.06.15 17:03 Сейчас в теме
Плюс за оригинальность и труды, но есть 2 замечания:
1. Трудоемко. Требует использование стороннего ПО. Проще использовать зашитую в платформу 8.х возможность клиент-серверного обмена.
2. Замена принципа работы интерфейса (в частности порядка прикрепления файлов к объектам) всегда переносится пользователями болезненно, особенно в организации, где пользюков, человек эдак 150 в базе сидит. По-этому, лучше внешне не менять ничего, а лишь при вызове штатных обработчиков перехватывать их исполнения и класть файлу не в ХЗ, а передавать на сервер. Но да это не столь важно.

В общем, как вариант... Сам озабочен этим, ибо графики много, а хранить ее в базе - не кошерно.
2. Dimon2005 6 04.06.15 11:28 Сейчас в теме
Надо будет попробовать. Спасибо!!
3. zqzq 23 05.06.15 09:41 Сейчас в теме
Если у документа поменяют номер или у справочника код - все связанные файлы потеряются?.. Тогда уж к ссылке нужно привязываться.

В БСП вроде что-то было для хранения файлов вне базы через веб-сервер.
4. dgolovanov 05.06.15 16:32 Сейчас в теме
Охренеть, простейший. Внедрите БСП и будет вам хранение файлов во внешних томах на дисках.
Silenser; exciter; +2 Ответить
5. iolko 318 15.06.15 07:03 Сейчас в теме
Вы ощущаете когнитивный диссонанс, когда сталкиваетесь с многогигабайтной базой данных, забитой разношёрстными файлами хранилища дополнительной информации
.

Есть такой момент, НО. В 1С (практически все типовые конфигурации) этот механизм используют (если не настраивать хранение файлов на дисках).
Здесь необходимо четкое понимание объемов хранения, и последствий, которые за собой эти хранимые объемы повлекут.

У нас в компании уже много лет реализовано хранение прикрепленных файлов на дисках, а в базу пишется только путь до файла. При этом в данный момент объем хранимой информации, а это:
screen shot-ы экранов пользователя с ошибками в отделе тех поддержки, различные заявки и пр, довольно велик, но собственно хранится и ни как не нагружает БД. При чем можно достаточно четко разграничить права доступа к этой информации средствами АД.
Оставьте свое сообщение