Загрузка только новых объектов. Конвертация данных 3.1, формат XDTO

27.03.25

Интеграция - Перенос данных 1C

Описание и решение задачи по загрузке только новых объектов в базу, использующую обмен через Enterprise Data. В контексте решения будут рассмотрены варианты добавления глобальных обработчиков событий для правил конвертации объектов (ПКО) конвертации (Конвертация данных 3.1 формат XDTO).

Описание проблемы

При разработке обмена с использованием технологии "Конвертация данных 3.1 формат XDTO (Enterprise Data)" может возникнуть потребность на стороне "базы-приемника", в случае нахождения для загружаемого объекта соответствия, не обновлять найденный объект загружаемыми данными. То есть в кратце задача звучит как "При обмене необходимо загружать только новые объекты (для которых не найдено соответствие)".

 

Решение

 

Базовый принцип

Поставляемые настройки конвертации, позволяющие реализовать описанный нами формат обмена, отсутствуют. Поэтому будем использовать произвольный алгоритм в обработчиках событий правил конвертации объектов (Далее "ПКО").

Доступные обработчики событий для ПКО на получение данных:

Обработчик "При конвертации данных XDTO" не подходит, так как на этапе его выполнения происходит только преобразования данных из формата обмена в загружаемый объект (На основе которого далее и происходит сопоставление).

Обработчик "После загрузки всех данных" не подходит, так как на этапе его выполнения загрузка уже выполнена.

Нам необходим обработчик "Перед записью полученных данных". В нем есть два интересующих нас параметра:

  • ПолученныеДанные - Объект, полученный после выполнения обработчика "При конвертации данных XDTO".
  • ДанныеИБ - Найденный объект из базы данных, сопоставленный "полученным данным".
 
 Справка по параметрам (из конфигурации "Конвертация данных 3.1")

Для реализации нашей задачи все что нам требуется это написать в этом обработчике следующий алгоритм:

Процедура ПКО_ИмяПКО_ПередЗаписьюПолученныхДанных(ПолученныеДанные, ДанныеИБ, КонвертацияСвойств, КомпонентыОбмена)
	
	// Если нашлось соответствие (Объект не новый), то обнуляем ПолученныеДанные.
	Если ДанныеИБ <> Неопределено Тогда
		// Если ПолученныеДанные = Неопределено, то согласно документации КД 3.1
		// создание/обновление объекта ложиться на наши плечи.
		// А мы делать ничего не будем. Таким образом мы отменили загрузку.
		ПолученныеДанные = Неопределено;
	КонецЕсли;
	
КонецПроцедуры

Теперь, что бы применить наше правило ко всем объектам, то же самое нужно прописать в остальных ПКО. В базе "Управление торговлей 11.5" в типовых правилах конвертации на базе формата "Enterprise Data 1.19" было насчитано 208 ПКО на получение. Думаю понятно, что вариант пройтись по всем ПКО и прописать в обработчике наш алгоритм - нам не подходит. Нам нужен глобальный обработчик для всех ПКО.

 

Создание глобальных обработчиков событий ПКО

Для начала определим в модуле МенеджерОбменаЧерезУниверсальныйФормат (Далее "менеджер обмена") экспортную функцию со списком глобальных обработчиков. 

Функция обмен_ГлобальныеОбработчикиПередЗаписьюПолученныхДанных() Экспорт
	
	ГлобальныеОбработчики = Новый Массив;
	ГлобальныеОбработчики.Добавить("обмен_ПередЗаписьюПолученныхДанных_ЗаписьТолькоНовых");
	Возврат ГлобальныеОбработчики;
	
КонецФункции

В нашем примере будет следующая архитектура:

В основной конфигурации есть типовой менеджер обмена, который мы будем расширять через расширение. Поэтому все дальнейшие примеры кода будут в расширении (префикс "обмен_").

 

Далее находим место вызова обработчика "Перед записью полученных данных". Оно находиться в общем модуле ОбменДаннымиXDTOСервер в процедуре ПередЗаписьюПолученныхДанных. И расширяем алгоритм, вызывая глобальные обработчики перед вызовом локального (определенного для текущего ПКО) обработчика.

&ИзменениеИКонтроль("ПередЗаписьюПолученныхДанных")
Процедура обмен_ПередЗаписьюПолученныхДанных(ПолученныеДанные, ДанныеИБ, КомпонентыОбмена, ИмяОбработчика, КонвертацияСвойств)

	...

#Вставка
		
	Попытка
		// Функции может не быть если это типовой мендежер обмена, а мы работаем только со своим
		ГлобальныеОбработчики = МенеджерОбмена.обмен_ГлобальныеОбработчикиПередЗаписьюПолученныхДанных();
	Исключение
		ГлобальныеОбработчики = Новый Массив;
	КонецПопытки;
	
	Для каждого ИмяГлобальногоОбработчика Из ГлобальныеОбработчики Цикл
		ВремяНачала = ОбменДаннымиОценкаПроизводительности.НачатьЗамер();
		
		МенеджерОбмена.ВыполнитьПроцедуруМодуляМенеджера(ИмяГлобальногоОбработчика, СтруктураПараметров);
		
		ОбменДаннымиОценкаПроизводительности.ЗавершитьЗамер(
		ВремяНачала, ИмяГлобальногоОбработчика, ДанныеИБ, КомпонентыОбмена,
		ОбменДаннымиОценкаПроизводительности.ТипСобытияПравило());
	КонецЦикла;
#КонецВставки
	
	ВремяНачала = ОбменДаннымиОценкаПроизводительности.НачатьЗамер();

	МенеджерОбмена.ВыполнитьПроцедуруМодуляМенеджера(ИмяОбработчика, СтруктураПараметров);

	ОбменДаннымиОценкаПроизводительности.ЗавершитьЗамер(
	ВремяНачала, ИмяОбработчика, ДанныеИБ, КомпонентыОбмена,
	ОбменДаннымиОценкаПроизводительности.ТипСобытияПравило());
		
	...

КонецПроцедуры

Возвращаемся в менеджер обмена и не забываем расширить метод ВыполнитьПроцедуруМодуляМенеджера 

&Вместо("ВыполнитьПроцедуруМодуляМенеджера")
Процедура обмен_ВыполнитьПроцедуруМодуляМенеджера(ИмяПроцедуры, Параметры)
	ПродолжитьВызов(ИмяПроцедуры, Параметры);
	
	Если ИмяПроцедуры = "обмен_ПередЗаписьюПолученныхДанных_ЗаписьТолькоНовых" Тогда 
		обмен_ПередЗаписьюПолученныхДанных_ЗаписьТолькоНовых(
			Параметры.ПолученныеДанные, Параметры.ДанныеИБ, Параметры.КонвертацияСвойств, Параметры.КомпонентыОбмена);
	КонецЕсли;
		
КонецПроцедуры

И определим собственно сам метод глобального обработчика

Процедура обмен_ПередЗаписьюПолученныхДанных_ЗаписьТолькоНовых(ПолученныеДанные, ДанныеИБ, КонвертацияСвойств, КомпонентыОбмена)
	
	Если ДанныеИБ <> Неопределено Тогда
		ПолученныеДанные = Неопределено;
	КонецЕсли;
	
КонецПроцедуры

Итоговый код расширения:

 
 МенеджерОбменаЧерезУниверсальныйФормат
 
 ОбменДаннымиXDTOСервер

 

Итоги

Мы решили поставленную задачу, и в ходе её решения научились создавать глобальные обработчики "Перед записью полученных данных" для ПКО. Но по тому же принципу можно создать общие (глобальные) обработчики для любых других событий как ПКО так и ПОД (Правила обработки данных).

Нужно понимать что применив данный метод к модулю менеджера обмена, его уже нельзя будет загрузить в КД 3.1, и выгрузить в том же виде. КД 3.1 не знает о нашей доработке и при выгрузке модуля менеджера обмена просто затрет созданные нами процедуры связанные с глобальными обработчиками событий. Т.е. это решение подходит для случаев когда мы программно (не прибегая к использованию КД 3.1) дорабатываем типовые правила.

 

Используемые при написании статьи версии конфигураций и платформы:

  • Конвертация данных, редакция 3.1 (3.1.5.35)
  • Управление торговлей, редакция 11 (11.5.21.106)
  • СтандартныеПодсистемы (БСП) 3.1.10.467
  • 1С:Предприятие 8.3 (8.3.25.1546)

См. также

SALE! 10%

Перенос данных 1C Файловый обмен (TXT, XML, DBF), FTP Системный администратор Программист Платформа 1С v8.3 1С:Розница 2 1С:Управление нашей фирмой 1.6 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х 1С:Управление нашей фирмой 3.0 1С:Розница 3.0 Россия Платные (руб)

Правила в универсальном формате обмена для ERP 2.5, КА 2.5, УТ 11.5, БП 3.0, Розница, УНФ, для последних версий конфигураций. Ссылки на другие конфигурации в описании публикации. Правила совместимы со всеми другими версиями конфигураций новыми и старыми, поддерживающими обмен и синхронизацию в формате EnterpriseData. Не требуется синхронного обновления правил после обновления другой конфигурации, участвующей в обмене. Типовой обмен через планы обмена кнопкой Синхронизация вручную или автоматически по расписанию, или вручную обработкой.

27660 руб.

12.06.2017    145743    849    299    

439

Перенос данных 1C Файловый обмен (TXT, XML, DBF), FTP Системный администратор Программист Платформа 1С v8.3 Оперативный учет 1С:Управление торговлей 10 Россия Управленческий учет Платные (руб)

Перенос данных из 1С:Управление торговлей 10.3 в 1С:Управление торговлей 11.5 с помощью правил обмена. Переносятся остатки, документы (обороты за период), справочная информация. Правила проверены на конфигурациях УТ 10.3 (10.3.88.x) и УТ 11.5 (11.5.21.x).

35000 руб.

23.07.2020    56217    257    73    

212

SALE! 10%

Перенос данных 1C Программист Платформа 1С v8.3 1С:Управление производственным предприятием 1С:ERP Управление предприятием 2 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х Россия Платные (руб)

Перенос документов, начальных остатков и справочной информации из УПП 1.3 в ERP 2 | из УПП 1.3 в УТ 11 | из УПП в КА 2 | Правила конвертации (КД 2) | Более 360 предприятий выполнили переход с использованием этого продукта! | Сэкономьте время - используйте готовое решение для перехода! | Позволяет перенести из УПП 1.3 в ERP / УТ 11 / КА 2 всю возможную информацию | В переносе есть фильтр по организации и множество других опциональных параметров выгрузки | Есть несколько алгоритмов выгрузки остатков на выбор

55778 50200 руб.

04.08.2015    170741    360    282    

391

SALE! 10%

Перенос данных 1C Файловый обмен (TXT, XML, DBF), FTP Программист Платформа 1С v8.3 1С:ERP Управление предприятием 2 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х Россия Платные (руб)

Перенос данных из ERP в БП 3 | из КА 2 в БП 3 | из УТ 11 в БП 3 | из ЕРП в БП 3 | Сэкономьте время - используйте готовое решение для перехода! | Перенос разработан в формате КД 2 (правила конвертации данных) | Переносятся все возможные виды документов, начальных остатков и нормативно-справочная информация| Можно опционально выгружать каждую пару "номенклатура+характеристика" как отдельную номенклатуру | Есть выгрузка настроек счетов учета и зарплатных данных из ERP / КА 2 | Можно проверить на вашем сервере перед покупкой

55778 50200 руб.

15.04.2019    74289    199    155    

137

SALE! 10%

Перенос данных 1C Файловый обмен (TXT, XML, DBF), FTP Программист Платформа 1С v8.3 1С:ERP Управление предприятием 2 1С:Комплексная автоматизация 2.х 1С:Зарплата и Управление Персоналом 3.x Россия Бухгалтерский учет Управленческий учет Платные (руб)

Перенос данных из ERP в ЗУП 3 | из КА 2 в ЗУП | Готовые правила конвертации данных (КД 2) для переноса остатков, документов с движениями и справочной информации 3 | Есть перенос начальной задолженности по зарплате и начальной штатной расстановки на выбранную дату | Обороты за прошлые годы (данные для расчета среднего) переносятся свернуто в документ "Перенос данных" | Есть фильтр по организациям | Документы за текущий период переносятся сразу с движениями, поэтому не потребуется делать перерасчеты | Перенос можно проверить перед покупкой, обращайтесь!

53111 47800 руб.

03.12.2020    38361    108    70    

102

Перенос данных 1C Файловый обмен (TXT, XML, DBF), FTP Системный администратор Программист Платформа 1С v8.3 1С:Управление производственным предприятием 1С:Бухгалтерия 3.0 Россия Бухгалтерский учет Управленческий учет Платные (руб)

Перенос данных из 1С:Управление производственным предприятием 1.3 в 1С:Бухгалтерия предприятия 3.0 с помощью правил обмена. Переносятся остатки, документы (обороты за период), справочная информация. Правила проверены на конфигурациях УПП 1.3 (1.3.244.x) и БП 3.0 (3.0.172.x). Правила подходят для версии ПРОФ и КОРП.

35000 руб.

15.12.2021    26136    187    56    

143

Перенос данных 1C Файловый обмен (TXT, XML, DBF), FTP Системный администратор Программист Платформа 1С v8.3 Платформа 1C v8.2 1С:Комплексная автоматизация 1.х 1С:Управление торговлей 10 1С:Управление производственным предприятием Россия Платные (руб)

Регулярный обмен, выгрузка, перенос из КА 1.1, УПП 1.3, УТ 10.3 для обмена с любыми конфигурациями, поддерживающими обмен в формате EnterpriseData (КД3) - БП 3.0, ERP, КА 2, УТ 11, Розница 2, УНФ 1.6 и другими. Правила для старых и доработанных конфигураций не требуют синхронного обновления и совместимы с новыми и будущими конфигурациями. Обмен по расписанию, через папку, FTP, почту.

16260 руб.

18.02.2016    189195    616    534    

537

Перенос данных 1C Файловый обмен (TXT, XML, DBF), FTP Программист Платформа 1С v8.3 1С:Управление производственным предприятием 1С:ERP Управление предприятием 2 Бухгалтерский учет Управленческий учет Платные (руб)

Перенос данных из 1С:Управление производственным предприятием 1.3 в 1С:ERP Управление предприятием 2.5 и 1С:Комплексную автоматизацию 2.5 с помощью правил обмена. Переносятся остатки, документы (обороты за период), справочная информация. Правила проверены на конфигурациях УПП 1.3 (1.3.244.x), ERP 2.5 (2.5.21.x), КА 2.5 (2.5.21.x).

35000 руб.

24.06.2020    64927    81    28    

94
Оставьте свое сообщение