Извлечение данных из Источников: Clickhouse, MS SQL, Postgresql, Kafka

Создайте проект загрузки

Выберите вариант загрузки: «Загружаем объекты»

Задайте наименование проекта и выберите подключение к Источнику данных:

Выберите таблицу (-ы) источники данных и объект - приёмник данных.

Система предложит сопоставить поля источника и приёмника по алиасам полей.

Для того, чтобы понять, какие поля могут нам пригодиться для заполнения объекта в области источника показаны данные первой строки таблицы. Поля которые нам не будут полезны, можно исключить из загрузки на данном этапе сняв галочку.

После предложенного автоматизированного сопоставления полей в области приёмника отображается путь к источнику для каждого сопоставленного поля. Так же отображается тип данных 1С для каждого поля, подсказывающий нам, какого типа данные ожидаются в данном поле.

Преобразование данных перед загрузкой

Трансформируйте данные в Инжекторе для приведения к структуре объекта 1С

Если это необходимо, вы можете выполнить трансформацию данных перед загрузкой

С помощью конструктора запросов 1с. Здесь вы можете объединить несколько таблиц Источника (предварительно выбрав их на соответствующем этапе),

Настройте параметр запроса для инкрементальной загрузки.

Конструктор преобразовывает low-code настройки в язык запросов 1С и SQL.

Эта настройка позволяет догружать данные, появившиеся в таблице – источнике после последней загрузки данных в приёмник. Так обеспечивается инкрементальность.

Задайте групповую обработку для полей

Это позволит настроить сценарии загрузки для большинства полей.

Данная настройка говорит о том, что мы будем и загружать новые объекты и обновлять существующие. Можно разделить эти сценарии.

Обновление объекта будет выполниться только по тем поля, что не заполнены. Возможен сценарий, когда объект будет перезаписываться по всем полям, которые будут сопоставлены в мастере.

Настройте сценарий загрузки

Сопоставьте поля

Для этого убедитесь, что каждому полю приёмника сопоставлено верное поле источника – набора данных, полученного по результатам трансформации данных. Отредактируйте сопоставление в случае необходимости.

  Колонка допустимые типы подскажет какой тип данных 1С ожидает данное поле, а значение в данных 1С строки поможет понять, можем ли мы в это поле подставить именно то, что ожидает от нас 1С.

Настройка режима загрузки.

Будем искать объект в 1С по данным Источника.

Будем устанавливать значение по умолчанию или вычислять значение поля.

Задайте условие поиска объекта

Объект может быть найден в 1С по уникальному идентификатору (тип УИД). В этом случае по значению поля Источника, в 1С будет произведен поиск объекта с соответствующим идентификатором в том типе данных, которое ожидает данное поле (например, в документах Чеки).

В случае если уникального идентификатора для поиска нет, можно попытаться найти объект по другим полям объекта: наименование, номер, дата, код, артикул и другие или их комбинации.

Настройте обработку полей

В случае, если объект не будет найден, то он может быть создан или может быть запущен проект по загрузке.

Каскадная загрузка объектов

По мере заполнения объекта полями будут встречаться поля ссылочных типов.

Если вы располагаете данными для создания подчиненного объекта, вы можете настроить его создание по вышеописанному сценарию.

Настройте заполнение табличных частей документа

По принципу каскадной загрузки

Таким образом, после отработки сценария загрузки вы создадите не только тот объект, который планировали загрузить, но и все необходимые для его создания объекты, обязательные поля для заполнения, справочники, табличные части.

Для упрощения настройки можно интегрировать проекты загрузки друг в друга.

Протестируйте результат загрузки

Настройте сценарии обработки данных и объектов после загрузки

Установите расписание запуска сценария загрузки

Теперь все новые или обновленные в Источнике записи будут обновлять существующие или создавать новые объекты в 1С без вашего участия!

Дополнительные возможности

Вызовите программно проект загрузки данных

Вызываем функцию Инжектор_МодульЗагрузки.ЗагрузитьПроект, в параметрах передаем ссылку на проект и Адрес временного результата. В ответ приходит ТаблицаЗначений.

При необходимости вы можете вызвать проект загрузки программно и перехватить таблицу значений, возвращаемую Инжектором, не загружая данные в 1С.

Это позволит передать данные в нужные вам модули и использовать Инжектор 1С как коннектор для получения данных в 1С снаружи для своих программных модулей.

Сформируйте отчет для сравнения данных 1С и Источника

Сформируйте сводный отчет на данных Источника и данных 1С. Укажите ключи соединения и произведите сверку данных внешней информационной системы и 1С

Это позволяет, оставаясь в режиме предприятия, иметь возможность для не сошедшихся данных сразу произвести корректировкуна стороне 1С

В завершении, хочется отметить, что Инжектор сам по себе только загружает данные. Для выгрузки данных из 1С вы можете использовать Экстрактор 1С, вместе они составляют интеграционное решение для совершенно любых комбинаций 1С