Способы оптимизации переносов данных

Публикация № 839146 02.08.18

Интеграция и обмен данными - Обмен между базами 1C

Хочу рассказать вам про способы оптимизации разработки правил обмена в программе «Конвертация данных» второй редакции. Казалось бы, про эту программу и разработку в ней правил конвертации уже сказано все, что можно. Появились уже более современные и быстрые технологии. Почему же все еще она? Дело в том, что «Конвертация данных» второй редакции все еще актуальна для огромного круга задач. Она имеет очень широкую функциональность и позволяет реализовывать сложные алгоритмы. Годы идут, а люди продолжают ей пользоваться и у них возникает много вопросов по этой программе. Возможно, в будущем вы тоже будете заниматься такими проектами и столкнетесь с задачами, похожими на те, про которые я собираюсь рассказать. Мне хочется вам в этом помочь.

Как будет построена статья?

  • Сначала немного теории и немного советов по оптимизации правил конвертации.
  • А далее я расскажу про часто возникающие у нас в проектах проблемы и про то, как мы их решаем.

К данной статье есть приложение, где для каждого слайда приведены примеры кода, которые вы можете скопировать и применить у себя, если вам это потребуется.

Простые и эффективные методы оптимизации переносов

Давайте рассмотрим наиболее простые и эффективные методы оптимизации переносов.

  • Самый основной и актуальный из них – это отключение выгрузки объектов по ссылке. Когда вы выгружаете справочную информацию отдельно, а далее в документах не тратите время на ее выгрузку.
  • Еще один эффективный метод – это выгрузка только ссылки. Когда вы для какого-то справочника создаете два правила конвертации объекта:
    • Первое правило выгружает только ссылку (в нем выгружаются только те свойства, которые используются для поиска). Это правило используется для поиска ссылки на этот справочник во всех других правилах конвертации объектов.
    • И еще одно отдельное правило конвертации, где выгружаются все свойства данного справочника. Именно оно используется в правиле выгрузки данных.
  • Конечно же, актуально использование кэша выгрузки. Для этого достаточно в правиле конвертации просто поставить галочку «запоминать выгруженные объекты».
  • Имеет смысл создавать собственный кэш с использованием глобального параметра, куда в обработчике конвертации «Перед выгрузкой данных» помещается некая таблица значений с объектами, соответствующими определенному условию. Используя собственный кэш, вы сможете избежать множества запросов в цикле, когда необходимо дозаполнять свойства данных объектов.

Прошу вас также не забывать про использование режима отладки переноса, который есть в обработке «Универсальный обмен данными в формате XML». В приложении к данному докладу есть подробная видеоинструкция, где рассказывается:

  • Как создать такую обработку отладки;
  • Как запустить для нее замер производительности;
  • Как увидеть те участки своих алгоритмов, которые у вас неоптимальны.
  • И как их оптимизировать.

Методы поэтапного выполнения переносов данных

Для больших тяжелых баз часто возникает необходимость проводить перенос поэтапно.

  • Стандартная методика поэтапного переноса данных, рекомендованная фирмой «1С», заключается в том, что:
    • Сначала вы переносите всю справочную информацию;
    • Потом – начальные остатки;
    • И далее документы.
  • Также в силу большого размера базы или каких-то ограничений вашего «железа» часто возникает необходимость делить документы на части. Я рекомендую делить их:
    • Либо по времени (по годам, полугодиям);
    • Либо по виду документа:
      • Сначала поступления;
      • Потом все закупочные документы;
      • Потом все реализационные документы.
  • Либо вы можете реализовать поэтапное выполнение переноса данных с помощью разделения на части по группам правил выгрузки. На мой взгляд, очень показательно данная методика реализована в переносе данных из ЗУП 2.5 в ЗУП 3.0. Да, там очень замудрено реализованы алгоритмы, но если изучить обработку переноса, то вы увидите, что процесс разделен по группам правил выгрузки:
    • Сначала выгружается учетная политика;
    • Далее – справочная информация;
    • И в последнюю очередь уже кадровые и расчетные данные.

Каждая из групп правил выгрузки выгружается в отдельный файл и далее в таком же порядке загружается в ЗУП3.0.

 

Особенности переноса документов в КД 2

Как вы знаете, в типовых переносах фирмы «1С» обычно не используется перенос документов. Они переносят только справочную информацию и некие начальные остатки. Заказчиков это часто не устраивает, они просят все-таки перенести им все документы за какой-то период (например, с начала года). Иногда с этим возникают проблемы.

  • В первую очередь, проблемы возникают из-за того, что в программах 1С разных редакций реализованы разные методологии учета. И даже один и тот же документ с одним и тем же названием может отражать немного другую хозяйственную операцию. Примеры этих ситуаций я покажу на следующем слайде.
  • Также хочу напомнить, что при переносе документов в такие редакции программ, как «Комплексная автоматизация 2.0» или ERP, вам недостаточно просто провести документ. Его, как вы знаете, необходимо также отразить в регламентированном учете, а для этого у вас должны быть предварительно заполнены соответствующие настройки отражения. Про это нужно помнить. Как выполнить такое заполнение автоматически, я вам также сейчас покажу.
  • Но вот вы выполнили перенос и в базе-приемнике у вас появились разнообразные тысячи документов. Я думаю, что никого из заказчиков не устроит, если эти тысячи документов в базе-приемнике будут непроведенные, а отчеты пустые. Разумеется, документы нужно провести. Дальше я покажу, как это лучше реализовать. При этом я бы советовал заранее составить таблицу тех документов, которые необходимо провести, потому что возможно, что не все документы, которые вы перенесли, были в исходной базе проведенными. Составляете такую таблицу, сортируете и запускаете ее проведение в глобальном обработчике конвертации «После загрузки данных».

 

Проблемы совместимости программ 1С

Рассмотрим конкретные проблемы, которые возникают в задачах переноса документов из конфигураций 1С старых редакций в новые. Сразу оговорюсь, что эти примеры касаются переносов для таких конфигураций, как: УТ10->УТ11, КА1.0-> КА2.0, и УПП->ERP.

  • Например, есть серьезное отличие в методологии реализации документа «Авансовый отчет». В программах новых редакций данный документ не может оприходовать товар. Таким образом, для каждого авансового отчета, в котором оприходовался товар, вам придется создавать отдельный виртуальный документ (либо «Поступление товаров и услуг», либо «Оприходование товара»).
  • Есть серьезное отличие в документе «Корректировка долга» – приходится анализировать вид операции. Дело в том, что в программах новых редакций вообще нет документа «Корректировка долга»:
    • Есть документ «Списание задолженности»;
    • Есть документ «Взаимозачет задолженности».

А если вид операции в старой программе ни тот, ни другой, то придется создавать для оставшихся операций документ «Корректировка записей регистров».

Вот такое мое предложение и решение на этот счет.

  • Отличие в учете грузовых таможенных деклараций. В частности, отсутствует документ «Импорт ГТД».
  • Также многие зарплатные документы в новой базе реализованы отдельно по сотруднику. Если раньше документ содержал табличную часть, то сейчас придется разделять его на множество документов, для каждого сотрудника отдельно.
  • И, как вы знаете, в программах новых редакций в торговом и в производственном учете фирма «1С» отказалась от использования множества перечислений для видов операций. Сейчас у нас есть одно общее перечисление «Хозяйственные операции» и каждый документ из этого общего перечисления использует только несколько своих операций. Так вот, к сожалению, для переноса финансовых документов во многих ситуациях нет достойного соответствия и приходится переносить их либо в «Прочий приход денежных средств», либо в «Прочий расход денежных средств», что может быть не очень удобно.

 

FAQ. Выгрузка измененных объектов

Давайте перейдем к следующей части. Это – часто возникающие проблемы в задачах переносов и то, как я предлагаю их решать малыми силами.

Сначала разберем ситуацию, когда вам нужно только «довыгрузить» измененные объекты из базы.

  • Первое стандартное решение – вы создаете свой новый план обмена, создаете узел, настраиваете его. И то, что зарегистрировалось, выгружаете.
    • Либо через типовую подсистему «Обмен данными» (используете их обработки).
    • Либо можете создать регламентное задание, в котором будет запускаться обработка выгрузки для зарегистрированных объектов.
  • Если конфигурация на поддержке и нет возможности создать свой план обмена, а вам нужно реализовать обмен с некоей сторонней системой, то можно использовать такой план обмена, как «Полный». Однако при его использовании у вас будет регистрироваться много лишних объектов и вам придется каждый раз при выгрузке очищать те, которые не используются в составе вашего обмена.
  • Есть альтернативное решение: вы можете сформировать запрос к журналу регистрации, составить список тех объектов, по которым есть записи с момента последней выгрузки и выгружать уже только вот эти измененные в этот период объекты.

 

FAQ. Отказ от перезаписи при загрузке

Давайте рассмотрим ситуацию, когда вам нужно не перезаписывать существующие объекты в базе.

Допустим, вы переносили договоры контрагентов в индивидуальные соглашения с клиентами и после переноса ваши сотрудники прописали в этих индивидуальных соглашениях недостающие условия сотрудничества с клиентом. При новом переносе вся их работа будет стерта.

  • Понятно, что есть простой способ отказа от перезаписи – это установка флага «Не перезаписывать существующие объекты». В этом случае будут создаваться только новые. Это просто и понятно.
  • Но может возникнуть не такая простая ситуация. Вам нужно перегрузить весь квартал, но не затрагивать документы, по которым сотрудники ввели какие-то ручные корректировки. В этом случае я рекомендую использовать в базе-приемнике некий флаг, показывающий, что были введены корректировки. Это может быть:
    • Либо какое-то доп. свойство;
    • Либо новый реквизит;
    • Либо просто решение «в лоб»  – некое кодовое слово, которое сотрудник пишет в комментарии к документу. Например, слово «Защитить».

И при нахождении данного признака в обработчике «После загрузки» правил конвертации данного документа мы устанавливаем «Отказ». У нас перенесется весь квартал, кроме измененных и защищенных от перезаписи документов.

 

FAQ. Отражение в регламентированном учете

Уделим немного внимания настройкам отражения в регламентированном учете для таких программ, как «Комплексная автоматизация 2.0» либо ERP.

Если просто перенести документы и провести их, не заполнив предварительно регистры настроек отражения в регламентированном учете, у вас не появится никаких движений по регистру бухгалтерии.

Что можно сделать? Можно перед началом проведения документов сгенерировать эти настройки неким автоматическим способом. На слайде показан пример подобного заполнения для одного из этих регистров сведений – мы просто будем хранить всю номенклатуру на 41 счете.

Разумеется, после того, как вы сгенерируете настройки отражения таким образом, вы не получите сразу корректную ОСВ, так как она будет содержать ошибки. Но это будет первое приближение, с которым уже можно работать. И дальше уже можно внести в эти настройки изменения и, перепроводя документы, получить более корректный результат.

 

FAQ. Коды строк заказов

Также не стоит забывать про такой нюанс, что в программах новых редакций у документов реализации и поступления должно быть заполнено поле КодСтроки. Когда данные документы создаются вручную, эти поля заполняются, но при переносе вам КодСтроки взять неоткуда, потому что это поле должно браться из заказов, это не номер строки табличной части.

Как я рекомендую справляться с данной ситуацией?

  • При загрузке вы создаете таблицу ДокументыДляПроведения, куда добавляете все документы. В глобальном обработчике конвертации «ПослеЗагрузкиОбъектов» сортируете данную таблицу и приступаете к проведению документов.
  • На первой итерации проводите только заказы клиентов и заказы поставщикам. Дело в том, что значение поля КодСтроки должно браться из регистров накопления «Заказы клиентов» или «Заказы поставщикам».
  • После этого формируете запрос по движениям данных заказов, и помещаете их коды строк в индексированную таблицу.
  • И на второй итерации уже проводите документы «Реализация товаров и услуг» и «Поступление товаров и услуг», проставляя соответствующие коды строк в их табличные части.

При таком алгоритме у вас документы продаж и закупок будут проведены корректно, поле КодСтроки в их таблицах будет заполнено и это займет оптимальное количество времени.

 

FAQ. Ошибка записи из-за блокировки

Часто при проведении загрузки данных возникает проблема записи объектов из-за возникших блокировок.

  • Это может происходить, если вы загружаете в базу, где уже работают пользователи.
  • Но необязательно. Такое также может происходить и при загрузке в совершенно новую пустую базу.

Какое решение я рекомендую?

  • В глобальном обработчике конвертации «Перед загрузкой данных» рекомендую составить список включенных регламентных заданий.
  • После этого выключаем все регламентные задания.
  • И уже после того, как перенос отработал, в глобальном обработчике конвертации «После загрузки данных» включаем те регламентные задания, которые работали до того, как мы начали выполнять перенос данных.

Таким образом, минимизируется возможность появления блокировок при загрузке данных.

Конечно же, не стоит забывать про то, что если в базе работают пользователи, то блокировки все же могут возникнуть.

 

FAQ. Подмена ссылок при переносе

Иногда возникает задача подмены объектов, когда при переносе данных необходимо провести некоторое сопоставление. Например, заказчик передает вам таблицу, где указаны пары значений:

  • Идентификаторы объекта в старой базе и в новой;
  • Коды некой справочной информации в старой базе и в новой;
  • В крайнем случае, наименования объекта в старой и новой базах.

И вам необходимо выполнить их подмену.

Это реализуется при помощи глобального параметра конвертации для хранения соответствия и параметра объекта для получения значения из этого соответствия. Например, мы хотим при выгрузке договоров контрагентов подменять их статью движения денежных средств на определенную статью из некоего соответствия. Есть два возможных способа данной реализации:

  • Первый способ – это когда мы для правила конвертации «ДоговорыКонтрагентов» создаем новый параметр объекта, в котором из соответствия определяется значение статьи движения денежных средств. И в обработчике «После загрузки» ПКО «ДоговорыКонтрагентов» мы этот параметр объекта считываем, определяем и записываем:
    Объект.СтатьяДвиженияДенежныхСредств = НайденнаяСДДС
    Но все эти действия вам придется повторить для каждого правила конвертации, которое имеет ссылку на статью движения денежных средств.
  • Мне больше нравится другой, более универсальный способ, когда вы изменяете само правило конвертации «СтатьиДвиженияДенежныхСредств». То же самое, создаете в нем отдельный параметр, в котором из соответствия определяется значение, которое нужно искать в базе-приемнике (например, уникальный идентификатор). И в обработчике «После загрузки» этого же ПКО вы данный параметр считываете и подменяете уже саму переменную Объект:
    Объект = НайденнаяСДДС
    В этом случае вы сможете использовать ПКО «СтатьиДвиженияДенежныхСредств» у себя в базе везде и больше вам нигде не нужно будет подменять ссылки.
  • Если подобная задача у вас возникает при регулярном обмене, я рекомендую хранить эту таблицу (этот маппинг) не в коде, не в каком-то файле, а все-таки создать для этого отдельный регистр. Тогда пользователи, работающие только в пользовательском режиме, смогут даже что-то изменить, чтобы при следующем обмене уже заработало новое соответствие.

 

FAQ. Сверка ОСВ

Иногда после проведения переноса возникает задача сверки оборотно-сальдовой ведомости. На экране вы можете увидеть, как реализован данный алгоритм в типовом переносе начальных остатков из УПП в ERP.

  • В обработчике «Перед выгрузкой данных» в базе-источнике срабатывает запрос к регистру бухгалтерии – к остаткам и оборотам за период. Это происходит в алгоритме под названием «Проверки».
  • Результат этого запроса, содержащий счета учета и суммы, мы помещаем в глобальный параметр конвертации.
  • И уже на заключительной стадии переноса, после проведения всех документов и отражения их в регламентированном учете мы формируем аналогичный запрос в базе-приемнике.
  • В результате мы можем сравнивать те суммы, которые были по каждому счету учета в исходной базе и в базе-получателе.

Так можно реализовать проверку.

 

FAQ. Оптимизация обмена с сайтом

Иногда возникают задачи обмена с сайтом, и сейчас я хочу рассказать, как можно ускорить время, необходимое на то, чтобы информация из базы 1С оказалась у вас на сайте.

  • Сначала вы выгружаете сообщение обмена, допустим, на FTP-сервер.
  • После этого вызываете GET-запрос с параметром «Номер отправленного сообщения» уже на самом сайте.
  • И получаете ответ:
    • Если загрузка произошла успешно, то вам, допустим, приходит ответ в виде самого номера сообщения.
    • Если неуспешно – приходит текст ошибки.
  • И если все прошло хорошо, вы у себя стираете зарегистрированные изменения и увеличиваете номер отправленного сообщения на единицу.

Изменения из вашей базы будут попадать гораздо быстрее. Это – практически оперативные обмены по подписке.

Этот алгоритм, в принципе, описан на сайте «1С», но я часто замечал, что его не используют.

 

FAQ. Проверка синхронности данных

Иногда возникает задача проверки синхронности данных в вашей исходной 1С-базе и в некоей сторонней системе. Как можно реализовать данную задачу? Ведь вам важно, чтобы пользователи могли одинаково верить и 1С, и некоей другой вашей системе, чтобы данные были и актуальны, и синхронны, и вы могли бы руководству это подтвердить.

  • В сторонней системе у объекта добавляется поле, в котором хранится значение реквизита «ВерсияОбъекта» из 1С.
  • По расписанию через веб-сервис вы подключаетесь к сторонней системе (сами обмены проводятся отдельно) – и сравниваете значения поля «ВерсияОбъекта» у себя в 1С и в вашей сторонней системе.
  • Результатом такого сравнения будет список отличающихся объектов.
  • Вы можете разобраться с причинами этих отличий и исправить ситуацию, дозагрузив отличающиеся объекты.

 

FAQ. Подсистема контроля ведения учета (БСП)

Я сегодня привел несколько примеров того, как можно и нужно проверять ваши перенесенные данные. А что для этой цели нам может предложить сама фирма «1С»?

В БСП, в релизе 2.4.3 ознакомительно появилась новая подсистема, которая называется «Контроль ведения учета». Она содержит действительно очень важные проверки, которые имеет смысл запускать после проведения переноса. Здесь на экране можно видеть скриншот из демонстрационной базы БСП данного релиза.

В скором времени, когда данная версия БСП будет у нас в каждой базе, вы сможете проверять результат переноса с помощью этих инструментов. При этом, как сообщает фирма «1С», сам интерфейс проверки может быть изменен.

К сожалению, текущая версия программы ERP (релиз 2.4.1) содержит более старую версию БСП, где такой функциональности нет пока даже в ознакомительном режиме. Так что ждем конца года или даже следующего года.

 

Заключение. Выводы

Мы с вами сегодня рассмотрели некий список небольших, но часто возникающих проблем в задачах переносов. Я вам желаю, чтобы ваши проекты проходили всегда успешно. Если столкнетесь с подобными задачами, в приложении к докладу вы сможете взять примеры кода, скопировать и использовать у себя.

 

****************

Данная статья написана по итогам доклада, прочитанного на конференции INFOSTART EVENT 2017 COMMUNITY.

Больше статей можно прочитать здесь.


 

*************

Скачать файлы

Наименование Файл Версия Размер
Способы оптимизации переносов данных:

.pdf 2,12Mb
57
.pdf 2,12Mb 57 Скачать бесплатно
FAQ - приложение к докладу

.rar 17,79Mb
68
.rar 17,79Mb 68 Скачать бесплатно

Специальные предложения

Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. vasilev2015 2517 02.08.18 21:27 Сейчас в теме
Автор - прикладной математик по образованию ?
2. primat 3159 03.08.18 17:37 Сейчас в теме
3. vasilev2015 2517 03.08.18 21:06 Сейчас в теме
1. Недавно ковырялся с правилами обмена, у меня перед выгрузкой много кода типа Если Источник.Проведен = Ложь ИЛИ Источник.Подразделение = ... ИЛИ ... Тогда Отказ КонецЕсли; Думал, если отбирать данные запросом - можно убрать объектное чтение и ускорить выгрузку. Бегло пробежал Вашу статью, но ничего про способ чтения не нашел. Как считаете, это существенно ?

2. Поскольку Вы - математик, посмотрите статью про математическую индукцию ?
https://infostart.ru/public/794859 Интересно Ваше профессиональное мнение.
5. insurgut 206 06.08.18 20:14 Сейчас в теме
(3) зачастую документы выгружаются не напрямую, а в составе других документов. Возникают ситуации, когда такие документы загружать нельзя категорически по тому или иному условию. По этой причине эти условия прописывают перед выгрузкой объекта.

В целом простые проверки особо не влияют на скорость выгрузки.
4. serwk 42 06.08.18 09:11 Сейчас в теме
Добрый день! Скачал "FAQ - приложение к докладу". В папке "01 Слайд ''Простые и эффективные методы оптимизации переносов'" размещено видео без звука. Выложите, пожалуйста, видео со звуком.
6. leosoft 158 20.09.18 17:28 Сейчас в теме
Скачал материалы. FAQ в архиве - скачался нормально, а вот PDF - "битый" почему-то
7. frlancer 27.02.19 16:05 Сейчас в теме
Добрый день. Пользуюсь вашими методиками, для оптимизации своих правил. Можете объянить чем вот этот пункт:

"Еще один эффективный метод – это выгрузка только ссылки. Когда вы для какого-то справочника создаете два правила конвертации объекта:
Первое правило выгружает только ссылку (в нем выгружаются только те свойства, которые используются для поиска). Это правило используется для поиска ссылки на этот справочник во всех других правилах конвертации объектов.
И еще одно отдельное правило конвертации, где выгружаются все свойства данного справочника. Именно оно используется в правиле выгрузки данных."

Отличается от настройки в ПКО:
"При переносе объекта по ссылке НЕ создавать новый объект (переносить ссылку) "?

Судя по описанию будет сделано как раз то что вы описали в ваших рекомендациях... Нолько не надо заморачиваться с написание дополнительных правил.
Оставьте свое сообщение

См. также

SALE! 10%

Перенос данных из БП 2.0 в БП 3.0 Промо

Обмен между базами 1C Файловый обмен (TXT, XML, DBF), FTP Платформа 1С v8.3 Платформа 1С v8.3 Бухгалтерский учет Бухгалтерский учет 1С:Бухгалтерия 2.0 1С:Бухгалтерия 2.0 1С:Бухгалтерия 3.0 1С:Бухгалтерия 3.0 Россия Россия Бухгалтерский учет Бухгалтерский учет Налоговый учет Налоговый учет Платные (руб) Платные (руб)

С помощью настоящих правил обмена можно выполнить переход с программы БП 2.0 на БП 3.0, если типовой способ (переход обновлением релиза) от фирмы 1С вам по каким-то причинам не подходит. Переносится вся справочная информация, а также документы за выбранный период и начальные остатки на выбранную дату. Правила конвертации из БП 2 в БП 3 оперативно обновляем на новые релизы программ 1С, предоставляем техническую поддержку по выполнению проекта переноса данных.

40222 36200 руб.

21.05.2019    39440    46    84    

Ни в ЗУП ногой!? А мне нравится! Часть 4. Главное - правильный перенос данных!

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Сложные периодические расчеты Сложные периодические расчеты 1С:Зарплата и Управление Персоналом 2.5 1С:Зарплата и Управление Персоналом 2.5 1С:Зарплата и кадры бюджетного учреждения 1С:Зарплата и кадры бюджетного учреждения 1С:Зарплата и кадры государственного учреждения 3 1С:Зарплата и кадры государственного учреждения 3 1С:Зарплата и Управление Персоналом 3.x 1С:Зарплата и Управление Персоналом 3.x Бухгалтерский учет Бухгалтерский учет Бесплатно (free) Бесплатно (free)

Ни для кого не секрет, что ЗУП - одно из сложнейших решений в линейке 1С. Многие разработчики и аналитики не любят им заниматься. Тяжело представить, чтобы начинающий разработчик/аналитик стал по доброй воле работать в сфере управления персоналом и расчета заработной платы. В данной серии статьей будет рассказано, какие видятся плюсы в этом решении и как справляться с его минусами. Кратко расскажу, как встать на этот путь, приведу примеры выполненных задач.

30.05.2022    4475    biimmap    26    

Переход с УПП на ERP с сохранением документов. Фантастика или реальность?

Внедрение ИТ-системы Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 1С:Управление производственным предприятием 1С:Управление производственным предприятием 1С:ERP Управление предприятием 2 1С:ERP Управление предприятием 2 Бесплатно (free) Бесплатно (free)

В последнее время задача перехода с УПП становится все более актуальной. Причина – ожидаемое снятие УПП с поддержки и более продвинутые возможности последних версий конфигураций 1С. О том, какие методики переноса данных из УПП в ERP можно применить, и как в автоматическом режиме убедиться, что все перенеслось корректно, на конференции Infostart Event 2021 Moscow Premiere рассказал Сергей Сорокин.

28.04.2022    2771    primat    2    

Порядок слияния баз ЗУП 3.1, используя Конвертацию данных 2.1

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 1С:Конвертация данных 1С:Конвертация данных 1С:Зарплата и Управление Персоналом 3.x 1С:Зарплата и Управление Персоналом 3.x Россия Россия Бесплатно (free) Бесплатно (free)

Для слияния двух баз в одну, в моем случае для последующего слияния двух организаций, мною использовалась "Конвертация данных 2.1". Так как конфигурации ЗУП часто меняются, выкладывать файл с правилами конвертации почти не имеет смысла. Поэтому привожу мой алгоритм работы с "Конвертацией" и с "ЗУП". При описании я имею в виду тот факт, что вы уже работали с "конвертацией", поэтому стандартные шаги мною опущены и акцент сделан на том, на что, по моему мнению, надо обратить внимание.

14.12.2021    1669    gshirok    11    

Обмен данными. Консистентность vs Многопоточность Промо

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Конфигурации 1cv8 Конфигурации 1cv8 Бесплатно (free) Бесплатно (free)

Рассмотрим теоретические основы обмена данными. Какие бывают обмены, какие гарантии при этом даются, зачем идти на компромиссы и что при этом может пойти не так. Есть ли идеальная схема?

03.09.2019    17535    m-rv    2    

Выполнение синхронизации (обмен) по событию 1С (двусторонний обмен)

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 1С:Бухгалтерия 2.0 1С:Бухгалтерия 2.0 1С:Управление нашей фирмой 1.6 1С:Управление нашей фирмой 1.6 Бесплатно (free) Бесплатно (free)

Выполнить синхронизацию(обмен) с другой базой 1С по событию в 1С (проведение документа). Запустить синхронизацию из другой базы 1С.

16.11.2021    3902    Swamt    0    

Что делать, когда обмены между разными базами данных портят вам жизнь…

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Конфигурации 1cv8 Конфигурации 1cv8 Бесплатно (free) Бесплатно (free)

Если при обмене между базами данных наблюдаются следующие симптомы: • Процедуры обмена занимают неприемлемо много времени. • Процессы обмена периодически вылетают «по ошибке» и их приходится запускать заново. • Поиск ошибок обмена превращается в ужасающий квест. То, скорее всего вы используете конфигурацию «Конвертация данных». А если при этом вам надоело получать сообщения службы поддержки о новых ошибках и вы бережете свои нервы, то данная статья написана прямо для вас. Чуть ниже я расскажу вам, как навсегда забыть проблемы, связанные со словом "обмен".

10.09.2021    2982    director04    9    

Описание формата 1С JDTO (JSON data transfer object)

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Бесплатно (free) Бесплатно (free)

Формат 1С JDTO может быть полезен для интеграции информационных баз 1С между собой, а также 1С с внешними системами. Публикация имеет своей целью помочь в освоении этого формата для обмена данными.

16.07.2021    10221    zhichkin    32    

Выгрузка документа по условию Промо

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Бесплатно (free) Бесплатно (free)

Что делать, если документы нужно выгружать не все подряд, а по какому-то фильтру: статусу, дате, набору условий... А что если он соответствовал этим условиям, а потом перестал? А если потом опять начал? Такие ситуации заставили попотеть не одного программиста.

25.04.2019    18899    m-rv    4    

Добавление нового документа в формат обмена EnterpriseData (получение)

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Конфигурации 1cv8 Конфигурации 1cv8 Россия Россия Бесплатно (free) Бесплатно (free)

Данная статья - логическое продолжение (ссылка на первую часть ниже) доработки обмена, но уже на стороне базы приемника.

27.04.2021    2536    con-men    2    

Добавление нового документа в формат обмена EnterpriseData (отправка)

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Конфигурации 1cv8 Конфигурации 1cv8 Россия Россия Бесплатно (free) Бесплатно (free)

Для меня встала задача добавить новый документ, созданный в расширении, в формат обмена EnterpriseData, между БП - УНФ. Изначальный поиск решения не дал результата. Методом проб и ошибок у меня сформировалось свое решение, которым спешу поделиться, чтобы систематизировать информацию в текст и услышать плюсы, минусы подхода. Все доработки осуществляются в расширении, в котором и был создан новый документ.

21.04.2021    4962    con-men    7    

Повышаем эффективность разработки правил обмена Промо

Групповая разработка (Git, хранилище) Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 1С:Конвертация данных 1С:Конвертация данных Бесплатно (free) Бесплатно (free)

Как повысить скорость и качество разработки правил обмена? Как вести групповую разработку правил обмена? Как облегчить сопровождение правил обмена после передачи в эксплуатацию? Об этом и многом другом вы можете узнать из этой статьи.

25.06.2018    31878    olegtymko    49    

Правила обмена больше не нужны

Внешние источники данных Обмен между базами 1C WEB-интеграция Файловый обмен (TXT, XML, DBF), FTP Платформа 1С v8.3 Платформа 1С v8.3 Бесплатно (free) Бесплатно (free)

Есть несколько общепринятых подходов к написанию обмена между 1С-системами, каждый из которых упирается в длительное изучение технологии, мучительную отладку правил конвертации и написание большого количества сервисного кода, в котором потом тяжело разобраться. О принципах работы универсального фреймворка liteExchange, который реализует быстрые обмены между 1С и внешними системами, и берет на себя всю техническую обвязку по стандартному преобразованию данных, на INFOSTART MEETUP Saint Petersburg.Online рассказал Николай Крылов.

17.03.2021    18103    Nikola23    40    

Архитектурное решение интеграции баз 1С с использованием брокера сообщений Rabbit MQ

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Конфигурации 1cv8 Конфигурации 1cv8 Бесплатно (free) Бесплатно (free)

При решении задач интеграции баз данных можно использовать различные средства «транспорта» сообщений. Одним из таких механизмов является брокер сообщений «Rabbit MQ». Такие механизмы очередей сообщений удобно использовать для организации обмена между информационными системами с различной структурой данных, когда велик объем передаваемой информации и требуются гарантии успешной доставки сообщений, а также когда поддержание работоспособности иных способов передачи, например через файлы, становиться слишком трудоемким. Брокер сообщений Rabbit MQ широко описан в сети, но 1С пока не имеет штатных механизмов работы с ним, поэтому их приходится дорабатывать. Рассмотрим пример архитектуры 1С с его использованием.

12.02.2021    3776    Koder_Line    6    

Универсальный обмен между идентичными конфигурациями через REST интерфейс OData. Часть І: Справочники Промо

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Бесплатно (free) Бесплатно (free)

Сейчас все чаще интеграции различных конфигураций проектируются через HTTP-сервисы - они и работают быстрее, и "войти" в режим отладки гораздо проще, тем самым обойдя "черный ящик" универсального обмена через xml, например. Более года назад я начал работать в компании, в которой разработчики работали с конфигурациями 1С в режиме совместимости еще 8.2.16 (менять режим совместимости в типичных базах мы не хотели) - а как Вы наверное знаете, если интересовались HTTP-сервисами в 1С, их использование в режиме совместимости 8.3.4 и ниже недопустимо - и здесь я уже не надеялся на разработку и использование HTTP-сервисов. Но позже меня заинтересовал такой "сервис" как REST интерфейс OData, так как его можно использовать не меняя режим совместимости конфигурации - именно он и стал для меня идеальным вариантом решения "нетривиальных" задач.

11.05.2018    26847    V.Stavinsky    11    

Перенос документов 1С из одной базы в другую

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Конфигурации 1cv8 Конфигурации 1cv8 Бесплатно (free) Бесплатно (free)

Здравствуйте, коллеги! В своей практике работы с 1С для решения задач бизнеса мне неоднократно приходилось применять инструменты переноса документов 1С из одной базы в другую, причем работать приходилось как с однотипными конфигурациями, так и с разными. Этим интереснейшим опытом я и поделюсь в данной статье.

23.01.2021    51360    Koder_Line    12    

Взаимодействие между базами 1С через COM Промо

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Конфигурации 1cv8 Конфигурации 1cv8 Бесплатно (free) Бесплатно (free)

Рассмотрено много особенностей взаимодействия между базами 1С по COM технологии

10.08.2015    196812    tormozit    72    

Неожиданное использование XDTO

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Конфигурации 1cv8 Конфигурации 1cv8 Бесплатно (free) Бесплатно (free)

Расскажу про свой опыт, как XDTO может помочь в отладке обменов данных. И какие полезности можно почерпнуть для себя при работе с XDTO.

05.12.2020    3806    simon_sidoruk    22    

XDTO на службе надежности обмена

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Бесплатно (free) Бесплатно (free)

В статье показано использование XDTO, упрощающее поддержку обмена между разными конфигурациями в условиях постоянной разработки.

28.09.2020    2002    m_kislyak    4    

Лайфхаки конвертации данных 2.1 (часть 2)

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Конфигурации 1cv8 Конфигурации 1cv8 Бесплатно (free) Бесплатно (free)

В данной статье будут рассмотрены десять приемов работы с конвертацией данных 2.1. Указанные приемы явно не описываются в документации (справке), но их полезно знать и применять. Для наглядности приёмы работы сопровождаются описанием реализации и практическими примерами.

14.09.2020    26756    Shining_ninja    17    

Восстановление узла РИБ по магазинам на примере 1С:Розница 2.3.4

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 1С:Розница 1С:Розница Россия Россия Бесплатно (free) Бесплатно (free)

После очередного обновления узла РИБ столкнулся с ошибкой, РИБ перестал работать. Начитался много статей про восстановление РИБа, ни одна толково не помогла. Поэтому не мытьем, так катанием сам разобрался, как же быстро восстановить РИБ, чтобы он заработал.

15.06.2020    15200    maxon    15    

Конвертация данных 2. Использование подключаемых обработок в правилах обмена. Конвертация дерева значений

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 1С:Конвертация данных 1С:Конвертация данных Бесплатно (free) Бесплатно (free)

Разработка правил обмена с использованием подключаемых обработок. В качестве примера рассмотрена реальная задача конвертации дерева значений.

15.06.2020    8636    Drivingblind    10    

РИБ 200 узлов. Середина пути Промо

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 1С:Розница 1С:Розница Россия Россия Бесплатно (free) Бесплатно (free)

Между настройкой и поддержкой РИБ на 2 узла и на 10 большой разницы нет, а вот когда число удаленных точек переваливает за сотню, приходится решать уже совсем другие вопросы

25.10.2016    42597    comol    215    

Конвертация данных 2.1. Методика переноса остатков

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Конфигурации 1cv8 Конфигурации 1cv8 Управленческий учет Управленческий учет Бесплатно (free) Бесплатно (free)

В данной статье я приведу пример использования базовой методики конвертации данных для переноса остатков из одной информационной базы в другую.

12.06.2020    20344    aximo    23    

Лайфхаки конвертации данных 2.1

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 1С:Конвертация данных 1С:Конвертация данных Россия Россия Бесплатно (free) Бесплатно (free)

В данной статье будут рассмотрены десять приемов работы с конвертацией данных 2.1. Указанные приемы явно не описываются в документации (справке), но их полезно знать и применять. Для наглядности приёмы работы сопровождаются описанием реализации и практическими примерами.

07.06.2020    23492    Shining_ninja    13    

Как мы РИБ на веб-сервисы переводили

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Конфигурации 1cv8 Конфигурации 1cv8 Россия Россия Бесплатно (free) Бесплатно (free)

Решение проблем обмена РИБ с 10+ баз с помощью веб-сервисов и базы обмена.

13.05.2020    6750    RSConsulting    22    

Приемы обработки больших данных в 1С Промо

Универсальные обработки Математика и алгоритмы Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Конфигурации 1cv8 Конфигурации 1cv8 Бесплатно (free) Бесплатно (free)

Рассказ об эффективных приемах организации обработок больших объемов данных на платформе 1С

07.08.2015    74626    tormozit    29    

Механизм XDTO

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Конфигурации 1cv8 Конфигурации 1cv8 Бесплатно (free) Бесплатно (free)

Попытка понять механизм XDTO и его неочевидные аспекты. Научиться выполнять обмены между различными конфигурациями без оглядки на реализацию в типовых.

12.05.2020    8160    totchaz    4    

Интеграция БИТ:СКУД с типовой конфигурацией

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Конфигурации 1cv8 Конфигурации 1cv8 Россия Россия Бесплатно (free) Бесплатно (free)

Интеграция БИТ:СКУД с типовой конфигурацией, обновление БИТ:СКУД в составе конфигурации и отдельно. Обновление системы защиты.

26.04.2020    7541    RPGrigorev    0    

Механизмы проведения документов при обмене по универсальному формату

Обмен между базами 1C БСП (Библиотека стандартных подсистем) Платформа 1С v8.3 Платформа 1С v8.3 Бесплатно (free) Бесплатно (free)

Как проводятся документы при обмене по универсальному формату. Пример доработки типовых правил обмена с переносом состояния документа: проведен/не поведен/пометка удаления.

04.03.2020    8462    partizand    7    

Установка расширений конфигурации, модифицирующих структуры данных, в фоновом задании запрещена

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Бесплатно (free) Бесплатно (free)

Вариант решения проблемы синхронизации узла при передаче изменений метаданных расширения, используемого в распределенной информационной базе.

20.02.2020    5933    fristaller    7    

Бесшовная интеграция через обмен по правилам - миссия выполнима

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 1С:Документооборот 1С:Документооборот 1С:ERP Управление предприятием 2 1С:ERP Управление предприятием 2 Бесплатно (free) Бесплатно (free)

При организации работы с договорами в ERP 2, с помощью бесшовной интеграции с Документооборотом, «типовой» методикой является создание договоров в ЕРП. После создания договора в ЕРП, пользователь «отправляет» договор в ДО по бесшовной интеграции. На практике, весьма часто пользователи хотят видеть обратную схему: вводить договоры в ДО и при этом получать их в ЕРП без «лишних телодвижений». Или даже вводить их независимо в обеих системах – так, чтобы потом «стыковать» по каким-то определенным правилам.

24.01.2020    8849    e-9    8    

Отладка правил обмена 7.7, 8 Промо

Обмен между базами 1C Файловый обмен (TXT, XML, DBF), FTP Платформа 1С v8.3 Платформа 1С v8.3 1С:Конвертация данных 1С:Конвертация данных Бесплатно (free) Бесплатно (free)

Отладка правил обмена всегда была для меня больной темой, пока наконец-то не разобрался. В интернете мало тем, посвященных этому, поэтому решил написать небольшую инструкцию по этому поводу. Очень надеюсь, что она будет кому-то полезна. С радостью выслушаю недочеты.

29.10.2013    53908    pyrkin_vanya    71    

Как сделать обмен данными через универсальный формат быстрее? Реализация многопоточного обмена данными

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Конфигурации 1cv8 Конфигурации 1cv8 Бесплатно (free) Бесплатно (free)

Предлагаю Вашему вниманию интересный кейс по реализации обмена данными через универсальный формат между современными типовыми конфигурациями в режиме многопоточности. Учитывая все тонкости механизмов обмена данными и сложности типовых правил конвертации, сделать это оказалось совсем не так просто.

31.12.2019    11105    ids79    17    

Обсудим планы обмена. Способы регистрации объектов к обмену

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Конфигурации 1cv8 Конфигурации 1cv8 Бесплатно (free) Бесплатно (free)

В этой статье я предлагаю обсудить такой объект конфигурации, как "план обмена", а точнее, методы регистрации в нем. Да и вообще, посмотрим, как можно зарегистрировать объекты к обмену.

16.11.2019    68841    aximo    47    

Конвертация ставок НДС: из Перечисления в Справочник (правила обмена в конвертации 2.0)

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 1С:Конвертация данных 1С:Конвертация данных Россия Россия НДС НДС Бесплатно (free) Бесплатно (free)

При написании правил обмена между "более старой" и "более новой" конфигурациями можно столкнуться с тем, что в одной конфигурации ставки НДС - это перечисление, а в другой - справочник (или наоборот, но мой пример именно из перечисления в справочник). Ситуация несложная, но нестандартная, поэтому выкладываю работающий пример, может, кому пригодится.

09.11.2019    11081    vikulinamari    10    

И снова "Конфигурация узла распределенной ИБ не соответствует ожидаемой"

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Бесплатно (free) Бесплатно (free)

Конфигурация узла распределенной ИБ не соответствует ожидаемой. Приведен очередной способ устранения этой ошибки, возникший не в результате сбоев в работе оборудования или при обмене, а в результате обновления платформы 1С.

05.11.2019    7815    Kobra_RU    11    

Конвертация данных из 1С 8.3 в 7.7 (версия КД 2.1). Перенос данных из 8.3 в 7.7. Создание в современной 1С 8.3 XML в формате КД2. Инструкции и примеры переноса данных из любой современной 1С 8.3 в устаревшую конфигурацию 1С 7.7, через Конвертацию данных 2

Обмен между базами 1C Платформа 1С v7.7 Платформа 1С v7.7 Платформа 1С v8.3 Платформа 1С v8.3 1С:Конвертация данных 1С:Конвертация данных Бесплатно (free) Бесплатно (free)

При переходе на новую версию 1С в период параллельной эксплуатации может возникнуть необходимость обратной конвертации данных (по правилам КД версии 2.1) из 1С:Предприятие 8.3 в 1С:Предприятие 7.7 для переноса данных из 1С:Предприятие 8.3 в 7.7. Сделать это поможет следующая инструкция по КД2 о том, как создать новую конвертацию из 8.3 в 7.7, сохранить модуль и правила загрузки данных, сделать загрузку данных. КД2.

17.10.2019    12018    ksnik    0    

Объединение организаций в ЗУП при реорганизации с переносом данных из ЗУП 2.5 в ЗУП 3.1

Зарплата Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Сложные периодические расчеты Сложные периодические расчеты 1С:Зарплата и Управление Персоналом 2.5 1С:Зарплата и Управление Персоналом 2.5 1С:Зарплата и Управление Персоналом 3.x 1С:Зарплата и Управление Персоналом 3.x Бухгалтерский учет Бухгалтерский учет Бесплатно (free) Бесплатно (free)

В этой статье описан опыт объединения 2-х организаций при реорганизации в ЗУП 3.1 с переносом данных одной организации из ЗУП 2.5 (релизы баз более или менее свежие, но не самые последние на момент перехода, примерно двух- и трехмесячной давности). За основу было взято решение из этой статьи https://infostart.ru/public/833658/, в которой описан алгоритм решения задачи, за что автору статьи огромная благодарность! Здесь же даны некоторые комментарии и пояснения к алгоритму переноса и объединения, описаны выявленные мною ошибки. Также приведена небольшая инструкция по использованию обработки ирПодборИОбработкаОбъектовБД — она будет полезна для пользователей — «не программистов», впервые работающих в не управляемых формах.

09.10.2019    10595    Neti    2    

EnterpriseData: простой способ защиты данных в базе получателя при одностороннем обмене

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Конфигурации 1cv8 Конфигурации 1cv8 Бесплатно (free) Бесплатно (free)

Очень часто бухгалтеры ругаются, когда уже отраженные документы в бухгалтерском учета меняются сотрудниками.

04.10.2019    8705    handscenter    12    

Дозагрузка измененных данных при помощи КД2

Обмен между базами 1C Платформа 1С v8.3 Платформа 1С v8.3 Россия Россия Бесплатно (free) Бесплатно (free)

Иногда во время каких-то регламентных действий по обслуживанию базы(например, при обновлении измененной базы на много релизов) требуется обеспечить бесперебойность работы пользователей. Если конфигурации баз до и после идентичны, то тут сам Бог велел воспользоваться обработкой "ВыгрузкаЗагрузкаДанныхXML", либо такой же но с отбором(на Инфостарте есть такая). Но что если конфигурации баз различаются/значительно различаются? Ниже опишу, как вышел из положения я.

12.09.2019    5760    al_zzz    2