Частичный экспорт в 1C:EDT: Как ускорить CI/CD в несколько раз?
Бесплатные
ВНИМАНИЕ: Файлы из Базы знаний - это исходный код разработки. Это примеры решения задач, шаблоны, заготовки, "строительные материалы" для учетной системы. Файлы ориентированы на специалистов 1С, которые могут разобраться в коде и оптимизировать программу для запуска в базе данных. Гарантии работоспособности нет. Возврата нет. Технической поддержки нет.
Узнавайте о новых бесплатных решениях в нашей телеграм-группе Инфостарт БЕСПЛАТНО
Вы можете заказать платную доработку или адаптацию этой разработки под вашу конфигурацию на «Бирже заказов».
- 0% комиссии — оплата напрямую исполнителю;
- Исполнители любого масштаба — от отдельных специалистов до команд под проект;
- Прямой обмен контактами между заказчиком и исполнителем;
- Безопасная сделка — при необходимости;
- Рейтинги, кейсы и прозрачная система откликов.
TL;DR
Я за день собрал плагин для EDT с помощью Напарника, для экспорта только изменившихся объектов через командную строку.
Проблема:
Работая с большими конфигурациями в 1C:EDT, я столкнулся с проблемой: процесс конвертации в XML формат конфигуратора через командную строку (CLI) идёт очень долго. Особенно это заметно в CI/CD:
- EDT export поддерживает только полную конвертацию. Невозможно выгрузить только измененные объекты. Например, если изменился только Справочник «Номенклатура», всё равно приходится ждать полной выгрузки конфигурации.
- На больших конфигурациях полная конвертация занимает десятки минут. Это сильно увеличивает время пайплайна в CI/CD и занимает ресурсы ради заливки пары объектов.
- EDT умеет инкрементально обновлять базу по изменившимся объектам. Но только через GUI. В командной строке такая возможность недоступна. Не доработка.
Идея: плагин для частичного экспорта
Я начал думать: почему нельзя использовать ту же логику инкрементального обновления, но в рамках CLI? Ведь EDT уже умеет работать с изменениями на уровне объектов, просто в GUI. И тогда появилась идея: написать плагин, который задействует эту функциональность изнутри командной строки EDT.
Решение:
Я попросил Напарника проанализировать механизм EDT по конвертации исходников (export в CLI) и за день с его помощью написал плагин, который добавляет команду export-partial. Этот плагин позволяет выгружать в XML только указанные объекты метаданных, минуя необходимость полной конвертации. Вот как это работает:
- Установка в одну команду: плагин ставится в текущую версию EDT одной командой
- Экспорт по списку объектов или по git-diff: новая команда принимает только список объектов, но в репозитории есть скрипт export-changed, который умеет сам вычислять список изменений относительно другой ветки.
- Экспорт корня конфигурации: отдельный флаг для экспорта корня конфигурации со всеми его свойствами, модулями и командным интерфейсом. Необходимая часть при добавлении\удалении объектов метаданных.
- Поддержка полного экспорта: если не указать список объектов и корень конфигурации, то произойдет полный экспорт, как обычной командой export.
Результат:
- Экономия времени: на конфигурации объёмом 1,4 ГБ частичная выгрузка занимает ~30 секунд, в то время как полная — ~130 секунд. Если же переиспользовать кеш EDT (рабочая область с полной сборкой), то время уменьшается до ~5 секунд.
- Полная идентичность результата: побайтово сравнил результаты выгрузки обычной командой и моей - файлы одинаковые. Что логично, сам плагин использует внутреннее API механизма экспорта, только передаёт в него список объектов.
Использование в CI/CD:
Сама проблема с ускорением экспорта важна именно в CI/CD, поэтому в репозитории лежит скрипт на bash. Пример использования:
./ci/export-changed.sh --project ./MyConfiguration --out ./out/xml --cli /opt/edt/1cedtcli --workspace /var/edt-ci-ws --base-ref origin/main
Документация:
В архиве лежит весь репозиторий вместе с плагином и документацией как для пользователя, так и для доработки плагина:
- Основная документация: README.md
- Установка и диагностика: INSTALL.md
- Сборка и совместимость: build/BUILD.md
- Разработка и тестирование: dev/DEVELOPMENT.md
Вступайте в нашу телеграмм-группу Инфостарт