Подготовка тестового контура с помощью gitlab-ci и Яндекс.Диска

04.05.18

Интеграция - WEB-интеграция

В статье описан пример использования gitlab-ci для копирования продуктовой базы в Яндекс.Диск и разворачивания на другом контуре.

Должно быть установлено

oscript

пакет cpdb(oscript)  

rem устанавливаем пакет
opm install cpdb

будем ставить 

gitlab-runner

Для настройки создадим репозиторий на gitlab. Добавим файл .gitlab-ci.yml с текстом:

stages:
  - stage
 
'Подготовка тестового контура':
  stage: stage
  script: 
  - chcp 65001
  - mkdir %tmp%\PrepareStage\ib\ 
  - xcopy %secret_ib_file% %tmp%\PrepareStage\ib\ /Y /Z /V /J /I 
  - call cpdb dumpib -ib-path "/F%tmp%/PrepareStage/ib/" -dt-path "%tmp%/PrepareStage/trade_stage_%DATE%.dt" %secret_ib_user% %secret_ib_pass% -v8version 8.3.10
  - call cpdb putyadisk -file "%tmp%/PrepareStage/trade_stage_%DATE%.dt" -ya-token %secret_ya_token% -ya-path %secret_ya_path%
  - RMDIR %tmp%\PrepareStage\ /s /q
  when: manual

 

Файл .gitlab-ci.yml содержит набор инструкций для исполнения экземпляром gitlab-runner

Далее необходимо будет указать секретные переменные (те что начинаются с %secret) и зарегистрировать runner на машине с доступом к продуктовой базе

Настраиваем секретные переменные

Переходим в https://gitlab.com/<profile>/<myproject>/settings/ci_cd, в разделе Secret variables указываем ключи и значения секретных переменных

Например:

 ключ - secret_ib_file, значение d:\bases\trade\1cv8.1cd

 ключ - secret_ya_path, значение /stages/trade/

Имена ключей в Secret variables указываются без % 

Так же есть переменная secret_ya_token значение которой необходимо получить из здесь (OAuth-авторизация).

в разделе Платформы отмечаем Веб-сервисы и обязательно указываем Callback URI 

далее указываем какие права будут у нашего приложения

После создания приложения будет выдан его id, что бы получить токен, необходимо пройти по ссылке https://oauth.yandex.ru/authorize?response_type=token&client_id=<ID приложения> и разрешить его работу. Далее будет выдан токен который надо указать в значении переменной secret_ya_token

Рекомендую создать еще одно приложение, со всеми правами только без Запись в любом месте на диске и использовать его токен для развертывания.

Регистрируем runner

Для начала необходимо получить токен для раннера в gitlab. Снова переходим в https://gitlab.com/<profile>/<myproject>/settings/ci_cd.

В разделе Runners settings

1. Отключаем общие раннеры, они нам не нужны. Нажимаем кнопку Disable shared Runners

 2. Копируем токен для раннера, он будет нужен при регистрации

Наконец то регистрируем раннер

Оригинальная инструкция

1. Создаем папку на диске, например C:\GitLab-Runner.  Рекомендую для использования нескольких раннеров сделать основную папку GitLab-Runners и в ней подпапки с именами раннеров C:\GitLab-Runner\TradePrepareStage например

2. Загрузите двоичный файл для x86 или amd64 и поместите его в созданную вами папку. Переименуйте двоичный файл в gitlab-runner.exe.

3. Запустите командную строку с правами Администратора

4. Регистрируем раннер (официальная инструкция)

по очереди выполняем команды 

rem Переходим в папку со скаченным файлом раннера 
cd C:\GitLab-Runner\TradePrepareStag

rem выполняем команду
gitlab-runner.exe register

rem указываем адрес инстанса (так как можно регистрировать раннеры и на своем экземпляре gitlab)
https://gitlab.com

rem указываем токен для раннера
xxxxxxxxxxxxxxxxx 

rem указываем описание раннера (любое, чтоб понимать для чего он был зарегистрирован)
TradePrepareStag

rem на вопрос о тегах ничего не пишем, здесь они не будут использоваться
Please enter the gitlab-ci tags for this runner (comma separated):

rem на вопрос отвечаем ДА
Whether to run untagged jobs [true/false]:
true

rem на вопрос о том кто будет исполнять сценарии отвечаем shell (для windows)
Please enter the executor: ssh, docker+machine, docker-ssh+machine, kubernetes, docker, parallels, virtualbox, docker-ssh, shell:
shell

5. Устанавливаем раннер как службу и запускаем его

gitlab-runner install 

gitlab-runner start

По умолчанию, служба регистрируется как gitlab-runner. Лучше дополнительно указать имя службы, за место верхней инструкции выполнить:

gitlab-runner install --service gitlab-runner-trade-prepare-stage

gitlab-runner start --service gitlab-runner-trade-prepare-stage

 

Для выполнения инструкций переходим в https://gitlab.com/<profile>/<myproject>/pipelines и нажимаем кнопку запуска у конвеера или создаем новый конвеер по команде Run Pipeline.

После запуска можно зайти в задание и следить за результатом выполнения

После успешного выполнения, в каталоге Диска должна появиться выгрузка базы.

При выполнении команды putyadisk выводится ошибка о том что каталог уже создан, так же при повторном выполнении задания выводится ошибка, что и закачиваемый файл имеется на Яднекс.Диске.

Для повторной выгрузки файла пока что необходимо предварительно удалить ранее созданную выгрузку на сегодняшний день.

Заключение

В итоге мы получаем возможность забрать копию рабочей базы через веб-интерфейс gitlab, когда нам это необходимо. Почему gitlab?

1. веб-интерфейс для выполнения заданий

2. раннер не занимает много места по сравнению с jenkins (~50mb)

3. кажется, единственный сервис, предлагающий ci под windows

4. это бесплатно

См. также

Оптовая торговля Розничная торговля WEB-интеграция 1С:Управление торговлей 10 1С:Управление производственным предприятием 1С:Управление нашей фирмой 1.6 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х 1С:Управление нашей фирмой 3.0 Платные (руб)

Онлайн-заказ - это решение для автоматизации процесса оформления заказов на сайте в торговых организациях. Продукт обеспечивает легкое взаимодействие между компанией и клиентами через веб-интерфейс, интегрированный с 1С:Предприятие. Система позволяет снизить операционные расходы, повысить лояльность клиентов и оптимизировать работу отдела продаж.

57600 руб.

26.11.2024    825    1    1    

4

Сайты и интернет-магазины WEB-интеграция Системный администратор Программист Пользователь Платформа 1С v8.3 Конфигурации 1cv8 1С:Управление торговлей 11 Автомобили, автосервисы Россия Управленческий учет Платные (руб)

Интеграционный модуль обмена между конфигурацией Альфа Авто 5 и Альфа Авто 6 и порталом AUTOCRM. Данный модуль универсален. Позволяет работать с несколькими обменами AUTOCRM разных брендов в одной информационной базе в ручном и автоматическом режиме.

36000 руб.

03.08.2020    18169    20    22    

18

Сайты и интернет-магазины Интеграция WEB-интеграция Платформа 1С v8.3 Конфигурации 1cv8 Управленческий учет Платные (руб)

Интеграция 1С и Битрикс 24. Разработка имеет двухстороннюю синхронизацию 1С и Bitrix24 задачами. Решение позволяет создавать пользователя в 1С из Битрикс24 и наоборот. Данная разработка технически подходит под все основные конфигурации линейки продуктов 1С:Предприятие 8.3 (платформа начиная с 8.3.23): 1С:Управление торговлей, 1С:Управление Нашей фирмой 3, 1С:Комплексная автоматизация 2, Объединенное решение: Модуль 1С:CRM 3 (3.0.21.3) +1С:ERP Управление предприятием 2. При приобретении предоставляется 1 месяц бесплатных обновлений разработки. Доступна демо-версия продукта с подключением Вашего Битрикс24

7200 руб.

04.05.2021    20358    13    19    

18

Обмен с ГосИС WEB-интеграция Бухгалтер Пользователь Платформа 1С v8.3 Управляемые формы 1С:Комплексная автоматизация 1.х 1С:Бухгалтерия 2.0 1С:Управление торговлей 10 1С:Управление производственным предприятием 1С:Управление нашей фирмой 1.6 1С:Бухгалтерия государственного учреждения 1С:Документооборот 1С:ERP Управление предприятием 2 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х Платные (руб)

Обработка является альтернативой механизму, разработанному фирмой 1С и заполняющему реквизиты контрагента по ИНН или наименованию. Не требуется действующей подписки ИТС. Вызывается как внешняя дополнительная обработка, т.е. используется, непосредственно, из карточки контрагента. Заполнение по ИНН или наименованию реквизитов контрагента по данным сайта ФНС (egrul.nalog.ru) для БП 2.0, БП 3.0, БГУ 1.0, БГУ 2.0, УТ 10.3, УТ 11.x, КА 1.1, КА 2.x, УПП 1.x, ERP 2.x, УНФ 1.5, УНФ 1.6, УНФ 3.0, ДО 2.1

2400 руб.

28.04.2016    91659    179    217    

333
Оставьте свое сообщение