Загрузка банковской выписки для 1С 7.7 любой конфигурации

<НеЗагружается>
<НомерТранзакции>
<СуммаТранзакции>
<ИдТранзакции>
<ДатаТранзакции>
<ДатаПоступилоСписано>
<ТипОперации>
<КатегорияОперации>
<Контрагент>
<КонтрагентИНН>
<КонтрагентКПП>
<КонтрагентСчет>
<КонтрагентКоррСчет>
<КонтрагентБИК>
<КонтрагентБанк>
<НомерСчета>
<НазначениеПлатежа>
<Валюта>
<ВидОплаты>
<Очередность>
<СвойИдентификатор>

Номер счета
Идентификатор транзакции
Тип операции (пополнение/списание)
Категория операции
Статус
Дата создания операции
Дата авторизации
Дата транзакции
Идентификатор оригинальной операции
Сумма операции в валюте операции
Валюта операции
Сумма в валюте счета
Контрагент
ИНН контрагента
КПП контрагента
Счет контрагента
Наименование банка контрагента
БИК банка контрагента
Корр. счет банка контрагента
Назначение платежа
Номер платежа
Очередность
Код (УИН)
Номер карты
Место совершения
Адрес организации
Статус составителя расчетного документа
КБК-код бюджетной классификации
Код ОКТМО
Основание налогового платежа
Налоговый период/Код таможенного органа
Номер налогового документа
Дата налогового документа
Тип налогового платеж

Расшифровка колонок:
Номер счета;Идентификатор транзакции;Тип операции (пополнение/списание);Категория операции;Статус;Дата создания операции;Дата авторизации; Дата транзакции;Идентификатор оригинальной операции;Сумма операции в валюте операции;Валюта операции;Сумма в валюте счета;Контрагент;ИНН контрагента;КПП контрагента; Счет контрагента;БИК банка контрагента;Корр. счет банка контрагента;Наименование банка контрагента;Назначение платежа;Номер платежа;Очередность;Код (УИН); Номер карты;MCC;Место совершения (Город);Место совершения (Страна);Адрес организации;Банк;Статус составителя расчетного документа;КБК-код бюджетной классификации; Код ОКТМО;Основание налогового платежа;Налоговый период/Код таможенного органа;Номер налогового документа;Дата налогового документа;Тип налогового платежа

Строка выписки:
40801234500000198765;TNC_303432464;Credit;incomeLegal;транзакция;;02.07.2021;02.07.2021;;;643;"23730,96";ФИЛИАЛ № 7701 БАНКА ВТБ (ПАО);7702070139;;30232810181100000024;044525745;30101810345250000745;ФИЛИАЛ № 7701 БАНКА ВТБ (ПАО);"Возмещение ср-в по операциям эквайринга, согласно договору Д (1002) от 22.06.2017 Комиссия 385.87 по операциям за 01.07.21, НДС не облагается.";;;;;;;;;;;;;;;;;

Возможный результат загрузки 1 (Торговля и Склад):
Строка выписки банка (приход) № 0000000085
-> ДатаДок = 02.07.21
-> Комментарий = Возмещение ср-в по операциям эквайринга, согласно договору Д (1002) от 22.06.2017 Комиссия 385.87 по операциям за 01.07.21, НДС не облагается.
-> БанковскийСчет = 40801234500000198765
-> КодОперации = Оплата от покупателя
-> Контрагент = ФИЛИАЛ № 7701 БАНКА ВТБ (ПАО)
-> Сумма = 23730.96
-> ДвижениеДенежныхСредств = Возмещение средств по картам
-> Валюта = руб

Возможный результат загрузки 2 (УСН 1.3):

Выписка № 000006 (Строка 1)
-> ДатаДок = 02.07.21
-> Назначение платежа = Возмещение ср-в по операциям эквайринга, согласно договору Д (1002) от 22.06.2017 Комиссия 385.87 по операциям за 01.07.21, НДС не облагается.
-> Субконто1 = ФИЛИАЛ № 7701 БАНКА ВТБ (ПАО)
-> Субконто2 = Основной договор (ФИЛИАЛ № 7701 БАНКА ВТБ (ПАО))
-> Приход = 23730.96
-> ДвижениеДенежныхСредств = Возмещение средств по картам
-> ДатаДокВходящий = 02.07.2021
-> КоррСчет= 60.2
-> Валюта = руб

 После обработки таблицы запуском команды "Загрузить", пользователю выводится подробный отчет о создании документов, инициализации реквизитов, создании новых элементов справочников. Перед сохранением результатов выводится вопрос, в котором можно подтвердить или отменить результат загрузки.

Сохранение и восстановление параметров обработки выполняется с помощью клавиш "Сохранить/Восстановить настройки". Для первоначального использования настроек необходимо один раз сохранить/восстановить файл настроек (формат TXT); далее он будет использоваться автоматически.

По нажатию клавиши "Параметры-флаги" доступны настройки:

• Флаг "Авто-просмотр выбранного файла" - После выбора файла выписки выполняется автоматический выбор области просмотра и загружаются данные.
• Флаг "Авто-проведение новых документов" - Для создаваемых в процессе загрузки документов выполняется автоматическое проведение.
• Флаг "Авто-восстановление ID колонок" - После загрузки данных из файла будет выполняться автоматическое восстановление идентификаторов колонок (используется последний сохранённый файл ID колонок).
• Флаг "Выводить сообщения" - Вывод информационных сообщений при выполнении команд.
• Флаг "Выводить отчет загрузки" - После загрузки данных будет выведен подробный отчет.
• Флаг "Загрузка в режиме транзакций" – При использовании режима транзакций возможно откатывать любые изменения в базе после загрузки, при нажатии клавиши Отмена (иногда требуется отключить использование режима транзакций для загрузки в ранних периодах, например, прошлых лет).

По нажатию клавиши "Параметры загрузки элементов" можно настраивать параметры загрузки контрагентов, банков, банковских счетов и др. Например, можно выбрать вид справочника контрагентов в используемой конфигурации. Другие настраиваемые параметры:

• Флаг "Создавать новых контрагентов" - При загрузке данных из таблицы будут создаваться новые элементы справочника Контрагенты (если элемент не найден),
• Флаг "Создавать новые банки/банковские счета" - При загрузке будут создаваться новые элементы Банки и Банковские счета для новых или существующих контрагентов (если банк/счет не найден),
• Флаг "Подробный поиск контрагентов" - Перед созданием новых контрагентов, выполняется нечёткий поиск по наименованию контрагента из выписки,
• Значение "Схожесть наименований контрагентов" - При получении схожести наименований загружаемого и существующего контрагента выше заданного порога, контрагент считается найденным и используется для загрузки реквизита документа с найденным элементом,
• Флаг "Условная загрузка реквизитов" - Реквизиты нового документа инициализируются по условию, заданному в таблице "Загружаемые реквизиты",
• Значение "Идентификатор контрагента" - При создании контрагентов или поиске существующих требуется определять загружаемые данные колонки по выбранному идентификатору контрагента (настройка этого параметра является обязательной при необходимости создания новых контрагентов).

Список "Журнал документов" позволяет выбрать идентификатор журнала документов, который будет использоваться для предпросмотра результатов загрузки.

В группе "Поступление на счет" задаются параметры поиска и загрузки строки выписки типа операции "Credit".

В группе "Списание со счета" задаются параметры поиска и загрузки строки выписки типа операции "Debit".

Выбор загружаемого вида документа выполняется нажатием клавиши в группе "Поступление на счет/Списание со счета" напротив текста "Вид документа:".

Добавление/Удаление загружаемых реквизитов выполняется нажатием клавиш "+, Х". Перемещение в таблице загружаемых реквизитов выполняется нажатием клавишами с иконкой в виде стрелки. Список загружаемых реквизитов извлекается из метаданных конфигурации. Можно настроить загрузку всех или только выбранных реквизитов документа.

Основные колонки таблицы "Загружаемые реквизиты документа", влияющие на процесс загрузки: Реквизит, Значение, Тип, Вид.

Двойным кликом в колонке "Значение" можно выбрать идентификатор ТЗ вкладки "ЗАГРУЗКА". Двойным кликом в колонках "Тип", "Вид" можно настроить тип загружаемого реквизита. Особенно часто это используется при загрузке реквизитов типа "Неопределенный".

В параметрах загрузки реквизитов в качестве значения используются элементы из базы, или идентификаторы колонок, например <ТипОперации>, для настройки процесса загрузки данных.

Выполняется поиск строки файла банковской выписки по идентификатору с заданным значением, например <ТипОперации>=Credit.

Если строка найдена, то обработка создает документ выбранного вида, и начинает загрузку реквизитов на основе таблицы "Загружаемые реквизиты документа", которая содержит полное описание реквизитов, значений, условий, типов, видов.

Таблица "Загружаемые реквизиты документа" настраивается пользователем на основе клавиш добавить,удалить,вверх,вниз, а также двойным кликом по интересующей ячейке. Можно выбрать в качестве значения загружаемого реквизита идентификатор таблицы файла выписки, либо выбрать существующий элемент информационной базы.

При установленном флаге "Условная загрузка реквизитов" для каждого реквизита можно настроить выражение, которое проверяется при загрузке, например "<КатегорияОперации> <Равно> contragentLegal". Если выражение удовлетворяет загружаемой строке выписки, то реквизит успешно инициализируется, в противном случае загрузка реквизита прерывается.

Флаг "Условная загрузка реквизитов" позволяет создавать несколько строк таблицы "Загружаемые реквизиты документа" для одного и того идентификатора реквизита. В такой настройке выбирается подходящее для загрузки значение на основе удовлетворения условию - выражение в одноименной колонке.

Флаг "Табличный документ" - Обработка при загрузке данных в базу будет создавать единственный документ, в котором заполняется табличная часть (возможна установка флага только для видов документов с табличной частью в метаданных). Далее в настройке будут использоваться реквизиты табличной части создаваемого документа.

В таблице загружаемых реквизитов документа появится колонка "Т", в которой отмечены флагом табличные реквизиты.

В версии дистрибутива 1.4 добавлена возможность настройки разделителей документов в файле TXT для просмотра. Можно настроить разделитель документов начала - определение строки по идентификатору (по-умолчанию "СекцияДокумент"), разделитель документов конец - завершение секции определения документов (по-умолчанию "КонецДокумента").

На изображении выше приводится пример настройки разделителей для просмотра файла "bank_to_1c(3).txt" из дистрибутива.

1. Колонки таблицы с информацией о контрагентах:

2. Добавление реквизита "Контрагент" в список загружаемых:

3. Выбор идентификатора колонки ТЗ (пункт 1) с наименованием контрагента:

4. Разрешение загрузки реквизитов с проверкой условия:

5. Включение диалога настройки условия загрузки реквизита "Контрагент":

6. Выбор идентификатора колонки ТЗ (пункт 1) для настройки поиска контрагента по ИНН\КПП:

7. Выбор условия поиска существующего элемента справочника "Контрагенты":

8. Выбор индексируемого реквизита элемента справочника "Контрагенты" для поиска:

9. Выбор индексируемого реквизита элемента для составного реквизита справочника "Контрагенты":

10. Проверка содержимого реквизита в базе. Например, в "Комплексная конфигурация, редакция 4.5":

11. Включение диалога просмотра\изменения полученного условия:

12. Добавление идентификатора колонки в шаблон условия. В приведенном примере получился шаблон "<ПлательщикИНН>\<ПлательщикКПП>", который при загрузке будет формировать значение ИНН\КПП для поиска контрагента в реквизите ЮрФизЛицо.ИНН. Можно ограничиться шаблоном "<ПлательщикИНН>", если в существующих контрагентах в базе есть только ИНН в соответствующем реквизите:

 В дистрибутиве есть дополнительные файлы, для тестирования функционала:

• файл настроек "BankDocsSettTIS.txt", который можно поместить  в папку: "ПутьВашейИБ/", впоследствии восстановить настройки на вкладке формы "Параметры" (для пользователей конфигурации "Торговля и Склад"),
• файл идентификаторов колонок "ID_дата.txt", который можно поместить  в папку: "ПутьВашейИБ/", впоследствии восстановить на вкладке "Загрузка", клавиша "Действия", пункт "Восстановить разметку ID колонок", для загрузки CSV выписки банка Тинькофф,
• тестовый файл банковской выписки "test.csv", который можно загрузить в обработке и проверить загрузку данных.

Версия 1.5 [20.07.26]
- Добавлена возможность загрузки выписки в документ "Операция" конфигурации "Бухгалтерия 4.2/4.5";
- В дистрибутив добавлен файл-пример "настр_Бух42_Операция.txt" - настройки обработки для загрузки банковской выписки в формате TXT в конфигурации "Бухгалтерия 4.2" для создания табличного документа Операция на основе бухгалтерских проводок и плана счетов;
- Добавлено текстовое поле формы обработки "КомментарийФайла" в закладке "ЗАГРУЗКА". Позволяет загружать комментарий в соответствующий реквизит документа с использованием идентификатора <КомментарийФайла> в настройках обработки;
- Доработан диалог настроек обработки для добавления реквизитов в таблицах закладки "ПАРАМЕТРЫ";
- Добавлена возможность загружать значение реквизита шаблоном идентификаторов: тип значения такого реквизита должен быть "Строка" в таблице реквизитов;
- Доработана инструкция пользователя в файле "Загрузка банк. выписки 1С7.7.pdf";
- Небольшие исправления и улучшения алгоритмов.

Версия 1.4 [06.01.23]
- Добавлена возможность настройки разделителей документов в файле TXT для просмотра. Можно настроить разделитель документов начала - определение строки по идентификатору (по-умолчанию "СекцияДокумент"), разделитель документов конец - завершение секции определения документов (по-умолчанию "КонецДокумента"). На изображении в разделе «Параметры загрузки» приводится пример настройки разделителей для просмотра файла "bank_to_1c(3).txt" из дистрибутива нестандартного формата;
- Добавлена настройка "Идентификатор контрагента": вкладка «ПАРАМЕТРЫ», клавиша «Параметры загрузки элементов». При создании контрагентов или поиске существующих требуется определять загружаемые данные колонки по выбранному идентификатору контрагента (настройка этого параметра является обязательной при необходимости создания новых контрагентов);
- В дистрибутив добавлен файл-пример "BankDocsSett_Usn_TXT.txt" - настройки обработки для загрузки банковской выписки в формате TXT в конфигурации "УСН, ред.1.3";
- В дистрибутив добавлен файл-пример "bank_to_1c(3).txt" – третий пример файла банковской выписки в формате TXT, выгруженной из банковского клиента (из другого банк-клиента);
- Доработана инструкция пользователя в файле "Загрузка банк. выписки 1С7.7.pdf";
- Небольшие улучшения алгоритмов.

Версия 1.3 [19.10.22]
- Реализована возможность поиска контрагентов из банковской выписки по реквизиту ИНН\КПП при загрузке и создании новых банковских документов в базе;
- Добавлен новый раздел инструкции настройки обработки для поиска контрагентов из банковской выписки по реквизиту ИНН\КПП;
- В дистрибутив добавлен файл-пример «BankDocsSett_complex77.txt» настроек обработки для загрузки выписок в конфигурации «Комплексная конфигурация, редакция 4.5»;
- Добавлена функция быстрого редактирования колонки для обрезки данных в тексте ячейки: вкладка «ЗАГРУЗКА», кнопка «Действия», пункт «Групповая обработка ТЗ», пункт «Удалить текст в колонке (в конце ячейки)». Функция позволяет выполнить автоматическую обрезку всех значений выбранной колонки на основе строки-разделителя. Например, для строки-разделителя «Р/С», можно выполнить преобразование: из «ОАО НПО "ЭКО" Р/С 40702810438171234567 в ПАО СБЕРБАНК г Москва» в «ОАО НПО "ЭКО"»;
- Значительно доработан интерфейс обработки на вкладке «ПАРАМЕТРЫ»;
- Улучшены диалоги с пользователем при просмотре файлов выписок и загрузке банковских операций в ИБ;
- Другие многочисленные исправления и улучшения.

Версия 1.2 [06.06.22]
- Добавлены параметры загрузки банковской выписки в табличный документ базы, например Выписка в конфигурациях Бухгалтерия, УСН: - вкладка "ПАРАМЕТРЫ", группы "Поступление на счет/Списание со счета", флаг "Табличный документ";
- Доработан алгоритм загрузки файла банковской выписки на основе новых параметров;
- Доработана инструкция пользователя для разъяснения новых параметров настройки и условия загрузки табличных реквизитов;
- Добавлен новый параметр "Загрузка в режиме транзакций", доступный для изменения по нажатию клавиши "Параметры-флаги"; при использовании режима транзакций возможно откатывать любые изменения в базе после загрузки, при нажатии клавиши Отмена (иногда требуется отключить использование режима транзакций для загрузки в ранних периодах, например, прошлых лет);
- Изменен и доработан интерфейс вкладки "ПАРАМЕТРЫ";
- Исправлены незначительные недочеты алгоритма просмотра загружаемого файла;
- В алгоритме создания новых контрагентов с полным наименованием выполнятся автоматическая замена: "общество с ограниченной ответственностью"->"ООО", "индивидуальный предприниматель"->"ИП", "закрытое акционерное общество"->"ЗАО", "акционерное общество закрытого типа"->"АОЗТ", "торгово-промышленная компания"->"ТПК", "федеральное государственное унитарное предприятие"->"ФГУП", "федеральное государственное предприятие"->"ФГП"; полное наименование без замены автоматически записывается в реквизит "ПолнНаименование"; при очередном поиске используется всегда укороченное наименование контрагента из банковской выписки;
- Другие многочисленные исправления и доработки.

Версия 1.1 [22.03.22]
- Доработан функционал загрузки в формате TXT файла банковской выписки - метод загрузки "TXT-1CClientBankExchange";
- Доработаны параметры выбора используемой кодировки текста при загрузке TXT файлов - кодировка ANSI;
- Добавлены параметры поиска строки поступления/списания со счета на основе различных условий при сравнении с заданным значением: вкладка "ПАРАМЕТРЫ", группа "ПОСТУПЛЕНИЕ на счет" и "СПИСАНИЕ со счета", список "Условие";
- Доработан алгоритм создания новых документов: добавлена проверка и улучшена поддержка уникальности номера создаваемого документа;
- Доработаны иконки интерфейса;
- Другие многочисленные исправления и доработки.

Версия 1.0 [27.07.21]
- Реализован основной функционал загрузки банковской выписки из CSV, XLS файлов;
- Функционал протестирован в типовой конфигурации "Торговля и Склад";
- Разработаны файлы настроек и документации.