Подсистема автоматического удаления дублей в справочниках (управляемые формы, любая конфигурация)

17.08.22

База данных - Чистка данных

Подсистема позволяет проводить автоматическое удаление дублей справочников в соответствии с заданными настройками. Возможно встраивание в любую конфигурацию на управляемых формах. Позволяет задать настройки справочников, в которых ищутся дубли и также поля поиска совпадений. Есть регламентное задание для запуска проверки с заданным периодом. Если в базе найдены ссылки на тот элемент, который будет удален, то они заменяются на тот элемент, который остается. Дублем считается элемент справочника, у которого больше значение кода.

Скачать файл

ВНИМАНИЕ: Файлы из Базы знаний - это исходный код разработки. Это примеры решения задач, шаблоны, заготовки, "строительные материалы" для учетной системы. Файлы ориентированы на специалистов 1С, которые могут разобраться в коде и оптимизировать программу для запуска в базе данных. Гарантии работоспособности нет. Возврата нет. Технической поддержки нет.

Наименование По подписке [?] Купить один файл
Подсистема удаления дублей справочников
.cf 21,28Kb ver:1
116
116 Скачать (1 SM) Купить за 1 850 руб.

"Покажите мне свой справочник контрагентов и я скажу, какой у Вас порядок в учете".

Такая есть у 1С-ников поговорка.

Удаляете дубли - просто хотите спрятать свои проблемы?

Поймите правильно, я двумя руками за то, чтобы бороться с причиной, а не следствием. Обычная причина появления дублей справочников - или некорректный ввод новых элементов справочников (без проверки) или обмены. Причем, например, Вы можете использовать только типовые правила обмена и все равно столкнетесь с проблемой появления дублей.

Пример:

Ведется учет в ЗУП 2.5, БП 3.0 и УТ 11.1. Из ЗУП в БП только загружаются проводки и справочники. При этом поиск в типовых правилах ведется по наименованию и дате рождения физлица. Проверяется полное совпадение. При обмене между БП и УТ поиск только по уникальному идентификатору. Если в ЗУП не заполнить дату рождения, с высокой вероятностью, будут появляться дубли. В ситуации, например, когда ввели новое физлицо (сотрудника) и в ЗУП, и в УТ до обмена. Так как поиск не сработает.

В каких случаях полезно внедрение такой подсистемы?

Бывает, что обязанность за администрированием базы 1С лежит на специалисте 1С. В том числе проведение обменов, контроль данных. В таком случае присутствие или отсутствие дублей справочников будет для пользователей базы показателем качества ее обслуживания. Разумеется, надо бороться с причиной появления дублей. Рекомендую анализировать журнал регистрации или настроить отправку сообщений об удалении дублей себе на электронную почту.

Как установить подсистему себе в конфигурацию?

Код подсистемы, разумеется, открыт. Внедрение возможно в любую конфигурацию на управляемых формах на 1С 8.2 или 1С 8.3. Для внедрения подсистемы сделайте сравнение и объединение с файлом cf из этой публикации. Далее настройте регламентное задание, если необходим его запуск. Если не нужен, то зайдите в регистр Настройки удаления дублей. Добавьте записи для справочников с именем справочника, списком полей поиска, разделенными точкой с запятой. Пример настройки для справочников Физические лица и Сотрудники приведен на скриншоте.

После настройки удаление дублей возможно проводить либо запуском обработки, либо автоматически с помощью настроенного регламентного задания.

Если в базе найдены ссылки на тот элемент, который будет удален, то они заменяются на тот элемент, который остается. Дублем считается элемент справочника, у которого больше значение кода.

Алгоритм замены ссылок на удаляемый объект взят из типовой обработки поиска и замены значения из ИТС.

автоматическое удаление дублей справочников

См. также

Инструментарий разработчика Чистка данных Свертка базы Инструменты администратора БД Системный администратор Программист Руководитель проекта Платформа 1С v8.3 1С:ERP Управление предприятием 2 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х 1С:Управление нашей фирмой 3.0 Россия Платные (руб)

Инструмент представляет собой обработку для проведения свёртки или обрезки баз данных. Работает на ЛЮБЫХ конфигурациях (УТ, БП, ERP и т.д.). Поддерживаются серверные и файловые базы, управляемые и обычные формы. Может выполнять свертку сразу нескольких баз данных и выполнять их автоматически без непосредственного участия пользователя. Решение в Реестре отечественного ПО

8400 руб.

20.08.2024    14763    108    46    

108

Чистка данных Системный администратор Программист Платформа 1С v8.3 Управляемые формы 1C:Бухгалтерия 1С:Управление торговлей 10 1С:Управление торговлей 11 Платные (руб)

Данные обработки помогут Вам легко и, главное быстро, выполнить удаление любых данных в Ваших базах 1С на платформах 8.1-8.3. Обработки помогут легко просмотреть связи ссылок в виде дерева, выбрать что удалять, а что нет, используя любые отборы. Это позволит уменьшить объем лишней и не нужной информации в справочниках и документах, планах видов характеристик и др. объектах и облегчит работу с данными пользователям и Вам. Понятное расположение команд и настроек, в сочетании с описанием и справкой, еще упростят процесс. (Обновление от 29.06.2023, версия 4.2)

9600 руб.

22.02.2013    139198    264    144    

435

Чистка данных Системный администратор Программист Платформа 1С v8.3 Управляемые формы 1C:Бухгалтерия 1С:ERP Управление предприятием 2 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Розница 3.0 Платные (руб)

Позволяет удалить организации из любых из информационных баз 1С на управляемых формах (БП 3.0, УТ 11, КА 2, ERP 2, ЗУП 3.0, УНФ, Розница 2.0 и пр.). Главное требование - программа должна содержать справочник "Организации". Реализован самый быстрый алгоритм непосредственного удаления объектов. Работает даже на базах большого размера. Для ускорения работы алгоритма не запускается проверка контроля ссылочной целостности. Проверку учета можно запустить отдельно с помощью дополнительной обработки. Необходимо перед удалением самостоятельно проверить базу на наличие перекрестных ссылок разных организаций в одном документе. Эту дополнительную обработку проверки перекрестных ссылок по запросу предоставляем бесплатно нашим покупателям.

3582 руб.

16.03.2015    196826    217    82    

252

Чистка данных Программист Пользователь Платформа 1С v8.3 Управляемые формы 1С:Розница 2 1С:Управление нашей фирмой 1.6 1С:ERP Управление предприятием 2 1С:Зарплата и кадры государственного учреждения 3 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х 1С:Зарплата и Управление Персоналом 3.x Платные (руб)

Обработка позволяет удобно и выборочно удалить данные из базы 1С на управляемых формах например БП 3.0, УТ 11, КА 2, ERP, УНФ, ЗУП 3, Розница и др. Это могут быть как неиспользуемые элементы справочников, так и неактуальные организации. При этом есть возможность провести анализ пересечений документов с другими организациями и таким образом уберечься от того, что при удалении обороты по другой организации изменятся.

3350 руб.

28.11.2019    26422    62    16    

77

Оптовая торговля Логистика, склад и ТМЦ Чистка данных Программист Бухгалтер Пользователь Платформа 1С v8.3 Оперативный учет 1С:Управление торговлей 11 Россия Управленческий учет Платные (руб)

Если вы начали работать в программном продукте Управление Торговлей, редакция 11 или Комплексная Автоматизация редакция 2 и включили механизм учёта серий, то перейти обратно в учёт без серий будет не так-то просто. Сложность заключается в том, что нужно очистить серии в табличной части документа, например, Реализация Товаров и услуг. Предлагаем алгоритм перехода на учет без серий для программного продукта УТ11. (Очистка серий.)

2400 руб.

09.04.2019    29372    44    15    

46

Чистка данных Системный администратор Программист Бухгалтер Пользователь Управляемые формы 1C:Бухгалтерия Россия Платные (руб)

Решение по удалению дублей позволяет определить связанные элементы в двух синхронизированных базах в качестве оригиналов и избежать необходимости ручного сравнения объектов в базах перед синхронизацией.

3960 руб.

27.06.2018    19323    11    3    

16

Чистка данных Инструментарий разработчика Системный администратор Программист Платформа 1С v8.3 Абонемент ($m)

Очередная вариативная очистка кэша 1С с помощью Исполнителя 3.0.2.2.

1 стартмани

25.10.2023    5616    5    SerVer1C    26    

23

Чистка данных Программист Платформа 1С v8.3 Управляемые формы Платформа 1C v8.2 1C:Бухгалтерия 1С:ERP Управление предприятием 2 Бесплатно (free)

ВАЖНО!!! Очистку регистров накопления и регистров сведений рекомендуется делать пользователям со знанием дела и с осознанием последствий! Обработка поможет быстро очистить выбранный регистр. Делаю данную обработку в первую очередь для себя, т.к. были случаи, когда нужно было очищать регистры, а делать красиво и удобно времени не было.

06.02.2023    21621    1473    Neiron_1C    22    

18
Комментарии
Подписаться на ответы Инфостарт бот Сортировка: Древо развёрнутое
Свернуть все
1. Glebis 13 31.07.15 15:17 Сейчас в теме
Поиск дублей по неточному соответствию есть?
2. primat 3832 31.07.15 15:18 Сейчас в теме
(1) Glebis, пока нет, имеете в виду по частичному совпадению полей, да?
3. Glebis 13 31.07.15 15:27 Сейчас в теме
(2) ага именно.
Ещё вопросы:
- есть ли лог выполнения, в первую очередь интересует лог регламентного задания?
- есть ли возможность проводить проверку на дубль в ОбработкаПроверкиЗаполненияНаСервере элемента справочника? Очень бы пригодилась проверка с неточным соответствием...
- не понятно как отработает система, если будет, например, 2 физ лица, и только у одного из них будет заполнено поле ДР. Как я понял подсистема воспримет их как разные элементы.
- как подсистема определит бОльщий код, если код элементов с разными префиксами?
- используется ли полнотекстовый индекс? Мало ли..
- Вас реально зовут "Пафнутий"?
4. primat 3832 31.07.15 16:34 Сейчас в теме
(3) Glebis,
1) Лог, да, ведет, в таком виде - как на скриншоте.
2) Подобный алгоритм ведь есть в типовых конфигурациях (проверка перед записью). Возможно, лучше им воспользоваться. Т.к. другая немного задача.
3) Тут Вам решать. Если организация большая, то настройки лучше указать, как я привел на скриншоте. Тогда да, это будут разные элементы. Если фирма маленькая, то достаточно оставить только наименование и тогда дубль удалит. Но остается надеяться, что полные тезки не придут на работу в эту компанию.
4) Как сравнение строк определит.
5) Нет. Обычный метод НайтиСсылки.
6) Нет. Просто он человек хороший.
5. shum_ont 13 27.11.15 11:56 Сейчас в теме
а умеет ли она решать проблему с ключами аналитики в ут 11?
6. primat 3832 27.11.15 14:25 Сейчас в теме
(5) shum_ont, думаю, что да, надо проверить. Далее переписка лично.
7. mlashko 12 03.01.18 06:31 Сейчас в теме
8. Infector 202 03.01.18 18:48 Сейчас в теме
В пределах подчинения владельцу искать может? И учитывать пометки удаления.
9. bulas 214 31.07.18 08:37 Сейчас в теме
На релизе БП 3.0.61.47 - уже не работает.
10. primat 3832 12.12.19 12:59 Сейчас в теме
(9) Добрый день. А какая ошибка?
11. unefleur 13.10.20 11:23 Сейчас в теме
Здравствуйте! На новых версиях БП работает?
12. Anatoliy1977 18.06.21 13:07 Сейчас в теме
Появился поиск дублей по неточному соответствию?
Оставьте свое сообщение