Подсистема автоматического удаления дублей в справочниках (управляемые формы, любая конфигурация)

17.08.22

База данных - Чистка данных

Подсистема позволяет проводить автоматическое удаление дублей справочников в соответствии с заданными настройками. Возможно встраивание в любую конфигурацию на управляемых формах. Позволяет задать настройки справочников, в которых ищутся дубли и также поля поиска совпадений. Есть регламентное задание для запуска проверки с заданным периодом. Если в базе найдены ссылки на тот элемент, который будет удален, то они заменяются на тот элемент, который остается. Дублем считается элемент справочника, у которого больше значение кода.

Скачать файлы

Наименование Файл Версия Размер
Подсистема удаления дублей справочников
.cf 21,28Kb
114
.cf 1 21,28Kb 114 Скачать

"Покажите мне свой справочник контрагентов и я скажу, какой у Вас порядок в учете".

Такая есть у 1С-ников поговорка.

Удаляете дубли - просто хотите спрятать свои проблемы?

Поймите правильно, я двумя руками за то, чтобы бороться с причиной, а не следствием. Обычная причина появления дублей справочников - или некорректный ввод новых элементов справочников (без проверки) или обмены. Причем, например, Вы можете использовать только типовые правила обмена и все равно столкнетесь с проблемой появления дублей.

Пример:

Ведется учет в ЗУП 2.5, БП 3.0 и УТ 11.1. Из ЗУП в БП только загружаются проводки и справочники. При этом поиск в типовых правилах ведется по наименованию и дате рождения физлица. Проверяется полное совпадение. При обмене между БП и УТ поиск только по уникальному идентификатору. Если в ЗУП не заполнить дату рождения, с высокой вероятностью, будут появляться дубли. В ситуации, например, когда ввели новое физлицо (сотрудника) и в ЗУП, и в УТ до обмена. Так как поиск не сработает.

В каких случаях полезно внедрение такой подсистемы?

Бывает, что обязанность за администрированием базы 1С лежит на специалисте 1С. В том числе проведение обменов, контроль данных. В таком случае присутствие или отсутствие дублей справочников будет для пользователей базы показателем качества ее обслуживания. Разумеется, надо бороться с причиной появления дублей. Рекомендую анализировать журнал регистрации или настроить отправку сообщений об удалении дублей себе на электронную почту.

Как установить подсистему себе в конфигурацию?

Код подсистемы, разумеется, открыт. Внедрение возможно в любую конфигурацию на управляемых формах на 1С 8.2 или 1С 8.3. Для внедрения подсистемы сделайте сравнение и объединение с файлом cf из этой публикации. Далее настройте регламентное задание, если необходим его запуск. Если не нужен, то зайдите в регистр Настройки удаления дублей. Добавьте записи для справочников с именем справочника, списком полей поиска, разделенными точкой с запятой. Пример настройки для справочников Физические лица и Сотрудники приведен на скриншоте.

После настройки удаление дублей возможно проводить либо запуском обработки, либо автоматически с помощью настроенного регламентного задания.

Если в базе найдены ссылки на тот элемент, который будет удален, то они заменяются на тот элемент, который остается. Дублем считается элемент справочника, у которого больше значение кода.

Алгоритм замены ссылок на удаляемый объект взят из типовой обработки поиска и замены значения из ИТС.

автоматическое удаление дублей справочников

См. также

Удаление данных с отбором и построением дерева ссылок в базах 1С 8.1-8.3 УТ 10.3./11, БП 2/3, ЗУП 2.5/3, КА 1.1/2, УНФ 1.6/3.0

Чистка данных Платформа 1С v8.3 Управляемые формы Конфигурации 1cv8 1С:Управление торговлей 10 1С:Управление торговлей 11 Платные (руб)

Данные обработки помогут Вам легко и, главное быстро, выполнить удаление любых данных в Ваших базах 1С на платформах 8.1-8.3. Обработки помогут легко просмотреть связи ссылок в виде дерева, выбрать что удалять, а что нет, используя любые отборы. Это позволит уменьшить объем лишней и не нужной информации в справочниках и документах, планах видов характеристик и др. объектах и облегчит работу с данными пользователям и Вам. Понятное расположение команд и настроек, в сочетании с описанием и справкой, еще упростят процесс. (Обновление от 04.10.2023, версия 4.2)

9600 руб.

22.02.2013    135759    248    144    

418

SALE! 10%

Выборочное удаление организаций из баз (управляемые формы), с удалением всех ссылающихся на эти организации данных

Чистка данных Платформа 1С v8.3 Управляемые формы Конфигурации 1cv8 Платные (руб)

Позволяет удалить организации из любых программ на управляемых формах (БП 3.0, УТ 11, КА 2, ERP 2, ЗУП 3.0, УНФ, Розница 2.0 и пр.). Главное требование - программа должна содержать справочник "Организации". Реализован самый быстрый алгоритм непосредственного удаления объектов. Работает даже на базах большого размера. Для ускорения работы алгоритма не запускается проверка контроля ссылочной целостности. Проверку учета можно запустить отдельно с помощью дополнительной обработки. Необходимо перед удалением самостоятельно проверить базу на наличие перекрестных ссылок разных организаций в одном документе. Эту дополнительную обработку проверки перекрестных ссылок по запросу предоставляем бесплатно нашим покупателям.

3980 3582 руб.

16.03.2015    113535    182    75    

217

Универсальное выборочное удаление данных из базы 1С (любые конфигурации на упр.формах: БП 3.0, УТ 11, КА 2, ERP, УНФ, ЗУП 3, Розница и т.д.)

Чистка данных Платформа 1С v8.3 Управляемые формы 1С:Розница 2 1С:Управление нашей фирмой 1.6 1С:ERP Управление предприятием 2 1С:Зарплата и кадры государственного учреждения 3 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х 1С:Зарплата и Управление Персоналом 3.x Платные (руб)

Обработка позволяет удобно выборочно удалить данные из базы 1С. Это могут быть как неиспользуемые элементы справочников, так и неактуальные организации. При этом есть возможность провести анализ пересечений документов с другими организациями и таким образом уберечься от того, что при удалении обороты по другой организации изменятся.

3350 руб.

28.11.2019    24243    45    16    

58

Замена Номенклатуры+Характеристики

Чистка данных Логистика, склад и ТМЦ Платформа 1С v8.3 План видов характеристик 1С:Комплексная автоматизация 1.х 1С:Управление производственным предприятием 1С:ERP Управление предприятием 2 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х Платные (руб)

Настраиваемая обработка, позволяющая заменить пару: Номенклатура+Характеристика в документах, их движениях и независимых регистрах сведений. Без перепроведения. Поможет, если вы по каким-то причинам решили отказаться от характеристик

3600 руб.

04.08.2015    41066    88    70    

49

Очистка дублей в синхронизированных базах (УТ, БП, РТ, УНФ)

Чистка данных Управляемые формы Конфигурации 1cv8 Россия Платные (руб)

Решение по удалению дублей позволяет определить связанные элементы в двух синхронизированных базах в качестве оригиналов и избежать необходимости ручного сравнения объектов в базах перед синхронизацией.

3960 руб.

27.06.2018    18782    10    3    

15

Удаление битых ссылок 1С в базе без монопольного режима

Чистка данных Платформа 1С v8.3 Конфигурации 1cv8 Платные (руб)

Если в вашей информационной базе крутится очень много данных, или база должна быть доступна 24/7 (как в моем случае), или же вы боитесь запускать тестирование и исправление, НО существует потребность удалить битые ссылки, тогда эта обработка сможет Вам помочь. Обработка выявляет битые ссылки как в самих объектах метаданных, так и в их табличных частях(!), а так же может их удалить.

2400 руб.

23.08.2021    9225    15    3    

20

Очистка регистров сведений от записей по помеченным на удаление элементам

Чистка данных Платформа 1С v8.3 Конфигурации 1cv8 Платные (руб)

в современных конфигурациях стало очень много регистров сведений, хранящих вспомогательную и периодическую информацию и администраторы информационных систем стали сталкиваться с проблемой удаления помеченных на удаление объектов, так как ссылки на них хранятся в многочисленных регистрах сведений. Помочь почистить базу от ненужных записей предназначенная данная внешняя обработка на управляемой форме, которая ищет записи во всех регистрах сведений по помеченным на удаление объектах и очищает по ним записи их после использования данной обработки дальше можно смело пользоваться типовой обработкой удаление помеченных на удаление и проблем с удалением не возникнет! Удачи всем!

1200 руб.

21.01.2022    7095    5    6    

9

Очистка кэша 1С. Исполнитель

Чистка данных Инструментарий разработчика Платформа 1С v8.3 Абонемент ($m)

Очередная вариативная очистка кэша 1С с помощью Исполнителя 3.0.2.2.

1 стартмани

25.10.2023    4498    4    SerVer1C    25    

22
Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. Glebis 13 31.07.15 15:17 Сейчас в теме
Поиск дублей по неточному соответствию есть?
2. primat 3632 31.07.15 15:18 Сейчас в теме
(1) Glebis, пока нет, имеете в виду по частичному совпадению полей, да?
3. Glebis 13 31.07.15 15:27 Сейчас в теме
(2) ага именно.
Ещё вопросы:
- есть ли лог выполнения, в первую очередь интересует лог регламентного задания?
- есть ли возможность проводить проверку на дубль в ОбработкаПроверкиЗаполненияНаСервере элемента справочника? Очень бы пригодилась проверка с неточным соответствием...
- не понятно как отработает система, если будет, например, 2 физ лица, и только у одного из них будет заполнено поле ДР. Как я понял подсистема воспримет их как разные элементы.
- как подсистема определит бОльщий код, если код элементов с разными префиксами?
- используется ли полнотекстовый индекс? Мало ли..
- Вас реально зовут "Пафнутий"?
4. primat 3632 31.07.15 16:34 Сейчас в теме
(3) Glebis,
1) Лог, да, ведет, в таком виде - как на скриншоте.
2) Подобный алгоритм ведь есть в типовых конфигурациях (проверка перед записью). Возможно, лучше им воспользоваться. Т.к. другая немного задача.
3) Тут Вам решать. Если организация большая, то настройки лучше указать, как я привел на скриншоте. Тогда да, это будут разные элементы. Если фирма маленькая, то достаточно оставить только наименование и тогда дубль удалит. Но остается надеяться, что полные тезки не придут на работу в эту компанию.
4) Как сравнение строк определит.
5) Нет. Обычный метод НайтиСсылки.
6) Нет. Просто он человек хороший.
5. shum_ont 13 27.11.15 11:56 Сейчас в теме
а умеет ли она решать проблему с ключами аналитики в ут 11?
6. primat 3632 27.11.15 14:25 Сейчас в теме
(5) shum_ont, думаю, что да, надо проверить. Далее переписка лично.
7. mlashko 11 03.01.18 06:31 Сейчас в теме
8. Infector 199 03.01.18 18:48 Сейчас в теме
В пределах подчинения владельцу искать может? И учитывать пометки удаления.
9. bulas 211 31.07.18 08:37 Сейчас в теме
На релизе БП 3.0.61.47 - уже не работает.
10. primat 3632 12.12.19 12:59 Сейчас в теме
(9) Добрый день. А какая ошибка?
11. unefleur 13.10.20 11:23 Сейчас в теме
Здравствуйте! На новых версиях БП работает?
12. Anatoliy1977 18.06.21 13:07 Сейчас в теме
Появился поиск дублей по неточному соответствию?
Оставьте свое сообщение