Поиск, замена и удаление дубликатов (тонкий и толстый клиент)

24.03.14

База данных - Чистка данных

Обработка работает на платформе 8.2. Имеет как обычную, так и управляемую форму. Предназначена для поиска дублирующихся объектов по установленным правилам сравнения, замены и последующей пометки на удаления и при необходимости полного удаления дубликатов.

Файлы

ВНИМАНИЕ: Файлы из Базы знаний - это исходный код разработки. Это примеры решения задач, шаблоны, заготовки, "строительные материалы" для учетной системы. Файлы ориентированы на специалистов 1С, которые могут разобраться в коде и оптимизировать программу для запуска в базе данных. Гарантии работоспособности нет. Возврата нет. Технической поддержки нет.

Наименование Скачано Купить файл
ПоискИУдалениеДубликатов.epf
.epf 58,30Kb
961 2 500 руб. Купить

Подписка PRO — скачивайте любые файлы со скидкой до 85% из Базы знаний

Оформите подписку на компанию для решения рабочих задач

Оформить подписку и скачать решение со скидкой

Обработка постоена по типу помощника. На первой странице устанавливается объект метаданных с которым предполагается работать. Список ограничен справочниками и видами характеристик (может быть расширен как угодно раскоменнтированием пары строк в коде). Для принятия решения что на что менять можно настроить критерии определения заменяемых объектов (заполнение реквизитов не учитывает табличные части). Правила сравнения должны включать как минимум одно правило. Вид сравнения "Равенство" и "Содержит". Условие "Содержит" работает аналогично конструкции "Подобно" в запросе. Виды сравнения могут быть расширены раскомментированием строк в коде. Дополнительные сравнения на Владельца и ЭтоГруппа жестко вшито в код во избежании роковых ошибок. В отборе можно ограничить выборку проверяемых данных. На второй странице можно просмотреть и отредактировать (удалить или поменять местами) список дубликатов. На третьей странице можно просмотреть список объектов, в которых будет произведена замена. На этом этапе ещё можно отказаться от выполнения без обработки. На последней странице можно выбрать либо пометку на удаление либо полное удаление замененных объектов. Физическое удаление производится после контроля ссылочной целостности. Обработка не учитывает структуру базы данных, поэтому после удаления дубликатов надо проверить на дубликаты и подчиненные объекты метаданных (например, после удаления дубликатов контрагентов, надо проверить на дубликаты и договора контрагентов).

Внимание! Обработка производит массовую модификацию объектов баз данных и (при определенных настройках) полное удаление объектов.  Поэтому знакомство с обработкой рекомендуется проводить на копиях баз данных. Разработчик ответственности за потерянные данные не несет.

Обработка включает в себя модифицированные части кода из широко известных универсальных обработок 1С.

Вступайте в нашу телеграмм-группу Инфостарт

См. также

Инструментарий разработчика Чистка данных Свертка базы Инструменты администратора БД Системный администратор Программист Руководитель проекта 1С:Предприятие 8 1С:ERP Управление предприятием 2 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х 1С:Управление нашей фирмой 3.0 Россия Платные (руб)

Инструмент представляет собой обработку для проведения свёртки или обрезки баз данных. Работает на ЛЮБЫХ конфигурациях (УТ, БП, ERP, УНФ, КА и т.д.). Поддерживаются серверные и файловые базы, управляемые и обычные формы. Может выполнять свертку одновременно в несколько потоков. А так же автоматически, без непосредственного участия пользователя. Решение в Реестре отечественного ПО

24900 руб.

20.08.2024    63610    333    162    

297

Чистка данных Системный администратор Программист 1С:Предприятие 8 1C:Бухгалтерия 1С:ERP Управление предприятием 2 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Розница 3.0 Платные (руб)

Позволяет удалить организации из любых из информационных баз 1С на управляемых формах (БП 3.0, УТ 11, КА 2, ERP 2, ЗУП 3, УНФ, Розница 3.0 и пр.). Главное требование - программа должна содержать справочник "Организации". Реализован самый быстрый алгоритм непосредственного удаления объектов. Работает даже на базах большого размера. Для ускорения работы алгоритма не запускается проверка контроля ссылочной целостности. Проверку учета можно запустить отдельно с помощью дополнительной обработки. Необходимо перед удалением самостоятельно проверить базу на наличие перекрестных ссылок разных организаций в одном документе. Эту дополнительную обработку проверки перекрестных ссылок по запросу предоставляем бесплатно нашим покупателям.

6100 руб.

16.03.2015    280470    254    83    

286

Чистка данных Системный администратор Программист 1С:Предприятие 8 1C:Бухгалтерия 1С:Бухгалтерия 1.6 1С:Бухгалтерия 3.0 1С:ERP Управление предприятием 2 1С:Зарплата и Управление Персоналом 3.x 1С:Управление нашей фирмой 1.6 1С:Управление нашей фирмой 3.0 1С:Управление торговлей 10 1С:Управление торговлей 11 1С:Розница 2 1С:Розница 3.0 Платные (руб)

Данные обработки помогут Вам легко и, главное быстро, выполнить удаление любых данных в Ваших базах 1С на платформах 8.1-8.3. Обработки помогут легко просмотреть связи ссылок в виде дерева, выбрать что удалять, а что нет, используя любые отборы. Это позволит уменьшить объем лишней и не нужной информации в справочниках и документах, планах видов характеристик и др. объектах и облегчит работу с данными пользователям и Вам. Понятное расположение команд и настроек, в сочетании с описанием и справкой, еще упростят процесс. (Обновление от 26.02.2026, версия 4.5, 4.6.0)

14640 руб.

22.02.2013    145638    288    153    

456

Чистка данных Программист Пользователь 1С:Предприятие 8 1С:Розница 2 1С:Управление нашей фирмой 1.6 1С:ERP Управление предприятием 2 1С:Зарплата и кадры государственного учреждения 3 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х 1С:Зарплата и Управление Персоналом 3.x Платные (руб)

Обработка позволяет удобно и выборочно удалить данные из базы 1С на управляемых формах например БП 3.0, УТ 11, КА 2, ERP, УНФ, ЗУП 3, Розница и др. Это могут быть неактуальные организации или другие перечни объектов. При этом есть возможность провести анализ пересечений документов с другими организациями и таким образом уберечься от того, что при удалении обороты по другой организации изменятся. Объекты нужно выбирать вручную и после этого запускать команду удаления. Будут удалены все ссылки на них.

5000 руб.

28.11.2019    30304    82    21    

97

Чистка данных Программист 1С:Предприятие 8 1C:Бухгалтерия 1С:ERP Управление предприятием 2 Платные (руб)

Если в вашей информационной базе крутится очень много данных, или база должна быть доступна 24/7 (как в моем случае), или же вы боитесь запускать тестирование и исправление, НО существует потребность удалить битые ссылки, тогда эта обработка сможет Вам помочь. Обработка выявляет битые ссылки как в самих объектах метаданных, так и в их табличных частях(!), а так же может их удалить.

5084 руб.

23.08.2021    12321    26    3    

32

Оптовая торговля Логистика, склад и ТМЦ Чистка данных Программист Бухгалтер Пользователь 1С:Предприятие 8 1С:Управление торговлей 11 Россия Управленческий учет Платные (руб)

Если вы начали работать в программном продукте Управление Торговлей, редакция 11 или Комплексная Автоматизация редакция 2 и включили механизм учёта серий, то перейти обратно в учёт без серий будет не так-то просто. Сложность заключается в том, что нужно очистить серии в табличной части документа, например, Реализация Товаров и услуг. Предлагаем алгоритм перехода на учет без серий для программного продукта УТ11. (Очистка серий.)

5084 руб.

09.04.2019    31730    48    15    

51

Чистка данных Инструменты администратора БД Системный администратор Программист 1С 8.3 1С:Управление торговлей 10 1С:Управление торговлей 11 1С:Библиотека стандартных подсистем Абонемент ($m)

Хочешь выборочно удалить одну организацию, тестовую номенклатуру или «мусорного» контрагента, любую ссылку - без ручного поиска ссылок и часовых разборок зависимостей? Этот инструмент сам строит дерево связей, каскадно чистит с "глубоким поиском" документы, справочники, пвх, любые ссылки, регистры, движения в так же делает резервную копию и за пару минут оставляет базу чистой и полностью работоспособной (Управляемые формы, обычный интерфейс)

1 стартмани

03.02.2026    2430    90    war41k    0    

25
Комментарии
Подписаться на ответы Инфостарт бот Сортировка: Древо развёрнутое
Свернуть все
1. makas 44 19.09.12 11:19 Сейчас в теме
Полезная штука. судя по описанию!
2. students 26.09.12 09:36 Сейчас в теме
Привет. Данная обработка может менять ссылки у подчиненных объектов как стандартная из УПП. Например (Контрагент - договора)
3. Kobra_RU 249 26.09.12 15:49 Сейчас в теме
(2) students,
Это вопрос? Я стандартные обработки как в УПП так и в других типовых конфигурациях не использую во избежании (был опыт использования встроенной обработки перепроведения документов).
Эта обработка не учитывает подчинение, т.к. не знает структуру конфигурации. Если мы делаем из 2 контрагентов одного, то результатом будет 1 контрагент с 2 договорами контрагентов (в простейшем случае) от первого и от второго контрагента по одному. Поэтому после этой операции надо чистить и договора контрагентов со сравнением на равенство организации и вида договора, например, или ещё по наименованию (если договоры учтены по номерам и т.п.).Аналогично, номенклатура и единицы измерения номенклатуры (в торговле и УПП) и т.п. А вообще попробуйте на копии базы и все сами увидите...
4. ds_square 07.12.12 09:44 Сейчас в теме
Отличная штука!Правда, каждый раз пользуюсь и боязно при большом кол-ве номенклатуры...
5. sorb 03.04.13 08:41 Сейчас в теме
Единственная адекватная замена типовой обработке "Поиск и замена дублирующихся элементов справочников" под УФ. Автору плюс и спасибо.
6. prodines 107 06.05.13 13:09 Сейчас в теме
Нет возможности вести поиск по владельцу - для тех же договоров контрагента.
7. Kobra_RU 249 06.05.13 15:43 Сейчас в теме
При поиске дубликатов владелец учитывается автоматически. То есть, если мы ведем поиск по совпадению наименований договоров, например, то в качестве дубликатов будут отобраны только те договора, в которых совпадает и наименование и владелец договора. Этот дополнительный элемент поиска жестко встроен в код во избежании фатальных невосстановимых изменений данных (например, замены во всех документах единицы измерения лишь одной номенклатуры).
8. kuza_87 28 08.08.13 07:34 Сейчас в теме
Автору большое спасибо, для управляемых форм больше ничего не нашел, а самому писать было лень
9. nmgmex 09.08.13 09:44 Сейчас в теме
потестируем) автору плюс
10. kuza_87 28 09.08.13 11:12 Сейчас в теме
Дубли на удаление нормально помечает, но не удаляет. Что сделать чтобы удалить дубли?
11. Kobra_RU 249 12.08.13 09:34 Сейчас в теме
Самое простое - не установлен флажок "Удалить замененные объекты с контролем ссылочной целостности".
А вообще различных вариантов может быть много. Например, у пользователя нет прав на удаление объектов.
Если объекты удаляются, но не все, надо запустить поиск ссылок и проверить не остались ли ещё не замененные реквизиты. Такие случаи могут быть вызваны особенностями конкретной конфигурации.
12. kuza_87 28 12.08.13 09:43 Сейчас в теме
(11) самое интересное что в тонком клиенте ссылки не удаляются, а в толстом под этим же пользователем с такими же правами удаляются.
13. Kobra_RU 249 12.08.13 12:41 Сейчас в теме
Проверил ещё раз на базе (файловый вариант). Все вроде бы работает нормально.
Обработка полностью открытая, поэтому советую Вам посмотреть в отладчике, в чем там проблема. Код там несложный и понятный, можно сделать выводы даже в серверном варианте без отладочного режима (функция УдалитьОбъектыНаКлиенте()). Если этим займетесь, сообщите о конкретной обнаруженной проблеме - исправлю...
14. BTRVODKA 10 15.09.13 04:43 Сейчас в теме
Спасибо автору за публикацию!
15. Aleksand1985 7 14.11.13 10:08 Сейчас в теме
Стартмани сняли, а файл не скачал! Обидно!
16. krolikofff 21.03.14 17:40 Сейчас в теме
Имеется файловая база, БП 2.0 (2.0.56.2), толстый клиент. На этапе "замена ссылок на дубликаты" возникает ошибка - Индекс находится за границами массива

{Форма.ФормаТК.Форма(1105)}: Индекс находится за границами массива
						Если Измерение.Тип.СодержитТип(ТипЗнч(Ссылка)) И НаборЗаписи[0][Измерение.Имя]=Ссылка Тогда


Как быть?
17. Kobra_RU 249 24.03.14 08:34 Сейчас в теме
Скорректировал в обработке код.
Вы можете исправить у себя:
						Для Каждого Измерение ИЗ Последовательность.Измерения Цикл
							Если Измерение.Тип.СодержитТип(ТипЗнч(Ссылка)) И НаборЗаписи[0][Измерение.Имя]=Ссылка Тогда
								НаборЗаписи[0][Измерение.Имя] = ПравильныйЭлемент;
								НадоЗаписывать = Истина;
							КонецЕсли;
						КонецЦикла;


на
					Если НаборЗаписи.Количество() > 0 Тогда
						Для Каждого Измерение ИЗ Последовательность.Измерения Цикл
							Если Измерение.Тип.СодержитТип(ТипЗнч(Ссылка)) И НаборЗаписи[0][Измерение.Имя]=Ссылка Тогда
								НаборЗаписи[0][Измерение.Имя] = ПравильныйЭлемент;
								НадоЗаписывать = Истина;
							КонецЕсли;
						КонецЦикла;
					КонецЕсли;
Показать
lamaker9876; ollega; Stranger777; Kesak; +4 Ответить
18. krolikofff 24.03.14 11:07 Сейчас в теме
19. sobeyko2008 18 26.03.14 21:21 Сейчас в теме
А как галочки поставить на то что я хочу удалить. Или удалять обязательно все объекты которые нашла обработка? А если я так не хочу?))
20. Kobra_RU 249 27.03.14 09:02 Сейчас в теме
Эта обработка задумана как технологический инструмент для быстрого и окончательного сноса дубликатов, возникших, например, при ошибках в схемах конвертации данных. Практически все видели, например, две валюты "рубли" с разными кодами. Если же есть желание оставить дубликаты, их можно только пометить на удаление, потом с помощью обработки "Удаление помеченных объектов" удалить, то что необходимо удалить, с остальных пометку снять. И, конечно, Вы можете доработать эту обработку.
21. Ifboop_Figure 63 17.04.14 16:34 Сейчас в теме
Отличная обработка. Спасибо!
22. @Sonya 28 02.06.14 10:09 Сейчас в теме
Очень нужная обработка, спасибо! Было бы супер, если бы функция Поменять местами работала для всех выделенных строк!
23. artfa 58 06.02.15 16:53 Сейчас в теме
годная обработка,
но в УТ 10.3 и РТ 1.0 ни в какую не захотела удалять одну и ту же (обмен УТ<>РТ), позицию номенклатуры, пришлось удалить непосредственно,

Для отправки сообщения требуется регистрация/авторизация