Свертка дублирующихся справочников (управляемые формы)

22.05.20

База данных - Чистка данных

+13 –1
> > >
  • Image 1.jpg
  • Image 2.jpg
  • Image 3.jpg
Инструмент, предназначенный для опытных специалистов, позволяющий удалять дубли в справочниках, с очень широкими возможностями. Если надо свернуть договоры по владельцу и наименованию, при этом правильным выбирать который не помечен на удаление или у которого код с префиксом - это ОНО. Для тех, кто пользуется переносами данных или просто появляются задвоения в справочниках, посвящается...

Скачать файлы

Наименование Файл Версия Размер
Свертка дублирующихся справочников (управляемые формы):
.epf 82,36Kb
11
.epf 82,36Kb 11 Скачать

Краткое описание возможностей и функционала:

  • Выискивание дублей может производиться как обычным сравнением в запросе, так и при помощи сложного алгоритма, созданного оператором.
  • Определение правильного элемента настраивается от автоматического (глупого) метода, до прописывания правил вручную.
  • Имеется возможность производить любые действия перед подменой ссылок.
  • Весь процесс может быть автоматизирован полностью и запускаться одной кнопкой.
  • Хелп достаточно подробный и даже с некоторыми примерами (писал исключительно для себя). Надеюсь, поможет.

Из минусов и осторожностей:

  • При неправильной настройке может сильно подвешивать сервер или выполняться оооочень долго.
  • Поиск дублей запросом в справочниках с владельцем приводит к ошибке, которую, увы, не придумал, как исправить. Поэтому в таких случаях лучше переходить на ручное сравнение.
  • Структура обработки максимально модульная, но, к сожалению, в некоторых местах допустил оплошности, из-за чего некоторые моменты кривовато-непонятные.

Инструмент создавался год назад и до сегодняшнего дня используется периодически. Правила свёртки для многих баз сохранены, и их даже не изменяю. Протоколирование уже не один раз спасало при работе с падучими серверами - всё упало, а я знаю, на каком элементе, и могу не спеша анализировать.

дубли свертка справочники

+13 –1

См. также

SALE! 10%

Выборочное удаление организаций из баз (управляемые формы), с удалением всех ссылающихся на эти организации данных

Чистка данных Платформа 1С v8.3 Управляемые формы Конфигурации 1cv8 Платные (руб)

Позволяет удалить организации из любых программ на управляемых формах (БП 3.0, УТ 11, КА 2, ERP 2, ЗУП 3.0, УНФ, Розница 2.0 и пр.). Главное требование - программа должна содержать справочник "Организации". Реализован самый быстрый алгоритм непосредственного удаления объектов. Работает даже на базах большого размера. Для ускорения работы алгоритма не запускается проверка контроля ссылочной целостности. Проверку учета можно запустить отдельно с помощью дополнительной обработки. Необходимо перед удалением самостоятельно проверить базу на наличие перекрестных ссылок разных организаций в одном документе. Эту дополнительную обработку проверки перекрестных ссылок по запросу предоставляем бесплатно нашим покупателям.

3980 3582 руб.

16.03.2015    111570    175    75    

211

Правильная свертка или свертка базы по правилам

Свертка базы Чистка данных Платформа 1С v8.3 Конфигурации 1cv8 Россия Платные (руб)

Обработка "Свертка базы по правилам" предназначена для свертки информационных баз системы программ "1С:Предприятие" версии 8.2. Основой обработки являются специальные правила свертки, которые создаются индивидуально для каждой конфигурации информационной базы. Встроенный в обработку генератор правил позволяет быстро создать правила свертки для любой конфигурации. Например, для конфигурации "1С:Бухгалтерия 8, ред. 3.0" правила свертки были созданы за 15 минут!

2400 руб.

22.07.2013    161738    607    527    

399

Удаление организаций из информационных баз 1С

Чистка данных Платформа 1С v8.3 Управляемые формы Конфигурации 1cv8 Россия Платные (руб)

Обработка предназначена для удаления организаций из любых информационных баз 1С, имеющих в своем составе справочник "Организации". Работает на обычных и управляемых формах, на базах любого формата и размера. Обработка проверялась на следующих типовых релизах 1С: БП 2.0.66.84, БП 3.0.71.77, БГУ 1.0.59.3, БГУ 2.0.65.17, УТ 10.3.55.3, УТ 11.4.10.57, ЗУП 3.1.11.106, ЗГУ 3.1.11.106, КА 2.4.9.98, УПП 1.3.126.1, УНФ 1.6.18.168, но должна работать и на более старых, так как обработке нужен только справочник "Организации".

3000 руб.

20.11.2019    26937    67    35    

72

Универсальное выборочное удаление данных из базы 1С (любые конфигурации на упр.формах: БП 3.0, УТ 11, КА 2, ERP, УНФ, ЗУП 3, Розница и т.д.)

Чистка данных Платформа 1С v8.3 Управляемые формы 1С:Розница 2 1С:Управление нашей фирмой 1.6 1С:ERP Управление предприятием 2 1С:Зарплата и кадры государственного учреждения 3 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х 1С:Зарплата и Управление Персоналом 3.x Платные (руб)

Обработка позволяет удобно выборочно удалить данные из базы 1С. Это могут быть как неиспользуемые элементы справочников, так и неактуальные организации. При этом есть возможность провести анализ пересечений документов с другими организациями и таким образом уберечься от того, что при удалении обороты по другой организации изменятся.

3350 руб.

28.11.2019    23525    39    16    

50

Пометка на удаление номенклатуры, которой нет на остатках и не было в оборотах за определенное время (кол-во месяцев), и перенос ее в указанную папку

Чистка данных Платформа 1С v8.3 1С:Управление торговлей 10 1С:ERP Управление предприятием 2 1С:Комплексная автоматизация 2.х Россия Управленческий учет Платные (руб)

Данная обработка определяет неликвидную номенклатуру, метит её на удаление и переносит её в указанную папку, что облегчает работу операторов организации для аналитики и многих процессов, связанных с товаром.

2280 руб.

03.06.2020    15832    12    13    

11

Замена Номенклатуры+Характеристики

Чистка данных Логистика, склад и ТМЦ Платформа 1С v8.3 План видов характеристик 1С:Комплексная автоматизация 1.х 1С:Управление производственным предприятием 1С:ERP Управление предприятием 2 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х Платные (руб)

Настраиваемая обработка, позволяющая заменить пару: Номенклатура+Характеристика в документах, их движениях и независимых регистрах сведений. Без перепроведения. Поможет, если вы по каким-то причинам решили отказаться от характеристик

3600 руб.

04.08.2015    40730    86    70    

47

Алгоритм перехода на учет без серий для программного продукта "Управление торговлей" редакция 11 или Комплексная Автоматизация редакция 2. (отказ от серий, удаление серий, отмена серий, без серий, УТ, КА)

Оптовая торговля Логистика, склад и ТМЦ Чистка данных Платформа 1С v8.3 Оперативный учет 1С:Управление торговлей 11 Россия Управленческий учет Платные (руб)

Если вы начали работать в программном продукте Управление Торговлей, редакция 11 или Комплексная Автоматизация редакция 2 и включили механизм учёта серий, то перейти обратно в учёт без серий будет не так-то просто. Сложность заключается в том, что нужно очистить серии в табличной части документа, например, Реализация Товаров и услуг. Предлагаем алгоритм перехода на учет без серий для программного продукта «Управление торговлей» редакция 11. (Очистка серий.)

2400 руб.

09.04.2019    28126    37    14    

39

Удаление битых ссылок 1С в базе без монопольного режима

Чистка данных Платформа 1С v8.3 Конфигурации 1cv8 Платные (руб)

Если в вашей информационной базе крутится очень много данных, или база должна быть доступна 24/7 (как в моем случае), или же вы боитесь запускать тестирование и исправление, НО существует потребность удалить битые ссылки, тогда эта обработка сможет Вам помочь. Обработка выявляет битые ссылки как в самих объектах метаданных, так и в их табличных частях(!), а так же может их удалить.

1800 руб.

23.08.2021    8994    14    3    

19
Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. корум 287 24.11.16 11:50 Сейчас в теме
(0) есть отличия от тысяч клонов?

Сам писал или переделка чего-то найденного?
strange2007; +1 – Ответить
2. strange2007 144 24.11.16 12:18 Сейчас в теме
Есть небольшие отличия гибкостью настроек и широтой возможностей. Например, можно сделать так, что дублем будут считаться элементы у которых владелец будет один из нескольких. Алгоритм можно внести любой, в зависимости от ситуации.
Так-же определение правильного элемента можно вертеть-крутить как угодно, в т.ч. и по кол-ву ссылок на тот или иной элемент.
С нагрузкой и информативностью можно много чего понаделать. Например, при поиске ссылок нагрузку на сервер можно увеличить, а при определении правильных сделать больше упор на информативность, чтобы примерно представлять сколько ещё часов всё будет работать.
И да, сам писал. Совсем сам.
корум; +1 – Ответить
3. корум 287 24.11.16 12:49 Сейчас в теме
Отлично :)
+ – Ответить
4. Agema 24.11.16 13:28 Сейчас в теме
Пока почитаю отзывы. Пригодится
+ – Ответить
5. strange2007 144 25.11.16 07:55 Сейчас в теме
Нашёл! Инструмент создавался примерно месяц. Из них 12 дней активной работы и 7 дней доработок по чуть-чуть
+ – Ответить
6. МимохожийОднако 140 30.11.16 08:10 Сейчас в теме
(0) В БП3.0 есть встроенная обработка ПоискИУдалениеДублей. Она сильно отличается функциональностью от данной обработки?
+ – Ответить
7. корум 287 30.11.16 09:40 Сейчас в теме
(6) по описанию, отличается сильно. при определении верного истинного элемента можно опираться на свой код, на "правильного" владельца, на нужный префикс и т.д.

Держу на заметке, но пока необходимости нет - не качаю.
+ – Ответить
9. strange2007 144 30.11.16 09:48 Сейчас в теме
(7) Так и я её первую версию (под ТК) делал от необходимости, а не от пальцегнутости)))))
По правде там ещё небольшая вкусность в полной автоматизации и в работе с нагрузкой на компы. Но это можно оценить в критических ситуациях
+ – Ответить
8. strange2007 144 30.11.16 09:41 Сейчас в теме
(6) Скорее всего отличия есть. Может плохо смотрел, но там не нашёл как свернуть дубль, например:
1. "Козлов Иван "
2. "Иван Козлов..."
+ – Ответить
10. Zhilyakovdr 142 30.11.16 17:48 Сейчас в теме
Не изобретайте велосипеды
http://infostart.ru/public/124277/
Открывать в режиме обычного приложения
+ – Ответить
11. strange2007 144 01.12.16 04:50 Сейчас в теме
(10) Это очень хорошая разработка, но она не перекрывает весь спектр задач, которые преследовал я. А именно там не нашёл информации по распределению нагрузки. Т.е. запусти я подобный инструмент на любом предприятии, где имеется приличная нагрузка на сервера и заказчик меня бы порвал))))))))
Так же там не нашёл каким образом сравнить, например, номенклатуру у которых:
1. Могут совпадать артикулы.
2. Если п.1 не выполняется, то сравнивать по набору свойств.
3. Если п.2 не выполняется, тогда сравнить по наличию остатков в базе.

Ну и я бы не хотел оказаться на месте оператора по свёртыванию с указанным Вами инструментом, когда необходимо проанализировать пару сотен тысяч дублей.

Хотя конечно же, может я там много галочек и кнопочек не нашёл. Не спорю.

В общем каждый сам для себя выбирает, что и как использовать. И да, для обычных форм подобный инструмент я создал в 2010 году)))))
+ – Ответить
12. Zhilyakovdr 142 01.12.16 10:05 Сейчас в теме
(11)
1) Любые технические работы выполняются когда сервер меньше всего нагружен, чаще всего ночью;
2) По поводу 3х пунктов, просто напросто создается три настройки;
3) Гнать с***ым веником тех людей которые так зас**ли базу;

"В общем каждый сам для себя выбирает, что и как использовать" - полностью согласен)))
А лучше всего, когда такие инструменты использовать не надо)))
strange2007; +1 – Ответить
13. Дмитрий74Чел 232 19.12.16 14:47 Сейчас в теме
(10) Ха-ха. А если сервер 1С в другоми домене и вообще в N км от разработчика? Например на Канарских островах? Для "обычного приложения" нужен толстый клиент - а он на узком канале просто не взлетит.
Плавали, знаем. Просто поместили базу в ЦОД крупного провайдера, но канал оказался не очень - только в тонком клиенте все работает.
P.s. Конфигураторы разрабов - в другом серваке. А на боевом - только главный страшный прог.
+ – Ответить
14. strange2007 144 20.12.16 07:15 Сейчас в теме
(13) Немного не понял что этим хотели сказать или в чём была ирония. Инструмент, предложенный в этой ветке использует средства 1С для передачи информации между сервером и клиентом, поэтому если всё остальное работает, то и инструмент должен справиться со своей задачей.
Или смысл в (13) был про другое? Уточните.
+ – Ответить
15. Zhilyakovdr 142 20.12.16 09:48 Сейчас в теме
(13) Про RDP и другие удаленки не слыхали.... У нас в организации около 30 своих точек и еще сеть франчази, все на нашей поддержке, разбросаны по всей стране. У большинства интернет через свистки и файловые БД и все работает нормально, а вы тут на ЦОДы жалуетесь....
+ – Ответить
16. dddxddd 17.01.17 12:43 Сейчас в теме
Пытаюсь свернуть дубли номенклатуры в БП 3.
На закладке "для запроса" при выборе "наименование" для метаданных "номенклатура" странный вариант отбора "<" ">" и т.д. интересно, это что имеется ввиду?
Пытаюсь в этой закладке отобрать для поиска дублей номенклатуру у которой одинаковые единицы измерения, но что-то не получается.
+ – Ответить
17. strange2007 144 20.01.17 07:17 Сейчас в теме
(16) На закладке "для запроса" задаются условия для запроса. Запросом выбирается начальный список который потом анализируется на элемент наличия дублей. Т.е. в этой закладке, например, можно выбрать только элементы без групп (ЭтоГруппа = Ложь ). Больше или меньше, это тоже условия для запроса. Например, если надо исходный список построить по условию "выбрать всех контрагентов у которых минимальное кол-во дней долга 10", тогда условие на этой закладке надо сделать "ДнейДолга > 9".
Описание поиска самих дублей описывается на второй закладке. В Вашем случае я бы сделал так:
На первой закладке запрос обрезал по группам, т.е.
ЭтоГруппа = Ложь
Т.о. будет выбран список состоящий только из элементов и без групп.

На второй закладке "Поиск дублей" добавить тоже только одну строку
ЕдиницаИзмерения Равенство
Т.о. сравниваться номенклатуры будут только по реквизиту ЕдиницаИзмерения.

На третей закладке "Определение правильного" рекомендуется только установить флаг "Поиск ссылок перед отображением дублей".
Т.о. для каждого элемента будут найдены все ссылки, чтобы при автоопределении правильного обработка выбирала правильным тот элемент, у которого больше всего ссылок.
И всё. Если больше условий нет, тогда можно запускать выполнение
dddxddd; +1 – Ответить
18. strange2007 144 20.01.17 07:20 Сейчас в теме
(16) Если база очень большая и там много кто работает, то надо "играться" с механизмом нагрузок. Тут чуть позапутаней, но оно того стоит.
Ах да, чтобы скорость не была слишком долгой, то не заставляйте механизм "нырять" сильно часто на клиента, но и слишком редко тоже плохо, т.к. не видно где он там копошится и сколько времени осталось.
+ – Ответить
19. borman 77 20.03.18 17:39 Сейчас в теме
информер показывает нечто странное
Прикрепленные файлы:
+ – Ответить
20. strange2007 144 21.03.18 07:40 Сейчас в теме
(19) Добрый день. Немного странно. Подскажите на какой операции это случилось?
+ – Ответить
21. borman 77 21.03.18 15:42 Сейчас в теме
Ну собственно на операции свертки дублей номенклатуры. Был установлен фильтр по ВидуНоменклатуры и 2 параметра сравнения: по Артикулу и Наименованию. Собственно, все. Никаких хитрых настроек не делалось. Конфигурация там допиленная УТ11.3.
Номенклатуры в базе много и дублей тоже. Информер дошел до "из них обработано" 20000 - и я прервал обработку.
Забавно еще то, что после этого мне никак не удается запустить в вашей обработке процесс поиска дублей - результат всегда пустой, хотя типовая обработка видит дубли по таким же параметрам.
+ – Ответить
22. pvb2003 31.07.19 17:32 Сейчас в теме
2 файла - какой качать ? Хоть версию поставьте , что бы было видно какой последний ...
kovyazin_open; +1 – Ответить
24. strange2007 144 22.05.20 11:40 Сейчас в теме
(22) Некрасиво получилось. Задвоение глупое. Сам недоглядел. Каюсь
+ – Ответить
23. GERDUSKA 15.05.20 16:43 Сейчас в теме
Спасибо! Очень помогла!
+ – Ответить
Оставьте свое сообщение