Многопоточное удаление данных по организациям

30.11.20

Необходимо было предоставить разработчику тестовую базу на основании рабочей базы, без некоторых организаций. Сделали обработку, которая в несколько потоков удаляет документы, договоры, файлы, планы обмена и регистры сведений привязанные к организации, оставляя общие справочники и имеющиеся настройки в системе.

Скачать файл

ВНИМАНИЕ: Файлы из Базы знаний - это исходный код разработки. Это примеры решения задач, шаблоны, заготовки, "строительные материалы" для учетной системы. Файлы ориентированы на специалистов 1С, которые могут разобраться в коде и оптимизировать программу для запуска в базе данных. Гарантии работоспособности нет. Возврата нет. Технической поддержки нет.

Наименование		По подписке [?]	Купить один файл
Многопоточное удаление данных по организациям: .epf 14,17Kb ver:1.0 42	42	Скачать (5 SM)	Купить за 3 050 руб.

Обработка удаляет типовыми средствами данные из базы 1С в несколько потоков, из-за чего удаление данных ускоряется в разы. По умолчанию установлено 8 потоков, при тестирование на базе в 75 ГБ удаление данных с 2-х дней ускорилось до нескольких часов. Количество фоновых заданий можно менять.

Тестировал на платформе 8.3.17, клиент-серверный вариант, база: 1С:Управление холдингом (подходит для БСП 3.0).

обработка удаление фоновые задания мнопоточность потоки

+4 –1

См. также

Database Compression Tool (DCT) Универсальный инструмент сжатия, свертки и конвертации баз данных 1С

Инструментарий разработчика Чистка данных Свертка базы Инструменты администратора БД Системный администратор Программист Руководитель проекта Платформа 1С v8.3 1С:ERP Управление предприятием 2 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х 1С:Управление нашей фирмой 3.0 Россия Платные (руб)

Инструмент представляет собой обработку для проведения свёртки или обрезки баз данных. Работает на ЛЮБЫХ конфигурациях (УТ, БП, ERP и т.д.). Поддерживаются серверные и файловые базы, управляемые и обычные формы. Может выполнять свертку сразу нескольких баз данных и выполнять их автоматически без непосредственного участия пользователя. Решение в Реестре отечественного ПО

8400 руб.

20.08.2024 14999 109 46

108

Удаление данных с отбором и построением дерева ссылок в базах 1С 8.1-8.3 УТ 10.3./11, БП 2/3, ЗУП 2.5/3, КА 1.1/2, УНФ 1.6/3.0

Чистка данных Системный администратор Программист Платформа 1С v8.3 Управляемые формы 1C:Бухгалтерия 1С:Управление торговлей 10 1С:Управление торговлей 11 Платные (руб)

Данные обработки помогут Вам легко и, главное быстро, выполнить удаление любых данных в Ваших базах 1С на платформах 8.1-8.3. Обработки помогут легко просмотреть связи ссылок в виде дерева, выбрать что удалять, а что нет, используя любые отборы. Это позволит уменьшить объем лишней и не нужной информации в справочниках и документах, планах видов характеристик и др. объектах и облегчит работу с данными пользователям и Вам. Понятное расположение команд и настроек, в сочетании с описанием и справкой, еще упростят процесс. (Обновление от 29.06.2023, версия 4.2)

9600 руб.

22.02.2013 139220 264 144

435

Выборочное удаление организаций из информационных баз 1С (управляемые формы), с удалением всех ссылающихся на эти организации данных

Чистка данных Системный администратор Программист Платформа 1С v8.3 Управляемые формы 1C:Бухгалтерия 1С:ERP Управление предприятием 2 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Розница 3.0 Платные (руб)

Позволяет удалить организации из любых из информационных баз 1С на управляемых формах (БП 3.0, УТ 11, КА 2, ERP 2, ЗУП 3.0, УНФ, Розница 2.0 и пр.). Главное требование - программа должна содержать справочник "Организации". Реализован самый быстрый алгоритм непосредственного удаления объектов. Работает даже на базах большого размера. Для ускорения работы алгоритма не запускается проверка контроля ссылочной целостности. Проверку учета можно запустить отдельно с помощью дополнительной обработки. Необходимо перед удалением самостоятельно проверить базу на наличие перекрестных ссылок разных организаций в одном документе. Эту дополнительную обработку проверки перекрестных ссылок по запросу предоставляем бесплатно нашим покупателям.

3582 руб.

16.03.2015 197195 217 82

252

Универсальное удаление данных из базы 1С любые конфигурации на управляемых формах

Чистка данных Программист Пользователь Платформа 1С v8.3 Управляемые формы 1С:Розница 2 1С:Управление нашей фирмой 1.6 1С:ERP Управление предприятием 2 1С:Зарплата и кадры государственного учреждения 3 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х 1С:Зарплата и Управление Персоналом 3.x Платные (руб)

Обработка позволяет удобно и выборочно удалить данные из базы 1С на управляемых формах например БП 3.0, УТ 11, КА 2, ERP, УНФ, ЗУП 3, Розница и др. Это могут быть как неиспользуемые элементы справочников, так и неактуальные организации. При этом есть возможность провести анализ пересечений документов с другими организациями и таким образом уберечься от того, что при удалении обороты по другой организации изменятся.

3350 руб.

28.11.2019 26458 63 16

Алгоритм перехода на учет без серий для УТ11.4 или КА 2.4 (отказ от серий, удаление серий, отмена серий, без серий)

Оптовая торговля Логистика, склад и ТМЦ Чистка данных Программист Бухгалтер Пользователь Платформа 1С v8.3 Оперативный учет 1С:Управление торговлей 11 Россия Управленческий учет Платные (руб)

Если вы начали работать в программном продукте Управление Торговлей, редакция 11 или Комплексная Автоматизация редакция 2 и включили механизм учёта серий, то перейти обратно в учёт без серий будет не так-то просто. Сложность заключается в том, что нужно очистить серии в табличной части документа, например, Реализация Товаров и услуг. Предлагаем алгоритм перехода на учет без серий для программного продукта УТ11. (Очистка серий.)

2400 руб.

09.04.2019 29380 44 15

Очистка дублей в синхронизированных базах (УТ, БП, РТ, УНФ)

Чистка данных Системный администратор Программист Бухгалтер Пользователь Управляемые формы 1C:Бухгалтерия Россия Платные (руб)

Решение по удалению дублей позволяет определить связанные элементы в двух синхронизированных базах в качестве оригиналов и избежать необходимости ручного сравнения объектов в базах перед синхронизацией.

3960 руб.

27.06.2018 19326 11 3

Очистка кэша 1С на движке Исполнителя

Чистка данных Инструментарий разработчика Системный администратор Программист Платформа 1С v8.3 Абонемент ($m)

Очередная вариативная очистка кэша 1С с помощью Исполнителя 3.0.2.2.

1 стартмани

25.10.2023 5627 5 SerVer1C 26

Очистка регистра накопления. Очистка регистра сведений.

Чистка данных Программист Платформа 1С v8.3 Управляемые формы Платформа 1C v8.2 1C:Бухгалтерия 1С:ERP Управление предприятием 2 Бесплатно (free)

ВАЖНО!!! Очистку регистров накопления и регистров сведений рекомендуется делать пользователям со знанием дела и с осознанием последствий! Обработка поможет быстро очистить выбранный регистр. Делаю данную обработку в первую очередь для себя, т.к. были случаи, когда нужно было очищать регистры, а делать красиво и удобно времени не было.

06.02.2023 21727 1478 Neiron_1C 22

Комментарии

Подписаться на ответы Инфостарт бот

Свернуть все

1. Xershi 1563 16.11.20 16:27 Сейчас в теме

Изоляцию поток реализовывали?

2. 1cspec 117 16.11.20 19:39 Сейчас в теме

(1) Да. Обработка получает все данные и потом делит их на порции от количества потоков, на каждую порцию запускается фоновое задание.

3. Xershi 1563 16.11.20 21:17 Сейчас в теме

(2) так вопрос в том что при удалении данных, могут возникнуть блокировки. Просто поделить на потоки не проблема же.

4. 1cspec 117 17.11.20 00:44 Сейчас в теме

(3) Мы с такой проблемой не столкнулись, удаление было в базе 1С:Управление холдингом, удаляли 800 тыс. документов.

5. Алексей Воробьев 290 18.11.20 07:09 Сейчас в теме

(1) Не хватает информации: для каких конфигураций подходит обработка? Или абсолютно универсальна? Тогда почему договоры (и файлы) выделены как отдельный блок данных при подсчете количества?
Для УТ 10.3 подойдет, например, если запустить ее в тонком клиенте?

9. 1cspec 117 21.11.20 09:07 Сейчас в теме

(5) Подходит для всех конфигураций похожих на 1С:Бухгалтерия предприятия, ред. 3.0

6. jorelingo 10 18.11.20 13:38 Сейчас в теме

{ВнешняяОбработка.УдалениеДокументов.Форма.Форма.Форма(432)}: Ошибка при вызове метода контекста (Выполнить)
Задание = ФоновыеЗадания.Выполнить("ГПМ_ОбщегоНазначения.УдалитьОбъектов", НаборПараметров);

7. jorelingo 10 18.11.20 13:41 Сейчас в теме

(6) Метод задания не найден: ГПМ_ОбщегоНазначения:УдалитьОбъектов

8. 1cspec 117 21.11.20 09:06 Сейчас в теме

(7) Для создания фоновых заданий, нужно создать общий модуль с вызовом сервера "ГПМ_ОбщегоНазначения" и перенести из обработки процедуры: "УдалитьОбъектов", "УдалитьДвиженияДокумента".

10. Алексей Воробьев 290 22.11.20 15:06 Сейчас в теме

(9) Я прошу прощения, но ответ сей ввел меня в ступор... Тем более от разработчика...

Каким образом нужно определять степень "похожести" конфигураций??? Какими критериями руководствоваться? Какие справочники, документы, общие модули и другие объекты метаданных должны быть в наличии в конфигурации? Может быть, конкретизировать версию БСП?

Или просто БП 3 и все отраслевые на ней слепленные? Тогда начиная с какой версии?

Для разработки на 5$m слабо очерчены границы использования, кот в мешке по сути.
Упоминаний про управление холдингом и БП 3 в первом варианте публикации не было... Просто отметьте, пожалуйста, себе на будущее...

11. 1cspec 117 22.11.20 19:32 Сейчас в теме

(10) В основе базы "1с:Управление холдингом" заложена 1с:Бухгалтерия 3.0 КОРП, поэтому и написал так.
В обработке код универсальный, кроме 1 запроса, который обращается к справочнику договоры, справочнику файлы и версии файлов.
Если Вы разработчик и у Вас какая-то старая база вроде ут 10.3, то думаю Вам не составит труда скорректировать запрос, а если нет, то скачивать обработку и удалять что-то в базе не рекомендую.

12. Алексей Воробьев 290 22.11.20 19:55 Сейчас в теме

(11) Спорить о стоимости разработок бессмысленно и непродуктивно, стоимость в любом случае определяет автор - это ваше право. Но, если смотреть на эту конкретную разработку, то 15 минут уже дошли до 75-ти (5 скачиваний). И, думаю, это не предел. Судя по всему, тема востребованная... В качестве шутки: Вы собираетесь снизить цену до нуля, когда окупите все свое затраченное время на разработку и подготовку публикации?

Спасибо, что примерно пояснили требуемые трудозатраты для подгонки "под себя", возможно также воспользуюсь этой разработкой, раз код универсальный, за исключением одного запроса...

13. jorelingo 10 26.11.20 01:36 Сейчас в теме

ОШИБКА БП 3.0:
о причине:
{(22, 2)}: Таблица не найдена "РегистрСведений.ОбъектыСвязанныхФайлов"
<<?>>РегистрСведений.ОбъектыСвязанныхФайлов КАК ОбъектыСвязанныхФайлов

18. 1cspec 117 30.11.20 22:54 Сейчас в теме

(13) скачайте обновленную версию

14. Cyberhawk 135 26.11.20 11:48 Сейчас в теме

Для создания фоновых заданий, нужно создать общий модуль с вызовом сервера "ГПМ_ОбщегоНазначения" и перенести из обработки процедуры

В типовых на БСП можно вообще обойтись без внесения изменений в конфигурацию, воспользовавшись дополнительными (подключаемыми) обработками

15. 1cspec 117 30.11.20 13:37 Сейчас в теме

(14)Здравствуйте, что Вы имеете введу? Фоновые задания программо можно запускать только через общий модуль. Есть общий модуль, куда можно передать текст для выполнения фонового задания?

16. Cyberhawk 135 30.11.20 14:24 Сейчас в теме

(15) Есть. Например: "ДлительныеОперации.ВыполнитьПроцедуруМодуляОбъектаОбработки" (в разных версиях БСП расположение и имя метода могут отличаться).
Пример использования описан, например, здесь: https://infostart.ru/1c/articles/1112877/

17. 1cspec 117 30.11.20 22:54 Сейчас в теме

(16) спасибо, добавил в обработку

19. vicmos 42 20.01.22 22:14 Сейчас в теме

Добрый день, обработка не взлетела,
Бухгалтерия предприятия, редакция 3.0 (3.0.106.101)

Не найдена запись для узла ЭтотУзел
{ВнешняяОбработка.УдалениеДокументов.Форма.Форма.Форма(468)}:РС.Записать();
{ВнешняяОбработка.УдалениеДокументов.Форма.Форма.Форма(446)}:ОчиститьРегистрСведений(РС.Имя,Измерение.Имя,МассивОрганизаций);
{ВнешняяОбработка.УдалениеДокументов.Форма.Форма.Форма(491)}:УдалитьРегистры(ЕстьОрганизации,МассивОрганизаций);
{ВнешняяОбработка.УдалениеДокументов.Форма.Форма.Форма(78)}:ОчиститьБазуОтДанных(ЧислоПотоков,Массив);
{ВнешняяОбработка.УдалениеДокументов.Форма.Форма.Форма(66)}:УдалитьВсеДокументыНаСервере();

по причине:
Ошибка при выполнении обработчика - 'ПриЗаписи'
по причине:
Не найдена запись для узла ЭтотУзел
по причине:
Не найдена запись для узла ЭтотУзел