Параллельные вычисления - это просто

16.05.23

База данных - HighLoad оптимизация

Параллельные вычисления для новичков. Описание концепции, как быстро и просто распараллелить вычисления ваших задач. Можно использовать для распараллеливания сложных вычислений, для простой же обработки таблиц смысла нет, т.к. время на сбор таблицы после обработки, вероятно, будет больше, чем на саму обработку.

 

Если вы уже разобрались, что 1С не распараллеливает ваши задачи автоматически, а нагрузка на сервер не превышает 10% как бы вы ни старались, но вам очень хочется нагрузить сервер на 100%, то это сделать несложно.

Берем пару функций из темы //infostart.ru/1c/articles/1102674/, вставляем все это в какой нибудь общий модуль вместе с нижеследующим кодом, переделываем под себя и используем в ваших обработках процедуру "ОбработатьКоллекциюМногопоточно_ПроизвольнаяОбработка".

 
 Многопоточная обработка Таблицы Значений


 

См. также

HighLoad оптимизация Программист Платформа 1С v8.3 Бесплатно (free)

Метод очень медленно работает, когда параметр приемник содержит намного меньше свойств, чем источник.

06.06.2024    9259    Evg-Lylyk    61    

44

HighLoad оптимизация Программист Платформа 1С v8.3 Конфигурации 1cv8 Бесплатно (free)

Анализ простого плана запроса. Оптимизация нагрузки на ЦП сервера СУБД используя типовые индексы.

13.03.2024    5097    spyke    28    

49

HighLoad оптимизация Программист Платформа 1С v8.3 Бесплатно (free)

Оказывается, в типовых конфигурациях 1С есть, что улучшить!

13.03.2024    7573    vasilev2015    20    

42

HighLoad оптимизация Инструменты администратора БД Системный администратор Программист Платформа 1С v8.3 Конфигурации 1cv8 Абонемент ($m)

Обработка для простого и удобного анализа настроек, нагрузки и проблем с SQL сервером с упором на использование оного для 1С. Анализ текущих запросов на sql, ожиданий, конвертация запроса в 1С и рекомендации, где может тормозить.

2 стартмани

15.02.2024    12419    241    ZAOSTG    80    

115

HighLoad оптимизация Системный администратор Программист Платформа 1С v8.3 Конфигурации 1cv8 Абонемент ($m)

Принимать, хранить и анализировать показания счетчиков (метрики) в базе 1С? Почему бы нет? Но это решение быстро привело к проблемам с производительностью при попытках построить какую-то более-менее сложную аналитику. Переход на PostgresSQL только временно решил проблему, т.к. количество записей уже исчислялось десятками миллионов и что-то сложное вычислить на таких объемах за разумное время становилось все сложнее. Кое-что уже практически невозможно. А что будет с производительностью через пару лет - представить страшно. Надо что-то предпринимать! В этой статье поделюсь своим первым опытом применения СУБД Clickhouse от Яндекс. Как работает, что может, как на нее планирую (если планирую) переходить, сравнение скорости работы, оценка производительности через пару лет, пример работы из 1С. Все это приправлено текстами запросов, кодом, алгоритмами выполненных действий и преподнесено вам для ознакомления в этой статье.

1 стартмани

24.01.2024    5669    glassman    18    

40

HighLoad оптимизация Программист Платформа 1С v8.3 Конфигурации 1cv8 Абонемент ($m)

Встал вопрос: как быстро удалить строки из ТЗ? Рассмотрел пять вариантов реализации этой задачи. Сравнил их друг с другом на разных объёмах данных с разным процентом удаляемых строк. Также сравнил с выгрузкой с отбором по структуре.

09.01.2024    14010    doom2good    49    

71
Комментарии
Подписаться на ответы Инфостарт бот Сортировка: Древо развёрнутое
Свернуть все
1. Obertone 77 17.05.23 07:24 Сейчас в теме
Очень интересная реализация многопоточности.

Нечто схожее было по функциям map, filter, reduce:

https://infostart.ru/1c/articles/1689990/
https://web.archive.org/web/20150326183324///infostart.ru/public/191786/

Был ещё по этой теме доклад на хакатоне по 1C «iS THiS DESiGN» «Применение MapReduce в обработке данных 1С» Ильгиза Туальбаева, по нему даже конкретный итог на ГитХабе опубликован: https://github.com/ilgizvip/mapreduce
корум; brr; avalakh; artbear; +4 Ответить
2. starik-2005 3087 18.05.23 12:04 Сейчас в теме
Когда я слова на эту тему писал, 8.3.13 еще не было )))
корум; it_depDi; +2 Ответить
Оставьте свое сообщение