Выбор процессора для 1С: конец споров или начало?
База данных - HighLoad оптимизация
Компьютеры, принтеры, процессоры... (с)
ВВЕДЕНИЕ
Я давно уже занимаюсь проблемами производительности программного обеспечения и железа, поэтому решил поделиться с сообществом своим взглядом на данные проблемы как в части железа и настройки ОС (на примере запроса к данным, выгруженным из теста Гилева), так и в части подхода к архитектуре организации хранения данных (#тыжархитектор!)
Сначала я расскажу, какие данные я выгрузил из табличной части обработки тестирования производительности теста Гилева, как я это сделал, куда вставил и каким запросом получил результат для анализа. Далее мы пройдемся по списку процессоров и попробуем понять, от чего зависит производительность, а дальше я уже коснусь принципов организации данных для повышения производительности в тех или иных кейсах.
СБОР ДАННЫХ
Для сбора данных я использовал последнюю версию теста Гилева, в которой произвел тест своего компьютера - скромного ноутбука от HP с процессором Intel 8250U, 16 Гиб ОЗУ (2х8х2400 МГц) и SSD от SmartBuy - какой-то самый дешманский винт на полгига, который, кстати, работает быстрее основного винта от самсунга (SSD овер M2, 128 Гиг). Также в системе установлен Linux Mint с ядром 5.3.0.53 из стандартного репозитория, ядро это запускается без каких бы то ни было опций.
После теста файловой базы на экране отобразилось количество попугаев (80.65) и список произведенных тестов за всю тестовую историю (наверное).
Дальше я нажал правой кнопкой мышки на историю и выбрал выгрузку в тестовый файл колонок с периодом, именем пользователя, результатом теста, архитектурой, процессором.
В постгресе я создал табличку (без всяких там индексов) с полями: period, user, value, arch и proc, после чего попытался загрузить туда данные. Загрузка выдала ошибку в формате даты. После кучи попыток привести дату к вменяемому состоянию я натыкался на ошибку часового пояса, в качестве которого система пыталась интерпретировать поле с именем пользователя. В итоге трабла оказалась в разделителе, и поменяв ТАБ на "|" загрузка прошла. Вот команда, которой я преобразовал выгруженный файл в тот, который смог скушать постгрес:
sed -e 's/|/\_/g' \
-e 's/^\([0-9]\{2\}\)\.\([0-9]\+\)\.\([0-9]\+\)\s*[0-9:]\+\t/\3-\2-\1|/g' \
-e 's/\t/\|/g' \
-e 's/\([0-9]\+\)\,\([0-9]\+\)/\1\.\2/g' \
-e 's/||\B/|/g' \
-e '/||/d' \
gilev.txt > gilev1.txt
Здесь символ "\" означает перенос строки - в консоли Linux так делать можно и нужно.
Сначала я меняю все палки на подчеркивания, чтобы в последствии эти палки не были интерпретированы постгресом, как разделители. Дальше я меняю дату из формата ДД-ММ-ГГГГ ЧЧ:ММ:СС на ГГГГ-ММ-ДД, дальше меняю все ТАБ на "|", потом меняю запятые в дробном результате выгрузки на точки, потом меняю двойной разделитель в конце строки на одинарный (в случае, когда имя процессора отсутствует - это, обычно, клиент для Linux, в котором тест Гилева не может определить имя процессора - это можно сделать чтением /proc/cpuinfo - там есть и ядра, и частота, и вся прочая дичь). Дальше удаляю все строки, в которых идут два разделителя подряд - случаи, в которых значение теста равно нулю.
В итоге получаю файл с количеством строк, равным 227 493 (первая строка - заголовок):
$ head gilev1.txt -n 5
Период|Пользователь имя|Значение|Архитектура|Процессор наименование
2020-05-22|starik2005@bk.ru|80.65|Файловая|
2020-05-22|ssa2|28.25|SQL|Intel(R) Xeon(R) CPU E5-2640 v3 @ 2.60GHz
2020-05-22|SKUL-02@Eugenbot|24.39|SQL|Intel(R) Xeon(R) CPU E31275 @ 3.40GHz
2020-05-22|efsol@efsol.ru|13.23|SQL|Intel(R) Xeon(R) Gold 6242 CPU @ 2.80GHz
$ tail gilev1.txt -n 3
2014-04-10|sergey@savel.pro|7.58|SQL|Intel(R) Core(TM) i7-3770 CPU @ 3.40GHz
2014-04-10|sergey@savel.pro|7.53|SQL|Intel(R) Core(TM) i7-3770 CPU @ 3.40GHz
2014-04-10|sergey@savel.pro|7.59|SQL|Intel(R) Core(TM) i7-3770 CPU @ 3.40GHz
$wc gilev1.txt -ml
227493 16511743 gilev1.txt
Таким образом у нас здесь данные тестов с 4 октября 2014-го по 22 мая 2020-го, последний тест - мой (заметьте, нет названия процессора для Linux).
АНАЛИЗ
Для анализа данных я загрузил этот файл в постгрес - просто жамкнул правой кнопкой мышки в PgAdmin III на имени таблицы, выбрал "Импорт", выбрал файл, указал CSV, заголовок, кодировку и разделитель. Через секунду данные были загружены.
Дальше я написал вот такой вот запросик:
with
t
AS
(
select arch, case when proc is null then '-' else proc end as proc , max(value) as value
from gilevtest
group by arch,proc
)
select t1.arch, t1.proc, max(t1.value), min(t1.value), avg(t1.value), sum(1)
from gilevtest as t1
join t as t
on t.proc = case when t1.proc is null then '-' else t1.proc end and t.arch = t1.arch
where t1.value > t.value / 2 and t1.value < 150
--and t1.proc like '%Xeon%'
group by t1.arch,t1.proc
having sum(1) > 100
order by t1.arch, avg(t1.value) desc, t1.proc
Время выполнения этого запроса безо всяких индексов с первого раза всего ОДНА секунда.
Здесь я использовал общее табличное выражение - директива WITH, в котором я для каждого процессора получил среднее значение, чтобы потом убрать очень низкие результаты теста, которые были по всей видимости произведены в каких-то особенно плохих условиях. Фактически я здесь отрезаю все результаты, которые ниже половины среднего значения для этого процессора и выше 150. Ну и результат группирую по архитектуре и процессору, сортируя по убыванию среднего значения. Думаю, что можно было бы для этого использовать оконную функцию OVER, но до конца не понял, как ее тут применить )))
Кстати, там есть закомментированная строка с отбором по только по серверным процессорам Xeon - этим мы займемся между делом, попытавшись ответить на вопрос, какой же процессор имеет смысл тащить с китайских барахолок и сколько он стоит )))
Также я убрал процессоры, для которых было набрано меньше СОТНИ результатов тестирвоания.
РЕЗУЛЬТАТЫ
Я разделил в запросе результаты по архитектуре, так что посмотрим сначала на файловую базу.
Файловая база
> 80
Итак, для начала давайте посмотрим, какие процессоры в среднем дают больше 80 попугаев. В табличке ниже следующие колонки:
| arch | proc | Max | Min | Avg |
|---|---|---|---|---|
| Файловая | Intel(R) Core(TM) i9-9900K CPU @ 3.60GHz | 119,05 | 62,5 | 95,87 |
| Файловая | - = LINUX = - | 142.86 | 72.46 | 95.40 |
| Файловая | Intel(R) Core(TM) i7-6700K CPU @ 4.00GHz | 128.21 | 78.13 | 94.98 |
| Файловая | Intel(R) Core(TM) i7-8700K CPU @ 3.70GHz | 111.11 | 80.65 | 91.27 |
| Файловая | Intel(R) Core(TM) i7-9700K CPU @ 3.60GHz | 113.64 | 57.47 | 87.32 |
| Файловая | Intel(R) Core(TM) i7-4790K CPU @ 4.00GHz | 106.38 | 54.95 | 83.74 |
| Файловая | Intel(R) Core(TM) i7-7700K CPU @ 4.20GHz | 111.11 | 55.56 | 83.15 |
| Файловая | Intel(R) Core(TM) i5-9600K CPU @ 3.70GHz | 113.64 | 57.47 | 81.53 |
В итоге лидером у нас становится I9-9900K, что ожидаемо. Более быстрые процессоры от AMD просто не прошли ценз количества, т.к. AMD Ryzen 3900X показывает лучший результат, но его тестировали МЕНЕЕ ДЕСЯТИ раз.
На втором месте у нас безымянный процессор - это все процессоры, протестированные на платформе Linux в фвйловой базе - 303 результата. Где-то там есть и наш рабочий AMD Ryzen 3600, который в файловом тесте на платформе Linux набрал 125 попугаев, при том на винде эта цифра была в районе 80-ти, что как бы намекает...
Дальше идут разнообразные I7, замыкает топ лидеров I5-9600K. Думаю, что для бюджетных серверов этот процессор является самым предпочтительным по цене за попугай (если не считать Райзен 3600 с вдвое большим количеством потоков за немного меньшие деньги, или даже райзен 3500X, в котором потоков столько же, но в 4 раза больше кеша и цена ниже 10к, но т.к. тестов райзена очень мало, то считайте это моей субъективной оценкой).
70-80
| arch | proc | Max | Min | Avg |
|---|---|---|---|---|
| Файловая | Intel(R) Core(TM) i7-8700 CPU @ 3.20GHz | 108.7 | 56.18 | 79.40 |
| Файловая | Intel(R) Core(TM) i7-4790 CPU @ 3.60GHz | 96.15 | 48.08 | 78.87 |
| Файловая | Intel(R) Xeon(R) E-2288G CPU @ 3.70GHz | 98.04 | 54.95 | 74.68 |
| Файловая | Intel(R) Core(TM) i7-6700 CPU @ 3.40GHz | 100 | 50.51 | 74.24 |
| Файловая | Common KVM processor | 106.38 | 53.76 | 73.18 |
| Файловая | Intel(R) Core(TM) i7-7700 CPU @ 3.60GHz | 100 | 50.51 | 70.48 |
| Файловая | Intel(R) Core(TM) i7-4770 CPU @ 3.40GHz | 90.91 | 46.3 | 70.22 |
Итак, в списке процессоров со средним баллом в файловой между 70 и 80 у нас ожидаемо все те же процессоры от Intel, но без суффикса "К", т.е. с заблокированным множителем и их типа нельзя гнать. Это говорит о том, что в общем и целом я использую правильную методику тестирования и данные очень коррелируют с маркетинговыми выкладками от Intel, позиционирующую процессоры со свободным множителем, как более быстрые (но, правда, и более дорогие). Да, они действительно более быстрые - тест Гилева это доказал.
Здесь у нас появляется "самый крутой" XEON - E2288G, который смог добраться до 74,68 попугаев. В принципе это аналог I9-9900K по ядрам/потокам/частоте, да и рассчитан на всего ОДИН сокет, имеет 2-х канальную память и стоимость в районе 50к. Смысла в его приобретении не вижу никакого.
Ну и "Common KVM processor" тут тоже засветился, что говорит о том, что для виртуальных сред не все потеряно.
60-70
| arch | proc | Max | Min | Avg |
|---|---|---|---|---|
| Файловая | Intel(R) Core(TM) i5-4670 CPU @ 3.40GHz | 84.75 | 42.74 | 66.01 |
| Файловая | Intel(R) Xeon(R) CPU E5-2637 v4 @ 3.50GHz | 80.65 | 43.86 | 64.65 |
| Файловая | Intel(R) Xeon(R) CPU E5-2667 v3 @ 3.20GHz | 102.04 | 51.55 | 63.69 |
| Файловая | Intel(R) Core(TM) i5-3570K CPU @ 3.40GHz | 86.21 | 44.25 | 62.79 |
| Файловая | AMD Ryzen 5 2600 Six-Core Processor | 84.75 | 42.74 | 62.60 |
| Файловая | Intel(R) Core(TM) i3-4170 CPU @ 3.70GHz | 76.92 | 40.32 | 62.11 |
| Файловая | Intel(R) Core(TM) i3-8100 CPU @ 3.60GHz | 78.13 | 42.74 | 61.41 |
| Файловая | Intel(R) Core(TM) i5-7400 CPU @ 3.00GHz | 81.97 | 41.32 | 61.29 |
| Файловая | Intel(R) Core(TM) i3-7100 CPU @ 3.90GHz | 83.33 | 44.25 | 61.19 |
| Файловая | Intel(R) Core(TM) i5-3570 CPU @ 3.40GHz | 79.37 | 40.65 | 61.15 |
| Файловая | Intel(R) Core(TM) i5-4460 CPU @ 3.20GHz | 87.72 | 44.25 | 60.79 |
| Файловая | Intel(R) Xeon(R) CPU E3-1230 V2 @ 3.30GHz | 75.76 | 39.06 | 60.78 |
| Файловая | Intel(R) Core(TM) i3-6100 CPU @ 3.70GHz | 79.37 | 40 | 60.50 |
| Файловая | Intel(R) Core(TM) i7-3770 CPU @ 3.40GHz | 80.65 | 41.32 | 60.16 |
| Файловая | Intel(R) Core(TM) i5-3550 CPU @ 3.30GHz | 83.33 | 41.67 | 60.13 |
Вот тут уже интересно - появляются базарные Xeon'ы, которые в принципе имеет смысл тащить с Китая, но их цены будут далеко не три копейки - ройте алик. Среди них выделяется E5-2667 v3, который в максимуме преодолевает планку в сотню попугаев, при том его цена на алике в районе 200 долларов, на e-bay - в районе 7к рублей, а в местной рознице - 140к, что как бы намекает бессмысленность его покупки у местных барыг )))
Также тут появился первый процессор от AMD, который в пределе набирает здесь 84,75 попугаев. Но это винда, а на Linux даже мой Ryzen 1600 набирает в пределе 89 попугаев, при этом ZEN+ должен набирать где-то под СТО (т.к. Ryzen 3600 на ZEN2 набирает 125).
Продолжать рассказ про файловую я не буду, т.к. процессор, который показал средний балл ниже 60-ти попугаев, в принципе недостоин быть в качестве камня для работы с 1С.
ИТОГИ ТЕСТА ФАЙЛОВОЙ
Итак, по итогам теста объективно самое лучшее решение для малобюджетного компьютера для 1С (например, компьютер разработчика с множеством файловых баз) - это компьютер на базе i5-9600K за 15 тысяч рублей (стоимость процессора). Субъективно же в качестве самого бюджетного лидера лично я бы взял AMD Ryzen 3600 или 3500X, кои в тесте отсутствуют из-за очень небольшого количества проведенных на них тестов, а эти тесты не могут показать объективную картину.
SQL - КЛИЕНТ-СЕРВЕРНЫЙ ВАРИАНТ
Я здесь не разделял PostgreSQL и MS SQL, т.к. для однопоточного теста Гилева разница средних значений для них несущественна.
> 40
| arch | proc | Max | Min | Avg |
|---|---|---|---|---|
| SQL | Intel(R) Core(TM) i9-9900K CPU @ 3.60GHz | 68.49 | 34.25 | 46.43 |
| SQL | - = LINUX = - | 76.92 | 38.76 | 45.53 |
| SQL | Intel(R) Core(TM) i7-6700K CPU @ 4.00GHz | 68.49 | 34.25 | 44.75 |
| SQL | Intel(R) Core(TM) i5-9600K CPU @ 3.70GHz | 62.5 | 31.65 | 44.52 |
| SQL | Intel(R) Core(TM) i7-4790K CPU @ 4.00GHz | 64.1 | 32.26 | 43.30 |
| SQL | Intel(R) Core(TM) i7-7700K CPU @ 4.20GHz | 64.1 | 32.26 | 42.81 |
| SQL | Intel(R) Xeon(R) Gold 6144 CPU @ 3.50GHz | 60.98 | 30.67 | 42.04 |
| SQL | Intel(R) Xeon(R) Gold 6154 CPU @ 3.00GHz | 67.12 | 33.78 | 41.74 |
| SQL | Intel(R) Xeon(R) W-2145 CPU @ 3.70GHz | 58.14 | 29.24 | 41.72 |
| SQL | Intel(R) Core(TM) i7-8700K CPU @ 3.70GHz | 65.79 | 33.11 | 41.10 |
| SQL | Intel(R) Xeon(R) Gold 5122 CPU @ 3.60GHz | 52.63 | 26.6 | 40.89 |
| SQL | Intel(R) Xeon(R) CPU E5-2643 v4 @ 3.40GHz" | 68.49 | 34.25 | 40.70 |
| SQL | Intel(R) Xeon(R) Gold 6254 CPU @ 3.10GHz | 54.95 | 28.41 | 40.31 |
Итак, тесты процессоров, у которых больше СОРОКА попугаев, тоже вполне ожидаемы. На первом месте опять I9-9900K, на втором все процессоры, которые тестировались на платформе Linux, соответственно независимо от процессора это был PostgreSQL - таких тестов 838. Это снова говорит о том, что даже несмотря на процессор, скульный тест под Lniux уступил только ТОПчику. Я бы тут сделал еще один возможно неправильный вывод, что Linux и Postgres - это ТОПчик. Предположу, что вклад сюда могли внести и вычеркнутые из тестов на винде процессоры AMD - там они не вычеркнуты, т.к. сами процессоры нет возможности определить, ибо тест Гилева не собирает данные о процессорах при работе под Linux'ом.
Также здесь у нас снова появляется I5-9600К - он здесь на ЧЕТВЕРТОМ месте. Поэтому я, лично, объективно признаю этот процессор самым эффективным по отношению цена/производительность. Т.к. рекомендуется, чтобы количество пользователей на ядро не превышало 10, то этот процессор смог бы дать работать 50-ти пользователям без особых напрягов.
30-40
| arch | proc | Max | Min | Avg |
|---|---|---|---|---|
| SQL | Intel(R) Core(TM) i7-8700 CPU @ 3.20GHz | 56.18 | 28.57 | 39.49 |
| SQL | Intel(R) Xeon(R) Gold 6134 CPU @ 3.20GHz | 51.55 | 25.91 | 38.96 |
| SQL | Intel(R) Xeon(R) CPU E5-2667 v3 @ 3.20GHz | 62.5 | 31.45 | 38.67 |
| SQL | Intel(R) Xeon(R) Gold 6128 CPU @ 3.40GHz | 54.35 | 27.47 | 37.84 |
| SQL | Intel(R) Xeon(R) CPU E5-2643 v3 @ 3.40GHz | 48.08 | 24.15 | 36.55 |
| SQL | Intel(R) Xeon(R) CPU E5-1650 v4 @ 3.60GHz | 49.5 | 24.88 | 36.49 |
| SQL | Intel(R) Xeon(R) CPU E3-1270 v6 @ 3.80GHz | 52.08 | 26.18 | 36.23 |
| SQL | Intel(R) Xeon(R) E-2186G CPU @ 3.80GHz | 47.62 | 26.46 | 35.54 |
| SQL | Intel(R) Core(TM) i7-4790 CPU @ 3.60GHz | 51.55 | 25.91 | 35.25 |
| SQL | Intel(R) Xeon(R) Gold 6136 CPU @ 3.00GHz | 50 | 25.13 | 34.88 |
| SQL | Intel(R) Xeon(R) CPU E5-2637 v4 @ 3.50GHz | 46.3 | 23.26 | 34.81 |
| SQL | Intel(R) Core(TM) i7-4770 CPU @ 3.40GHz | 50.51 | 25.51 | 34.74 |
| SQL | Intel(R) Core(TM) i7-7700 CPU @ 3.60GHz | 49.02 | 24.63 | 34.53 |
| SQL | Intel(R) Xeon(R) CPU E3-1270 V2 @ 3.50GHz | 43.48 | 21.83 | 33.72 |
| SQL | Intel(R) Core(TM) i7-3770K CPU @ 3.50GHz | 47.62 | 24.15 | 33.64 |
| SQL | Intel(R) Xeon(R) CPU E5-2690 0 @ 2.90GHz | 61.73 | 31.06 | 33.51 |
| SQL | Intel(R) Xeon(R) Gold 6126 CPU @ 2.60GHz" | 47.62 | 24.15 | 33.04 |
| SQL | Intel(R) Xeon(R) CPU E5-1650 v2 @ 3.50GHz | 45.45 | 22.73 | 32.89 |
| SQL | Intel(R) Xeon(R) CPU E3-1220 v3 @ 3.10GHz | 43.86 | 22.03 | 32.68 |
| SQL | Intel(R) Xeon(R) CPU E5-2667 v4 @ 3.20GHz | 46.73 | 23.47 | 32.60 |
| SQL | Intel(R) Xeon(R) CPU E5-2623 v3 @ 3.00GHz | 43.86 | 22.32 | 32.56 |
| SQL | Intel(R) Xeon(R) Silver 4210 CPU @ 2.20GHz | 43.1 | 22.52 | 32.38 |
| SQL | Intel(R) Xeon(R) CPU E3-1220 V2 @ 3.10GHz | 40.98 | 20.66 | 32.34 |
| SQL | Intel(R) Core(TM) i7-3820 CPU @ 3.60GHz | 47.17 | 23.7 | 31.94 |
| SQL | Intel(R) Xeon(R) CPU E3-1270 v3 @ 3.50GHz | 42.74 | 22.52 | 31.54 |
| SQL | Intel(R) Xeon(R) CPU E5-2667 v2 @ 3.30GHz | 45.45 | 22.73 | 31.48 |
| SQL | Intel(R) Xeon(R) CPU E5-2643 0 @ 3.30GHz | 47.62 | 24.04 | 31.35 |
| SQL | Intel(R) Core(TM) i7-3770 CPU @ 3.40GHz | 42.37 | 21.19 | 31.23 |
| SQL | Intel(R) Xeon(R) CPU E3-1240 v5 @ 3.50GHz | 44.25 | 22.32 | 30.76 |
| SQL | Intel(R) Xeon(R) CPU E3-1240 v3 @ 3.40GHz | 40.65 | 20.33 | 30.14 |
| SQL | Intel(R) Core(TM) i3-4330 CPU @ 3.50GHz | 33.33 | 17.99 | 30.08 |
Здесь уже процессоров куда больше. Радует появление в списке уже отметившегося в файловой базе E5-2667 v3 со средним значением в 38 попугаев, что делает его отличным вариантом для корпоративного использования, т.к. в нем 4 канала памяти и поддержка двух сокетов, что в пределе дает 16 ядер и 32 потока, которых должно хватить на обслуживание 200-300 пользователей с максимально возможной производительностью.
Смысла рассматривать процессоры, которые дали в среднем меньше 30 баллов, на мой взгляд нет.
ИТОГИ ТЕСТА SQL
Клиент-серверная база работает совсем не так, как файловая. В ней ПО, отвечающее за хранение данных, отделено от кода сервера приложений, поэтому скорость работы одного пользователя с такой базой будет в ДВА раза МЕНЬШЕ, т.к. 1С берет данные не из своего файлового хранилища, а запрашивает из внешней СУБД. Но если пользователей очень много, то клиент-серверный вариант обеспечивает производительность параллельной работы. И если в файловой базе без использования таких фич, как публикация на веб-сервере, скорость работы даже 10-ти пользователей может упереться в скорость обмена данными по сети, а если все это происходит на одном компьютере (например, когда все подключаются через удаленный рабочий стол), то все будет упираться в исключительные блокировки таблиц при записи данных, которые будут вынуждать остальных пользователей ждать, при этом перед любой транзакцией файловая база будет искать файлы блокировок и разбираться, какие ресурсы заблокированы, а какие - нет. Поэтому при работе даже двух пользователей файловая база иногда начинает тормозить.
На мой взгляд, по отношению цены и качества в клиент-серверном варианте побеждает опять I5-9600K за 15 тысяч рублей. Для работы до 50-ти пользователей этот процессор на мой скромный взгляд, основанный на результатах теста и количестве ядер, будет оптимальным. Субъективно же более дешевый AMD Ryzen 3500X будет не хуже, а 3600-й - лучше, т.к. у него в 2 раза больше потоков, что в пределе может обеспечить работу 100-ни пользователей клиент-серверной базы в комфортной зоне.
Среди процессоров класса Enterprise, к которым относятся процессоры Intel Xeon и AMD Epyc (тестов которых бескрайне мало), то объективно лучшим процессором по цене за попугай будет E5-2667 v3, т.к. он поддерживает ДВА сокета и может обеспечить приемлемой производительностью 200-300 пользователей на своих 16 ядрах и 32-х потоках и 4-х канальной памятью.
Среди дорогих процессоров этого сегмента самым лучшим для 1С будут Xeon(R) Gold 6144, у которого из этой серии максимальная частота в стоке и в бусте, но ценник в 3 килобакса за камень как бы намекает, что если у тебя меньше 300 пользователей, то это не для тебя. Этот процессор может быть установлен в плату с ЧЕТЫРЬМЯ сокетами и имеет 6-канальный контроллер памяти, что делает возможным собрать систему из 32-х ядер и 64-х потоков, которые могут дать вполне хорошо работать уже 600-м пользователям. Его собрат Xeon(R) Gold 6146 имея чуть более низкую частоту в стоке и в полтора раза большее количество ядер уже может позволить не сильно напрягаясь работать почти 1000 пользователей при 4-х сокетной сборке, стоимость и энергопотребление которой заставит взывать даже тех, кто покупает игровые компы на базе I9-9900X за пол-ляма.
ОБЩИЙ ИТОГ
Объективно побеждает у нас I9-9900K, который и в файловой, и в серверной в среднем набрал больше всех баллов. Но он не сильно выиграл у более дешевого I5-9600K, который я бы назвал лучшим процессором для компьютера разработчика 1С (если, конечно, Вы предвзято относитесь к процессорам на ZEN2 от AMD) и для небольшой компании, в которой с 1С одновременно работает не более 50-ти пользователей.
НАСТРОЙКА ПРОИЗВОДИТЕЛЬНОСТИ
Тесты хорошо показали, что один и тот же процессор как в файловой, так и в клиент-серверной базе может работать быстро, а может и тупить. Основная причина "тупизны" - это "сбалансированная" схема управления питанием, которая большую часть времени держит процессор на низкой частоте. Она в Windows является значением по-умолчанию, поэтому администратор легко может и забыть об этом, оставив все как есть. В 100% случаев установка максимальной производительности позволит повысить результат теста Гилева в полтора-два раза, а то и в три-четыре. Это в большей мере справедливо для серверной базы, но и в файловой такая настройка увеличит количество попугаев.
Т.е. первый совет самый простой - переключить схему энергопотребления сервера в режим высокой производительности.
Так же стоит обратить внимание на частоту памяти и на производительность дисковой подсистемы (IOPS). Чем больше эти цифры, тем выше скорость работы 1С.
Вообще, 1С - это стековая виртуальная машина интерпретатора, которая исполняя код кладет команды в стек и дальше вызывает функции, реализующие код команд на уровне процессора. При этом сначала строка разбирается, определяются функции, которые должны быть вызваны - присваивание, ветвление, встроенные функции и процедуры, вычисление выражений и т.д. Также происходят вызовы сервиса хранилища данных, в которые передается преобразованный текст запроса (если говорить о клиент-серверной базе, но в любом случае запрос к хранилищу данных вызывает кучу ожиданий на вводе-выводе или сетевом обмене). И если система работает с данными, сохраненными в базе, то 1С производит кучу чтений из хранилища или кучу запросов к СУБД, которые предварительно преобразовываются. И тут причина того, что файловая база работает быстрее в однопоточном тесте в том, что не нужно ждать от СУБД данных - они читаются из файла файловой базы, содержимое которого находится в кеше ОС. Да, содержимое таблиц в СУБД тоже закешировно, но все-равно остается ожидание ответа запроса от другого процесса.
При этом скорость при включении профиля высокой производительности сильно растет из-за того, что процессор, переключаясь между контекстами выполнения кода 1С, ожидания на вводе-выводе и кода СУБД, производит изменение частоты конкретного ядра, занятого чем-либо. Пока сканируется память, работающая на более низкой частоте, чем частота процессора, пока читается файл, пока переключается контекст - все это вызывает циклы ожидания, и режим сбалансированной производительности снижает частоту ждущего ядра, пытаясь сэкономить электричество. При переключении в режим высокой производительности частота процессора может снижаться не так сильно и не так много времени нужно системе, чтобы восстановить максимально возможную частоту в бусте.
Из-за этого нужно не только включать высокую производительность, но и механизм Turbo-Boost, который позволяет системе работать куда быстрее стоковых частот. Благодаря этому даже процессоры со стоковой частотой в 1,6ГГц (как у меня) могут набрать в тесте Гилева более 80-ти баллов, при том субъективно работа в файловой базе ЕРП 2.4 на моем ноутбучном процессоре происходит куда быстрее, чем на рабочем 2ГГц Xeon с 32-мя ядрами - кто-то забыл грамотно настроить сервер.
ДАННЫЕ
Какой бы ни был быстрый и настроенный сервер, всегда найдутся данные, которые его завалят. Поэтому грамотная архитектура здесь, как говорится, "Must Have".
В основном запросы, которые кладут сервер, достаточно просты и однообразны и реализуют какое-нибудь декартово произведение достаточно большой таблицы на саму себя. Например, если соединить таблиц из 100к записей с самим собой, то на выходе мы получим 100 000 000 000 строк (я просто 100к умножил на 100к). Такой запрос легко убьет любую базу на любом сервере, ибо сто лярдов строк даже по килобайту дадут терабайт возвращаемой инфы, что повесит любой супермощный и отлично настроенный сервак. Отсюда как бы совсем простой и очевидный совет так не делать. А сделать так может пользователь, который, например, вызовет отчет без фильтрации, который в своей логике подразумевает эту фильтрацию в той или иной мере. Ну или отбор по реквизиту регистратора укажет, и если это бухгалтерский регистр, то регистраторов у него может быть очень много, и каждый регистратор станет соединением, что может создать очень нехорошую нагрузку на сервер.
Здесь мы можем подойти к двум видам баз данных - OLTP и OLAP. Первая база - это хранилище транзакций, вторая - большой регистр всего и вся для отчетов. Преобразуя логику отчетов из прямого доступа к регистрам бухгалтерии и документам к логике отдельного хранилища можно добиться роста производительности системы и снижения нагрузки на систему.
В принципе OLAP и OLTP могут быть элементами одной базы, но лично я бы эти базы данных разделил, т.к. для каждой базы могут существовать разные настройки, позволяющие ей работать максимально быстро.
Разделив OLTP - базу данных, которая регистрирует события и контролирует остатки, оперирует множеством маленьких запросов для извлечения данных по индексам и множеством запросов на запись данных - и OLAP - базу, в которой осуществляются большие запросы к общему кубу данных, - можно уже значительно снизить нагрузку на сервер, даже не меняя базу для OLAP - просто скопировав в нее основную базу данных. Но если данные для OLAP преобразовать в отдельные регистры, то скорость доступа к ним даже больших запросов может серьезно вырасти.
В общем основной архитектурный совет - абстрагируйтесь от 1С в части построения хранилища отчетных данных, вытащите его наружу из Вашей транзакционной базы, используйте BI-инструменты - все это сократит время ожидания при отражении операций и при получении отчетных данных.
Для подобных архитектурных подходов в последнее время и сама 1С сделала немало: Анализ данных, Дата-акселератор и Копирование данных. Эти инструменты могут помочь выйти в части OLAP на другую архитектуру для крупных предприятий с хорошим бюджетом на IT, а мелким компаниям остается научиться выбирать и настраивать сервер, чтобы у него оставался запас по производительности, т.к. они вряд ли смогут оплатить OLAP, да и не нужен он им особо - свои три копейки они посчитают и без него, главное чтобы сервер не вис )))
Всем спасибо за внимание.
Вступайте в нашу телеграмм-группу Инфостарт
процессор выбор скорость hiload benchmark производительность
Вы можете заказать платную адаптацию этой статьи под ваши задачи на «Бирже заказов».
- 0% комиссии — оплата напрямую исполнителю;
- Исполнители любого масштаба — от отдельных специалистов до команд под проект;
- Прямой обмен контактами между заказчиком и исполнителем;
- Безопасная сделка — при необходимости;
- Рейтинги, кейсы и прозрачная система откликов.
См. также
HighLoad оптимизация Разработчик 1С 8.3 1С:ERP Управление предприятием 2 Бесплатно (free)
Использование оператора «В» для полей или данных составного типа (например, Регистратор) может приводить к неочевидным проблемам.
10.11.2025 16045 ivanov660 48
HighLoad оптимизация Разработчик 1С:Предприятие 8 1C:ERP Бесплатно (free)
Приведем примеры использования различных в динамических списках и посмотрим, почему это плохо.
18.02.2025 16597 ivanov660 39
HighLoad оптимизация Системный администратор Разработчик 1C:ERP Бесплатно (free)
Не всегда индексирование с дополнительным упорядочиванием полезно.
04.02.2025 15240 ivanov660 21
HighLoad оптимизация Разработчик Россия Бесплатно (free)
А вы знали, что сервер 1С при соединении с базой на сервере PostgreSQL самостоятельно устанавливает некоторые параметры? Это важно знать при настройке сервера и отладке долгих запросов. Предлагаю разобраться.
27.08.2024 10519 soulner 10
HighLoad оптимизация Технологический журнал Системный администратор Разработчик Бесплатно (free)
Обсудим поиск и разбор причин длительных серверных вызовов CALL, SCALL.
24.06.2024 19265 ivanov660 13
HighLoad оптимизация Разработчик 1С:Предприятие 8 Бесплатно (free)
Метод очень медленно работает, когда параметр приемник содержит намного меньше свойств, чем источник.
06.06.2024 25131 Evg-Lylyk 73
HighLoad оптимизация Механизмы платформы 1С Системный администратор Разработчик Стажер 1С:Предприятие 8 Бесплатно (free)
Сравним «Регистры сведений» с «Сервисами интеграции» и узнаем, кто быстрее!
28.03.2024 14775 dsdred 27
HighLoad оптимизация Разработчик 1С:Предприятие 8 1C:Бухгалтерия Бесплатно (free)
Анализ простого плана запроса. Оптимизация нагрузки на ЦП сервера СУБД используя типовые индексы.
13.03.2024 14737 spyke 29
Практически никогда не видел сервера приложений, производительность которого уперлась бы в процессор.
Скорее в винты все упирается.
А процессор конечно всегда хочется побыстрее, это первое что на ум приходит.
И от AMD еще с давних времен осадочек остался. В основном конечно они как печка греют. Не знаю как нынешние.
Ну и компилируют софт в 90% исходя их интелов.
Поэтому не знаю не знаю.
Нет - по прежнему 1С хорошо пилят те процессоры, где высокая максимальная частота на ядро и архитектура старается "держать" ее как можно выше при общей нагрузке.
Да и вообще, желательно убрать ее совсем - эту "общую нагрузку". Тогда тест покажет особенно высокие попугаи.
У 1С везде пилит линейный код. Я даже не слышал чтобы на это обращалось внимание и считалось проблемой.
"Используйте регламентные задания..", да да.
Фоновые задания слишком легко...понимаю :)
Если вы думаете, что сделать многопоточное приложение легко, то я вас разочарую, это довольно сложный процесс, я даже больше скажу, в 2020!!! году современные приложения на других языках пишутся не с оглядкой на многопоточность, а на максимальную утилизацию потоков, распространненный async \ await паттерн тому пример.
Но когда в приложении разные потоки могут читать и писать одно и то же, то, обычно, выделяют быстрый однопоточный механизм вставки/чтения и вокруг него множество потоков генерируют ему задачи. На этом принципе основан REDIS и NGINX, например, поэтому они такие резкие )))
Вы как пример приводите 1 алгоритм, который к счастью, хорошо лег, на многопоточную архитектуру, я же говорю о приложении, где алгоритмов много и не всё хорошо ложится в многопоточность и начинаются проблемы.
(16)
Вот как раз наоборот, из-за того NGINX однопоточен и у него нет контекст свитчинга, он работает быстро :)
Так же у него выделяется несколько дочерних процессов (workers) обычно на количество ядер, но все процессы работают в однопоточном режиме, тут скорость же достигается из-за того, что работает они в асинхронном режиме со стейт машинами, async IO + events, грубо говоря тот же async \ await.
В общем формула тут такая:
Быстродействие != многопточность
Многопточность != асинхронность
====== set ======
3000000 requests completed in 1.43 seconds
50 parallel clients
3 bytes payload
keep alive: 1
0.02% <= 1 milliseconds
15.29% <= 2 milliseconds
99.94% <= 3 milliseconds
100.00% <= 3 milliseconds
2102312.50 requests per second
Но, например, множество математических задач могут хорошо параллелиться - нейросети те же, рендеринг, кодировка видео/фото, архивирование/разархивирование. Там основной принцип в разделении данных на порции и скармливание этих порций параллельным обработчикам, в итоге скорость растет пропорционально количеству потоков процессора.
Рекомендую ознакомится с докладом Jeffrey Richter — Building responsive and scalable applications, на ютубчике есть, там супер подробно рассказано что такое асинхронность, почему многопточность это иногда зло и как делать приложения быстрыми. Правда про .NET (но кода почти нет) и на иглише, но подробнее не видел
А то что вы мне какие то замеры кидаете...и про нейронки пишите...хм да это и так понятно, я ж не говорю, что многопоточность = зло. Я говорю, что это сложно, не всегда возможно (кстати да, GUI приложения очень сильно завязаны на одном едиственном GUI потоке) и что асинхронность это чаще всего залог производительности, которую часто путают с многопоточностью.
====== set ======
3000000 requests completed in 14.59 seconds
50 parallel clients
3 bytes payload
keep alive: 1
99.94% <= 1 milliseconds
100.00% <= 2 milliseconds
100.00% <= 3 milliseconds
100.00% <= 3 milliseconds
205578.02 requests per second
Даже если представить что у нас 512gb оперативки, и скажем 64 ядерный проц, то в тик времени, процессор будет пережевывать только 64 потока \ реквеста, ну а на завершение реквеста нам будет нужно явно не 1 тик, а намного больше, что же для остальных реквестов?) ну ничего подождут :))
Ваш бенчмарк, который вы мне второй раз кидаете, показывает как хорошо работает асинхронность в nginx, спасибо я и так это знаю :)
Раз так любите бенчмарки, вот вам бенчмарк, который показывает разницу в подходах:
1) поток на реквест
2) асинхронный поток, который обрабатывает несколько реквестов.
ЗЫ. на самом деле, там все посложней, осюда чаще всего для повышения производительсности используется thread pool ибо не всегда можно избежать блокирующего вызова, в общем доклад выше, очень рекомендую :)
Да, давно применяется пул потоков, который ими рулит. В 1С даже это используется во многих подсистемах управления многопоточностью, где один управляющий поток кормит потоки обработки извлекаемыми данными.
Откаты не при чем. Вендорам нужна стабильность, чем выше тем лучше.
Даже андроид студии эмулятор только в этом году оптимизировали под AMD и то под относительно новые камни.
А я со своим домашним ПК тихо курю в сторонке. Как два ветеранчика )
Посмотрю пока как на ноутах дело пойдет.
И да, не бывает очень сильно дешевле ни с того ни с сего.
+ На них еще все сыро и по факту это недешевый эксперимент.
Технологии виртуализации - нет данных
дополнительные инструкции - нет данных
а дороже в 2 раза
дополнительные инструкции
Технологии виртуализации в процессорах амд чуть ли не раньше интела появились. А что за дополнительные инструкции?
В процессорах АМД сейчас нет лишь AVX512 относительно интела, но и они пока мало где применяются. Ну вряд ли в СУБД а тем более в 1С. Ну и актуальный сейчас Ryzen 4500u, который при 15 ваттах обходит в 65 ваттные и даже 95 ваттные процессоры конкурента. 7nm против 14nm всё же дают о себе знать, хоть и нанометры современные больше маркетинг, но всё же.
У АМД, есть однозначное преимущество (в настоящее время!) - с ОЗУ, они (последнее поколение) работают быстрее.
(У Интела, было быстрее, но... ряд патчей безопасности, снизил их скорость работы с ОЗУ)
эта байда - в 1с, насколько сильно используется?
Да, за вирутализацию приходится платить "пенальти" в размере 20% абсолютной вычислительной мощности, но оно дает бОльшую утилизацию именно процессора.
Вы также - виртуализируете его, как я понимаю.
Ну - вперёд с оркестром!
Практически - сисадминов привлекает копирование и хранение актуального рабочего образа.
И кто там простаивает никого не волнует.
(надеюсь - это не сарказм был).
У нас, как минимум 4 из 5 сисадминов - считают за правило, виртуализировать всегда.
При любой возможности.
Если причины нет - рады придумать.
Я же говорю - сохранность рабочего образа на чек-пойнте бакапа. Это же гарантия зарплаты сисадмина.
Вот тот, что про "кучу херни" тут писал, тоже не прав. Виртуализация решает простую и нерешаемую спроста проблему - две независимых конторы (или подразделения конторы) на одном сервере. Данные будут взаимно закрыты и ими будут рулить независимые суперюзеры.
Или открытый интернету сервер.
Если это деньги, тогда можно и 1С подвинуть. Но 1С давят вируализацией по совершенно субъективным причинам в 99% случаях. Да еще и на убогом железе. Хотя она - прямые деньги.
потомучто чаще всего получается эта херня именно -
(164)
(164)
И - ничего более.
(по своей сути)
Или открытый интернету сервер.
p.s. знаете почему дюрон базу перепроводил быстрее? Скорее всего потому кэш первого уровня был по 64 килобайта на инструкции и данные, а не по 8 килобайт на данные и 12 киломикроопераций. Видимо это играло ключевую роль. Ну и длинный конвейер у пня-4 играл злую шутку с ветвящимся кодом.
Линус дополнительно уточнил, что модернизация на 32-ядерный 64-поточный процессор AMD Threadripper 3970X была очень волнительной для него.
Источник:
habr.com/ru/news/t/503658/
Линус что-то знает... :-)
На том же Xeon D-1557 1.50GHz дает результат ниже плинтуса.
Однако на на этом же хосте конфигурация из трех раздельных виртуальных серверов на ESXi - PSQL, 1С (8 ядер 2 сокета) и Apache при тестировании типовой конфигурации с тест-центром - дает вполне приемлемые результат на 50 пользователей.
И главное - ИМХО сервер для 1С должен быть сервером ТОЛЬКО для 1С (ну и СУБД). никакой терминалки, AD, файлопомойки и касперского. Максимум можно еще IIS или Apache. Терминалку, если обычные формы, лучше вывести на отдельный сервер.
Пример - попробуйте распараллелить восстановление последовательности документов.
Параллельность можно применить, только - если есть статические данные.
Архивирование, картинки, видео - всё.
А не те, что зависят от других (меняющихся).
Я в свое время на БП 2.0 делал многопоточное проведение документов. Т.к. это были услуги, то разделение пулов шло по контрагентам и комиссионерам. Это позволяло существенно снизить время проведения документов - практически пропорционально количеству потоков.
Допустим, у нас есть тысяча документов. И в них есть сто разных товаров, у которых есть остатки, сто разных соглашений с покупателями. В итоге нам нужно найти документы, в которых соглашения и номенклатура не пересекается, сгруппировать их по пересекающейся номенклатуре и соглашениям. Пусть у нас получится сто групп по 5-15 документов. Дальше мы эти группы можем скормить разным потокам, упорядочив по дате и времени продажи. В итоге мы получим сто порций данных и будем последовательно кормить их освободившимся потокам. Если же это документы поступления, то нам тут вообще не нужно особо заморачиваться - достаточно скормить их до проведения реализаций, т.к. они не используют историческую информацию об остатках.
Пример - попробуйте распараллелить восстановление последовательности документов.
Ой, никогда не говорите "никогда" :)
Восстановление последовательности может распараллелиться, если в ней будут разрезы ведения этой самой последовательности.
я ведь привёл элементарную задачу - попробуйте её решить:
Распараллельте выполнение двух задач.
Исходные данные одной из них, зависят от решения другой.
Это и есть - последовательность.
хоть как её разрезайте - но - нет у Вас исходных данных, для решения первой задачи! она вынуждена ждать решения второй!
Можно и иначе распараллелить проведение документов: получить остатки в какую-нить коллекцию, взять документ, создать наборы записей, создать проводки на основании остатков из коллекции и поменять значения в коллекции, но не записывать эти проводки, а поместить в пул записи, т.к. запись - это длительный процесс. Дальше идти к следующему документу, добавляя его проводки в пул, после того, как пул достигнет определенного размера, отправить данные пула в поток для записи. Т.к. запись - операция длительная, то следующая порция данных будет накоплена раньше, чем эти операции будут записаны - скормить их второму потоку, и т.д. В итоге один поток, формирующий движения, будет работать с памятью, а потоки персистентности будут параллельно записывать наборы записей в базу данных.
Если говорить общими терминами, так любая задача будет однопоточной, если для ее решения нужен результат решения другой задачи.
При чем тут 1С?
Далее ему Сергей сказал о том, что при определенных условиях задача восстановления последовательности может быть распараллелена.
Но индивид топил тут усиленно именно за истинную многопоточность в его понимании, типа мы все тут мушкетеры, а он один - д'Артаньян.
Туды его в качель ©, блин.....
Я еще раз покажу историю, с чего начался весь сыр-бор:
Предполагается, что тролли остроумные и веселые ребята. А этот чего-то Навального давай поминать. УГ
Его вот эти загадки и заходы похожи на те, что программисты со стажем 100500+ лет задают на собеседованиях.
Нет цели узнать решение.
Что - то психологическое... хз
В общем, ну его в болото........проехали.
Все, вопрос про признаки распараллеливаемых задач исчерпан?
Квант данных - не момент времени, а набор аналитик. Документы двигают наборы аналитик и потом уже по этим наборам аналитик строятся графы ну и результатом является система из N линейных уравнений.
Именно - производительности и не хватает.
(я не говорю, что есть ошибки и в методологии, в т.ч.. Они могут быть везде!)
Поставьте две копии одинаковой базы - на по-быстрее и по-медленнее системе.
И поймёте - хватает или нет.
(комуто хватает и 1,5 ГГц - как он сказал)
(81)
Конкретизирую - любая (абсолютно!) задача, будет решаться быстрее! На более быстрой системе.
(84)
задач, которые невозможно распараллелить, возможно и не сильно много.
я в принципе и не утверждал, что их количество - преобладает.
Я продолжаю утверждать, что как минимум одна задача (перепровести последовательность документов (порою - не единственную последовательность. Как минимум я знаю - Поступление и Реализация. Две последовательности. Затраты и Расходы - Плюс ещё две) встаёт ежемесячно и неединожды.
И эти расчёты (4, всего) - занимают продолжительное время.
Этот факт, надеюсь - не будете оспаривать.
И эти расчёты (4, всего) - занимают продолжительное время.
В первом приближении:
Восстановление последовательности Поступление/Реализация нельзя распараллелить ТОЛЬКО в случае одного склада.
Восстановление последовательности Затраты нельзя распараллелить ТОЛЬКО в случае одного подразделения/строго последовательной маршрутной карты/ и одного вида затрат(чего не может быть)
Восстановление последовательности Расходы нельзя распараллелить ТОЛЬКО в случае одного вида расходов.
(86)
А в реальности (если нужно точное значение) - распараллелить последовательность невозможно.
И это - в независимости, ни от чего.
Ответьте мне (повторюсь) - какую Вы возьмёте себестоимость остатка?
Если у Вас - предыдущие документы не сформировали его.
Ответ один - Только - Приближённую!
(ещё 1 подвопрос - зачем нужен документ "Корректировка Себестоимости"?)
Этим - и довольствуйтесь.
Если у Вас - предыдущие документы не сформировали его.
Если вы не понимаете как можно распараллелить не распараллеливающуюся на первый взгляд задачу, то это не значит, что никто не сможет распараллелить задачу.
Пока вы не поймете того факта, что себестоимость конкретной позиции номенклатуры может быть в разрезе склада/организации, либо вообще атомарна, то вы так и будете утверждать, что восстановление последовательности - впринципе не параллелящаяся задача.
Даже если себестоимость позиции атомарна, то параллелить можно по этой самой номенклатуре.
И это - в независимости, ни от чего.
Ответьте мне (повторюсь) - какую Вы возьмёте себестоимость остатка?
Если у Вас - предыдущие документы не сформировали его.
Ответ один - Только - Приближённую!
Хорошо, повторюсь в 100500 раз: задача с двумя взаимозависимыми документами не сможет распараллелиться, потому, что это квант всего массива данных.
Про квант данных - не запоминайте, а то кэш переполнится и до кернел-паник не далеко.....
Три - нормально?
Если нет - 4,.. и т.д.
Именно против этого (увеличения количества документов) - я не возражал(-ю).
Скрытый текст |
|---|
| Раз надо ещё раз повторить.. |
И да - решения не было.
Была бубнёжка, пустая.
Хорошо, для простоты, как вы это любите, в последовательности участвуют 4 документа:
Поступление1
Поступление2
Реализация1
Реализация2
ПоступлениеN и реализацияN взаимосвязанные.
Для того, чтобы можно было выполнить параллельное выполнение восстановления последовательности необходимо наличие непересекающихся аналитик в документах. Непересекающейся аналитикой, опять же для простоты, будем считать номенклатуру - она разная в каждой паре документов приход-расход.
Самое простое решение:
1. Получаем запросом таблицу
Номенклатура1|Поступление1|
Номенклатура1|Реализация1|
Номенклатура2|Поступление2|
Номенклатура2|Реализация2|
2. Получаем из таблицы в п.1 список номенклатуры.
3. Формируем цикл по списку из п.2 , выполняя поиск строк в таблице из п.1 по номенклатуре.
4. Найденные строки сортируем по моменту времени документа, либо делаем свою сортировку списка в зависимости от прихода/расхода и сортируем так, чтобы приход был первым.
5. Внутри цикла из п.3. формируем фоновое задание, выполняющее процедуру проведения документа по набору значений.
Содержимое процедуры выполнения проведения из п.5:
1. Цикл по набору
2. Получить объект по ссылке в текущей строки набора.
3. Выполнить запись документа с проведением.
Это САМЫЙ ПРИМИТИВНЫЙ алгоритм из всех, что можно вообще придумать.
ах вон оно чё - собакато зарыта там, где я и говорил.
Дорогуша - это не распараллеливание, а "распараллеливание" всего-лишь.
(набор громких/звучных/.../бессмысленных наименований)
Ты предлагаешь (перед твоим "распараллеливанием" - сначала проверять исполнение твоих условий?
И - много ты покупателей "этого чудо-алгоритма" набрал?
А не многоли ты о себе возомнил?
на перельмановский приз - ты не претендуешь.
Скрытый текст |
|---|
| это - цензурно выражаясь |
(повторюсь - не "решение"!)
Всякое фуфло (хотя я понял уже бессмысленность - у нас разные понятия, об общеизвестных принципах/ценностях. Ты из тех, кто - "языком работает") - пропускай.
Нафига ты историю (сию) показываешь?
Я изменил свою т.з. или что/как?
Нет и не собираюсь - отрицать очевидное.
Единственное добавляю - покажите решение (кто не согласен с моей т.з.)
Повторяю (для тугопонимающего) - ты привёл не решение распараллеливания (что принципиально невозможно, но - ты не можешь выдавить из себя, признание аксиомы), а "решение".
(с набором условий)
что делать с твоим "решением" - я вроде понятно объяснил.
Называешь это троллингом - твоё право.
Впрочем - также как и "решения", продавать.
а потом придумывать оправдания.
Я ответил одним вопросом -
Прицепился только потомучто вы (навальновцы, местные) - очевидность "отрицаете".
(надумываете какието условия выполнения своих распараллеливаний)
Два - это для простоты (также как начинают в школе - не с интегралов/диффернциалов, а именоо с 1+1)
Если тебе легче будет - покажи решение на трёх (или - какое у тебя условие "распараллеливания твоего")) документах.
я нисколько не мучаюсь. мучаешься видно ты - причины тут придумываешь, очередные.
Демо-базы нет чтоли?
Держи - УТ 10.3 -
Покажи - одновременное проведение двух реализаций (или сколько там тебе нужно, для демонстрации?) документов.
При этом, всё (по общепринятой методологии) должно быть стандартно - себестоимость (списывается, которая), каждого документа, должна быть реальной.
(лучше сделай - через допобработку - так проще будет.
Если нет, не настаиваю (именно на этом) - меняй конфигурацию))
В обработке можно выбрать номенклатуру, характеристику, серию. Если ничего не выбрано, обрабатывается всё. В обработке есть реквизиты КоличествоПотоков - число целое, ДатаНач, ДатаКон, Номенклатура, ХарактеристикаНоменклатуры, СерияНоменклатуры.
Текст модуля формы обработки:
Перем мИтоговаяТаблица;
Перем мВсеПроцессыВыполнены;
Перем мВыполненныеПроцессы;
Перем мТЗТЗ;
Перем мТЗ;
Процедура КнопкаВыполнитьНажатие(Кнопка)
лТипыРегистраторов = Новый Массив(); // для простоты решения уберём преобразующие движения
лТипыРегистраторов.Добавить(Тип("ДокументСсылка.ПоступлениеТоваровУслуг"));
лТипыРегистраторов.Добавить(Тип("ДокументСсылка.РеализацияТоваровУслуг"));
Зап3 = Новый Запрос("ВЫБРАТЬ
| ПартииТоваровНаСкладах.Номенклатура КАК Номенклатура,
| ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры КАК ХарактеристикаНоменклатуры,
| ПартииТоваровНаСкладах.СерияНоменклатуры КАК СерияНоменклатуры,
| ПартииТоваровНаСкладах.СтатусПартии КАК СтатусПартии,
| СУММА(ВЫБОР
| КОГДА НЕ ТИПЗНАЧЕНИЯ(ПартииТоваровНаСкладах.Регистратор) В (&ТипыРегистраторов)
| ТОГДА 1
| ИНАЧЕ 0
| КОНЕЦ) КАК Поле1
|ПОМЕСТИТЬ П1
|ИЗ
| РегистрНакопления.ПартииТоваровНаСкладах КАК ПартииТоваровНаСкладах
|ГДЕ
| ПартииТоваровНаСкладах.Период МЕЖДУ &ДатаНач И &ДатаКон
| И ПартииТоваровНаСкладах.Активность
| И (ПартииТоваровНаСкладах.СерияНоменклатуры = &СерияНоменклатуры
| ИЛИ &СерияНоменклатуры = ЗНАЧЕНИЕ(Справочник.СерииНоменклатуры.ПустаяСсылка))
| И (ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры = &ХарактеристикаНоменклатуры
| ИЛИ &ХарактеристикаНоменклатуры = ЗНАЧЕНИЕ(Справочник.ХарактеристикиНоменклатуры.ПустаяСсылка))
| И (ПартииТоваровНаСкладах.Номенклатура = &Номенклатура
| ИЛИ &Номенклатура = ЗНАЧЕНИЕ(Справочник.Номенклатура.ПустаяСсылка))
|
|СГРУППИРОВАТЬ ПО
| ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры,
| ПартииТоваровНаСкладах.СерияНоменклатуры,
| ПартииТоваровНаСкладах.СтатусПартии,
| ПартииТоваровНаСкладах.Номенклатура
|;
|
|//////////////////////////////////////////////////////////// ////////////////////
|ВЫБРАТЬ
| П1.Номенклатура,
| П1.ХарактеристикаНоменклатуры,
| П1.СерияНоменклатуры,
| П1.СтатусПартии
|ИЗ
| П1 КАК П1
|ГДЕ
| П1.Поле1 = 0");
Зап3.УстановитьПараметр("ДатаНач",ДатаНач);
Зап3.УстановитьПараметр("ДатаКон",ДатаКон);
Зап3.УстановитьПараметр("ТипыРегистраторов",лТипыРегистраторов);
Зап3.УстановитьПараметр("Номенклатура", Номенклатура);
Зап3.УстановитьПараметр("ХарактеристикаНоменклатуры", ХарактеристикаНоменклатуры);
Зап3.УстановитьПараметр("СерияНоменклатуры", СерияНоменклатуры);
Рез3 = Зап3.Выполнить();
лТЗЗап = Рез3.Выгрузить();
КоличествоСтрок = лТЗЗап.Количество();
лКолВоПотоков = Мин(КоличествоСтрок,КоличествоПотоков);
КолВоВПотоке = Цел(КоличествоСтрок/лКолВоПотоков);
КолвоВПоследнемПотоке = КоличествоСтрок%лКолВоПотоков;
Сообщить("Количество строк " + КоличествоСтрок + " Количество в потоке " + КолВоВПотоке + " Количество в последнем потоке " + КолвоВПоследнемПотоке);
НТекПотока = 0;
НСеанса = 0;
мТЗ.Очистить();
лТЗ2 = мТЗ.Скопировать();
лСтрТЗТЗ = мТЗТЗ.Добавить();
лСтрТЗТЗ.ТЗ = лТЗ2;
Для Каждого лТекСтрТЗЗап Из лТЗЗап Цикл
лНовСтр = лСтрТЗТЗ.ТЗ.Добавить();
ЗаполнитьЗначенияСвойств(лНовСтр,лТекСтрТЗЗап);
НТекПотока = НТекПотока + 1;
Если НТекПотока%КолВоВПотоке=0 Тогда
ВызватьСеанс(НСеанса,лСтрТЗТЗ.ТЗ);
НСеанса = НСеанса + 1;
лТЗ2 = мТЗ.Скопировать();
лСтрТЗТЗ = мТЗТЗ.Добавить();
лСтрТЗТЗ.ТЗ = лТЗ2;
КонецЕсли;
КонецЦикла;
Если КолвоВПоследнемПотоке > 0 Тогда
ВызватьСеанс(НСеанса,лСтрТЗТЗ.ТЗ);
КонецЕсли;
ПодключитьОбработчикОжидания("ПроверитьСостояниеФоновыхЗаданий",1);
КонецПроцедуры
Процедура ВызватьСеанс(пНомер,пТЗ)
лМассив = Новый массив();
лНовСтр = мВыполненныеПроцессы.Добавить();
лНовСтр.НомерЗапущенного = пНомер;
лНовСтр.АдресВХранилище = Новый УникальныйИдентификатор;
лАдрес = ПоместитьВоВременноеХранилище(Неопределено,лНовСтр.АдресВХранилище);
лНовСтр.АдресВХранилище = лАдрес;
лМассив.Добавить(пТЗ);
лМассив.Добавить(ДатаНач);
лМассив.Добавить(ДатаКон);
лМассив.Добавить(лАдрес);
лМассив.Добавить(пНомер);
лКлюч = "ОбрабоктаТаблицы_" + пНомер;
лСсылка = ПолучитьНавигационнуюСсылкуИнформационнойБазы();
//Сообщить(лСсылка);
Если СтрНайти(лСсылка,"e1c://server/")>0 и Не ЗапускатьНеВФоне Тогда
Сообщить("Запущен фоновый процесс " + пНомер);
лФоновоеЗадание = ФоновыеЗадания.Выполнить("мФоновые.ОбработатьТаблицу", лМассив, лКлюч, "ОбрабоктаТаблицы " + пНомер);
лНовСтр.ФоновоеЗадание = лФоновоеЗадание;
Иначе
Сообщить("Запущен процесс " + пНомер);
мФоновые.ОбработатьТаблицу(лМассив[0],лМассив[1],лМассив[2],лМассив[3],лМассив[4]);
КонецЕсли;
КонецПроцедуры
Процедура ПроверитьСостояниеФоновыхЗаданий()
лФл = Ложь;
лМассивКУдалению = Новый Массив;
Для Каждого лТекСтр Из мВыполненныеПроцессы Цикл
лСтрук = ПолучитьИзВременногоХранилища(лТекСтр.АдресВХранилище);
Если лСтрук<>Неопределено Тогда
лТЗ = лСтрук.ТЗ;
Сообщить("Завершён процесс " +лСтрук.Номер);
//лТЗ = лДанные.Получить();
лФл = Истина;
Для Каждого лТекСтрТЗ Из лТЗ Цикл
лНовСтр = мТЗ.Добавить();
ЗаполнитьЗначенияСвойств(лНовСтр,лТекСтрТЗ);
лФл = Ложь;
КонецЦикла;
УдалитьИзВременногоХранилища(лТекСтр.АдресВХранилище);
лМассивКУдалению.Добавить(лТекСтр);
Иначе
лФл = Истина;
КонецЕсли;
КонецЦикла;
Для Каждого лТекСтр Из лМассивКУдалению Цикл
мВыполненныеПроцессы.Удалить(лТекСтр);
КонецЦикла;
Если лФл Тогда
Возврат;
КонецЕсли;
мТЗ.Сортировать("Период");
лНабор = РегистрыНакопления.ПартииТоваровНаСкладах.СоздатьНаборЗаписей();
лРегистратор = Неопределено;
лСтрокаТовара = "";
лНаборТЗ = Новый ТаблицаЗначений;
лСтруктураПоиска = Новый Структура("Номенклатура, Склад, ХарактеристикаНоменклатуры, СерияНоменклатуры, СтатусПартии, Заказ, Качество");
Для Каждого лТекСтр Из мТЗ Цикл
Если лРегистратор<>лТекСтр.Регистратор Тогда
Если лРегистратор<>Неопределено Тогда
лНабор.Загрузить(лНаборТЗ);
лНабор.ОбменДанными.Загрузка = Истина;
лНабор.Записать(Истина);
Сообщить("Записан " + лРегистратор);
КонецЕсли;
лРегистратор = лТекСтр.Регистратор;
лНабор.Отбор.Регистратор.Значение = лРегистратор;
лНабор.Прочитать();
лНаборТЗ = лНабор.Выгрузить();
лНабор.Очистить();
КонецЕсли;
ЗаполнитьЗначенияСвойств(лСтруктураПоиска,лТекСтр);
лСтроки = лНаборТЗ.НайтиСтроки(лСтруктураПоиска);
Для Каждого л_ТекСтрИЗСтроки Из лСтроки Цикл
лНаборТЗ.Удалить(л_ТекСтрИЗСтроки);
КонецЦикла;
лСтрокаНабора = лНаборТЗ.Добавить();
ЗаполнитьЗначенияСвойств(лСтрокаНабора,лТекСтр);
лСтрокаНабора.Активность = Истина;
КонецЦикла;
Если лРегистратор<>Неопределено Тогда
лНабор.Загрузить(лНаборТЗ);
лНабор.ОбменДанными.Загрузка = Истина;
лНабор.Записать(Истина);
Сообщить("Записан " + лРегистратор);
КонецЕсли;
ОтключитьОбработчикОжидания("ПроверитьСостояниеФоновыхЗаданий");
Сообщить("Обработаны товары: ");
лТЗ = мТЗ.Скопировать();
лТЗ.Свернуть("Номенклатура, ХарактеристикаНоменклатуры, СерияНоменклатуры, СтатусПартии");
лТЗ.Сортировать("Номенклатура, ХарактеристикаНоменклатуры, СерияНоменклатуры, СтатусПартии");
Для Каждого лТекСтр Из лТЗ Цикл
Сообщить(" " + лТекСтр.Номенклатура + " | " + лТекСтр.ХарактеристикаНоменклатуры + " | " + лТекСтр.СерияНоменклатуры + " | " + лТекСтр.СтатусПартии);
КонецЦикла;
Сообщить("Завершено!")
КонецПроцедуры
Процедура ПриОткрытии()
ДатаНач = '20070101';
ДатаКон = '20090101';
КоличествоПотоков = 5;
КонецПроцедуры
мВсеПроцессыВыполнены = Ложь;
мВыполненныеПроцессы = Новый ТаблицаЗначений();
мВыполненныеПроцессы.Колонки.Добавить("НомерЗапущенного");
мВыполненныеПроцессы.Колонки.Добавить("НомерВыполненного");
мВыполненныеПроцессы.Колонки.Добавить("АдресВХранилище");
мВыполненныеПроцессы.Колонки.Добавить("ФоновоеЗадание");
мТЗТЗ = Новый ТаблицаЗначений();
мТЗТЗ.Колонки.Добавить("ТЗ");
мТЗ = Новый ТаблицаЗначений();
мТЗ.Колонки.Добавить("Номенклатура",Новый ОписаниеТипов("СправочникСсылка.Номенклатура"));
мТЗ.Колонки.Добавить("Склад",Новый ОписаниеТипов("СправочникСсылка.Склады"));
мТЗ.Колонки.Добавить("ХарактеристикаНоменклатуры", Новый ОписаниеТипов("СправочникСсылка.ХарактеристикиНоменклатуры"));
мТЗ.Колонки.Добавить("СерияНоменклатуры", Новый ОписаниеТипов("СправочникСсылка.СерииНоменклатуры"));
мТЗ.Колонки.Добавить("ДокументОприходования");
мТЗ.Колонки.Добавить("СтатусПартии", Новый ОписаниеТипов("ПеречислениеСсылка.СтатусыПартийТоваров"));
мТЗ.Колонки.Добавить("Заказ", Новый ОписаниеТипов("ДокументСсылка.ЗаказПокупателя"));
мТЗ.Колонки.Добавить("Качество", Новый ОписаниеТипов("СправочникСсылка.Качество"));
мТЗ.Колонки.Добавить("Регистратор");
мТЗ.Колонки.Добавить("НомерСтроки");
мТЗ.Колонки.Добавить("Период");
мТЗ.Колонки.Добавить("ВидДвижения");
мТЗ.Колонки.Добавить("Количество");
мТЗ.Колонки.Добавить("Стоимость");
мТЗ.Колонки.Добавить("КодОперации");
мТЗ.Колонки.Добавить("СписаниеПартий");
мТЗ.Колонки.Добавить("НомерКорСтроки");
мТЗ.Колонки.Добавить("ДокументДвижения");
мТЗ.Колонки.Добавить("ДокументДвиженияПериод");
мТЗ.Колонки.Добавить("НомерСтрокиСписанныхТоваров");
ПоказатьОбщий модуль для выполнения фоновых заданий:
Процедура ОбработатьТаблицу(пТЗ,пДатаНач,пДатаКон,пАдресВХранилище,пНомер) Экспорт
мТЗ = пТЗ.Скопировать();
Зап = Новый Запрос("ВЫБРАТЬ
| ТЗ.Номенклатура,
| ТЗ.Склад,
| ТЗ.ХарактеристикаНоменклатуры,
| ТЗ.СерияНоменклатуры,
| ТЗ.СтатусПартии,
| ТЗ.Заказ,
| ТЗ.Качество
|ПОМЕСТИТЬ ТЗВрТаб
|ИЗ
| &ТЗ КАК ТЗ
|;
|
|//////////////////////////////////////////////////////////// ////////////////////
|ВЫБРАТЬ
| ПартииТоваровНаСкладах.Период КАК Период,
| ПартииТоваровНаСкладах.Регистратор КАК Регистратор,
| ПартииТоваровНаСкладах.НомерСтроки,
| ПартииТоваровНаСкладах.Активность,
| ПартииТоваровНаСкладах.ВидДвижения,
| ПартииТоваровНаСкладах.Номенклатура КАК Номенклатура,
| ПартииТоваровНаСкладах.Склад КАК Склад,
| ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры КАК ХарактеристикаНоменклатуры,
| ПартииТоваровНаСкладах.СерияНоменклатуры КАК СерияНоменклатуры,
| ПартииТоваровНаСкладах.ДокументОприходования,
| ПартииТоваровНаСкладах.СтатусПартии КАК СтатусПартии,
| ПартииТоваровНаСкладах.Заказ КАК Заказ,
| ПартииТоваровНаСкладах.Качество КАК Качество,
| ПартииТоваровНаСкладах.Количество,
| ПартииТоваровНаСкладах.Стоимость,
| ПартииТоваровНаСкладах.КодОперации,
| ПартииТоваровНаСкладах.СписаниеПартий,
| ПартииТоваровНаСкладах.НомерКорСтроки,
| ПартииТоваровНаСкладах.ДокументДвижения,
| ПартииТоваровНаСкладах.ДокументДвиженияПериод,
| ПартииТоваровНаСкладах.НомерСтрокиСписанныхТоваров
|ИЗ
| РегистрНакопления.ПартииТоваровНаСкладах КАК ПартииТоваровНаСкладах
| ВНУТРЕННЕЕ СОЕДИНЕНИЕ ТЗВрТаб КАК ТЗ
| ПО ПартииТоваровНаСкладах.Номенклатура = ТЗ.Номенклатура
| И ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры = ТЗ.ХарактеристикаНоменклатуры
| И ПартииТоваровНаСкладах.СерияНоменклатуры = ТЗ.СерияНоменклатуры
| И ПартииТоваровНаСкладах.СтатусПартии = ТЗ.СтатусПартии
|ГДЕ
| ПартииТоваровНаСкладах.Период МЕЖДУ &ДатаНач И &ДатаКон
| И ПартииТоваровНаСкладах.Активность
|
|УПОРЯДОЧИТЬ ПО
| Склад,
| Номенклатура,
| ХарактеристикаНоменклатуры,
| СерияНоменклатуры,
| СтатусПартии,
| Заказ,
| Качество,
| Период,
| Регистратор");
Зап.УстановитьПараметр("ТЗ",мТЗ);
Зап.УстановитьПараметр("ДатаНач",пДатаНач);
Зап.УстановитьПараметр("ДатаКон",пДатаКон);
Рез = Зап.Выполнить();
лНоменклатура = Неопределено;
лХарактеристикаНоменклатуры = Неопределено;
лСклад = Неопределено;
лСерияНоменклатуры = Неопределено;
лСтатусПартии = Неопределено;
лЗаказ = Неопределено;
лКачество = Неопределено;
Выборка = Рез.Выбрать();
мТЗ.Очистить();
лТЗДокументовОприходования = Новый ТаблицаЗначений();
лТЗДокументовОприходования.Колонки.Добавить("ДокументОприходования");
лТЗДокументовОприходования.Колонки.Добавить("Количество");
лТЗДокументовОприходования.Колонки.Добавить("Стоимость");
Пока Выборка.Следующий() Цикл
Если лНоменклатура=Выборка.Номенклатура И
лХарактеристикаНоменклатуры=Выборка.ХарактеристикаНоменклатуры И
лСклад=Выборка.Склад И
лСерияНоменклатуры=Выборка.СерияНоменклатуры И
лСтатусПартии=Выборка.СтатусПартии И
лЗаказ=Выборка.Заказ И
лКачество=Выборка.Качество Тогда
Иначе
лНоменклатура=Выборка.Номенклатура;
лХарактеристикаНоменклатуры=Выборка.ХарактеристикаНоменклатуры;
лСклад=Выборка.Склад;
лСерияНоменклатуры=Выборка.СерияНоменклатуры;
лСтатусПартии=Выборка.СтатусПартии;
лЗаказ=Выборка.Заказ;
лКачество=Выборка.Качество;
лТЗДокументовОприходования.Очистить();
КонецЕсли;
Если Выборка.ВидДвижения = ВидДвиженияНакопления.Приход Тогда
лНовСтр = мТЗ.Добавить();
ЗаполнитьЗначенияСвойств(лНовСтр,Выборка);
Если Выборка.Количество<>0 Тогда
лНовСтрОприходования = лТЗДокументовОприходования.Добавить();
ЗаполнитьЗначенияСвойств(лНовСтрОприходования, Выборка);
КонецЕсли;
Иначе
лКоличество = Выборка.Количество;
лМассивСтрокКУдалению = Новый Массив;
Для Каждого лТекСтрОприходования Из лТЗДокументовОприходования Цикл // ФИФО
лНовСтр = мТЗ.Добавить();
ЗаполнитьЗначенияСвойств(лНовСтр,Выборка);
лЦена = лТекСтрОприходования.Стоимость / лТекСтрОприходования.Количество;
лНовСтр.ДокументОприходования = лТекСтрОприходования.ДокументОприходования;
Если лТекСтрОприходования.Количество>лКоличество Тогда
лТекСтрОприходования.Количество = лТекСтрОприходования.Количество - лКоличество;
лНовСтр.Количество = лКоличество;
лНовСтр.Стоимость = лКоличество*лЦена;
лТекСтрОприходования.Стоимость = лТекСтрОприходования.Стоимость - лНовСтр.Стоимость;
лКоличество=0;
ИначеЕсли лТекСтрОприходования.Количество<=лКоличество Тогда
лКоличество = лКоличество - лТекСтрОприходования.Количество;
лНовСтр.Количество = лТекСтрОприходования.Количество;
лНовСтр.Стоимость = лТекСтрОприходования.Стоимость;
лМассивСтрокКУдалению.Добавить(лТекСтрОприходования);
КонецЕсли;
Если лКоличество<=0 Тогда
Прервать;
КонецЕсли;
КонецЦикла;
Если лКоличество>0 Тогда
Сообщить("Не хватает количества при распределении по партиям товар: " + Выборка.Номенклатура + " " + Выборка.ХарактеристикаНоменклатуры + " по документу " + Выборка.Регистратор);
КонецЕсли;
Для Каждого лТекСтрОприходования Из лМассивСтрокКУдалению Цикл
лТЗДокументовОприходования.Удалить(лТекСтрОприходования);
КонецЦикла;
КонецЕсли;
КонецЦикла;
лСтрук = Новый Структура("ТЗ, Номер", мТЗ, пНомер);
лАдрес = ПоместитьВоВременноеХранилище(лСтрук, пАдресВХранилище);
ЗаписьЖурналаРегистрации("ТестированиеЖР",,,,лАдрес);
ЗаписьЖурналаРегистрации("ТестированиеЖР",,,,пАдресВХранилище);
КонецПроцедуры
ПоказатьОпробовано на сервере 1с с СУБД MSSQL на 5-50 потоках.
В фоновый процесс передаётся список товаров для обработки. Там он по товарам получает данные по записям регистра "Партии товаров на складах" и проходит последовательно по ним. Возвращает таблицу значений для своей порции данных.
Запись в регистры выполняется в один поток, но и это можно размножить.
Использовалась Обычная демобаза торговли 10.3.
Просто не понимаю, с чем Вы тут пытаетесь спорить? Ну не получилось у Вас лично это реализовать - бывает, но это не значит, что никто этого сделать не смог.
(95)
(95)
Интерполяционные - так это всего-лишь, приближение (погрешность которого зависит от методики, но - никак не нулевая!), а не точность.
И - спорить я уже не пытаюсь.
Скрытый текст |
|---|
| Т.б. с убеждёнными сторонниками Навального.
Которые утверждают, что курицу приготовить легко можно и за 2 минуты. Просто-напросто - её измельчить, надо, до достаточного размера. Мне вполне хватает плюса (без сарказма!) на этой странице, за один из вчерашних постов, по этойже теме) |
Да, алгоритм получается сложнее, чем дважды два. Поэтому для того, чтобы документы не перепроводить, существует решение на базе СЛАУ - РАУЗ. Но даже в партионном учете есть возможность провести документы параллельно, хоть это и реализуется достаточно непростым алгоритмом.
С третьей стороны, и этого, как я понял, Вам вообще понять не дано, можно распараллелить только запись регистров накопления и бухгалтерии, при этом совершенно нет надобности записывать сам объект, который будет записан каждый раз при стандартном механизме перепроведения через "Документ.Записать(РежимЗаписиДокумента.Проведение)", при этом сам объект не меняется - зачем его записывать? Более того, нет смысла каждый раз читать остатки, т.к. остатки можно хранить в таблице значений в нужных разрезах - этот тот же регистр остатков, только в памяти. ТЗ индексируется в 1С, поэтому поиск в ней будет куда быстрее, чем чтение регистров остатков при проведении каждого документа. А дальше параллельно в совершенно любой последовательности можно записать полученные наборы записей регистров.
В общем Вы спорите с тем, что не понимаете.
Если я делаю приближение/итерацию (Ваш пример) - я это именно так и называю.
А не горню, что я сделал то, что другим не удастся.
Ну - ждите, когда Вам (и всем Вашим сторонникам) вручат нобелевку.
(другого варианта - просто нет. Также как есть факт, что - за математику, её и не вручают)
Но еще раз: параллелить само проведение вовсе не обязательно - достаточно буферизировать исторические данные и параллелить запись результата, который получен даже в один поток. Один поток генерирует записи, сто потоков их записывают. Где противоречие?
Данных для проведения второго документа нет - пока первый не проведён.
Какие исторические данные?
Скрытый текст |
|---|
| алё, гараж |
С таким же успехом (но, с меньшей/большей/другой/... скоростью и точностью - возможно) - интерполяцию используйте.
Когда первый проведётся, тогда и будут данные для второго.
Данные - истинные!
А не.... (как хотите называйте/получайте/...)
И делайте (после этого!)с ними, на здоровье, что/как угодно.
Хоть буферизуйте мильярд раз.
Ну банальнгейший же алгоритм, который ничего не записывает в БД - копит и модифицирует исторические данные в таблице значений, формирует наборы записей регистров относительно этой истории и отдает потом эти наборы для записи в сто параллельных потоков.
Ну что как маленький-то, просто...
Раз пять уже пробовал (лично тебе!).
Последняя попытка -
- как ты буферизуешь исторические данные первого документа (который ещё не проведён?
А при этом - собираешься провести второй?
(Напомню - второму требуются данные первого документа)
Скрытый текст |
|---|
| "Слишком мало букав накалякал - меня не впечатлило"
И да - в ПТУ, я не обучался. (хотя - в детсаду - читал одногрупникам книжки) За хвальбу - не прошу прощения у того, кто хвалится своей бестолковостью |
А пока что любое восстановление последовательсти представляется следующим образом: Считываем начальные остатки из регистров. Считываем таблицы документов, которые нужно перепровести. Причём таблицы, лишь те, что нужны для получения результата перепроведения/восстановления последовательности.
В общем случае при начале работы с базой - начальные остатки нулевые, первый документ как правило - приход (ввод начальных остатков, или первое поступление от поставщика) да даже если и расход. Считывая данные из всех документов мы Сразу знаем Сколько уникальных товаров всего нужно обработать. Сколько уникальных временных меток нужно пройти. В таблице нам нужно лишь сделать арифметические операции + - / * для каждой временнОй метки и каждого товара, что можно (и нужно) распараллелить. Причём Приход-то зачем перепроводить - ну с логики изменения количества и себестоимости товара. Приход-то не нуждается в пересчёте по идее. Ну да ладно. Короче в итоге для каждой временнОй метки мы получаем результат приходов, расходов и прочих вычислений согласно Алгоритма (ФИФО ЛИФО по среднему и т.п.) Разве в этом алгоритме данные по одному товару влияют на данные по другому товару? Нет. После того как ПОСЛЕДОВАТЕЛЬНО для каждой временной метки и по каждому товару был получен результат (очевидно себестоимость) этот результат можно записать в СУБД, ладно, в регистры, которые "двигает" документ соответствующий той или иной временнОй метке.
Как ещё разжевать логику параллельного перепроведения я незнаю. Но думаю если будет поставлена чёткая задача и мной будет написан код для решения этой конкретной чёткой задачи, вы сможете убедиться в том, что Распараллелить этот процесс можно. Если конечно у вас там действительно не заложена какая-то киллер фича, влияющая на Все товары при перепроведения Каждого документа.
То чего не существует (в один момент!) - невозможно распараллелить.
Т.к. элементарно (хотябы) - распараллеливать нечего.
Принципиально!
Скрытый текст |
|---|
| Это я - философским языком, попробовал высказаться.
Вы (сторонники навального, которого) же, только такую форму речи признаёте. Элементарные аксиомы для вас (всех) - это чуждо, просто. "Только громкими фразами!!" (и восклицательных знаков с заглавными буквами - по-больше. Для "убедительности") |
Даже если оторваться от решения СЛАУ, Можно каждый товар в этой матрице тупо прогнать "перепроведением последовательно". Но распараллелить процесс - т.е. 1000 потоков на каждый товар. После того как матрица обработана, результат готов, Записать полученный результат в тех ячейках где был - (расход товара со склада) в те документы, которые соответствуют меткам времени. Всё. Движения в регистры 1С писать умеет, без Перепроведения документов. Элементарно.
- не даёт элементарное, отсутствие необходимой информации!
ЗЫ: Постоянное упоминание Навального - это возрастной диагноз, так что вообще смысла нет, да и время сейчас неспокойное - мало ли кризис у человека. Я знал много народу, кто при массовом засилии ООП-подхода с их SOLID и прочими фичами из Agile просто из программистов пошли в охранники. И они там счастливы, что радует )))
1. Вы в состоянии осознать, что документов может быть много больше 2-х?
2. Вы в состоянии осознать, что во всех этих документах может быть не пересекающиеся данные по номенклатуре/складу?
Скрытый текст |
|---|
| только не пойму, почему продолжение тойже истины - отрицаешь? "голову от цифры, больше 2 кружит", чтоли? |
Сколько тебе надо документов для распараллеливания?
(124)
Сколько тебе надо документов для распараллеливания?
Никто в здравом уме не будет пытаться паралеллить проведение документов с одной номенклатурой/по одному складу.
Очень жаль, что для вас эта аксиома так и осталась недоступной для понимания.
(и да, прощу - когда/если признаешь элементарную аксиому)
условие задачи -
Жду решения.
С применением "распаралееливания", разумеется)
И да (отвечаю на бессмысленные твои вопросы)
Сколько документов? за день, неделю, месяц?
Бери, на своё усмотрение (раз тебе это принципиально) - наши товары и период
Как видите (в моих публикациях) я даже без мзды не прочь чего нибудь поконфигурить.
(короткими)
Ты (в том числе) - изливал воду какуюто, которую обозвал "решением".
Я вон даже базу выложил (как твой коллега выразился, для "демонстрации решения").
Решение жду.
(не "решения")
Нужно распараллелить проведение N документов.
При этом нужно (в данном случае интересно!) - не ускорение проведения.
(эту тупость - я и не опровергал!)
А сохранить основной функционал - себестоимость должна быть реальной.
(разжевать надо - что это значит?)
На досуге сделал обработку и текст модуля для УТ 10.3 Для простоты решения (ведь на досуге же) сделал "восстановление по партиям" только тех товаров, у которых не было преобразований, таких как изменения качества, серий, комплектаций, перемещений. Обрабатываются только те, которые пришли и ушли, Приход и расход. Распределение по партиям осуществляется по ФИФО.
В обработке можно выбрать номенклатуру, характеристику, серию. Если ничего не выбрано, обрабатывается всё. В обработке есть реквизиты КоличествоПотоков - число целое, ДатаНач, ДатаКон, Номенклатура, ХарактеристикаНоменклатуры, СерияНоменклатуры.
Текст модуля формы обработки:
Перем мИтоговаяТаблица;
Перем мВсеПроцессыВыполнены;
Перем мВыполненныеПроцессы;
Перем мТЗТЗ;
Перем мТЗ;
Процедура КнопкаВыполнитьНажатие(Кнопка)
лТипыРегистраторов = Новый Массив(); // для простоты решения уберём преобразующие движения
лТипыРегистраторов.Добавить(Тип("ДокументСсылка.ПоступлениеТоваровУслуг"));
лТипыРегистраторов.Добавить(Тип("ДокументСсылка.РеализацияТоваровУслуг"));
Зап3 = Новый Запрос("ВЫБРАТЬ
| ПартииТоваровНаСкладах.Номенклатура КАК Номенклатура,
| ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры КАК ХарактеристикаНоменклатуры,
| ПартииТоваровНаСкладах.СерияНоменклатуры КАК СерияНоменклатуры,
| ПартииТоваровНаСкладах.СтатусПартии КАК СтатусПартии,
| СУММА(ВЫБОР
| КОГДА НЕ ТИПЗНАЧЕНИЯ(ПартииТоваровНаСкладах.Регистратор) В (&ТипыРегистраторов)
| ТОГДА 1
| ИНАЧЕ 0
| КОНЕЦ) КАК Поле1
|ПОМЕСТИТЬ П1
|ИЗ
| РегистрНакопления.ПартииТоваровНаСкладах КАК ПартииТоваровНаСкладах
|ГДЕ
| ПартииТоваровНаСкладах.Период МЕЖДУ &ДатаНач И &ДатаКон
| И ПартииТоваровНаСкладах.Активность
| И (ПартииТоваровНаСкладах.СерияНоменклатуры = &СерияНоменклатуры
| ИЛИ &СерияНоменклатуры = ЗНАЧЕНИЕ(Справочник.СерииНоменклатуры.ПустаяСсылка))
| И (ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры = &ХарактеристикаНоменклатуры
| ИЛИ &ХарактеристикаНоменклатуры = ЗНАЧЕНИЕ(Справочник.ХарактеристикиНоменклатуры.ПустаяСсылка))
| И (ПартииТоваровНаСкладах.Номенклатура = &Номенклатура
| ИЛИ &Номенклатура = ЗНАЧЕНИЕ(Справочник.Номенклатура.ПустаяСсылка))
|
|СГРУППИРОВАТЬ ПО
| ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры,
| ПартииТоваровНаСкладах.СерияНоменклатуры,
| ПартииТоваровНаСкладах.СтатусПартии,
| ПартииТоваровНаСкладах.Номенклатура
|;
|
|//////////////////////////////////////////////////////////// ////////////////////
|ВЫБРАТЬ
| П1.Номенклатура,
| П1.ХарактеристикаНоменклатуры,
| П1.СерияНоменклатуры,
| П1.СтатусПартии
|ИЗ
| П1 КАК П1
|ГДЕ
| П1.Поле1 = 0");
Зап3.УстановитьПараметр("ДатаНач",ДатаНач);
Зап3.УстановитьПараметр("ДатаКон",ДатаКон);
Зап3.УстановитьПараметр("ТипыРегистраторов",лТипыРегистраторов);
Зап3.УстановитьПараметр("Номенклатура", Номенклатура);
Зап3.УстановитьПараметр("ХарактеристикаНоменклатуры", ХарактеристикаНоменклатуры);
Зап3.УстановитьПараметр("СерияНоменклатуры", СерияНоменклатуры);
Рез3 = Зап3.Выполнить();
лТЗЗап = Рез3.Выгрузить();
КоличествоСтрок = лТЗЗап.Количество();
лКолВоПотоков = Мин(КоличествоСтрок,КоличествоПотоков);
КолВоВПотоке = Цел(КоличествоСтрок/лКолВоПотоков);
КолвоВПоследнемПотоке = КоличествоСтрок%лКолВоПотоков;
Сообщить("Количество строк " + КоличествоСтрок + " Количество в потоке " + КолВоВПотоке + " Количество в последнем потоке " + КолвоВПоследнемПотоке);
НТекПотока = 0;
НСеанса = 0;
мТЗ.Очистить();
лТЗ2 = мТЗ.Скопировать();
лСтрТЗТЗ = мТЗТЗ.Добавить();
лСтрТЗТЗ.ТЗ = лТЗ2;
Для Каждого лТекСтрТЗЗап Из лТЗЗап Цикл
лНовСтр = лСтрТЗТЗ.ТЗ.Добавить();
ЗаполнитьЗначенияСвойств(лНовСтр,лТекСтрТЗЗап);
НТекПотока = НТекПотока + 1;
Если НТекПотока%КолВоВПотоке=0 Тогда
ВызватьСеанс(НСеанса,лСтрТЗТЗ.ТЗ);
НСеанса = НСеанса + 1;
лТЗ2 = мТЗ.Скопировать();
лСтрТЗТЗ = мТЗТЗ.Добавить();
лСтрТЗТЗ.ТЗ = лТЗ2;
КонецЕсли;
КонецЦикла;
Если КолвоВПоследнемПотоке > 0 Тогда
ВызватьСеанс(НСеанса,лСтрТЗТЗ.ТЗ);
КонецЕсли;
ПодключитьОбработчикОжидания("ПроверитьСостояниеФоновыхЗаданий",1);
КонецПроцедуры
Процедура ВызватьСеанс(пНомер,пТЗ)
лМассив = Новый массив();
лНовСтр = мВыполненныеПроцессы.Добавить();
лНовСтр.НомерЗапущенного = пНомер;
лНовСтр.АдресВХранилище = Новый УникальныйИдентификатор;
лАдрес = ПоместитьВоВременноеХранилище(Неопределено,лНовСтр.АдресВХранилище);
лНовСтр.АдресВХранилище = лАдрес;
лМассив.Добавить(пТЗ);
лМассив.Добавить(ДатаНач);
лМассив.Добавить(ДатаКон);
лМассив.Добавить(лАдрес);
лМассив.Добавить(пНомер);
лКлюч = "ОбрабоктаТаблицы_" + пНомер;
лСсылка = ПолучитьНавигационнуюСсылкуИнформационнойБазы();
//Сообщить(лСсылка);
Если СтрНайти(лСсылка,"e1c://server/")>0 и Не ЗапускатьНеВФоне Тогда
Сообщить("Запущен фоновый процесс " + пНомер);
лФоновоеЗадание = ФоновыеЗадания.Выполнить("мФоновые.ОбработатьТаблицу", лМассив, лКлюч, "ОбрабоктаТаблицы " + пНомер);
лНовСтр.ФоновоеЗадание = лФоновоеЗадание;
Иначе
Сообщить("Запущен процесс " + пНомер);
мФоновые.ОбработатьТаблицу(лМассив[0],лМассив[1],лМассив[2],лМассив[3],лМассив[4]);
КонецЕсли;
КонецПроцедуры
Процедура ПроверитьСостояниеФоновыхЗаданий()
лФл = Ложь;
лМассивКУдалению = Новый Массив;
Для Каждого лТекСтр Из мВыполненныеПроцессы Цикл
лСтрук = ПолучитьИзВременногоХранилища(лТекСтр.АдресВХранилище);
Если лСтрук<>Неопределено Тогда
лТЗ = лСтрук.ТЗ;
Сообщить("Завершён процесс " +лСтрук.Номер);
//лТЗ = лДанные.Получить();
лФл = Истина;
Для Каждого лТекСтрТЗ Из лТЗ Цикл
лНовСтр = мТЗ.Добавить();
ЗаполнитьЗначенияСвойств(лНовСтр,лТекСтрТЗ);
лФл = Ложь;
КонецЦикла;
УдалитьИзВременногоХранилища(лТекСтр.АдресВХранилище);
лМассивКУдалению.Добавить(лТекСтр);
Иначе
лФл = Истина;
КонецЕсли;
КонецЦикла;
Для Каждого лТекСтр Из лМассивКУдалению Цикл
мВыполненныеПроцессы.Удалить(лТекСтр);
КонецЦикла;
Если лФл Тогда
Возврат;
КонецЕсли;
мТЗ.Сортировать("Период");
лНабор = РегистрыНакопления.ПартииТоваровНаСкладах.СоздатьНаборЗаписей();
лРегистратор = Неопределено;
лСтрокаТовара = "";
лНаборТЗ = Новый ТаблицаЗначений;
лСтруктураПоиска = Новый Структура("Номенклатура, Склад, ХарактеристикаНоменклатуры, СерияНоменклатуры, СтатусПартии, Заказ, Качество");
Для Каждого лТекСтр Из мТЗ Цикл
Если лРегистратор<>лТекСтр.Регистратор Тогда
Если лРегистратор<>Неопределено Тогда
лНабор.Загрузить(лНаборТЗ);
лНабор.ОбменДанными.Загрузка = Истина;
лНабор.Записать(Истина);
Сообщить("Записан " + лРегистратор);
КонецЕсли;
лРегистратор = лТекСтр.Регистратор;
лНабор.Отбор.Регистратор.Значение = лРегистратор;
лНабор.Прочитать();
лНаборТЗ = лНабор.Выгрузить();
лНабор.Очистить();
КонецЕсли;
ЗаполнитьЗначенияСвойств(лСтруктураПоиска,лТекСтр);
лСтроки = лНаборТЗ.НайтиСтроки(лСтруктураПоиска);
Для Каждого л_ТекСтрИЗСтроки Из лСтроки Цикл
лНаборТЗ.Удалить(л_ТекСтрИЗСтроки);
КонецЦикла;
лСтрокаНабора = лНаборТЗ.Добавить();
ЗаполнитьЗначенияСвойств(лСтрокаНабора,лТекСтр);
лСтрокаНабора.Активность = Истина;
КонецЦикла;
Если лРегистратор<>Неопределено Тогда
лНабор.Загрузить(лНаборТЗ);
лНабор.ОбменДанными.Загрузка = Истина;
лНабор.Записать(Истина);
Сообщить("Записан " + лРегистратор);
КонецЕсли;
ОтключитьОбработчикОжидания("ПроверитьСостояниеФоновыхЗаданий");
Сообщить("Обработаны товары: ");
лТЗ = мТЗ.Скопировать();
лТЗ.Свернуть("Номенклатура, ХарактеристикаНоменклатуры, СерияНоменклатуры, СтатусПартии");
лТЗ.Сортировать("Номенклатура, ХарактеристикаНоменклатуры, СерияНоменклатуры, СтатусПартии");
Для Каждого лТекСтр Из лТЗ Цикл
Сообщить(" " + лТекСтр.Номенклатура + " | " + лТекСтр.ХарактеристикаНоменклатуры + " | " + лТекСтр.СерияНоменклатуры + " | " + лТекСтр.СтатусПартии);
КонецЦикла;
Сообщить("Завершено!")
КонецПроцедуры
Процедура ПриОткрытии()
ДатаНач = '20070101';
ДатаКон = '20090101';
КоличествоПотоков = 5;
КонецПроцедуры
мВсеПроцессыВыполнены = Ложь;
мВыполненныеПроцессы = Новый ТаблицаЗначений();
мВыполненныеПроцессы.Колонки.Добавить("НомерЗапущенного");
мВыполненныеПроцессы.Колонки.Добавить("НомерВыполненного");
мВыполненныеПроцессы.Колонки.Добавить("АдресВХранилище");
мВыполненныеПроцессы.Колонки.Добавить("ФоновоеЗадание");
мТЗТЗ = Новый ТаблицаЗначений();
мТЗТЗ.Колонки.Добавить("ТЗ");
мТЗ = Новый ТаблицаЗначений();
мТЗ.Колонки.Добавить("Номенклатура",Новый ОписаниеТипов("СправочникСсылка.Номенклатура"));
мТЗ.Колонки.Добавить("Склад",Новый ОписаниеТипов("СправочникСсылка.Склады"));
мТЗ.Колонки.Добавить("ХарактеристикаНоменклатуры", Новый ОписаниеТипов("СправочникСсылка.ХарактеристикиНоменклатуры"));
мТЗ.Колонки.Добавить("СерияНоменклатуры", Новый ОписаниеТипов("СправочникСсылка.СерииНоменклатуры"));
мТЗ.Колонки.Добавить("ДокументОприходования");
мТЗ.Колонки.Добавить("СтатусПартии", Новый ОписаниеТипов("ПеречислениеСсылка.СтатусыПартийТоваров"));
мТЗ.Колонки.Добавить("Заказ", Новый ОписаниеТипов("ДокументСсылка.ЗаказПокупателя"));
мТЗ.Колонки.Добавить("Качество", Новый ОписаниеТипов("СправочникСсылка.Качество"));
мТЗ.Колонки.Добавить("Регистратор");
мТЗ.Колонки.Добавить("НомерСтроки");
мТЗ.Колонки.Добавить("Период");
мТЗ.Колонки.Добавить("ВидДвижения");
мТЗ.Колонки.Добавить("Количество");
мТЗ.Колонки.Добавить("Стоимость");
мТЗ.Колонки.Добавить("КодОперации");
мТЗ.Колонки.Добавить("СписаниеПартий");
мТЗ.Колонки.Добавить("НомерКорСтроки");
мТЗ.Колонки.Добавить("ДокументДвижения");
мТЗ.Колонки.Добавить("ДокументДвиженияПериод");
мТЗ.Колонки.Добавить("НомерСтрокиСписанныхТоваров");
ПоказатьОбщий модуль для выполнения фоновых заданий:
Процедура ОбработатьТаблицу(пТЗ,пДатаНач,пДатаКон,пАдресВХранилище,пНомер) Экспорт
мТЗ = пТЗ.Скопировать();
Зап = Новый Запрос("ВЫБРАТЬ
| ТЗ.Номенклатура,
| ТЗ.Склад,
| ТЗ.ХарактеристикаНоменклатуры,
| ТЗ.СерияНоменклатуры,
| ТЗ.СтатусПартии,
| ТЗ.Заказ,
| ТЗ.Качество
|ПОМЕСТИТЬ ТЗВрТаб
|ИЗ
| &ТЗ КАК ТЗ
|;
|
|//////////////////////////////////////////////////////////// ////////////////////
|ВЫБРАТЬ
| ПартииТоваровНаСкладах.Период КАК Период,
| ПартииТоваровНаСкладах.Регистратор КАК Регистратор,
| ПартииТоваровНаСкладах.НомерСтроки,
| ПартииТоваровНаСкладах.Активность,
| ПартииТоваровНаСкладах.ВидДвижения,
| ПартииТоваровНаСкладах.Номенклатура КАК Номенклатура,
| ПартииТоваровНаСкладах.Склад КАК Склад,
| ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры КАК ХарактеристикаНоменклатуры,
| ПартииТоваровНаСкладах.СерияНоменклатуры КАК СерияНоменклатуры,
| ПартииТоваровНаСкладах.ДокументОприходования,
| ПартииТоваровНаСкладах.СтатусПартии КАК СтатусПартии,
| ПартииТоваровНаСкладах.Заказ КАК Заказ,
| ПартииТоваровНаСкладах.Качество КАК Качество,
| ПартииТоваровНаСкладах.Количество,
| ПартииТоваровНаСкладах.Стоимость,
| ПартииТоваровНаСкладах.КодОперации,
| ПартииТоваровНаСкладах.СписаниеПартий,
| ПартииТоваровНаСкладах.НомерКорСтроки,
| ПартииТоваровНаСкладах.ДокументДвижения,
| ПартииТоваровНаСкладах.ДокументДвиженияПериод,
| ПартииТоваровНаСкладах.НомерСтрокиСписанныхТоваров
|ИЗ
| РегистрНакопления.ПартииТоваровНаСкладах КАК ПартииТоваровНаСкладах
| ВНУТРЕННЕЕ СОЕДИНЕНИЕ ТЗВрТаб КАК ТЗ
| ПО ПартииТоваровНаСкладах.Номенклатура = ТЗ.Номенклатура
| И ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры = ТЗ.ХарактеристикаНоменклатуры
| И ПартииТоваровНаСкладах.СерияНоменклатуры = ТЗ.СерияНоменклатуры
| И ПартииТоваровНаСкладах.СтатусПартии = ТЗ.СтатусПартии
|ГДЕ
| ПартииТоваровНаСкладах.Период МЕЖДУ &ДатаНач И &ДатаКон
| И ПартииТоваровНаСкладах.Активность
|
|УПОРЯДОЧИТЬ ПО
| Склад,
| Номенклатура,
| ХарактеристикаНоменклатуры,
| СерияНоменклатуры,
| СтатусПартии,
| Заказ,
| Качество,
| Период,
| Регистратор");
Зап.УстановитьПараметр("ТЗ",мТЗ);
Зап.УстановитьПараметр("ДатаНач",пДатаНач);
Зап.УстановитьПараметр("ДатаКон",пДатаКон);
Рез = Зап.Выполнить();
лНоменклатура = Неопределено;
лХарактеристикаНоменклатуры = Неопределено;
лСклад = Неопределено;
лСерияНоменклатуры = Неопределено;
лСтатусПартии = Неопределено;
лЗаказ = Неопределено;
лКачество = Неопределено;
Выборка = Рез.Выбрать();
мТЗ.Очистить();
лТЗДокументовОприходования = Новый ТаблицаЗначений();
лТЗДокументовОприходования.Колонки.Добавить("ДокументОприходования");
лТЗДокументовОприходования.Колонки.Добавить("Количество");
лТЗДокументовОприходования.Колонки.Добавить("Стоимость");
Пока Выборка.Следующий() Цикл
Если лНоменклатура=Выборка.Номенклатура И
лХарактеристикаНоменклатуры=Выборка.ХарактеристикаНоменклатуры И
лСклад=Выборка.Склад И
лСерияНоменклатуры=Выборка.СерияНоменклатуры И
лСтатусПартии=Выборка.СтатусПартии И
лЗаказ=Выборка.Заказ И
лКачество=Выборка.Качество Тогда
Иначе
лНоменклатура=Выборка.Номенклатура;
лХарактеристикаНоменклатуры=Выборка.ХарактеристикаНоменклатуры;
лСклад=Выборка.Склад;
лСерияНоменклатуры=Выборка.СерияНоменклатуры;
лСтатусПартии=Выборка.СтатусПартии;
лЗаказ=Выборка.Заказ;
лКачество=Выборка.Качество;
лТЗДокументовОприходования.Очистить();
КонецЕсли;
Если Выборка.ВидДвижения = ВидДвиженияНакопления.Приход Тогда
лНовСтр = мТЗ.Добавить();
ЗаполнитьЗначенияСвойств(лНовСтр,Выборка);
Если Выборка.Количество<>0 Тогда
лНовСтрОприходования = лТЗДокументовОприходования.Добавить();
ЗаполнитьЗначенияСвойств(лНовСтрОприходования, Выборка);
КонецЕсли;
Иначе
лКоличество = Выборка.Количество;
лМассивСтрокКУдалению = Новый Массив;
Для Каждого лТекСтрОприходования Из лТЗДокументовОприходования Цикл // ФИФО
лНовСтр = мТЗ.Добавить();
ЗаполнитьЗначенияСвойств(лНовСтр,Выборка);
лЦена = лТекСтрОприходования.Стоимость / лТекСтрОприходования.Количество;
лНовСтр.ДокументОприходования = лТекСтрОприходования.ДокументОприходования;
Если лТекСтрОприходования.Количество>лКоличество Тогда
лТекСтрОприходования.Количество = лТекСтрОприходования.Количество - лКоличество;
лНовСтр.Количество = лКоличество;
лНовСтр.Стоимость = лКоличество*лЦена;
лТекСтрОприходования.Стоимость = лТекСтрОприходования.Стоимость - лНовСтр.Стоимость;
лКоличество=0;
ИначеЕсли лТекСтрОприходования.Количество<=лКоличество Тогда
лКоличество = лКоличество - лТекСтрОприходования.Количество;
лНовСтр.Количество = лТекСтрОприходования.Количество;
лНовСтр.Стоимость = лТекСтрОприходования.Стоимость;
лМассивСтрокКУдалению.Добавить(лТекСтрОприходования);
КонецЕсли;
Если лКоличество<=0 Тогда
Прервать;
КонецЕсли;
КонецЦикла;
Если лКоличество>0 Тогда
Сообщить("Не хватает количества при распределении по партиям товар: " + Выборка.Номенклатура + " " + Выборка.ХарактеристикаНоменклатуры + " по документу " + Выборка.Регистратор);
КонецЕсли;
Для Каждого лТекСтрОприходования Из лМассивСтрокКУдалению Цикл
лТЗДокументовОприходования.Удалить(лТекСтрОприходования);
КонецЦикла;
КонецЕсли;
КонецЦикла;
лСтрук = Новый Структура("ТЗ, Номер", мТЗ, пНомер);
лАдрес = ПоместитьВоВременноеХранилище(лСтрук, пАдресВХранилище);
ЗаписьЖурналаРегистрации("ТестированиеЖР",,,,лАдрес);
ЗаписьЖурналаРегистрации("ТестированиеЖР",,,,пАдресВХранилище);
КонецПроцедуры ПоказатьОпробовано на сервере 1с с СУБД MSSQL на 5 потоках.
В фоновый процесс передаётся список товаров для обработки. Там он по товарам получает данные по записям регистра "Партии товаров на складах" и проходит последовательно по ним. Возвращает таблицу значений для своей порции данных.
Запись в регистры выполняется в один поток
(своим алгоритмом):
1. Условия:
есть последовательность документов -
Приход1, Расход1, Приход2, Расход2.
Номенклатура одна позиция (для простоты).
В приходах - цена, разная.
Да - возьмём ФИФО (как ты привёл, но - сути это не меняет, здесь. Можно и ЛИФО, и Среднюю - без разницы)
2. Задача.
Провести параллельно - 4 документа.
(параллельно, означает - одновременно и с верным результатом.
Верный результат, тот - который получается при последовательном проведении)
---
Получишь верный результат?
(своим алгоритмом!)
Продемонстрируй факт!
(чтобы не было блудом - снова)
Где алгоритм (любой!) - даст однозначное (и верное!) решение.
Задачу, повторю - не "Получить решение от 2+2" (как тут многие поняли!),
а именно- Распараллеить проведение документов (принадлежащих - одной последовательности).
Продолжай дерзать!
(пока - безуспешно)
Вы же писали что параллелить нужно не проведение документов а:
"34. Salavat 13 25.05.20 19:07
(14)
т.к. интерпретатор языка 1С не умеет многопоточность, в привычном понимании этого термина.
1с - никогда и не будет многозадачным.
Пример - попробуйте распараллелить восстановление последовательности документов.
Параллельность можно применить, только - если есть статические данные.
Архивирование, картинки, видео - всё.
А не те, что зависят от других (меняющихся)."
Вы же хотели распараллелить Восстановление последовательности. И Конкретно - партионный учёт.
У вас что, ума не хватило текст модулей воткнуть и проверить работу приведённого мной текста?
я оставил этот удел - "умникам".
Ответь на простой вопрос -
(применительно, к далее, мною уточнённому, для обозначения сути -
Повторюсь (раз ты не можешь никак понять), до сих пор-
Есть 4 Дока (Номенклатура - одна позиция. Не количество и не Цена!) -
Берём "по средней" - чтобы ещё проще было)
Поступление1 2 Шт * 3 руб.
Реализаци1 - 1 шт. * 3 руб.
Поступление2 - 2 шт. * 4 руб.
Реализация - 2 шт * 2,667 руб.
Нука, давай сделай параллельное (и с верной ценой!) проведение, всех 4-рёх документов.
(и да - ненадо тут "хвастаться своим "знанием и умением Систем Уравнений и ,.." прочими терминами кидаться.
Я тебе скажу уточнение, всего-лишь!
Перед проведением - все документы - должны быть распроведены.
(напомнить - что значит - восстановить последовательность?)
А => и Цены Реализации не известны!)
ну и - Где ты ("умник") - цену взял для Реализаций?
Причём - для Обеих Реализаций!
Повторюсь - Распараллелить, это не значит "2+2 сосчитать", а значит -
- Одномоментно Проводить 4 (в данном примере!) и С Верными Ценами!
Да (одно снисхождение сделаю) -
Хорошо - попробуй (хотябы) сделать, чтобы -
Поступления Проведены (Уже!).
А надо, только провести (Параллельно!) оба Расхода.
(Напомню - перед проведением каждой Реализации - должна быть известна Цена Реализации)
Надеюсь всёже - ты не скажешь, что - "проблемы нет - провести параллельно 1*3 и 2*2,667"
(повторю "умник" - 1, 3, 2 и 2,667 - это всего-лишь пример (элементарный простой).
Сделай, как в математике формулы излагают - на X, Y, Z,..
Скрытый текст |
|---|
| И всё, реально - ты меня затрахал - продолжай поливать меня грязью, "умник".
Мне изначально было на тебя начихать на твоё... всё. Пустословие. Теперь, с + Ругательства - оставляю тебя с "твоими единомышленниками" Продолжай ругать всё и вся |
Можно и по одной номенклатуре распараллелить, только документов логично взять побольше. При определённых условиях можно и по два, Например в каждом документе по сотне других товаров, трогать которые не требуется.
Абсолютно - с такимже успехом.
Я тебе (в т.ч.) - обозначил элементарную задачу.
которую - невозможно распараллелить!
Принципиально! (об этом - я также, неоднократно повторял!)
Выж тут (большинство!) - "пытались" обозвать меня идиотом.
Ты вон даже - "мыло какоето, сварить" попытался.
И сноваже (продолжая отрицать, элементарные аксиомы!) - продолжаешь звать меня кретином.
Ну давай, "Перельман" (кавычки - потомучто ты себя считаешь - не тем!) - продолжай дальше, придумывать "очередной" рецепт мыла.
Скрытый текст |
|---|
| Кстати, если про мыло (реально), то - самое лучшими вариантами были - Детское и Хозяйственное.
(и это, умник (не выдумывай снова - я не говорил "подбирать, выброшенное на помойку"! |
Дурачок никогда не признает свою неправоту. Он начнёт юлить, изменять условия задачи, ставить всё новые ограничения, но сказать, "Да я был не прав, ваше решение работает, признаю свою ошибку" Это же так в духе НеНавальновцев, неправда ли Салаватушка, Арёл ты наш.
Так что дружок, думай-тэ, прежде чем написать что-то, а тем более грубить.
(повторяю снова)
Навальный, тоже себя считает праведником.
(Правда при этом - легко не платит налоги - в т.ч..
А финансирование получает - от того, кого и на его родине считают преступником.
Но, у него-то, отмазато "железная есть" - "он борется с коррупцией")
Продолжай и ты, дальше "бороться".
(также впрочем - как и обзывать других, за их имена - никогда не обзывал.
Я (в отличие от тебя, "умника-праведника" знаю прекрасно - это выбор родителей.
(в первую очередь, да. Хотя конечно - есть примеры и выбора самого обладателя, но - у меня - рядовая ситуация с именем)
Это - всего-лишь выбор другого.
И этот выбор - может и нравится, и не нравиться. Тебе.
Это - твоё личное дело. А "пытаться глумиься этим" ну... - ты уже показал достаточно "свою ценность" - продолжай дальше.)
И ещё - ты себе дружков, в своей подворотне, ищи.
(но ты похоже - и здесь начнёшь "надумывать на ровном месте")
У меня - никогда не было дружков и, никогда и не будет!
Ок - на тебе пищу, очередным твоим изливаниям.
Создаёшь общий модуль мФоновые, в него копируешь текст из второго примера кода.
Запускаешь, указываешь желаемое число потоков, которые будут обрабатывать Параллельно, сочетания Номенклатуры, Характеристики и Серии, Наслаждаешься процессом, В диспетчере задач, можешь наблюдать за нагрузкой на многоядерный процессор. В консоли администрирования серверов можно посмотреть сеансы, а в журнале регистрации базы. как процессы запускались и как они завершались. Ну и результат по партиям можно попроверять, приходные документы поизменять и посмотреть результат в отчёте "Ведомость по партиям товаров на складах". Если будут вопросы, или ты увидишь, что алгоритм работает неправильно - пиши, посмотрю, я не гордный. Но Твоё поведение в комментариях выглядит идиотским и заставляет сомневаться в твоей умственной полноценности.
(хотя согласен - это не в тему Но тыже не испугался пукнуть, в мой адрес)
Я чищу - от синтаксических/грамматических/смысловых/.. ошибок.
Моих ошибок!
С какжика, "смелый" - с каких пор поправление себя - считается трусостью?
Подскажите "любезный", в чём же проявилась моя трусость?
"С какжика, "смелый" - с каких пор поправление себя - считается трусостью?" -
Была удалена целая ветка комментариев вместе с моими. Может это модератора сайта, а может и нет.
ЗЫ: Как-то у нас был контур проверки недействительных паспортов. Работало так: читался файл с недействительными паспортами, каждый новый паспорт дописывался в файл с именем серии, потом это все по 50к, упорядоченное по серии, вставлялось в регистр сведений. Занимало упражнение 8 часов. Распараллелили - стало занимать 4 часа даже при 10-ти потоках, но начиная с 20кк (а там было 120кк) записей каждая третья, а потом и вторая, а потом и девять из десяти параллельных записей валились в дэдлок, т.к. даже при последовательной записи упорядоченных непересекающихся данных в несколько потоков система сильно тормозила на расщеплении страниц.
Т.е. вот независимые данные, которые - пожалуйста - параллель, как хошь безо всяких вксиом, но т.к. таблица одна, и она проиндексирована, все начинает упираться в механику СУБД.
В итоге я предложил вариант, когда просто создается соответствие с ключом серии и значением ЗаписьТекста, в которое в соответствии с серией записывается файл. Никакой многопоточности, 40 минут на все про все.
Но мы потом пошли дальше - создали большую хеш-таблицу, куда засунули все возможные версии - 10 минут в один поток с поиском О(1). И этот алгоритм можно было распараллелить на сколько угодно потоков - эффективность росла пропорционально потокам. На С++ в один поток файл грузился даже на моем ноуте в районе 4-х секунд, а если разархивировать, прочитать и записать в архив хеш-таблицу - 90 секунд примерно, из которых разархивирование занимает 95% времени.
Все зависит от алгоритма. Если воспринимать учет, как жестко связанную последовательность событий, то это ни разу не параллелится, а если как матрицу состояний - легко.
Результат второго - зависит от результата первого.
Как нам параллельно провести, оба документа?
.
Как ты (я - не время имею ввиду! упорядочиваешь количества и суммы (которые, абсолютно разные и не систематизированы никак!)?
Повторяю - не путай комбайн с экскаватором.
Это - разные предметы.
Не надо приплетать "умные словечки" куда ни попадя.
Я тебе элементарный вопрос задал - попробуй ответить на него.
(применив один из ваших методов навального.
В 1с, есть задачи, которые невозможно сделать параллельными.
(Из-за их - природы происхождения)
И таких задач (именно в 1с) - немало! Решается.
А так, конечно - ничто не мешает, в 1с вкрутить тотже архиватор (идеально подходит для распараллеливания)
И (на основании этой вкрутки "утверждать", что - без проблем, распараллеливается.
Повторюсь - есть задачи, в которых элементы, находятся в зависимости (временнОй - в т.ч.) от других.
Такие задачи - невозможно распараллелить. Принципиально. (странно, если ктото - сомневается в этом)
(78)
Таже Нвидия например показала именно то, о чём Вы сказали сейчас -
Результаты в клиент-серверном варианте на процессоре 1,5 ГГц и нужном количестве ядер, с точки зрения пользователя, выглядит гораздо лучше, не смотря на то что тест Гилева говорит об обратном.
А теперь сравните стоимость серверных процессоров в зависимости от тактовой частоты.
Однако неграмотный админ или 1С-ник будет орентироваться на тест Гилева и рекомендовать процессор с большей тактовой частотой.
Вы не путайте геймерские сборки с промышленными.
Слова разные слышали, а смысл их - не поняли.
Раз не поняли, разъясняю (кратко) -
- У файловой - весь код выполняется на клиенте.
- У серверной - на сервере.
Соответственно и частота нужна - или клиента, или сервера.
(кстати не забывайте! На клиенте - тоже код выполняется. И у серверной базы!)
(69)
(мы (15 пользователей - максимум) на 2,5 ГГц - не можем ЗУП 3.1 пользовать - ждём ответа..........)
(69)
И не только серверных - всех!
(только не надо тут утверждать, что - i9-9900K стоит дешевле любого (современного!) Xeona
(69)
У геймерской и промышленной сборки, задача одна - достаточная производительность.
(да - в разных разрезах, но - решение для получения результата одна! Частота ЦПУ - должна быть выше.
Только не надо тут умными словечками бросаться про - ГПУ, SSD, разрешение (и - его частоту!) монитора, настройку системы))
Абсолютно всегда и везде - на любую сборку поставьте ЦПУ, с большей частотой - и результат (производительность!) будет выше.
(И да - не говорите тут про тормоза в дисковой, ОЗУ, сетевой,... системах.
Про это - Вы "думайте" на своих 1,5 ГГц. На здоровье)
Скрытый текст |
|---|
| Вообще - занятие на 1,5 ГГц, это тоже самое, что заставить рыть траншею лопатой.
(во времена, когда есть экскаватор) Ответ "любителей оптимизировать" один и он "железный" - не умеете оптимизировать. |
Всех.
Если что - и ядра/потоки, это тоже - не идеал.
Это просто - самый простой/эффективный способ увеличения параллельности.
Всех процессов. (не только 1с их использует!)
Даже если ядро одно (утрирую, но - когдато было именно так!), то - одно ядро, будет поочереди исполнять все потоки
Да, и этот АМД - это ZEN+, а не ZEN2 - уже не самая новая архитектура.
Одно НО (немаловажное!) - это несерверный ЦПУ
(ОЗУ, линий PCIe,... - слишком мало у него. Масштабируемости - 0 Для серверов)
И (добавка) - вышел (только-только - ещё в магазинах нет) - i9-10900K - он ещё быстрее!
(без сарказма, я здесь)
Такие ЦПУ- годятся для неслишком обеспокоенных резервированием.
(повторюсь - согласен - это самые быстрые! что для 1с - первоочередное!)
Для серверов нужны:
Xeon® Gold 6256
Xeon® Gold 6244
Xeon® Gold 6246.
Но,... - готовьте бабки господа!
Xeon® Gold 6256
Xeon® Gold 6244
Xeon® Gold 6246.
Насчёт - НеБуст (Буст - одинаков) у него выше, это не особо значимая величина.
Любой ЦПУ - легко свою частоту может (в зависимости от нагрузки) и меньше делать и больше. (Базы).
И 100 МГц - это не та величина, на которую я бы променял - 4 дополнительных ядра.
(8 потоков - ровно, в 1,5 раза больше Вашего 6250)
E5-1650V3 - 1 сокет, но при этом максимальная частота в стоке и бусте. Память DDR4 2133, но 4 канала, что уже хорошо.
Остальные процессоры 2-х сокетные и различаются только ядрами и частотой, так что все зависит от количества пользователей.
E5-2637V3 - самый быстрый из них, но у него всего 4 ядра и 8 потоков. В полном комплекте даст работать 80-150 пользователям.
E5-2643V3 - чуть медленнее в стоке, но уже 6 ядер 12 потоков, должен догнать по производительность хорошо настроенный Ryzen 2600. 100-200 пользователей.
E5-2667V3 - ещё чутка медленнее в стоке и бусте, но не сильно, при том 8 ядер и 16 потоков. В пределе даст работать 200-300 пользователям.
Если пользователей меньше ста, то я бы взял первый проц.
Неделю назад Microsoft выпустила обновление для Windows 10 (1909), которое дает планировщику ОС возможность определять приоритеты потоков. Я протестировал предварительную сборку этой версии и не заметил значительных улучшений. Довольно часто планировщик использовал более высокий приоритет для фоновых процессов. Я думаю, вы представляете, что происходит, если Windows отдает приоритет такому процессу, а не вашей текущей запущенной игре.
Мой подход к устранению этого недостатка в планировщике Windows заключается в использовании настраиваемого профиля электропитания, который обеспечивает лучшее управление планировщиком по распределению нагрузок между ядрами. Сперва будут вовлечены, по возможности, лучшие ядра, что приведет более высокому и плавному fps. Если лучшие ядра будут заняты — нагрузка распределится по ядрам с меньшим рангом.
но еще раз видимо надо:
1. у процессоров есть и плюсы и минусы, и советовать конкретный процессор универсально для всех, не зная индивидуальные особенности себе дороже
линейка процессоров i7-X900K в основном всегда была флагманом домашних компьютеров, поэтому не надо быть "настрадамусом" чтобы ожидать от нее наилучших результатов, но когда нужно удаленное включение сервера или нужен объемом оперативной памяти больше 128 гб, а для сотен пользователей, которые проц может выдержать нужно много оперативки, то мы налетаем на искусственно введенные ограничения интелом
эти ограничения сняты у точного такого же процессора но серии W, но он всё еще односокетный
2. AMD из тех что мы тестировали медленнее голдов, может в будущем что то и поменяется, но пока на серверном рынке intel топовыми моделями работает лучше относительно продукции 1С, 6 канальные 2999 планки на проц даже побеждают 8канальные амд, хотя по логике должно быть наоборот, так как большая канальность дает преимущество в скорости
3. Что некоторые модели AMD, что рекомендуемые вами E5-2667 v3 часто не реализуют в полную мощь скорость работы дисков intel optane p4800х, лично для меня это серьезный недостаток для сервера
4. для меня загадка зачем люди тестируют файловый вариант, ибо не понимают смысл теста изначально, для одиночной работы пользователя 1С любого современного ноутбука хватает без всяких тестов
5. мой тест не является "покрывающим" всё и вся, но глубже информационную систему 1С нет смысла тестировать чем либо, если мой тест дает скажем 8 баллов, потому что в этом случае сколько бы параллельных пользователей СНТ (КИП) или что еще не выдали, всё равно это "унылые" пользователи, более подробно назначение теста описано на основной странице теста
6. также у нас есть курсы для администраторов, на которых мы подробно рассказываем какой процессор и другие компоненты подбирать, как пользоваться тестом и так далее
основную ценность сейчас тест представляет для сравнения скорости работы физического сервера и виртуального сервера (точнее 1С в нем) на этом же физическом сервере, так как очень часто люди "душат" изначально мощный сервер даже в 5 раз от возможного потенциала и тяжело другим способом также быстро и бесплатно это оценить
7. - фанаты AMD будут покупать AMD вопреки всему
- консервативный бизнес где большое значение имеет корпоративный стандарт будет смотреть именно на корпоративный стандарт
- провайдеры вообще в большинстве своем любят покупать максимально многоядерные сервера, резать туда хренову тучу виртуалок и подключать всё на какое-нибудь дорого внешнее хранилище, которое будет работать кое-как для конкретного клиента, потому что законы рынка диктуют при минимуме усилий максимум прибыли и приоритеты простоты администрирования будут побеждать клиентоориентированность (косвенно это видно в например)
- те у кого мало денег, будут покупать что по-дешевле и только когда жаренный петух клюнет, будут пытаться разбираться а что не так они сделали, но не раньше ( у нас много клиентов с процессором 2620 v0-v4)
Понятно, что на 6-ядерном не серверном процессоре не стоит разворачивать что-то в серьезном Enterprise, но какой-нибудь магазин автозапчастей с каталогом на миллион разных штучек-дрючек вполне смысл имеет - и у меня есть такой пример, когда купил людям AMD Ryzen 2600X - и он отлично уже больше года работает в клиент-серверной архитектуре на Linux и PostgreSQL, 40-45 попугаев в тесте позволяют отлично жить на УТ 11 совершенно без тормозов 10-ти пользователям (в принципе можно и большему количеству, т.к. ни во что не упирается). Uptime системы - более полугода, за все время не было ни одного сбоя, но я вечером скриптом перегружаю сервер приложений и СУБД и делаю бэкапы.
ЗЫ: кстати, я как-то в теме вроде бы про переход на Java, постил ассемблерный код, который на моем домашнем AMD Ryzen 5 1600 работает быстрее, чем на I9-9900K. Код просто считает 139-й член последовательности Фибоначчи очень много раз (128-бит используется: add, adc, xchg, xchg). Такой код с операциями регистр-регистр ровно в два раза быстрее работает на AMD, чем на топовом Intel. Так что от кода очень многое зависит, а компиляция большинства игр, в которых проигрывает АМД, производится интеловским оптимизирующим компилятором, который в принципе не должен оставлять конкурентам шанса. Но если произвести оптимизацию игры под АМД, то Интел нервно курит в углу и сливает даже куда менее производительным моделям АМД.
эти ограничения сняты у точного такого же процессора но серии W, но он всё еще односокетный
(76)
(76)
(76)
Как-то в одной инвестиционной компании проводили нагрузочный тест. Я сначала просто запустил тест Гилева на сервере - 9 попугаев. Объяснил специалисту, что нужно буст включить на хосте, high performance, таблицы временные разделить и вынести на отдельный носитель, ... В итоге у них там скорость поднялась до 23-х попугаев и пользователи реально заметили ускорение, т.к. 1С банасльно быстрее стала отдавать отрендеренные формы - их же нужно собрать, сериализовать, передать. Дальше - да, клиент, но он должен дождаться этих долбаных данных -форма-то на сервере инициализируется, а сервер еле дышит...
(76)
(76)
У того проца, который Вы привели, есть вот это: Intel® Optane™ Memory Supported ‡ - No
почему - думаю сможете осилить самостоятельно
вы скриншоты что ли давайте, а то выглядит утверждение откровенно легкомысленно мягко говоря
1 TB ограничение, не вводите людей в заблуждение
1. Зашел на сайт Интела - нашел много процессоров с W, у которых есть ограничение на 128Гиб. Да, оказалось, что не все такие, но Вы об этом ничего не сказали, просто заметив, что процессоры Xeon W не имеют этих ограничений. Оказалось, что процессоры с М в конце ограничены, без М - тоже:
Так надо было сказать четко, без вот этого "Я - Дартанья, а вы все - ...". Ведь можно, да? Достаточно было сказать, что процессоры с первой циферкой, которая больше единицы, поддерживают 1Тб памяти, но они тогда уже не являются аналогом I9-9900K, т.к. ориентированы на несколько сокетов и имеют контроллер памяти с 4-мя (для W-2ххх) и 6-ю (для W-3xxx) каналами памяти. Ну детский сад просто.
2. По поводу Epyc, то я этот тест привел на Ваши слова о скорости памяти. Скорость памяти (заметьте, о другом - и об 1С, в частности, я не писал) на Epyc в данном конкретном тесте выше - Вам бы в школу опять пойти на уроки логики и русского, а то ни тем, ни другим не владеете. В итоге и понять не можете что Вам пишут, и ответить грамотно не можете. Опять детский сад.
3. По поводу коллективной записи, то на это влияет латентность. Чем быстрее осуществляется доступ, тем больше потоков устройство может обслужить. И там я тоже говорю, что этот контроллер, будучи на порядок быстрее "обычных" nvme - отличное решение, когда нужна множественная запись в СУБД. Для чтения это уже не особо помогает, если ОЗУ достаточно, а ОЗУ на два порядка быстрее в части латентности, чем Optane, и на порядок быстрее в части bandwith.
4. По поводу некорректного сравнения, то да - любая программа на Linux работает быстрее. 1С - не исключение.
не важно как на самом деле, всё равно виноват я в любом случае, ну прям как обиженная баба диалог начинаете
ну хорошо, давайте в таком стиле, да я виноват в том что оказался прав )))
спросите постороннего человека, он понял что то из вашего потока сознания кроме того что я снова не угодил?
т.е. вместо слова "когда" в предложении используйте слово "1С"
когда ко мне будут приходить клиенты с тормозящими программами на линукс, им всем буду показывать ваш пост, бугага ;)
(192)
(192)
(192)
Я ж не против того, что Вы пишите. Я спорю не с тем, что Epyc медленнее, например, в каких-то сценариях, но в каких-то может оказаться и быстрее. Схема управления питанием АМД отличается от того, что Вы привыкли видеть в Intel - там порядка пяти разных схем, в то время как у Intel две всего, поэтому в Linux для клиент-серверной на АМД 1С даже необязательно ставить performance - все отлично живет и на onDemand, которая там по-умолчанию.
во-первых это не 1С тест
мы же тут обсуждаем не скорость игрушек или винрара
сначала сами протестируйте
я сначала в продуктиве посмотрел сам, а не чьи то обзоры почитал
тут вопрос не в миллисекундах, а в способности коллективной записи, которая 1. не проседает при длительной записи, 2. имеет существенно больший ресурс перезаписи 3. до 200-300 по цену качеству лучше большинства полок
Поэтому в любом случае процессоры на одном ядре, но с разной частотой, будут работать по-разному, и очевидно, что процессоры с более высокой частотой будут работать быстрее.
Также есть такое понятие, как IPC - количество инструкций за такт. Современные процессоры предварительно загружают команды в процессорный конвейер, в котором команды могут быть сгруппированы и выполнены, причем даже не всегда в той последовательности. в которой они там оказались - процессор сам пытается понять код и выполнить его оптимально, примерно как планировщик запросов в SQL. Именно из-за этого у меня есть пример кода, который на Ryzen 5 1600 работает быстрее, чем на I9-9900K на совершенно разных частотах, Примера кода, ведущего себя обратным образом, конечно же куда больше. Поэтому есть такое понятие, как оптимизация бинарного кода под архитектуру - этим занимается компилятор, который может программу, выполняющуюся при отсутствии оптимизации (компиляция без ключа оптимизации), например, пять минут, оптимизировать для выполнения за минуту - примеров таких программ у меня множество, даже тот же расчет числа Фибоначчи без оптимизации работает 0,72 секунды, с оптимизацией - 0,14 секунды. Оптимизация под клонкретную платформу производит выравнивание блоков выполнения программы кратно определенным адресам, чтобы на конкретной платформе процессор мог извлечь данные оптимально для себя. Также есть такая операция, как прогрев кэша процессора, которая позволяет на АМД, например, увеличить доступ к блокам памяти на порядок, поэтому оптимизированные под эту платформу игры на каком-нибудь Ryzen 5 3600 начинают работать быстрее, чем на I9-9900K.
Т.к. оптимизировать с этой точки зрения СУБД Вы вполне можете, собрав бинарники из исходников и указав ключи компиляции "-O3 -march=ваша платформа -tune=ваша платформа -flto", то оптимизировать 1С, увы, возможности нет - ее исходники Вам, полагаю, недоступны. А для 1С частота - это очень важный фактор, т.к. в том же тесте среднюю границу в 80 баллов преодолели только процессоры с суффиксом "К", у которых множитель разблокирован и они работают на более высоких частотах. При этом, заметьте, от поколения процессора (т.е. самой архитектуры ядра) скорость зависит куда меньше, а средние значения иногда для старых ядер выше, чем для новых - тут Интел за 10 лет из-за кризиса идей АМД не сделал практически ни одного шага к улучшению IPC в сценариях, в которых не используются команды AVX и операции с плавающей точкой 128-256 бит. В остальных операциях прогресс Интела только в том, чт следующее поколение выходило с чуть более высокими частотами. Если сравнить новый I9-10900K и I9-9900K, то это один и тот же процессор на 14нм-архитектуре, но чуть быстрее и в нем чуть больше ядер. В однопотоке он работает быстрее на 3-5% из-за более высокой частоты буста (5300 против 5000), а вот в многопотоке из-за того, что не может справиться с отводом тепла при аналогичных системах охлаждения - ядер же стало больше на 2 шт. - скорость на ядро уже может оказаться меньше, т.к. при недостатке охлаждения система понижает напряжение нагруженных ядер, балансируя производительность и энергопотребление, в итоге все ядра могут работать на пике нагрузки только какое-то время, после чего частота будет неминуемо падать (если у Вас не водяное охлаждение или жидкий азот., но вряд ли это используют на серверах, хотя я видел полностью погруженные в жидкость системы - специальный хладагент, который не реагирует с платой и радиаторами и не проводит ток, - но и там температура пассивного радиатора при небольшой нагрузке была овер 40 градусов).
Поэтому когда народ берет процессоры с аналогичной частотой в бусте, но разными стоковыми частотами, то паритета они добиваются только при слабой нагрузке, а как только нагрузка растет, то большее количество ядер начинают генерировать большее количество ватт тепла, что приводит к снижению частот вплоть до стоковых. Это все, что нужно знать о серверных процессорах. Ну и нет смысла запускать систему в продуктив на сбалансированной схеме производительности и выключенном бусте, но как только система начнет использовать более 50% вычислительных ресурсов, процессор начнет медленное движение к стоковым частотам.
Вот я в 17-м купил себе 1600-й райзен 5, к нему мать на самом простом А320-м чипе. И вот в теме в комментах я как-то описывал, что у меня райзен 1600-й в некоторых вычислениях (обычное сложение много-много раз) работает быстрее I9-9900K (0,966 на I9 против 0,457 на R5-1600). Также там были тайминги на питоне для различного кода. В итоге я поменял себе проц с 1600-го на 3600-й и решил сегодня проверить, что там как со скоростью. В итоге все в 1,2-1,5 раза быстрее работает. Даже асмовский код работает на 10% быстрее, хотя это укладывается в разницу по частоте (те же 10%, т.е. 3,7 в бусте против 4,1). И я не менял ни память, ни мать, ни видео, ни БП, ни кулер - только проц. И проц новый стоил мне 11290, а старый загоню на авите за 6к))). Любителями интела так не получится...
Т.е. все упирается не в ядра даже, а в архитектуру. Вон REDIS работает со скоростью 2кк запросов в сек, 1С такое не снилось в самом радужном сне...
Я ща немного "растекусь мыслию по древу", но что, если в условиях 1С(это ORM-система) пойти по пути перевода логики работы конфигурации в хранимые процедуры/тригеры СУБД, а платформу 1с использовать просто как интерфейс для пользователя.
1С же использует СУБД исключительно в роли хранилища данных, и не важно, что СУБД стОит "бешены тыщи" и ее функционал не используется.
Пусть не 2кк запросов в секунду, но, думаю, можно повысить производительность как минимум на порядок :)
От платформенных возможностей 1С отказываться полностью не стОит.
Интересно было бы сравнить скорость выполнения того же цикла в 1С и MSSQL, например.
+ не забываем про возможности самого T-SQL в СУБД, которые не идут ни в какое сравнение с той версией T-SQL, что предоставляет 1С разработчику.
p.s. понятно, что никто не будет так делать, это всего лишь мое "....мыслие по древу"
Поставь 10-ку или линух и сильно удивишься. Этот проц должен выдавать под соточку в этом тесте. У меня 3600-й выдает 116, на работе - 125 (мать дома А320, на работе - B450, кстати на работе на 2012-й серверной винде тоже скорость была 74-76 всего). Дома до этого на Убунту 18.04 1600-й меньше 84 не выдавал, лучшие тесты - 89. На 10-й винде больше 70 даже 200G выдает. Если так нужна серверная ОСь, поставьте тогда уж последнюю версию системы.
Спасибо. Попробую на копии сервера обновить до 2019 и сделать тест.
Но частоты что я описал это ручками выставленные в биосе. И они не опускаются, во время теста, судя по CPU-Z.
Но спасибо за подсказку. Попробую.
256Гб RAM 3200
SSD Nve Samsung 4Gb
Supermicro : H12SSW-NT
1C 8.3.17.1549
PosgreSQL 11.11-5.1C
Windows Server 2019 Standard
Все из коробки, по-умолчанию. Даже чисто визуально - 1С очень медленно работает. Тест выдает 6 попугаев.
ИМХО, даже из коробки должно быть 30-40 без доп. настроек.
С чего начать поиск проблемы?
Попробуйте поставит MS SQL Express, проверьте, как изменится производительнлсть с ним.
Внесите папки 1С, включая те, которые в appdata, в исключегия для микрософт дефендера (защитника винжы), также внесите туда каталог временных файлов и базы данных.
Проверьте, кто основной потребитель нагрузки в системе, какое приложение постоянно в топе. Если это не 1С и не СУБД, постарайтесь избавиться от него.
ЗЫ: у клиента ксеон голд, тормозит на винде и MS SQL не по деццки но клиент думает, что так и надо - даже не пытаюсь его разочаровывать, т.к. мои задачи не касаются производительности.
Попробуйте файловый тест запустить. Он точно должен показать, на сколько у Вас там все плохо. Если покажет 20, то у меня калькулятор столько кажет...
ЗЫ: У меня на винде файловая как-то показывала на R5 3600 40, проблема была в дефеендере винды. Если у Вас файловая показывает нормальный результат, а серверная тупит, то все сводится к тому, что именно СУБД тормозит - что-то ему мешает. Обычно файловая всего в 2-2,5 раза быстрее серверной, а не в 10-15 раз как у вас... Где БД находится? Может на сетевом диске в облаке )))
Доброго времени суток!
Как будет минутка, поделитесь, пожалуйста, впечатлениями от практического использования AMD EPYC в сервере.
В первую очередь стабильность интересует.
И было бы классно услышать сравнительное мнение о скорости работы для связки Windows Server 2019 Standard + PosgreSQL 11.11-5.1C + 1C по возможности, конечно.
Я не фанат ни AMD, ни Intel, но так исторически сложилось, что с ПК на AMD у меня было больше проблем, чем с Intel. С серверами на AMD не работал никогда.
Сейчас, вроде бы, AMD по всем параметрам бьет Intel, но терзают смутные сомненья ;)
Спасибо!
ЗЫ: занимался тут на днях тестом рандома на разных процах и осях. У нас на работе на 10ке на моем ноуте реал рандом 21кк раз за 3 секунды, длма на 10ке на R53600 за секунду, в WSL2 на нем же за 3 сек, на R3500 ubuntu server 2020 - 3 сек, на работе на убунту 10 сек на R5 3600 (там более старая версия убунты), на i7 на ноуте у коллеги с 7кой - 25 сек. Мистика. Один и тот же код на c++ скомпилированный или cl.exe (у коллеги и у меня на раьоте на ноутах), или на g++10. O3 ге влияет вообще никак. Хочу на других процах протестить. Если кому интересно - (фактически код показывает распределение значений от 0 до 1 с шагом 0.1)
Также смотрел на CachyOS, но там юзал ZFS, а она, как оказалось, медленнее, но и там было 208/116. Если бы там была xfs, то скорее всего смог бы добраться до повторяемых 220+ и 120+ соответственно.
Так что странно, что 141 на файловой и 60 на серверной для 7950х.
ЗЫ: как-то знакомые брали себе 14900 (без К), на венде на серверной удалось после битья в бубен достичь 58, на файловой - 156.
Вы можете заказать платную консультацию или разработку у автора. Будет создан приватный заказ на «Бирже заказов» для автора.
№ 1240616
Создание 25.05.20 00:00
Обновление 25.05.20 00:00
Просмотры 73325
Загрузки 0
Рейтинг
63
Комментарии 256
Код открыт Да
Рубрики HighLoad оптимизация
Кому
Системный администратор
,
Разработчик
Тип файла Нет файла
Платформа Не имеет значения
Конфигурация Универсальные
Операционная система Не имеет значения
Страна Не имеет значения
Отрасль Не имеет значения
Налоги Не имеет значения
Вид учета Не имеет значения
Доступ к файлу Бесплатно (free)