Выбор процессора для 1С: конец споров или начало?

25.05.20

База данных - HighLoad оптимизация

Периодически занимаясь исследованиями производительности я повидал много решений. Делюсь некоторыми выводами на основании теста Гилева и собственных мыслей.

Компьютеры, принтеры, процессоры... (с)

ВВЕДЕНИЕ

Я давно уже занимаюсь проблемами производительности программного обеспечения и железа, поэтому решил поделиться с сообществом своим взглядом на данные проблемы как в части железа и настройки ОС (на примере запроса к данным, выгруженным из теста Гилева), так и в части подхода к архитектуре организации хранения данных (#тыжархитектор!)

Сначала я расскажу, какие данные я выгрузил из табличной части обработки тестирования производительности теста Гилева, как я это сделал, куда вставил и каким запросом получил результат для анализа. Далее мы пройдемся по списку процессоров и попробуем понять, от чего зависит производительность, а дальше я уже коснусь принципов организации данных для повышения производительности в тех или иных кейсах.

СБОР ДАННЫХ

Для сбора данных я использовал последнюю версию теста Гилева, в которой произвел тест своего компьютера - скромного ноутбука от HP с процессором Intel 8250U, 16 Гиб ОЗУ (2х8х2400 МГц) и SSD от SmartBuy - какой-то самый дешманский винт на полгига, который, кстати, работает быстрее основного винта от самсунга (SSD овер M2, 128 Гиг). Также в системе установлен Linux Mint с ядром 5.3.0.53 из стандартного репозитория, ядро это запускается без каких бы то ни было опций.

После теста файловой базы на экране отобразилось количество попугаев (80.65) и список произведенных тестов за всю тестовую историю (наверное).

Дальше я нажал правой кнопкой мышки на историю и выбрал выгрузку в тестовый файл колонок с периодом, именем пользователя, результатом теста, архитектурой, процессором.

В постгресе я создал табличку (без всяких там индексов) с полями: period, user, value, arch и proc, после чего попытался загрузить туда данные. Загрузка выдала ошибку в формате даты. После кучи попыток привести дату к вменяемому состоянию я натыкался на ошибку часового пояса, в качестве которого система пыталась интерпретировать поле с именем пользователя. В итоге трабла оказалась в разделителе, и поменяв ТАБ на "|" загрузка прошла. Вот команда, которой я преобразовал выгруженный файл в тот, который смог скушать постгрес:

sed -e 's/|/\_/g' \
-e 's/^\([0-9]\{2\}\)\.\([0-9]\+\)\.\([0-9]\+\)\s*[0-9:]\+\t/\3-\2-\1|/g' \
-e 's/\t/\|/g' \
-e 's/\([0-9]\+\)\,\([0-9]\+\)/\1\.\2/g' \
-e 's/||\B/|/g' \
-e '/||/d' \
gilev.txt > gilev1.txt

Здесь символ "\" означает перенос строки - в консоли Linux так делать можно и нужно.

Сначала я меняю все палки на подчеркивания, чтобы в последствии эти палки не были интерпретированы постгресом, как разделители. Дальше я меняю дату из формата ДД-ММ-ГГГГ ЧЧ:ММ:СС на ГГГГ-ММ-ДД, дальше меняю все ТАБ на "|", потом меняю запятые в дробном результате выгрузки на точки, потом меняю двойной разделитель в конце строки на одинарный (в случае, когда имя процессора отсутствует - это, обычно, клиент для Linux, в котором тест Гилева не может определить имя процессора - это можно сделать чтением /proc/cpuinfo - там есть и ядра, и частота, и вся прочая дичь). Дальше удаляю все строки, в которых идут два разделителя подряд - случаи, в которых значение теста равно нулю.

В итоге получаю файл с количеством строк, равным 227 493 (первая строка - заголовок):

$ head gilev1.txt -n 5
Период|Пользователь имя|Значение|Архитектура|Процессор наименование
2020-05-22|starik2005@bk.ru|80.65|Файловая|
2020-05-22|ssa2|28.25|SQL|Intel(R) Xeon(R) CPU E5-2640 v3 @ 2.60GHz
2020-05-22|SKUL-02@Eugenbot|24.39|SQL|Intel(R) Xeon(R) CPU E31275 @ 3.40GHz
2020-05-22|efsol@efsol.ru|13.23|SQL|Intel(R) Xeon(R) Gold 6242 CPU @ 2.80GHz

$ tail gilev1.txt -n 3
2014-04-10|sergey@savel.pro|7.58|SQL|Intel(R) Core(TM) i7-3770 CPU @ 3.40GHz
2014-04-10|sergey@savel.pro|7.53|SQL|Intel(R) Core(TM) i7-3770 CPU @ 3.40GHz
2014-04-10|sergey@savel.pro|7.59|SQL|Intel(R) Core(TM) i7-3770 CPU @ 3.40GHz

$wc gilev1.txt -ml
  227493 16511743 gilev1.txt

Таким образом у нас здесь данные тестов с 4 октября 2014-го по 22 мая 2020-го, последний тест - мой (заметьте, нет названия процессора для Linux).

АНАЛИЗ

Для анализа данных я загрузил этот файл в постгрес - просто жамкнул правой кнопкой мышки в PgAdmin III на имени таблицы, выбрал "Импорт", выбрал файл, указал CSV, заголовок, кодировку и разделитель. Через секунду данные были загружены.

Дальше я написал вот такой вот запросик:

with
    t
    AS
    (
        select arch, case when proc is null then '-' else proc end as proc , max(value) as value
        from gilevtest
        group by arch,proc
    )
select t1.arch, t1.proc, max(t1.value), min(t1.value), avg(t1.value), sum(1)
from gilevtest as t1
    join t as t
    on t.proc = case when t1.proc is null then '-' else t1.proc end and t.arch = t1.arch
where t1.value > t.value / 2 and t1.value < 150
--and t1.proc like '%Xeon%'
group by t1.arch,t1.proc
having sum(1) > 100
order by t1.arch, avg(t1.value) desc, t1.proc 

Время выполнения этого запроса безо всяких индексов с первого раза всего ОДНА секунда.

Здесь я использовал общее табличное выражение - директива WITH, в котором я для каждого процессора получил среднее значение, чтобы потом убрать очень низкие результаты теста, которые были по всей видимости произведены в каких-то особенно плохих условиях. Фактически я здесь отрезаю все результаты, которые ниже половины среднего значения для этого процессора и выше 150. Ну и результат группирую по архитектуре и процессору, сортируя по убыванию среднего значения. Думаю, что можно было бы для этого использовать оконную функцию OVER, но до конца не понял, как ее тут применить )))

Кстати, там есть закомментированная строка с отбором по только по серверным процессорам Xeon - этим мы займемся между делом, попытавшись ответить на вопрос, какой же процессор имеет смысл тащить с китайских барахолок и сколько он стоит )))

Также я убрал процессоры, для которых было набрано меньше СОТНИ результатов тестирвоания.

РЕЗУЛЬТАТЫ

Я разделил в запросе результаты по архитектуре, так что посмотрим сначала на файловую базу.

Файловая база

> 80

Итак, для начала давайте посмотрим, какие процессоры в среднем дают больше 80 попугаев. В табличке ниже следующие колонки:

arch proc Max Min Avg
Файловая Intel(R) Core(TM) i9-9900K CPU @ 3.60GHz 119,05 62,5 95,87
Файловая - = LINUX = - 142.86 72.46 95.40
Файловая Intel(R) Core(TM) i7-6700K CPU @ 4.00GHz 128.21 78.13 94.98
Файловая Intel(R) Core(TM) i7-8700K CPU @ 3.70GHz 111.11 80.65 91.27
Файловая Intel(R) Core(TM) i7-9700K CPU @ 3.60GHz 113.64 57.47 87.32
Файловая Intel(R) Core(TM) i7-4790K CPU @ 4.00GHz 106.38 54.95 83.74
Файловая Intel(R) Core(TM) i7-7700K CPU @ 4.20GHz 111.11 55.56 83.15
Файловая Intel(R) Core(TM) i5-9600K CPU @ 3.70GHz 113.64 57.47 81.53


В итоге лидером у нас становится I9-9900K, что ожидаемо. Более быстрые процессоры от AMD просто не прошли ценз количества, т.к. AMD Ryzen 3900X показывает лучший результат, но его тестировали МЕНЕЕ ДЕСЯТИ раз.

На втором месте у нас безымянный процессор - это все процессоры, протестированные на платформе Linux в фвйловой базе - 303 результата. Где-то там есть и наш рабочий AMD Ryzen 3600, который в файловом тесте на платформе Linux набрал 125 попугаев, при том на винде эта цифра была в районе 80-ти, что как бы намекает...

Дальше идут разнообразные I7, замыкает топ лидеров I5-9600K. Думаю, что для бюджетных серверов этот процессор является самым предпочтительным по цене за попугай (если не считать Райзен 3600 с вдвое большим количеством потоков за немного меньшие деньги, или даже райзен 3500X, в котором потоков столько же, но в 4 раза больше кеша и цена ниже 10к, но т.к. тестов райзена очень мало, то считайте это моей субъективной оценкой).

70-80

arch proc Max Min Avg
Файловая Intel(R) Core(TM) i7-8700 CPU @ 3.20GHz 108.7 56.18 79.40
Файловая Intel(R) Core(TM) i7-4790 CPU @ 3.60GHz 96.15 48.08 78.87
Файловая Intel(R) Xeon(R) E-2288G CPU @ 3.70GHz 98.04 54.95 74.68
Файловая Intel(R) Core(TM) i7-6700 CPU @ 3.40GHz 100 50.51 74.24
Файловая Common KVM processor 106.38 53.76 73.18
Файловая Intel(R) Core(TM) i7-7700 CPU @ 3.60GHz 100 50.51 70.48
Файловая Intel(R) Core(TM) i7-4770 CPU @ 3.40GHz 90.91 46.3 70.22

 

Итак, в списке процессоров со средним баллом в файловой между 70 и 80 у нас ожидаемо все те же процессоры от Intel, но без суффикса "К", т.е. с заблокированным множителем и их типа нельзя гнать. Это говорит о том, что в общем и целом я использую правильную методику тестирования и данные очень коррелируют с маркетинговыми выкладками от Intel, позиционирующую процессоры со свободным множителем, как более быстрые (но, правда, и более дорогие). Да, они действительно более быстрые - тест Гилева это доказал.

Здесь у нас появляется "самый крутой" XEON - E2288G, который смог добраться до 74,68 попугаев. В принципе это аналог I9-9900K по ядрам/потокам/частоте, да и рассчитан на всего ОДИН сокет, имеет 2-х канальную память и стоимость в районе 50к. Смысла в его приобретении не вижу никакого.

Ну и "Common KVM processor" тут тоже засветился, что говорит о том, что для виртуальных сред не все потеряно.

60-70

arch proc Max Min Avg
Файловая Intel(R) Core(TM) i5-4670 CPU @ 3.40GHz 84.75 42.74 66.01
Файловая Intel(R) Xeon(R) CPU E5-2637 v4 @ 3.50GHz 80.65 43.86 64.65
Файловая Intel(R) Xeon(R) CPU E5-2667 v3 @ 3.20GHz 102.04 51.55 63.69
Файловая Intel(R) Core(TM) i5-3570K CPU @ 3.40GHz 86.21 44.25 62.79
Файловая AMD Ryzen 5 2600 Six-Core Processor 84.75 42.74 62.60
Файловая Intel(R) Core(TM) i3-4170 CPU @ 3.70GHz 76.92 40.32 62.11
Файловая Intel(R) Core(TM) i3-8100 CPU @ 3.60GHz 78.13 42.74 61.41
Файловая Intel(R) Core(TM) i5-7400 CPU @ 3.00GHz 81.97 41.32 61.29
Файловая Intel(R) Core(TM) i3-7100 CPU @ 3.90GHz 83.33 44.25 61.19
Файловая Intel(R) Core(TM) i5-3570 CPU @ 3.40GHz 79.37 40.65 61.15
Файловая Intel(R) Core(TM) i5-4460  CPU @ 3.20GHz 87.72 44.25 60.79
Файловая Intel(R) Xeon(R) CPU E3-1230 V2 @ 3.30GHz 75.76 39.06 60.78
Файловая Intel(R) Core(TM) i3-6100 CPU @ 3.70GHz 79.37 40 60.50
Файловая Intel(R) Core(TM) i7-3770 CPU @ 3.40GHz 80.65 41.32 60.16
Файловая Intel(R) Core(TM) i5-3550 CPU @ 3.30GHz 83.33 41.67 60.13

 

Вот тут уже интересно - появляются базарные Xeon'ы, которые в принципе имеет смысл тащить с Китая, но их цены будут далеко не три копейки - ройте алик. Среди них выделяется E5-2667 v3, который в максимуме преодолевает планку в сотню попугаев, при том его цена на алике в районе 200 долларов, на e-bay - в районе 7к рублей, а в местной рознице - 140к, что как бы намекает бессмысленность его покупки у местных барыг )))

Также тут появился первый процессор от AMD, который в пределе набирает здесь 84,75 попугаев. Но это винда, а на Linux даже мой Ryzen 1600 набирает в пределе 89 попугаев, при этом ZEN+ должен набирать где-то под СТО (т.к. Ryzen 3600 на ZEN2 набирает 125).

Продолжать рассказ про файловую я не буду, т.к. процессор, который показал средний балл ниже 60-ти попугаев, в принципе недостоин быть в качестве камня для работы с 1С.

ИТОГИ ТЕСТА ФАЙЛОВОЙ

Итак, по итогам теста объективно самое лучшее решение для малобюджетного компьютера для 1С (например, компьютер разработчика с множеством файловых баз) - это компьютер на базе i5-9600K за 15 тысяч рублей (стоимость процессора). Субъективно же в качестве самого бюджетного лидера лично я бы взял AMD Ryzen 3600 или 3500X, кои в тесте отсутствуют из-за очень небольшого количества проведенных на них тестов, а эти тесты не могут показать объективную картину.

SQL - КЛИЕНТ-СЕРВЕРНЫЙ ВАРИАНТ

Я здесь не разделял PostgreSQL и MS SQL, т.к. для однопоточного теста Гилева разница средних значений для них несущественна.

> 40

arch proc Max Min Avg
SQL Intel(R) Core(TM) i9-9900K CPU @ 3.60GHz 68.49 34.25 46.43
SQL - = LINUX = - 76.92 38.76 45.53
SQL Intel(R) Core(TM) i7-6700K CPU @ 4.00GHz 68.49 34.25 44.75
SQL Intel(R) Core(TM) i5-9600K CPU @ 3.70GHz 62.5 31.65 44.52
SQL Intel(R) Core(TM) i7-4790K CPU @ 4.00GHz 64.1 32.26 43.30
SQL Intel(R) Core(TM) i7-7700K CPU @ 4.20GHz 64.1 32.26 42.81
SQL Intel(R) Xeon(R) Gold 6144 CPU @ 3.50GHz 60.98 30.67 42.04
SQL Intel(R) Xeon(R) Gold 6154 CPU @ 3.00GHz 67.12 33.78 41.74
SQL Intel(R) Xeon(R) W-2145 CPU @ 3.70GHz 58.14 29.24 41.72
SQL Intel(R) Core(TM) i7-8700K CPU @ 3.70GHz 65.79 33.11 41.10
SQL Intel(R) Xeon(R) Gold 5122 CPU @ 3.60GHz 52.63 26.6 40.89
SQL Intel(R) Xeon(R) CPU E5-2643 v4 @ 3.40GHz" 68.49 34.25 40.70
SQL Intel(R) Xeon(R) Gold 6254 CPU @ 3.10GHz 54.95 28.41 40.31

 

Итак, тесты процессоров, у которых больше СОРОКА попугаев, тоже вполне ожидаемы. На первом месте опять I9-9900K, на втором все процессоры, которые тестировались на платформе Linux, соответственно независимо от процессора это был PostgreSQL - таких тестов 838. Это снова говорит о том, что даже несмотря на процессор, скульный тест под Lniux уступил только ТОПчику. Я бы тут сделал еще один возможно неправильный вывод, что Linux и Postgres - это ТОПчик. Предположу, что вклад сюда могли внести и вычеркнутые из тестов на винде процессоры AMD - там они не вычеркнуты, т.к. сами процессоры нет возможности определить, ибо тест Гилева не собирает данные о процессорах при работе под Linux'ом.

Также здесь у нас снова появляется I5-9600К - он здесь на ЧЕТВЕРТОМ месте. Поэтому я, лично, объективно признаю этот процессор самым эффективным по отношению цена/производительность. Т.к. рекомендуется, чтобы количество пользователей на ядро не превышало 10, то этот процессор смог бы дать работать 50-ти пользователям без особых напрягов.

30-40

arch proc Max Min Avg
SQL Intel(R) Core(TM) i7-8700 CPU @ 3.20GHz 56.18 28.57 39.49
SQL Intel(R) Xeon(R) Gold 6134 CPU @ 3.20GHz 51.55 25.91 38.96
SQL Intel(R) Xeon(R) CPU E5-2667 v3 @ 3.20GHz 62.5 31.45 38.67
SQL Intel(R) Xeon(R) Gold 6128 CPU @ 3.40GHz 54.35 27.47 37.84
SQL Intel(R) Xeon(R) CPU E5-2643 v3 @ 3.40GHz 48.08 24.15 36.55
SQL Intel(R) Xeon(R) CPU E5-1650 v4 @ 3.60GHz 49.5 24.88 36.49
SQL Intel(R) Xeon(R) CPU E3-1270 v6 @ 3.80GHz 52.08 26.18 36.23
SQL Intel(R) Xeon(R) E-2186G CPU @ 3.80GHz 47.62 26.46 35.54
SQL Intel(R) Core(TM) i7-4790 CPU @ 3.60GHz 51.55 25.91 35.25
SQL Intel(R) Xeon(R) Gold 6136 CPU @ 3.00GHz 50 25.13 34.88
SQL Intel(R) Xeon(R) CPU E5-2637 v4 @ 3.50GHz 46.3 23.26 34.81
SQL Intel(R) Core(TM) i7-4770 CPU @ 3.40GHz 50.51 25.51 34.74
SQL Intel(R) Core(TM) i7-7700 CPU @ 3.60GHz 49.02 24.63 34.53
SQL Intel(R) Xeon(R) CPU E3-1270 V2 @ 3.50GHz 43.48 21.83 33.72
SQL Intel(R) Core(TM) i7-3770K CPU @ 3.50GHz 47.62 24.15 33.64
SQL Intel(R) Xeon(R) CPU E5-2690 0 @ 2.90GHz 61.73 31.06 33.51
SQL Intel(R) Xeon(R) Gold 6126 CPU @ 2.60GHz" 47.62 24.15 33.04
SQL Intel(R) Xeon(R) CPU E5-1650 v2 @ 3.50GHz 45.45 22.73 32.89
SQL Intel(R) Xeon(R) CPU E3-1220 v3 @ 3.10GHz 43.86 22.03 32.68
SQL Intel(R) Xeon(R) CPU E5-2667 v4 @ 3.20GHz 46.73 23.47 32.60
SQL Intel(R) Xeon(R) CPU E5-2623 v3 @ 3.00GHz 43.86 22.32 32.56
SQL Intel(R) Xeon(R) Silver 4210 CPU @ 2.20GHz 43.1 22.52 32.38
SQL Intel(R) Xeon(R) CPU E3-1220 V2 @ 3.10GHz 40.98 20.66 32.34
SQL Intel(R) Core(TM) i7-3820 CPU @ 3.60GHz 47.17 23.7 31.94
SQL Intel(R) Xeon(R) CPU E3-1270 v3 @ 3.50GHz 42.74 22.52 31.54
SQL Intel(R) Xeon(R) CPU E5-2667 v2 @ 3.30GHz 45.45 22.73 31.48
SQL Intel(R) Xeon(R) CPU E5-2643 0 @ 3.30GHz 47.62 24.04 31.35
SQL Intel(R) Core(TM) i7-3770 CPU @ 3.40GHz 42.37 21.19 31.23
SQL Intel(R) Xeon(R) CPU E3-1240 v5 @ 3.50GHz 44.25 22.32 30.76
SQL Intel(R) Xeon(R) CPU E3-1240 v3 @ 3.40GHz 40.65 20.33 30.14
SQL Intel(R) Core(TM) i3-4330 CPU @ 3.50GHz 33.33 17.99 30.08

 

Здесь уже процессоров куда больше. Радует появление в списке уже отметившегося в файловой базе E5-2667 v3 со средним значением в 38 попугаев, что делает его отличным вариантом для корпоративного использования, т.к. в нем 4 канала памяти и поддержка двух сокетов, что в пределе дает 16 ядер и 32 потока, которых должно хватить на обслуживание 200-300 пользователей с максимально возможной производительностью.

Смысла рассматривать процессоры, которые дали в среднем меньше 30 баллов, на мой взгляд нет.

ИТОГИ ТЕСТА SQL

Клиент-серверная база работает совсем не так, как файловая. В ней ПО, отвечающее за хранение данных, отделено от кода сервера приложений, поэтому скорость работы одного пользователя с такой базой будет в ДВА раза МЕНЬШЕ, т.к. 1С берет данные не из своего файлового хранилища, а запрашивает из внешней СУБД. Но если пользователей очень много, то клиент-серверный вариант обеспечивает производительность параллельной работы. И если в файловой базе без использования таких фич, как публикация на веб-сервере, скорость работы даже 10-ти пользователей может упереться в скорость обмена данными по сети, а если все это происходит на одном компьютере (например, когда все подключаются через удаленный рабочий стол), то все будет упираться в исключительные блокировки таблиц при записи данных, которые будут вынуждать остальных пользователей ждать, при этом перед любой транзакцией файловая база будет искать файлы блокировок и разбираться, какие ресурсы заблокированы, а какие - нет. Поэтому при работе даже двух пользователей файловая база иногда начинает тормозить.

На мой взгляд, по отношению цены и качества в клиент-серверном варианте побеждает опять I5-9600K за 15 тысяч рублей. Для работы до 50-ти пользователей этот процессор на мой скромный взгляд, основанный на результатах теста и количестве ядер, будет оптимальным. Субъективно же более дешевый AMD Ryzen 3500X будет не хуже, а 3600-й - лучше, т.к. у него в 2 раза больше потоков, что в пределе может обеспечить работу 100-ни пользователей клиент-серверной базы в комфортной зоне.

Среди процессоров класса Enterprise, к которым относятся процессоры Intel Xeon и AMD Epyc (тестов которых бескрайне мало), то объективно лучшим процессором по цене за попугай будет E5-2667 v3, т.к. он поддерживает ДВА сокета и может обеспечить приемлемой производительностью 200-300 пользователей на своих 16 ядрах и 32-х потоках и 4-х канальной памятью.

Среди дорогих процессоров этого сегмента самым лучшим для 1С будут Xeon(R) Gold 6144, у которого из этой серии максимальная частота в стоке и в бусте, но ценник в 3 килобакса за камень как бы намекает, что если у тебя меньше 300 пользователей, то это не для тебя. Этот процессор может быть установлен в плату с ЧЕТЫРЬМЯ сокетами и имеет 6-канальный контроллер памяти, что делает возможным собрать систему из 32-х ядер и 64-х потоков, которые могут дать вполне хорошо работать уже 600-м пользователям. Его собрат Xeon(R) Gold 6146 имея чуть более низкую частоту в стоке и в полтора раза большее количество ядер уже может позволить не сильно напрягаясь работать почти 1000 пользователей при 4-х сокетной сборке, стоимость и энергопотребление которой заставит взывать даже тех, кто покупает игровые компы на базе I9-9900X за пол-ляма.

ОБЩИЙ ИТОГ

Объективно побеждает у нас I9-9900K, который и в файловой, и в серверной в среднем набрал больше всех баллов. Но он не сильно выиграл у более дешевого I5-9600K, который я бы назвал лучшим процессором для компьютера разработчика 1С (если, конечно, Вы предвзято относитесь к процессорам на ZEN2 от AMD) и для небольшой компании, в которой с 1С одновременно работает не более 50-ти пользователей.

НАСТРОЙКА ПРОИЗВОДИТЕЛЬНОСТИ

Тесты хорошо показали, что один и тот же процессор как в файловой, так и в клиент-серверной базе может работать быстро, а может и тупить. Основная причина "тупизны" - это "сбалансированная" схема управления питанием, которая большую часть времени держит процессор на низкой частоте. Она в Windows является значением по-умолчанию, поэтому администратор легко может и забыть об этом, оставив все как есть. В 100% случаев установка максимальной производительности позволит повысить результат теста Гилева в полтора-два раза, а то и в три-четыре. Это в большей мере справедливо для серверной базы, но и в файловой такая настройка увеличит количество попугаев.

Т.е. первый совет самый простой - переключить схему энергопотребления сервера в режим высокой производительности.

Так же стоит обратить внимание на частоту памяти и на производительность дисковой подсистемы (IOPS). Чем больше эти цифры, тем выше скорость работы 1С.

Вообще, 1С - это стековая виртуальная машина интерпретатора, которая исполняя код кладет команды в стек и дальше вызывает функции, реализующие код команд на уровне процессора. При этом сначала строка разбирается, определяются функции, которые должны быть вызваны - присваивание, ветвление, встроенные функции и процедуры, вычисление выражений и т.д. Также происходят вызовы сервиса хранилища данных, в которые передается преобразованный текст запроса (если говорить о клиент-серверной базе, но в любом случае запрос к хранилищу данных вызывает кучу ожиданий на вводе-выводе или сетевом обмене).  И если система работает с данными, сохраненными в базе, то 1С производит кучу чтений из хранилища или кучу запросов к СУБД, которые предварительно преобразовываются. И тут причина того, что файловая база работает быстрее в однопоточном тесте в том, что не нужно ждать от СУБД данных - они читаются из файла файловой базы, содержимое которого находится в кеше ОС. Да, содержимое таблиц в СУБД тоже закешировно, но все-равно остается ожидание ответа запроса от другого процесса.

При этом скорость при включении профиля высокой производительности сильно растет из-за того, что процессор, переключаясь между контекстами выполнения кода 1С, ожидания на вводе-выводе и кода СУБД, производит изменение частоты конкретного ядра, занятого чем-либо. Пока сканируется память, работающая на более низкой частоте, чем частота процессора, пока читается файл, пока переключается контекст - все это вызывает циклы ожидания, и режим сбалансированной производительности снижает частоту ждущего ядра, пытаясь сэкономить электричество. При переключении в режим высокой производительности частота процессора может снижаться не так сильно и не так много времени нужно системе, чтобы восстановить максимально возможную частоту в бусте.

Из-за этого нужно не только включать высокую производительность, но и механизм Turbo-Boost, который позволяет системе работать куда быстрее стоковых частот. Благодаря этому даже процессоры со стоковой частотой в 1,6ГГц (как у меня) могут набрать в тесте Гилева более 80-ти баллов, при том субъективно работа в файловой базе ЕРП 2.4 на моем ноутбучном процессоре происходит куда быстрее, чем на рабочем 2ГГц Xeon с 32-мя ядрами - кто-то забыл грамотно настроить сервер.

ДАННЫЕ

Какой бы ни был быстрый и настроенный сервер, всегда найдутся данные, которые его завалят. Поэтому грамотная архитектура здесь, как говорится, "Must Have".

В основном запросы, которые кладут сервер, достаточно просты и однообразны и реализуют какое-нибудь декартово произведение достаточно большой таблицы на саму себя. Например, если соединить таблиц из 100к записей с самим собой, то на выходе мы получим 100 000 000 000 строк (я просто 100к умножил на 100к). Такой запрос легко убьет любую базу на любом сервере, ибо сто лярдов строк даже по килобайту дадут терабайт возвращаемой инфы, что повесит любой супермощный и отлично настроенный сервак. Отсюда как бы совсем простой и очевидный совет так не делать. А сделать так может пользователь, который, например, вызовет отчет без фильтрации, который в своей логике подразумевает эту фильтрацию в той или иной мере. Ну или отбор по реквизиту регистратора укажет, и если это бухгалтерский регистр, то регистраторов у него может быть очень много, и каждый регистратор станет соединением, что может создать очень нехорошую нагрузку на сервер.

Здесь мы можем подойти к двум видам баз данных - OLTP и OLAP. Первая база - это хранилище транзакций, вторая - большой регистр всего и вся для отчетов. Преобразуя логику отчетов из прямого доступа к регистрам бухгалтерии и документам к логике отдельного хранилища можно добиться роста производительности системы и снижения нагрузки на систему.

В принципе OLAP и OLTP  могут быть элементами одной базы, но лично я бы эти базы данных разделил, т.к. для каждой базы могут существовать разные настройки, позволяющие ей работать максимально быстро.

Разделив OLTP - базу данных, которая регистрирует события и контролирует остатки, оперирует множеством маленьких запросов для извлечения данных по индексам и множеством запросов на запись данных - и OLAP - базу, в которой осуществляются большие запросы к общему кубу данных, - можно уже значительно снизить нагрузку на сервер, даже не меняя базу для OLAP - просто скопировав в нее основную базу данных. Но если данные для OLAP преобразовать в отдельные регистры, то скорость доступа к ним даже больших запросов может серьезно вырасти.

В общем основной архитектурный совет - абстрагируйтесь от 1С в части построения хранилища отчетных данных, вытащите его наружу из Вашей транзакционной базы, используйте BI-инструменты - все это сократит время ожидания при отражении операций и при получении отчетных данных.

Для подобных архитектурных подходов в последнее время и сама 1С сделала немало: Анализ данных, Дата-акселератор и Копирование данных. Эти инструменты могут помочь выйти в части OLAP на другую архитектуру для крупных предприятий с хорошим бюджетом на IT, а мелким компаниям остается научиться выбирать и настраивать сервер, чтобы у него оставался запас по производительности, т.к. они вряд ли смогут оплатить OLAP, да и не нужен он им особо - свои три копейки они посчитают и без него, главное чтобы сервер не вис )))

Всем спасибо за внимание.

Вступайте в нашу телеграмм-группу Инфостарт

процессор выбор скорость hiload benchmark производительность

Вы можете заказать платную адаптацию этой статьи под ваши задачи на «Бирже заказов».

  • 0% комиссии — оплата напрямую исполнителю;
  • Исполнители любого масштаба — от отдельных специалистов до команд под проект;
  • Прямой обмен контактами между заказчиком и исполнителем;
  • Безопасная сделка — при необходимости;
  • Рейтинги, кейсы и прозрачная система откликов.

См. также

HighLoad оптимизация Разработчик 1С 8.3 1С:ERP Управление предприятием 2 Бесплатно (free)

Использование оператора «В» для полей или данных составного типа (например, Регистратор) может приводить к неочевидным проблемам.

10.11.2025    16045    ivanov660    48    

58

HighLoad оптимизация Разработчик 1С:Предприятие 8 1C:ERP Бесплатно (free)

Приведем примеры использования различных в динамических списках и посмотрим, почему это плохо.

18.02.2025    16597    ivanov660    39    

62

HighLoad оптимизация Разработчик Россия Бесплатно (free)

А вы знали, что сервер 1С при соединении с базой на сервере PostgreSQL самостоятельно устанавливает некоторые параметры? Это важно знать при настройке сервера и отладке долгих запросов. Предлагаю разобраться.

27.08.2024    10519    soulner    10    

41

HighLoad оптимизация Технологический журнал Системный администратор Разработчик Бесплатно (free)

Обсудим поиск и разбор причин длительных серверных вызовов CALL, SCALL.

24.06.2024    19265    ivanov660    13    

64

HighLoad оптимизация Разработчик 1С:Предприятие 8 Бесплатно (free)

Метод очень медленно работает, когда параметр приемник содержит намного меньше свойств, чем источник.

06.06.2024    25131    Evg-Lylyk    73    

46

HighLoad оптимизация Разработчик 1С:Предприятие 8 1C:Бухгалтерия Бесплатно (free)

Анализ простого плана запроса. Оптимизация нагрузки на ЦП сервера СУБД используя типовые индексы.

13.03.2024    14737    spyke    29    

54
Комментарии
Подписаться на ответы Инфостарт бот Сортировка: Древо развёрнутое
Свернуть все
1. 3vs 25.05.20 07:39 Сейчас в теме
Интересно на серверах Омской фирмы BITBLAZE на отечественных процессорах Эльбрус bitblaze.ru кто-нибудь подобные тесты проводил?
maksa2005; KilloN; METAL; gc3; +4 – Ответить
2. maksal 51 25.05.20 08:24 Сейчас в теме
Отличная статья! Спасибо за труд!
user932300; METAL; +2 – Ответить
3. capitan 2611 25.05.20 09:46 Сейчас в теме
Круто. Где можно столько процов достать ? )
Практически никогда не видел сервера приложений, производительность которого уперлась бы в процессор.
Скорее в винты все упирается.
А процессор конечно всегда хочется побыстрее, это первое что на ум приходит.
И от AMD еще с давних времен осадочек остался. В основном конечно они как печка греют. Не знаю как нынешние.
Ну и компилируют софт в 90% исходя их интелов.
Поэтому не знаю не знаю.
4. nickperel 4 25.05.20 11:12 Сейчас в теме
Надо уже, наверно, в 2020 переехать на многопоточность внутри кода клиентов и платформы. Многоядерные процессоры общедоступны
Нет - по прежнему 1С хорошо пилят те процессоры, где высокая максимальная частота на ядро и архитектура старается "держать" ее как можно выше при общей нагрузке.
Да и вообще, желательно убрать ее совсем - эту "общую нагрузку". Тогда тест покажет особенно высокие попугаи.
У 1С везде пилит линейный код. Я даже не слышал чтобы на это обращалось внимание и считалось проблемой.
"Используйте регламентные задания..", да да.
15. ArchLord42 84 25.05.20 14:12 Сейчас в теме
(4) Ох уж эти разрабы, не дают простому один эснику страдать от синхронизации потоков, конкуретности, дедлоков и контекст свитчинга :(((
Фоновые задания слишком легко...понимаю :)

Если вы думаете, что сделать многопоточное приложение легко, то я вас разочарую, это довольно сложный процесс, я даже больше скажу, в 2020!!! году современные приложения на других языках пишутся не с оглядкой на многопоточность, а на максимальную утилизацию потоков, распространненный async \ await паттерн тому пример.
16. starik-2005 3309 25.05.20 14:21 Сейчас в теме
(15)
Если вы думаете, что сделать многопоточное приложение легко, то я вас разочарую, это довольно сложный процесс
В действительности все зависит от сложности приложения. Я, например, множество Мандельброта на С рисовал, разделив окно на столько частей, сколько у меня ядер/потоков. Более того, встречал в интернете простой код, который делал то же самое - создать поток и передать ему координаты - вообще не проблема.

Но когда в приложении разные потоки могут читать и писать одно и то же, то, обычно, выделяют быстрый однопоточный механизм вставки/чтения и вокруг него множество потоков генерируют ему задачи. На этом принципе основан REDIS и NGINX, например, поэтому они такие резкие )))
20. ArchLord42 84 25.05.20 18:18 Сейчас в теме
(16)
Я, например, множество Мандельброта на С рисовал, разделив окно на столько частей, сколько у меня ядер/потоков. Более того, встречал в интернете простой код, который делал то же самое - создать поток и передать ему координаты - вообще не проблема.


Вы как пример приводите 1 алгоритм, который к счастью, хорошо лег, на многопоточную архитектуру, я же говорю о приложении, где алгоритмов много и не всё хорошо ложится в многопоточность и начинаются проблемы.


(16)
Но когда в приложении разные потоки могут читать и писать одно и то же, то, обычно, выделяют быстрый однопоточный механизм вставки/чтения и вокруг него множество потоков генерируют ему задачи. На этом принципе основан REDIS и NGINX, например, поэтому они такие резкие )))


Вот как раз наоборот, из-за того NGINX однопоточен и у него нет контекст свитчинга, он работает быстро :)
Так же у него выделяется несколько дочерних процессов (workers) обычно на количество ядер, но все процессы работают в однопоточном режиме, тут скорость же достигается из-за того, что работает они в асинхронном режиме со стейт машинами, async IO + events, грубо говоря тот же async \ await.

В общем формула тут такая:

Быстродействие != многопточность
Многопточность != асинхронность
21. starik-2005 3309 25.05.20 18:27 Сейчас в теме
(20)
NGINX однопоточен
У него процесс, который обходит пул, соединений действительно однопоточен. Остальные потоки - это потоки инициируемых соединений, которые вставляют в пул новые задачи. ТАкже и в REDIS - есть поток работы с таблицей, есть потоки, которые поставляют ему порции данных и ключей, в итоге блокируются только они, а основной процесс работает без блокировок, поэтому и быстрый. У меня REDIS показывает на set/get тесте больше 2кк операций в секунду:
sergey*ProBook430G5:~$ redis-benchmark -P 100 -n 3000000 -t get set
====== set ======
3000000 requests completed in 1.43 seconds
50 parallel clients
3 bytes payload
keep alive: 1

0.02% <= 1 milliseconds
15.29% <= 2 milliseconds
99.94% <= 3 milliseconds
100.00% <= 3 milliseconds
2102312.50 requests per second


Но, например, множество математических задач могут хорошо параллелиться - нейросети те же, рендеринг, кодировка видео/фото, архивирование/разархивирование. Там основной принцип в разделении данных на порции и скармливание этих порций параллельным обработчикам, в итоге скорость растет пропорционально количеству потоков процессора.
22. ArchLord42 84 25.05.20 18:28 Сейчас в теме
Если бы на каждое содеинение инициировался поток, вам бы не процессора не оперативной памяти не хватило. Это довольно жуткий оверхед получился бы.

Рекомендую ознакомится с докладом Jeffrey Richter — Building responsive and scalable applications, на ютубчике есть, там супер подробно рассказано что такое асинхронность, почему многопточность это иногда зло и как делать приложения быстрыми. Правда про .NET (но кода почти нет) и на иглише, но подробнее не видел

А то что вы мне какие то замеры кидаете...и про нейронки пишите...хм да это и так понятно, я ж не говорю, что многопоточность = зло. Я говорю, что это сложно, не всегда возможно (кстати да, GUI приложения очень сильно завязаны на одном едиственном GUI потоке) и что асинхронность это чаще всего залог производительности, которую часто путают с многопоточностью.
24. starik-2005 3309 25.05.20 18:33 Сейчас в теме
(22)
Если бы на каждое содеинение инициировался поток
Смотря сколько бы он жил. Если миллисекунду, то за секунду таких потоков можно было бы очень много породить. В вебке все как раз меряется этими миллисекундами, и борьба, соответственно, идет за них. Здесь у меня бенчмарк REDISа работает в режиме именованного потока, т.е. пишет в pipe-файл данные, а на той стороне кто-то этот файл слушает. Но если сделать это без именованного потока, то скорость падает лишь в 10 раз:
sergey*ProBook430G5:~$ redis-benchmark -n 3000000 -t get set
====== set ======
3000000 requests completed in 14.59 seconds
50 parallel clients
3 bytes payload
keep alive: 1

99.94% <= 1 milliseconds
100.00% <= 2 milliseconds
100.00% <= 3 milliseconds
100.00% <= 3 milliseconds
205578.02 requests per second
Показать
25. ArchLord42 84 25.05.20 18:34 Сейчас в теме
(24) Не важно сколько бы он жил, важно что если я кину 1000 реквестов в одну единицу времени оверхед по памяти и процессору (на инициализацию потока) был бы очень сильным, вот как раз так АПАЧ \ IIS и работают.

Даже если представить что у нас 512gb оперативки, и скажем 64 ядерный проц, то в тик времени, процессор будет пережевывать только 64 потока \ реквеста, ну а на завершение реквеста нам будет нужно явно не 1 тик, а намного больше, что же для остальных реквестов?) ну ничего подождут :))

Ваш бенчмарк, который вы мне второй раз кидаете, показывает как хорошо работает асинхронность в nginx, спасибо я и так это знаю :)

Раз так любите бенчмарки, вот вам бенчмарк, который показывает разницу в подходах:
1) поток на реквест
2) асинхронный поток, который обрабатывает несколько реквестов.
https://i.stack.imgur.com/ds7Ly.png

ЗЫ. на самом деле, там все посложней, осюда чаще всего для повышения производительсности используется thread pool ибо не всегда можно избежать блокирующего вызова, в общем доклад выше, очень рекомендую :)
32. starik-2005 3309 25.05.20 19:03 Сейчас в теме
(25)
в общем доклад выше, очень рекомендую
Посмотрел, хорошая презентация. Все упирается в асинхронность, за которую я уже давно топлю в 1С и подвижки вроде как есть, но пока, на мой взгляд, достаточно туго.

Да, давно применяется пул потоков, который ими рулит. В 1С даже это используется во многих подсистемах управления многопоточностью, где один управляющий поток кормит потоки обработки извлекаемыми данными.
90. nickperel 4 26.05.20 16:35 Сейчас в теме
(15) Я знаю как их не просто делать. Поэтому давайте ничего не делать.
7. AndrewAks 11 25.05.20 12:20 Сейчас в теме
(3) Давно уже прошли времена горячих AMD, сейчас Intel гораздо горячее. И производительность в пересчёте на ватт у AMD гораздо выше, не зря Cloudflare в последнее время только Epyc ставят - по их исследованиям, AMD аж на 25% превосходят Intel по этому показателю. По абсолютной производительности Intel рулит только в играх, (да и то уже не во всех) буквально на единицы FPS. Ну и по цене AMD очень сильно дешевле. Остаётся загадкой, почему до сих пор в корпоративном сегменте царствует Intel (думаю, здесь надо искать причины в откатах вендорам)
unduty; SuhoffGV; Evg-Lylyk; mrsmrv; +4 – Ответить
8. capitan 2611 25.05.20 12:30 Сейчас в теме
(7)Когда поколение сменится, тогда может быть )
Откаты не при чем. Вендорам нужна стабильность, чем выше тем лучше.
Даже андроид студии эмулятор только в этом году оптимизировали под AMD и то под относительно новые камни.
А я со своим домашним ПК тихо курю в сторонке. Как два ветеранчика )
Посмотрю пока как на ноутах дело пойдет.
И да, не бывает очень сильно дешевле ни с того ни с сего.
13. AndrewAks 11 25.05.20 13:27 Сейчас в теме
(8) Ни с того ни с сего не бывает ) если AMD прочно займут положение лидера, то цены тоже повысят. Сейчас же их цель - откусить как можно бОльшую долю рынка. Что касается ноутов - Ryzen 4xxx рвут новейшие мобильные Intel по всем показателям, и даже настольные часто опережают. Я бы вот с удовольствием взял какой-нибудь неттоп на Ryzen 7 4800H, холодный(45 Ватт), 8 ядер/16 потоков, высокая частота, быстрое видеоядро (старые игрушки раз в год гоняю), быстрее Intel Core i7-9700K(у которого в номинале потребление 95 Ватт, а по факту выше!), мне бы лет на 7 хватило. Но пока только ноуты на них делают.
17. capitan 2611 25.05.20 14:35 Сейчас в теме
(13)
Ryzen 7
ИМХО процессоры так быстро дешевеют, что я пока на самых топовых не вижу смысла брать.
+ На них еще все сыро и по факту это недешевый эксперимент.
https://technical.city/ru/cpu/Core-i7-4500U-protiv-Ryzen-5-3500U
Технологии виртуализации - нет данных
дополнительные инструкции - нет данных
а дороже в 2 раза
23. mrsmrv 129 25.05.20 18:33 Сейчас в теме
(17)
Технологии виртуализации - нет данных
дополнительные инструкции

Технологии виртуализации в процессорах амд чуть ли не раньше интела появились. А что за дополнительные инструкции?
В процессорах АМД сейчас нет лишь AVX512 относительно интела, но и они пока мало где применяются. Ну вряд ли в СУБД а тем более в 1С. Ну и актуальный сейчас Ryzen 4500u, который при 15 ваттах обходит в 65 ваттные и даже 95 ваттные процессоры конкурента. 7nm против 14nm всё же дают о себе знать, хоть и нанометры современные больше маркетинг, но всё же.
30. Salavat 15 25.05.20 18:58 Сейчас в теме
(28)
AMD-V
эта байда - в 1с, насколько сильно используется?

У АМД, есть однозначное преимущество (в настоящее время!) - с ОЗУ, они (последнее поколение) работают быстрее.
(У Интела, было быстрее, но... ряд патчей безопасности, снизил их скорость работы с ОЗУ)
38. mrsmrv 129 25.05.20 19:25 Сейчас в теме
(30)
AMD-V
эта байда - в 1с, насколько сильно используется?
Незнаю, но я просто отвечал на 17й коммент товарища и там он что-то про виртуализацию намекал что в АМД её нет. Ну вот я ему отписал что де, она там есть и даже лучше вроде как интеловской, по крайней мере что я помню, что она появилась давно и чуть ли не раньше интелей, а в википедии пишут что она ещё и лучше.
41. Salavat 15 25.05.20 19:28 Сейчас в теме
(38)
про виртуализацию
всегда был против этой байды.
вещают на 1 железку ещё кучу хрени.
И хотят выжать ещё соки (подозреваю и тот с 1,5 ГГц - в томже духе)
42. starik-2005 3309 25.05.20 19:31 Сейчас в теме
(41)
всегда был против этой байды.
Ну если говорить о сервисах, то вполне работоспособная система, ибо есть возможность выделить все небольшие сервисы в свой контейнер (сейчас для этого контейнеризация используется чаще). Да, нередко что-то большое и красивое, требовательное к частоте процессора типа 1С, в виртуальной среде начинает тупить, стоимость поиска проблем при таком раскладе может вылиться в стоимость нормального отдельного сервера.
46. Salavat 15 25.05.20 19:35 Сейчас в теме
(42)
есть возможность выделить все небольшие сервис
я так и обозвал - байда!
45. nomad_irk 84 25.05.20 19:34 Сейчас в теме
(41)Виртуализация - это благо в умелых руках, потому что процессор, как правило, простаивает бОльшую часть времени.
Да, за вирутализацию приходится платить "пенальти" в размере 20% абсолютной вычислительной мощности, но оно дает бОльшую утилизацию именно процессора.
47. Salavat 15 25.05.20 19:37 Сейчас в теме
(45)
потому что процессор, как правило, простаивает бОльшую часть времени.
у Вас (лично!) желудок тоже проставиват пустым, бОльшую часть времени.
Вы также - виртуализируете его, как я понимаю.
Ну - вперёд с оркестром!
Gilev.Vyacheslav; +1 – Ответить
50. nomad_irk 84 25.05.20 19:40 Сейчас в теме
(47)
у Вас (лично!) желудок тоже проставиват пустым, бОльшую часть времени.

Это однозначно "мемориз" в контексте сравнения подсистемы живого организма и компьютера.

Вопросов больше не имею.
starik-2005; +1 – Ответить
54. пользователь 25.05.20 19:43
Сообщение было скрыто модератором.
...
92. nickperel 4 26.05.20 16:48 Сейчас в теме
(45) Она, виртуализация, не нужна в большинстве российских контор. Причина - объективно не нужна.
Практически - сисадминов привлекает копирование и хранение актуального рабочего образа.
И кто там простаивает никого не волнует.
Gilev.Vyacheslav; +1 – Ответить
93. Salavat 15 26.05.20 17:35 Сейчас в теме
(92)
Она, виртуализация, не нужна в большинстве российских контор. Причина - объективно не нужна.
Прям удивлён такой, правоте.
(надеюсь - это не сарказм был).
У нас, как минимум 4 из 5 сисадминов - считают за правило, виртуализировать всегда.
При любой возможности.
Если причины нет - рады придумать.
Gilev.Vyacheslav; +1 – Ответить
164. nickperel 4 27.05.20 19:49 Сейчас в теме
(93) Нет, не сарказм.

Я же говорю - сохранность рабочего образа на чек-пойнте бакапа. Это же гарантия зарплаты сисадмина.

Вот тот, что про "кучу херни" тут писал, тоже не прав. Виртуализация решает простую и нерешаемую спроста проблему - две независимых конторы (или подразделения конторы) на одном сервере. Данные будут взаимно закрыты и ими будут рулить независимые суперюзеры.
Или открытый интернету сервер.

Если это деньги, тогда можно и 1С подвинуть. Но 1С давят вируализацией по совершенно субъективным причинам в 99% случаях. Да еще и на убогом железе. Хотя она - прямые деньги.
166. Salavat 15 27.05.20 20:27 Сейчас в теме
(164)
тот, что про "кучу херни" тут писал, тоже не прав.
тот - это именно я.
потомучто чаще всего получается эта херня именно -
(164)
давят вируализацией по совершенно субъективным причинам в 99% случаях. Да еще и на убогом железе.


(164)
на одном сервере
- вот именно - виртуализация, это всего-лишь способ выкрутиться на безрыбьи.

И - ничего более.
(по своей сути)
Gilev.Vyacheslav; +1 – Ответить
168. starik-2005 3309 27.05.20 22:01 Сейчас в теме
(164)
две независимых конторы (или подразделения конторы) на одном сервере. Данные будут взаимно закрыты и ими будут рулить независимые суперюзеры.
Или открытый интернету сервер.
Так это может быт решено на сервере СУБД путем создания двух пользователей для двух баз. И если пользователи эти внезапно оказались на одном сервере, значит что-то их связывает, если это не аренда. А если связывает, то смысл держать два сервера СУБД на одном железе? Да если и не связывает - все делится. Да и в базу зайти - пароль нужен, кто-то прописать к ней путь должен, связав сервер приложений и базу данных. На худой конец есть докер с контейнерами, в которых может быть поднято несколько серверов приложений 1С, но СУБД вполне может быть одна - она ровно тау же будет утилизировать "простаивающие" ресурсы сервера, только без штрафа виртуализации.
91. nickperel 4 26.05.20 16:45 Сейчас в теме
(41)
"
> про виртуализацию
>> всегда был против этой байды...... выжать соки.... куча херни....подозреваю.."

"шире мазки, шире". пока не попал, но продолжай.
там (где-то) заговор против тебя, точно говорю
94. Salavat 15 26.05.20 17:37 Сейчас в теме
(91)
"шире мазки, шире"
зато ты - здесь попал.
Только - не буду говорить (цензурных слов не подобрал), чем и куда.
165. nickperel 4 27.05.20 19:51 Сейчас в теме
(94) Хамить что ли пытаешься?
167. Salavat 15 27.05.20 20:30 Сейчас в теме
(165), я не пытался, а ответил тебе твоимже хамством.
(но вообщето - термин ты здесь - точно не в погоду подобрал.
Прочти всёже - почему (и за что! самое главное) хамство называется так)
241. starik-2005 3309 05.02.21 13:40 Сейчас в теме
(13) Ну вот, прошло время: теперь есть и гибридные процы для десктопов, и 5-е райзены, которые стали совсем быстрыми и дорогими (хотя прогресс наметился и 5600Х стоит 24 666 в наших краях),
19. mrsmrv 129 25.05.20 18:18 Сейчас в теме
(3)
И от AMD еще с давних времен осадочек остался.
помню в 2002-2003м году внедрял на шиферном заводе 1с 7.7 Комплексную, так вот мой домашний Дюрон 650, разогнанный до 950 мгц, перепроводил базу в два раза быстрее пня-4 клиентского серверного, дорогущий, навороченный сервак, а базу перепроводить я забирал себе. И да Дюрон этот у меня потом еще лет 10 проработал в качестве сервера, сначала основного. потом запасного. не подводил ни разу. вот такой у меня осадочек. А когда Athlon64 появились - вообще красота была. Железо надо брать по совокупности а не по осадочкам. Вот теперь интел делает печки, да и проблем с безопасностью нашлось уже порядком, да и проблемы с sata были в чипсетах. Короче проблем дохрена, но пипл хавает, как это было во времена пня-4. Да, сейчас у меня i-8700k, и брал я его когда уже ryzen первый появился, а до этого был i7-920, так что обвинять меня в предвзятости к интелу как-то смысла особого нет. Теперь присматриваюсь ко всем кандидатам, пока не решил. Посмотрим что будет ближе к новому году. Там и zen3 подойдёт к рынку уже.

p.s. знаете почему дюрон базу перепроводил быстрее? Скорее всего потому кэш первого уровня был по 64 килобайта на инструкции и данные, а не по 8 килобайт на данные и 12 киломикроопераций. Видимо это играло ключевую роль. Ну и длинный конвейер у пня-4 играл злую шутку с ветвящимся кодом.
72. 3vs 26.05.20 06:11 Сейчас в теме
(19)Кстати, Линус Торвальдс проапгрейдил свой основной рабочий ПК и перешел на AMD Ryzen Threadripper после 15 лет с Intel.
Линус Торвальдс (Linus Torvalds) в переписке, касающейся объявления о выходе Linux 5.7-rc7, рассказал, что на прошлой неделе он модернизировал свой рабочий ПК. Таким образом, впервые за 15 лет Торвальдс не использует сборку на базе компонентов Intel. Правда он добавил, что пока еще не перешел на ARM. Теперь рабочая система Торвальдса основана на AMD Threadripper 3970X.

Линус дополнительно уточнил, что модернизация на 32-ядерный 64-поточный процессор AMD Threadripper 3970X была очень волнительной для него.

Источник:
habr.com/ru/news/t/503658/

Линус что-то знает... :-)
mrsmrv; starik-2005; +2 –1 Ответить
75. capitan 2611 26.05.20 10:05 Сейчас в теме
(3)Чтобы расставить так сказать точки над ё
Создатель Linux променял Intel на AMD впервые за 15 лет
Это наверное всех примирит и многое объяснит.
Возможно AMD и стал так хорош, но понимание этого в умах старперов людей моего поколения очень-очень недавно произошло.
256. 33333 09.08.21 10:59 Сейчас в теме
(3)Опыт каких годов с AMD? 1990х?
Очень часто вижу такие заявления, основанные на событиях 20 лет назад......
5. wolfsoft 2420 25.05.20 11:51 Сейчас в теме
Вывод: лучше быть богатым и здоровым, чем бедным и больным (с) :)
zliden1; ipoloskov; starik-2005; +3 – Ответить
6. CheBurator 3235 25.05.20 12:08 Сейчас в теме
Спасибо. Отправил своему сисадмину как инфу для выбора процессоров
9. Sedaiko 604 25.05.20 12:47 Сейчас в теме
Уже давно не использую на клиент-серверных системах тест Гилева. Там он ни о чем не говорит.
На том же Xeon D-1557 1.50GHz дает результат ниже плинтуса.
Однако на на этом же хосте конфигурация из трех раздельных виртуальных серверов на ESXi - PSQL, 1С (8 ядер 2 сокета) и Apache при тестировании типовой конфигурации с тест-центром - дает вполне приемлемые результат на 50 пользователей.
И главное - ИМХО сервер для 1С должен быть сервером ТОЛЬКО для 1С (ну и СУБД). никакой терминалки, AD, файлопомойки и касперского. Максимум можно еще IIS или Apache. Терминалку, если обычные формы, лучше вывести на отдельный сервер.
11. nomad_irk 84 25.05.20 13:09 Сейчас в теме
(9)Попробуйте завести 1С на процессоре хотя бы 3ГГц и сравните с 1.5ГГц - там даже невооруженным глазом видны различия в скорости работы и "отзывчивости" учетной системы в целом.
Gilev.Vyacheslav; Salavat; +2 – Ответить
12. Sedaiko 604 25.05.20 13:21 Сейчас в теме
(11) Это понятно. Я говорю про объективность теста Гилева - он не учитывает многопоточность.
14. nomad_irk 84 25.05.20 13:29 Сейчас в теме
(12) Она и не нужна в данном случае. Этот тест показывает скорость работы связки CPU-RAM-DISK для одного потока, т.к. интерпретатор языка 1С не умеет многопоточность, в привычном понимании этого термина.
Gilev.Vyacheslav; +1 – Ответить
34. Salavat 15 25.05.20 19:07 Сейчас в теме
(14)
т.к. интерпретатор языка 1С не умеет многопоточность, в привычном понимании этого термина.
1с - никогда и не будет многозадачным.
Пример - попробуйте распараллелить восстановление последовательности документов.

Параллельность можно применить, только - если есть статические данные.
Архивирование, картинки, видео - всё.
А не те, что зависят от других (меняющихся).
Gilev.Vyacheslav; +1 – Ответить
36. starik-2005 3309 25.05.20 19:16 Сейчас в теме
(34)
Пример - попробуйте распараллелить восстановление последовательности документов.
Не поверите, но даже на Инфостарте есть примеры этого распараллеливания с генерацией непересекающихся последовательностей документов по соглашениям/номенклатуре/комиссионерам.

Я в свое время на БП 2.0 делал многопоточное проведение документов. Т.к. это были услуги, то разделение пулов шло по контрагентам и комиссионерам. Это позволяло существенно снизить время проведения документов - практически пропорционально количеству потоков.
unduty; Irwin; mrsmrv; +3 – Ответить
37. Salavat 15 25.05.20 19:20 Сейчас в теме
(36)
Не поверите
Здесь Вы правы абсолютно - не поверю!

Как можно выполнить задачу, у которой исходных данных, элементарно нет?

Попробуйте привести, реальный пример.
39. starik-2005 3309 25.05.20 19:26 Сейчас в теме
(37)
Как можно выполнить задачу, у которой исходных данных, элеме
Ну вот есть у Вас сто документов, в которых Вы продаете услуги. В этих ста документах есть сто разных соглашений с покупателями. Вы можете провести эти сто документов в ста разных потоках в любой последовательности, и это никак не нарушит согласованность данных, т.к. взаиморасчеты в каждом документе зависят от договора, а все договора разные.

Допустим, у нас есть тысяча документов. И в них есть сто разных товаров, у которых есть остатки, сто разных соглашений с покупателями. В итоге нам нужно найти документы, в которых соглашения и номенклатура не пересекается, сгруппировать их по пересекающейся номенклатуре и соглашениям. Пусть у нас получится сто групп по 5-15 документов. Дальше мы эти группы можем скормить разным потокам, упорядочив по дате и времени продажи. В итоге мы получим сто порций данных и будем последовательно кормить их освободившимся потокам. Если же это документы поступления, то нам тут вообще не нужно особо заморачиваться - достаточно скормить их до проведения реализаций, т.к. они не используют историческую информацию об остатках.
44. Salavat 15 25.05.20 19:33 Сейчас в теме
(39)многа букав - бессмысленных

ответил короче - http://forum.infostart.ru/forum34/topic241565/message2447157/#message2447157
Gilev.Vyacheslav; +1 – Ответить
40. nomad_irk 84 25.05.20 19:26 Сейчас в теме
(34)
1с - никогда и не будет многозадачным.
Пример - попробуйте распараллелить восстановление последовательности документов.


Ой, никогда не говорите "никогда" :)
Восстановление последовательности может распараллелиться, если в ней будут разрезы ведения этой самой последовательности.
43. Salavat 15 25.05.20 19:32 Сейчас в теме
(40)
если в ней
если да кабы, да в роту росли грибы,..
я ведь привёл элементарную задачу - попробуйте её решить:
Распараллельте выполнение двух задач.
Исходные данные одной из них, зависят от решения другой.
Это и есть - последовательность.

хоть как её разрезайте - но - нет у Вас исходных данных, для решения первой задачи! она вынуждена ждать решения второй!
48. starik-2005 3309 25.05.20 19:39 Сейчас в теме
(43)
нет у Вас исходных данных, для решения первой задачи! она вынуждена ждать решения второй!
|Когда нет, а когда и есть.

Можно и иначе распараллелить проведение документов: получить остатки в какую-нить коллекцию, взять документ, создать наборы записей, создать проводки на основании остатков из коллекции и поменять значения в коллекции, но не записывать эти проводки, а поместить в пул записи, т.к. запись - это длительный процесс. Дальше идти к следующему документу, добавляя его проводки в пул, после того, как пул достигнет определенного размера, отправить данные пула в поток для записи. Т.к. запись - операция длительная, то следующая порция данных будет накоплена раньше, чем эти операции будут записаны - скормить их второму потоку, и т.д. В итоге один поток, формирующий движения, будет работать с памятью, а потоки персистентности будут параллельно записывать наборы записей в базу данных.
unduty; mrsmrv; +2 – Ответить
51. Salavat 15 25.05.20 19:40 Сейчас в теме
(48)
Когда нет, а когда и есть.
я и говорю - нельзя распараллелить любое!
53. starik-2005 3309 25.05.20 19:42 Сейчас в теме
(51) очень большая часть задач в той или иной мере может быть распараллелена. 100% компьютерной графики в играх рассчитывается на огромном количестве параллельных графических процессоров в GPU.
57. Salavat 15 25.05.20 19:45 Сейчас в теме
(53)повторюсь - распараллеливается легко то - что имеются данные.
(архивирование - типичный пример)
когда нет данных - не распаралелить никак!!!
98. mrsmrv 129 26.05.20 18:18 Сейчас в теме
(57) т.е. вы считаете что восстановление последовательности документов для партионного учета, можно делать только последовательно? Даже если в базе уже все нужные документы есть?
49. nomad_irk 84 25.05.20 19:39 Сейчас в теме
(43)Как реализованы последовательности в условиях типовых конфигураций - это частный случай, в общем случае оно может распараллеливаться.
Если говорить общими терминами, так любая задача будет однопоточной, если для ее решения нужен результат решения другой задачи.
При чем тут 1С?
starik-2005; +1 – Ответить
52. Salavat 15 25.05.20 19:42 Сейчас в теме
(49)при том, что - в 1с (как и в играх, кстати!) - именно это и есть аксиома!
55. nomad_irk 84 25.05.20 19:44 Сейчас в теме
(52) Вы выбрали какой-то частный случай в качестве примера, притянули сюда 1С и теперь пытаетесь доказать, что оно не работает или работает не так как хотелось бы?
Троллинг?
56. starik-2005 3309 25.05.20 19:45 Сейчас в теме
(55)
Троллинг?
Скорее троттлинг ))) Перегрелся парниша )))
unduty; nomad_irk; +2 – Ответить
59. nomad_irk 84 25.05.20 19:46 Сейчас в теме
(56)Ага, по-другому и не назовешь :)
173. nickperel 4 28.05.20 19:06 Сейчас в теме
(56)
Интернетный спорщик. Это типа спорта. Открывает в другом окне браузера ответы какого - нибудь разработчика 1с и зачесывает оттуда.
Припоминаю этот примерчик с двумя зависимыми задачами.
174. nomad_irk 84 28.05.20 19:26 Сейчас в теме
(173)Да это тролль чистой воды. Изначально было лично мной сказано, что интерпретатор 1С не умеет многопоточность в привычном понимании этого термина.
Далее ему Сергей сказал о том, что при определенных условиях задача восстановления последовательности может быть распараллелена.
Но индивид топил тут усиленно именно за истинную многопоточность в его понимании, типа мы все тут мушкетеры, а он один - д'Артаньян.
Туды его в качель ©, блин.....

Я еще раз покажу историю, с чего начался весь сыр-бор:
Прикрепленные файлы:
176. nickperel 4 28.05.20 19:53 Сейчас в теме
(174)
Предполагается, что тролли остроумные и веселые ребята. А этот чего-то Навального давай поминать. УГ
Его вот эти загадки и заходы похожи на те, что программисты со стажем 100500+ лет задают на собеседованиях.
Нет цели узнать решение.
Что - то психологическое... хз
177. nomad_irk 84 28.05.20 20:15 Сейчас в теме
(176)Так ему ж 100500 раз ответил лично я, что, если прям только 2 документа взаимосвязанных, то задачу нельзя распараллелить и параллелить такие объемы данных никто в здравом уме даже не будет пытаться.

В общем, ну его в болото........проехали.
196. mrsmrv 129 03.06.20 10:35 Сейчас в теме
(177)Если интересно, то я ему выложил свой вариант параллельной обработки цепочек приходов и расходов товаров с текстом модулей: http://forum.infostart.ru/forum34/topic241565/message2451732/#message2451732
starik-2005; nomad_irk; +2 – Ответить
61. Salavat 15 25.05.20 19:46 Сейчас в теме
(55)я привёл типичный пример - нерешаемости!
сами считайте как хотите.
63. nomad_irk 84 25.05.20 19:50 Сейчас в теме
(61)Вам никто в этой теме не говорил, что все задачи, решаемые с помощью процессора, могут распараллеливаться и никто не спорил с вашим утверждением, что приведенный вами пример не распараллеивается.
Все, вопрос про признаки распараллеливаемых задач исчерпан?
64. Salavat 15 25.05.20 19:52 Сейчас в теме
(63)вот именно, я только про это.
65. starik-2005 3309 25.05.20 19:59 Сейчас в теме
(63) просто задача восстановления последовательности документов не относится к задачам, которые не могут быть распараллелены, т.к. не все документы последовательности исторически зависимы. Если мы купили лоток булок и баранки, а потом продавали то булки, то баранки, то у нас тут как минимум два потока - продажа булок и продажа баранков. Если же случилось так, что и булки и бараки были куплены одновременно, то этот документ - точка синхронизации потоков. В реальной жизни все сложнее, поэтому и потоков больше, и точек синхронизации потоков больше, поэтому можно распараллелить иначе - вынести в отдельные потоки только результаты, которые нужно сохранить в БД, т.к. это самая длительная операция, а расчет движений сделать в один поток, только не читать остатки каждый раз, а поддерживать их в какой-нить коллекции - той же таблице значений, доступ к строкам которой будет быстрее, чем запрос к БД.
97. mrsmrv 129 26.05.20 18:16 Сейчас в теме
(65) Согласен. Если задача партионного учёта, от коего 1С давно пытается откреститься, то я бы вообще взял бы номенклатуру из документов и моменты проведения документов, и всё это в одной матрице сводил бы по партиям, а потом уже раскидал бы готовые записи по документам. Т.е. не решал бы задачу вот надо последовательно провести вот эту кучу документов. Нет, на задачу нужно взглянуть не как на дорогу, на которой мы стоим и вдоль которой нужно пройти, считая коробочки, а если можно так выразится со спутника, посмотреть - вот дорога, вот коробочки. зачем мне идти по дороге, и считать коробочки, когда я могу за один снимок количество коробочек посчитать. На задачи нужно глядеть по другим углом. во первых, нахрена нужно перепровести тучу документов, какая цель, а если и нужно, то эти же цифры, по себестоимости списания каждого товара в каждом документе, можно получить другим способом. Причем заметьте, Эти же, а не какое-то приближение. Ну да, документов может быть много, матрица получится большая, но и с огромными матрицами уже научились справляться, в том числе (и в первую очередь) благодаря распарарллеливанию.
nomad_irk; +1 – Ответить
100. nomad_irk 84 26.05.20 18:26 Сейчас в теме
(97) У товарища Salovat паззл никак не складывается :)
104. mrsmrv 129 26.05.20 18:44 Сейчас в теме
(100) пока наливал чай, подумал, даже если документов миллион, и номенклатуры миллион, значит просто надо будет обработать миллион матриц по 1000x1000, ну или 1000000х1000 тысячу матриц, ну типа по временнЫм отрезкам разбить. Но ведь именно это насколько я помню и "внедряет" 1с в своей РАУЗ. Там как раз задачу они сводят к решению СЛАУ. а что такое матрица 1000000х1000 это всего лишь (да уже веголишь) миллиард записей. А что там у нас уже умеют видеокарты, обрабатывать 16 гигабайт в своей быстрой (4096 битной HBM2) памяти. А тредриппер 64-х ядерный или Epyc с 8-ю каналами памяти, разве именно такие решения не призваны Параллельно ворочать большие объёмы данных. Интел говорите...
106. nomad_irk 84 26.05.20 18:49 Сейчас в теме
(104)РАУЗ - это принципиальный уход от строгой хронологии ввода первичных данных
Квант данных - не момент времени, а набор аналитик. Документы двигают наборы аналитик и потом уже по этим наборам аналитик строятся графы ну и результатом является система из N линейных уравнений.
108. mrsmrv 129 26.05.20 18:50 Сейчас в теме
(106)осталось только некоторому товарищу это как-то осознать
110. nomad_irk 84 26.05.20 18:52 Сейчас в теме
(108) Ага, ему уже 3 человека говорят о том, что восстановление последовательности В ОБЩЕМ СЛУЧАЕ - очень даже параллелится, но он уперся в какие-то документы и все тут.
111. starik-2005 3309 26.05.20 18:53 Сейчас в теме
(110)
уперся в какие-то документы
В первый документ - у него дальше мозга не работает. Для параллельности же нужно больше одного документа, а у него, видите ли, в первом документе нет исторических данных - все, Гитлер-капут )))
mrsmrv; nomad_irk; +2 – Ответить
58. acanta 25.05.20 19:45 Сейчас в теме
(34) были несколько попыток разделить поток документов на несколько последовательностей, партии отдельно, взаиморасчеты отдельно. Но издержки от того, что при восстановлении одной последовательности ломаются все остальные, не оправдываются.
60. starik-2005 3309 25.05.20 19:46 Сейчас в теме
(58)
Но издержки от того, что при восстановлении одной последовательности ломаются все остальные не оправдываются.
У кого как. У меня, например, в бухгалтерии параллельное проведение документов ускорило процесс в 5 раз (6 потоков). То, что делалось день, стало делаться за полтора часа.
78. mrsmrv 129 26.05.20 12:10 Сейчас в теме
(34)
1с - никогда и не будет многозадачным.
а что мешает поиск во всех текстах в конфигураторе делать в многопотоков. Или вот проведение закрытия месяца делать средствами видеоядер (а такая идея у меня при появлении ge-force 256 в 1999м году стала гложить).
79. starik-2005 3309 26.05.20 12:21 Сейчас в теме
(78)
Или вот проведение закрытия месяца делать средствами видеоядер
Закрытие тормозит не из-за того, что производительности не хватает - я в 90-х разрабатывал системы для науки и там даже первопень справлялся за минуты, а данных было не в пример больше, чем в большинстве современных бухгалтерий. И даже используя СЛАУ основное время тратится не на сам расчет, а на извлечение данных для него. С другой стороны, распределение затрат - а именно это и является основной нагрузкой закрытия - достаточно быстрая однопроходная операция, и все умирает на реализации, а не на принципе, так что GPU тут, на мой скромный взгляд, - лишнее, ибо рендеринг одного кадра 4К содержит больше данных и операций, чем, полагаю, данные всех предприятий РОСТЕХа (более 1к), участвующих в закрытии, а современные игры на таком разрешении с хорошим видеоадаптером могут показать и 60 таких кадров в секунду.
82. Salavat 15 26.05.20 13:45 Сейчас в теме
(79)
Закрытие тормозит не из-за того, что производительности не хватает
Не согласен здесь.
Именно - производительности и не хватает.
(я не говорю, что есть ошибки и в методологии, в т.ч.. Они могут быть везде!)
Поставьте две копии одинаковой базы - на по-быстрее и по-медленнее системе.
И поймёте - хватает или нет.
(комуто хватает и 1,5 ГГц - как он сказал)
84. starik-2005 3309 26.05.20 14:30 Сейчас в теме
(82)
Именно - производительности и не хватает.
Так никто и не спорит, что один и тот же плохой алгоритм на более быстрой системе будет работать быстрее, но все-равно очень долго. И в закрытии месяца не производительности не хватает, а ума у разработчиков типовой (с другой стороны их можно понять - они делают очень универсальный инструмент для всех случаев жизни, но почти в каждой конторе чуть крупнее находятся случаи, на которые типовая не рассчитана, и приходится изобретать велосипеды).

(81)
В 1с, есть задачи, которые невозможно сделать параллельными.
Этих задач не так много, более того, параллелить можно не всю задачу, а ее часть (например, сохранение данных). То, что Вы не можете это понять - не грех, т.к. вообще мало народу, кто это понимает - тут уже нужно быть совсем не 1С-программистом.
Salavat; nomad_irk; +2 – Ответить
85. Salavat 15 26.05.20 14:46 Сейчас в теме
(84)
никто и не спорит, что один и тот же плохой алгоритм на более быстрой системе будет работать быстрее
Вы не поняли про что я.
Конкретизирую - любая (абсолютно!) задача, будет решаться быстрее! На более быстрой системе.

(84)
Вы не можете это понять
здесь похоже, не понимаю, ни я, а именно Вы (и/или - мы друг друга).
задач, которые невозможно распараллелить, возможно и не сильно много.
я в принципе и не утверждал, что их количество - преобладает.
Я продолжаю утверждать, что как минимум одна задача (перепровести последовательность документов (порою - не единственную последовательность. Как минимум я знаю - Поступление и Реализация. Две последовательности. Затраты и Расходы - Плюс ещё две) встаёт ежемесячно и неединожды.
И эти расчёты (4, всего) - занимают продолжительное время.

Этот факт, надеюсь - не будете оспаривать.
86. nomad_irk 84 26.05.20 15:16 Сейчас в теме
(85)
Я продолжаю утверждать, что как минимум одна задача (перепровести последовательность документов (порою - не единственную последовательность. Как минимум я знаю - Поступление и Реализация. Две последовательности. Затраты и Расходы - Плюс ещё две) встаёт ежемесячно и неединожды.
И эти расчёты (4, всего) - занимают продолжительное время.


В первом приближении:

Восстановление последовательности Поступление/Реализация нельзя распараллелить ТОЛЬКО в случае одного склада.
Восстановление последовательности Затраты нельзя распараллелить ТОЛЬКО в случае одного подразделения/строго последовательной маршрутной карты/ и одного вида затрат(чего не может быть)
Восстановление последовательности Расходы нельзя распараллелить ТОЛЬКО в случае одного вида расходов.
87. Salavat 15 26.05.20 16:05 Сейчас в теме
Именно так -
(86)
В первом приближении:

А в реальности (если нужно точное значение) - распараллелить последовательность невозможно.
И это - в независимости, ни от чего.

Ответьте мне (повторюсь) - какую Вы возьмёте себестоимость остатка?
Если у Вас - предыдущие документы не сформировали его.

Ответ один - Только - Приближённую!

(ещё 1 подвопрос - зачем нужен документ "Корректировка Себестоимости"?)

Этим - и довольствуйтесь.
88. nomad_irk 84 26.05.20 16:18 Сейчас в теме
(87)
Ответьте мне (повторюсь) - какую Вы возьмёте себестоимость остатка?
Если у Вас - предыдущие документы не сформировали его.


Если вы не понимаете как можно распараллелить не распараллеливающуюся на первый взгляд задачу, то это не значит, что никто не сможет распараллелить задачу.

Пока вы не поймете того факта, что себестоимость конкретной позиции номенклатуры может быть в разрезе склада/организации, либо вообще атомарна, то вы так и будете утверждать, что восстановление последовательности - впринципе не параллелящаяся задача.

Даже если себестоимость позиции атомарна, то параллелить можно по этой самой номенклатуре.
mrsmrv; starik-2005; +2 – Ответить
89. Salavat 15 26.05.20 16:23 Сейчас в теме
(88)
Пока вы не поймете
Мы уже прекрасно поняли, что Вы - слова "умные" зазубрили, а смысл их, понять Вам не под силу, оказалось.
Скрытый текст
138. mrsmrv 129 26.05.20 20:00 Сейчас в теме
(87)
А в реальности (если нужно точное значение) - распараллелить последовательность невозможно.
И это - в независимости, ни от чего.

Ответьте мне (повторюсь) - какую Вы возьмёте себестоимость остатка?
Если у Вас - предыдущие документы не сформировали его.

Ответ один - Только - Приближённую!
Ну вам же описали КАК можно взять данные из базы одним запросом, всё в обработать и обратно результат в базу записать. А вы теперь прицепились к Двум документам и возможно по одному товару в каждому. Т.е. к вырожденным условиям задачи не требующими параллельности.
Roman_SE; nomad_irk; +2 – Ответить
143. starik-2005 3309 26.05.20 20:06 Сейчас в теме
(138)
прицепились к Двум документам и возможно по одному товару в каждому
Ну так я ж говорил, что спорить с упертным математиком пенсионного возраста - задача бессмысленная: и нам не в кайф, и у него сердце может не выдержать - печалька.
nomad_irk; +1 – Ответить
152. nomad_irk 84 26.05.20 20:23 Сейчас в теме
(143)да тут математическим складом ни ума, ни характера и не пахнет, на мой чисто субъективный взгляд :)
Тут скорее, эффект Даннинга-Крюгера.......
154. Salavat 15 26.05.20 20:38 Сейчас в теме
(152) Вопрос/задачу реши - продемонстрируй свой "ум" и "склад".
(или наверное даже "кладезь ума"?)
155. nomad_irk 84 26.05.20 20:44 Сейчас в теме
(154) Вам предыдущих решений недостаточно для понимания ущербности своего мышления?
Хорошо, повторюсь в 100500 раз: задача с двумя взаимозависимыми документами не сможет распараллелиться, потому, что это квант всего массива данных.
Про квант данных - не запоминайте, а то кэш переполнится и до кернел-паник не далеко.....
156. Salavat 15 26.05.20 20:47 Сейчас в теме
(155) я повторяюсь - сделай на любом количестве, которое позволяет.
Три - нормально?
Если нет - 4,.. и т.д.

Именно против этого (увеличения количества документов) - я не возражал(-ю).
Скрытый текст

И да - решения не было.
Была бубнёжка, пустая.
159. nomad_irk 84 26.05.20 21:18 Сейчас в теме
(156)
Хорошо, для простоты, как вы это любите, в последовательности участвуют 4 документа:

Поступление1
Поступление2
Реализация1
Реализация2

ПоступлениеN и реализацияN взаимосвязанные.

Для того, чтобы можно было выполнить параллельное выполнение восстановления последовательности необходимо наличие непересекающихся аналитик в документах. Непересекающейся аналитикой, опять же для простоты, будем считать номенклатуру - она разная в каждой паре документов приход-расход.

Самое простое решение:

1. Получаем запросом таблицу

Номенклатура1|Поступление1|
Номенклатура1|Реализация1|
Номенклатура2|Поступление2|
Номенклатура2|Реализация2|

2. Получаем из таблицы в п.1 список номенклатуры.
3. Формируем цикл по списку из п.2 , выполняя поиск строк в таблице из п.1 по номенклатуре.
4. Найденные строки сортируем по моменту времени документа, либо делаем свою сортировку списка в зависимости от прихода/расхода и сортируем так, чтобы приход был первым.
5. Внутри цикла из п.3. формируем фоновое задание, выполняющее процедуру проведения документа по набору значений.

Содержимое процедуры выполнения проведения из п.5:

1. Цикл по набору
2. Получить объект по ссылке в текущей строки набора.
3. Выполнить запись документа с проведением.


Это САМЫЙ ПРИМИТИВНЫЙ алгоритм из всех, что можно вообще придумать.
160. Salavat 15 26.05.20 21:28 Сейчас в теме
(159)
Для того, чтобы можно было выполнить параллельное выполнение восстановления последовательности необходимо наличие непересекающихся аналитик в документах. Непересекающейся аналитикой, опять же для простоты, будем считать номенклатуру - она разная в каждой паре документов приход-расход.

ах вон оно чё - собакато зарыта там, где я и говорил.
Дорогуша - это не распараллеливание, а "распараллеливание" всего-лишь.
(набор громких/звучных/.../бессмысленных наименований)

Ты предлагаешь (перед твоим "распараллеливанием" - сначала проверять исполнение твоих условий?
И - много ты покупателей "этого чудо-алгоритма" набрал?
А не многоли ты о себе возомнил?

на перельмановский приз - ты не претендуешь.
Скрытый текст


Это САМЫЙ ПРИМИТИВНЫЙ алгоритм
давай усложняй - мне главное решение.
(повторюсь - не "решение"!)
Всякое фуфло (хотя я понял уже бессмысленность - у нас разные понятия, об общеизвестных принципах/ценностях. Ты из тех, кто - "языком работает") - пропускай.
161. пользователь 26.05.20 21:53
Сообщение было скрыто модератором.
...
162. Salavat 15 26.05.20 22:00 Сейчас в теме
(161) я снова не понял - тебе опять надо повторить?
Нафига ты историю (сию) показываешь?
Я изменил свою т.з. или что/как?
Нет и не собираюсь - отрицать очевидное.
Единственное добавляю - покажите решение (кто не согласен с моей т.з.)

Повторяю (для тугопонимающего) - ты привёл не решение распараллеливания (что принципиально невозможно, но - ты не можешь выдавить из себя, признание аксиомы), а "решение".
(с набором условий)
что делать с твоим "решением" - я вроде понятно объяснил.

Называешь это троллингом - твоё право.
Впрочем - также как и "решения", продавать.
а потом придумывать оправдания.
150. Salavat 15 26.05.20 20:15 Сейчас в теме
(138) нам написали уже многие, да.
Я ответил одним вопросом - https://forum.infostart.ru/forum34/topic241565/?PAGEN_1=2#message2447915

Прицепился только потомучто вы (навальновцы, местные) - очевидность "отрицаете".
(надумываете какието условия выполнения своих распараллеливаний)

Два - это для простоты (также как начинают в школе - не с интегралов/диффернциалов, а именоо с 1+1)

Если тебе легче будет - покажи решение на трёх (или - какое у тебя условие "распараллеливания твоего")) документах.
151. starik-2005 3309 26.05.20 20:18 Сейчас в теме
(150)
Если тебе легче будет - покажи решение на трёх
Так чего мучаешься? Дай базу с данными, чтобы было на чем показать, а то ведь опять скажешь, что не понимаешь решения.
153. Salavat 15 26.05.20 20:36 Сейчас в теме
(151)
я нисколько не мучаюсь. мучаешься видно ты - причины тут придумываешь, очередные.
Демо-базы нет чтоли?
Держи - УТ 10.3 - https://my-files.su/bja36y

Покажи - одновременное проведение двух реализаций (или сколько там тебе нужно, для демонстрации?) документов.
При этом, всё (по общепринятой методологии) должно быть стандартно - себестоимость (списывается, которая), каждого документа, должна быть реальной.

(лучше сделай - через допобработку - так проще будет.
Если нет, не настаиваю (именно на этом) - меняй конфигурацию))
201. user1424343 17.06.20 09:19 Сейчас в теме
(153) На досуге сделал обработку и текст модуля для УТ 10.3 Для простоты решения (ведь на досуге же) сделал "восстановление по партиям" только тех товаров, у которых не было преобразований, таких как изменения качества, серий, комплектаций, перемещений. Обрабатываются только те, которые пришли и ушли, Приход и расход. Распределение по партиям осуществляется по ФИФО.
В обработке можно выбрать номенклатуру, характеристику, серию. Если ничего не выбрано, обрабатывается всё. В обработке есть реквизиты КоличествоПотоков - число целое, ДатаНач, ДатаКон, Номенклатура, ХарактеристикаНоменклатуры, СерияНоменклатуры.

Текст модуля формы обработки:

Перем мИтоговаяТаблица;
Перем мВсеПроцессыВыполнены;
Перем мВыполненныеПроцессы;
Перем мТЗТЗ;
Перем мТЗ;


Процедура КнопкаВыполнитьНажатие(Кнопка)
    лТипыРегистраторов = Новый Массив(); // для простоты решения уберём преобразующие движения
    лТипыРегистраторов.Добавить(Тип("ДокументСсылка.ПоступлениеТоваровУслуг"));
    лТипыРегистраторов.Добавить(Тип("ДокументСсылка.РеализацияТоваровУслуг"));
    
    Зап3 = Новый Запрос("ВЫБРАТЬ
                        |    ПартииТоваровНаСкладах.Номенклатура КАК Номенклатура,
                        |    ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры КАК ХарактеристикаНоменклатуры,
                        |    ПартииТоваровНаСкладах.СерияНоменклатуры КАК СерияНоменклатуры,
                        |    ПартииТоваровНаСкладах.СтатусПартии КАК СтатусПартии,
                        |    СУММА(ВЫБОР
                        |            КОГДА НЕ ТИПЗНАЧЕНИЯ(ПартииТоваровНаСкладах.Регистратор) В (&ТипыРегистраторов)
                        |                ТОГДА 1
                        |            ИНАЧЕ 0
                        |        КОНЕЦ) КАК Поле1
                        |ПОМЕСТИТЬ П1
                        |ИЗ
                        |    РегистрНакопления.ПартииТоваровНаСкладах КАК ПартииТоваровНаСкладах
                        |ГДЕ
                        |    ПартииТоваровНаСкладах.Период МЕЖДУ &ДатаНач И &ДатаКон
                        |    И ПартииТоваровНаСкладах.Активность
                        |    И (ПартииТоваровНаСкладах.СерияНоменклатуры = &СерияНоменклатуры
                        |            ИЛИ &СерияНоменклатуры = ЗНАЧЕНИЕ(Справочник.СерииНоменклатуры.ПустаяСсылка))
                        |    И (ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры = &ХарактеристикаНоменклатуры
                        |            ИЛИ &ХарактеристикаНоменклатуры = ЗНАЧЕНИЕ(Справочник.ХарактеристикиНоменклатуры.ПустаяСсылка))
                        |    И (ПартииТоваровНаСкладах.Номенклатура = &Номенклатура
                        |            ИЛИ &Номенклатура = ЗНАЧЕНИЕ(Справочник.Номенклатура.ПустаяСсылка))
                        |
                        |СГРУППИРОВАТЬ ПО
                        |    ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры,
                        |    ПартииТоваровНаСкладах.СерияНоменклатуры,
                        |    ПартииТоваровНаСкладах.СтатусПартии,
                        |    ПартииТоваровНаСкладах.Номенклатура
                        |;
                        |
                        |////////////////////////////////////////////////////////////­­////////////////////
                        |ВЫБРАТЬ
                        |    П1.Номенклатура,
                        |    П1.ХарактеристикаНоменклатуры,
                        |    П1.СерияНоменклатуры,
                        |    П1.СтатусПартии
                        |ИЗ
                        |    П1 КАК П1
                        |ГДЕ
                        |    П1.Поле1 = 0");
    Зап3.УстановитьПараметр("ДатаНач",ДатаНач);
    Зап3.УстановитьПараметр("ДатаКон",ДатаКон);
    Зап3.УстановитьПараметр("ТипыРегистраторов",лТипыРегистраторов);
    Зап3.УстановитьПараметр("Номенклатура", Номенклатура);
    Зап3.УстановитьПараметр("ХарактеристикаНоменклатуры", ХарактеристикаНоменклатуры);
    Зап3.УстановитьПараметр("СерияНоменклатуры", СерияНоменклатуры);
    
    Рез3 = Зап3.Выполнить();
    
    лТЗЗап = Рез3.Выгрузить();
    
    КоличествоСтрок = лТЗЗап.Количество();
    лКолВоПотоков = Мин(КоличествоСтрок,КоличествоПотоков);
    КолВоВПотоке = Цел(КоличествоСтрок/лКолВоПотоков);
    КолвоВПоследнемПотоке = КоличествоСтрок%лКолВоПотоков;
    Сообщить("Количество строк " + КоличествоСтрок + " Количество в потоке " + КолВоВПотоке + " Количество в последнем потоке " + КолвоВПоследнемПотоке);
    
    НТекПотока = 0;
    НСеанса = 0;
    мТЗ.Очистить();
    лТЗ2 = мТЗ.Скопировать();
    лСтрТЗТЗ = мТЗТЗ.Добавить();
    лСтрТЗТЗ.ТЗ = лТЗ2;
    
    Для Каждого лТекСтрТЗЗап Из лТЗЗап Цикл
        лНовСтр = лСтрТЗТЗ.ТЗ.Добавить();
        ЗаполнитьЗначенияСвойств(лНовСтр,лТекСтрТЗЗап);
        НТекПотока = НТекПотока + 1;
        Если НТекПотока%КолВоВПотоке=0 Тогда
            ВызватьСеанс(НСеанса,лСтрТЗТЗ.ТЗ);
            НСеанса = НСеанса + 1;
            лТЗ2 = мТЗ.Скопировать();
            лСтрТЗТЗ = мТЗТЗ.Добавить();
            лСтрТЗТЗ.ТЗ = лТЗ2;
        КонецЕсли;
    КонецЦикла;
    
    Если КолвоВПоследнемПотоке > 0 Тогда
        ВызватьСеанс(НСеанса,лСтрТЗТЗ.ТЗ);
    КонецЕсли;
    
    ПодключитьОбработчикОжидания("ПроверитьСостояниеФоновыхЗаданий",1);
    
КонецПроцедуры

Процедура ВызватьСеанс(пНомер,пТЗ)
    лМассив = Новый массив();
    лНовСтр = мВыполненныеПроцессы.Добавить();
    лНовСтр.НомерЗапущенного = пНомер;
    лНовСтр.АдресВХранилище = Новый УникальныйИдентификатор;
    
    лАдрес = ПоместитьВоВременноеХранилище(Неопределено,лНовСтр.АдресВХранилище);
    лНовСтр.АдресВХранилище = лАдрес;
    
    лМассив.Добавить(пТЗ);
    лМассив.Добавить(ДатаНач);
    лМассив.Добавить(ДатаКон);
    лМассив.Добавить(лАдрес);
    лМассив.Добавить(пНомер);
    
    лКлюч = "ОбрабоктаТаблицы_" + пНомер;
    лСсылка = ПолучитьНавигационнуюСсылкуИнформационнойБазы();
    //Сообщить(лСсылка);
    
    Если СтрНайти(лСсылка,"e1c://server/")>0 и Не ЗапускатьНеВФоне Тогда
        Сообщить("Запущен фоновый процесс " + пНомер);
        лФоновоеЗадание = ФоновыеЗадания.Выполнить("мФоновые.ОбработатьТаблицу", лМассив, лКлюч, "ОбрабоктаТаблицы " + пНомер);
        лНовСтр.ФоновоеЗадание = лФоновоеЗадание;
    Иначе
        Сообщить("Запущен процесс " + пНомер);
        мФоновые.ОбработатьТаблицу(лМассив[0],лМассив[1],лМассив[2],лМассив[3],лМассив[4]);
    КонецЕсли;
КонецПроцедуры

Процедура ПроверитьСостояниеФоновыхЗаданий()
    лФл = Ложь;
    лМассивКУдалению = Новый Массив;
    Для Каждого лТекСтр Из мВыполненныеПроцессы Цикл
        лСтрук = ПолучитьИзВременногоХранилища(лТекСтр.АдресВХранилище);
        Если лСтрук<>Неопределено Тогда
            лТЗ = лСтрук.ТЗ;
            Сообщить("Завершён процесс " +лСтрук.Номер);
            //лТЗ = лДанные.Получить();
            лФл = Истина;
            Для Каждого лТекСтрТЗ Из лТЗ Цикл
                лНовСтр = мТЗ.Добавить();
                ЗаполнитьЗначенияСвойств(лНовСтр,лТекСтрТЗ);
                лФл = Ложь;
            КонецЦикла;
            УдалитьИзВременногоХранилища(лТекСтр.АдресВХранилище);
            лМассивКУдалению.Добавить(лТекСтр);
        Иначе
            лФл = Истина;
        КонецЕсли;
    КонецЦикла;
    
    Для Каждого лТекСтр Из лМассивКУдалению Цикл
        мВыполненныеПроцессы.Удалить(лТекСтр);
    КонецЦикла;
    
    Если лФл Тогда
        Возврат;
    КонецЕсли;
    мТЗ.Сортировать("Период");
    лНабор = РегистрыНакопления.ПартииТоваровНаСкладах.СоздатьНаборЗаписей();
    лРегистратор = Неопределено;
    лСтрокаТовара = "";
    лНаборТЗ = Новый ТаблицаЗначений;
    лСтруктураПоиска = Новый Структура("Номенклатура, Склад,  ХарактеристикаНоменклатуры, СерияНоменклатуры, СтатусПартии, Заказ, Качество");
    Для Каждого лТекСтр Из мТЗ Цикл
        Если лРегистратор<>лТекСтр.Регистратор Тогда
            Если лРегистратор<>Неопределено Тогда
                лНабор.Загрузить(лНаборТЗ);
                лНабор.ОбменДанными.Загрузка = Истина;
                лНабор.Записать(Истина);
                Сообщить("Записан " + лРегистратор);
            КонецЕсли;
            лРегистратор = лТекСтр.Регистратор;
            лНабор.Отбор.Регистратор.Значение = лРегистратор;
            лНабор.Прочитать();
            лНаборТЗ = лНабор.Выгрузить();
            лНабор.Очистить();
        КонецЕсли;
        ЗаполнитьЗначенияСвойств(лСтруктураПоиска,лТекСтр);
        лСтроки = лНаборТЗ.НайтиСтроки(лСтруктураПоиска);
        Для Каждого л_ТекСтрИЗСтроки Из лСтроки Цикл
            лНаборТЗ.Удалить(л_ТекСтрИЗСтроки);
        КонецЦикла;
        лСтрокаНабора = лНаборТЗ.Добавить();
        ЗаполнитьЗначенияСвойств(лСтрокаНабора,лТекСтр);
        лСтрокаНабора.Активность = Истина;
    КонецЦикла;
    Если лРегистратор<>Неопределено Тогда
        лНабор.Загрузить(лНаборТЗ);
        лНабор.ОбменДанными.Загрузка = Истина;
        лНабор.Записать(Истина);
        Сообщить("Записан " + лРегистратор);
    КонецЕсли;
    ОтключитьОбработчикОжидания("ПроверитьСостояниеФоновыхЗаданий");
    Сообщить("Обработаны товары: ");
    лТЗ = мТЗ.Скопировать();
    лТЗ.Свернуть("Номенклатура, ХарактеристикаНоменклатуры, СерияНоменклатуры, СтатусПартии");
    лТЗ.Сортировать("Номенклатура, ХарактеристикаНоменклатуры, СерияНоменклатуры, СтатусПартии");
 
    Для Каждого лТекСтр Из лТЗ Цикл
        Сообщить(" " + лТекСтр.Номенклатура + " | " + лТекСтр.ХарактеристикаНоменклатуры + " | " + лТекСтр.СерияНоменклатуры + " | " + лТекСтр.СтатусПартии);
    КонецЦикла;
    Сообщить("Завершено!")
КонецПроцедуры

Процедура ПриОткрытии()
    ДатаНач = '20070101';
    ДатаКон = '20090101';
    КоличествоПотоков = 5;
КонецПроцедуры

мВсеПроцессыВыполнены = Ложь;
мВыполненныеПроцессы = Новый ТаблицаЗначений();
мВыполненныеПроцессы.Колонки.Добавить("НомерЗапущенного");
мВыполненныеПроцессы.Колонки.Добавить("НомерВыполненного");
мВыполненныеПроцессы.Колонки.Добавить("АдресВХранилище");
мВыполненныеПроцессы.Колонки.Добавить("ФоновоеЗадание");

мТЗТЗ = Новый ТаблицаЗначений();
мТЗТЗ.Колонки.Добавить("ТЗ");

мТЗ = Новый ТаблицаЗначений();

мТЗ.Колонки.Добавить("Номенклатура",Новый ОписаниеТипов("СправочникСсылка.Номенклатура"));
мТЗ.Колонки.Добавить("Склад",Новый ОписаниеТипов("СправочникСсылка.Склады"));
мТЗ.Колонки.Добавить("ХарактеристикаНоменклатуры", Новый ОписаниеТипов("СправочникСсылка.ХарактеристикиНоменклатуры"));
мТЗ.Колонки.Добавить("СерияНоменклатуры", Новый ОписаниеТипов("СправочникСсылка.СерииНоменклатуры"));
мТЗ.Колонки.Добавить("ДокументОприходования");
мТЗ.Колонки.Добавить("СтатусПартии", Новый ОписаниеТипов("ПеречислениеСсылка.СтатусыПартийТоваров"));
мТЗ.Колонки.Добавить("Заказ", Новый ОписаниеТипов("ДокументСсылка.ЗаказПокупателя"));
мТЗ.Колонки.Добавить("Качество", Новый ОписаниеТипов("СправочникСсылка.Качество"));
мТЗ.Колонки.Добавить("Регистратор");
мТЗ.Колонки.Добавить("НомерСтроки");
мТЗ.Колонки.Добавить("Период");
мТЗ.Колонки.Добавить("ВидДвижения");
мТЗ.Колонки.Добавить("Количество");
мТЗ.Колонки.Добавить("Стоимость");
мТЗ.Колонки.Добавить("КодОперации");
мТЗ.Колонки.Добавить("СписаниеПартий");
мТЗ.Колонки.Добавить("НомерКорСтроки");
мТЗ.Колонки.Добавить("ДокументДвижения");
мТЗ.Колонки.Добавить("ДокументДвиженияПериод");
мТЗ.Колонки.Добавить("НомерСтрокиСписанныхТоваров");



Показать




Общий модуль для выполнения фоновых заданий:


Процедура ОбработатьТаблицу(пТЗ,пДатаНач,пДатаКон,пАдресВХранилище,пНомер) Экспорт
    мТЗ = пТЗ.Скопировать();
    Зап = Новый Запрос("ВЫБРАТЬ
                       |    ТЗ.Номенклатура,
                       |    ТЗ.Склад,
                       |    ТЗ.ХарактеристикаНоменклатуры,
                       |    ТЗ.СерияНоменклатуры,
                       |    ТЗ.СтатусПартии,
                       |    ТЗ.Заказ,
                       |    ТЗ.Качество
                       |ПОМЕСТИТЬ ТЗВрТаб
                       |ИЗ
                       |    &ТЗ КАК ТЗ
                       |;
                       |
                       |////////////////////////////////////////////////////////////­­////////////////////
                       |ВЫБРАТЬ
                       |    ПартииТоваровНаСкладах.Период КАК Период,
                       |    ПартииТоваровНаСкладах.Регистратор КАК Регистратор,
                       |    ПартииТоваровНаСкладах.НомерСтроки,
                       |    ПартииТоваровНаСкладах.Активность,
                       |    ПартииТоваровНаСкладах.ВидДвижения,
                       |    ПартииТоваровНаСкладах.Номенклатура КАК Номенклатура,
                       |    ПартииТоваровНаСкладах.Склад КАК Склад,
                       |    ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры КАК ХарактеристикаНоменклатуры,
                       |    ПартииТоваровНаСкладах.СерияНоменклатуры КАК СерияНоменклатуры,
                       |    ПартииТоваровНаСкладах.ДокументОприходования,
                       |    ПартииТоваровНаСкладах.СтатусПартии КАК СтатусПартии,
                       |    ПартииТоваровНаСкладах.Заказ КАК Заказ,
                       |    ПартииТоваровНаСкладах.Качество КАК Качество,
                       |    ПартииТоваровНаСкладах.Количество,
                       |    ПартииТоваровНаСкладах.Стоимость,
                       |    ПартииТоваровНаСкладах.КодОперации,
                       |    ПартииТоваровНаСкладах.СписаниеПартий,
                       |    ПартииТоваровНаСкладах.НомерКорСтроки,
                       |    ПартииТоваровНаСкладах.ДокументДвижения,
                       |    ПартииТоваровНаСкладах.ДокументДвиженияПериод,
                       |    ПартииТоваровНаСкладах.НомерСтрокиСписанныхТоваров
                       |ИЗ
                       |    РегистрНакопления.ПартииТоваровНаСкладах КАК ПартииТоваровНаСкладах
                       |        ВНУТРЕННЕЕ СОЕДИНЕНИЕ ТЗВрТаб КАК ТЗ
                       |        ПО ПартииТоваровНаСкладах.Номенклатура = ТЗ.Номенклатура
                       |            И ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры = ТЗ.ХарактеристикаНоменклатуры
                       |            И ПартииТоваровНаСкладах.СерияНоменклатуры = ТЗ.СерияНоменклатуры
                       |            И ПартииТоваровНаСкладах.СтатусПартии = ТЗ.СтатусПартии
                       |ГДЕ
                       |    ПартииТоваровНаСкладах.Период МЕЖДУ &ДатаНач И &ДатаКон
                       |    И ПартииТоваровНаСкладах.Активность
                       |
                       |УПОРЯДОЧИТЬ ПО
                       |    Склад,
                       |    Номенклатура,
                       |    ХарактеристикаНоменклатуры,
                       |    СерияНоменклатуры,
                       |    СтатусПартии,
                       |    Заказ,
                       |    Качество,
                       |    Период,
                       |    Регистратор");
    Зап.УстановитьПараметр("ТЗ",мТЗ);
    Зап.УстановитьПараметр("ДатаНач",пДатаНач);
    Зап.УстановитьПараметр("ДатаКон",пДатаКон);
    Рез = Зап.Выполнить();
    лНоменклатура = Неопределено;
    лХарактеристикаНоменклатуры = Неопределено;
    лСклад = Неопределено;
    лСерияНоменклатуры = Неопределено;
    лСтатусПартии = Неопределено;
    лЗаказ = Неопределено;
    лКачество = Неопределено;
    
    Выборка = Рез.Выбрать();
    
    мТЗ.Очистить();
    лТЗДокументовОприходования = Новый ТаблицаЗначений();
    лТЗДокументовОприходования.Колонки.Добавить("ДокументОприходования");
    лТЗДокументовОприходования.Колонки.Добавить("Количество");
    лТЗДокументовОприходования.Колонки.Добавить("Стоимость");
    
    Пока Выборка.Следующий() Цикл
        Если лНоменклатура=Выборка.Номенклатура И
            лХарактеристикаНоменклатуры=Выборка.ХарактеристикаНоменклатуры И
            лСклад=Выборка.Склад И
            лСерияНоменклатуры=Выборка.СерияНоменклатуры И
            лСтатусПартии=Выборка.СтатусПартии И
            лЗаказ=Выборка.Заказ И
            лКачество=Выборка.Качество Тогда
            
        Иначе
            лНоменклатура=Выборка.Номенклатура;
            лХарактеристикаНоменклатуры=Выборка.ХарактеристикаНоменклатуры;
            лСклад=Выборка.Склад;
            лСерияНоменклатуры=Выборка.СерияНоменклатуры;
            лСтатусПартии=Выборка.СтатусПартии;
            лЗаказ=Выборка.Заказ;
            лКачество=Выборка.Качество;
            
            лТЗДокументовОприходования.Очистить();
        КонецЕсли;
            
        Если Выборка.ВидДвижения = ВидДвиженияНакопления.Приход Тогда
            лНовСтр = мТЗ.Добавить();
            ЗаполнитьЗначенияСвойств(лНовСтр,Выборка);
            Если Выборка.Количество<>0 Тогда
                лНовСтрОприходования = лТЗДокументовОприходования.Добавить();
                ЗаполнитьЗначенияСвойств(лНовСтрОприходования, Выборка);
            КонецЕсли;
        Иначе
            лКоличество = Выборка.Количество;
            лМассивСтрокКУдалению = Новый Массив;
            Для Каждого лТекСтрОприходования Из лТЗДокументовОприходования Цикл // ФИФО
                лНовСтр = мТЗ.Добавить();
                ЗаполнитьЗначенияСвойств(лНовСтр,Выборка);
                лЦена = лТекСтрОприходования.Стоимость / лТекСтрОприходования.Количество;
                лНовСтр.ДокументОприходования = лТекСтрОприходования.ДокументОприходования;
                Если лТекСтрОприходования.Количество>лКоличество Тогда
                    лТекСтрОприходования.Количество = лТекСтрОприходования.Количество - лКоличество;
                    лНовСтр.Количество = лКоличество;
                    лНовСтр.Стоимость = лКоличество*лЦена;
                    лТекСтрОприходования.Стоимость = лТекСтрОприходования.Стоимость - лНовСтр.Стоимость;
                    лКоличество=0;
                ИначеЕсли лТекСтрОприходования.Количество<=лКоличество Тогда
                    лКоличество = лКоличество - лТекСтрОприходования.Количество;
                    лНовСтр.Количество = лТекСтрОприходования.Количество;
                    лНовСтр.Стоимость = лТекСтрОприходования.Стоимость;
                    лМассивСтрокКУдалению.Добавить(лТекСтрОприходования);                        
                КонецЕсли;
                Если лКоличество<=0 Тогда
                    Прервать;
                КонецЕсли;
            КонецЦикла;
            Если лКоличество>0 Тогда
                Сообщить("Не хватает количества при распределении по партиям товар: " + Выборка.Номенклатура + " " + Выборка.ХарактеристикаНоменклатуры + " по документу " + Выборка.Регистратор);
            КонецЕсли;
            Для Каждого лТекСтрОприходования Из лМассивСтрокКУдалению Цикл
                лТЗДокументовОприходования.Удалить(лТекСтрОприходования);
            КонецЦикла;
        КонецЕсли;
        
    КонецЦикла;
    лСтрук = Новый Структура("ТЗ, Номер", мТЗ, пНомер); 
    лАдрес = ПоместитьВоВременноеХранилище(лСтрук, пАдресВХранилище);
    ЗаписьЖурналаРегистрации("ТестированиеЖР",,,,лАдрес);
    ЗаписьЖурналаРегистрации("ТестированиеЖР",,,,пАдресВХранилище);
    
КонецПроцедуры

Показать


Опробовано на сервере 1с с СУБД MSSQL на 5-50 потоках.
В фоновый процесс передаётся список товаров для обработки. Там он по товарам получает данные по записям регистра "Партии товаров на складах" и проходит последовательно по ним. Возвращает таблицу значений для своей порции данных.
Запись в регистры выполняется в один поток, но и это можно размножить.
Использовалась Обычная демобаза торговли 10.3.
157. пользователь 26.05.20 20:54
Сообщение было скрыто модератором.
...
200. mrsmrv 129 06.06.20 07:25 Сейчас в теме
(150)
Прицепился только потомучто вы (навальновцы, местные) - очевидность "отрицаете".

Почему вы упомянули Навальновцев?
Почему "отрицаете" в кавычках?
95. starik-2005 3309 26.05.20 18:04 Сейчас в теме
(85)
Этот факт, надеюсь - не будете оспаривать.
А я утверждаю, что и сам делал механизм восстановления последовательности документов (всех документов в системе) многопоточным, скорость перепроведения документов в итоге повышалась в 5 примерно раз (использовалось шесть потоков), и - более того - встречал даже здесь, на Инфостарте, несколько реализаций подобного многопоточного перепроведения документов.

Просто не понимаю, с чем Вы тут пытаетесь спорить? Ну не получилось у Вас лично это реализовать - бывает, но это не значит, что никто этого сделать не смог.
mrsmrv; nomad_irk; +2 – Ответить
96. Salavat 15 26.05.20 18:15 Сейчас в теме
(95) одно с пёстрым не путайте!
(95)
многопоточным, скорость перепроведения документов в итоге повышалась в 5 примерно раз
где я утверждал (как Вы тут меня пытаетесь обвинить!), что якобы я говорил, что распараллеливание время обработки не уменьшает?

(95)
Просто не понимаю,
ещё раз говорю - какие исходные данные Вы берёте для проведения второго документа, если документ первый - ещё не проведён?
Интерполяционные - так это всего-лишь, приближение (погрешность которого зависит от методики, но - никак не нулевая!), а не точность.

И - спорить я уже не пытаюсь.
Скрытый текст
99. starik-2005 3309 26.05.20 18:25 Сейчас в теме
(96)
какие исходные данные Вы берёте для проведения второго документа
Этот Ваш неверный посыл исходит из глубюокого непонимания того, что себестоимость, даже хранимая в партиях товаров, определяется для конкретного товара, и в большом количестве данных есть совершенно независимые документы. Я уже приводил пример булок и баранок с документом синхронизации потоков, в котором булки и баранки оказались одновременно - в таком случае система должна провести все потоки до этого документа, потом этот документ, потом следующие. Часть из этих документов может быть проведена параллельно, часть должна быть проведена последовательно, но если помимо булок и баранок добавить сузари, то проведение документов с сухарями можно произвести параллельно, пока не встретится случай с сухарями и булками или баранками.

Да, алгоритм получается сложнее, чем дважды два. Поэтому для того, чтобы документы не перепроводить, существует решение на базе СЛАУ - РАУЗ. Но даже в партионном учете есть возможность провести документы параллельно, хоть это и реализуется достаточно непростым алгоритмом.

С третьей стороны, и этого, как я понял, Вам вообще понять не дано, можно распараллелить только запись регистров накопления и бухгалтерии, при этом совершенно нет надобности записывать сам объект, который будет записан каждый раз при стандартном механизме перепроведения через "Документ.Записать(РежимЗаписиДокумента.Проведение)", при этом сам объект не меняется - зачем его записывать? Более того, нет смысла каждый раз читать остатки, т.к. остатки можно хранить в таблице значений в нужных разрезах - этот тот же регистр остатков, только в памяти. ТЗ индексируется в 1С, поэтому поиск в ней будет куда быстрее, чем чтение регистров остатков при проведении каждого документа. А дальше параллельно в совершенно любой последовательности можно записать полученные наборы записей регистров.

В общем Вы спорите с тем, что не понимаете.
mrsmrv; nomad_irk; +2 – Ответить
175. nickperel 4 28.05.20 19:36 Сейчас в теме
Господин Salavat, а причем тут Навальный? Сходите-ка к доктору
101. Salavat 15 26.05.20 18:28 Сейчас в теме
(95)
не получилось у Вас лично это реализовать
и да - я не "пытаюсь реализовать" то, что противоречит элементарным аксиомам.

Если я делаю приближение/итерацию (Ваш пример) - я это именно так и называю.
А не горню, что я сделал то, что другим не удастся.
Ну - ждите, когда Вам (и всем Вашим сторонникам) вручат нобелевку.
(другого варианта - просто нет. Также как есть факт, что - за математику, её и не вручают)
102. starik-2005 3309 26.05.20 18:34 Сейчас в теме
(101)
за математику, её и не вручают
Так за математику есть другая премия, от которой в свое время отказался уважаемый Григорий Перельман.

Но еще раз: параллелить само проведение вовсе не обязательно - достаточно буферизировать исторические данные и параллелить запись результата, который получен даже в один поток. Один поток генерирует записи, сто потоков их записывают. Где противоречие?
103. Salavat 15 26.05.20 18:43 Сейчас в теме
(102)
Где противоречие?
противоречие в том, что - буферизовать нечего!
Данных для проведения второго документа нет - пока первый не проведён.
Какие исторические данные?
Скрытый текст

С таким же успехом (но, с меньшей/большей/другой/... скоростью и точностью - возможно) - интерполяцию используйте.

Когда первый проведётся, тогда и будут данные для второго.
Данные - истинные!
А не.... (как хотите называйте/получайте/...)

И делайте (после этого!)с ними, на здоровье, что/как угодно.
Хоть буферизуйте мильярд раз.
107. starik-2005 3309 26.05.20 18:50 Сейчас в теме
(103)
Какие исторические данные?
Ну вот купили вы баранки - ПТУ, в ней увеличилась задолженность перед поставщиком, увеличилась себестоимость и количество купленных баранок - появились две записи в двух ТЗ, одна из которых - это ДЗ, вторая - партии товаров. Дальше ПТУ с сухарями. Если поставщик тот же - нашли соглашение с поставщиком, увеличили долг, или просто дописали еще одну строку, если нужен долг в разрезе документов. Дальше оплатили деньги - уменьшили долг по всем документам соглашения, упорядоченным по дате (в принципе, если в ТЗ данные помещаются пл-порядку, то и дату не нужно хранить). Если оплатили все - вычли из двух строк ТЗ суммы, остались две пустые строки, которые можно удалить. Если переплатили - появилась строка с КЗ и документом оплаты.

Ну банальнгейший же алгоритм, который ничего не записывает в БД - копит и модифицирует исторические данные в таблице значений, формирует наборы записей регистров относительно этой истории и отдает потом эти наборы для записи в сто параллельных потоков.

Ну что как маленький-то, просто...
nomad_irk; mrsmrv; +2 – Ответить
116. Salavat 15 26.05.20 19:05 Сейчас в теме
(107) я такому большому (но - необразованному, даже элементарным вещам) человеку - не в силах - объяснить элементарные аксимы.
Раз пять уже пробовал (лично тебе!).

Последняя попытка -

- как ты буферизуешь исторические данные первого документа (который ещё не проведён?
А при этом - собираешься провести второй?

(Напомню - второму требуются данные первого документа)
Скрытый текст
117. starik-2005 3309 26.05.20 19:06 Сейчас в теме
(116)
не в силах - объяснить элементарные аксимы
Ну так сначала дорастите до уровня, потом пытайтесь что-то объяснить. Пока Вы откровенно бред несете.
118. Salavat 15 26.05.20 19:11 Сейчас в теме
(117)
откровенно бред несете.
я не нёс ничего.
Я элементарную аксиому сказал.
(не городя кучу "умных слов")
125. mrsmrv 129 26.05.20 19:33 Сейчас в теме
(118)Давайте так. Опишите, что у вас за база? типовая или нет. На какой версии платформы работает. И что нужно перепровести, какие документы.
А пока что любое восстановление последовательсти представляется следующим образом: Считываем начальные остатки из регистров. Считываем таблицы документов, которые нужно перепровести. Причём таблицы, лишь те, что нужны для получения результата перепроведения/восстановления последовательности.
В общем случае при начале работы с базой - начальные остатки нулевые, первый документ как правило - приход (ввод начальных остатков, или первое поступление от поставщика) да даже если и расход. Считывая данные из всех документов мы Сразу знаем Сколько уникальных товаров всего нужно обработать. Сколько уникальных временных меток нужно пройти. В таблице нам нужно лишь сделать арифметические операции + - / * для каждой временнОй метки и каждого товара, что можно (и нужно) распараллелить. Причём Приход-то зачем перепроводить - ну с логики изменения количества и себестоимости товара. Приход-то не нуждается в пересчёте по идее. Ну да ладно. Короче в итоге для каждой временнОй метки мы получаем результат приходов, расходов и прочих вычислений согласно Алгоритма (ФИФО ЛИФО по среднему и т.п.) Разве в этом алгоритме данные по одному товару влияют на данные по другому товару? Нет. После того как ПОСЛЕДОВАТЕЛЬНО для каждой временной метки и по каждому товару был получен результат (очевидно себестоимость) этот результат можно записать в СУБД, ладно, в регистры, которые "двигает" документ соответствующий той или иной временнОй метке.
Как ещё разжевать логику параллельного перепроведения я незнаю. Но думаю если будет поставлена чёткая задача и мной будет написан код для решения этой конкретной чёткой задачи, вы сможете убедиться в том, что Распараллелить этот процесс можно. Если конечно у вас там действительно не заложена какая-то киллер фича, влияющая на Все товары при перепроведения Каждого документа.
starik-2005; nomad_irk; +2 – Ответить
105. Salavat 15 26.05.20 18:45 Сейчас в теме
(102)
Так за математику есть другая премия, от которой в свое время отказался уважаемый Григорий Перельман.
молодцом!
постарайся теперь вспомнить - почему он отказался?
109. starik-2005 3309 26.05.20 18:51 Сейчас в теме
(105)
постарайся вспомнить - почему он отказался?
Потому, что он теперь может одной силой мысли Вселенной управлять (по крайней мере он так выразился). Но Вам до этого далеко, раз банальных вещей не можете понять и кроме первого документа ничего не видите...
user1424343; +1 – Ответить
112. Salavat 15 26.05.20 18:55 Сейчас в теме
(102) Запомните (постарайтесь пожалуйста - умоляю) одно - распараллеливается только то, что есть.
То чего не существует (в один момент!) - невозможно распараллелить.
Т.к. элементарно (хотябы) - распараллеливать нечего.
Принципиально!

Скрытый текст
114. mrsmrv 129 26.05.20 19:01 Сейчас в теме
(112)Ну вот есть задача допустим восстановить последовательность за месяц. Есть 1000 товаров. Что нам мешает не заглядывая в документы, напрямую из регистров взять данные о том, сколько товара пришло, ушло, когда? Вот матрица, по горизонтали пусть будет время (это вообще в физике кстати тоже понятие такое... чисто эмоциональное чтоли), по вертикали пусть будет товар, в ячейках количество + приход, - уход. Задача сводится лишь к решению системы уравнений, с таким расчётом чтобы в ячейкам матрицы с - ухода количества была соответствующая себестоимость.
Даже если оторваться от решения СЛАУ, Можно каждый товар в этой матрице тупо прогнать "перепроведением последовательно". Но распараллелить процесс - т.е. 1000 потоков на каждый товар. После того как матрица обработана, результат готов, Записать полученный результат в тех ячейках где был - (расход товара со склада) в те документы, которые соответствуют меткам времени. Всё. Движения в регистры 1С писать умеет, без Перепроведения документов. Элементарно.
nomad_irk; starik-2005; +2 – Ответить
119. Salavat 15 26.05.20 19:13 Сейчас в теме
(114)
Что нам мешает не заглядывая в документы, напрямую из регистров взять данные о том
нам (тем кто знаком с истиной) мешает взять не то, что мы не знаем где взять, а -

- не даёт элементарное, отсутствие необходимой информации!
120. mrsmrv 129 26.05.20 19:14 Сейчас в теме
(119)т.е. на не надо документы за прошедший месяц проводить? и лишь в реальном времени? по мере их поступления?
122. starik-2005 3309 26.05.20 19:19 Сейчас в теме
(120) коллега, спор зашел в тупик ))) Предлагаю пока забить на этот спор болт, т.к. они ничего не меняет. У нас с Вами все может параллелиться, у оппонентов - нет. Пусть они (оппоненты) остаются в скучном однопоточном мире и считают числа ряда Фибоначчи только последовательно.
ЗЫ: Постоянное упоминание Навального - это возрастной диагноз, так что вообще смысла нет, да и время сейчас неспокойное - мало ли кризис у человека. Я знал много народу, кто при массовом засилии ООП-подхода с их SOLID и прочими фичами из Agile просто из программистов пошли в охранники. И они там счастливы, что радует )))
123. пользователь 26.05.20 19:22
Сообщение было скрыто модератором.
...
124. nomad_irk 84 26.05.20 19:30 Сейчас в теме
(123)Если у вас всего 2 документа для восстановления последовательности: "поступление товаров №1" и "реализация товаров №1", то задача не паралеллелиться.

1. Вы в состоянии осознать, что документов может быть много больше 2-х?
2. Вы в состоянии осознать, что во всех этих документах может быть не пересекающиеся данные по номенклатуре/складу?
127. Salavat 15 26.05.20 19:39 Сейчас в теме
(124)
у вас всего 2 документа для восстановления последовательности: "поступление товаров №1" и "реализация товаров №1", то задача не паралеллелиться.
о как, ну надоже - ты оказывается в силах, признать истину.
Скрытый текст


1. Вы в состоянии осознать, что документов может быть много больше 2-х?
мы в состоянии - ты не в состоянии осознать, что - два, это всего-лишь для простоты.
Сколько тебе надо документов для распараллеливания?

(124)
2. Вы в состоянии осознать, что во всех этих документах может быть не пересекающиеся данные по номенклатуре/складу?
мы да, в состоянии, в отличии от тебя. Как это влияет на "твоё распараллеливание"? (которое, как оказалось - зависит от "количества распаралелливаемого...."
129. nomad_irk 84 26.05.20 19:49 Сейчас в теме
(127)
мы в состоянии - ты не в состоянии осознать, что - два, это всего-лишь для простоты.
Сколько тебе надо документов для распараллеливания?

мы да, в состоянии, в отличии от тебя. Как это влияет на "твоё распараллеливание"? (которое, как оказалось - зависит от количества распаралелливаемого...."


Никто в здравом уме не будет пытаться паралеллить проведение документов с одной номенклатурой/по одному складу.
Очень жаль, что для вас эта аксиома так и осталась недоступной для понимания.
131. starik-2005 3309 26.05.20 19:50 Сейчас в теме
(129)
Очень жаль, что для вас эта аксиома так и осталась недоступной для понимания.
И это говорит человек, у которого один склад и одна номенклатура ))) Все остальное разворовал Навальный, ага )))
mrsmrv; nomad_irk; +2 – Ответить
134. nomad_irk 84 26.05.20 19:52 Сейчас в теме
(131) с изречениями про Навального - это, похоже, уже - диагноз, хотя я и не имею соответствующего медицинского образования, но свое оценочное суждение высказать могу :)
126. mrsmrv 129 26.05.20 19:36 Сейчас в теме
(123)
а тыто откуда свалился? арёл.
Это простите вы мне?

Сколько у вас товаров?
Сколько документов? за день, неделю, месяц?
128. Salavat 15 26.05.20 19:44 Сейчас в теме
(126) мы да, тебе в т.ч.
(и да, прощу - когда/если признаешь элементарную аксиому)

условие задачи - http://forum.infostart.ru/forum34/topic241565/message2447899/#message2447899

Жду решения.
С применением "распаралееливания", разумеется)

И да (отвечаю на бессмысленные твои вопросы)
Сколько у вас товаров?
Сколько документов? за день, неделю, месяц?

Бери, на своё усмотрение (раз тебе это принципиально) - наши товары и период
130. mrsmrv 129 26.05.20 19:49 Сейчас в теме
Даже проведние двух документов можно ускорить объединив их логику в одну транзакцию, Чтение табличных частей документов, вычисление результатов для каждого товара каждого документа, и запись результата в движения каждого документа в рамках одной транзакции. Чтение и запись можно разделить в несколько потоков сгруппировав по нескольку (десятков) товаров. Если в Каждом документе лишь один товар, то задача не требует распараллеливания. Но замерить длительность отдельных операций и в рамках одной транзакции было бы интересно.
133. пользователь 26.05.20 19:52
Сообщение было скрыто модератором.
...
132. пользователь 26.05.20 19:50
Сообщение было скрыто модератором.
...
136. пользователь 26.05.20 19:55
Сообщение было скрыто модератором.
...
137. mrsmrv 129 26.05.20 19:57 Сейчас в теме
(136)Чтение и запись можно разделить в несколько потоков сгруппировав по нескольку (десятков) товаров. Если в Каждом документе лишь один товар, то задача не требует распараллеливания.
141. mrsmrv 129 26.05.20 20:06 Сейчас в теме
145. Salavat 15 26.05.20 20:10 Сейчас в теме
(141) И где решение?
Стыдно показать - именно это, я прекрасно понимаю.
146. starik-2005 3309 26.05.20 20:12 Сейчас в теме
(145)
И где решение?
Да Вы тут в соседней теме даже не смогли додуматься, что есть несколько типовых макетов оформления, при том критикуете автора за "плохой вопрос". Вы просто графоман, батенька. Идите на Дзен - там кирпичами про навальных и окраинцев можно с утра до ночи откладывать.
nomad_irk; mrsmrv; +2 – Ответить
147. mrsmrv 129 26.05.20 20:12 Сейчас в теме
(145)Я ТЕБЕ, Арёл уже давно и несколько раз решение описал, Читай если умеешь.
148. starik-2005 3309 26.05.20 20:13 Сейчас в теме
(147) Не умеет он. Не его это, так что не дави - забей просто.
149. mrsmrv 129 26.05.20 20:14 Сейчас в теме
(148)Да я хотел понять для какой конфы законфигурить обработку "проведения" документов. Потому что для современных типовых не очень-то и надо. А для 7.7. не охота просто так гонять буквы по клаве.
Как видите (в моих публикациях) я даже без мзды не прочь чего нибудь поконфигурить.
158. Salavat 15 26.05.20 20:57 Сейчас в теме
(147) я тебе решение задал - четырьмя строками.
(короткими)
Ты (в том числе) - изливал воду какуюто, которую обозвал "решением".

Я вон даже базу выложил (как твой коллега выразился, для "демонстрации решения").

Решение жду.
(не "решения")

Нужно распараллелить проведение N документов.
При этом нужно (в данном случае интересно!) - не ускорение проведения.
(эту тупость - я и не опровергал!)
А сохранить основной функционал - себестоимость должна быть реальной.
(разжевать надо - что это значит?)
195. mrsmrv 129 03.06.20 10:31 Сейчас в теме
(158)
На досуге сделал обработку и текст модуля для УТ 10.3 Для простоты решения (ведь на досуге же) сделал "восстановление по партиям" только тех товаров, у которых не было преобразований, таких как изменения качества, серий, комплектаций, перемещений. Обрабатываются только те, которые пришли и ушли, Приход и расход. Распределение по партиям осуществляется по ФИФО.
В обработке можно выбрать номенклатуру, характеристику, серию. Если ничего не выбрано, обрабатывается всё. В обработке есть реквизиты КоличествоПотоков - число целое, ДатаНач, ДатаКон, Номенклатура, ХарактеристикаНоменклатуры, СерияНоменклатуры.

Текст модуля формы обработки:
Перем мИтоговаяТаблица;
Перем мВсеПроцессыВыполнены;
Перем мВыполненныеПроцессы;
Перем мТЗТЗ;
Перем мТЗ;


Процедура КнопкаВыполнитьНажатие(Кнопка)
	лТипыРегистраторов = Новый Массив(); // для простоты решения уберём преобразующие движения
	лТипыРегистраторов.Добавить(Тип("ДокументСсылка.ПоступлениеТоваровУслуг"));
	лТипыРегистраторов.Добавить(Тип("ДокументСсылка.РеализацияТоваровУслуг"));
	
	Зап3 = Новый Запрос("ВЫБРАТЬ
	                    |	ПартииТоваровНаСкладах.Номенклатура КАК Номенклатура,
	                    |	ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры КАК ХарактеристикаНоменклатуры,
	                    |	ПартииТоваровНаСкладах.СерияНоменклатуры КАК СерияНоменклатуры,
	                    |	ПартииТоваровНаСкладах.СтатусПартии КАК СтатусПартии,
	                    |	СУММА(ВЫБОР
	                    |			КОГДА НЕ ТИПЗНАЧЕНИЯ(ПартииТоваровНаСкладах.Регистратор) В (&ТипыРегистраторов)
	                    |				ТОГДА 1
	                    |			ИНАЧЕ 0
	                    |		КОНЕЦ) КАК Поле1
	                    |ПОМЕСТИТЬ П1
	                    |ИЗ
	                    |	РегистрНакопления.ПартииТоваровНаСкладах КАК ПартииТоваровНаСкладах
	                    |ГДЕ
	                    |	ПартииТоваровНаСкладах.Период МЕЖДУ &ДатаНач И &ДатаКон
	                    |	И ПартииТоваровНаСкладах.Активность
	                    |	И (ПартииТоваровНаСкладах.СерияНоменклатуры = &СерияНоменклатуры
	                    |			ИЛИ &СерияНоменклатуры = ЗНАЧЕНИЕ(Справочник.СерииНоменклатуры.ПустаяСсылка))
	                    |	И (ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры = &ХарактеристикаНоменклатуры
	                    |			ИЛИ &ХарактеристикаНоменклатуры = ЗНАЧЕНИЕ(Справочник.ХарактеристикиНоменклатуры.ПустаяСсылка))
	                    |	И (ПартииТоваровНаСкладах.Номенклатура = &Номенклатура
	                    |			ИЛИ &Номенклатура = ЗНАЧЕНИЕ(Справочник.Номенклатура.ПустаяСсылка))
	                    |
	                    |СГРУППИРОВАТЬ ПО
	                    |	ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры,
	                    |	ПартииТоваровНаСкладах.СерияНоменклатуры,
	                    |	ПартииТоваровНаСкладах.СтатусПартии,
	                    |	ПартииТоваровНаСкладах.Номенклатура
	                    |;
	                    |
	                    |////////////////////////////////////////////////////////////­////////////////////
	                    |ВЫБРАТЬ
	                    |	П1.Номенклатура,
	                    |	П1.ХарактеристикаНоменклатуры,
	                    |	П1.СерияНоменклатуры,
	                    |	П1.СтатусПартии
	                    |ИЗ
	                    |	П1 КАК П1
	                    |ГДЕ
	                    |	П1.Поле1 = 0");
	Зап3.УстановитьПараметр("ДатаНач",ДатаНач);
	Зап3.УстановитьПараметр("ДатаКон",ДатаКон);
	Зап3.УстановитьПараметр("ТипыРегистраторов",лТипыРегистраторов);
	Зап3.УстановитьПараметр("Номенклатура", Номенклатура);
	Зап3.УстановитьПараметр("ХарактеристикаНоменклатуры", ХарактеристикаНоменклатуры);
	Зап3.УстановитьПараметр("СерияНоменклатуры", СерияНоменклатуры);
	
	Рез3 = Зап3.Выполнить();
	
	лТЗЗап = Рез3.Выгрузить();
	
	КоличествоСтрок = лТЗЗап.Количество();
	лКолВоПотоков = Мин(КоличествоСтрок,КоличествоПотоков);
	КолВоВПотоке = Цел(КоличествоСтрок/лКолВоПотоков);
	КолвоВПоследнемПотоке = КоличествоСтрок%лКолВоПотоков;
	Сообщить("Количество строк " + КоличествоСтрок + " Количество в потоке " + КолВоВПотоке + " Количество в последнем потоке " + КолвоВПоследнемПотоке);
	
	НТекПотока = 0;
	НСеанса = 0;
	мТЗ.Очистить();
	лТЗ2 = мТЗ.Скопировать();
	лСтрТЗТЗ = мТЗТЗ.Добавить();
	лСтрТЗТЗ.ТЗ = лТЗ2;
	
	Для Каждого лТекСтрТЗЗап Из лТЗЗап Цикл
		лНовСтр = лСтрТЗТЗ.ТЗ.Добавить();
		ЗаполнитьЗначенияСвойств(лНовСтр,лТекСтрТЗЗап);
		НТекПотока = НТекПотока + 1;
		Если НТекПотока%КолВоВПотоке=0 Тогда
			ВызватьСеанс(НСеанса,лСтрТЗТЗ.ТЗ);
			НСеанса = НСеанса + 1;
			лТЗ2 = мТЗ.Скопировать();
			лСтрТЗТЗ = мТЗТЗ.Добавить();
			лСтрТЗТЗ.ТЗ = лТЗ2;
		КонецЕсли;
	КонецЦикла;
	
	Если КолвоВПоследнемПотоке > 0 Тогда
		ВызватьСеанс(НСеанса,лСтрТЗТЗ.ТЗ);
	КонецЕсли;
	
	ПодключитьОбработчикОжидания("ПроверитьСостояниеФоновыхЗаданий",1);
	
КонецПроцедуры

Процедура ВызватьСеанс(пНомер,пТЗ)
	лМассив = Новый массив();
	лНовСтр = мВыполненныеПроцессы.Добавить();
	лНовСтр.НомерЗапущенного = пНомер;
	лНовСтр.АдресВХранилище = Новый УникальныйИдентификатор;
	
	лАдрес = ПоместитьВоВременноеХранилище(Неопределено,лНовСтр.АдресВХранилище);
	лНовСтр.АдресВХранилище = лАдрес;
	
	лМассив.Добавить(пТЗ);
	лМассив.Добавить(ДатаНач);
	лМассив.Добавить(ДатаКон);
	лМассив.Добавить(лАдрес);
	лМассив.Добавить(пНомер);
	
	лКлюч = "ОбрабоктаТаблицы_" + пНомер;
	лСсылка = ПолучитьНавигационнуюСсылкуИнформационнойБазы();
	//Сообщить(лСсылка);
	
	Если СтрНайти(лСсылка,"e1c://server/")>0 и Не ЗапускатьНеВФоне Тогда
		Сообщить("Запущен фоновый процесс " + пНомер);
		лФоновоеЗадание = ФоновыеЗадания.Выполнить("мФоновые.ОбработатьТаблицу", лМассив, лКлюч, "ОбрабоктаТаблицы " + пНомер);
		лНовСтр.ФоновоеЗадание = лФоновоеЗадание;
	Иначе
		Сообщить("Запущен процесс " + пНомер);
		мФоновые.ОбработатьТаблицу(лМассив[0],лМассив[1],лМассив[2],лМассив[3],лМассив[4]);
	КонецЕсли;
КонецПроцедуры

Процедура ПроверитьСостояниеФоновыхЗаданий()
	лФл = Ложь;
	лМассивКУдалению = Новый Массив;
	Для Каждого лТекСтр Из мВыполненныеПроцессы Цикл
		лСтрук = ПолучитьИзВременногоХранилища(лТекСтр.АдресВХранилище);
		Если лСтрук<>Неопределено Тогда
			лТЗ = лСтрук.ТЗ;
			Сообщить("Завершён процесс " +лСтрук.Номер);
			//лТЗ = лДанные.Получить();
			лФл = Истина;
			Для Каждого лТекСтрТЗ Из лТЗ Цикл
				лНовСтр = мТЗ.Добавить();
				ЗаполнитьЗначенияСвойств(лНовСтр,лТекСтрТЗ);
				лФл = Ложь;
			КонецЦикла;
			УдалитьИзВременногоХранилища(лТекСтр.АдресВХранилище);
			лМассивКУдалению.Добавить(лТекСтр);
		Иначе
			лФл = Истина;
		КонецЕсли;
	КонецЦикла;
	
	Для Каждого лТекСтр Из лМассивКУдалению Цикл
		мВыполненныеПроцессы.Удалить(лТекСтр);
	КонецЦикла;
	
	Если лФл Тогда
		Возврат;
	КонецЕсли;
	мТЗ.Сортировать("Период");
	лНабор = РегистрыНакопления.ПартииТоваровНаСкладах.СоздатьНаборЗаписей();
	лРегистратор = Неопределено;
	лСтрокаТовара = "";
	лНаборТЗ = Новый ТаблицаЗначений;
	лСтруктураПоиска = Новый Структура("Номенклатура, Склад,  ХарактеристикаНоменклатуры, СерияНоменклатуры, СтатусПартии, Заказ, Качество");
	Для Каждого лТекСтр Из мТЗ Цикл
		Если лРегистратор<>лТекСтр.Регистратор Тогда
			Если лРегистратор<>Неопределено Тогда
				лНабор.Загрузить(лНаборТЗ);
				лНабор.ОбменДанными.Загрузка = Истина;
				лНабор.Записать(Истина);
				Сообщить("Записан " + лРегистратор);
			КонецЕсли;
			лРегистратор = лТекСтр.Регистратор;
			лНабор.Отбор.Регистратор.Значение = лРегистратор;
			лНабор.Прочитать();
			лНаборТЗ = лНабор.Выгрузить();
			лНабор.Очистить();
		КонецЕсли;
		ЗаполнитьЗначенияСвойств(лСтруктураПоиска,лТекСтр);
		лСтроки = лНаборТЗ.НайтиСтроки(лСтруктураПоиска);
		Для Каждого л_ТекСтрИЗСтроки Из лСтроки Цикл
			лНаборТЗ.Удалить(л_ТекСтрИЗСтроки);
		КонецЦикла;
		лСтрокаНабора = лНаборТЗ.Добавить();
		ЗаполнитьЗначенияСвойств(лСтрокаНабора,лТекСтр);
		лСтрокаНабора.Активность = Истина;
	КонецЦикла;
	Если лРегистратор<>Неопределено Тогда
		лНабор.Загрузить(лНаборТЗ);
		лНабор.ОбменДанными.Загрузка = Истина;
		лНабор.Записать(Истина);
		Сообщить("Записан " + лРегистратор);
	КонецЕсли;
	ОтключитьОбработчикОжидания("ПроверитьСостояниеФоновыхЗаданий");
	Сообщить("Обработаны товары: ");
	лТЗ = мТЗ.Скопировать();
	лТЗ.Свернуть("Номенклатура, ХарактеристикаНоменклатуры, СерияНоменклатуры, СтатусПартии");
	лТЗ.Сортировать("Номенклатура, ХарактеристикаНоменклатуры, СерияНоменклатуры, СтатусПартии");
 
	Для Каждого лТекСтр Из лТЗ Цикл
		Сообщить(" " + лТекСтр.Номенклатура + " | " + лТекСтр.ХарактеристикаНоменклатуры + " | " + лТекСтр.СерияНоменклатуры + " | " + лТекСтр.СтатусПартии);
	КонецЦикла;
	Сообщить("Завершено!")
КонецПроцедуры

Процедура ПриОткрытии()
	ДатаНач = '20070101';
	ДатаКон = '20090101';
	КоличествоПотоков = 5;
КонецПроцедуры

мВсеПроцессыВыполнены = Ложь;
мВыполненныеПроцессы = Новый ТаблицаЗначений();
мВыполненныеПроцессы.Колонки.Добавить("НомерЗапущенного");
мВыполненныеПроцессы.Колонки.Добавить("НомерВыполненного");
мВыполненныеПроцессы.Колонки.Добавить("АдресВХранилище");
мВыполненныеПроцессы.Колонки.Добавить("ФоновоеЗадание");

мТЗТЗ = Новый ТаблицаЗначений();
мТЗТЗ.Колонки.Добавить("ТЗ");

мТЗ = Новый ТаблицаЗначений();

мТЗ.Колонки.Добавить("Номенклатура",Новый ОписаниеТипов("СправочникСсылка.Номенклатура"));
мТЗ.Колонки.Добавить("Склад",Новый ОписаниеТипов("СправочникСсылка.Склады"));
мТЗ.Колонки.Добавить("ХарактеристикаНоменклатуры", Новый ОписаниеТипов("СправочникСсылка.ХарактеристикиНоменклатуры"));
мТЗ.Колонки.Добавить("СерияНоменклатуры", Новый ОписаниеТипов("СправочникСсылка.СерииНоменклатуры"));
мТЗ.Колонки.Добавить("ДокументОприходования");
мТЗ.Колонки.Добавить("СтатусПартии", Новый ОписаниеТипов("ПеречислениеСсылка.СтатусыПартийТоваров"));
мТЗ.Колонки.Добавить("Заказ", Новый ОписаниеТипов("ДокументСсылка.ЗаказПокупателя"));
мТЗ.Колонки.Добавить("Качество", Новый ОписаниеТипов("СправочникСсылка.Качество"));
мТЗ.Колонки.Добавить("Регистратор");
мТЗ.Колонки.Добавить("НомерСтроки");
мТЗ.Колонки.Добавить("Период");
мТЗ.Колонки.Добавить("ВидДвижения");
мТЗ.Колонки.Добавить("Количество");
мТЗ.Колонки.Добавить("Стоимость");
мТЗ.Колонки.Добавить("КодОперации");
мТЗ.Колонки.Добавить("СписаниеПартий");
мТЗ.Колонки.Добавить("НомерКорСтроки");
мТЗ.Колонки.Добавить("ДокументДвижения");
мТЗ.Колонки.Добавить("ДокументДвиженияПериод");
мТЗ.Колонки.Добавить("НомерСтрокиСписанныхТоваров");

Показать


Общий модуль для выполнения фоновых заданий:
Процедура ОбработатьТаблицу(пТЗ,пДатаНач,пДатаКон,пАдресВХранилище,пНомер) Экспорт
	мТЗ = пТЗ.Скопировать();
	Зап = Новый Запрос("ВЫБРАТЬ
	                   |	ТЗ.Номенклатура,
	                   |	ТЗ.Склад,
	                   |	ТЗ.ХарактеристикаНоменклатуры,
	                   |	ТЗ.СерияНоменклатуры,
	                   |	ТЗ.СтатусПартии,
	                   |	ТЗ.Заказ,
	                   |	ТЗ.Качество
	                   |ПОМЕСТИТЬ ТЗВрТаб
	                   |ИЗ
	                   |	&ТЗ КАК ТЗ
	                   |;
	                   |
	                   |////////////////////////////////////////////////////////////­////////////////////
	                   |ВЫБРАТЬ
	                   |	ПартииТоваровНаСкладах.Период КАК Период,
	                   |	ПартииТоваровНаСкладах.Регистратор КАК Регистратор,
	                   |	ПартииТоваровНаСкладах.НомерСтроки,
	                   |	ПартииТоваровНаСкладах.Активность,
	                   |	ПартииТоваровНаСкладах.ВидДвижения,
	                   |	ПартииТоваровНаСкладах.Номенклатура КАК Номенклатура,
	                   |	ПартииТоваровНаСкладах.Склад КАК Склад,
	                   |	ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры КАК ХарактеристикаНоменклатуры,
	                   |	ПартииТоваровНаСкладах.СерияНоменклатуры КАК СерияНоменклатуры,
	                   |	ПартииТоваровНаСкладах.ДокументОприходования,
	                   |	ПартииТоваровНаСкладах.СтатусПартии КАК СтатусПартии,
	                   |	ПартииТоваровНаСкладах.Заказ КАК Заказ,
	                   |	ПартииТоваровНаСкладах.Качество КАК Качество,
	                   |	ПартииТоваровНаСкладах.Количество,
	                   |	ПартииТоваровНаСкладах.Стоимость,
	                   |	ПартииТоваровНаСкладах.КодОперации,
	                   |	ПартииТоваровНаСкладах.СписаниеПартий,
	                   |	ПартииТоваровНаСкладах.НомерКорСтроки,
	                   |	ПартииТоваровНаСкладах.ДокументДвижения,
	                   |	ПартииТоваровНаСкладах.ДокументДвиженияПериод,
	                   |	ПартииТоваровНаСкладах.НомерСтрокиСписанныхТоваров
	                   |ИЗ
	                   |	РегистрНакопления.ПартииТоваровНаСкладах КАК ПартииТоваровНаСкладах
	                   |		ВНУТРЕННЕЕ СОЕДИНЕНИЕ ТЗВрТаб КАК ТЗ
	                   |		ПО ПартииТоваровНаСкладах.Номенклатура = ТЗ.Номенклатура
	                   |			И ПартииТоваровНаСкладах.ХарактеристикаНоменклатуры = ТЗ.ХарактеристикаНоменклатуры
	                   |			И ПартииТоваровНаСкладах.СерияНоменклатуры = ТЗ.СерияНоменклатуры
	                   |			И ПартииТоваровНаСкладах.СтатусПартии = ТЗ.СтатусПартии
	                   |ГДЕ
	                   |	ПартииТоваровНаСкладах.Период МЕЖДУ &ДатаНач И &ДатаКон
	                   |	И ПартииТоваровНаСкладах.Активность
	                   |
	                   |УПОРЯДОЧИТЬ ПО
	                   |	Склад,
	                   |	Номенклатура,
	                   |	ХарактеристикаНоменклатуры,
	                   |	СерияНоменклатуры,
	                   |	СтатусПартии,
	                   |	Заказ,
	                   |	Качество,
	                   |	Период,
	                   |	Регистратор");
	Зап.УстановитьПараметр("ТЗ",мТЗ);
	Зап.УстановитьПараметр("ДатаНач",пДатаНач);
	Зап.УстановитьПараметр("ДатаКон",пДатаКон);
	Рез = Зап.Выполнить();
	лНоменклатура = Неопределено;
	лХарактеристикаНоменклатуры = Неопределено;
	лСклад = Неопределено;
	лСерияНоменклатуры = Неопределено;
	лСтатусПартии = Неопределено;
	лЗаказ = Неопределено;
	лКачество = Неопределено;
	
	Выборка = Рез.Выбрать();
	
	мТЗ.Очистить();
	лТЗДокументовОприходования = Новый ТаблицаЗначений();
	лТЗДокументовОприходования.Колонки.Добавить("ДокументОприходования");
	лТЗДокументовОприходования.Колонки.Добавить("Количество");
	лТЗДокументовОприходования.Колонки.Добавить("Стоимость");
	
	Пока Выборка.Следующий() Цикл
		Если лНоменклатура=Выборка.Номенклатура И
			лХарактеристикаНоменклатуры=Выборка.ХарактеристикаНоменклатуры И
			лСклад=Выборка.Склад И
			лСерияНоменклатуры=Выборка.СерияНоменклатуры И
			лСтатусПартии=Выборка.СтатусПартии И
			лЗаказ=Выборка.Заказ И
			лКачество=Выборка.Качество Тогда
			
		Иначе
			лНоменклатура=Выборка.Номенклатура;
			лХарактеристикаНоменклатуры=Выборка.ХарактеристикаНоменклатуры;
			лСклад=Выборка.Склад;
			лСерияНоменклатуры=Выборка.СерияНоменклатуры;
			лСтатусПартии=Выборка.СтатусПартии;
			лЗаказ=Выборка.Заказ;
			лКачество=Выборка.Качество;
			
			лТЗДокументовОприходования.Очистить();
		КонецЕсли;
			
		Если Выборка.ВидДвижения = ВидДвиженияНакопления.Приход Тогда
			лНовСтр = мТЗ.Добавить();
			ЗаполнитьЗначенияСвойств(лНовСтр,Выборка);
			Если Выборка.Количество<>0 Тогда
				лНовСтрОприходования = лТЗДокументовОприходования.Добавить();
				ЗаполнитьЗначенияСвойств(лНовСтрОприходования, Выборка);
			КонецЕсли;
		Иначе
			лКоличество = Выборка.Количество;
			лМассивСтрокКУдалению = Новый Массив;
			Для Каждого лТекСтрОприходования Из лТЗДокументовОприходования Цикл // ФИФО
				лНовСтр = мТЗ.Добавить();
				ЗаполнитьЗначенияСвойств(лНовСтр,Выборка);
				лЦена = лТекСтрОприходования.Стоимость / лТекСтрОприходования.Количество;
				лНовСтр.ДокументОприходования = лТекСтрОприходования.ДокументОприходования;
				Если лТекСтрОприходования.Количество>лКоличество Тогда
					лТекСтрОприходования.Количество = лТекСтрОприходования.Количество - лКоличество;
					лНовСтр.Количество = лКоличество;
					лНовСтр.Стоимость = лКоличество*лЦена;
					лТекСтрОприходования.Стоимость = лТекСтрОприходования.Стоимость - лНовСтр.Стоимость;
					лКоличество=0;
				ИначеЕсли лТекСтрОприходования.Количество<=лКоличество Тогда
					лКоличество = лКоличество - лТекСтрОприходования.Количество;
					лНовСтр.Количество = лТекСтрОприходования.Количество;
					лНовСтр.Стоимость = лТекСтрОприходования.Стоимость;
					лМассивСтрокКУдалению.Добавить(лТекСтрОприходования);						
				КонецЕсли;
				Если лКоличество<=0 Тогда
					Прервать;
				КонецЕсли;
			КонецЦикла;
			Если лКоличество>0 Тогда
				Сообщить("Не хватает количества при распределении по партиям товар: " + Выборка.Номенклатура + " " + Выборка.ХарактеристикаНоменклатуры + " по документу " + Выборка.Регистратор);
			КонецЕсли;
			Для Каждого лТекСтрОприходования Из лМассивСтрокКУдалению Цикл
				лТЗДокументовОприходования.Удалить(лТекСтрОприходования);
			КонецЦикла;
		КонецЕсли;
		
	КонецЦикла;
	лСтрук = Новый Структура("ТЗ, Номер", мТЗ, пНомер); 
	лАдрес = ПоместитьВоВременноеХранилище(лСтрук, пАдресВХранилище);
	ЗаписьЖурналаРегистрации("ТестированиеЖР",,,,лАдрес);
	ЗаписьЖурналаРегистрации("ТестированиеЖР",,,,пАдресВХранилище);
	
КонецПроцедуры
Показать


Опробовано на сервере 1с с СУБД MSSQL на 5 потоках.
В фоновый процесс передаётся список товаров для обработки. Там он по товарам получает данные по записям регистра "Партии товаров на складах" и проходит последовательно по ним. Возвращает таблицу значений для своей порции данных.
Запись в регистры выполняется в один поток
nomad_irk; +1 – Ответить
203. Salavat 15 19.06.20 21:29 Сейчас в теме
(195), а теперь - попробуй, пожалуйста,
(своим алгоритмом):

1. Условия:

есть последовательность документов -

Приход1, Расход1, Приход2, Расход2.

Номенклатура одна позиция (для простоты).

В приходах - цена, разная.

Да - возьмём ФИФО (как ты привёл, но - сути это не меняет, здесь. Можно и ЛИФО, и Среднюю - без разницы)

2. Задача.

Провести параллельно - 4 документа.

(параллельно, означает - одновременно и с верным результатом.
Верный результат, тот - который получается при последовательном проведении)

---
Получишь верный результат?
(своим алгоритмом!)
204. starik-2005 3309 19.06.20 22:13 Сейчас в теме
(203)
Получишь верный результат?
Аргумент слабый, ибо любой может предложить условия задачи, в которой самый лучший алгоритм проиграет самому худшему (например, упорядочить массив из двух аргументов, при том быстрая сортировка параллелится отлично, но на двух элементах она проиграет примитивному сравнению, даже не четырех она будет проигрывать пузырьку, а вот на миллионе - там уже мало что с ней сравнится при параллельной реализации). Для четырех документов смысла в параллельности нет, т.к. это ровно такой случай. А на сотне тысяч случайных документов последовательный алгоритм проиграет параллельному.
209. Salavat 15 20.06.20 08:31 Сейчас в теме
(204)
Продемонстрируй факт!
(чтобы не было блудом - снова)

Где алгоритм (любой!) - даст однозначное (и верное!) решение.

Задачу, повторю - не "Получить решение от 2+2" (как тут многие поняли!),
а именно- Распараллеить проведение документов (принадлежащих - одной последовательности).

Продолжай дерзать!
(пока - безуспешно)
213. mrsmrv 129 20.06.20 09:33 Сейчас в теме
(209)
Распараллеить проведение документов


Вы же писали что параллелить нужно не проведение документов а:

"34. Salavat 13 25.05.20 19:07
(14)
т.к. интерпретатор языка 1С не умеет многопоточность, в привычном понимании этого термина.
1с - никогда и не будет многозадачным.
Пример - попробуйте распараллелить восстановление последовательности документов.

Параллельность можно применить, только - если есть статические данные.
Архивирование, картинки, видео - всё.
А не те, что зависят от других (меняющихся)."

Вы же хотели распараллелить Восстановление последовательности. И Конкретно - партионный учёт.


У вас что, ума не хватило текст модулей воткнуть и проверить работу приведённого мной текста?
217. Salavat 15 20.06.20 10:09 Сейчас в теме
(213) унас - не хватило, да.
я оставил этот удел - "умникам".

Ответь на простой вопрос -
(применительно, к далее, мною уточнённому, для обозначения сути -
Повторюсь (раз ты не можешь никак понять), до сих пор-

Есть 4 Дока (Номенклатура - одна позиция. Не количество и не Цена!) -
Берём "по средней" - чтобы ещё проще было)

Поступление1 2 Шт * 3 руб.
Реализаци1 - 1 шт. * 3 руб.
Поступление2 - 2 шт. * 4 руб.
Реализация - 2 шт * 2,667 руб.

Нука, давай сделай параллельное (и с верной ценой!) проведение, всех 4-рёх документов.

(и да - ненадо тут "хвастаться своим "знанием и умением Систем Уравнений и ,.." прочими терминами кидаться.
Я тебе скажу уточнение, всего-лишь!
Перед проведением - все документы - должны быть распроведены.
(напомнить - что значит - восстановить последовательность?)
А => и Цены Реализации не известны!)

ну и - Где ты ("умник") - цену взял для Реализаций?
Причём - для Обеих Реализаций!

Повторюсь - Распараллелить, это не значит "2+2 сосчитать", а значит -

- Одномоментно Проводить 4 (в данном примере!) и С Верными Ценами!

Да (одно снисхождение сделаю) -
Хорошо - попробуй (хотябы) сделать, чтобы -
Поступления Проведены (Уже!).
А надо, только провести (Параллельно!) оба Расхода.
(Напомню - перед проведением каждой Реализации - должна быть известна Цена Реализации)

Надеюсь всёже - ты не скажешь, что - "проблемы нет - провести параллельно 1*3 и 2*2,667"
(повторю "умник" - 1, 3, 2 и 2,667 - это всего-лишь пример (элементарный простой).
Сделай, как в математике формулы излагают - на X, Y, Z,..

Скрытый текст
216. mrsmrv 129 20.06.20 10:04 Сейчас в теме
(204) Сначала задача показалась мне интересной, и немного была интереса реакция персонажа. Теперь резко и сразу мне стало на него абсолютно пофигу, потому-что он невменяем. Если и будет решение для перепроведения (восстановления последовательности) параллельной. то это будет уже универсальное и платное решение, если и будет. Актуальность этой задачи в современных реалиях сомнительна. Нужно будет какому нибудь заказчику, что-ж сделаем.
218. starik-2005 3309 20.06.20 17:23 Сейчас в теме
(216)
Теперь резко и сразу мне стало на него абсолютно пофигу, потому-что он невменяем.
Так сразу было ясно, что человек страдает деменцией. Я вот на него давно перестал реагировать, а тут - на тебе - куча новых сообщений, 90% содержания которых у данного персонажа - бред. Человек в принципе не понимает, что самая долгая операция при проведении документов - это запись состояния, а запись готовых наборов можно производить параллельно без труда. Для него проведение - это именно запись документа-объекта целиком в режиме проведения, при том он из-за деменции своей не может понять, что восстановление последовательности документов, если какой-то добрый человек записал их все в 23:59:59 (что часто встречается) может и не дать результата, если вдруг окажется, что документы реализации проводятся вперед документов поступления. Ему такой кейс и в голову не придет.
205. mrsmrv 129 20.06.20 04:39 Сейчас в теме
(203) Арёл, ты спрашивал про любые условия задачи, получил пример, когда можно распараллелить. Теперь начал ставить свои. Чтож. Я был готов к этому, подозревал что ты начнёшь что-то подобное. Будет время, допилю, а пока извини лето, стройка, свободного времени нет.
Можно и по одной номенклатуре распараллелить, только документов логично взять побольше. При определённых условиях можно и по два, Например в каждом документе по сотне других товаров, трогать которые не требуется.
208. Salavat 15 20.06.20 08:24 Сейчас в теме
(205) арёл, ну написал бы алгоритм для сложения 2+2 и хвастался бы этим.
Абсолютно - с такимже успехом.

Я тебе (в т.ч.) - обозначил элементарную задачу.

которую - невозможно распараллелить!
Принципиально! (об этом - я также, неоднократно повторял!)

Выж тут (большинство!) - "пытались" обозвать меня идиотом.
Ты вон даже - "мыло какоето, сварить" попытался.

И сноваже (продолжая отрицать, элементарные аксиомы!) - продолжаешь звать меня кретином.

Ну давай, "Перельман" (кавычки - потомучто ты себя считаешь - не тем!) - продолжай дальше, придумывать "очередной" рецепт мыла.
Скрытый текст
212. mrsmrv 129 20.06.20 09:31 Сейчас в теме
215. Salavat 15 20.06.20 09:46 Сейчас в теме
(212), да -
я не опечатался/ошибся.
Очередной - примитивный (это - не укор тебе!, а всего-лишь для того-чтобы было ясно. Максимально ясно - т.к., об обыденной вещи сказал)пример сравнения.
207. mrsmrv 129 20.06.20 05:09 Сейчас в теме
(203) Извините.
Дурачок никогда не признает свою неправоту. Он начнёт юлить, изменять условия задачи, ставить всё новые ограничения, но сказать, "Да я был не прав, ваше решение работает, признаю свою ошибку" Это же так в духе НеНавальновцев, неправда ли Салаватушка, Арёл ты наш.
Так что дружок, думай-тэ, прежде чем написать что-то, а тем более грубить.
210. Salavat 15 20.06.20 08:36 Сейчас в теме
(207), "умник" - я тебе уже неоднократно приводил пример (твоих бессмысленых выбросов) -
(повторяю снова)

Навальный, тоже себя считает праведником.
(Правда при этом - легко не платит налоги - в т.ч..
А финансирование получает - от того, кого и на его родине считают преступником.
Но, у него-то, отмазато "железная есть" - "он борется с коррупцией")

Продолжай и ты, дальше "бороться".
211. Salavat 15 20.06.20 08:45 Сейчас в теме
(207), и да - я своё имя - не скрывал никогда, и не стыдился т.б.

(также впрочем - как и обзывать других, за их имена - никогда не обзывал.
Я (в отличие от тебя, "умника-праведника" знаю прекрасно - это выбор родителей.
(в первую очередь, да. Хотя конечно - есть примеры и выбора самого обладателя, но - у меня - рядовая ситуация с именем)

Это - всего-лишь выбор другого.

И этот выбор - может и нравится, и не нравиться. Тебе.
Это - твоё личное дело. А "пытаться глумиься этим" ну... - ты уже показал достаточно "свою ценность" - продолжай дальше.)

И ещё - ты себе дружков, в своей подворотне, ищи.
(но ты похоже - и здесь начнёшь "надумывать на ровном месте")
У меня - никогда не было дружков и, никогда и не будет!

Ок - на тебе пищу, очередным твоим изливаниям.
198. mrsmrv 129 05.06.20 20:01 Сейчас в теме
(158) Просто берёшь например демобазу УТ, создаёшь обработку в конфигураторе, на форме создаёшь реквизиты: КоличествоПотоков - число целое, ДатаНач, ДатаКон, Номенклатура, ХарактеристикаНоменклатуры, СерияНоменклатуры типы значений логично, что даты и ссылки на справочники. В модуле формы вставляешь первый пример кода.
Создаёшь общий модуль мФоновые, в него копируешь текст из второго примера кода.
Запускаешь, указываешь желаемое число потоков, которые будут обрабатывать Параллельно, сочетания Номенклатуры, Характеристики и Серии, Наслаждаешься процессом, В диспетчере задач, можешь наблюдать за нагрузкой на многоядерный процессор. В консоли администрирования серверов можно посмотреть сеансы, а в журнале регистрации базы. как процессы запускались и как они завершались. Ну и результат по партиям можно попроверять, приходные документы поизменять и посмотреть результат в отчёте "Ведомость по партиям товаров на складах". Если будут вопросы, или ты увидишь, что алгоритм работает неправильно - пиши, посмотрю, я не гордный. Но Твоё поведение в комментариях выглядит идиотским и заставляет сомневаться в твоей умственной полноценности.
199. mrsmrv 129 05.06.20 20:02 Сейчас в теме
(158) И ещё - чистить комменты - трусость!
202. Salavat 15 19.06.20 21:12 Сейчас в теме
(199) Трус - ты.
(хотя согласен - это не в тему Но тыже не испугался пукнуть, в мой адрес)

Я чищу - от синтаксических/грамматических/смысловых/.. ошибок.
Моих ошибок!

С какжика, "смелый" - с каких пор поправление себя - считается трусостью?
206. mrsmrv 129 20.06.20 04:43 Сейчас в теме
(202)
Трус - ты.

Подскажите "любезный", в чём же проявилась моя трусость?

"С какжика, "смелый" - с каких пор поправление себя - считается трусостью?" -
Была удалена целая ветка комментариев вместе с моими. Может это модератора сайта, а может и нет.
214. Salavat 15 20.06.20 09:44 Сейчас в теме
(206), я (всего-лишь!) - показал бессмысленность твою и здесь.
Расшифровываю "умнику" в очередной раз -

научись (хотябы!) подбирать выражения, к месту.
Глядишь (не 100%!, но и не 0%) - и понимание остальных - появится.
139. starik-2005 3309 26.05.20 20:02 Сейчас в теме
(132)
а чО грубим
Видимо с работы турнули из-за того, что не смог распараллелить учет в своей шахте угля )))

ЗЫ: Как-то у нас был контур проверки недействительных паспортов. Работало так: читался файл с недействительными паспортами, каждый новый паспорт дописывался в файл с именем серии, потом это все по 50к, упорядоченное по серии, вставлялось в регистр сведений. Занимало упражнение 8 часов. Распараллелили - стало занимать 4 часа даже при 10-ти потоках, но начиная с 20кк (а там было 120кк) записей каждая третья, а потом и вторая, а потом и девять из десяти параллельных записей валились в дэдлок, т.к. даже при последовательной записи упорядоченных непересекающихся данных в несколько потоков система сильно тормозила на расщеплении страниц.
Т.е. вот независимые данные, которые - пожалуйста - параллель, как хошь безо всяких вксиом, но т.к. таблица одна, и она проиндексирована, все начинает упираться в механику СУБД.
В итоге я предложил вариант, когда просто создается соответствие с ключом серии и значением ЗаписьТекста, в которое в соответствии с серией записывается файл. Никакой многопоточности, 40 минут на все про все.
Но мы потом пошли дальше - создали большую хеш-таблицу, куда засунули все возможные версии - 10 минут в один поток с поиском О(1). И этот алгоритм можно было распараллелить на сколько угодно потоков - эффективность росла пропорционально потокам. На С++ в один поток файл грузился даже на моем ноуте в районе 4-х секунд, а если разархивировать, прочитать и записать в архив хеш-таблицу - 90 секунд примерно, из которых разархивирование занимает 95% времени.

Все зависит от алгоритма. Если воспринимать учет, как жестко связанную последовательность событий, то это ни разу не параллелится, а если как матрицу состояний - легко.
nomad_irk; mrsmrv; +2 – Ответить
142. Salavat 15 26.05.20 20:06 Сейчас в теме
(139)
Все зависит от алгоритма.
любым (выбор за тобой) - реши задачу - https://forum.infostart.ru/forum34/topic241565/?PAGEN_1=2#message2447915
135. mrsmrv 129 26.05.20 19:55 Сейчас в теме
(123)
Есть 2 документа.
Результат второго - зависит от результата первого.
Как нам параллельно провести, оба документа?
тут это и незачем именно параллельно, но незачем если в каждом документе товар лишь один, а если товаров больше одного то и здесь можно распараллелить (но особого смысла нет, если их не сотни и тысячи), способ я уже описал, ищи-Те.
144. Salavat 15 26.05.20 20:09 Сейчас в теме
(135)
ищи-Те
я уже нашёл.

Жду решения твоего (ты же - не согласен с ним) - https://forum.infostart.ru/forum34/topic241565/?PAGEN_1=2#message2447915

Нука, покажи - свою половозрелость.
(тыже - на неё уже начал "ударять")
115. starik-2005 3309 26.05.20 19:02 Сейчас в теме
(112)
То чего нет (в один момент!) - невозможно распараллелить.
Ну вот всем друзьям Перельмана как минимум должно быть известно о числах ряда Фибоначчи. Чем интересны эти числа? Тем, что следующее число равно двум предыдущим. Полагаясь на примитивную логику можно предположить, что алгоритм не параллелится, но это только для тех, кто не в курсе свойств этих чисел.

А вот тут пример использования CUDA для многопоточного расчета этих чисел с кодом.
nomad_irk; mrsmrv; +2 – Ответить
121. Salavat 15 26.05.20 19:18 Сейчас в теме
(115)
А вот тут пример использования CUDA для многопоточного расчета этих чисел с кодом.
а теперь приведи пример - как упорядочить неупорядоченно, принципиально!

Как ты (я - не время имею ввиду! упорядочиваешь количества и суммы (которые, абсолютно разные и не систематизированы никак!)?

Повторяю - не путай комбайн с экскаватором.
Это - разные предметы.
Не надо приплетать "умные словечки" куда ни попадя.

Я тебе элементарный вопрос задал - попробуй ответить на него.
(применив один из ваших методов навального.
179. Painted 49 29.05.20 18:21 Сейчас в теме
(115) Чет кажется ошибку нашел ))
Прикрепленные файлы:
181. starik-2005 3309 29.05.20 18:42 Сейчас в теме
(179)
Чет кажется ошибку нашел
Да, должен быть плюс. Просто автор неудачно скопировал, видимо, поэтому ошибка затесалась.Там умножение дальше идет.
83. Salavat 15 26.05.20 13:46 Сейчас в теме
(79)
на таком разрешении с хорошим видеоадаптером могут показать и 60 таких кадров в секунду.
однако - более 60, в настоящее время - проблематично, до сих пор.
Очень проблематично.
81. Salavat 15 26.05.20 13:37 Сейчас в теме
(78)Да, согласен (я слишком обрезал, своё высказывание), правильнее сказать так:

В 1с, есть задачи, которые невозможно сделать параллельными.
(Из-за их - природы происхождения)
И таких задач (именно в 1с) - немало! Решается.

А так, конечно - ничто не мешает, в 1с вкрутить тотже архиватор (идеально подходит для распараллеливания)
И (на основании этой вкрутки "утверждать", что - без проблем, распараллеливается.

Повторюсь - есть задачи, в которых элементы, находятся в зависимости (временнОй - в т.ч.) от других.
Такие задачи - невозможно распараллелить. Принципиально. (странно, если ктото - сомневается в этом)

(78)
роведение закрытия месяца делать средствами видеоядер
- это другое.
Таже Нвидия например показала именно то, о чём Вы сказали сейчас - https://3dnews.ru/1011801
33. Salavat 15 25.05.20 19:04 Сейчас в теме
(12)
Я говорю про объективность теста Гилева
как Вы можете говорить об объективности, если элементарно сами - необъективно пытаетесь оценить.
Gilev.Vyacheslav; +1 – Ответить
31. Salavat 15 25.05.20 19:02 Сейчас в теме
(9)
На том же Xeon D-1557 1.50GHz
такие "ГГц" - надо было выкинуть - лет 15 назад, железно!
(даже файловым сервером на током фуфле - это издевательство над юзерами)
69. Sedaiko 604 26.05.20 01:48 Сейчас в теме
(31) Про файловые сервера я не говорю. Адепты файловых БД - берите хоть 3.4ГГц и садите всех на терминалку или через http. Пусть в той же ЗУП поработают человек 20-40. В этом случае сколько бы ядер не было, здесь решает все тактовая частота.
Результаты в клиент-серверном варианте на процессоре 1,5 ГГц и нужном количестве ядер, с точки зрения пользователя, выглядит гораздо лучше, не смотря на то что тест Гилева говорит об обратном.
А теперь сравните стоимость серверных процессоров в зависимости от тактовой частоты.
Однако неграмотный админ или 1С-ник будет орентироваться на тест Гилева и рекомендовать процессор с большей тактовой частотой.

такие "ГГц" - надо было выкинуть - лет 15 назад, железно!

Вы не путайте геймерские сборки с промышленными.
71. Salavat 15 26.05.20 05:57 Сейчас в теме
(69)
Про файловые сервера я не говорю. Адепты файловых БД - берите хоть 3.4ГГц
Вы путаете - разные вещи. Абсолютно.
Слова разные слышали, а смысл их - не поняли.
Раз не поняли, разъясняю (кратко) -
- У файловой - весь код выполняется на клиенте.
- У серверной - на сервере.
Соответственно и частота нужна - или клиента, или сервера.
(кстати не забывайте! На клиенте - тоже код выполняется. И у серверной базы!)
(69)
на процессоре 1,5 ГГц
это не процессор, это мусор (даже для смартфонов - уже вплотную к 3 ГГц, подошли) - уже, лет 15, минимум! Я реально не знаю - что Вы там можете получить (с 1с - в частности).
(мы (15 пользователей - максимум) на 2,5 ГГц - не можем ЗУП 3.1 пользовать - ждём ответа..........)
(69)
сравните стоимость серверных процессоров в зависимости от тактовой частоты.
цена зависит от частоты - это принципиальная характеристика влияющая на цену, именно процессоров.
И не только серверных - всех!
(только не надо тут утверждать, что - i9-9900K стоит дешевле любого (современного!) Xeona
(69)
Вы не путайте геймерские сборки с промышленными
В отличие от Вас - я смотрю не только на названия, а на суть.
У геймерской и промышленной сборки, задача одна - достаточная производительность.
(да - в разных разрезах, но - решение для получения результата одна! Частота ЦПУ - должна быть выше.
Только не надо тут умными словечками бросаться про - ГПУ, SSD, разрешение (и - его частоту!) монитора, настройку системы))
Абсолютно всегда и везде - на любую сборку поставьте ЦПУ, с большей частотой - и результат (производительность!) будет выше.
(И да - не говорите тут про тормоза в дисковой, ОЗУ, сетевой,... системах.
Про это - Вы "думайте" на своих 1,5 ГГц. На здоровье)

Скрытый текст
Gilev.Vyacheslav; +1 – Ответить
10. acanta 25.05.20 13:03 Сейчас в теме
Если ПО (или оперционка) лицезируется по количеству ядер процессора и при этом нормально тянет меньшее количество прикладных программ, чем доступные ядра, то мне не понятно сколько ядер нужно для нормальной работы самой операционки и почему эти ядра включены в лицензионное соглашение.
35. Salavat 15 25.05.20 19:10 Сейчас в теме
(10)ядер нужно столько, чтобы хватало на работу пользователей.
Всех.
Если что - и ядра/потоки, это тоже - не идеал.
Это просто - самый простой/эффективный способ увеличения параллельности.
Всех процессов. (не только 1с их использует!)
Даже если ядро одно (утрирую, но - когдато было именно так!), то - одно ядро, будет поочереди исполнять все потоки
18. starik-2005 3309 25.05.20 14:48 Сейчас в теме
i7-4500U - это древний проц (2013-го года). У меня на работе ноут на I7-5500U - более новом, максимум смог из него выжать 49 попугаев на файловой на обычном винте, в Гилеве видел максимально 54.35. Сейчас посмотрел I7-4500U - максимум был в 2014-м году 58.82 на файловой, при этом частота 1,8 против 2,4 и одинаковая в бусте, но тестов очень мало - менее 10 на каждый процессор. При этом тесты R5-3500U тоже есть, и они хуже, чем у Intel - до 50-ти не дотягивают и все от текущего года. Но частота в бусте у АМД 3,7 против 3.0 у Интела, поэтому меня терзают смустные сомнения, ибо разброс значений у Интела от 30+ до 50+, а у АМД 37-45, что, на мой взгляд, говорит о том, что высокую производительности пользователи АМД не включили в своей винде, т.к. даже мой ноут домашний на 8250U набирает в Гилеве 80!

Да, и этот АМД - это ZEN+, а не ZEN2 - уже не самая новая архитектура.
26. Salavat 15 25.05.20 18:43 Сейчас в теме
Intel® Core™ i9-9900K
не удивительно.
Одно НО (немаловажное!) - это несерверный ЦПУ
(ОЗУ, линий PCIe,... - слишком мало у него. Масштабируемости - 0 Для серверов)

И (добавка) - вышел (только-только - ещё в магазинах нет) - i9-10900K - он ещё быстрее!
(без сарказма, я здесь)

Такие ЦПУ- годятся для неслишком обеспокоенных резервированием.
(повторюсь - согласен - это самые быстрые! что для 1с - первоочередное!)

Для серверов нужны:

Xeon® Gold 6256
Xeon® Gold 6244
Xeon® Gold 6246.

Но,... - готовьте бабки господа!
Gilev.Vyacheslav; Sedaiko; +2 – Ответить
27. starik-2005 3309 25.05.20 18:49 Сейчас в теме
(26)
Для серверов нужны:

Xeon® Gold 6256
Xeon® Gold 6244
Xeon® Gold 6246.
Тогда уж 6250 - у него сток 3,9ГГц, а буст - 4.5ГГц - вот он даст просраться всем ))) А еще и кэша у него больше.
29. Salavat 15 25.05.20 18:57 Сейчас в теме
(27) Сами смотрите/выбирайте - https://ark.intel.com/content/www/ru/ru/ark/compare.html?productIds=198652,198655,192442,193969
Насчёт - НеБуст (Буст - одинаков) у него выше, это не особо значимая величина.

Любой ЦПУ - легко свою частоту может (в зависимости от нагрузки) и меньше делать и больше. (Базы).
И 100 МГц - это не та величина, на которую я бы променял - 4 дополнительных ядра.
(8 потоков - ровно, в 1,5 раза больше Вашего 6250)
66. sklskl 7 26.05.20 00:00 Сейчас в теме
А кто бы какой проц взял если выбирать из: e5 2637 v3, e5 2643 v3, e5 2667 v3, E5-1650V3?
67. starik-2005 3309 26.05.20 01:06 Сейчас в теме
(66)
e5 2637 v3, e5 2643 v3, e5 2667 v3, E5-1650V3?


E5-1650V3 - 1 сокет, но при этом максимальная частота в стоке и бусте. Память DDR4 2133, но 4 канала, что уже хорошо.

Остальные процессоры 2-х сокетные и различаются только ядрами и частотой, так что все зависит от количества пользователей.

E5-2637V3 - самый быстрый из них, но у него всего 4 ядра и 8 потоков. В полном комплекте даст работать 80-150 пользователям.
E5-2643V3 - чуть медленнее в стоке, но уже 6 ядер 12 потоков, должен догнать по производительность хорошо настроенный Ryzen 2600. 100-200 пользователей.
E5-2667V3 - ещё чутка медленнее в стоке и бусте, но не сильно, при том 8 ядер и 16 потоков. В пределе даст работать 200-300 пользователям.

Если пользователей меньше ста, то я бы взял первый проц.
70. ansh15 26.05.20 02:35 Сейчас в теме
(66) Сейчас, при уже выпускающихся и продающихся E-2278G, W-2245 и каких-нибудь Gold 6244?
Никакой. Все это уже устарело. Надо смотреть вперед.
80. sklskl 7 26.05.20 13:03 Сейчас в теме
(70) Вы как бы не заметили, что сокет то 2011? Не нужно сравнивать красное с зеленым, здесь вопрос риторический на самом деле, но есть рабочее железо на котором стоит совсем убогий камень. Нужно его сменить, поэтому я просто поинтересовался. Почему не v4? Да потому что разницы совсем мало между одним и тем же камне v3 и v4, а стоимость глобально различается.
68. starik-2005 3309 26.05.20 01:07 Сейчас в теме
Кстати, попалась на глаза статейка, почему винда в однопоточном тесте Гилева показывает результаты хуже, чем Linux.
https://www.overclockers.ua/cpu/amd-zen-2-custom-power-plan/

Просто для пояснения: планировщик Windows не поддерживает SMT, только алгоритм парковки ядра осведомлен о SMT. Почему это важно? Потому что в режиме высокой производительности система основной парковки отключена. Каждое отдельное ядро отключено, и поэтому планировщик процессов весело мигрирует потоки через каждое физическое и виртуальное ядро в системе (если все ядра не заняты, например, многопоточной рабочей нагрузкой). Это означает, что даже однопоточная рабочая нагрузка заканчивается перемещением между CCX или даже CCD, и ей приходится перетаскивать все данные, с которыми она работает, за ним, примерно в среднем каждые 5–40 миллисекунд в зависимости от используемого SMU и сборки ОС. В игре умножьте это на количество эффективных потоков, которые игра запускает и в результате вы получите фризы или низкий 1% фреймрейт. Не только это, но и потоки разделяют физическое ядро гораздо чаще. Linux справляется с этим гораздо лучше: он активно предпочитает хранить потоки на одном и том же ядре до тех пор, пока на этом ядре нет конфликтов планирования. Таким образом, однопоточная рабочая нагрузка в Linux обычно будет оставаться на одном и том же ядре в течение нескольких секунд, если не дольше. Это не только позволяет избежать накладных расходов при миграции потока, но также позволяет избежать пропусков кэша и трафика между CCX, который может возникнуть в результате такой миграции. Такое поведение не является специфичным для Ryzen, но было стандартным на всех компьютерах SMP/SMT/CMT, работающих под управлением Linux, в течение нескольких лет.

Неделю назад Microsoft выпустила обновление для Windows 10 (1909), которое дает планировщику ОС возможность определять приоритеты потоков. Я протестировал предварительную сборку этой версии и не заметил значительных улучшений. Довольно часто планировщик использовал более высокий приоритет для фоновых процессов. Я думаю, вы представляете, что происходит, если Windows отдает приоритет такому процессу, а не вашей текущей запущенной игре.

Мой подход к устранению этого недостатка в планировщике Windows заключается в использовании настраиваемого профиля электропитания, который обеспечивает лучшее управление планировщиком по распределению нагрузок между ядрами. Сперва будут вовлечены, по возможности, лучшие ядра, что приведет более высокому и плавному fps. Если лучшие ядра будут заняты — нагрузка распределится по ядрам с меньшим рангом.
74. Salavat 15 26.05.20 10:05 Сейчас в теме
(68)
статейка, почему винда в однопоточном тесте Гилева показывает результаты хуже, чем Linux.
странная статейка.
С такимже успехом можно сравнить комбайн и экскаватор.
73. Albert_2008 26.05.20 09:54 Сейчас в теме
Спасибо. Хорошая статья для подумать.
76. Gilev.Vyacheslav 1924 26.05.20 11:12 Сейчас в теме
уже отвечал на хабре и по поводу процессоров много раз, и по поводу нашего теста
но еще раз видимо надо:

1. у процессоров есть и плюсы и минусы, и советовать конкретный процессор универсально для всех, не зная индивидуальные особенности себе дороже
линейка процессоров i7-X900K в основном всегда была флагманом домашних компьютеров, поэтому не надо быть "настрадамусом" чтобы ожидать от нее наилучших результатов, но когда нужно удаленное включение сервера или нужен объемом оперативной памяти больше 128 гб, а для сотен пользователей, которые проц может выдержать нужно много оперативки, то мы налетаем на искусственно введенные ограничения интелом
эти ограничения сняты у точного такого же процессора но серии W, но он всё еще односокетный

2. AMD из тех что мы тестировали медленнее голдов, может в будущем что то и поменяется, но пока на серверном рынке intel топовыми моделями работает лучше относительно продукции 1С, 6 канальные 2999 планки на проц даже побеждают 8канальные амд, хотя по логике должно быть наоборот, так как большая канальность дает преимущество в скорости

3. Что некоторые модели AMD, что рекомендуемые вами E5-2667 v3 часто не реализуют в полную мощь скорость работы дисков intel optane p4800х, лично для меня это серьезный недостаток для сервера

4. для меня загадка зачем люди тестируют файловый вариант, ибо не понимают смысл теста изначально, для одиночной работы пользователя 1С любого современного ноутбука хватает без всяких тестов

5. мой тест не является "покрывающим" всё и вся, но глубже информационную систему 1С нет смысла тестировать чем либо, если мой тест дает скажем 8 баллов, потому что в этом случае сколько бы параллельных пользователей СНТ (КИП) или что еще не выдали, всё равно это "унылые" пользователи, более подробно назначение теста описано на основной странице теста

6. также у нас есть курсы для администраторов, на которых мы подробно рассказываем какой процессор и другие компоненты подбирать, как пользоваться тестом и так далее
основную ценность сейчас тест представляет для сравнения скорости работы физического сервера и виртуального сервера (точнее 1С в нем) на этом же физическом сервере, так как очень часто люди "душат" изначально мощный сервер даже в 5 раз от возможного потенциала и тяжело другим способом также быстро и бесплатно это оценить

7. - фанаты AMD будут покупать AMD вопреки всему
- консервативный бизнес где большое значение имеет корпоративный стандарт будет смотреть именно на корпоративный стандарт
- провайдеры вообще в большинстве своем любят покупать максимально многоядерные сервера, резать туда хренову тучу виртуалок и подключать всё на какое-нибудь дорого внешнее хранилище, которое будет работать кое-как для конкретного клиента, потому что законы рынка диктуют при минимуме усилий максимум прибыли и приоритеты простоты администрирования будут побеждать клиентоориентированность (косвенно это видно в https://infostart.ru/public/1239857/ например)
- те у кого мало денег, будут покупать что по-дешевле и только когда жаренный петух клюнет, будут пытаться разбираться а что не так они сделали, но не раньше ( у нас много клиентов с процессором 2620 v0-v4)
mirco; mrsmrv; +2 – Ответить
77. starik-2005 3309 26.05.20 11:58 Сейчас в теме
(76)
5. мой тест не является "покрывающим" всё и вся, но глубже информационную систему 1С нет смысла тестировать чем либо, если мой тест дает скажем 8 баллов, потому что в этом случае сколько бы параллельных пользователей СНТ (КИП) или что еще не выдали, всё равно это "унылые" пользователи, более подробно назначение теста описано на основной странице теста
И это действительно так, т.к. даже 144-ядерные сборки в очень серьезных конторах, на которых развернут какой-нить XEN, при этом хост-система просто не поддерживает нормальное управление производительностью и бустом этого процессора из-за старого ядра, дают даже пусть 20 попугаев, на которых работа даже вроде бы жалких 10-ти пользователей превращается в постоянное ожидание отклика 1С-а. И ведь убедить отказаться от виртуалки или обновить ядро на хост-системе, включив буст и высокую производительность зачастую весьма непросто.

основную ценность сейчас тест представляет для сравнения скорости работы физического сервера и виртуального сервера (точнее 1С в нем) на этом же физическом сервере, так как очень часто люди "душат" изначально мощный сервер даже в 5 раз от возможного потенциала и тяжело другим способом также быстро и бесплатно это оценить
Вполне соглашусь. Вообще, я, например, всегда при исследовании проблем с производительностью пользуюсь тестом Гилева и несколькими своими тестами - конкурентная запись множества записей регистра накопления. И если в тесте Гилева меньше 20 попугаев (а часто бывает и меньше 10, например на старых блейдах в СБ), то это первая причина задуматься. Потом уже результаты записи регистра обычно подтверждают, что система работает так себе.

7. - фанаты AMD будут покупать AMD вопреки всему
Я вот в выводах неслучайно сделал победителем I5-9600K, но я четко определил, где он должен использоваться - на компьютере разработчика, на котором часто бывает несколько баз данных в фвйловом хранилище. Зачем? А что делает разработчик? Он нередко производит обновление конфигурации, сборку, загрузку выгрузку - операции, которые интенсивно читают и пишут таблицу Config и ConfigSave, которые помимо прочего содержат запакованный контент. И со стороны моего опыта AMD Ryzen 5 3600 на платформе Linux, показывающий в тесте 125 попугаев (файловая база) справляется со сравнением и объединением быстрее, чем I9-9900K - у нас коллеги прикупили себе разных железяк и сделали свои центры удаленной разработки на них, что просто неимоверно ускорило разработку после 2ГГц XEON в нашем рабочем центре. В итоге я предложил купить 3600-й, который на серверной винде из-за плохой схемы управления производительностью, заставляющей потоки постоянно переезжать с ядра на ядро с целью недлопустить локального перегрева (об этом в ссылке есть, которую я привел выше - там человек с АМД постоянно связь держит и пишет, что и как в этих процессорах), что приводит к миграции данных и нехватке кеша, который разделен между ядрами, в итоге тест Гилева показал 74-80 при таком раскладе. После мы переехали на Ubuntu Server, на котором тест показал 125 попугаев, т.к. процесс перестал ездить с ядра на ядро. Разработчики реально увидели прирост скорости, хотя к Linux'у пришлось какое-то время привыкать. Но т.к. в основном система использовалась для обновления, подразумевающего сравнение и объединение, то комментарий одного разработчика был такой: "раньше я успевал сходить в столовую, а теперь я отвернуться не успеваю - он уже все сделал".

Понятно, что на 6-ядерном не серверном процессоре не стоит разворачивать что-то в серьезном Enterprise, но какой-нибудь магазин автозапчастей с каталогом на миллион разных штучек-дрючек вполне смысл имеет - и у меня есть такой пример, когда купил людям AMD Ryzen 2600X - и он отлично уже больше года работает в клиент-серверной архитектуре на Linux и PostgreSQL, 40-45 попугаев в тесте позволяют отлично жить на УТ 11 совершенно без тормозов 10-ти пользователям (в принципе можно и большему количеству, т.к. ни во что не упирается). Uptime системы - более полугода, за все время не было ни одного сбоя, но я вечером скриптом перегружаю сервер приложений и СУБД и делаю бэкапы.

ЗЫ: кстати, я как-то в теме вроде бы про переход на Java, постил ассемблерный код, который на моем домашнем AMD Ryzen 5 1600 работает быстрее, чем на I9-9900K. Код просто считает 139-й член последовательности Фибоначчи очень много раз (128-бит используется: add, adc, xchg, xchg). Такой код с операциями регистр-регистр ровно в два раза быстрее работает на AMD, чем на топовом Intel. Так что от кода очень многое зависит, а компиляция большинства игр, в которых проигрывает АМД, производится интеловским оптимизирующим компилятором, который в принципе не должен оставлять конкурентам шанса. Но если произвести оптимизацию игры под АМД, то Интел нервно курит в углу и сливает даже куда менее производительным моделям АМД.
180. starik-2005 3309 29.05.20 18:34 Сейчас в теме
(76)
но когда нужно удаленное включение сервера или нужен объемом оперативной памяти больше 128 гб, а для сотен пользователей, которые проц может выдержать нужно много оперативки, то мы налетаем на искусственно введенные ограничения интелом
эти ограничения сняты у точного такого же процессора но серии W, но он всё еще односокетный
Кстати, зашел на сайт Интела - там у быстрых процессоров с буквой W ограничение объема памяти те самые 128Гиб.

(76)
6 канальные 2999 планки на проц даже побеждают 8канальные амд, хотя по логике должно быть наоборот, так как большая канальность дает преимущество в скорости
Тут от многого зависит. Ну понятно, что 8-канальный режим - это 8 планок одинаковой памяти, но если частота процессора и частота памяти неодинакова, то процессор дополнительно ждать ответ от контроллера памяти. Тут, например, Epyc 7601 выигрывает у 2xXeon Gold 6138 во всех тестах ramspeed. У меня, к сожалению, нет под рукой Epyc, поэтому не могу тут что-то утверждать.


(76)
intel optane p4800х
Возможно, но не совсем ясно, почему - эти диски очень быстрые в плане доступа, но скорость обмена с ними невелика, с другой стороны для таких программ, как 1С, скорость доступа является более важной, чем скорость чтения/записи потока, да и для СУБД это важный момент. В файловой по сети вообще чем выше значение пинга, тем дольше открывается база, объект - что угодно. Видел при пинге в 75мс 1С открывалась 10 минут, а журнал документов в ней открывался до 40 минут, при том при пинге в 5мс все было ровно в 15 раз быстрее. Публикация на веб-сервере вопрос решила - при любом пинге полсекунды на открытие журнала. Но это файловая база, конечно - так, вспомнилось.

(76)
для меня загадка зачем люди тестируют файловый вариант
Люди меряются попугаями - живи с этим ))) Но вообще, есть определенная корреляция попугаев в файловой и серверной. И для меня, например, если система в файловой набирает меньше 50, то смысл на нее ставить клиент-сервер? Будет в итоге не более 25, а этой производительности для работы одного пользователя на мой взгляд недостаточно.

Как-то в одной инвестиционной компании проводили нагрузочный тест. Я сначала просто запустил тест Гилева на сервере - 9 попугаев. Объяснил специалисту, что нужно буст включить на хосте, high performance, таблицы временные разделить и вынести на отдельный носитель, ... В итоге у них там скорость поднялась до 23-х попугаев и пользователи реально заметили ускорение, т.к. 1С банасльно быстрее стала отдавать отрендеренные формы - их же нужно собрать, сериализовать, передать. Дальше - да, клиент, но он должен дождаться этих долбаных данных -форма-то на сервере инициализируется, а сервер еле дышит...

(76)
всё равно это "унылые" пользователи
Ровно так и есть, и опыт это постоянно подтверждает. 1000 пользователей на 144-ядерном очень низкочастотном процессоре просто будут упираться в ожидание форм, высокую нагрузку, которая весь буст сведет к стоку, т.к. охлаждение просто не будет справляться - об охлаждении сервера (а не только серверной, в которой висит кондей) мало кто думает, т.к. админы часто ничего не понимают в разгоне и играют в простые игрушки, которые неплохо работают и на старевшем на core2duo.

(76)
фанаты AMD будут покупать AMD вопреки всему
Главное - не становиться фанатом чего бы то ни было. Интел за 10 лет ни на йоту не поднял IPC обычных вычислений - все нововведения делались в AVX и плавающей арифметике 128-256 бит - в них от поколения к поколению прогресс ощущался, но 1С вообще не использует эти операции в своем коде - дай боже 80-битную арифметику на FPU считает, если не на десятичных дополнениях (не удивлюсь, т.к. у них как раз нет ограничений на количество разрядов - это решается и обычной целочисленной математикой). А вот АМД достаточно сильно продвинулась в этом плане, и IPC целочисленной арифметики и обычных операций очень так нехило взлетел - в 4 раза почти с времен athlonXP. Сейчас все процессоры суперскаларны, т.е. могут выполнять несколько операций за процессорный такт, но это приводит к таким штукам, как Spectre и Meltdown и иже с ними, хитро использующих предсказатель ветвлений и не всегда подчищающих за собой. Интел вообще до последнего времени гнался за частотой, поэтому фундаментальные проблемы с очисткой спекулятивного выполнения стали для него не лучшей рекламой, особенно для защищенных контуров энтерпрайза. АМД тут сделала ставку на общую оптимизацию архитектуры и микрокода, поэтому была куда менее уязвима к спекулятивному выполнению кода, т.к. подчищала за собой - это, конечно, сказывалось и на производительности. Но реально у меня есть код, который на I9-9900K выполняется медленнее, чем на Ryzen 5 1600 (ядро ZEN1). Суть кода в последовательном сложении двух 64-битных регистров с двумя другими регистрами, а потом обмен данными между ними: add, adc, xchg, xchg - расчет числа Фибоначчи. И так 10кк раз считается 139-й член последовательности. На Интеле 9900K запустили 10 раз - 0,966 примерно секунды, на Ryzen 5 1600 - 0,457 секунды. Для меня это четко показало, что IPC - это то, что совместно с частотой влияет на производительность. Поэтому у меня рабочий AMD Ryzen 3600 на куда меньшей частоте, чем у I9-9900K показывает в тесте файловой 120-125 попугаев, а на Интеле - 90-100. Правда на Интеле в 10-й винде, а на AMD на Ubuntu Server, так что есть мысль, что это из-за того, что винда постоянно поток по ядрам переносит, а Linux держит поток на одном ядре - даже на лучшем ядре, бустя именно его и без необходимости таскать кэш между ядрами.
182. ansh15 29.05.20 19:10 Сейчас в теме
(180)
у быстрых процессоров с буквой W ограничение объема памяти те самые 128Гиб.

1 TB, вроде
Gilev.Vyacheslav; +1 – Ответить
183. starik-2005 3309 29.05.20 19:21 Сейчас в теме
(182) я на первые несколько обратил внимание только, у которых буст за 5ГГц (ну как на I9-10900K)

https://ark.intel.com/content/www/us/en/ark/products/201909/intel-xeon-w-10885m-processor-16m-cache-up-to-5-30-ghz.html

У того проца, который Вы привели, есть вот это: Intel® Optane™ Memory Supported ‡ - No
184. ansh15 30.05.20 00:52 Сейчас в теме
(183) Видимо, производитель считает, что для процессора для высокопроизводительной рабочей станции отсутствие поддержки Intel Optane не является таким уж существенным недостатком.
185. starik-2005 3309 30.05.20 01:14 Сейчас в теме
(184)
для высокопроизводительной рабочей станции отсутствие поддержки Intel Optane не является таким уж существенным недостатком.
Ну как раз процессор с 1S имеет эту технологию, а вот 4S - нет. С другой стороны, латентность обычной памяти куда меньше (на два порядка), чем у Optane.
190. Gilev.Vyacheslav 1924 30.05.20 21:30 Сейчас в теме
(183) не надо здесь показывать процы серии M
почему - думаю сможете осилить самостоятельно
186. Gilev.Vyacheslav 1924 30.05.20 21:20 Сейчас в теме
(180)
Кстати, зашел на сайт Интела - там у быстрых процессоров с буквой W ограничение объема памяти те самые 128Гиб.

вы скриншоты что ли давайте, а то выглядит утверждение откровенно легкомысленно мягко говоря

1 TB ограничение, не вводите людей в заблуждение
Прикрепленные файлы:
191. starik-2005 3309 31.05.20 01:53 Сейчас в теме
(186) Вы бы писать научились, а то очень сложно читать Ваши малограмотные с точки зрения русского языка комментарии. У Вас и на сайте все с этим, к сожалению, плохо.

1. Зашел на сайт Интела - нашел много процессоров с W, у которых есть ограничение на 128Гиб. Да, оказалось, что не все такие, но Вы об этом ничего не сказали, просто заметив, что процессоры Xeon W не имеют этих ограничений. Оказалось, что процессоры с М в конце ограничены, без М - тоже:
https://ark.intel.com/content/www/us/en/ark/products/199336/intel-xeon-w-1290p-processor-20m-cache-3-70-ghz.html
https://ark.intel.com/content/www/us/en/ark/products/199337/intel-xeon-w-1290-processor-20m-cache-3-20-ghz.html

Так надо было сказать четко, без вот этого "Я - Дартанья, а вы все - ...". Ведь можно, да? Достаточно было сказать, что процессоры с первой циферкой, которая больше единицы, поддерживают 1Тб памяти, но они тогда уже не являются аналогом I9-9900K, т.к. ориентированы на несколько сокетов и имеют контроллер памяти с 4-мя (для W-2ххх) и 6-ю (для W-3xxx) каналами памяти. Ну детский сад просто.

2. По поводу Epyc, то я этот тест привел на Ваши слова о скорости памяти. Скорость памяти (заметьте, о другом - и об 1С, в частности, я не писал) на Epyc в данном конкретном тесте выше - Вам бы в школу опять пойти на уроки логики и русского, а то ни тем, ни другим не владеете. В итоге и понять не можете что Вам пишут, и ответить грамотно не можете. Опять детский сад.

3. По поводу коллективной записи, то на это влияет латентность. Чем быстрее осуществляется доступ, тем больше потоков устройство может обслужить. И там я тоже говорю, что этот контроллер, будучи на порядок быстрее "обычных" nvme - отличное решение, когда нужна множественная запись в СУБД. Для чтения это уже не особо помогает, если ОЗУ достаточно, а ОЗУ на два порядка быстрее в части латентности, чем Optane, и на порядок быстрее в части bandwith.

4. По поводу некорректного сравнения, то да - любая программа на Linux работает быстрее. 1С - не исключение.
192. Gilev.Vyacheslav 1924 31.05.20 10:01 Сейчас в теме
(191)
Да, оказалось, что не все такие, но Вы об этом ничего не сказали

не важно как на самом деле, всё равно виноват я в любом случае, ну прям как обиженная баба диалог начинаете
ну хорошо, давайте в таком стиле, да я виноват в том что оказался прав )))

2. По поводу Epyc, то я этот тест привел на Ваши слова о скорости памяти. Скорость памяти (заметьте, о другом - и об 1С, в частности, я не писал) на Epyc в данном конкретном тесте выше - Вам бы в школу опять пойти на уроки логики и русского, а то ни тем, ни другим не владеете. В итоге и понять не можете что Вам пишут, и ответить грамотно не можете. Опять детский сад.

спросите постороннего человека, он понял что то из вашего потока сознания кроме того что я снова не угодил?

отличное решение, когда нужна множественная запись в СУБД
вот на этом и сфокусируйтесь, для 1С это наиболее значимый фактор а не чтение, которое как правило всегда не хуже записи
т.е. вместо слова "когда" в предложении используйте слово "1С"

любая программа на Linux работает быстрее

когда ко мне будут приходить клиенты с тормозящими программами на линукс, им всем буду показывать ваш пост, бугага ;)
194. starik-2005 3309 01.06.20 16:47 Сейчас в теме
(192)
когда ко мне будут приходить клиенты с тормозящими программами на линукс, им всем буду показывать ваш пост, бугага ;)
Зачем? Вы просто поставьте на их комп Винду, установите все те же программы и попробуйте. Денег за это возьмите. Ну а в конце уже мой пост покажите.

(192)
вот на этом и сфокусируйтесь, для 1С это наиболее значимый фактор а не чтение
Все зависит от характера использования системы. Что пишем, зачем? Ну вырастет скорость записи в пять раз, например, ну в пять раз больше элементов очереди система сможет обрабатывать, но отчеты от этого быстрее формироваться не будут, формы открываться тоже быстрее не будут. Чтение из СУБД - это 95% операций. Увеличив 5% операций в пять раз вы выигрываете 25% всего, что не так и много. При этом отчеты будут формироваться одинаково.

(192)
спросите постороннего человека, он понял что то из вашего потока сознания кроме того что я снова не угодил?
Ну если есть тут какой-нить посторонний человек - давайте попросим его прокомментировать. Я только за.

(192)
ну прям как обиженная баба диалог начинаете
Ну вот из-за этого пришлось с конца комментировать, т.к. народ запоминает то, что в конце. Нехорошо себя ведете. С русским все-таки разберитесь - сразу станете понятнее.

Я ж не против того, что Вы пишите. Я спорю не с тем, что Epyc медленнее, например, в каких-то сценариях, но в каких-то может оказаться и быстрее. Схема управления питанием АМД отличается от того, что Вы привыкли видеть в Intel - там порядка пяти разных схем, в то время как у Intel две всего, поэтому в Linux для клиент-серверной на АМД 1С даже необязательно ставить performance - все отлично живет и на onDemand, которая там по-умолчанию.
187. Gilev.Vyacheslav 1924 30.05.20 21:22 Сейчас в теме
(180)
Тут, например, Epyc 7601 выигрывает у 2xXeon Gold 6138 во всех тестах ramspeed. У меня, к сожалению, нет под рукой Epyc, поэтому не могу тут что-то утверждать.

во-первых это не 1С тест
мы же тут обсуждаем не скорость игрушек или винрара
сначала сами протестируйте
я сначала в продуктиве посмотрел сам, а не чьи то обзоры почитал
188. Gilev.Vyacheslav 1924 30.05.20 21:25 Сейчас в теме
(180)
Возможно, но не совсем ясно, почему - эти диски очень быстрые в плане доступа, но скорость обмена с ними невелика, с другой стороны для таких программ, как 1С, скорость доступа является более важной, чем скорость чтения/записи потока, да и для СУБД это важный момент.

тут вопрос не в миллисекундах, а в способности коллективной записи, которая 1. не проседает при длительной записи, 2. имеет существенно больший ресурс перезаписи 3. до 200-300 по цену качеству лучше большинства полок
189. Gilev.Vyacheslav 1924 30.05.20 21:28 Сейчас в теме
(180)
Правда на Интеле в 10-й винде, а на AMD на Ubuntu Server

ну так это не корректное сравнение
258. huxuxuya 409 15.07.22 11:04 Сейчас в теме
(180)
таблицы временные разделить и вынести на отдельный носитель, .


А что такое "разделить временные таблицы"?

И как их вынести на отдельный носитель, это про перенос tempdb на отдельный диск что ли?
259. starik-2005 3309 15.07.22 19:42 Сейчас в теме
(258)
А что такое "разделить временные таблицы"?
Несколько файлов с временными таблицами. И да, на отдельный диск. И на отдельные диски лог и базу.
huxuxuya; +1 – Ответить
113. mrsmrv 129 26.05.20 18:56 Сейчас в теме
Так, насчёт серверов "современных". У Интел нет PCI-e 4 у АМД есть, У Интел нет 8 канальной памяти - у АМД есть. У Интел виртуализация криво работает, у АМД лучше. У Интел нет полного сплошного шифрования данных в памяти, у АМД свой внутренний ARM процессор этим занимается, без ухудшения производительности!. nVidia не зря для своей топовой машины для обработки данных выбрала именно сервера Epyc. Ну и Майкрософт и Амазон и прочая прочая. И не надо про частоты процессора. У Интел Серверные процессоры имеют низкие частоты. И здесь выигрыша не наблюдается. Надёжность? ну это вы клиентам HP например расскажите со счётчиком внутри SSD в СХД. Да и у Интела - Spectre, Meltdown и прочие проблемы... Они просто в угоду скорости много где "оптимизировали" в ущерб безопасности.
163. Gilev.Vyacheslav 1924 27.05.20 10:57 Сейчас в теме
(113) единственное преимущества АМД это цена, всё остальное что тут перечисленно чушь в практическом смысле
262. starik-2005 3309 08.10.25 00:12 Сейчас в теме
(163) Прошло 5 лет...
169. triviumfan 103 28.05.20 09:11 Сейчас в теме
Если весь анализ крутится вокруг теста Гилёва, то можно было обратиться к его базе и отфильтровать по количеству попугаев.
170. egorovntn 235 28.05.20 11:14 Сейчас в теме
На сколько важна частота процессора для баз SQL?
171. nomad_irk 84 28.05.20 11:20 Сейчас в теме
(170) Если вы имеете ввиду для СУБД, то не так важна как для 1С.

Если вы имеете ввиду для сервера 1С в условиях клиент-серверной версии БД - так же как и в условиях файловой версии.
172. starik-2005 3309 28.05.20 14:51 Сейчас в теме
(170) чем выше частота - тем больше тактов процессора в секунду генерируется, каждый такт - это определенное количество команд типа регистр-регистр или, если идет обращение к памяти - ожидание доступности ячейки, если она не попала в кеш.

Поэтому в любом случае процессоры на одном ядре, но с разной частотой, будут работать по-разному, и очевидно, что процессоры с более высокой частотой будут работать быстрее.

Также есть такое понятие, как IPC - количество инструкций за такт. Современные процессоры предварительно загружают команды в процессорный конвейер, в котором команды могут быть сгруппированы и выполнены, причем даже не всегда в той последовательности. в которой они там оказались - процессор сам пытается понять код и выполнить его оптимально, примерно как планировщик запросов в SQL. Именно из-за этого у меня есть пример кода, который на Ryzen 5 1600 работает быстрее, чем на I9-9900K на совершенно разных частотах, Примера кода, ведущего себя обратным образом, конечно же куда больше. Поэтому есть такое понятие, как оптимизация бинарного кода под архитектуру - этим занимается компилятор, который может программу, выполняющуюся при отсутствии оптимизации (компиляция без ключа оптимизации), например, пять минут, оптимизировать для выполнения за минуту - примеров таких программ у меня множество, даже тот же расчет числа Фибоначчи без оптимизации работает 0,72 секунды, с оптимизацией - 0,14 секунды. Оптимизация под клонкретную платформу производит выравнивание блоков выполнения программы кратно определенным адресам, чтобы на конкретной платформе процессор мог извлечь данные оптимально для себя. Также есть такая операция, как прогрев кэша процессора, которая позволяет на АМД, например, увеличить доступ к блокам памяти на порядок, поэтому оптимизированные под эту платформу игры на каком-нибудь Ryzen 5 3600 начинают работать быстрее, чем на I9-9900K.

Т.к. оптимизировать с этой точки зрения СУБД Вы вполне можете, собрав бинарники из исходников и указав ключи компиляции "-O3 -march=ваша платформа -tune=ваша платформа -flto", то оптимизировать 1С, увы, возможности нет - ее исходники Вам, полагаю, недоступны. А для 1С частота - это очень важный фактор, т.к. в том же тесте среднюю границу в 80 баллов преодолели только процессоры с суффиксом "К", у которых множитель разблокирован и они работают на более высоких частотах. При этом, заметьте, от поколения процессора (т.е. самой архитектуры ядра) скорость зависит куда меньше, а средние значения иногда для старых ядер выше, чем для новых - тут Интел за 10 лет из-за кризиса идей АМД не сделал практически ни одного шага к улучшению IPC в сценариях, в которых не используются команды AVX и операции с плавающей точкой 128-256 бит. В остальных операциях прогресс Интела только в том, чт следующее поколение выходило с чуть более высокими частотами. Если сравнить новый I9-10900K и I9-9900K, то это один и тот же процессор на 14нм-архитектуре, но чуть быстрее и в нем чуть больше ядер. В однопотоке он работает быстрее на 3-5% из-за более высокой частоты буста (5300 против 5000), а вот в многопотоке из-за того, что не может справиться с отводом тепла при аналогичных системах охлаждения - ядер же стало больше на 2 шт. - скорость на ядро уже может оказаться меньше, т.к. при недостатке охлаждения система понижает напряжение нагруженных ядер, балансируя производительность и энергопотребление, в итоге все ядра могут работать на пике нагрузки только какое-то время, после чего частота будет неминуемо падать (если у Вас не водяное охлаждение или жидкий азот., но вряд ли это используют на серверах, хотя я видел полностью погруженные в жидкость системы - специальный хладагент, который не реагирует с платой и радиаторами и не проводит ток, - но и там температура пассивного радиатора при небольшой нагрузке была овер 40 градусов).

Поэтому когда народ берет процессоры с аналогичной частотой в бусте, но разными стоковыми частотами, то паритета они добиваются только при слабой нагрузке, а как только нагрузка растет, то большее количество ядер начинают генерировать большее количество ватт тепла, что приводит к снижению частот вплоть до стоковых. Это все, что нужно знать о серверных процессорах. Ну и нет смысла запускать систему в продуктив на сбалансированной схеме производительности и выключенном бусте, но как только система начнет использовать более 50% вычислительных ресурсов, процессор начнет медленное движение к стоковым частотам.
egorovntn; mrsmrv; +2 – Ответить
178. egorovntn 235 29.05.20 09:21 Сейчас в теме
(172) Спасибо за ответ.
193. пользователь 31.05.20 17:08
Сообщение было скрыто модератором.
...
219. mrsmrv 129 22.06.20 18:20 Сейчас в теме
Охренеть, какое пророческое название статьи оказалось. Спор был. Знатный, но в комментах и не по теме процессоров. Мда. Как на свадьбе. без драки - не свадьба.
221. starik-2005 3309 25.06.20 17:52 Сейчас в теме
(219) кстати, по поводу выбора процессора...

Вот я в 17-м купил себе 1600-й райзен 5, к нему мать на самом простом А320-м чипе. И вот в этой теме в комментах я как-то описывал, что у меня райзен 1600-й в некоторых вычислениях (обычное сложение много-много раз) работает быстрее I9-9900K (0,966 на I9 против 0,457 на R5-1600). Также там были тайминги на питоне для различного кода. В итоге я поменял себе проц с 1600-го на 3600-й и решил сегодня проверить, что там как со скоростью. В итоге все в 1,2-1,5 раза быстрее работает. Даже асмовский код работает на 10% быстрее, хотя это укладывается в разницу по частоте (те же 10%, т.е. 3,7 в бусте против 4,1). И я не менял ни память, ни мать, ни видео, ни БП, ни кулер - только проц. И проц новый стоил мне 11290, а старый загоню на авите за 6к))). Любителями интела так не получится...
independ; mrsmrv; +2 – Ответить
222. mrsmrv 129 27.06.20 04:14 Сейчас в теме
(221) ага особенно с "одноразовым" сокетом 1200, который вот только что они выпустили.
223. lev6975 30.06.20 20:17 Сейчас в теме
Все же интересно как себя покажет трипер 3990Х 64 ядреный по количеству пользователей
НО, 64 ядра физический предел для, по - крайней мере, приложений, которые работают на несерверных виндах... На серверных не знаю
224. starik-2005 3309 01.07.20 18:39 Сейчас в теме
(223)
64 ядра физический предел для
Вся фишка в том, что постгри, например, вообще нормально до какого-то времени не мог эксплуатировать очень много ядер (на 32-х по-моему его возможности заканчивались, но, думаю, сейчас уже эти проблемы решены). А вообще, многопоточное программирование сейчас или параллелит процесс, разделяя его на независимые части, управляя пулом процессов, передавая каждому процессу задачу. Или, если это зависимые вычисления, то параллелится, например, запись данных, их чтение и подготовка - они выделяются в отдельные потоки. Для СУБД характерны оба варианта, т.к. множество пользователей работают с одними и теми же таблицами, блокируя их при изменении. Параллельность здесь - это множественные блокировки, при этом если система написана плохо, то блокировки могут стать взаимными (deadlock). В 1С блокировки разделены на объектные блокировки платформы и табличные блокировки СУБД. Так что наступить на эти грабли стало еще проще, т.к. СУБД может ждать что-то от 1С, а 1С что-то от СУБД в разных потоках. И это проблемы, пир том толкового инструмента анализа блокировок 1С "искаропки" в 1С нет - есть несколько сомнительного качества обработок, некоторым образом решающих эту проблему.

Т.е. все упирается не в ядра даже, а в архитектуру. Вон REDIS работает со скоростью 2кк запросов в сек, 1С такое не снилось в самом радужном сне...
227. nomad_irk 84 25.09.20 07:59 Сейчас в теме
(224)
Вон REDIS работает со скоростью 2кк запросов в сек, 1С такое не снилось в самом радужном сне...

Я ща немного "растекусь мыслию по древу", но что, если в условиях 1С(это ORM-система) пойти по пути перевода логики работы конфигурации в хранимые процедуры/тригеры СУБД, а платформу 1с использовать просто как интерфейс для пользователя.

1С же использует СУБД исключительно в роли хранилища данных, и не важно, что СУБД стОит "бешены тыщи" и ее функционал не используется.

Пусть не 2кк запросов в секунду, но, думаю, можно повысить производительность как минимум на порядок :)
229. starik-2005 3309 25.09.20 10:28 Сейчас в теме
(227) Не знаю уж из-за чего все так верят в какие-то хранимые процедуры, но они уж точно не панацея. Предположу, что они на какой-то существенный процент в ряде кейсов работают быстрее, чем это делает 1С, транслируя свои запросы в запросы СУБД. Но все-равно и хранимые процедуры также упрутся в блокировки, I/O ну и так далее... Написать на хранимках расчет себестоимости конечно можно, но стоит ли экономия даже часа времени этой мороки? Предположу, что если переписать блок расчета в 1С, то получится еще быстрее (мы как-то вообще решили обойтись без СУБД для списка недействительных паспортов, в итоге сэкономили кучу места и времени, ибо даже очень хороший сервер овер 120кк записей в регистр сведений быстрее, чем за 4 часа, вставить с помощью 1С не мог, при этом вставка через SQL тут, конечно, всего 20 минут заняла - это в 12 раз быстрее (поэтому я не совсем понимаю, что в это время делала 1С). А вот переработка алгоритма и полный отказ от СУБД позволила 1С производить операцию обновления данных за всего 8 минут, при этом скорость операций поиска выросла на порядок). Так что СУБД - это только надежность, но никак не скорость (даже при использовании "хранимок"). СУБД - просто средство обеспечения качественной и надежной персистентности и согласованности данных при большом количестве пользователей, при том монопольные кейсы использования данных для СУБД достаточно медлительны.
Navigator1C; mrsmrv; +2 – Ответить
230. nomad_irk 84 25.09.20 11:30 Сейчас в теме
(229) понятно, что - не панацея, но количество транзакций вида "запрос к БД - ответ от СУБД" это сократит знатно, т.к. эти запросы будут выполнятся в пределах СУБД + будут выполнятся операции над примитивными значениями - это так же должно повысить скорость обработки и уменьшить количество ресурсов, необходимых для обслуживания коллекций значений.

От платформенных возможностей 1С отказываться полностью не стОит.

Интересно было бы сравнить скорость выполнения того же цикла в 1С и MSSQL, например.
231. starik-2005 3309 25.09.20 11:47 Сейчас в теме
(230)
Интересно было бы сравнить скорость выполнения того же цикла в 1С и MSSQL, например.
Тогда стоило бы определиться, какую эффективную нагрузку этот цикл должен создавать. Мы как-то меряли расчет числа Фибоначчи на 1С, С, Питоне, Пыхе и ассемблере (который, кстати, с этой задачей на I9-9900K справился в 2 раза медленнее, чем на 1600-й рязани, что говорит мне о кой-каких нюансах), так вот 1С тут был очень медленнен (в 8 раз медленнее питона, а он был медленнее остальных, и даже пыха была почти на порядок быстрее). Так что в плане вычислений скул просто обязан гонять циклы не медленнее питона, а он на порядок быстрее 1С'а даже в режиме интерпретатора.
232. nomad_irk 84 25.09.20 12:04 Сейчас в теме
(231)Ну вот, собссно, если на арифметике выйгрыш 8 раз, то добавив снижение количества транзакций "запрос к БД - ответ СУБД" будет упоминаемый мной "на порядок", а то и "на порядки" :)

+ не забываем про возможности самого T-SQL в СУБД, которые не идут ни в какое сравнение с той версией T-SQL, что предоставляет 1С разработчику.

p.s. понятно, что никто не будет так делать, это всего лишь мое "....мыслие по древу"
226. PORGY3000 57 24.09.20 23:42 Сейчас в теме
А где все эти люди у которых получается набрать в тесте более 80 попугаев.

Хоть-бы один пояснил бы как этого добиться.
228. nomad_irk 84 25.09.20 08:00 Сейчас в теме
(226)Вы про "попугаи" в каком тесте?
233. PORGY3000 57 26.09.20 17:02 Сейчас в теме
Тест Гилева конечно.
234. starik-2005 3309 26.09.20 17:13 Сейчас в теме
(233) на любом современном процессоре с частотой выше 3ГГц должно быть больше 80 попугаев даже на HDD. Если попугаев меньше - это просто не современный процессор. Ну и режим питания установить "Высокая производительность".
VyacheslavShilov; mrsmrv; +2 – Ответить
239. mrsmrv 129 01.10.20 17:14 Сейчас в теме
(234)Каждый раз когда прихожу к клиенту, первое что делаю - режим питания на серваке проверяю. ибо... "ой, тормозит", Включаю - "о, а что вы сделали?".
235. nomad_irk 84 26.09.20 19:32 Сейчас в теме
(233)Секрет прост: процессор с частотой от 3.5ГГц + SSD.
Navigator1C; +1 – Ответить
236. PORGY3000 57 26.09.20 21:17 Сейчас в теме
Вот у меня Ryzen 2700X (4200ггц), 32 гига (3000ггц), M2 NVME 512 (R 3500 W 3000)
на Asus X470-plus

И более 72 не поднять на Win 2012 R2 Хоть Тресни.

Поэтому и вопрос возник - как ?
237. starik-2005 3309 27.09.20 14:42 Сейчас в теме
(236)
Поэтому и вопрос возник - как ?
Так эта ось не знает ничего о ядре ZEN. Они его разгонять не умеет - он работает даже не на стоковой частоте, а на более низкой, постоянно находясь в режиме экономии энергии.

Поставь 10-ку или линух и сильно удивишься. Этот проц должен выдавать под соточку в этом тесте. У меня 3600-й выдает 116, на работе - 125 (мать дома А320, на работе - B450, кстати на работе на 2012-й серверной винде тоже скорость была 74-76 всего). Дома до этого на Убунту 18.04 1600-й меньше 84 не выдавал, лучшие тесты - 89. На 10-й винде больше 70 даже 200G выдает. Если так нужна серверная ОСь, поставьте тогда уж последнюю версию системы.
238. PORGY3000 57 27.09.20 21:52 Сейчас в теме
(237)
Так эта ось не знает ничего о ядре ZEN.


Спасибо. Попробую на копии сервера обновить до 2019 и сделать тест.

Но частоты что я описал это ручками выставленные в биосе. И они не опускаются, во время теста, судя по CPU-Z.

Но спасибо за подсказку. Попробую.
240. mrsmrv 129 01.10.20 17:14 Сейчас в теме
(234)Каждый раз когда прихожу к новому клиенту, первое что делаю - режим питания на серваке проверяю.
242. antont 14 20.07.21 23:26 Сейчас в теме
AMD EPYC 7302P 16-Core Processor
256Гб RAM 3200
SSD Nve Samsung 4Gb
Supermicro : H12SSW-NT
1C 8.3.17.1549
PosgreSQL 11.11-5.1C
Windows Server 2019 Standard

Все из коробки, по-умолчанию. Даже чисто визуально - 1С очень медленно работает. Тест выдает 6 попугаев.
ИМХО, даже из коробки должно быть 30-40 без доп. настроек.
С чего начать поиск проблемы?
243. starik-2005 3309 21.07.21 08:27 Сейчас в теме
(242) режим высокой производительности для начала поставьте.

Попробуйте поставит MS SQL Express, проверьте, как изменится производительнлсть с ним.

Внесите папки 1С, включая те, которые в appdata, в исключегия для микрософт дефендера (защитника винжы), также внесите туда каталог временных файлов и базы данных.

Проверьте, кто основной потребитель нагрузки в системе, какое приложение постоянно в топе. Если это не 1С и не СУБД, постарайтесь избавиться от него.

ЗЫ: у клиента ксеон голд, тормозит на винде и MS SQL не по деццки но клиент думает, что так и надо - даже не пытаюсь его разочаровывать, т.к. мои задачи не касаются производительности.
244. antont 14 22.07.21 01:57 Сейчас в теме
(243) режим высокой производительности установлен изначально.
SQL выдает 6,5
Нагрузка на систему близка к нулю, в т.ч. в первом тесте.
Второй тест нагружает только проц на 100%. Выдает 438 пользователей...
245. starik-2005 3309 22.07.21 11:31 Сейчас в теме
(244) странно. А смотрели, сколько подобные процессоры показывают в тесте? Есть в списке такие?

Попробуйте файловый тест запустить. Он точно должен показать, на сколько у Вас там все плохо. Если покажет 20, то у меня калькулятор столько кажет...
246. antont 14 22.07.21 12:04 Сейчас в теме
(245) В списке есть около 20 тестов на таком процессоре. В среднем от 26 до 40 баллов. Есть несколько 12-18 баллов.
Файловый тест выдает 86 баллов.
247. starik-2005 3309 22.07.21 12:19 Сейчас в теме
(246)
Файловый тест выдает 86 баллов.
Для 3.3GHz это нормально (даже отлично). Значит, где-то затык у вас. Так вот гадать на кофейной гуще вообще не вариант.

ЗЫ: У меня на винде файловая как-то показывала на R5 3600 40, проблема была в дефеендере винды. Если у Вас файловая показывает нормальный результат, а серверная тупит, то все сводится к тому, что именно СУБД тормозит - что-то ему мешает. Обычно файловая всего в 2-2,5 раза быстрее серверной, а не в 10-15 раз как у вас... Где БД находится? Может на сетевом диске в облаке )))
248. antont 14 22.07.21 13:25 Сейчас в теме
(247) БД на SSD Nve Samsung 4Tb.
249. starik-2005 3309 22.07.21 13:56 Сейчас в теме
257. beard1 14.11.21 08:16 Сейчас в теме
(242)
AMD EPYC 7302P 16-Core Processor



Доброго времени суток!

Как будет минутка, поделитесь, пожалуйста, впечатлениями от практического использования AMD EPYC в сервере.
В первую очередь стабильность интересует.
И было бы классно услышать сравнительное мнение о скорости работы для связки Windows Server 2019 Standard + PosgreSQL 11.11-5.1C + 1C по возможности, конечно.
Я не фанат ни AMD, ни Intel, но так исторически сложилось, что с ПК на AMD у меня было больше проблем, чем с Intel. С серверами на AMD не работал никогда.
Сейчас, вроде бы, AMD по всем параметрам бьет Intel, но терзают смутные сомненья ;)

Спасибо!
250. antont 14 27.07.21 14:37 Сейчас в теме
Проблема оказалась в этом:
https://infostart.ru/1c/articles/1027743/
4 сообщение.
251. starik-2005 3309 27.07.21 17:36 Сейчас в теме
(250) вот и я не думал, что проблема в железе. Кстати, сколько стало показывать после решения проблемы в тесте клиент-серверной?
252. antont 14 28.07.21 10:40 Сейчас в теме
(251) 30 на постгре и 45 сиквел.
253. starik-2005 3309 28.07.21 11:50 Сейчас в теме
(252)
30 на постгре
Я так понял, что Вы настройки не крутили?
254. cdiamond 212 08.08.21 13:24 Сейчас в теме
На самом деле это только KVM/Proxmox палится в открытую, так что в вашей статье данные тестов которые гонялись на bare metal и на гипервизорах не отделены. Я лично много десятков раз гонял тест Гилева на ESXi с результатом выше 30 и он где-то затесался в ваших результатах, подпортив рейтинг процссора ))
255. starik-2005 3309 08.08.21 13:49 Сейчас в теме
(254) ну сложно отделить неотделимое, по крайней мере не помню, был ли в этом тесте какой-то делитель виртуальных сред. Только в описании проца если.

ЗЫ: занимался тут на днях тестом рандома на разных процах и осях. У нас на работе на 10ке на моем ноуте реал рандом 21кк раз за 3 секунды, длма на 10ке на R53600 за секунду, в WSL2 на нем же за 3 сек, на R3500 ubuntu server 2020 - 3 сек, на работе на убунту 10 сек на R5 3600 (там более старая версия убунты), на i7 на ноуте у коллеги с 7кой - 25 сек. Мистика. Один и тот же код на c++ скомпилированный или cl.exe (у коллеги и у меня на раьоте на ноутах), или на g++10. O3 ге влияет вообще никак. Хочу на других процах протестить. Если кому интересно - https://starik.xyz/rnd.cpp (фактически код показывает распределение значений от 0 до 1 с шагом 0.1)
260. lev6975 30.06.25 21:19 Сейчас в теме
Здравствуйте
А есть обновления - интел 14900k, ultra 285k, amd 9900-9950, x3d, в том числе
Скуль любит кэш...
261. suntuco 18.09.25 07:30 Сейчас в теме
Поддерживаю вопрос: есть ли актуализация на базе современных процессоров?
263. mrsmrv 129 24.07.26 06:38 Сейчас в теме
264. starik-2005 3309 24.07.26 11:35 Сейчас в теме
(263)
7950х
Странно то, что у меня на файловой базе 9600X в убунту достиг цифры 217, а в серверной 121** (собранный 1С-ный постгрес с включенным фсинком, но с кешированием страниц, т.е. надежность не должна страдать, ** - не уверен, что 121, но больше 120).

Также смотрел на CachyOS, но там юзал ZFS, а она, как оказалось, медленнее, но и там было 208/116. Если бы там была xfs, то скорее всего смог бы добраться до повторяемых 220+ и 120+ соответственно.

Так что странно, что 141 на файловой и 60 на серверной для 7950х.

ЗЫ: как-то знакомые брали себе 14900 (без К), на венде на серверной удалось после битья в бубен достичь 58, на файловой - 156.

https://www.dns-shop.ru/opinion-page/view/7b297f00-ce7d-4bc0-82ea-cb044f530380
Для отправки сообщения требуется регистрация/авторизация