INFOSTART EVENT 2012: разбор решений конкурса разработчиков

Публикация № 164951

Разработка - Практика программирования

38
В статье проводится разбор присланных решений на конкурс разработчиков от компании "Первый БИТ". Приводятся планы выполнения запросов и сравниваются показатели быстродействия и оптимизации.

В данной статье я постараюсь дать развернутый анализ наиболее интересных решений с технологической точки зрения решений, присланных на конкурс разработчиков от компании "Первый БИТ" делаемпроекты.рф

Данный конкурс проводился в рамках первой всероссийской конференции INFOSTART EVENT 2012 (ссылка на отчет //infostart.ru/public/162790/). В конкурсе было две номинации – «знание механизма РАУЗ в УПП» и «разработка в системе 1С:Предприятие». Результаты конкурса опубликованы здесь и здесь. Конкурс проходил в два этапа. Первый этап - соревнование на скорость проходил в режиме реального времени, а второй этап - конкурс на самое оптимальное решение проходил уже в оффлайн режиме и решение присылались на мою на электронную почту. В статье проводится разбор решений присланных на второй этап.

Для начала, давайте посмотрим еще раз на задание из конкурса:

Требуется разработать внешнюю обработку, которая сможет найти все характеристики номенклатуры, которые полностью соответствуют указанному набору свойств и их значениям (Характеристика должна одновременно содержать все указанные свойства и их значения и кроме них не должна содержать других свойств с заполненными значениями).

 

Работать мы будем со справочником "Характеристики" в Управление Торговлей 11 для России (это важно). Ниже показан скриншот со структурой справочника

 

Структура справочника

 

Полностью задание звучит следующим образом (полное описание задания можно скачать в файлах статьи):

Требуется разработать внешнюю обработку, которая будет содержать две табличные части и кнопку"Найти". Пример обработки указан на скриншоте ниже (саму обработку шаблон можно скачать в файлах статьи).

Шаблон обработки

 

  • В первой табличной части необходимо задать условия поиска.
  • Во второй нужно выводить результат поиска.
  •  

В результате поиска нужно найти все характеристики номенклатуры, которые полностью соответствую указанному набору свойств и их значениям. Характеристика должна одновременно содержать все указанные свойства и их значения и кроме них не должна содержать других свойств с заполненными значениями. Предусматривается следующие ограничения: 

  • при вводе параметров поиска (в левой таблице) не должно быть свойств без указания значений.
  • нельзя использовать сравнение на количество строк 

SIC! Прежде чем читать дальше, еще раз внимательно прочитайте условие задачи и постарайтесь ее мысленно решить. На ней погорело очень много кандидатов, считающих себя хорошими программистами с высоким уровнем логического мышления. 

 

Исходя из задания нам нужно работать с двумя таблицами - эталонной и табличной частью "ДополнительныеРеквизиты" справочника характеристики номенклатуры. Основная хитрость задачи состоит в том, что нужно выбрать все характеристики попадающие под наши условия и проверить, чтобы в них не было лишних заполненных свойств.

 

Для тестирования присланных решений была создана специальная база - были растиражированы следующие элементы:

1)          Характеристика с 4 свойствами: размер - 35, цвет – зеленый, тип кожи – натуральная, полнота – 5 . Количество 20 000 элементов. (Тест №1)

2)          Характеристика с 4 пустыми свойствами: размер, цвет, тип кожи и полнота и дополнительно к ним 100 свойств строкового типа со значением номера свойства (т.е. Свойство1 – значение «1», Свойство2  - значение «2»). Количество 5 000 элементов. (Тест №2)

 

Все запросы приведены «как есть». Время выполнения тестов для каждого из решений приведены для моего личного ноутбука и локального SQL сервера:

Технические характеристики ноутбука - Процессор Intel® Core™ i5-430M 2,26 ГГц, RAM - 4GB DDR3, HDD Sata 320 Gb

Версия SQL - Microsoft SQL Server 2008 R2 (RTM) - 10.50.1617.0 (X64)  (Build 7601: Service Pack 1) 

Версия 1С - 8.2.17.368 (клиент-серверная - x86-64)

 

P.S. Предвосхищая вопрос по коду :) - метод ТекущаяУниверсальнаяДатаВМиллисекундах() появился в 8.2.17

 


 Решение №1.

 

СписокПустыхЗначений = Новый СписокЗначений;
МассивТипов = Новый Массив(1);
Для каждого
Тип Из Метаданные.ПланыВидовХарактеристик.ДополнительныеРеквизитыИСведения.Тип.Типы() Цикл
    Если
Тип = Тип("Булево") Тогда
        Продолжить;
// Для типа булево нет пустых значений
   
КонецЕсли;
   
МассивТипов[0] = Тип;
   
ОписаниеТипа = Новый ОписаниеТипов(МассивТипов);
   
СписокПустыхЗначений.Добавить(ОписаниеТипа.ПривестиЗначение());
КонецЦикла;

СписокПустыхЗначений.Добавить(Неопределено);

Запрос = Новый Запрос;
Запрос.Текст = "
|ВЫБРАТЬ
|   Свойство КАК Свойство
|   ,Значение КАК Значение
|
|ПОМЕСТИТЬ
|   ЗаданныеСвойства
|
|ИЗ
|   &Свойства КАК Свойства
|
|;
|
|ВЫБРАТЬ
|   Характеристики.Ссылка КАК Характеристика
|
|ИЗ
|   Справочник.ХарактеристикиНоменклатуры КАК Характеристики
|
|ЛЕВОЕ СОЕДИНЕНИЕ
|   ПланВидовХарактеристик.ДополнительныеРеквизитыИСведения КАК План
|
|ПО
|   ИСТИНА
|
|ЛЕВОЕ СОЕДИНЕНИЕ
|   Справочник.ХарактеристикиНоменклатуры.ДополнительныеРеквизиты КАК Реквизиты
|
|ПО
|   План.Ссылка = Реквизиты.Свойство
|   И Характеристики.Ссылка = Реквизиты.Ссылка
|
|ЛЕВОЕ СОЕДИНЕНИЕ
|   ЗаданныеСвойства
|
|ПО
|   План.Ссылка = ЗаданныеСвойства.Свойство
|
|СГРУППИРОВАТЬ ПО
|   Характеристики.Ссылка
|
|ИМЕЮЩИЕ
|   МИНИМУМ(
|       ВЫБОР
|           КОГДА ЕСТЬNULL(Реквизиты.Значение, ЗаданныеСвойства.Значение) ЕСТЬ NULL ТОГДА Истина
|           КОГДА ЗаданныеСвойства.Значение ЕСТЬ NULL И Реквизиты.Значение В (&СписокПустыхЗначений) ТОГДА Истина
|           КОГДА Реквизиты.Значение = ЗаданныеСвойства.Значение ТОГДА Истина
|           ИНАЧЕ Ложь
|       КОНЕЦ) = Истина
|"
;

Запрос.УстановитьПараметр("Свойства", Объект.Свойства.Выгрузить());
Запрос.УстановитьПараметр("СписокПустыхЗначений", СписокПустыхЗначений);

НачДата=ТекущаяУниверсальнаяДатаВМиллисекундах();
Результат = Запрос.Выполнить();
КонДата=ТекущаяУниверсальнаяДатаВМиллисекундах();

ВремяВыполнения = КонДата-НачДата;

Сообщить("Время выполнения - "+ВремяВыполнения+" миллисекунд");

 


Разбор решения №1.

Решение построено на следующем принципе:

(1) Получаем декартово произведение справочника характеристики номенклатуры и ПВХ "ДопРеквизитыИСведения". У нас к каждой строке из справочника характеристики соединяются все свойства из ПВХ "ДопРеквизитыИСведения". Т.е. в таблице получаем все возможные комбинации характеристики и ее возможных свойств.  Ориентировочное число строк таблицы ~ 3 125 000 (примерно 25000 элементов справочника на примерно 125 свойств)

(2) К этой таблице (1) присоединяем табличную часть каждой характеристики. Ориентировочное число строк таблицы не меняется ~ 3 125 000

(3) К полученной таблице (2) присоединяем эталонную табличную часть со связью по свойствам из (1)

 

Дальше группируем по характеристике с определенными условиями:

  • Оба свойства (в эталонной и в табличной части) отсутствуют (NULL), т.е. не заданы
  • Когда в эталонной таблице значение отсутствует (NULL), а в табличной части не задано (проверяется на соответствие пустых типов) (&СписокПустыхЗначений)
  • Оба значения равны по значению
 
Логика решения правильная - посмотрим на план выполнения запроса в SQL.
 

1) Общий ПВЗ (здесь и далее план выполнения запроса). 

План выполнения запроса №1

1.а) Разберем подробно первую часть ПВЗ:

 

План выполнения запроса №2

Здесь оптимизатор SQL берет нашу НЕ индексированную эталонную таблицу (#tt7) и сливает с ПВХ "ДопРеквизитыИСведения". Всего свойств у нас 119 в #tt7 для 2 теста загоняется 100 свойств - итого на выходе получаем таблицу в 119 свойств. Пока все еще нормально :)

 

1.б) Вторая часть

 

План выполнения запроса №3

Здесь оптимизатор SQL загоняет во временную таблицу результат действия из 1.а) и далее делает совершенно логичный Nested Loops, т.е. как раз наше декартово произведение с итоговым результатом в 2 985 115 строк (25085 элементов на 119 свойств). Вообщем-то что было написано, то и получили :)

 

ПВЗ1 №4

 

1.в) Ну и напоследок тоже достаточно интересный кусок, когда мы к нашей трехмиллионой таблице добавляем данные с табличным частями

 

ПВЗ №4

 

Попадаем в кластерный индекс при поиске, но это нас не спасает - все равно на это левое соединение слиянием тратим 41% всего запроса. На выходе получаем опять 3 миллионную таблицу (с еще большим количеством колонок - размер таблицы на выходе 325 Мб). Ну и потом 4% времени тратим на расчет агрегата (на трех миллионах строк-то :))

 

В итоге данное решение задачи при всей своей неоднозначности на 2 тесте показывает очень достойные 30,614 секунд, но к сожалению, данное решение полностью проваливается на 1 тесте - 38,798 секунд (что вполне логично, так как первое декартово произведение делается без всякого условия).

 


 Решение №2.

Запрос = Новый Запрос;
Запрос.УстановитьПараметр("ЗаданныеСвойства", Объект.Свойства.Выгрузить());

Запрос.Текст =

"ВЫБРАТЬ
|   ЗаданныеСвойства.Свойство КАК Свойство,
|   ЗаданныеСвойства.Значение КАК Значение
|ПОМЕСТИТЬ ВТЗаданныеСвойства
|ИЗ
|   &ЗаданныеСвойства КАК ЗаданныеСвойства
|;
|
|////////////////////////////////////////////////////////////////////////////////
|ВЫБРАТЬ
|   ДополнительныеРеквизитыИСведения.Ссылка КАК Ссылка,
|   ДополнительныеРеквизитыИСведения.ТипЗначения
|ПОМЕСТИТЬ ВТНенужныеСвойства
|ИЗ
|   ПланВидовХарактеристик.ДополнительныеРеквизитыИСведения КАК ДополнительныеРеквизитыИСведения
|ГДЕ
|   НЕ ДополнительныеРеквизитыИСведения.Ссылка В
|               (ВЫБРАТЬ
|                   ВТЗаданныеСвойства.Свойство
|               ИЗ
|                   ВТЗаданныеСвойства)
|;
|
|////////////////////////////////////////////////////////////////////////////////
|ВЫБРАТЬ
|   ХарактеристикиНоменклатуры.Ссылка КАК Ссылка
|ПОМЕСТИТЬ ВТХарактеристикиДляАнализа
|ИЗ
|   Справочник.ХарактеристикиНоменклатуры КАК ХарактеристикиНоменклатуры
|ГДЕ
|   НЕ ХарактеристикиНоменклатуры.ДополнительныеРеквизиты.Свойство В
|               (ВЫБРАТЬ
|                   ВТНенужныеСвойства.Ссылка
|               ИЗ
|                   ВТНенужныеСвойства)
|;
|
|////////////////////////////////////////////////////////////////////////////////
|ВЫБРАТЬ
|   ХарактеристикиНоменклатурыДополнительныеРеквизиты.Свойство,
|   ХарактеристикиНоменклатурыДополнительныеРеквизиты.Значение,
|   ВТХарактеристикиДляАнализа.Ссылка
|ПОМЕСТИТЬ ВТСвойстваДляАнализа
|ИЗ
|   ВТХарактеристикиДляАнализа КАК ВТХарактеристикиДляАнализа
|       ВНУТРЕННЕЕ СОЕДИНЕНИЕ Справочник.ХарактеристикиНоменклатуры.ДополнительныеРеквизиты КАК ХарактеристикиНоменклатурыДополнительныеРеквизиты
|       ПО ВТХарактеристикиДляАнализа.Ссылка = ХарактеристикиНоменклатурыДополнительныеРеквизиты.Ссылка
|;
|
|////////////////////////////////////////////////////////////////////////////////
|ВЫБРАТЬ
|   ВТЗаданныеСвойства.Свойство,
|   ВТЗаданныеСвойства.Значение,
|   ВТХарактеристикиДляАнализа.Ссылка КАК Характеристика
|ПОМЕСТИТЬ ВТЭталонныеХарактеристики
|ИЗ
|   ВТЗаданныеСвойства КАК ВТЗаданныеСвойства
|       ЛЕВОЕ СОЕДИНЕНИЕ ВТХарактеристикиДляАнализа КАК ВТХарактеристикиДляАнализа
|       ПО (ИСТИНА)
|;
|
|////////////////////////////////////////////////////////////////////////////////
|ВЫБРАТЬ
|   ВЛОЖЕННЫЙ.Характеристика КАК Характеристика,
|   ВЛОЖЕННЫЙ.Счетчик
|ИЗ
|   (ВЫБРАТЬ
|       СУММА(ВЫБОР
|               КОГДА ВТСвойстваДляАнализа.Свойство ЕСТЬ NULL
|                   ТОГДА 1
|               ИНАЧЕ 0
|           КОНЕЦ) КАК Счетчик,
|       ВТЭталонныеХарактеристики.Характеристика КАК Характеристика
|   ИЗ
|       ВТЭталонныеХарактеристики КАК ВТЭталонныеХарактеристики
|           ЛЕВОЕ СОЕДИНЕНИЕ ВТСвойстваДляАнализа КАК ВТСвойстваДляАнализа
|           ПО ВТЭталонныеХарактеристики.Свойство = ВТСвойстваДляАнализа.Свойство
|               И ВТЭталонныеХарактеристики.Значение = ВТСвойстваДляАнализа.Значение
|               И ВТЭталонныеХарактеристики.Характеристика = ВТСвойстваДляАнализа.Ссылка
|
|   СГРУППИРОВАТЬ ПО
|       ВТЭталонныеХарактеристики.Характеристика) КАК ВЛОЖЕННЫЙ
|ГДЕ
|   ВЛОЖЕННЫЙ.Счетчик = 0"
;

НачДата=ТекущаяУниверсальнаяДатаВМиллисекундах();
Результат = Запрос.Выполнить();
КонДата=ТекущаяУниверсальнаяДатаВМиллисекундах();

ВремяВыполнения = КонДата-НачДата;

Сообщить("Время выполнения - "+ВремяВыполнения+" миллисекунд");


 


 

Разбор решения №2.

 

Решение построено на следующем принципе:

(1) Сначала формируем временную таблицу со всеми свойствами характеристиками НЕ заданными в эталонной таблице

(2) Затем формируем вторую временную таблицу с характеристиками у которых свойства НЕ попадают в таблицу 1

(3) Формируем третью временную таблицу с табличной частью характеристик для характеристик из таблицы 2

(4) В таблице 4 опять наше любимое декартово произведение выбранных характеристик (2) и эталонной таблицы (опять 5000 * 100 ~ 500 000 строк)

(5) Далее соединяем (3) и (4) таблицы во ВЛОЖЕННОЙ таблице и сворачиваем

 

В запросе очевидные проблемы с производительностью. Во-первых, ни одна из временных таблиц не индексирована (это заставляет оптимизатор делать table scan'ы временных таблиц, см. далее). Во-вторых, опять декартово произведение.

 

Посмотрим на ПВЗ. Вообще 1С отправляет каждую инструкцию запроса отдельно (sic!), поэтому понять стоимость каждого отдельного запроса по отношению к пакету тяжело. 

 

(1) Для меня было опять же небольшим открытием, что временная таблица заполняемая по таблице значений формируется построчно, но SQL Profiler все расставил на свои места и действительно первая временная таблица формируется построчно (#tt14)

 

ПВЗ №1 Решения №2

 

(2) Во ПВЗ второго запроса - во первых есть Nested Loops в виде Left Anti Semi Join (Оператор Left Anti Semi Join возвращает каждую строку первого (верхнего) входа, для которой нет соответствующей строки во втором (нижнем) входе. Если в столбце Argument предиката соединения нет, то каждая строка будет считаться подходящей. Left Anti Semi Join is a logical operator.">Left Anti Semi Join является логическим оператором. - http://msdn.microsoft.com/ru-ru/library/ms191158.aspx). У нас предиката нет - поэтому будет по факту nested loops. Сортировка в нижней части запроса с моей точки зрения вызвана тем, что временная таблица #tt14 не проиндексирована. Сам по себе запрос копеечный, так что бог с ним.

 

ПВЗ №2 Решения №2

 

(3) Тут все нормально.

 

ПВЗ №3 Решения №2

 

(4) Декартово произведение (nested loops в виде left outer join) на 500 000 строк. Что удивительно дольше всего занимает вставка во временную таблицу (sic!)

 

ПВЗ №4 Решения №2

 

(5) Завершающий аккорд. Два TABLE SCAN на 500 000 с каждой стороны с сортировкой (индекса то нет) и соединением этих таблиц. Я где-то упустил ПВЗ для заполнения #tt18 тоже на 500 000 строк, но сути дела это не поменяет. 

 

ПВЗ №5 Решения №2

 

В итоге задачка решена верно, но есть проблемы с производительностью на 2 тесте. Разовое время выполнения 2 теста - 61,170 секунд, время выполнения 1 теста - 9,526 секунд. 

 

 


 Решение №3

Запрос = Новый Запрос;

Запрос.Текст =
"ВЫБРАТЬ
|   СвойстваЗначения.Свойство,
|   СвойстваЗначения.Значение
|ПОМЕСТИТЬ СвойстваЗначения
|ИЗ
|   &СвойстваЗначения КАК СвойстваЗначения
|;
|
|////////////////////////////////////////////////////////////////////////////////
|ВЫБРАТЬ
|   ХарактеристикиНоменклатуры.Ссылка КАК Характеристика,
|   МИНИМУМ(ХарактеристикиНоменклатуры.Исключаем) КАК Исключаем
|ИЗ
|   (ВЫБРАТЬ РАЗЛИЧНЫЕ
|       ХарактеристикиНоменклатурыДополнительныеРеквизиты.Ссылка КАК Ссылка,
|       ВЫБОР
|           КОГДА Свойства.Свойство ЕСТЬ NULL
|                   ИЛИ Свойства.Значение ЕСТЬ NULL
|               ТОГДА ""Исключаем""
|           ИНАЧЕ ""Оставляем""
|       КОНЕЦ КАК Исключаем
|   ИЗ
|       Справочник.ХарактеристикиНоменклатуры.ДополнительныеРеквизиты КАК ХарактеристикиНоменклатурыДополнительныеРеквизиты
|           ЛЕВОЕ СОЕДИНЕНИЕ СвойстваЗначения КАК Свойства
|           ПО ХарактеристикиНоменклатурыДополнительныеРеквизиты.Свойство = Свойства.Свойство
|               И (ХарактеристикиНоменклатурыДополнительныеРеквизиты.Значение = Свойства.Значение
|                   ИЛИ ХарактеристикиНоменклатурыДополнительныеРеквизиты.Значение ЕСТЬ NULL
|                   ИЛИ ХарактеристикиНоменклатурыДополнительныеРеквизиты.Значение = НЕОПРЕДЕЛЕНО
|                   ИЛИ ХарактеристикиНоменклатурыДополнительныеРеквизиты.Значение = ЗНАЧЕНИЕ(Справочник.ЗначенияСвойствОбъектов.ПустаяСсылка))
|
|   ОБЪЕДИНИТЬ ВСЕ
|
|   ВЫБРАТЬ
|       СвойстваЗначения.Ссылка,
|       ВЫБОР
|           КОГДА ХарактеристикиНоменклатуры.Свойство ЕСТЬ NULL
|               ТОГДА ""Исключаем""
|           ИНАЧЕ ""Оставляем""
|       КОНЕЦ
|   ИЗ
|       (ВЫБРАТЬ РАЗЛИЧНЫЕ
|           ХарактеристикиНоменклатуры.Ссылка КАК Ссылка,
|           СвойстваЗначения.Свойство КАК Свойство,
|           СвойстваЗначения.Значение КАК Значение
|       ИЗ
|           СвойстваЗначения КАК СвойстваЗначения
|               ЛЕВОЕ СОЕДИНЕНИЕ Справочник.ХарактеристикиНоменклатуры КАК ХарактеристикиНоменклатуры
|               ПО (ИСТИНА)) КАК СвойстваЗначения
|           ЛЕВОЕ СОЕДИНЕНИЕ Справочник.ХарактеристикиНоменклатуры.ДополнительныеРеквизиты КАК ХарактеристикиНоменклатуры
|           ПО (ХарактеристикиНоменклатуры.Ссылка = СвойстваЗначения.Ссылка)
|               И СвойстваЗначения.Свойство = ХарактеристикиНоменклатуры.Свойство
|               И (СвойстваЗначения.Значение = ХарактеристикиНоменклатуры.Значение
|                   ИЛИ ХарактеристикиНоменклатуры.Значение ЕСТЬ NULL
|                   ИЛИ ХарактеристикиНоменклатуры.Значение = НЕОПРЕДЕЛЕНО
|                   ИЛИ ХарактеристикиНоменклатуры.Значение = ЗНАЧЕНИЕ(Справочник.ЗначенияСвойствОбъектов.ПустаяСсылка))) КАК ХарактеристикиНоменклатуры
|
|СГРУППИРОВАТЬ ПО
|   ХарактеристикиНоменклатуры.Ссылка
|
|ИМЕЮЩИЕ
|   МИНИМУМ(ХарактеристикиНоменклатуры.Исключаем) = ""Оставляем"""
;
ЭтотОбъект = РеквизитФормыВЗначение("Объект");
Запрос.УстановитьПараметр("СвойстваЗначения", ЭтотОбъект.Свойства.Выгрузить());

НачДата=ТекущаяУниверсальнаяДатаВМиллисекундах();
Результат = Запрос.Выполнить();
КонДата=ТекущаяУниверсальнаяДатаВМиллисекундах();

ВремяВыполнения = КонДата-НачДата;

Сообщить("Время выполнения - "+ВремяВыполнения+" миллисекунд");

 

 


 

 Разбор решения №3.

 

Решение №3 определенно похоже на решение №1, но объединяет результаты двух запросов:

(1)  Левое соединение ТЧ характеристик с эталонной таблице по свойству и значению

(2) "Привычное" декартово произведение эталонной таблицы и ВСЕХ характеристик с их табличными частями. Потом к этой таблице присоединяем табличную часть характеристик и определяем характеристики с лишними характеристиками. Ориентировочная оценка количества строк в таблице ~ 2 500 000 (100 строк эталонной ТЧ * 25 000 элементов справочника). 

 

 Как обычно смотрим ПВЗ.

 

(2а)

ПВЗ №1 Решения №3

(2б)

 

ПВЗ №2 Решения №3

 

В ПВЗ (2а) и (2б) видно как раскладывает выполнение этих запросов SQL. В (2а) вверху 1 запрос - затраты на него нулевые, внизу 2 запрос объединения - 50% затрат уходят на сортировку "огромной" (2 508 500 строк по профайлеру) таблицы полученной декартовым произведением эталона со справочником характеристик для соединения с табличной частью свойств (_Reference114_VT1317).  25% уходит на распараллеливание потоков связанных с обработкой этой таблицы. И еще 11% уже в (2б) на расчет агрегата после объединения. Что удивительно NESTED LOOPS декартова произведения достаточно мало затратен - 1%. Ну а в итоге решение №3 показывает достаточно слабый результат во 2 тесте - 66,292 секунд. Но (!) показывает впечатляющий результат на 1 тесте - 1,648 секунд!  

P.S. Не удержался и решил все-таки посмотреть ПВЗ решения №3 на 1 тесте, чтобы понять откуда все-таки берется эта 1 секунда.

 

ПВЗ №3 Решения №3

 

Первое, что необычное бросилось в глаза - это создание Bitmap индекса, а все остальное вроде ожидаемо - 580 000 строк в первой таблице (5 000 элементов  * 100 свойств для 2 теста + 20 000 элементов * 4 свойства для 1 теста) и 100 000 строк во второй таблице (4 строки эталонной на 25 000 характеристик). Не очень понятно пока за счет чего 1 секунда, но факт остается фактом - 1 секунда :)

  


 Решение №4

 

Запрос = Новый Запрос;

Запрос.Текст =
"ВЫБРАТЬ
|   ТЗСвойств.Свойство КАК Свойство,
|   ТЗСвойств.Значение КАК Значение
|ПОМЕСТИТЬ СВОЙСТВА
|ИЗ
|   &ТЗСвойств КАК ТЗСвойств
|;
|
|////////////////////////////////////////////////////////////////////////////////
|ВЫБРАТЬ РАЗЛИЧНЫЕ
|   Характеристики.Ссылка КАК Характеристика
|ПОМЕСТИТЬ ВозможныеХарактеристики
|ИЗ
|   Справочник.ХарактеристикиНоменклатуры.ДополнительныеРеквизиты КАК Характеристики
|;
|
|////////////////////////////////////////////////////////////////////////////////
|ВЫБРАТЬ
|   ВозможныеХарактеристики.Характеристика,
|   СВОЙСТВА.Свойство,
|   СВОЙСТВА.Значение
|ПОМЕСТИТЬ НАБОР
|ИЗ
|   СВОЙСТВА КАК СВОЙСТВА,
|   ВозможныеХарактеристики КАК ВозможныеХарактеристики
|;
|
|////////////////////////////////////////////////////////////////////////////////
|ВЫБРАТЬ
|   ВозможныеХарактеристики.Характеристика
|ИЗ
|   ВозможныеХарактеристики КАК ВозможныеХарактеристики
|       ЛЕВОЕ СОЕДИНЕНИЕ (ВЫБРАТЬ РАЗЛИЧНЫЕ
|           Свойства.Ссылка КАК Характеристика
|       ИЗ
|           Справочник.ХарактеристикиНоменклатуры.ДополнительныеРеквизиты КАК Свойства
|               ЛЕВОЕ СОЕДИНЕНИЕ НАБОР КАК НАБОР
|               ПО Свойства.Ссылка = НАБОР.Характеристика
|                   И Свойства.Свойство = НАБОР.Свойство
|                   И Свойства.Значение = НАБОР.Значение
|       ГДЕ
|           НАБОР.Характеристика ЕСТЬ NULL ) КАК СЛишнимиСвойствами
|       ПО ВозможныеХарактеристики.Характеристика = СЛишнимиСвойствами.Характеристика
|       ЛЕВОЕ СОЕДИНЕНИЕ (ВЫБРАТЬ РАЗЛИЧНЫЕ
|           НАБОР.Характеристика КАК Характеристика
|       ИЗ
|           НАБОР КАК НАБОР
|               ЛЕВОЕ СОЕДИНЕНИЕ Справочник.ХарактеристикиНоменклатуры.ДополнительныеРеквизиты КАК Свойства
|               ПО НАБОР.Характеристика = Свойства.Ссылка
|                   И НАБОР.Свойство = Свойства.Свойство
|                   И НАБОР.Значение = Свойства.Значение
|       ГДЕ
|           Свойства.Ссылка ЕСТЬ NULL ) КАК СНедостающимиСвойствами
|       ПО ВозможныеХарактеристики.Характеристика = СНедостающимиСвойствами.Характеристика
|ГДЕ
|   СЛишнимиСвойствами.Характеристика ЕСТЬ NULL
|   И СНедостающимиСвойствами.Характеристика ЕСТЬ NULL "
;


Обработка = РеквизитФормыВЗначение("Объект");

Запрос.УстановитьПараметр("ТЗСвойств", Обработка.Свойства.Выгрузить(, "Свойство, Значение"));

НачДата=ТекущаяУниверсальнаяДатаВМиллисекундах();
Результат = Запрос.Выполнить();
КонДата=ТекущаяУниверсальнаяДатаВМиллисекундах();

ВремяВыполнения = КонДата-НачДата;

Сообщить("Время выполнения - "+ВремяВыполнения+" миллисекунд");

 


 

Разбор решения №4

 

Пройдемся по технологии:

 

(1) Эталонная таблица

(2) Все характеристики - таблица 25 тыс. строк

(3) Декартово произведение всех характеристик и свойств - таблица 2,5 млн. строк - НАБОР

(4) Левое соединение таблицы (2) с двумя подзапросами (4-1) - Табличные части характеристик левое соединение с (3) таблицей и (4-2) - (3) таблица левое соединение с табличной частью характеристик. В итоге в (4) таблице получаем данные какие свойства для характеристик лишние и недостающие и получаем нужный результат. Интересно, что в обоих подзапросах работает НЕ индексированная таблица (3) размером 2,5 млн. строк

 

Данное решение в итоге выливается в длинный ПВЗ, который не влазит на экран, но мы рассмотрим самую правую часть ПВЗ (его начало), так как в ней сосредоточены основные затраты.

 

 

ПВЗ №1 Решение №4

 

На ПВЗ одинарным подчеркиванием отмечены действия с таблицей в 2,5 млн строк, а двойным подчеркиванием с таблицей в 0,5 млн строк. Опять привычные 40% на сортировку таблицы в 2,5 млн строк. В итоге решение собирает в себе недостатки производительности решений, рассмотренных до этого, и показывает время на 2 тесте - 120,145 секунд! Но(!), как было сказано вначале статьи, текущие замеры времении показываются по моему ноутбуку, а оценка результатов происходила на тестовом сервере. Каждое решение запускалось 10 раз и выбирались 3 минимальных времени выполнения каждого, так вот это решение на 2 тесте несколько раз показывало уровень быстродействия решения №1, я предполагаю, что SQL в тот момент как-то использовало свой кэш,но увы - получить ПВЗ для быстрого варианта выполнения решения №4 мне не удалось. А на первом тесте решение показывает очень достойный результат в 5,321 секунд. 

 


 

 Решение №5

 

Запрос = Новый Запрос;

//Считаем, что если свойство не указано - тогда строчка не вноситься в табличную часть "Дополнительные реквизиты".
Запрос.Текст =
"ВЫБРАТЬ
|   Таблица.Свойство КАК Свойство,
|   Таблица.Значение
|ПОМЕСТИТЬ Таблица
|ИЗ
|   &Свойства КАК Таблица
|
|ИНДЕКСИРОВАТЬ ПО
|   Свойство
|;
|
|////////////////////////////////////////////////////////////////////////////////
|ВЫБРАТЬ
|   Спр.Ссылка КАК Ссылка,
|   Спр.Свойство КАК Свойство,
|   Спр.Значение
|ПОМЕСТИТЬ Справочник
|ИЗ
|   Справочник.ХарактеристикиНоменклатуры.ДополнительныеРеквизиты КАК Спр
|
|ИНДЕКСИРОВАТЬ ПО
|   Свойство,
|   Ссылка
|;
|
|////////////////////////////////////////////////////////////////////////////////
|ВЫБРАТЬ
|   ХарактеристикиНоменклатуры.Ссылка КАК Характеристика
|ИЗ
|   Справочник.ХарактеристикиНоменклатуры КАК ХарактеристикиНоменклатуры
|ГДЕ
|   НЕ 1 В
|               (ВЫБРАТЬ ПЕРВЫЕ 1
|                   1
|               ИЗ
|                   Таблица ЛЕВОЕ СОЕДИНЕНИЕ Справочник
|                       ПО
|                           Таблица.Свойство = Справочник.Свойство
|                               И Справочник.Ссылка = ХарактеристикиНоменклатуры.Ссылка
|               ГДЕ
|                   Справочник.Ссылка ЕСТЬ NULL
|                   ИЛИ Таблица.Значение <> ЕСТЬNULL(Справочник.Значение, НЕОПРЕДЕЛЕНО)
|
|               ОБЪЕДИНИТЬ ВСЕ
|
|               ВЫБРАТЬ ПЕРВЫЕ 1
|                   1
|               ИЗ
|                   Справочник ЛЕВОЕ СОЕДИНЕНИЕ Таблица
|                       ПО
|                           Таблица.Свойство = Справочник.Свойство
|               ГДЕ
|                   Справочник.Ссылка = ХарактеристикиНоменклатуры.Ссылка
|                   И ЕСТЬNULL(Таблица.Значение, НЕОПРЕДЕЛЕНО) <> Справочник.Значение)"
;
Запрос.УстановитьПараметр("Свойства", Объект.Свойства.Выгрузить());
НачДата=ТекущаяУниверсальнаяДатаВМиллисекундах();
Результат = Запрос.Выполнить();
КонДата=ТекущаяУниверсальнаяДатаВМиллисекундах();

ВремяВыполнения = КонДата-НачДата;

 


 

Разбор решения №5

 

Достаточно оригинальное решение задания. Во-первых, это было первое решение, где временные таблицы были проиндексированы. Во-вторых, подход достаточно интересен (использование конструкции НЕ 1 В (...) ). 

Что получается:

 

(1) Эталонная

(2) Справочник

(3) Выбираем все характеристики, у которых выполняется правило, что не найдено ни одной строки лишней и ни одной строки недостающей. Не часто вообще в 1С можно встретить коррелированные вложенные запросы.

 

И стандартно смотрим на ПВЗ запроса, но перед тем как смотреть, нужно понимать, что данная конструкция

 

|               ВЫБРАТЬ ПЕРВЫЕ 1
|                   1
|               ИЗ
|                   Таблица ЛЕВОЕ СОЕДИНЕНИЕ Справочник
|                       ПО
|                           Таблица.Свойство = Справочник.Свойство
|                               И Справочник.Ссылка = ХарактеристикиНоменклатуры.Ссылка
|               ГДЕ
|                   Справочник.Ссылка ЕСТЬ NULL
|                   ИЛИ Таблица.Значение <> ЕСТЬNULL(Справочник.Значение, НЕОПРЕДЕЛЕНО)
|
|               ОБЪЕДИНИТЬ ВСЕ
|
|               ВЫБРАТЬ ПЕРВЫЕ 1
|                   1
|               ИЗ
|                   Справочник ЛЕВОЕ СОЕДИНЕНИЕ Таблица
|                       ПО
|                           Таблица.Свойство = Справочник.Свойство
|               ГДЕ
|                   Справочник.Ссылка = ХарактеристикиНоменклатуры.Ссылка
|                   И ЕСТЬNULL(Таблица.Значение, НЕОПРЕДЕЛЕНО) <> Справочник.Значение

 

будет выполняться для КАЖДОГО элемента справочника характеристики. Ну и как обычно - ПВЗ

 

(1) Первая таблица из объединения внутри конструкции. Проблема в следующем: индекс НЕ работает! На это указывает Nested Loops с левым внешним соединением и Rid Lookup (msdn и blogs.msdn(англ) ). Не работает он из-за колоники "значение", которую нельзя проиндексировать, так как она содержит строки неограниченной длины. Для первой таблицы оптимизатор использовует Table Scan (это выгоднее чем Index Seek + Rid Lookup).

ПВЗ №1 Решение №5

 

(2) Вторая часть внутренней конструкции, все тоже самое, только еще загоняет в буфер эталонную

 

ПВЗ №2 Решения №5

 

 

 

(3) Ну и последняя часть - как итог (1) и (2).

 

ПВЗ №3 Решение №5

 

Время выполнения 2 теста - 20,110 секунд. Время выполнения 1 теста - 10,176. Я не оценивал запросы на показатели быстродействия с точки зрения СУБД (Reads,Writes,CPU), так как их тяжело просуммировать и вычленить нужные, но мне кажется этот запрос один из самых оптимальных по показателям быстродействия.

 


Итоги

 
Ниже приведена сводная таблица по времени выполнения каждого решения по обоим тестам.
 

1 тест, с        

2 тест, с        
Решение №1       38,798 30,614
Решение №2 9,526 61,170
Решение №3 1,648 66,292
Решение №4 5,321 120,145
Решение №5 10,176 20,110

 

 

 

 

 

На этом я заканчиваю рассмотрение присланных решений (за рамками статьи осталось рассмотрение еще нескольких похожих решений). В своей статье я постарался не просто привести решения, а показать планы выполнения каждого запроса. Чтобы продемонстировать следующие тезисы: во-первых, всегда нужно думать о быстродействии, даже при решении маленьких задач, так как при масштабировании и росте базы - время выполнения одной и той же операции может измениться кардинально (свеж пример одного из решений, которое до тиражирования характеристики для теста №2 сильно опережало остальные по времени выполнения теста №1, а после заполнения базы характеристиками для теста №2 откатилось по времени выполнения на 4-5 место); во-вторых, я постарался показать, что происходит при сложных операциях в запросах на уровне СУБД; в-третьих, нужно стараться всегда помнить о необходимости индексировать временные таблицы, так как отсутствие индекса приводит к table scan'ам и сортировкам, хотя в этом решении индексирование никак не помогает из-за наличия колонки со строкой неограниченной длины (что опять же видно только в SQL Profiler).

 

Надеюсь, что данный труд был не бесполезен и кому-то поможет в будущем - готов обсудить содержание статьи.

 

-----------

С уважением, Королев Алексей

Руководитель отдела внедрения / Технический руководитель проектов

Офис «м. Савеловская» (Москва) - http://делаемпроекты.рф/

Компания «Первый БИТ» (1С:Бухучет и Торговля)

 

 

38

Скачать файлы

Наименование Файл Версия Размер
Исходное задание
.pdf 255,78Kb
24.07.18
12
.pdf 255,78Kb 12 Скачать
Шаблон обработки
.epf 10,14Kb
24.07.18
18
.epf 10,14Kb 18 Скачать

Специальные предложения

Комментарии
Избранное Подписка Сортировка: Древо
1. PBaskir 25.12.12 11:52 Сейчас в теме
Готовы ответить на вопросы
31. ildarovich 6763 11.01.13 18:39 Сейчас в теме
Вот вариант, как кажется, не содержащий неточностей и показывающий наилучшее время
СписокПустыхЗначений = Новый СписокЗначений; 
МассивТипов = Новый Массив(1); 
Для каждого Тип Из Метаданные.ПланыВидовХарактеристик.ДополнительныеРеквизитыИСведения.Тип.Типы() Цикл 
    Если Тип = Тип("Булево") Тогда 
        Продолжить; // Для типа булево нет пустых значений 
    КонецЕсли; 
    МассивТипов[0] = Тип; 
    ОписаниеТипа = Новый ОписаниеТипов(МассивТипов); 
    СписокПустыхЗначений.Добавить(ОписаниеТипа.ПривестиЗначение()); 
КонецЦикла; 
СписокПустыхЗначений.Добавить(Неопределено); 

Запрос = Новый Запрос; 
Запрос.Текст = 
"ВЫБРАТЬ
|	Свойства.Свойство КАК Свойство,
|	Свойства.Значение КАК Значение
|ПОМЕСТИТЬ ЗаданныеСвойства
|ИЗ
|	&Свойства КАК Свойства
|;
|
|////////////////////////////////////////////////////////////­////////////////////
|ВЫБРАТЬ
|	База.Ссылка КАК Характеристика
|ИЗ
|	Справочник.ХарактеристикиНоменклатуры КАК База
|		ЛЕВОЕ СОЕДИНЕНИЕ (ВЫБРАТЬ РАЗЛИЧНЫЕ
|			ЕСТЬNULL(Образцы.Ссылка, Экземпляры.Ссылка) КАК Ссылка
|		ИЗ
|			(ВЫБРАТЬ
|				Характеристики.Ссылка КАК Ссылка,
|				Свойства.Свойство КАК Свойство,
|				Свойства.Значение КАК Значение
|			ИЗ
|				Справочник.ХарактеристикиНоменклатуры КАК Характеристики,
|				ЗаданныеСвойства КАК Свойства) КАК Образцы
|				ПОЛНОЕ СОЕДИНЕНИЕ Справочник.ХарактеристикиНоменклатуры.ДополнительныеРеквизиты КАК Экземпляры
|				ПО Образцы.Ссылка = Экземпляры.Ссылка
|					И Образцы.Свойство = Экземпляры.Свойство
|					И Образцы.Значение = Экземпляры.Значение
|		ГДЕ
|			(Экземпляры.Ссылка ЕСТЬ NULL 
|					ИЛИ Образцы.Ссылка ЕСТЬ NULL 
|						И НЕ Экземпляры.Значение В (&СписокПустыхЗначений))) КАК ВложенныйЗапрос
|		ПО База.Ссылка = ВложенныйЗапрос.Ссылка
|ГДЕ
|	ВложенныйЗапрос.Ссылка ЕСТЬ NULL ";

Запрос.УстановитьПараметр("Свойства", Объект.Свойства.Выгрузить()); 
Запрос.УстановитьПараметр("СписокПустыхЗначений", СписокПустыхЗначений); 

НачДата=ТекущаяУниверсальнаяДатаВМиллисекундах(); 
Результат = Запрос.Выполнить(); 
КонДата=ТекущаяУниверсальнаяДатаВМиллисекундах();
Показать
32. krolya 287 11.01.13 20:11 Сейчас в теме
(31) ildarovich,

Вы запрос тестировали? У меня на моем ноутбуке выпадает с ошибкой - надо разбираться.
Прикрепленные файлы:
33. ildarovich 6763 12.01.13 02:05 Сейчас в теме
(32) Конечно, тестировал. На моей редакции УТ11 все прекрасно работает и в файловом и в SQL-варианте. Так что это точно не проблемы метода, а ошибка платформы. Она заключается в том, что не работает полное соединение табличных частей объектов, использующих общий реквизит с "разделением" данных. В УТ11 справочник "Характеристики номенклатуры", начиная с определенной редакции, входит в состав объектов, имеющих общий реквизит "ОбластьДанных". Судя по партнерской конференции, ошибка известна разработчикам.
Если Вы все же захотите проверить работу "кажется самого правильного и быстрого для SQL метода", не дожидаясь исправления ошибки в платформе, потребуется убрать одну галочку в конфигурации. Скриншот прилагается. Эта галочка влияет только на " Multitenancy", которая никак с условиями задачи не связана.
Прикрепленные файлы:
35. krolya 287 14.01.13 09:32 Сейчас в теме
(33) ildarovich,

Да, точно! Уже тоже вспомнил :) Кстати, я один запрос который присылали, исправлял из-за этой ошибки через временные таблицы.

PS Попробуем ваш метод.
37. krolya 287 14.01.13 09:55 Сейчас в теме
(35) krolya, (31) ildarovich,

Прогнал тесты
Прикрепленные файлы:
39. ildarovich 6763 14.01.13 12:19 Сейчас в теме
(37)(38) Алексей! Большое спасибо за оперативную реакцию. Есть над чем подумать. У меня результаты получались другими относительно друг друга. Однако и тестовая конфигурация была другой (1С: Предприятие сервер 32 бит и MS SQL R1).
41. krolya 287 14.01.13 13:04 Сейчас в теме
(39) ildarovich,

Подскажите ваши нагрузочные параметры? У меня 5000 элементов для теста №2 и 20 000 элементов для теста №1.
42. ildarovich 6763 14.01.13 14:33 Сейчас в теме
(41) У меня все так же. Я брал демо-базу УТ11, создавал там характеристику "Сто свойств" Вашей обработкой (чуть подправил ее - исключил возможность повторного создания тех же свойств) и размножал их Вашими обработками (указал в параметрах 19999 для первого теста и 4999 для второго). Как будет возможность, проапгрейдим тестовую машину под ваши параметры, тогда приведу получившуюся у меня таблицу времени работы методов.
34. ildarovich 6763 13.01.13 22:01 Сейчас в теме
Ну и "до кучи" ЕЩЕ ОДИН метод. Не такой интересный как первый. Очень простой и по идее, должен был бы из-за этого запрещен условиями конкурса. Но почему-то оказался (кажется) разрешенным. На втором тесте он предельно быстр. Для разнообразия здесь используется другой, чем у awa, метод анализа пустых значений.
МассивТипов = Новый Массив(1);
СвойстваПлюс = Объект.Свойства.Выгрузить();
Выборка = ПланыВидовХарактеристик.ДополнительныеРеквизитыИСведения.Выбрать();
Пока Выборка.Следующий() Цикл
	Если СвойстваПлюс.Найти(Выборка.Ссылка, "Свойство") = Неопределено И НЕ Выборка.ЭтоГруппа Тогда
		Для Каждого Тип Из Выборка.ТипЗначения.Типы() Цикл
			Если Тип <> Тип("Булево") Тогда
				МассивТипов[0] = Тип;
				ОписаниеТипа = Новый ОписаниеТипов(МассивТипов);
				ЗаполнитьЗначенияСвойств(СвойстваПлюс.Добавить(), Новый Структура("Свойство, Значение", Выборка.Ссылка, ОписаниеТипа.ПривестиЗначение())) 
			КонецЕсли;
		КонецЦикла;
		Если Выборка.ТипЗначения.Типы().Количество() > 1 Тогда
			ЗаполнитьЗначенияСвойств(СвойстваПлюс.Добавить(), Новый Структура("Свойство, Значение", Выборка.Ссылка, Неопределено))
		КонецЕсли
	КонецЕсли
КонецЦикла;
Запрос = Новый Запрос; 
Запрос.Текст = 
"ВЫБРАТЬ
|	Свойства.Свойство КАК Свойство,
|	Свойства.Значение КАК Значение,
|	Свойства.НомерСтроки КАК НомерСтроки
|ПОМЕСТИТЬ Образец
|ИЗ
|	&СвойстваПлюс КАК Свойства
|
|ИНДЕКСИРОВАТЬ ПО
|	Свойство
|;
|
|////////////////////////////////////////////////////////////­////////////////////
|ВЫБРАТЬ
|	Характеристики.Ссылка КАК Характеристика
|ИЗ
|	Справочник.ХарактеристикиНоменклатуры КАК Характеристики
|		ЛЕВОЕ СОЕДИНЕНИЕ Справочник.ХарактеристикиНоменклатуры.ДополнительныеРеквизиты КАК Реквизиты
|			ЛЕВОЕ СОЕДИНЕНИЕ Образец КАК Образец
|			ПО Реквизиты.Свойство = Образец.Свойство
|				И Реквизиты.Значение = Образец.Значение
|		ПО Характеристики.Ссылка = Реквизиты.Ссылка
|
|СГРУППИРОВАТЬ ПО
|	Характеристики.Ссылка
|
|ИМЕЮЩИЕ
|	СУММА(ВЫБОР
|			КОГДА Реквизиты.Ссылка ЕСТЬ NULL 
|				ТОГДА 0
|			ИНАЧЕ ЕСТЬNULL(Образец.НомерСтроки, -0.000001)
|		КОНЕЦ) = &СуммаНомеров";

Запрос.УстановитьПараметр("СвойстваПлюс",  СвойстваПлюс); 
Запрос.УстановитьПараметр("СуммаНомеров", СвойстваПлюс.Итог("НомерСтроки")); 

НачДата=ТекущаяУниверсальнаяДатаВМиллисекундах(); 
Результат = Запрос.Выполнить(); 
КонДата=ТекущаяУниверсальнаяДатаВМиллисекундах();
Показать
38. krolya 287 14.01.13 10:09 Сейчас в теме
(34) ildarovich,

Так же прогнал тесты "запрещенного" препарата :)
Прикрепленные файлы:
2. Hany 25.12.12 12:34 Сейчас в теме
немного офф:
про псевдоновшество ТекущаяУниверсальнаяДатаВМиллисекундах.
функционал существовал во всех версиях 1С8:

ТекущаяУниверсальнаяДатаВМиллисекундах = (ТекущаяДата() - Дата(0001,01,01)) * 1000

по теме, отклоняясь от типовой конфы:
Если у организации часто и густо выполняется поиск по сочетанию свойств и их значений, то можно и извратиться, чтобы получить выигрыш во времени.
В конфигурацию в ТЧ можно было добавить текстовый реквизит ИндексСвойствоЗначение, куда записывать (в триггере ПриЗаписи) значение Свойство1+Значение1+... и т.д., получая строку, по которой было быстрее искать/соединять и прочее.

В целом - статья супер, побольше б таких здесь, разобрала все запросы с большим удовольствием. Спасибо автору!
3. Трактор 1191 25.12.12 13:43 Сейчас в теме
(2) Hany,
куда записывать (в триггере ПриЗаписи) значение Свойство1+Значение1+... и т.д., получая строку

Кривое решение. Если изменится представление свойства или значения, то ключ станет недействительным. Если так делать, то надо ещё запрещать изменения в справочнике свойств и всех таблицах, которые могут выступать в качестве значений. Дофигища запретов.

Суть задания в проверке умения писать запросы. Хорошее задание.

Хотелось бы ещё увидеть решение от составителей задачи.
9. Serj1C 477 26.12.12 09:05 Сейчас в теме
(2) Hany,
ТекущаяУниверсальнаяДатаВМиллисекундах()	= 63 492 116 654 638
(ТекущаяДата() - Дата(0001,01,01)) * 1000	= 63 492 116 654 000

какие-то тут округленные миллисекунды
krolya; ildarovich; +2 Ответить
10. Hany 26.12.12 12:04 Сейчас в теме
(9) Serj1C, да, вы правы, по формуле рассчитываются только секунды.
Поясню, почему я так подумала. В публикации с пом. метода ТекущаяУниверсальнаяДатаВМиллисекундах() рассчитывается длительность выполнения запроса. Я для таких же целей пользуюсь формулой, поэтому и привела ее здесь. Прошу меня извинить сообщество и автора за дезинформацию:)
11. krolya 287 26.12.12 19:24 Сейчас в теме
Во-первых, всем, спасибо за комментарии!

(2) Hany,
Действительно ТекущаяДата() меряет только секунды, поэтому сравнивать методы неправильно :)

(3) Трактор,
Мы сделаем следующим образом. Я эту задачку дам нашим экспертам для решения с теми же условиями и проведу замеры выполнения их решений :) Договорились? Постараемся на этой неделе организовать.

(6) ildarovich,
Решения с количеством получаются быстрее, но смысл задачки именно в алгоритме. Я думаю вполне возможно придумать задачу, где по количеству уже нельзя сравнивать, а только по содержанию.

2 all: насколько интересны такие конкурсы? я думаю, что мы вполне можем организовывать подобные конкурсы с некоторой регулярностью.
Трактор; +1 Ответить
12. Трактор 1191 26.12.12 23:21 Сейчас в теме
(11) krolya,
насколько интересны такие конкурсы?

Очень интересны.
13. ildarovich 6763 27.12.12 13:40 Сейчас в теме
(11) Конкурсы очень интересны. Тем более с такими задачами (богатыми вариантами решений).

Статья классная. Много ссылок, рисунков, новой и интересной информации, которую нужно еще будет рассмотреть внимательно, а не по-диагонали.

Некоторую неудовлетворенность вызывает то, что рассмотрены не все возможные варианты (готов добавить пару) и не назван правильный.
В результате люди, которые привыкли "выстрелить, перезарядить, и еще раз выстрелить, а не светить фонариком и спрашивать: - "Кто там?"" и не выстрелили и при свете Вашего фонарика так и не узнали: "кто там?".

Вариант 5 ... коррелированные запросы ну очень медленно работают на файловых базах (видимо, поэтому редко встречаются в типовых). И их, кажется, нужно тестировать особо: на первом запросе (для соответствия практике), а не по среднему из трех лучших из 10-ти. Результаты бывают очень разными и не в пользу коррелированных запросов. Впрочем, это нужно еще перепроверить.
14. krolya 287 27.12.12 15:02 Сейчас в теме
(13) ildarovich,

Спасибо за отзыв, верного решения специально не называю, так как абсолютного верного решения нет. У каждого решения свои плюсы и минусы, какие-то решения работают быстрее, какие-то медленнее.

Замер для статьи я проводил всего один-два раза, а для определения официального победителя несколько раз (около 9-10 запусков и выбором трех минимальных).

Количество решений рассмотренных ограниченно 5, так как очень много времени уходит на разбор каждого решения и оформление этого в статью, но если сообществу интересно готов рассмотреть и дополнить предложенные решения - прогнать на тестовой базе и проинспектировать в профайлере. Отправляйте решения на alkorolev@1cbit.ru - посмотрю обязательно.

Решение от разработчиков не выкладываю, так как оно по сути совпадает с одним из рассмотренных.
4. Yashazz 2889 25.12.12 13:54 Сейчас в теме
Я такие вещи делал, компонуя запрос в цикле по значениям характеристик... Попробую найти и выложить, если интересно. Получалось громоздко, но экономично.
5. gr0ck 25.12.12 15:41 Сейчас в теме
Посмотрю запросики. А так спасибо за задачки, интересно иногда порешать что-то такое, мозг размять :)
Жду еще задачек)
6. ildarovich 6763 25.12.12 16:46 Сейчас в теме
Интересно узнать, а насколько решения, использующие запрещенные условиями сравнения на количества строк, выигрывают у победителей на тестовых примерах? - То есть не делают ли эти ограничения задачу "надуманной", далекой от практики?
7. Трактор 1191 25.12.12 16:54 Сейчас в теме
(6) ildarovich,
То есть не делают ли эти ограничения задачу "надуманной", далекой от практики?

Делают. Я производительность не мерял, но при использовании количества свойств запрос получается гораздо проще.
8. ASchekachev 121 25.12.12 16:54 Сейчас в теме
(6) ildarovich, для решения реальной задачи с большими объемами, конечно же такую задачу нужно решать другими способами, как минимум с доработкой типового решения. В рамках этой задачи, ограничение по количеству строк было сделано осмысленно, для усложнения алгоритма запроса. Таким образом мы оценивали два момента: первый, алгоритм. Второй, оптимальность в рамках выбранного алгоритма.

Текст запроса при сравнении на количество строк получается гораздо проще и производительней.
15. krolya 287 27.12.12 20:31 Сейчас в теме
Ну вот и подоспели первые результаты наших экспертов ;) Автор решения: Александр Давыдов. Кстати для верности я готов выслать обработки для тиражирования характеристик, чтобы любой желающий мог проверить приведенные цифры.

СписокПустыхЗначений = Новый СписокЗначений;
МассивТипов = Новый Массив(1);
Для каждого
Тип Из Метаданные.ПланыВидовХарактеристик.ДополнительныеРеквизитыИСведения.Тип.Типы() Цикл
Если
Тип = Тип("Булево") Тогда
Продолжить;
// Для типа булево нет пустых значений
КонецЕсли;
МассивТипов[0] = Тип;
ОписаниеТипа = Новый ОписаниеТипов(МассивТипов);
СписокПустыхЗначений.Добавить(ОписаниеТипа.ПривестиЗначение());
КонецЦикла;
СписокПустыхЗначений.Добавить(Неопределено);

Запрос = Новый Запрос;
Запрос.Текст =
"ВЫБРАТЬ
| Свойства.Свойство КАК Свойство,
| Свойства.Значение КАК Значение
|ПОМЕСТИТЬ ЗаданныеСвойства
|ИЗ
| &Свойства КАК Свойства
|
|ИНДЕКСИРОВАТЬ ПО
| Свойство
|;
|
|////////////////////////////////////////////////////////////­////////////////////
|ВЫБРАТЬ
| ВложенныйЗапрос.Ссылка КАК Характеристика
|ИЗ
| (ВЫБРАТЬ
| ВложенныйЗапрос.Ссылка КАК Ссылка,
| ВложенныйЗапрос.Свойство КАК Свойство,
| СУММА(ВложенныйЗапрос.СвойствоПодходит) КАК СвойствоПодходит
| ИЗ
| (ВЫБРАТЬ
| ХарактеристикиНоменклатуры.Ссылка КАК Ссылка,
| Свойства.Свойство КАК Свойство,
| 1 КАК СвойствоПодходит
| ИЗ
| Справочник.ХарактеристикиНоменклатуры КАК ХарактеристикиНоменклатуры,
| ЗаданныеСвойства КАК Свойства
|
| ОБЪЕДИНИТЬ ВСЕ
|
| ВЫБРАТЬ
| ХарактеристикиНоменклатурыДополнительныеРеквизиты.Ссылка,
| ХарактеристикиНоменклатурыДополнительныеРеквизиты.Свойство,
| ВЫБОР
| КОГДА ЗаданныеСвойства.Значение = ХарактеристикиНоменклатурыДополнительныеРеквизиты.Значение
| ТОГДА 1
| ИНАЧЕ 0
| КОНЕЦ
| ИЗ
| Справочник.ХарактеристикиНоменклатуры.ДополнительныеРеквизиты КАК ХарактеристикиНоменклатурыДополнительныеРеквизиты
| ЛЕВОЕ СОЕДИНЕНИЕ ЗаданныеСвойства КАК ЗаданныеСвойства
| ПО ХарактеристикиНоменклатурыДополнительныеРеквизиты.Свойство = ЗаданныеСвойства.Свойство
| ГДЕ
| НЕ ХарактеристикиНоменклатурыДополнительныеРеквизиты.Значение В (&СписокПустыхЗначений)) КАК ВложенныйЗапрос
|
| СГРУППИРОВАТЬ ПО
| ВложенныйЗапрос.Ссылка,
| ВложенныйЗапрос.Свойство) КАК ВложенныйЗапрос
|
|СГРУППИРОВАТЬ ПО
| ВложенныйЗапрос.Ссылка
|
|ИМЕЮЩИЕ
| МИНИМУМ(ВложенныйЗапрос.СвойствоПодходит) = 2"
;


Запрос.УстановитьПараметр("Свойства", Объект.Свойства.Выгрузить());
Запрос.УстановитьПараметр("СписокПустыхЗначений", СписокПустыхЗначений);

НачДата=ТекущаяУниверсальнаяДатаВМиллисекундах();
Результат = Запрос.Выполнить();
КонДата=ТекущаяУниверсальнаяДатаВМиллисекундах();



Ну и как результат - см. скриншоты

PS Кто меньше? :))))
Прикрепленные файлы:
16. awa 2509 27.12.12 22:41 Сейчас в теме
Мое решение в статье приведено первым. Согласен, не оптимально, но, как мне кажется, оно единственное удовлетворяет условиям конкурса. Очень удивлен, что рассматривается только скорость выполнения, планы запросов и т.д. Но, такое впечатление, что правильность результатов никто не проверял. А зачем нужно быстрое решение, выдающее неверный ответ?
Выполняя задание, я сделал в базе несколько характеристик для проверки. С разными наборами свойств характеристик и их значений, в том числе с разными пустыми значениями свойств (Неопределено, пустые ссылки некоторых справочников). Теперь же, после публикации решений, я взял все решения и проверил их так, как проверял свое решение.

Первая проверка - что если мы не зададим ни одной характеристики? Очевидно, по условиям конкурса, мы должны найти все характеристики без свойств вообще или только имеющие свойства с пустыми значениями. Результаты проверки всех решений в прикрепленном файле Проверка1.png

Вторая проверка - задаем значения двух свойств, причем в базе есть несколько характеристик, удовлетворяющих условиям, некоторые с пустыми значениями свойств. Результат в прикрепленном файле Проверка2.png

Номера обработок соответствуют номерам решений в статье, номер 6 - это решение из поста (15). Кстати, в этом решении позаимствован кусок кода из моего решения (формирование списка пустых значений), а значит решение было сделано глядя на остальные решения, и тем не менее, оно тоже, имхо, ошибочно.

Считаю проведение конкурса не до конца подготовленным. Сама идея конкурсов великолепна, но требуется более внимательно и аккуратно формировать условия и проверять результаты.
Прикрепленные файлы:
mpudy; krolya; ildarovich; Трактор; +4 Ответить
25. krolya 287 29.12.12 22:26 Сейчас в теме
Всем, добрый вечер. Отвечаю нерегулярно, так как нахожусь в отпуске. Итак,

(16) awa,

Спасибо за правильный и верный комментарий. Я оценивал на правильность решения по своим тестам, ваши тесты оказались правильней и корректней. Так как ваше решение оказалось максимально правильным, то мы приняли решение наградить вас главным призом конкурса и вручить вам книгу "Профессиональная разработка в системе 1С:Предприятия 8". Прошу сообщить мне в личку - как лучше вам доставить книгу: курьером или заберете лично. Поздравляем!
21. sapervodichka 29.12.12 17:09 Сейчас в теме
22. romansun 189 29.12.12 17:37 Сейчас в теме
(21)

&КоличествоСвойствПоиска

не, анализ на количество строк по условиям конкурса недопустим


нельзя использовать сравнение на количество строк
23. sapervodichka 29.12.12 17:45 Сейчас в теме
(22) romansun, посмотри "на количество строк недопустим" - 1) это значит нельзя передавать в параметры запроса количество строк в таблице свойсв (это у меня сделано); 2) Или нельзя отбирать характеристики по количеству строк в ТЧ Дополнительные свойства (я это не использовал)?
24. romansun 189 29.12.12 20:10 Сейчас в теме
(23) ну, тут всё просто, можно перефразировать так - нельзя в запрос передавать никакой информации про количество чего-либо :)
27. krolya 287 29.12.12 22:36 Сейчас в теме
(24) romansun,

Вы правы. По условиям задачи сравнение на количество свойств не допустимо.
30. abc2000 80 11.01.13 00:37 Сейчас в теме
Решение 1-го Бита из (15), можно тоже признать не прошедшим конкурс. Пустые значения проверили, хотя в задании это не было явно оговорено, а про двойников забыли ?
Прикрепленные файлы:
17. romansun 189 27.12.12 23:41 Сейчас в теме
отличная статья, отличный конкурс!!

P.S. заделаем свой 1C-ный sql-ex.ru? ;)
18. romansun 189 28.12.12 12:44 Сейчас в теме
а можно выложить тестовую базу с данными куда-нить?

ну или обработки для тиражирования характеристик
26. krolya 287 29.12.12 22:30 Сейчас в теме
(18) romansun,

Базу выложить я не могу, так как база типовая УТ 11. А вот обработки для тиражирования характеристики пожалуйста.

Код для заполнения обработки для теста:

&НаСервере
Процедура ПриСозданииНаСервере(Отказ, СтандартнаяОбработка)
Характеристика = Справочники.ХарактеристикиНоменклатуры.НайтиПоНаименованию("Сто свойств");
Запрос = Новый Запрос;
Запрос.Текст =
"ВЫБРАТЬ
| ХарактеристикиНоменклатурыДополнительныеРеквизиты.Свойство,
| ХарактеристикиНоменклатурыДополнительныеРеквизиты.Значение
|ИЗ
| Справочник.ХарактеристикиНоменклатуры.ДополнительныеРеквизиты КАК ХарактеристикиНоменклатурыДополнительныеРеквизиты
|ГДЕ
| ХарактеристикиНоменклатурыДополнительныеРеквизиты.Ссылка = &Ссылка";
Запрос.УстановитьПараметр("Ссылка", Характеристика);

//Выборка = .Выбрать();
Объект.Свойства.Загрузить(Запрос.Выполнить().Выгрузить());

КонецПроцедуры
Прикрепленные файлы:
СозданиеХарактеристики.epf
ТиражированиеХарактеристики.epf
19. sapervodichka 29.12.12 16:48 Сейчас в теме
Коллеги, не совсем понял ограничения задачи (уточните, пожалуйста), иначе я бы так сделал.

См. ниже:
Таблицу поиска помещаем по временную таблицу, количество свойств поиска задаем в параметре. Делать левое соединение с таблицей допсвойств зарактеристик, где совпадение получает +1, а какое-то другое свойство -1. Группируем по ссылке на характеристику, получая показатель АнализСвойств.
Добавляем условие. В итоге получаем только нужные характеристики. (Для нужной характеристики значение показателя АнализСвойств будет равно количеству свойств поиска, а для неподходящих характеристик - не будет равно.)

Запрос = Новый Запрос;
Запрос.УстановитьПараметр("СвойстваПоиска", Объект.Свойства.Выгрузить());
Запрос.УстановитьПараметр("КоличествоСвойствПоиска", Объект.Свойства.Количество());

Запрос.Текст = "ВЫБРАТЬ
| СвойстваПоиска.Свойство КАК Свойство,
| СвойстваПоиска.Значение КАК Значение
|ПОМЕСТИТЬ ВТСвойстваПоиска
|ИЗ
| &СвойстваПоиска КАК СвойстваПоиска
|
|ИНДЕКСИРОВАТЬ ПО
| Свойство,
| Значение
|;
|
|////////////////////////////////////////////////////////////­////////////////////
|ВЫБРАТЬ
| ВложенныйЗапрос.Ссылка,
| ВложенныйЗапрос.АнализСвойств
|ИЗ
| (ВЫБРАТЬ
| ХарактеристикиНоменклатурыДополнительныеРеквизиты.Ссылка КАК Ссылка,
| СУММА(ВЫБОР
| КОГДА ВТСвойстваПоиска.Значение ЕСТЬ NULL
| ТОГДА -1
| ИНАЧЕ 1
| КОНЕЦ) КАК АнализСвойств
| ИЗ
| Справочник.ХарактеристикиНоменклатуры.ДополнительныеРеквизиты КАК ХарактеристикиНоменклатурыДополнительныеРеквизиты
| ЛЕВОЕ СОЕДИНЕНИЕ ВТСвойстваПоиска КАК ВТСвойстваПоиска
| ПО ХарактеристикиНоменклатурыДополнительныеРеквизиты.Значение = ВТСвойстваПоиска.Значение
| И ХарактеристикиНоменклатурыДополнительныеРеквизиты.Свойство = ВТСвойстваПоиска.Свойство
|
| СГРУППИРОВАТЬ ПО
| ХарактеристикиНоменклатурыДополнительныеРеквизиты.Ссылка) КАК ВложенныйЗапрос
|ГДЕ
| ВложенныйЗапрос.АнализСвойств = &КоличествоСвойствПоиска";

НачДата = ТекущаяУниверсальнаяДатаВМиллисекундах();
Результат = Запрос.Выполнить();
Сообщить("Время выполнения - "+ТекущаяУниверсальнаяДатаВМиллисекундах() - НачДата + " миллисекунд");
20. sapervodichka 29.12.12 17:07 Сейчас в теме
Я просто предлогаю свое решение как очень простое. Смотрю у уважаемых колег решения все незаурядные. Цель теста клиентоориентированая была или для проверки смекалки?
28. abc2000 80 04.01.13 03:06 Сейчас в теме
1-ым БИТовцам в копилку:

Декартово произведение - построение новой таблицы из 2-ух или более исходных путем включения в нее строк, образованных всеми возможными вариантами конкатенации (слияния) строк исходных таблиц. Количество строк новой таблицы определяется как произведение количеств строк всех исходных таблиц.

Декартово произведение это Cross Join, ну никак не Левое Соединение.
36. krolya 287 14.01.13 09:39 Сейчас в теме
(28) abc2000,

left join без дополнительных условий, т.е. "по ИСТИНА" де юре не является декартовым произведением, зато де факто является :) Т.е. по факту получается как раз перемножение двух таблиц.
40. abc2000 80 14.01.13 12:32 Сейчас в теме
(36) krolya,
Разбор решения №4. Там, например нет "Левое соединение по истина"
А так, в общем то выкрутились.;) Вот вы 1Сники все такие - скользкие типы.:)
29. a.komratov 10.01.13 11:57 Сейчас в теме
Добрый день,

1) по поводу индексирования временных таблиц. Этот вопрос у меня возник во время выполнения задания, но решил я его в пользу "не индексировать", т.к. не мог сообразить, что больше времени займёт: индексирование временной таблицы или перебор в результирующем запросе. И посчитал, что перебор в результирующем запросе будет всего один раз, поэтому индекс строить не стал. Хотя посмотреть, как будет себя вести индексированный вариант интересно.

2) Решение эксперта из ПервогоБита понравилось.
43. awa 2509 20.03.13 14:32 Сейчас в теме
Огромное спасибо компании «1С:Первый БИТ» и лично Алексею Королеву за шикарный приз!
Оставьте свое сообщение

См. также

Описание формата внутреннего представления данных 1С в контексте обмена данными 150

Статья Программист Внешняя обработка (ert,epf) v8 v8::УФ 1cv8.cf Абонемент ($m) Практика программирования Внешние источники данных Разработка

Фирма 1С не рекомендует использовать внутреннее представление данных для любых целей, которые отличны от обмена с 1С:Предприятием 7.7. Но сама возможность заглянуть на "внутреннюю кухню" платформы с помощью функций ЗначениеВСтрокуВнутр(), ЗначениеВФайл(), ЗначениеИзСтрокиВнутр() и ЗначениеИзФайла(), дала возможность сообществу программистов 1С разработать новые приемы разработки и анализа. Так, именно на использовании внутреннего представления был построен алгоритм "быстрого массива", который позволяет практически мгновенно создать массив в памяти на основании строки с разделителями. С помощью разбора внутреннего представления можно "на лету" программным кодом выполнить анализ обычной формы и даже сделать редактор графической схемы. Во внутреннем формате сохраняют свои данные между сеансами различные популярные внешние обработки. А еще это возможность сделать быстрый обмен с внешними системами.

1 стартмани

06.09.2019    5621    5    Dementor    27       

Вам нравятся запросы в 1С? 14

Инструменты и обработки Программист Конфигурация (md, cf) v8 v8::Запросы 1cv8.cf Абонемент ($m) Практика программирования Разработка

Речь не только о том, что простейший запрос с "легальным" оформлением растянется на пол-экрана, речь еще обо всем, что нужно написать "в нагрузку" к тексту запроса. Все эти "Новый Запрос", "УстановитьПараметр" и последующие пляски с обработкой результата... Пора с этим заканчивать!

1 стартмани

03.07.2019    10534    1    m-rv    79       

1С:Ассемблер. Немного летнего веселья! 304

Статья Программист Внешняя обработка (ert,epf) v8 1cv8.cf Абонемент ($m) Практика программирования Разработка

Все вы, наверное, слышали, что 1С-ники жалуются на свою систему, считая язык 1С недостаточно низкоуровневым, скучным и т.п. Все они с тоской поглядывают в сторону "настоящих" языков программирования. Так вот, господа, они неправы. В системе 1С есть места, где можно размять программерский мозг и получить удовольствие от низкоуровневой техники. Предлагаю вам погрузиться в недра виртуальной машины 1С и понять, как она работает. Там есть свой "ассемблер" и мы попробуем его в действии!

1 стартмани

21.06.2019    14973    46    Evil Beaver    112       

Простые примеры сложных отчетов на СКД 262

Статья Программист Архив с данными v8 v8::СКД 1cv8.cf Абонемент ($m) Практика программирования

Подписи в отчете. Особенности соединения наборов: как соединить несоединяемое. Остатки на дату и обороты по месяцам в одном отчете. Курс валюты на каждую дату без группировок и соединений в запросе. Отчет с произвольными колонками и с произвольной последовательностью. "Неадекватный отчет".

1 стартмани

12.06.2019    14121    11    Hatson    22       

Безопасная работа с транзакциями во встроенном языке 187

Статья Программист Конфигурация (md, cf) v8 1cv8.cf Абонемент ($m) Практика программирования Разработка

Разбираемся с опасностями использования транзакций во встроенном языке 1С. Познаем ошибку "В данной транзакции уже происходили ошибки". Учимся защищаться от них.

1 стартмани

25.03.2019    15583    7    tormozit    35       

Баг или фича? Неожиданное поведение платформы 167

Статья Системный администратор Программист Конфигурация (md, cf) v8 1cv8.cf Абонемент ($m) Практика программирования Тестирование и исправление Разработка

Рассмотрим несколько случаев неожиданного поведения платформы 1С, а также что с этим можно cделать.

18.02.2019    12964    31    YPermitin    88       

Коннектор: удобный HTTP-клиент для 1С:Предприятие 8 539

Инструменты и обработки Программист Конфигурация (md, cf) v8 1cv8.cf Абонемент ($m) Практика программирования Внешние источники данных WEB Универсальные функции Инструментарий разработчика Универсальные обработки

Коннектор - библиотека для работы с HTTP запросами. Библиотека берет на себя всю рутину работы с HTTP запросами. Буквально в одну строку можно получать данные, отправлять, не заботясь о необходимости конструирования URL, кодирования данных и т.п.

1 стартмани

31.01.2019    28420    266    bonv    110       

HTML в новой версии 8.3.14 на примере 3-х JavaScript библиотек: AmCharts, HighCharts, DHTMLX 171

Статья Программист Внешняя обработка (ert,epf) v8 1cv8.cf Абонемент ($m) Универсальные обработки Практика программирования Разработка

Тестируем возможности HTML в новой версии 8.3.14 платформы на примере 3-х JavaScript библиотек: AmCharts, HighCharts, DHTMLX.

1 стартмани

29.01.2019    14434    66    Synoecium    37       

Отладка сложных отчетов на СКД 139

Отчеты и формы Программист Расширение (cfe) v8 v8::СКД 1cv8.cf Россия Абонемент ($m) Практика программирования

Расширение для отладки сложных отчетов на СКД (в т.ч. для собираемых программно "на лету") и быстрого перехода к отладке таких отчетов в консоли запросов и отчетов на СКД.

1 стартмани

28.12.2018    14697    58    maxx    56       

Реализация простого http-сервиса "Просмотр карточки номенклатуры(товара) в браузере" 144

Статья Программист Конфигурация (md, cf) v8 1cv8.cf Абонемент ($m) Практика программирования

Практический пример реализации простого http-сервиса средствами 1С Предприятие 8.3. Обеспечивает просмотр списка товаров и просмотр данных товара в браузере.

1 стартмани

07.12.2018    14010    10    dmitry1975    31       

Использование подсистемы БСП "Заполнение объектов" 135

Статья Программист Расширение (cfe) v8 v8::УФ 1cv8.cf Россия Абонемент ($m) Практика программирования Универсальные функции БСП (Библиотека стандартных подсистем)

Применение механизмов БСП для добавления новых команд заполнения к формам различных объектов. Использование расширений конфигурации для доработки. Шаблоны для реализации собственных команд заполнения.

1 стартмани

23.11.2018    14086    8    ids79    22       

Работа с публикациями "Инфостарт" 14

Инструменты и обработки Программист Архив с данными v8 УУ Абонемент ($m) Практика программирования О сообществе WEB

Работа с рублевыми публикациями на сайте "Инфостарт": ведение клиентов, заказов, обновление файлов публикации, рассылка обновлений.

1 стартмани

13.09.2018    9636    10    RocKeR_13    16       

HTTP Сервисы: Путь к своему сервису. Часть 3 134

Инструменты и обработки Системный администратор Программист Расширение (cfe) v8 1cv8.cf Абонемент ($m) Инструментарий разработчика Практика программирования

Продолжение статьи «HTTP Сервисы: Путь к своему сервису. Часть 2». В предыдущих частях мы использовали только Get, в этой части поговорим о других методах и длительных операциях.

1 стартмани

27.08.2018    16773    32    dsdred    13       

Позиционирование в помещении с помощью нейросети по сигналу Wi-Fi. Интерактивная карта склада в 1С с показом позиции 65

Инструменты и обработки Программист Бизнес-аналитик Приложение (apk) v8 Windows Абонемент ($m) Инструментарий разработчика Практика программирования

Данная публикация содержит в себе редактор и интерактивную карту склада или иного помещения, на которой в реальном времени отображается позиция устройства, координаты которого вычисляются по уровням сигнала нескольких роутеров Wi-Fi. В статье и приложенным к ней разработкам предлагаются инструменты и методика для реализации вычисления точной геопозиции внутри помещений с помощью нейронной сети. Конфигурация написана на релизе 1С:Предприятие 8.3.12.1412, клиентское приложение имеет минимальный уровень совместимости SDK -16.

5 стартмани

09.08.2018    16105    23    informa1555    26       

Работа с данными выбора 40

Инструменты и обработки Программист Архив с данными v8 Россия Абонемент ($m) Практика программирования Работа с интерфейсом

В управляемом интерфейсе заложена мощная возможность описывать связи реквизитов формы через параметры. Установка параметров связей позволяет ограничить выбор данных так, чтобы целостность данных была обеспечена на этапе ввода. Однако без дополнительного программирования задать можно только самые простые связи. Такие условия связи, как зависимость от реквизита через точку или зависимость через дополнительное отношение, заданное в регистре сведений - уже задать без программирования не получится.

1 стартмани

17.07.2018    22325    13    kalyaka    15       

HTTP Сервисы: Путь к своему сервису. Часть 1 267

Статья Системный администратор Программист Расширение (cfe) v8 1cv8.cf Абонемент ($m) Практика программирования WEB

Уже много было написано про http-сервисы, но то и дело всплывают «Новые» статьи по обмену между базами V8 по COM, что «Немножко» удивляет. Решил внести свои 5 копеек, поработаем с http-сервисом.

1 стартмани

15.07.2018    39096    16    dsdred    22       

ВСТАВИТЬ В Справочник.Номенклатура (Код, Наименование) ЗНАЧЕНИЯ ("001", "Новый товар") 105

Инструменты и обработки Программист Внешняя обработка (ert,epf) v8 v8::Запросы 1cv8.cf Абонемент ($m) Практика программирования

Вас не обманывают ваши глаза, это запрос на изменение данных! И это работает без прямого доступа к БД, регистрации и смс.

1 стартмани

01.06.2018    20159    86    m-rv    57       

БСП: Дополнительная обработка (Регламенты), примеры от простого к сложному 240

Статья Программист Внешняя обработка (ert,epf) v8 1cv8.cf Абонемент ($m) Практика программирования БСП (Библиотека стандартных подсистем)

Очень много попадается странных решений, которые можно решить через БСП:Дополнительные отчеты и обработки. Я бы вообще БСП из-за этой подсистемы переименовал в «Большое Спасибо Программистам». Поработаем с подсистемой в части написания регламентных заданий.

1 стартмани

10.05.2018    28078    28    dsdred    34       

Как выполнить отчет на СКД через COM и получить данные отчета? 86

Статья Программист Архив с данными v8 УПП1 Россия Windows Абонемент ($m) Практика программирования

Для чего это нужно. Например, нужно в одной базе получить какой-либо показатель из другой базы. Этот показатель вычисляется в каком-либо сложном отчете, который написан на СКД. Можно, конечно, "скопипастить" текст запроса из другой базы, немного подправить его и выполнять в том же COM подключении. Но с этим теряется гибкость: если отчет изменился, то нужно помнить о том, что где-то есть его "немного модифицированная" копия. В статье будет рассмотрен пример получения данных из базы ЗУП.

2 стартмани

08.05.2018    18279    10    wowik    3       

Работа со схемой запроса 176

Статья Программист Конфигурация (md, cf) v8 v8::Запросы Абонемент ($m) Инструментарий разработчика Практика программирования

Стандартом взаимодействия с реляционной базой данных стал язык SQL. Приемником SQL в 1С является язык запросов. Язык запросов, также как и SQL, является структурированным. Составляющие структуры запроса отвечают на разные вопросы о том, какие данные требуется получить и какие манипуляции с множествами данных необходимо произвести при получении. В простых случаях текст запроса можно написать вручную, однако в сложных случаях, а также при программном формировании, - лучше воспользоваться объектной моделью запроса и использовать объект "Схема запроса". В статье дается описание объектной модели и особенностей работы с ней, а также приводится решение, упрощающее взаимодействие с объектом "Схема запроса".

1 стартмани

24.04.2018    28970    75    kalyaka    34       

Асинхронная запись и чтение файла без использования модальных методов и временных файлов 132

Статья Программист Внешняя обработка (ert,epf) v8 1cv8.cf Абонемент ($m) Практика программирования

В статье рассмотрено решение задачи формирования и записи файла на основе данных информационной базы. Формирование происходит на стороне сервера с помощью механизма потоков. Используются асинхронные методы передачи файлов между клиентом и сервером. Также рассмотрено решение обратной задачи - чтение файла и запись его данных в информационную базу. Статья ориентирована прежде всего на новичков, также приведенный код может использоваться в качестве шаблона.

1 стартмани

10.04.2018    19213    17    Alxby    23       

Заполняем по шаблону (по умолчанию) 68

Инструменты и обработки Программист Архив с данными v8 v8::УФ 1cv8.cf Абонемент ($m) Практика программирования

Простой в подключении, универсальный и достаточно удобный механизм заполнения реквизитов произвольных документов/справочников значениями по умолчанию. Реализован в расширении, но может быть и непосредственно включен практически в любую конфигурацию на управляемых формах простым копированием одной формы и двух команд. Весь код в статье.

1 стартмани

08.02.2018    18130    20    mvxyz    17       

Бесплатная проверка контрагентов в ФНС (общий модуль с алгоритмом). На примере выводим статус в список справочника контрагентов 124

Статья Программист Конфигурация (md, cf) v8 1cv8.cf Абонемент ($m) Практика программирования

Если вам интересно проверить контрагенте в ФНС, вам поможет данная публикация. Весь алгоритм работы строится на основе данных, полученных с сервиса http://npchk.nalog.ru совершенно бесплатно.

1 стартмани

01.02.2018    25569    62    rpgshnik    46       

Расширение возможностей печати: Вывод произвольного нижнего и верхнего колонтитула 8

Отчеты и формы Программист Внешняя обработка (ert,epf) v8 1cv8.cf Абонемент ($m) Печатные формы документов Практика программирования Универсальные функции

Расширяем функционал вывода нижнего / верхнего колонтитула. Стандартно 1С имеет достаточно ограничений по выводу и наполнению колонтитулов содержимым, взять хотя бы такие, как вывод только текста и отсутствие ограничения на номер конечной страницы. А при разработке кода сталкиваешься с тем, что свой блок с нижним колонтитулом нужно прижимать к низу страницы. Казалось бы быстро решаемый вопрос, но и в нем есть нюансы. Сейчас я расскажу о том, как решалась эта задача. UPD 15.02.2018. Добавлен вывод верхнего колонтитула; Вывод колонтитулов на первой и последней странице управляется параметрами; Научился считать страницы: Добавлено заполнение переменных аналогичных стандартным из колонтитулов; Задаются форматы даты и времени. Ограничения прежние: 1. Повторно сформировать табличный документ после смены параметров страницы интерактивно.; 2. Передавать данные для более плотной печати как можно более мелко нарезанными кусками.

1 стартмани

29.12.2017    23304    21    agent00mouse    0       

Практика доступа в базу 1С через протокол oData. Чтение данных 285

Статья Системный администратор Программист Бизнес-аналитик Внешняя обработка (ert,epf) v8 1cv8.cf Абонемент ($m) Сервисные утилиты Практика программирования Администрирование данных 1С

Для чего нужен доступ в базу 1С через REST-интерфейс по протокол oData? Как его организовать? Как не будучи гуру в JavaScript и .NET получить быстрый визуальный доступ к данным базы 1С? Попробую дать ответ на эти вопросы и прокомментирую некоторые нюансы, с которыми я столкнулся.

1 стартмани

11.12.2017    59403    252    Dementor    44       

Печатная форма, сделанная как расширение конфигурации для БП 3.0. Новые возможности БСП 26

Инструменты и обработки Программист Расширение (cfe) v8 БП3.0 Абонемент ($m) Практика программирования Универсальные печатные формы

Печатные формы на внешних обработках скоро канут в лету. На смену им приходят ПФ, реализованные в виде расширений конфигурации. Не нашел на сайте примеров таких расширений. Привожу пример подобного расширения для БП 3.0.

1 стартмани

06.12.2017    18799    52    kwazi    6       

Простой бесплатный DashBoard с помощью http сервиса 257

Статья Программист Конфигурация (md, cf) v8 Абонемент ($m) Практика программирования

Как создать свой DashBoard без дополнительных затрат и сложных технических доработок.

1 стартмани

25.11.2017    44675    59    dewersia    32       

Полезный код для программистов 1С (часть 1). Управление свойствами элементов формы. Хранение копии данных реквизитов 141

Статья Программист Архив с данными v8 Абонемент ($m) Инструментарий разработчика Практика программирования

У каждого программиста за время работы накапливается полезный инструментарий, которым он привык пользоваться. Естественно и у меня он тоже имеется. И вот решено было немного поделиться с сообществом. Возможно идеи не новые. Более того, допускаю, что реализованы они не самым оптимальным образом. Но ведь для этого сообщество и существует, чтобы делиться с ним, получая обратную связь.

1 стартмани

24.09.2017    32538    17    vandalsvq    80       

Telegram-боты 149

Инструменты и обработки Программист Архив с данными v8 Абонемент ($m) Практика программирования

Описание теории, разбор архитектуры и пример реализации telegram-ботов. Сразу скажу, со структурированием изложения мало что могу поделать. :) редакция от 18.07.2018 Правки последней редакции выделены жирным.

1 стартмани

01.09.2017    22765    119    PLAstic    45       

Макеты СКД 286

Статья Программист Внешний отчет (ert,erf) v8 v8::СКД 1cv8.cf Абонемент ($m) Практика программирования

Рассмотрены некоторые типовые задачи, которые решаются с помощью предопределенных макетов, а также перечислены несколько случаев, для которых макеты не подходят

1 стартмани

25.07.2017    71316    109    json    25       

Расширения конфигураций 1С: учимся перехватывать методы 112

Инструменты и обработки Программист Расширение (cfe) v8 v8::УФ 1cv8.cf Абонемент ($m) Практика программирования

В этой статье я на примерах разберу некоторые механизмы расширений конфигураций 1С. А именно «перехваты» методов модуля объекта и «перехваты» событий формы и элементов формы. Данная статья написана с учебными целями, чтобы показать, как при помощи расширений конфигурации можно делать такие доработки, ради которых раньше приходилось снимать конфигурацию с поддержки.

1 стартмани

30.05.2017    85909    14    signum2009    45       

Многопоточность. Универсальный «Менеджер потоков» (фреймворк) с отслеживанием зависимости объектов 176

Статья Программист Архив с данными v8 1cv8.cf Россия Абонемент ($m) Практика программирования Математика и алгоритмы Универсальные функции Производительность и оптимизация (HighLoad)

Восстановление партий, расчет зарплаты, пакетное формирование документов или отчетов - теперь все это стало доступнее. * Есть желание повысить скорость работы медленных алгоритмов! Но... * Нет времени думать о реализации многопоточности? * о запуске и остановке потоков? * о поддержании потоков в рабочем состоянии? * о передаче данных в потоки и как получить ответ из потока? * об организации последовательности? Тогда ЭТО - то что надо!!!

26.05.2017    39718    168    DarkAn    86       

Регулярные выражения – это просто. Построитель и отладчик регулярных выражений 181

Инструменты и обработки Программист Архив с данными v8 1cv8.cf Абонемент ($m) Инструментарий разработчика Практика программирования

Предлагается к использованию построитель регулярных выражений. Выполненный в виде внешней обработки, он позволит строить сложно-структурированные выражения на основе параметрического описания, тестировать их, и в результате получить программный код 1С.

1 стартмани

13.03.2017    23243    112    romasna    47       

Несколько шаблонов для доработки типовых конфигураций 174

Инструменты и обработки Программист Конфигурация (md, cf) v8 v8::УФ Абонемент ($m) Практика программирования Инструментарий разработчика

Предлагаю несколько каркасов для создания новых объектов в типовых конфигурациях. Это выжимка из кода нескольких конфигураций, которая позволит быстро и красиво создавать и дорабатывать объекты метаданных с соблюдением идеологии исходной системы

1 стартмани

03.10.2016    28626    102    json    25       

Простой способ индексирования интервалов 182

Статья Программист Конфигурация (md, cf) v8 Абонемент ($m) Практика программирования

Предлагается простой способ индексирования интервалов для решения задач выборки записей, включающих заданный момент времени, пересекающихся с заданным интервалом или множеством интервалов. Способ основан на добавлении к исходной таблице особого числового индексированного поля, рассчитываемого по специальной формуле. Приведен код функций, необходимых для расчетов поля поиска и параметров поисковых запросов. Приведены также результаты тестирования метода, доказывающие его высокую эффективность.

1 стартмани

28.09.2016    32528    39    ildarovich    22       

1С: Предприятие + корпоративный чат, как наладить оперативные уведомления за 10 минут 61

Инструменты и обработки Системный администратор Программист Компонента, плагин (dll, vbs,..) v8 Windows Абонемент ($m) Практика программирования

Как сделать автоматические уведомления о разных событиях из 1С в корпоративный чат MyChat для сотрудников компании

1 стартмани

14.08.2016    39120    35    Demanoidos    60       

Хранение файлов в томах на диске (для УПП 1.3) 77

Инструменты и обработки Программист Архив с данными v8 УПП1 Windows Абонемент ($m) Практика программирования

Доработка типовой УПП 1.3 в плане хранения присоединенных файлов вне базы данных

2 стартмани

05.06.2016    44866    4    wowik    27       

БСП 2.3 и БСП 3.0: Просто про выполнение внешней обработки в фоне (c индикацией прогресса выполнения) 187

Инструменты и обработки Программист Внешняя обработка (ert,epf) v8 1cv8.cf Windows Абонемент ($m) Инструментарий разработчика Практика программирования БСП (Библиотека стандартных подсистем)

Простое пояснение о том, как сделать внешнюю обработку с фоновым выполнением и индикацией процесса для любой конфигурации на основе БСП 2.3.2. UPDATE 20/09/19: добавлен вариант обработки с индикацией процента выполнения и статусом выполнения для БСП 3.0.

1 стартмани

18.05.2016    47436    140    rozer    52       

Остатки на каждый день в запросе 34

Инструменты и обработки Программист Внешняя обработка (ert,epf) v8 1cv8.cf УУ Windows Учет ТМЦ Абонемент ($m) Практика программирования

Запрос формирует остатки товаров на каждый день в пределах выбранного периода.

1 стартмани

26.04.2016    36128    19    arakelyan    17       

Выполнение JavaScript кода из 1С в объекте Поле HTML Документа (HTML 5) и вызов события в 1С ПриНажатии 152

Инструменты и обработки Программист Внешняя обработка (ert,epf) v8 1cv8.cf Россия Windows Абонемент ($m) Практика программирования

Пример выполнения JS кода из 1С в Поле HTML Документа под управляемыми формами, с удобным получением результата в 1С(С помощью вызова привязанного события ПриНажатии к элементу ПолеHTMLДокумента)

1 стартмани

22.03.2016    62336    137    igo1    50       

Количество дней недели (понедельников/вторников/...) в заданном диапазоне одним запросом 29

Инструменты и обработки Программист Внешняя обработка (ert,epf) v8 Абонемент ($m) Практика программирования

При реализации периодического авто-заполнения маршрутных листов по графику (недельному) необходимо было просчитать стоимость всего периода, с условием выездов только по определенным дням. Заморачиваться с обходом результата не хотелось. Пришлось написать "Небольшой" запрос.

1 стартмани

03.03.2016    12763    1    Alexander.Shvets    5       

Простые радости жизни программиста 1С: выбор типа значения 51

Инструменты и обработки Программист Внешняя обработка (ert,epf) v8 1cv8.cf Абонемент ($m) Практика программирования Работа с интерфейсом

Предлагаемая в работе обработка включает обычную и управляемую формы, которые максимально точно реализуют функциональность системного диалога выбора типа в толстом клиенте обычное приложение (включая оформление диалога). Эти формы имеют дополнительные интерфейсные удобства и могут быть использованы в качестве альтернативных диалогов выбора типа.

1 стартмани

17.02.2016    39796    45    yuraos    17       

Отображение прогресса выполнения длительных операций в БСП и их отладка в текущем сеансе. 162

Инструменты и обработки Программист Внешняя обработка (ert,epf) v8 1cv8.cf Windows Абонемент ($m) Практика программирования БСП (Библиотека стандартных подсистем)

В статье описан способ исполнения длительных операций в конфигурациях, в которых используется библиотека стандартных подсистем, с визуализацией прогресса исполнения и отображения хода обработки данных. Также дается краткое описание процесса отладки длительных операций в текущем сеансе.

1 стартмани

17.02.2016    41750    146    balanton    20       

Яндекс.Деньги "Благотворительность" 17

Инструменты и обработки Программист Внешняя обработка (ert,epf) v8 1cv8.cf Windows Абонемент ($m) Инструментарий разработчика Практика программирования

Яндекс.Деньги теперь в 1С. Форма для приема благотворительных взносов. Форму легко сделать и вставить на любую страницу сайта или блога. Платежи будут приходить на ваш кошелек. На форме есть три способа платежа: из кошелька, с банковской карты, с баланса мобильного.

1 стартмани

16.02.2016    18099    9    Tatitutu    5       

Мастер рассылки e-mail 2.2 для управляемых форм 9

Инструменты и обработки Программист Внешняя обработка (ert,epf) v8 v8::УФ ERP2 БП3.0 УТ11 Абонемент ($m) Практика программирования Email

Для пользователей: переделанный из старый разработки под 8.2 с использованием библиотеки Мастер рассылки e-mail 2.2 (ERP, УТ, БП) (Только управляемые формы), который теперь может запускаться под любой версией платформы с разрешенными или запрещенными модальными/синхронными вызовами в конфигурации. Также удобный выбор e-mail и их владельцев с помощью отбора динамического списка по любым критериям и галочки исключения.

1 стартмани

29.12.2015    31242    20    milkers    4       

Нечеткий поиск одним запросом 37

Инструменты и обработки Программист Внешняя обработка (ert,epf) v8 1cv8.cf Абонемент ($m) Практика программирования

Использование механизма полнотекстового поиска в 1С не всегда оправдано, т.к. построение индекса и поддержание его в актуальном состоянии может значительно нагружать систему. Предлагаемая реализация нечеткого поиска методом N-грамм выполняется одним запросом, что позволяет производить поиск в любой таблице и не требует предварительного построения индекса.

1 стартмани

28.12.2015    20020    57    vasvl123    9       

Передача больших пакетов через веб-сервисы 138

Инструменты и обработки Системный администратор Программист Конфигурация (md, cf) v8 Абонемент ($m) Практика программирования Администрирование данных 1С Внешние источники данных

Реализация механизма передачи больших пакетов через веб-сервисы. С его помощью передать файл размером в несколько гигабайт не составит проблем.

1 стартмани

06.12.2015    43184    44    YPermitin    19       

Пример связи 1С и мессенджера Telegram. Получение данных из 1С запросом из Telegram 245

Инструменты и обработки Системный администратор Программист Внешняя обработка (ert,epf) v8 1cv8.cf Абонемент ($m) Практика программирования Внешние источники данных

В результате чтения публикации Вы получите готовую внешнюю обработку, позволяющую получать из 1С данные, запрашиваемые через Telegram. В данной статье рассмотрим следующее: Использование HTTPСоединение; Чтение JSON для версии 1С 8.3.6 и выше, а также аналог JSON для версии 1С ниже 8.3.6; Подключение обработчика ожидания; Некоторые основные возможности API Telegram; Как создать бота для Telegram; Программное создание колонок дерева на управляемой форме;

1 стартмани

19.11.2015    71914    424    Luchik    199