Анализируем SQL сервер глазами 1С-ника

15.11.24

База данных - HighLoad оптимизация

Публикация размещена исключительно в образовательных целях и подходит только для платформы версии 8.3.22.2106.
Использует недокументированные средства доступа к базе данных 1С. Прямое обращение к СУБД нарушает лицензионное соглашение,
может изменить поведение платформы, привести к разрушению базы данных, скомпрометировать данные,
а также привести к отказу в официальной поддержке Фирмы 1С.
Обработка для простого и удобного анализа настроек, нагрузки и проблем с SQL сервером с упором на использование оного для 1С. Анализ текущих запросов на sql, ожиданий, конвертация запроса в 1С и рекомендации, где может тормозить.

Скачать файл

ВНИМАНИЕ: Файлы из Базы знаний - это исходный код разработки. Это примеры решения задач, шаблоны, заготовки, "строительные материалы" для учетной системы. Файлы ориентированы на специалистов 1С, которые могут разобраться в коде и оптимизировать программу для запуска в базе данных. Гарантии работоспособности нет. Возврата нет. Технической поддержки нет.

Наименование По подписке [?] Купить один файл
Анализируем SQL сервер глазами 1с-ника: - расширение для 1smonitor.ru
.cfe 931,42Kb ver:15.11.2024
65
65 Скачать (2 SM) Купить за 2 150 руб.
Анализируем SQL сервер глазами 1с-ника: - обработка
.epf 177,85Kb ver:15.11.2024
176
176 Скачать (2 SM) Купить за 2 150 руб.

При работе любой системы очень часто возникают проблемы с производительностью и недовольство пользователей "тормозами".

Учитывая, что 1С - это многозвенная система - Клиент-сервер1С-СерверSQL, необходимо проводить комплексный анализ всей цепочки.

Один из элементов цепочки - это SQL сервер, с которым часто есть различные проблемы, в том числе организационные.

Когда администрирование SQL "вешают" не на администраторов баз данных, а на админов "широкого профиля" или на 1С-овцев, которые смотрят на SQL и не могут понять, что там не так.

Конечно, можно изучить море информации, пройти курсы DBA, узнать все про SQL.

Но на это надо время, силы и появляется шанс потери сотрудника, который с таким багажом может легко уйти на более высокооплачиваемую вакансию...

В помощь разборки причин неоптимальной или медленной работы SQL (для 1С) и создана данная обработка.

Она позволяет легко и просто "посмотреть" на SQL в "человеческом" языке, в том числе с точки зрения рекомендации фирмы 1С, производителя SQL, опыта независимых исследователей причин медленной работы SQL, в терминах метаданных 1С и получить готовые решения в виде команд и скриптов для улучшения производительности.

 

В данном решении приложено 2 варианта для использования

1 - Автономная обработка. Рекомендуется запускать на базе  с конфигурацией, равной текущей.

  • Тогда имена объектов будут подставляться в именах 1С, большинство запросов смогу даже открыться в конструкторе для анализа и форматирования запроса.
  • А часть даже выполнится (после небольшой обработкой напильником).
  • В планах (далеких) замена в параметрах гуиды на реальные данные из базы Сделано! Теперь можно видеть не гуиды -а реальные данные. Особенно удобно когда значение перечислений в условиях.

2 - Как  расширение к 1smonitor.ru. Можно на бесплатную версию ставить. Позволяет из "одного окна" мониторить все сервера. Настройки настройки подключения и метаданные берутся из монитора. Как расширение функционала в запросах новые закладки

  • Возможно подключение через агента 1с-монитор. В итоге работает под Windows/Linux без установки доп драйверов и танцев с бубнами!
  • Текст запроса на языке 1с  -максимально приближенный к анализу. Теперь корректно работает даже когда много связей с одинаковыми таблицами 
  • Советник -что вероятно послужило причиной тормозов и что делать. В том числе теперь анализируется план запроса (если он есть)
  • Добавлен функционал просмотра текущих сеансов (RAS&COM подключение).
    • В удобном виде 
      • -важные сверху,
      • виновник блокировки в виде имени и клиента в не номера соединения
    • можно тут-же "убить виновника тормозов"
    • можно выгрузить в таблицу
    • построить отчет

 

Источник данных

Все данные по SQL получаются исключительно запросами SQL. В том числе события, рекомендации и т.п.

 
 Чтобы пользоваться функционалом нужно

Рекомендации по настройке получены как из официальных источников 1С, MS SQL, так и из опыта эксплуатации "1С-ников".

 

Возможности (буду без скринов - чтобы не спамить. Все скрины сверху - смотрите все чтобы понять функционал -данных много)

  1. Оперативная информация по SQL.
    1. Загрузка сервера SQL по процессорам (MS SQL)
    2. Текущие запросы. с текстом, ожиданиями, блокировками, советником что не так с запросом и прочими важными и детальными данными
      1. Если вы счастливый пользователь 1СМонитора и настроили RAS|Com подключение -то тут же увидите необходимую информацию о пользователе 1с, типе подключения и тп
    3. Очень детальная информация по запросу(MS SQL) -что там идет внутри. Видно какие подкоманды, их прогресс и тп
  2. Показывает информацию по SQL серверу
    1. Общие данные -что может быть кратко и важно
      1. подробно версию
      2. сколько работает
      3. режим производительности
      4. оперативной памяти, процессоров
      5. Дополнительные важные параметры
    2. Параметры
      1. имена
      2. текущие значения
      3. рекомендованные
      4. комментарий, почему так рекомендовано
      5. и если есть вариант установить командой - команда
    3. Трассировки(MS SQL)
      1. имя флага
      2. текущий режим - установлен или нет
      3. команда установки флага
      4. рекомендация
      5. Описание- на каком основании дана рекомендация
    4. Детали - тут все параметры SQL. "черновая" информация, но может, что-то интересное перейдет на закладки информация о сервере
    5. Доступное место - сколько есть места под базы, логи, можно ли шринкануть базу
  3. Информация о базе
    1. Информация о бекапах - когда были, что бекапилось и сколько времени шло (MS SQL)
    2. Большие таблицы. Таблицы больше Гб. С именами 1С. Помогает понять, что занимает много места, и быстро удалять неважные данные, например, в базах разработчиков
    3. Данные о регистрации изменений - наверняка есть ненужные регистрации в неиспользуемых планах обмена.
    4. Недообновления - если есть таблицы-остатки неудачных обновлений. с именfми *NG
  4. Рекомендации
    1. Рекомендация - итоговая страница. Что советует сделать и код скрипта для выполнения рекомендации
    2. Ожидания(MS SQL) - накопленные ожидания, информация о них и что можно сделать, чтобы улучшить ситуацию
    3. Использование индексов и статистика. Рекомендации по индексам и скрипт улучшения ситуации
    4. Рекомендуемые индексы
    5. Паразитные индексы. Список, как часто использовались
  5. Список запросов
    1. На основании чего получены данные. можно посмотреть, подправить, выполнить
    2. Посмотреть результаты выполнения
  6. Список скриптов
    1. Полезные скрипты -типа сжать tempdb, обновлять только нужную статистику и тп
  7. конвертер любого запроса SQL в 1с (актуально для режима внешняя обработка)

 

Везде, где можно, сделано:

1 - замена имен на метаданные 1С

2 - замена скрипта на понятные 1с-нику.

 
 Сильная оптимизация чтобы убрать лишние условия (типа "Основные данные"  и сравнение по типу, подтипу и ссылке сворачивать по ссылке)

3 - даны по возможности рекомендации -куда смотреть для ускорения запроса ( в том числе если есть план запроса -показывает из него важную информацию)

 
 Пример советника по текущему запросу

 Index Seek уже 8 665,85% РегистрСведений.ЗначенияГруппДоступаПоУмолчанию(_InfoRg22674)
Row Count Spool уже 9 387,8% 
Index Seek уже 12 690,48% РегистрСведений.ЗначенияГруппДоступа(_InfoRg22667)
Index Seek уже 19 500% РегистрСведений.ЗначенияГруппДоступаПоУмолчанию(_InfoRg22674)
Clustered Index Seek уже 6 500% РегистрСведений.ЗначенияГруппДоступа(_InfoRg22667)
Clustered Index Seek уже 19 500% РегистрСведений.ГруппыЗначенийДоступа(_InfoRg21530)

Использование в сравнении условных операторов приводит к исключению применения индекса для быстрого поиска по этому полю
    Использовано 17 'ГДЕ...  ВЫБОР КОГДА...'
Использование в сравнении подзапроса потенциально приводит к замедлению
    Использовано 22 'ГДЕ...  ВЫБРАТЬ...'
Использование в сравнении условных операторов или функций приводит к исключению применения индекса по этому полю
    Использовано 2 'ПО...  ВЫБОР КОГДА...'
Использовано вложенных подзапросов может приводить к неоптимальному плану запроса 
    Использовано 3 вложенный запрос 'СОЕДИНЕНИЕ...  ВЫБРАТЬ...'

4- генерируются команды исправления данных на SQL


В данной обработке недоступна генерация скриптов, прямо или косвенно нарушающих лицензионное соглашение 1С или правила публикации на Инфостарте. Только выведен анализ наиболее вероятных причин медленной работы 1С.

 

Какие планы

1 - более глубокое погружение в PG

 

Если есть предложения - пишите, реализую. Это будет более эффективно, чем Вы будете тратить свое время на создание своей ветки данного решения.

 

Предоставленная информация и скрипты распространяются "как есть". Без гарантий отсутствия ошибок и ухудшения работы системы при их использовании в вашем случае. Применяйте все на свой здравый смысл, риск и страх. Протестировано на разных платформах и конфигурациях 1с

Для эффективного применения внимательно читайте приведенные рекомендации, ссылки на первоисточники и логические выводы и принимайте решения.


Тестировалась на разных платформах 1С:Предприятие 8.3 (начиная с 8.3.23.2040).

Но явно не использовал какие-то специфические функции  платформы, поэтому будет работать и на старых релизах (8.3.20 и выше).

 

Важно

На текущий момент доделана конвертация SQL в запрос 1с, большинство из которых даже могут открываться в конструкторе запросов, что позволяет как привычно смотреть в конструкторе, та и при закрытии "отформатировать" запрос. 

Но

1. Не все идет гладко, не все запросы так удается конвертировать, но уже 99%+ получается

2. "нормально" работает пока только в режиме внешней обработки, которая запускается в базе  с целевой конфигурацией  Исправлено насколько возможно!

2.1 ставятся разные имена алиасов таблиц -если они обращаются к одинаковым таблицам источникам - такой режим чтобы из 1СМонитора работал -СДЕЛАНО в режиме из монитора! 

2.2 - открываются в конструкторе запросов. Чтобы кому удобно мог анализировать через конструктор, но и после форматирования конструктором удобно анализировать как текст. Естественно такой режим невозможен в 1СМониторе - другая конфигурация...  

3. Понятно что такой запрос не факт что выполнится -так как там параметры вставляются строкой=гуид - как только 1с сделает функцию в запросе подставить гуид и из него найдется ссылка - то переделаю и заработает ;). Пока в планах  - искать кодом по гуидам ссылки и их подставлять. но это далекие планы. Но как ни может показаться странным -запрос нередко удается выполнить после небольших очевидных (человеку) точечных ручных корректировок по месту!

 

 

 
 Изменения с 1 сентября 2024 - свежие в начале списка

Версия 19.11.2024

Оптимизация по "оборке" технического поля "ОбластьДанныеОсновныеДанные"

Оптимизация под PostgreSQL - анализ почему индекс неэффективен теперь и для метаданных PostgreSQL

 

Версия 10.11.2024

Рекомендации

Улучшен алгоритм замены полей в индексах -теперь меняет намного умнее

 

Версия 05.11.2024

Анализатор запроса

Улучшено сворачивание дублей полей (ссылка, тип ссылки, тип) в один

Расширение

Теперь план запроса (MS SQL) если нажать через открыть - там в плане запроса будут уже русские имена 

который можно вставить например в https://www.supratimas.com/ -и там будут имена объектов русские и понятные!

 

Версия 04.11.2024

Анализатор запроса

- в советник добавлена информация из плана - если нашлись отсутствующие индексы

- причесан конвертер -теперь в расширении работает корректно с множеством дублей таблиц

- имена таблиц стали понятнее и без глюков

расширение

в плане запросов добавлена кнопка показать ( не вызывает программу по умолчанию)

и в ней-же имена заменены на русские -чтобы проще понимать план

Версия 03.11.2024

Доработка расширения - текущие соединения более качественно отрабатывают соединения кластера если через ком соединение  -в том числе удаление соединения

Анализ скуля - 

лучше сворачивает дубли и новые рекомендации советника

 

Версия 27.10.2024

Для PostgreSQL улучшено получение данных по использованию индексов -что стоит "актуализировать" или получить информацию в удобном виде по индексу

Добавлена закладка "скрипты" - там полезные скрипты для обслуживания баз. Например скрипт обновления только нужной статистики, а не все махом  

 

Версия 20.10.2024

Добавлено анализ индекса для postgresql. Для MS -причесано 

и сделан задел на дальнейший анализ

 

Версия 07.10.2024

В расширении для монитора появилась закладка с рабочими процессами - иногда удобнее чем типовое

 

Версия 06.10.2024

Оптимизирован запрос по использованию статистики для POSTGRESQL

В генерации скриптов удаления больших таблиц - теперь работает по выделенным

 

 

Версия 02.10.2024

Исправлена рекомендация по обновлению статистики

в форме исправлено вывод информации по измененному количеству строк после обновления статистики

 

Версия 01.10.2024

Только расширение

Теперь может получать все базы из кластера, даже не зарегистрированные в 1Смониторе

 

Версия 30.09.2024

Качественно улучшена команда переделки индекса -если первое поле тип -переставляет его на ссылку  -чтобы статистика была более показательно1

 

Версия 29.09.2024

Добавлен деморежим -если установлен -в данных имя базы/пользователи заменяются или стандартным тестом или поля ввода уходят в режим пароля 

Доработки под пострге улучшение запросов

 

Версия 27.09.2024

Доработки под пострге больше - чтобы не тупил если нет прав или сбой получения данных

 

Версия 24.09.2024

Добавлено

если обработку запустить в целевой базе заменит гуиды на объекты - удобно анализировать

конвертер даты  -новый случай нашел

исправлено

ДобавитьКДате - параметры в 1с и MS SQL по разному порядок 

результат - даже страшный запрос  -открывается конструктором!

 

Версия 20.09.2024

Добавлено в расширении получение данных по сеансам кластера. если кластер не указан -все доступные

там же появился отчет по сеансам/лицензиям "итого" -удобно анализировать сколько сейчас нагрузка и сколько каких лицензий занято

 

Версия 18.09.2024

Если вы используете 1smonitor  -в текущих запросах подтягивается информация из сеансов - кто именно пользователь, его тип  подключения и сколько захвачено 

В текущих запросах при клике на ожидании -переходит на страницу с описанием ожидания

Мелкие косметические изменения

 

17.09.2024

Причесаны описания ожиданий

В рекомендациях генерация скрипта стала логичнее -на каждой закладке можно выделить что сгенерить -и создастся скрипт с описанием подробным и готовым к запуску

 

11.09.2024

Добавлены запросы для Postgre -в список доступных -смотрите -наверняка там есть интересное для вас

в расширение для монитора  -добавлено список сеансов. можно удобно смотреть и теперь можно тут-же "килл" виновника тормозов

 

09.09.2024

Улучшил советника -теперь стало более глубоко "копать" и давать советы, в итоге мне помогло найти причину тормозов ДО при переходе в "мои задачи" между папками. Было между некоторыми более 300 сек, стало порядка 1 сек...

 

08.09.2024

Добавлен в технические запрос MS SQL- показать запросы с предупреждениями -это на анализ что из этого можно "выжать"

Чуть подправлен конвертер в 1с запрос -

сделано большой задел для "разборки" плана запроса -ловлю "интересные" ситуации чтобы отладиться... 

 

02.09.2024

Только расширение для монитора -отчет по лицензиям 1с

для работы надо запустить сбор сеансов - значение "количество"

и через пару часов а лучше день наслаждаться собранной статистикой

 

01.09.2024

Только расширение для монитора -добавил обработку получения текущих сеансов 1с

Теперь умеет через RAS и com подключаться 

 

 

 
 ------ Изменения  версиях до 1 сентября 2024- старое -было по хронологии---------

 

SQL производительность HighLoad

См. также

SALE! 15%

Инструментарий разработчика Чистка данных Свертка базы Инструменты администратора БД Системный администратор Программист Руководитель проекта Платформа 1С v8.3 Конфигурации 1cv8 1С:Управление торговлей 10 1С:ERP Управление предприятием 2 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 Россия Платные (руб)

Инструмент представляет собой обработку для проведения свёртки или обрезки баз данных. Работает на ЛЮБЫХ конфигурациях (УТ, БП, ERP и т.д.). Поддерживаются управляемые и обычные формы. Может выполнять свертку сразу нескольких баз данных и выполнять их автоматически без непосредственного участия пользователя.

8400 7140 руб.

20.08.2024    7738    55    22    

66

Инструменты администратора БД Роли и права Системный администратор Программист Пользователь 8.3.14 1С:Розница 2 1С:Управление нашей фирмой 1.6 1С:Документооборот 1С:Зарплата и кадры государственного учреждения 3 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х 1С:Зарплата и Управление Персоналом 3.x 1С:Управление нашей фирмой 3.0 1С:Розница 3.0 Платные (руб)

Роли… Вы тратите много времени и сил на подбор ролей среди около 2400 в ERP или 1500 в Рознице 2, пытаясь понять какими правами они обладают? Вы все время смотрите права в конфигураторе или отчетах чтоб создать нормальные профили доступа? Вы хотите наглядно видеть какие права дает профиль и редактировать все в простом виде? А может хотите просто указать подсистему и дать права на просмотр и добавление на объекты и не лезть в дебри прав и чтоб обработка сама подобрала нужные роли? Все это теперь стало возможно! Обновление от 18.09.2024, версия 1.2

16800 руб.

06.12.2023    8829    42    5    

73

SALE! 15%

Инструменты администратора БД Инструментарий разработчика Роли и права Программист Платформа 1С v8.3 Конфигурации 1cv8 Россия Платные (руб)

Расширение позволяет без изменения кода конфигурации выполнять проверки при вводе данных, скрывать от пользователя недоступные ему данные, выполнять код в обработчиках. Не изменяет данные конфигурации, легко устанавливается практически на любую конфигурацию на управляемых формах.

10000 8500 руб.

10.11.2023    10401    36    20    

61

SALE! 35%

Инструментарий разработчика Инструменты администратора БД Системный администратор Программист Платформа 1С v8.3 Управляемые формы Конфигурации 1cv8 Россия Платные (руб)

Универсальный инструмент программиста для администрирования конфигураций. Сборник наиболее часто используемых обработок под единым интерфейсом.

4800 3120 руб.

14.01.2013    187958    1138    0    

912

Закрытие периода Инструменты администратора БД Корректировка данных Бухгалтер Пользователь Бухгалтерский учет 1С:Бухгалтерия 3.0 Россия Бухгалтерский учет Платные (руб)

Расширение «Оперативное проведение» в 4 раза уменьшает время проведения документов и закрытия месяца. Является комплексным решением проблем 62 и 60 счетов. Оптимизирует проведение при включенной функциональной опции «Раздельный учет НДС». Используется в более 10 организациях уже 2 года. Совместимо с конфигурацией Бухгалтерия 3.0 (+КОРП).

14400 руб.

29.04.2020    32652    106    152    

73

Инструменты администратора БД Системный администратор Платформа 1С v8.3 1С:Комплексная автоматизация 1.х 1С:Управление производственным предприятием Платные (руб)

Конфигурация Комплексная автоматизация 1.1 (и УПП 1.3 тоже) хранит файлы и изображения в справочнике Хранилище дополнительной информации в реквизите Хранилище типа ХранилищеЗначений. Та же история с ВложениямиЭлектроннойПочты. Но при этом присоединенные файлы в Электронном документообороте хранит в томах на диске. Эта доработка позволяет использовать стандартный механизм хранения файлов, изображений и вложений электронных писем в томах на диске. При этом можно разделить тома хранения по объектам конфигурации.

4200 руб.

10.11.2015    62812    94    59    

79

Архивирование (backup) Инструменты администратора БД Платформа 1С v8.3 Управляемые формы Конфигурации 1cv8 Платные (руб)

Данная разработка позволит решить вопрос с резервным копированием Ваших баз в автоматическом режиме, расположенных на сервере 1С. Система умеет ставить блокировки на вход, блокировать фоновые задания, принудительно отключать сеансы пользователей. И все это система делает в автоматически при создании бэкапа (или через команду). Выгрузка происходит в родной формат 1С - .dt. Так же система умеет архивировать данные выгрузки с установкой пароля. Умеет менять расширение файла zip или dt на любое указанное вами, что позволит сохранить выгрузки от шифровальщика. Может удалять старые копии выгрузок, оставляя указанное количество резервных копий, начиная с самой поздней. Только для WINDOWS!

6000 руб.

06.11.2012    72784    625    45    

84

Инструменты администратора БД Пользователь Платформа 1С v8.3 1С:ERP Управление предприятием 2 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х Платные (руб)

Многие сталкиваются с проблемой когда изображения, находящиеся в базе разные по объему и размерам. Менеджеры могут добавить файлы в очень высоком разрешении, объемом свыше 20 Мегабайт. База данных становится слишком большой, выгрузка на сайт идёт медленно и требуется много место на хостинге. Как сжать картинки и уменьшить размер базы 1С? Это можно сделать с помощью данной обработки. Существует возможность выбрать различные варианты для того чтобы уменьшить картинки: в разы, в процентах от первоначального объема, а также сделать картинки одинаковой ширины. В результате размер базы 1С значительно сократится (в зависимости от количества и размера картинок), а изображения станут небольшого объема, равными по ширине, почти без потери качества. Работает на управляемых формах для УТ 11, КА, ERP.

3000 руб.

21.07.2022    9830    7    4    

15
Вознаграждение за ответ
Показать полностью
Отзывы
29. efin 18.02.24 02:13 Сейчас в теме
Словил ошибку
: {ВнешняяОбработка.АнализSQLСервера.МодульОбъекта(217)}: Ошибка при вызове метода контекста (Open): Произошла исключительная ситуация (Microsoft OLE DB Provider for SQL Server): [DBNETLIB][ConnectionOpen (SECCreateCredentials()).]Ошибка безопасности SSL.

Исправил изменением строки подключения Provider=MSOLEDBSQL19; Trust Server Certificate=True;Use Encryption for Data=False;
Остальные комментарии
Подписаться на ответы Инфостарт бот Сортировка: Древо развёрнутое
Свернуть все
1. bulpi 217 15.02.24 16:00 Сейчас в теме
Хотел добавить автору премию 10$m, а получилось непонятно что
2. support 4453 15.02.24 20:58 Сейчас в теме
(1) автор напишет комментарий и заберет
65. RustIG 1747 13.03.24 08:29 Сейчас в теме
(2) добрый день.
а если комментарии отключены в статье? как быть?
3. ZAOSTG 169 15.02.24 21:53 Сейчас в теме
35. support 4453 19.02.24 00:15 Сейчас в теме
(1) кто-нибудь хочет так же задонатиить
38. John_d 5891 19.02.24 09:41 Сейчас в теме
(35) было бы прикольно, если бы была кнопка рядом с плюсиком (+10sm), т.е. это и плюс и донат 10sm одновременно.
Может конечно редко будут жать, но будет возможность это сделать.
RustIG; rpgshnik; +2 Ответить
52. rpgshnik 3795 21.02.24 15:39 Сейчас в теме
(38) годная фишка, особенно для авторов, которые пишут статьи
66. RustIG 1747 13.03.24 08:31 Сейчас в теме
(35)

кто-нибудь хочет так же задонатиить


это вопрос-опрос? или просто ответ ?
36. support 4453 19.02.24 00:17 Сейчас в теме
(1) можно у вас взять интервью лично мной?
51. ZAOSTG 169 21.02.24 13:44 Сейчас в теме
4. kser87 2470 15.02.24 22:01 Сейчас в теме
Интересное примечание:

Использует недокументированные средства доступа к базе данных 1С. Прямое обращение к СУБД нарушает
лицензионное соглашение,

Это 1С постарался или сотрудники инфостарта? Непонятно, что тут нарушает. На первый взгляд обработка собирает данные, которое можно достаточно просто получить при помощи MS SQL или ЦУП (не уверен полностью).
JohnyDeath; +1 Ответить
5. muskul 16.02.24 02:25 Сейчас в теме
(4)1с конечно же и в "целом" они правы
9. kser87 2470 16.02.24 09:30 Сейчас в теме
10. muskul 16.02.24 09:56 Сейчас в теме
(9)к тому что если все будут лазить напрямую в скуль то не известно что они там смогут натворить такого что 1с ляжет. поэтому и запрещено.
Потому что платформа 1с не позволит тебе сделать dr op table * а прямой запрос позволит
11. kser87 2470 16.02.24 11:46 Сейчас в теме
(10) это понятно. А какие конкретно претензии к публикации? просто сам факт наличия прямых запросов?
25. muskul 17.02.24 06:09 Сейчас в теме
(11)Я вообще не придирался ) это было описание почему 1с делает такой дисклеймер и почему автор решил его указать
15. ZAOSTG 169 16.02.24 13:38 Сейчас в теме
(10)
Согласен
поэтому
1 - всегда надо включать голову
2 - в данной обработке только чтение
3- и они ограничены правами - для нее необходимо только чтение. Причем чтение самой базы -больше для того чтобы понимать какая база рассматривается.
13. ZAOSTG 169 16.02.24 12:49 Сейчас в теме
16. kser87 2470 16.02.24 14:14 Сейчас в теме
(13) скрипт подразумевает обработку данных. В целом логично
6. t278 58 16.02.24 03:47 Сейчас в теме
а что с правами?
у меня есть полный доступ к 1С базе, но нет доступа к серверу 1С и SQL.
Будет у меня работать?

Сейчас администратора базы данных приходиться пытать, как сделаны настройки SQL.
8. ZAOSTG 169 16.02.24 06:02 Сейчас в теме
(6)
Будет. - для этого и делал
права
VIEW SERVER STATE -просмотр состояний сервера
VIEW ANY DEFINITION -просмотр событий сервера
7. ZAOSTG 169 16.02.24 05:56 Сейчас в теме
"недокументированного" тут ничего нет
1- сбор данных - из того что предоставляет SQL не по таблицам 1с -а "системное" -ожидания, нагрузки и тп. Да, ЦУП наверное тоже собирает аналогичные данные аналогичным способом
2 -метаданные -штатным функционалом 1с
2 -"скрипты" -тоже на сайте 1с есть -установить флаг трассировки или запустить обновление статистики указанной таблицы

Права на скуль -максимально безопасные -только чтение (поэтому часть запросов не выполняется - где временные таблицы. ищу обход)

Для MS SQL у выбранного логина должны быть разрешения (думаю добавить генератор скрипта чтобы удобно было давать права без писка галочек)
Если для обработки
VIEW SERVER STATE -просмотр состояний сервера
VIEW ANY DEFINITION -просмотр событий сервера
а также доступ на чтение к исследуемой базе данных. - и так наверняка есть так как запускаете обработку из уже целевой базы
12. kauksi 217 16.02.24 12:39 Сейчас в теме
На закладке рекомендации почему то иногда возникает ошибка
Деление на 0
{ВнешняяОбработка.АнализSQLСервера.Форма.Форма.Форма(653)}:нс.ПроцентАбсолютный = 100*ТекТрасс.Секунд/ВсегоСекундРаботает;
{ВнешняяОбработка.АнализSQLСервера.Форма.Форма.Форма(408)}:ЗаполнитьОжидания(ПолучитьДанныеНаСервере("Ожидания"),ИнформацияОСервере);
{ВнешняяОбработка.АнализSQLСервера.Форма.Форма.Форма(45)}:База1СПриИзмененииНаСервере(Истина);

[ОшибкаВоВремяВыполненияВстроенногоЯзыка, ОшибкаИспользованияВстроенногоЯзыка]

видимо когда нет ВсегоСекундРаботает
14. ZAOSTG 169 16.02.24 13:31 Сейчас в теме
(12)
Сейчас исправлю
и там заодно чуть ускорил чтобы не было лишних подключений под каждый запрос
и еще иногда текущие запросы не выдает -когда в команде странные символы...
17. bulpi 217 16.02.24 14:27 Сейчас в теме
Еще есть ошибки, связанные с разными режимами работы обработки. Например, перевод текста запроса из sql в 1с не работает, выдает ошибку, т.к. предназначен только для режима 1smonitor.ru, но это не проверяется, а просто ошибка выпадает.
18. ZAOSTG 169 16.02.24 15:34 Сейчас в теме
(17)
Про это забыл
в модуле сделал это и проверил-но только на тек сборах инфы
сейчас пофиксю чтобы и на последней странице туда уходило
19. ZAOSTG 169 16.02.24 16:16 Сейчас в теме
Исправлены найденные ошибки и перезалил оба файла
34. John_d 5891 18.02.24 17:44 Сейчас в теме
(19) при оформлении файла для скачивания заполни у файла версию 1.0.0.5 к примеру, чтобы было понятно что ты обновил и нужно скачать файл еще раз
VyacheslavShilov; +1 Ответить
20. John_d 5891 16.02.24 17:24 Сейчас в теме
(0) Спасибо. Гениально, что есть рекомендуемые значения с комментариями и рекомендациями.

Большими таблицами считаются таблицы больше 10гб?
21. ZAOSTG 169 16.02.24 17:29 Сейчас в теме
(20)
Вообще запрашивал более 1 гб чтобы показывало
22. John_d 5891 16.02.24 17:37 Сейчас в теме
(21) странно, вывело две таблицы 10 и 12 гб
23. ZAOSTG 169 16.02.24 17:52 Сейчас в теме
(22)
Проверил еще раз
вывел и 1 гб и 9 и 11 и 26
Может у Вас разрыв большой
между 10 и менее 1 нет средних
у меня были такие примеры когда одна таблица сильно вырывается вперед по размерам...
24. John_d 5891 16.02.24 17:57 Сейчас в теме
39. John_d 5891 19.02.24 09:47 Сейчас в теме
(23) перепроверил все таки ошибка на один нолик. У меня в базе таблиц больше 1гб около 25.
26. kauksi 217 17.02.24 07:21 Сейчас в теме
Хорошо бы еще проверять версии MS SQL, потому что в рекомендациях
некоторые бесполезные
Начиная с версии Microsoft SQL 2016, для временных объектов базы данных tempbd выделение осуществляется только экстентами, для остальных баз данных поведение регулируется параметром mixed_page_allocation, флаг 1118 не имеет действия.
Флаг 8048 - Начиная с версии Microsoft SQL Server 2014 Service Pack 2 и Microsoft SQL Server 2016, поведение является стандартными.
https://its.1c.ru/db/metod8dev/content/5946/hdoc
27. ZAOSTG 169 17.02.24 09:05 Сейчас в теме
(26)
Версию получаю. Но пока не обрабатываю.
Сделал упор на рекомендации, более качественных парсинг текста запроса и хочу план запроса распарсить -там много полезного
Например про рекомендации
вчера анализировал тормоза -и был вариант почему тормозит -сортировку сделали кастомную -по "выбор когда ..." -и естественно тормозит
и соотв сейчас быстро можно увидеть по рекомендации -стоит ли ее ускорять -и не тратить время на анализ причины
Экономия времени на лицо -даже для кнсультанта который в запросах ни бум-бум будет понятно ;)
28. ZAOSTG 169 17.02.24 18:30 Сейчас в теме
Обновил
Добавил еще рекомендаций для запроса
"советник" теперь работает и при произвольных запросах
Ищу парсер ShowPlan XML -может есть готовый-оттуда брать параметры, и текущий план запроса для анализа
29. efin 18.02.24 02:13 Сейчас в теме
Словил ошибку
: {ВнешняяОбработка.АнализSQLСервера.МодульОбъекта(217)}: Ошибка при вызове метода контекста (Open): Произошла исключительная ситуация (Microsoft OLE DB Provider for SQL Server): [DBNETLIB][ConnectionOpen (SECCreateCredentials()).]Ошибка безопасности SSL.

Исправил изменением строки подключения Provider=MSOLEDBSQL19; Trust Server Certificate=True;Use Encryption for Data=False;
31. ZAOSTG 169 18.02.24 09:02 Сейчас в теме
(29)
Provider

Странно
на нескольких серверах в разных организациях это не проявлялось
я так понимаю это настройки безопасности именно SQL2019 - думаю у большинства ssl не активирован - сертификаты не у всех есть и тем более с валидностью надо разбираться
надо подумать как выбрать варианты подключения...
на тек момент добавил в код -если такая ошибка-подключится по другой строке...
30. efin 18.02.24 02:53 Сейчас в теме
Спасибо, мощная штука!
32. 13D 69 18.02.24 11:38 Сейчас в теме
автору огромнейшееее спасибо!, от начинающих разбираться с запросами)
33. ZAOSTG 169 18.02.24 12:10 Сейчас в теме
(32)
стараюсь туда добавить как раз больше готовой аналитики
чтобы даже консультант посмотрев мог ответить где копать- дать задание программисту, попинать админов, дать по рукам пользователю чтобы не шалил в форме и тп
по этим мотивам думаю написать статью -но не фат что скоро смогу выделить время...
37. chg 19.02.24 08:10 Сейчас в теме
хороший инструмент, есть только одна проблема, запускаю Рекомендации, долго думает, показывает конечно, но при этом выдаёт
работали более 120 секунд - и это странно. Сделали не все. Долго получает в цикле строки запроса
40. ZAOSTG 169 19.02.24 10:24 Сейчас в теме
(37)
Время можно менять в настройках -просто увеличте время
с чем связаны тормоза - это ответят админы SQL
а там идет из курсора проход по всем записям
сделал такое ограничение чтобы не висело вечно
причем на почти одинаковых по объему базах в разных организация гдето несколько секунд идет, гдето в 3 минуты не укладывается
41. chg 19.02.24 13:12 Сейчас в теме
(40)а помогло на самом деле следование рекомендациям, перестало таймаутить, ну и в общем лучше стало)))))
42. ZAOSTG 169 19.02.24 14:03 Сейчас в теме
(39)
нашел косяк -исправлю в течении дня
если надо вам срочно -в произвольные запросы - там выбрать размеры таблиц -выполнить -и в закладке запросы в конце убрать нолик в условии лишний
43. ZAOSTG 169 19.02.24 22:18 Сейчас в теме
Исправлено
плюс
- в описании текста таблицы добавлено как она выглядит в скуле -бывает удобно для связи с планом запросов
ИЗ РегистрСведений.ДанныеДляПодбораСотрудников КАК РС_ДанныеДляПодбораСотрудников // T3 InfoRg21567

и расширенные советы по возможным причинам тормозов

реальный пример из нашей жизни

'УПОРЯДОЧИТЬ ПО... ВЫБОР КОГДА ...' Использование в упорядочении условных операторов приводит к исключению применения индекса по этому полю
'ПО... ВЫБОР КОГДА...' Использование в сравнении условных операторов приводит к исключению применения индекса по этому полю
Много поисков по подстроке - уберите из формы поиск по всем полям! Искали следующее: иванов
Применено 6 RLS на один запрос!
44. chg 20.02.24 02:16 Сейчас в теме
(43) как снова скачать тем кто уже отдал 1 стартмани?
45. ZAOSTG 169 20.02.24 07:33 Сейчас в теме
(44) Тоже интересует данный вопрос. Должен же быть механизм. Но это у поддержки надо спрашивать
46. chg 20.02.24 10:27 Сейчас в теме
(45)попробуйте с ними связаться, может что и подскажут, думаю многие этим вопросом задаются
47. petrov_2015 20.02.24 10:49 Сейчас в теме
Замечательная идея, но попробовать как расширение для 1smonitor не получилось:

1. в блоке "Анализ SQLСервера" при выборе Базы1С авторизация принудительно устанавливается в NTLM без возможности снять галочку и установить аутентификацию SQL?
Поскольку использую для 1smonitor, то почему бы не воспользоваться уже настроенным в нем инстансом СУБД?

2. в блоке "Блокировки MS SQL Server" при тестировании доступа выдает ошибку регистрации "V83.COMConnector"
У нас на эксплуатируются одновременно две платформы 1С и соответственно для одной коннекторы устанавливаются штатно через regsvr32, а для другой через COM+ обертку с именем компоненты типа "V83_22_2241.COMConnector".
Можно ли добавить в настройки реквизит типа "Версия COMСonnector" куда бы устанавливали для одной БД значение "83", а для другой "83_22_2241"?
49. ZAOSTG 169 20.02.24 12:17 Сейчас в теме
(47)
1. Данные беру из настроек монитора - проверю что не так.
2- есть такое. версии длл та еще засада. подумаю как лучше сохранить вариант указания версии ком объекта...
по обертке делал тоже для себя такой обход - если версия не та -то "клеил" по данном шаблону имя и пробовал через него


Постараюсь вечером допилить
50. ZAOSTG 169 21.02.24 10:33 Сейчас в теме
Обновление
настройка теперь реагирует на галку авторизация- можно уточнить
текст запроса стал более причесанным
новые советы по возможным тормозам
53. starik-2005 3087 23.02.24 13:38 Сейчас в теме
А под Linux автор планирует сделать оную штуку, или самому лабать? )))
54. ZAOSTG 169 24.02.24 00:37 Сейчас в теме
(53)
Если дадите команды подключения к MS и POSTGreSQL под линух -то можно встроить
если не хотите свое лабание постоянно актуализировать ;)

залил новую версию
1 -теперь поддержка PosGreSQL -не полная, скрипты ищу интересные
2- настройка авторизации корректно переносится -если там где-то в дереве монитора логин/пароль
3 -"восстановленный" запрос даже в большенстве случаев можно открыть конструктором и более красиво показать

планы на будущее
1 - парсер плана запроса -много интересного
2- допил под постре -интересные запросы ищу
55. starik-2005 3087 25.02.24 19:25 Сейчас в теме
(54)
команды подключения к MS и POSTGreSQL под линух
ODBC. Но СОМ-объектов нет, так что придется написать что-то сверху на питоне, например.
56. FireAlex 124 26.02.24 14:18 Сейчас в теме
Ошибка выполнения запроса:
SEL ECT
start_time as [Запустился в],
total_elapsed_time/1000 as [Прошло от запуска],
cpu_time/1000 as [Работает],
command as [Выполняемая команда],
case
when status = 'running' then N'Работает'
when status = 'runnable' then N'Готов к запуску'
when status = 'background' then N'В фоне'
when status = 'rollback' then N'*'
when status = 'sleeping' then N'В состоянии сна'
when status = 'suspended' then N'Приостановлено'
else status
end as [Состояние запроса],
percent_complete as [Процент завершения],
dop as [Степень параллелизма данного запроса],
t.text [ТекстЗапроса], '' as [Текст1С] ,
case when transaction_isolation_level = 0 then N'не указан'
when transaction_isolation_level = 1 then N'1 - читать незафиксированные'
when transaction_isolation_level = 2 then N'2 - Читать зафиксированные'
when transaction_isolation_level = 3 then N'3 - повторяемые результаты'
when transaction_isolation_level = 4 then N'4 - сериализуемые'
when transaction_isolation_level = 5 then N'5 - моментальный снимок'
end
as [Уровень изоляции],
DB.name as [DataBase],
wait_time/1000 as [Ожидает],
wait_type as [Тип ождания],
blocking_session_id as [Идентификатор блокирующего сеанса],
wait_resource as [Ожидаемый ресурс],
lock_timeout as [Время ожидания блокировки],
session_id as [Идентификатор сеанса],
last_wait_type as [Тип последнего ожидания],
prev_error as [Последняя ошибка],
qp.query_plan as [ПланЗапроса],
parallel_worker_count as [Число зарезервированных параллельных рабочих]
FR OM sys.dm_exec_requests r
INNER JOIN sys.databases AS DB ON DB.database_id = r.database_id
CROSS APPLY sys.dm_exec_sql_text(r.sql_handle) AS t
OUTER APPLY sys.dm_exec_query_plan(r.plan_handle) qp
order by [Прошло от запуска] desc
{ВнешняяОбработка.АнализSQLСервера.МодульОбъекта(236)}: Ошибка при вызове метода контекста (Open): Произошла исключительная ситуация (Microsoft OLE DB Provider for SQL Server): Недопустимое имя столбца "dop".

на SQL 2014 возникает ошибка на вкладке "текущие запросы" - обновить текущую вкладку. На каких версия SQL гарантированно работает?
57. Дмитрий74Чел 239 26.02.24 16:02 Сейчас в теме
(56)
dm_exec_requests.dop доступен в SQL Server 2016 (13.x) и более поздних версий https://learn.microsoft.com/ru-ru/sql/relational-databases/system-dynamic-management-views/sys-dm-exec-requests-transact-sql?view=sql-server-ver16
Уберите колонку dop.
58. ZAOSTG 169 26.02.24 16:31 Сейчас в теме
(57)
Хорошо.
Переделаю чтобы на версию смотрел и разные запросы
Задел есть, но не реализован пока
будет как раз хороший пример
59. ZAOSTG 169 26.02.24 22:23 Сейчас в теме
(57) Доработал. Запрос под версию теперь смотрит
60. Дмитрий74Чел 239 27.02.24 08:47 Сейчас в теме
61. ZAOSTG 169 27.02.24 21:39 Сейчас в теме
номер версии теперь равно дате исправления
и стал в описании писать что изменилось
62. FireAlex 124 28.02.24 13:40 Сейчас в теме
(61) запустил обновленную версию от 27.02 - в поле Версия SQL Сервера вписал 2014 - после обновить текущую таблицу ошибка с dop осталась и версия автоматом стала 12. Желательно реализовать выпадающий список серверов - по которым происходит изменение текста запросов.
63. ZAOSTG 169 29.02.24 06:00 Сейчас в теме
(62)
У Вас версия -12. Которая вышла в 2014 году. и поэтому название такое.поэтому не меняйте на 2014
переделываюь чтобы сначала определял верисю, потом уже шли дальше запросы
и в поле версия чтобы тексте выбора был понятен пользователю

https://ru.wikipedia.org/wiki/%D0%A1%D0%BF%D0%B8%D1%81%D0%BE%D0%BA_%D0%B2%D0%B5%D­1%80%D1%81%D0%B8%D0%B9_Microsoft_SQL_Server
64. ZAOSTG 169 29.02.24 10:16 Сейчас в теме
Дополнил обработку- чтобы не возникало недопонимания
67. volodia 28.03.24 12:20 Сейчас в теме
Версия обработки от 25.03.2024 при обновлении закладки "Рекомендации" выдает ошибку:
{ВнешняяОбработка.АнализSQLСервера.МодульОбъекта(1835)}: Ошибка при вызове метода контекста (Выполнить): {(6, 2)}: Таблица не найдена "Справочник.Таблицы"
<<?>>Справочник.Таблицы КАК Таблицы
68. ZAOSTG 169 28.03.24 22:15 Сейчас в теме
69. chg 12.04.24 04:45 Сейчас в теме
на закладке Оперативная информация выскакивает постоянно ошибка в любой закладке:

Преобразование значения к типу Число не может быть выполнено
{ВнешняяОбработка.АнализSQLСервера.МодульОбъекта(495)}:или Число(Макет.Область("R"+Текстрока+"C2").Текст) >= Число(ВерсияSQLСервера))
{ВнешняяОбработка.АнализSQLСервера.Форма.Форма.Форма(134)}:ТекстЗапроса = МодульОбъекта.ПолучитьТекстЗапроса(ВыбранноеЗначение,ТекстЗапроса,Объект.ТипSQLСервера,Объект.ВерсияSQLСервера);
{ВнешняяОбработка.АнализSQLСервера.Форма.Форма.Форма(404)}:ЗаполнитьТекущиеЗапросы(ПолучитьДанныеНаСервере("ТекущиеЗапросы",,,,МодульОбъекта),Объект.ТекущиеЗапросы);
{ВнешняяОбработка.АнализSQLСервера.Форма.Форма.Форма(57)}:База1СПриИзмененииНаСервере(Истина);
70. ZAOSTG 169 15.04.24 08:24 Сейчас в теме
(69)
какая у вас версия SQL?
71. chg 16.04.24 04:16 Сейчас в теме
72. ZAOSTG 169 17.04.24 17:19 Сейчас в теме
(71)
Чуть переделал алгоритм -теперь не должен падать
73. den4izzz 18.04.24 01:42 Сейчас в теме
День добрый, пытаюсь добавить расширение. Но есть сложности с добавлением. Ругается на отсутствие обработки внутри основной конфигурации. Так получается? Что делать в данном случае. Что я делаю не так.

Скрин

Обработка АнализДанных Не найден объект Обработка.АнализДанных Исправить...

ах да. платформа 1С:Предприятие 8.3 (8.3.21.1895)
Может быть из-за этого?
Прикрепленные файлы:
74. ZAOSTG 169 18.04.24 09:50 Сейчас в теме
Расширение только для конфигурации 1smonitor.ru!
чтобы не качать обработку отдельно -просто из скачанного расширения ее сохраните как обработку
den4izzz; +1 Ответить
75. user871947 22.08.24 09:22 Сейчас в теме
На вкладке Оперативная информация вышла ошибка выполнения запроса - слишком длинный идентификатор
Прикрепленные файлы:
79. ZAOSTG 169 03.11.24 15:35 Сейчас в теме
(75)
это какие то ваши настройки скуля или монитора
ни у кого такого нет
какой скуль?
76. mikukrnet 182 25.09.24 11:15 Сейчас в теме
Настройка включенного полнотекстового поиска в sql у вас работает некорректно, он выключен, а в рекомендациях показывает что включен
78. ZAOSTG 169 03.11.24 15:34 Сейчас в теме
(76)
Это что показывает скуль. в настройках
но не говорит что сам агент запущен.
Думаю как более корректно проверять
77. alexey_t 31.10.24 15:59 Сейчас в теме
И такая ошибка во многих местах выскакивает
Прикрепленные файлы:
80. ZAOSTG 169 03.11.24 15:36 Сейчас в теме
(77)
тоже странная ошибка
какой скуль и версия?
и обновите обработку -там номера строк уже другие
Оставьте свое сообщение