Фреймворк "Мониторинг производительности". Руководство пользователя

25.06.20

База данных - HighLoad оптимизация

Описание и руководство "Мониторинг производительности": краткое описание конфигурации, сборник из статей, примеров - собрано в одном файле.

Скачать исходный код

Наименование Файл Версия Размер
Фреймворк "Мониторинг производительности". Руководство пользователя
.pdf 3,29Mb
827
.pdf 2020.06.25 3,29Mb 827 Скачать бесплатно

По просьбе коллег мы создали и выложили руководство для системы мониторинга производительности. Фреймворк расположен на GitHub (https://github.com/Polyplastic/1c-parsing-tech-log/).  При желании, можно обсудить вопросы по составу, возможные пожелания и другое в рамках данного проекта в текущем посте.

Состав руководства:

Интро.

Благодарности, Назначение, Сокращения и допущения и Быстрый старт.

Раздел I. Конфигурация «Мониторинг производительности»

Подсистема «Замеры»:

  • Справочник «Замеры»
  • Справочник «События замера»
  • Справочник «Свойства»
  • Справочник «Процессы»
  • Справочник «События»

Подсистема «Оракул»:

  • Справочник «Нейронная сеть»
  • Справочник «Машина состояний»
  • Регистр сведений «Снимки состояний»
  • Регистр сведений «Состояние обработки FSM»

Подсистема «Администрирование»:

  • Справочник «Пользователи»
  • Справочник «Оборудование»
  • Справочник «Учетные записи»
  • Справочник «Дополнительные обработки и отчеты»
  • Справочник «Файлы замеров»
  • Регистр сведений «Состояние чтения»
  • Регистр сведений «Безопасное хранилище данных»
  • Обработка «Регламентные задания»
  • Обработка «Установка компактного интерфейса»

Раздел II. Основные редакторы и Плагины

  • Редактор "Настройка машины состояний"
  • Редактор "Настройка нечеткого контроллера"
  • Редактор "Настройка нейронной сети"
  • Плагин загрузки данных с сервера администрирования кластеров 1С (RAS)
  • Плагин загрузка данных из zabbix
  • Плагин для отправки сообщений по почте
  • Плагин для отправки сообщение через skype
  • Плагин для отправки сообщение через telegram
  • Плагин обработка машины состояний
  • Плагин обработка нечеткой логики
  • Плагин отчет мониторинга
  • Плагин сравнение количества событий
  • Плагин обработка нейронной сетью
  • Плагин проверка онлайн баз 1С Remote Control
  • И другие...

Раздел III. Практика и методика работы

  • Разворачивание конфигурации с нуля
  • Настройка загрузки данных из технологического журнала 1С
  • Настройка мониторинга производительности с использованием данных Performance Monitor для Windows
  • Получение общей итоговой оценки состояния обслуживаемой системы в диапазоне «норма-критическое-авария» с помощью Ларисы.
  • Получение оценки состояния системы по данным RAS  1С в диапазоне «норма-критическое-авария» с помощью Ларисы
  • Подключение отправки сообщений о возникших проблемах производительности через @mail, Skype, Telegram.
  • Схема сообщения об отсутствии базы online в течении интервала.
  • Ежедневный анализ проблем производительности по технологическому журналу 1С.
  • Оценка анализа качества обновления после релиза или настроек системы.
  • Методика выполнение мероприятий по повышению быстродействия системы.
  • И другое ...

Приложения.    

  • Полезные ссылки
  • Таблица счетчиков производительности для Windows 
  • Таблица счетчиков производительности для MS SQL Server    
  • Примеры регулярных записей для фильтрации загрузки технологического журнала
  • Другие.

 

P.S. В инструкции на текущий момент приведена основания информация. Некоторые главы будут расширены и доработаны. Также будут опубликованы другие статьи на этом ресурсе.

Мониторинг производительности

См. также

Оптимизация нагрузки на ЦП сервера СУБД используя типовые индексы

HighLoad оптимизация Платформа 1С v8.3 Конфигурации 1cv8 Бесплатно (free)

Анализ простого плана запроса. Оптимизация нагрузки на ЦП сервера СУБД используя типовые индексы.

13.03.2024    3792    spyke    28    

47

Быстродействие типовой 1С

HighLoad оптимизация Платформа 1С v8.3 Бесплатно (free)

Оказывается, в типовых конфигурациях 1С есть, что улучшить!

13.03.2024    5810    vasilev2015    19    

38

Анализируем SQL сервер глазами 1С-ника

HighLoad оптимизация Инструменты администратора БД Платформа 1С v8.3 Конфигурации 1cv8 Абонемент ($m)

Обработка для простого и удобного анализа настроек, нагрузки и проблем с SQL сервером с упором на использование оного для 1С. Анализ текущих зааросов на sql, ожиданий, конвертация запроса в 1с и рекомендации где может тормозить

1 стартмани

15.02.2024    8887    175    ZAOSTG    74    

104

Переход на Clickhouse для анализа метрик

HighLoad оптимизация Платформа 1С v8.3 Конфигурации 1cv8 Абонемент ($m)

Принимать, хранить и анализировать показания счетчиков (метрики) в базе 1С? Почему бы нет? Но это решение быстро привело к проблемам с производительностью при попытках построить какую-то более-менее сложную аналитику. Переход на PostgresSQL только временно решил проблему, т.к. количество записей уже исчислялось десятками миллионов и что-то сложное вычислить на таких объемах за разумное время становилось все сложнее. Кое-что уже практически невозможно. А что будет с производительностью через пару лет - представить страшно. Надо что-то предпринимать! В этой статье поделюсь своим первым опытом применения СУБД Clickhouse от Яндекс. Как работает, что может, как на нее планирую (если планирую) переходить, сравнение скорости работы, оценка производительности через пару лет, пример работы из 1С. Все это приправлено текстами запросов, кодом, алгоритмами выполненных действий и преподнесено вам для ознакомления в этой статье.

1 стартмани

24.01.2024    3758    glassman    17    

38

Удаление строк из таблицы значений различными способами с замером производительности

HighLoad оптимизация Платформа 1С v8.3 Конфигурации 1cv8 Абонемент ($m)

Встал вопрос: как быстро удалить строки из ТЗ? Рассмотрел пять вариантов реализации этой задачи. Сравнил их друг с другом на разных объёмах данных с разным процентом удаляемых строк. Также сравнил с выгрузкой с отбором по структуре.

09.01.2024    7337    doom2good    49    

65

Опыт оптимизации 1С на PostgreSQL

HighLoad оптимизация Бесплатно (free)

При переводе типовой конфигурации 1C ERP/УТ/КА на PostgreSQL придется вложить ресурсы в доработку и оптимизацию запросов. Расскажем, на что обратить внимание при потерях производительности и какие инструменты/подходы помогут расследовать проблемы после перехода.

20.11.2023    9964    ivanov660    6    

76

ТОП проблем/задач у владельцев КОРП лицензий 1С на основе опыта РКЛ

HighLoad оптимизация Бесплатно (free)

Казалось бы, КОРП-системы должны быть устойчивы, быстры и надёжны. Но, работая в рамках РКЛ, мы видим немного другую картину. Об основных болевых точках КОРП-систем и подходах к их решению пойдет речь в статье.

15.11.2023    5609    a.doroshkevich    20    

72

Начните уже использовать хранилище запросов

HighLoad оптимизация Запросы

Очень немногие из тех, кто занимается поддержкой MS SQL, работают с хранилищем запросов. А ведь хранилище запросов – это очень удобный, мощный и, главное, бесплатный инструмент, позволяющий быстро найти и локализовать проблему производительности и потребления ресурсов запросами. В статье расскажем о том, как использовать хранилище запросов в MS SQL и какие плюсы и минусы у него есть.

11.10.2023    16970    skovpin_sa    14    

102
Комментарии
Подписаться на ответы Инфостарт бот Сортировка: Древо развёрнутое
Свернуть все
1. Xershi 1490 23.04.20 11:04 Сейчас в теме
Статью пока не читал.
Ссылка в начале это что за проект? Как его на 1С открыть?
2. ivanov660 4359 23.04.20 13:17 Сейчас в теме
(1)
1. Это проект для EDT. Если не хотите компилировать, а хотите готовую конфигурацию, то можете скачать отсюда: https://infostart.ru/public/936096/ (тут я выкладываю последние собранные версии).
Все обработки скомпилированы и находятся этом репозитории на гитхабе.
2. В большинстве статей (в документации приведены ссылки) есть видеоурок и информация откуда что скачать и как подключить.
3. Коллеги предложили выложить на гитхабе также скомпилированную версию - в релизах, в дальнейшем думаю организуем такую возможность.
cleaner_it; +1 Ответить
3. ivanov660 4359 23.04.20 13:22 Сейчас в теме
Также в ближайших планах мы выложим механизм, статью и видео-урок автоматической классификации ошибок из логов технологического журнала.
В техническом плане - использование механизмов векторного представления тестов, и определения тематики, можно сказать что близко к алгоритму text2vec.
gortol; antonio_i; cleaner_it; +3 Ответить
4. robix 07.06.23 21:00 Сейчас в теме
Здравствуйте. Подскажите пожалуйста, а эта система парсит техжурнал и 1С и на его основе дает отчет от том, что определенный пользователь 1С например, слишком долго выполняет запрос. Интересует, как реализовано именно это событие, когда сеанс слишком долго делает запрос к базе данных. Так это работает ? Или как-то по-другому ?
5. ivanov660 4359 08.06.23 17:41 Сейчас в теме
6. robix 28.06.23 14:33 Сейчас в теме
(5) Можете подсказать, как отловить в тех журнале фоновые задания, которые выполняются более, чем 1 час например?
Оставьте свое сообщение