Фреймворк "Мониторинг производительности". Руководство пользователя

25.06.20

База данных - HighLoad оптимизация

Описание и руководство "Мониторинг производительности": краткое описание конфигурации, сборник из статей, примеров - собрано в одном файле.

Скачать файл

ВНИМАНИЕ: Файлы из Базы знаний - это исходный код разработки. Это примеры решения задач, шаблоны, заготовки, "строительные материалы" для учетной системы. Файлы ориентированы на специалистов 1С, которые могут разобраться в коде и оптимизировать программу для запуска в базе данных. Гарантии работоспособности нет. Возврата нет. Технической поддержки нет.

Наименование Бесплатно
Фреймворк "Мониторинг производительности". Руководство пользователя
.pdf 3,29Mb ver:2020.06.25
914
914 Скачать бесплатно

По просьбе коллег мы создали и выложили руководство для системы мониторинга производительности. Фреймворк расположен на GitHub (https://github.com/Polyplastic/1c-parsing-tech-log/).  При желании, можно обсудить вопросы по составу, возможные пожелания и другое в рамках данного проекта в текущем посте.

Состав руководства:

Интро.

Благодарности, Назначение, Сокращения и допущения и Быстрый старт.

Раздел I. Конфигурация «Мониторинг производительности»

Подсистема «Замеры»:

  • Справочник «Замеры»
  • Справочник «События замера»
  • Справочник «Свойства»
  • Справочник «Процессы»
  • Справочник «События»

Подсистема «Оракул»:

  • Справочник «Нейронная сеть»
  • Справочник «Машина состояний»
  • Регистр сведений «Снимки состояний»
  • Регистр сведений «Состояние обработки FSM»

Подсистема «Администрирование»:

  • Справочник «Пользователи»
  • Справочник «Оборудование»
  • Справочник «Учетные записи»
  • Справочник «Дополнительные обработки и отчеты»
  • Справочник «Файлы замеров»
  • Регистр сведений «Состояние чтения»
  • Регистр сведений «Безопасное хранилище данных»
  • Обработка «Регламентные задания»
  • Обработка «Установка компактного интерфейса»

Раздел II. Основные редакторы и Плагины

  • Редактор "Настройка машины состояний"
  • Редактор "Настройка нечеткого контроллера"
  • Редактор "Настройка нейронной сети"
  • Плагин загрузки данных с сервера администрирования кластеров 1С (RAS)
  • Плагин загрузка данных из zabbix
  • Плагин для отправки сообщений по почте
  • Плагин для отправки сообщение через skype
  • Плагин для отправки сообщение через telegram
  • Плагин обработка машины состояний
  • Плагин обработка нечеткой логики
  • Плагин отчет мониторинга
  • Плагин сравнение количества событий
  • Плагин обработка нейронной сетью
  • Плагин проверка онлайн баз 1С Remote Control
  • И другие...

Раздел III. Практика и методика работы

  • Разворачивание конфигурации с нуля
  • Настройка загрузки данных из технологического журнала 1С
  • Настройка мониторинга производительности с использованием данных Performance Monitor для Windows
  • Получение общей итоговой оценки состояния обслуживаемой системы в диапазоне «норма-критическое-авария» с помощью Ларисы.
  • Получение оценки состояния системы по данным RAS  1С в диапазоне «норма-критическое-авария» с помощью Ларисы
  • Подключение отправки сообщений о возникших проблемах производительности через @mail, Skype, Telegram.
  • Схема сообщения об отсутствии базы online в течении интервала.
  • Ежедневный анализ проблем производительности по технологическому журналу 1С.
  • Оценка анализа качества обновления после релиза или настроек системы.
  • Методика выполнение мероприятий по повышению быстродействия системы.
  • И другое ...

Приложения.    

  • Полезные ссылки
  • Таблица счетчиков производительности для Windows 
  • Таблица счетчиков производительности для MS SQL Server    
  • Примеры регулярных записей для фильтрации загрузки технологического журнала
  • Другие.

 

P.S. В инструкции на текущий момент приведена основания информация. Некоторые главы будут расширены и доработаны. Также будут опубликованы другие статьи на этом ресурсе.

Мониторинг производительности

См. также

HighLoad оптимизация Программист Платформа 1С v8.3 Бесплатно (free)

Метод очень медленно работает, когда параметр приемник содержит намного меньше свойств, чем источник.

06.06.2024    9253    Evg-Lylyk    61    

44

HighLoad оптимизация Программист Платформа 1С v8.3 Конфигурации 1cv8 Бесплатно (free)

Анализ простого плана запроса. Оптимизация нагрузки на ЦП сервера СУБД используя типовые индексы.

13.03.2024    5094    spyke    28    

49

HighLoad оптимизация Программист Платформа 1С v8.3 Бесплатно (free)

Оказывается, в типовых конфигурациях 1С есть, что улучшить!

13.03.2024    7571    vasilev2015    20    

42

HighLoad оптимизация Инструменты администратора БД Системный администратор Программист Платформа 1С v8.3 Конфигурации 1cv8 Абонемент ($m)

Обработка для простого и удобного анализа настроек, нагрузки и проблем с SQL сервером с упором на использование оного для 1С. Анализ текущих запросов на sql, ожиданий, конвертация запроса в 1С и рекомендации, где может тормозить.

2 стартмани

15.02.2024    12414    241    ZAOSTG    80    

115

HighLoad оптимизация Системный администратор Программист Платформа 1С v8.3 Конфигурации 1cv8 Абонемент ($m)

Принимать, хранить и анализировать показания счетчиков (метрики) в базе 1С? Почему бы нет? Но это решение быстро привело к проблемам с производительностью при попытках построить какую-то более-менее сложную аналитику. Переход на PostgresSQL только временно решил проблему, т.к. количество записей уже исчислялось десятками миллионов и что-то сложное вычислить на таких объемах за разумное время становилось все сложнее. Кое-что уже практически невозможно. А что будет с производительностью через пару лет - представить страшно. Надо что-то предпринимать! В этой статье поделюсь своим первым опытом применения СУБД Clickhouse от Яндекс. Как работает, что может, как на нее планирую (если планирую) переходить, сравнение скорости работы, оценка производительности через пару лет, пример работы из 1С. Все это приправлено текстами запросов, кодом, алгоритмами выполненных действий и преподнесено вам для ознакомления в этой статье.

1 стартмани

24.01.2024    5668    glassman    18    

40

HighLoad оптимизация Программист Платформа 1С v8.3 Конфигурации 1cv8 Абонемент ($m)

Встал вопрос: как быстро удалить строки из ТЗ? Рассмотрел пять вариантов реализации этой задачи. Сравнил их друг с другом на разных объёмах данных с разным процентом удаляемых строк. Также сравнил с выгрузкой с отбором по структуре.

09.01.2024    14001    doom2good    49    

71
Комментарии
Подписаться на ответы Инфостарт бот Сортировка: Древо развёрнутое
Свернуть все
1. Xershi 1555 23.04.20 11:04 Сейчас в теме
Статью пока не читал.
Ссылка в начале это что за проект? Как его на 1С открыть?
2. ivanov660 4577 23.04.20 13:17 Сейчас в теме
(1)
1. Это проект для EDT. Если не хотите компилировать, а хотите готовую конфигурацию, то можете скачать отсюда: https://infostart.ru/public/936096/ (тут я выкладываю последние собранные версии).
Все обработки скомпилированы и находятся этом репозитории на гитхабе.
2. В большинстве статей (в документации приведены ссылки) есть видеоурок и информация откуда что скачать и как подключить.
3. Коллеги предложили выложить на гитхабе также скомпилированную версию - в релизах, в дальнейшем думаю организуем такую возможность.
cleaner_it; +1 Ответить
3. ivanov660 4577 23.04.20 13:22 Сейчас в теме
Также в ближайших планах мы выложим механизм, статью и видео-урок автоматической классификации ошибок из логов технологического журнала.
В техническом плане - использование механизмов векторного представления тестов, и определения тематики, можно сказать что близко к алгоритму text2vec.
gortol; antonio_i; cleaner_it; +3 Ответить
4. robix 07.06.23 21:00 Сейчас в теме
Здравствуйте. Подскажите пожалуйста, а эта система парсит техжурнал и 1С и на его основе дает отчет от том, что определенный пользователь 1С например, слишком долго выполняет запрос. Интересует, как реализовано именно это событие, когда сеанс слишком долго делает запрос к базе данных. Так это работает ? Или как-то по-другому ?
5. ivanov660 4577 08.06.23 17:41 Сейчас в теме
6. robix 28.06.23 14:33 Сейчас в теме
(5) Можете подсказать, как отловить в тех журнале фоновые задания, которые выполняются более, чем 1 час например?
Оставьте свое сообщение