Технологический журнал: База данных

Для расследования проблем производительности недостаточно просто проанализировать технологический журнал. Нужен парсинг контекста событий, его сопоставление с информацией из Extended Events и логов, агрегация огромного количества информации.

+83

21.09.2023 7241 Andreynikus 14

83

Экспорт технологического журнала 1С в Elastic с помощью Logstash

Технологический журнал Системный администратор Программист Платформа 1С v8.3 Абонемент ($m)

Целью данного решения является организация хранения и анализа данных из технологического журнала 1С с использованием стека Elasticsearch + Logstash + Kibana.

5 стартмани

+27

18.09.2023 5075 huxuxuya 6

27

История расследования (с бонусами) взаимоблокировок на таблице итогов регистра бухгалтерии

HighLoad оптимизация Технологический журнал Системный администратор Программист Платформа 1С v8.3 Россия Бесплатно (free)

Мой первый опыт расследования взаимоблокировок на таблице итогов регистра бухгалтерии на новом месте работы.

+18

22.05.2023 3191 AlexSTAL 2

18

Мобильный помощник эксперта 1С (приложение android, позволяющее строить отчеты на СКД по логам технологического журнала и не только)

Технологический журнал Мониторинг Системный администратор Платформа 1С v8.3 Конфигурации 1cv8 Бесплатно (free)

Приложение на мобильной платформе 1С Предприятие, позволяющее разбирать все, что может быть разобрано в командной строке linux, и выводить полученный результат типовыми методами системы компоновки данных. По мотивам направления Эксперт по технологическим вопросам

+24

16.05.2023 4261 capitan 1

24

Разбор технологического журнала без боли и страданий

Технологический журнал Системный администратор Программист Абонемент ($m)

Технологический журнал - мощный инструмент логирования, используемый для анализа проблем производительности 1С. Но он обладает одним огромным недостатком, в "сыром виде" он почти не поддается адекватному анализу из-за своей структуры. Существует довольно много способов "разобрать" технологический журнал, но все опробованные способы обладают теми или иными недостатками. Предлагаю вам мой вариант "велосипеда" для разбора ТЖ и хранения разобранного в различных форматах.

1 стартмани

+91

12.12.2022 10112 47 Segate 35

91

Выполняем в СУБД запрос из ТЖ

Технологический журнал Программист Платформа 1С v8.3 Конфигурации 1cv8 Абонемент ($m)

Обработка для подстановки или нумерации параметров в тексте запроса из технологического журнала.

1 стартмани

+19

24.11.2022 3188 5 VKislitsin 1

19

Экспертный взгляд на оптимизацию производительности на примере исправления и декомпозиции запроса

HighLoad оптимизация Технологический журнал Мониторинг Запросы Программист Платформа 1С v8.3 1С:ERP Управление предприятием 2 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х Бесплатно (free)

Еще один интересный пример оптимизации производительности ERP. Описываем решение проблемы подробно по шагам.

+88

20.07.2022 7313 ivanov660 17

88

Графическое представление технологического журнала, или Гант наглядности

Технологический журнал Системный администратор Бесплатно (free)

Можно ли упростить восприятие технологического журнала 1С? Понять смысл информации, содержащейся в нём, не прибегая к скриптам, и одним взглядом, охватив его графическое представление, выявить узкие места в системе? Попробуем в этом разобраться.

+50

12.07.2022 3537 Eugeeny 6

50

Парсинг полного технологического журнала 1С и выгрузка в таблицу СУБД (MSSQL, Postgres, SQLight) с помощью python

Инструменты администратора БД Технологический журнал Системный администратор Программист Абонемент ($m)

Разработан скрипт, который разбирает полный технологический журнал 1С и загружает результат в различные СУБД.

1 стартмани

+20

30.03.2022 7379 9 FreeArcher 14

20

Пример пошагового решения проблемы производительности на базе Postgres SQL с картинками

HighLoad оптимизация Технологический журнал Системный администратор Программист Платформа 1С v8.3 Бесплатно (free)

Рассмотрим по шагам процесс обнаружения, анализа и решения проблемы производительности на примере базы ERP, сравним отличия в работе Postgres и MS SQL.

+157

28.02.2022 18985 ivanov660 18

157

Смотрим запросы 1С через Microsoft SQL Profiler по следам ошибок разработчиков, приводящих к проблемам производительности

HighLoad оптимизация Рефакторинг и качество кода Технологический журнал Программист Платформа 1С v8.3 Бесплатно (free)

Расскажем про инструменты, рассмотрим планы запросов, увидим, как отслеживать и бороться с проблемами производительности на боевой базе.

+198

07.09.2021 30199 ivanov660 26

198

Утилита для перезаписи технологического журнала в удобный для анализа формат (Linux)

Linux Технологический журнал Абонемент ($m)

Проводить анализ технологического журнала (далее ТЖ) средствами bash и powershell было бы удобнее, если бы события записывались в одну строку и строго соблюдался единый формат ограничителей содержимого полей. Данная утилита устраняет эти недостатки, благодаря чему станет легче писать скрипты, вы сможете повысить точность анализа ТЖ, избежать пропуска мелких событий.

1 стартмани

+8

26.08.2021 4731 7 cdiamond 2

8

Просмотр файлов технологических журналов 1С (WinAPI)

HighLoad оптимизация Технологический журнал Системный администратор Платформа 1С v8.3 Россия Абонемент ($m)

Программа просмотра файлов технологических журналов 1С (WinAPI). Работает с большими файлами. Минимальное потребление памяти при индексировании данных, просмотре. Анализ управляемых взаимоблокировок, таймаутов, ожиданий. Фильтры по событиям, периоду, пользователям, соединениям, сеансам.

1 стартмани

+24

24.08.2021 7551 32 sdf1979 17

24

Снова про анализ технологического журнала с помощью PowerShell

Технологический журнал Системный администратор Программист Платформа 1С v8.3 Бесплатно (free)

Универсальная методика анализа технологического журнала (далее - ТЖ) с помощью Powershell без применения алгоритмов программирования.

+30

05.08.2021 3601 cdiamond 1

30

Разбор причины ошибки "Нарушение целостности чтения объекта базы данных из-за параллельного изменения объекта другим сеансом"

Технологический журнал Программист Платформа 1С v8.3 Конфигурации 1cv8 Бесплатно (free)

При нагруженной работе начали возникать ошибки чтения из-за параллельного изменения. Здесь приводится расследование причин проблемы.

+9

25.06.2021 4497 pashamak 2

9

Внешний отчет на СКД "Ошибки технологического журнала". Для любой типовой конфигурации 1С: Предприятие 8.3

Технологический журнал Системный администратор Платформа 1С v8.3 Абонемент ($m)

Каждый опытный сисадмин знает, что лучший показатель количества ошибок 1С, это крики менеджеров отдела продаж. Но мудрейшие из них настраивают сбор технологического журнала, чтобы знать, кто первый кинул пластиковый стаканчик. Об этом и поговорим под катом...

5 стартмани

+8

21.06.2021 4022 12 capitan 0

8

Powershell: Анализ технологического журнала. Топ-25 вызовов.

Технологический журнал Системный администратор Программист Платформа 1С v8.3 Абонемент ($m)

Использование Powershell для анализа технологического журнала 1с. Пример получения топ-25 вызовов

1 стартмани

+55

16.06.2021 10089 14 Dimashiro 17

55

Рецепты приготовления технологического журнала

Технологический журнал Системный администратор Программист Бесплатно (free)

Понимание принципов событий технологического журнала позволяет решать многие проблемы производительности и стабильности работы платформы 1С. О том, как взаимосвязаны события технологического журнала и как с их помощью можно анализировать серверные вызовы 1С, на INFOSTART MEETUP Ekaterinburg.Online рассказал программист 1С из компании ДНС-Ритейл Максим Старков.

+233

22.03.2021 55346 max_st 14

233

Анализ полного технологического журнала, 100ГБ+

Технологический журнал Программист Бесплатно (free)

В этой статье рассматривается анализ полного технологического журнала, размер которого за 1 час достигает 50Гб+. Когда у какого-то пользователя что-то происходит, но не постоянно, и выделить определенного пользователя не получается, и проще собрать полный технологический журнал. Но на дальнейшем анализе доступные визуальные средства не выдерживают таких объемов, и просмотр журнала объемом 50Гб попросту вылетает. Но поведение 1С все же хотелось бы изучить и проанализировать, что происходит.

+43

18.03.2021 6003 Axel2009 19

42

Парсер технологического журнала (golang + redis + elasticsearch)

Технологический журнал Системный администратор Программист Платформа 1С v8.3 Конфигурации 1cv8 Абонемент ($m)

На просторах интернета, в том числе на данном ресурсе содержится разнообразное количество инструментов, позволяющих читать, трансформировать логи технологического журнала. Инструмент, который я описываю в данной статье, - является альтернативным вариантом, реализованным на стеке технологий Goroutines (golang) + Redis + Elasticsearch.

1 стартмани

+53

07.01.2021 14373 11 Shmell 14

53

Водопад из Техжурнала 1С

Технологический журнал Системный администратор Программист Платформа 1С v8.3 Конфигурации 1cv8 Абонемент ($m)

Строим визуализацию в виде waterfall-графика по данным событий технологического журнала.

5 стартмани

+99

23.12.2020 7659 VKislitsin 8

99

Описание почти всех событий технологического журнала

Технологический журнал Системный администратор Программист Платформа 1С v8.3 Бесплатно (free)

Краткое описание событий технологического журнала с примерами. Все для быстрого старта.

+553

19.08.2020 102131 Infostart 47

553

Адаптация автоматической классификации ошибок технологического журнала при появлении новых текстов и типов

Технологический журнал Системный администратор Программист Платформа 1С v8.3 Конфигурации 1cv8 Бесплатно (free)

Корректируем классификацию ошибок ТЖ в процессе работы для конфигурации мониторинг производительности

+13

17.08.2020 1969 ivanov660 0

13

Автоматическая классификация ошибок технологического журнала

Технологический журнал Системный администратор Платформа 1С v8.3 Конфигурации 1cv8 Бесплатно (free)

В статье обсудим пример практической настройки конфигурации «Мониторинг производительности» для автоматической классификации ошибок по группам/кластерам на данных текстов описания ошибок. Используем механизм векторной модели текстов и косинусное сходство между ними.

+60

25.06.2020 9987 ivanov660 15

60

Пример поиска ошибок в технологическом журнале

Технологический журнал HighLoad оптимизация Программист Бесплатно (free)

Примеры bash - скриптов для поиска ошибок в технологическом журнале.

+40

23.04.2020 7618 vasilev2015 7

40

Многострочный контекст событий

HighLoad оптимизация Технологический журнал Программист Платформа 1С v8.3 Бесплатно (free)

Разбор технологического журнала с группировкой событий по первой или последней строке многострочного контекста.

+36

31.03.2020 5536 vasilev2015 12

36

Анализ взаимоблокировок

HighLoad оптимизация Технологический журнал Системный администратор Программист Платформа 1С v8.3 Управление блокировками Бесплатно (free)

Скрипт Bash, который выводит полную информацию взаимоблокировок по технологическому журналу. Не имеет аналогов в отечественных публикациях.

+92

20.03.2020 12481 vasilev2015 53

92

Получение top 25 вызовов в клиент-серверном режиме работы с наибольшей суммарной длительностью

HighLoad оптимизация Технологический журнал Системный администратор Программист Платформа 1С v8.3 Бесплатно (free)

Анализ технологического журнала

+72

15.03.2020 11254 vasilev2015 27

72

Длина ключа индекса превышает максимально допустимую. Решение с использованием технологического журнала

Корректировка данных Технологический журнал Системный администратор Программист Платформа 1С v8.3 Конфигурации 1cv8 Россия Абонемент ($m)

При разработке конфигурации в клиент-серверном варианте могут возникнуть проблемы при загрузке конфигурации в файловый вариант. В статье описан один из вариантов решения проблемы.

1 стартмани

+9

28.01.2020 12600 6 newtraveller 0

8

Упражнения на Перфоленте. Парсим технологический журнал 1С

Технологический журнал Системный администратор Программист Абонемент ($m)

В статье рассматривается парсинг технологического журнала 1С на новом языке программирования Перфолента. Статья может быть полезна как для парсинга, так и для изучения некоторых особенностей языка.

1 стартмани

+26

31.07.2019 9051 Perfolenta 62

26

5 простых шагов и 15 минут на разворачивание инструмента мониторинга проблем производительности базы 1С

HighLoad оптимизация Технологический журнал Системный администратор Программист Платформа 1С v8.3 Бесплатно (free)

В этой статье мы разберем механизм использования конфигурации "Анализ технологического журнала" на практике, и всего через 15 минут работы вы получите функциональный, удобный инструмент мониторинга проблем производительности базы 1С.

+319

18.04.2019 55988 ivanov660 98

319

bash, еще bash, еще много-много bash

Технологический журнал Системный администратор Программист Платформа 1С v8.3 Бесплатно (free)

Делюсь своим опытом параллельного разбора технологического журнала. По мотивам статьи https://infostart.ru/public/928184.

+11

29.10.2018 5644 mickey.1cx 1

11

Go. Разбор лога технологического журнала. Достойная альтернатива perl'у

Технологический журнал Системный администратор Программист Платформа 1С v8.3 Конфигурации 1cv8 Абонемент ($m)

Началось все с того, что я познакомился с перловыми скриптами для парса ТЖ которые размещены на kb.1c.ru (например в этой статье https://kb.1c.ru/articleView.jsp?id=113). По началу мне дико понравилось то, что перл разбирал гигабайты логов за считанные минуты, но позитив мой угасал обратно пропорционально с тем, насколько глубже я погружался в "кроличью нору" ....

1 стартмани

+96

24.10.2018 24242 lazarenko 42

96