Все публикации Оптимизация БД (HighLoad) — все для 1С
Опыт миграции из собственного датацентра в облако AWS Промо
Хотя данная публикация и не имеет прямого отношения к 1С, она может быть интересна тем, кто занимается крупными базами данных на MS SQL Server. Описывается опыт миграции баз данных в облако AWS в компании glassdoor.com, где я занимался этим проектом. Это первый драфт текста, получившийся довольно скомканным - в процессе буду дополнять.
29.07.2018 2337 7
Очистка и обновление индекса полнотекстового поиска (регламентное задание)
Обработка-регламентное задание позволяет в автоматическом режиме очищать и обновлять индекс полнотекстового поиска. Это необходимо делать для устранения проблем производительности на крупных базах. Подключаем в доп.обработках, задаем расписание выполнения на выходные и радуемся :)
2 стартмани
14.09.2018 864 4 2
Пересечение транзакций. Примеры
Рассматривается пересечение транзакций типа чтение-запись над одним элементом справочника при разных уровнях изоляции.
3 стартмани
03.09.2018 2016 5
Нетривиальные подходы в решении всем известных проблем: ускорение «больших» документов в 1С и ускорение поиска по подстроке. Как добиться эффекта в разы?
Часто у пользователей 1С поиск информации по большим спискам данных по подстроке занимает продолжительное время. Павел Баркетов рассматривает причины торможения запросов с поиском по подстроке и описывает возможности и подходы к их оптимизации и ускорению. Также в статье разобраны причины длительного проведения «больших» документов (более 10 000 строк) и даны рекомендации по ускорению этих операций.
30.08.2018 4216 31
Свертка базы SQL + Альтернативный контроль удаления помеченных Промо
Свертка базы 1с 8.1, 8.2, 8.3 (может использовать прямые запросы к MSSQL, PostgreSQL). Сворачивает документы, регистры накопления, сведений, бухгалтерии (но не регистры расчета). Универсальна, подойдет к любой конфигурации (обратите внимание на известные ограничения). Включает в себя нестандартный быстрый контроль удаления помеченных объектов и удаление помеченных объектов прямыми запросами. Поставляется с исходными кодами.
6500 руб.
13.06.2012 56874 807 85
Влияние количества пользователей на производительность
Анализ влияния количества пользователей на производительность 1С:Предприятие.
29.08.2018 2610 37
Кейс: как мы разрабатывали систему автоматизации анализа ошибок, связанных со скоростью работы 1С
Бурмистров Андрей рассказывает о создании инструмента по автоматизации анализа неоптимальных запросов в коде 1С. Он поднимает вопрос о предпосылках создания этого инструмента, рассказывает о возникших форс-мажорных ситуациях, с которыми столкнулась команда в процессе разработки, и о том, как они с ними справлялись.
27.08.2018 3676 20
Монитор блокировок пользователей
Анализ и автоматическое удаление блокировок
1 стартмани
17.08.2018 1764 4 6
Онлайн-курс "Подготовка к экзамену 1С:эксперт и 1С:Профессионал по технологическим вопросам" . Курс проходит с 27 октября по 18 ноября. Промо
Онлайн-курс "Подготовка к экзамену 1С:эксперт и 1С:Профессионал по технологическим вопросам" высоконагруженных информационных систем (более 1000 пользователей).
16450 руб.
30.05.2018 9236 0 3
3000 пользователей на трехъядерном Athlon – сверхтонкий веб-клиент для 1С
Юрий Лазаренко поделится опытом ускорения 1С нестандартными методами, в том числе с помощью http-сервисов. Он расскажет, как с помощью сверхтонкого клиента для 1С и интеграции с сайтом удалось добиться ускорения 1С на порядок. Также в статье приведена статистика по отчету о нагрузочном тестировании сверхтонкого клиента для 1С:ITIL.
16.08.2018 6034 27
Когда условие в срезе последних даже вредит
Спойлер: оптимизатор MSSQL видит внешние, по отношению к срезу, условия, и строит план с их учетом.
05.08.2018 3501 92
Оптимизация без оптимизации: как мы ускорили 1С в 10 раз без трудоемкой оптимизации запросов и алгоритмов. Практический опыт
Можно ли ускорить 1С, не оптимизируя запросы, не разбивая транзакции и не наращивая оборудование? В статье Аверьянова Алексея рассмотрены три практических кейса повышения производительности системы без трудоемкой оптимизации: отложенное резервирование «в один поток», отложенное создание и проведение реализаций.
26.07.2018 7998 100
SQL сервер 2008: обслуживание, анализ производительности Промо
Полезные скрипты и запросы для SQL 2008: обслуживание, анализ производительности. Файл со всеми скриптами во вложении.
1 стартмани
23.10.2014 51784 93 63
Альтернативные технологии нагрузочного тестирования серверной части кода прикладных решений на платформе 1С
Евгений Филиппов знакомит с альтернативными технологиями нагрузочного тестирования серверной части кода прикладных решений на платформе 1С. Он рассказывает об узких местах традиционной технологии нагрузочного тестирования и методах их обхода путем переноса работы с клиентских соединений на фоновые задания и изменения способа управления сеансами. Также автор приводит примеры с реальных проектов, подтверждающие жизнеспособность предложенных технологий.
12.07.2018 4907 9
Архитектура ИТ-системы на базе 1С в крупной организации. Часть 2. Чудес не бывает
Развернуто отвечаю, как мы боремся с зависаниями системы и вообще решаем проблемы. С примерами, но без слайдов.
04.07.2018 8027 74
Архитектура ИТ-системы на базе 1С в крупной организации
В данной статье я хотел бы очень крупными мазками обрисовать архитектуру ИТ системы на базе 1С в крупных (более 1 тысячи пользователей) организациях. Она не несет какой либо образовательной цели, это просто попытка показать – «а как у нас».
02.07.2018 8742 109
Оптимизация запросов 1С - от теории к практике Промо
Желаете повысить свой уровень разработки? Не знаете, как оптимизировать работу тяжелых запросов 1С? Или знаете методы оптимизации, но на практике не получаете результат? Тогда эта интерактивная обучающая программа для Вас! Оптимизация запросов прямо в программе 1С:Предприятие 8. Несколько десятков практических заданий, рассматривающих методы оптимизации на практике. От Вас требуются реальные решения - оптимизация представленных запросов. Автоматизированная система оценит Ваш запрос и представит результат проверки.
1500 руб.
06.07.2015 42996 273 4
Нагрузочное тестирование. В дни проведения ЧМ по футболу.
Нагрузочное тестирование. Подготовка к экзамену 1С:Эксперт. По мотивам доклада Виктора Богачева Инфостарт Event 2014. В дни проведения ЧМ по футболу.
1 стартмани
24.06.2018 3529 9
Взгляд на ошибки и платформу через призму HI-Load
Поговорим об ошибках в целом и их влиянии на Hi-Load системы в частности. Может ли тут помочь платформа 1С? (да и должна ли в принципе?) Немного про сам Hi-Load на примере крупной БД. PS Данная статья написана по итогам доклада, прочитанного на конференции INFOSTART EVENT 2017 COMMUNITY.
18.06.2018 5463 15
Оптимизация 1С на реальном примере. История №2 - deadlock
Статья о том, как я расследовал взаимоблокировки (deadlock) в 1С.
11.06.2018 6339 18
Регламентные операции с индексами в MS SQL Server (Скрипты для SQL-Server - Часть 2) Промо
В данном вебинаре я расскажу о том, что такое индексы, зачем они нужны, какие регламентные операции необходимо выполнять с индексами, а также будут приведены соответствующие скрипты (для MS SQL-Server) для обслуживания индексов баз данных.
1 стартмани
22.03.2018 12100 17 7
Если таблица совсем большая. Использование столбцовой СУБД (Yandex ClickHouse) для расширения возможностей 1С
В последнее время появилась хорошая тенденция использовать для решений 1С обширный стек смежных технологий. Это, несомненно, радует. В связи с этим я хочу рассказать про бесплатное OpenSource-решение от компании Яндекс – столбцовую базу данных ClickHouse, и то, как ее можно использовать совместно с 1С. Для небольших 1С-систем ClickHouse, скорее всего, не пригодится. Но если мы говорим о HighLoad, тогда эта технология может оказаться очень полезной.
07.06.2018 8627 24
Ускорение отчета 'Контроль передвижений агентов (онлайн-карты)' от AgentPlus v1.5.2
У пользователей системы AgentPlus (Агент Плюс) отчет 'Контроль передвижений агентов (онлайн-карты)' v1.5.2 вызывает восторг и разочарование одновременно. Восторг – потому, что позволяет увидеть маршрут передвижения пользователя системы с привязкой к карте и дорогам, разочарование – от длительности построения отчета. Отчет по 45 точкам маршрута у меня строится больше минуты. Тестировалось на "Управление торговым Предприятием" 1.2.45.2.
1 стартмани
03.05.2018 2252 3 0
Простые регулярные выражения
Шпаргалка к экзамену "Эксперт по технологическим вопросам".
1 стартмани
30.04.2018 5727 30
Еще немного полезных SQL-скриптов (Скрипты для SQL-Server - Часть 3) Промо
Представляю вашему вниманию заключительный вебинар из цикла вебинаров по скриптам для MS SQL-сервера.
1 стартмани
29.03.2018 9079 7 4
Неоптимальная работа запроса
Шпаргалка к экзамену "Эксперт по технологическим вопросам".
27.04.2018 11372 31
Неоптимальный план запросов
Шпаргалка к экзамену "Эксперт по технологическим вопросам".
21.04.2018 5862 11
Ожидания RESOURCE_SEMAPHORE и RESOURCE_SEMAPHORE_QUERY_COMPILE – внешние проявления, и как с ними бороться
Рассматривается один из типов массовых проблем в рабочих базах на связке «1С - MS SQL Server».
03.03.2018 6857 7
Многопоточность. Универсальный «Менеджер потоков» 2.0 Промо
Восстановление партий или взаиморасчетов, расчет зарплаты, пакетное формирование документов или отчетов - теперь все это стало доступнее. * Есть желание повысить скорость работы медленных алгоритмов! Но... * Нет времени думать о реализации многопоточности? * о запуске и остановке потоков? * о поддержании потоков в рабочем состоянии? * о передаче данных в потоки и как получить ответ из потока? * об организации последовательности? Тогда ЭТО - то что надо!!!
10 стартмани
07.02.2018 54226 73 28
Неоптимальности вида «план исполнения запроса "испортился"» - поиск и исправление
Рассматривается один из частых типов проблем в рабочих базах (второй после блокировок, пожалуй... впрочем, часто и тесно с ними связанный). Материал относится к базам данных на связке «1С - MS SQL Server».
05.02.2018 9919 20
В «1С:ЗУП КОРП 3.1» тормоза (медленная работа) в журналах документов при использовании критериев отбора
Статья для тех, у кого: 1) используете RLS (ограничение доступа на уровне записей и полей), 2) много документов (более 100 тысяч в одном журнале), 3) используете «Журналы документов», 4) отборы в динамическом списке (по сотруднику). Скорее всего, Вы испытали на себе, как отбор происходит минутами (жутко тормозит) – тогда Вам сюда.
1 стартмани
04.01.2018 8885 3
Докер образ для быстрого запуска анализатора журналов PostgreSQL
Журналы работы очень полезный инструмент, и их может быть очень много. Их можно записывать в /dev/null или вообще отключить, но лучше не стоит так делать, ведь в них можно отыскать массу полезной информации о работе СУБД.
1 стартмани
29.12.2017 4720 0 0
Многопоточность. Универсальный «Менеджер потоков» (фреймворк) с отслеживанием зависимости объектов Промо
Восстановление партий, расчет зарплаты, пакетное формирование документов или отчетов - теперь все это стало доступнее. * Есть желание повысить скорость работы медленных алгоритмов! Но... * Нет времени думать о реализации многопоточности? * о запуске и остановке потоков? * о поддержании потоков в рабочем состоянии? * о передаче данных в потоки и как получить ответ из потока? * об организации последовательности? Тогда ЭТО - то что надо!!!
26.05.2017 26816 76
Пример поиска неоптимальности при загрузке SQL-сервера по CPU на 100%
Вечер пятницы, ничто не предвещало.. Звонок из техподдержки: "центральная база розничной сети лежит". Далее расследование причин.
23.12.2017 10856 32
Система сбора и анализа информации по производительности работы баз данных, работающих под связкой «кластер 1С 8.2/8.3 - Microsoft SQL server»
Инструмент в помощь специалисту по производительности sql-серверов с базами 1С. Программа (c#) собирает наиболее заметные (по времени исполнения, физическим / логическим чтениям / загрузке CPU ) запросы, группирует по обобщенным текстам запросов и контекстам исполнения 1С (если есть), предоставляет информацию в виде отчетов по наиболее заметным запросам и прочей информации (длительные запросы по данным техжурналов, содержимое буферпула в динамике, содержимое клерков памяти, ожидания сервера в разрезе бд, статистика ввода-вывода по файлам баз).
1 стартмани
12.12.2017 8156 78 6
Оптимизация 1С на реальном примере
Статья о том, как я оптимизировал 1С, с целью ускорить проведение документа.
02.11.2017 11331 37
Исследование технологического журнала 1С при помощи регулярных выражений в блокноте Промо
Все из тех, кто пробовали сдать на сертификат "Эксперт по технологическим вопросам 1С", сталкивались с методикой ЦКТП - разбор файлов технологического журнала при помощи консоли bash. Я, в свою очередь,внёс изменения в данную методику. Мне хотелось достичь более понятного вида и сфокусироваться на Perl, в качестве предпочтительного средства обработки файлов ТЖ. Вот что из этого вышло:
30.10.2017 15490 37
Сжатие данных в базе данных средствами СУБД
На Инфостарте есть статья https://infostart.ru/public/114634/ про то, как навесить триггеры на создание таблиц, чтобы новые таблицы в БД создавались сжатыми. Для существующих баз предлагается загрузить базу из ДТ или сделать ТиИ с реструктуризацией. Предлагаю вашему вниманию скрипт, который сделает это для существующей БД средствами SQL.
27.10.2017 7859 37
Следим за производительностью системы. APDEX, PowerShell, PRTG
Продолжаю делиться своими кастомными сенсорами для системы мониторинга PRTG.
1 стартмани
26.10.2017 5954 7 0
Обработки для проведения сценарного нагрузочного тестирования на примере конфигурации ЗУП версии 3.1.1.91
Обработки предназначены для проведения сценарного нагрузочного тестирования, включая пример описанного сценария с обработками (epf) - ГлавныйРасчетчик, Кадровик, Расчетчик, Табельщик. Обработка будет полезна прежде всего тому, кто внедряет решение на базе конфигурации 1С "Зарплата и Управления персоналом" с необходимостью воспроизвести определенный сценарий с заданным количеством пользователей для расчета, а также возможность посмотреть, какая будет при этом нагрузка на ваше оборудование и скорость выполнения операций с учетом блокировок СУБД. Также это будет интересно тем, кто хочет прощупать, как на практике пользоваться конфигурацией "Тест Центр", входящий в состав пакета 1С:КИП.
2 стартмани
15.09.2017 5032 10 0
Монитор блокировок СУБД, версия 7 Промо
Удобный и простой инструмент для администратора и программиста 1С. Отображаются блокировки устанавливаемые СУБД Microsoft SQL Server при выполнении операций в информационной базе. Позволяет быстро выявить источник проблемы ожиданий на блокировках. В отличие от 1С:ЦУП очень простой в установке и настройке. Все данные для диагностики отображаются сразу. Предоставляется бесплатная техническая поддержка в течение 6 месяцев. Исходный код обработки открыт.
1500 руб.
20.05.2014 21049 0 10
Вопросы разработки, анализа производительности и оптимизации приложений 1С под управлением СУБД ORACLE
Я являюсь сотрудником Комсомольского-на-Амуре филиала компании «Сухой». Наше предприятие производит боевую авиационную технику и комплектующие для гражданской авиационной техники. В статье я вам расскажу про свой опыт работы со связкой 1С и СУБД ORACLE.
05.09.2017 7521 2
SQL Server Profiler. В картинках, для самых маленьких
Шпаргалка к экзамену "Эксперт по технологическим вопросам".
21.08.2017 8022 7
Зачем 1С-нику NoSQL и CRDT
В статье речь пойдет о современных инструментах для хранения, транспорта, обработки и обмена данными на примере популярной NoSQL-базы CouchDB.
12.08.2017 13560 27
Опыт оптимизации и контроля производительности в БД с 3000 пользователей Промо
Данная статья написана по материалам доклада, прочитанного на Конференции Инфостарта IE 2014 29-31 октября 2014 года. Меня зовут Сергей, являюсь руководителем отдела оптимизации и производительности систем в компании "Деловые линии". Цель этого доклада – поделиться информацией о нашем опыте работы с большой базой на платформе 1С, с чем пришлось столкнуться, как удалось обеспечить работоспособность. Уверен, что вам будет интересно, так как подобной информацией мало кто делится, да и про само существование таких систем их владельцы стараются не рассказывать, максимум про это «краем глаза» упоминают участвовавшие в проекте вендоры. **update от 04.03.2016 по вопросам из комментариев
05.08.2015 45885 114
Оптимизированная замена подстроки в строке с помощью регулярных выражений в MS SQL Server
В MS SQL Server отсутствуют регулярные выражения. Как включить их использование? Замена подстроки в строке выполняется долго. Как сократить время выполнения замены? Для выявления тяжелых запросов часто используют данные трассировки. Чтобы получить суммированные данные, необходимо сгруппировать одинаковые запросы, а из-за разных имен временных таблиц они не группируются. Статья - пример замены имен временных таблиц в результатах трассировки.
31.07.2017 7297 4
Оптимизируй это! Или MS SQL и Экспертный подход творят чудеса!
В статье речь пойдет про взаимодействие сервера 1С с MS SQL. Мы очень часто слышим, как важно оптимизировать все критические участки системы заблаговременно, в плановом режиме, как надо, «от и до» во всех деталях. Но в реальной жизни бывает по-другому. Очень часто клиенты обращаются к нам, когда система уже не дает работать: «спасите, помогите, болит очень сильно, надо решать». Об одном из таких случаев я и хотел бы вам сегодня рассказать.
11.07.2017 21318 32
Планы запросов - это просто!
Наверное, каждый 1С-ник задавался вопросом "что быстрее, соединение или условие в ГДЕ?" или, например, "сделать вложенный запрос или поставить оператор В()"? В данной статье я не дам вам исчерпывающих инструкций по чтению планов запроса. Но я постараюсь объяснить доходчиво - что это такое и с какой стороны к ним подойти.
04.07.2017 21183 55
Версионирование объектов. Сжатие регистра "ВерсииОбъектов" Промо
Cжимаем версии объектов в регистре сведений "ВерсииОбъектов". Экономия занимаемого версиями объектов объема более 50% !!!
1 стартмани
30.12.2014 19602 43 14
Графический план выполнения запроса 1С
Просмотр графического отображения плана выполнения для запросов 1С. Для информационных баз на MS SQL Server.
1 стартмани
24.06.2017 8148 39 26
PostgreSQL на Windows – реальная альтернатива для высоконагруженных систем на базе 1С
Многие интересуются PostgreSQL, но не знают, насколько хорошо будет она работать с уже существующими системами. «Инфософт» - одна из первых компаний, кто опробовал PostgreSQL на Windows. О своем опыте перехода рассказывает руководитель отдела информационных технологий компании.
23.06.2017 25281 110
Ускорение в 100 раз. Решаем проблему блокировок
Я являюсь автором и тренером курсов по оптимизации и повышению производительности в 1С. Большинство людей приходят ко мне на обучение, желая разобраться со своими проблемами, и я очень часто слышу от них: «эти блокировки замучили, достали, жизни нет, что делать – не знаем. Технологический журнал включали, галочки ставили, форумы читали – ничего не помогает». Я уверен, что эта тема актуальна для многих из вас, поэтому в статье, не вдаваясь глубоко в подробности, я хочу вам дать некоторые конкретные рекомендации, которые вы сможете применить у себя и сразу получить ощутимый эффект. Например, если у вас запрос из-за блокировок выполняется 15 секунд, то после оптимизации он начнет выполняться за 15 миллисекунд. Это обычная практика, никакой фантастики – все это можно сделать.
13.06.2017 38176 34
Перерасчет итогов регистра бухгалтерии в 1С
Вариант перерасчета итогов частями (помесячно), если при типовом пересчете 1С зависает.
1 стартмани
30.05.2017 7401 8 1
