Повышение производительности высоконагруженной системы кадрового учета и расчета заработной платы RWB на базе «1С:ЗУП КОРП»

Высокая производительность и стабильность работы информационной системы кадрового учета и расчета заработной платы RWB являются результатом планомерной работы при поддержке экспертов фирмы «1С».

Постановка задачи

Высокие объемы данных и интенсивность работы информационной системы, а также дальнейший рост бизнеса RWB предъявляют повышенные требования к производительности и стабильности кадровой системы.

Особенностью проекта является то, что существенную нагрузку создают не только интерактивные пользователи, но и автоматизированные процессы. Использование программных роботов позволяет автоматизировать значительную часть рутинных операций, однако одновременно многократно повышает интенсивность обращения к информационной системе.

В этих условиях требовалось обеспечить стабильную работу «1С:ЗУП КОРП» при существующей нагрузке и сформировать технологическую основу для дальнейшего роста системы.

В рамках проекта необходимо было:

• провести комплексный анализ производительности информационной системы;

• проанализировать настройки операционной системы, кластера серверов «1С:Предприятия» и PostgreSQL;

• определить причины недостаточной производительности наиболее ресурсоемких операций;

• оптимизировать критичные операции типовой конфигурации и доработанного функционала;

• проанализировать влияние большого объема накопленных данных на производительность;

• выработать рекомендации по дальнейшей эксплуатации и развитию высоконагруженной системы.

Для решения задачи было организовано взаимодействие специалистов ООО «РВБ», Группы компаний «Холдинг Т1» и фирмы «1С» в рамках проекта ЦКТП.

Выполненные работы

В ходе проекта специалисты провели комплексный анализ технологического состояния системы.

Анализ и настройка технологического стека

Были проанализированы настройки операционной системы, кластера серверов «1С:Предприятия» и СУБД PostgreSQL. По результатам анализа настройки были скорректированы с учетом особенностей информационной системы и характера создаваемой нагрузки.

Анализ производительности прикладных операций

Были определены операции, оказывающие наиболее существенное влияние на производительность системы.

Работы проводились как с функциональностью типовой конфигурации «1С:ЗУП КОРП», так и с доработками, реализованными с учетом специфики RWB.

Для проблемных операций выполнялись сбор и анализ технологических данных, исследование алгоритмов работы и поиск возможностей сокращения объема обрабатываемых данных.

Оптимизация работы с большими объемами данных

Одной из особенностей системы является большой объем накопленных данных. В отдельных регистрах количество записей исчисляется сотнями миллионов, размер отдельных таблиц — десятками и сотнями гигабайт, а общий объем информационной базы превышает 10 ТБ.

В рамках проекта анализировались причины роста таблиц и возможность сокращения объема данных без нарушения корректности учета.

Было установлено, что специфика учета в отдельных случаях приводит к формированию значительного количества записей, не оказывающих влияния на конечный результат расчетов. Для таких ситуаций были проанализированы возможности изменения порядка формирования данных и корректировки ранее накопленной информации.

При этом учитывались взаимосвязи между регистрами «1С:ЗУП КОРП»: изменение данных в подобных структурах требует предварительного функционального анализа и согласованной обработки связанных регистров.

Оптимизация аналитической отчетности

Отдельным направлением стала оптимизация отчетов, работающих с десятками и сотнями миллионов записей.

В частности, при формировании аналитики по НДФЛ исходные данные отдельных отчетов могли включать от 80 до 200 млн записей, тогда как для получения конечного результата требовалась только небольшая их часть.

Для сокращения объема обрабатываемых данных были применены дополнительные условия отбора и индексы. Для наиболее ресурсоемких сценариев использовалось многопоточное получение и обработка исходных данных с последующим объединением результатов.

Такой подход позволил обеспечить приемлемое время формирования отчетности даже для организаций с численностью порядка 550 тыс. человек.