?????????? ???????????? ???????? ??????????? ???????? ... - HP

Программные миры HP 2013 

Москва, 4 апреля 

© Copyright 2012 Hewlett-Packard Development Company, L.P. The information contained herein is subject to change without notice.

Управление Транспортной 

системой электронных 

расчетов Банка России 

Александр Шибаев, 

МЦИ Банка России 


Транспортная система электронных расчетов 

ТСЭР предназначена для 

предоставления услуг 

гарантированной передачи 

электронных сообщений между 

участникам электронного обмена 

в платежной системе Банка России 


Схема интеграции приложений посредством ТСЭР 

Унифицированный 

транспортный 

интерфейс (MQI, JMS) 

Внешняя прикладная АС 

ТСЭР 

Транспортный протокол: 

TCP/IP, IPX/SPX, NetBIOS 

Среда передачи данных: 

TCP/IP, FR, коммутируемые линии 

© Copyright 2012 Hewlett-Packard Development Company, L.P. The information contained herein is subject to change without notice. 

Файловый 

интерфейс

Унифицированные форматы электронных 

банковских сообщений (УФЭБС) 

УФЭБС представляют собой: 

• единые по всей территории России форматы электронных сообщений, предназначенные 

для электронного обмена учреждений Банка России с клиентами Банка России, 

расположенными на территории Российской Федерации; 

Основные цели разработки УФЭБС: 

• стандартизация способов и средств взаимодействия между автоматизированными 

системами различных разработчиков, используемыми в расчетной системе Банка России; 

• упрощение существующих форматов электронных сообщений; 

• переход к современным стандартам обмена коммерческой информацией в электронном 

виде. 

УФЭБС реализованы на языке разметки XML 


Пример XML-схемы ЭС 

 

 

 

 

uic:4525000000 

uic:4525545000 

34586940909 

44586940709 

1 

5 

 

 

 

Тело сообщения {Код аутентификации} 

 

 


Модель ТСЭР 


Каталог сервисов ТСЭР: 

Каталог сервисов ТСЭР 

• одноадресная доставка электронных сообщений (ЭС); 

• рассылка ЭС по списку/многоадресная рассылка; 

• логическая маршрутизация ЭС на основании адреса прикладного служебного SOAPконверта 

• ведение оперативной базы ЭС с возможностью повторной отправки (время жизни ЭС в 

оперативной базе – 48 часов); 

• ведение базы данных с информацией о переданных ЭС и результатах их обработки на 

узлах ТСЭР (время хранения информации об ЭС в архивной базе – в течение 3-х лет); 

• криптографическая защита ЭС, передаваемых по каналам ТСЭР 


Программно-аппаратная реализация ТУз ТСЭР 

Тип узла Аппаратное обеспечение Программное обеспечение 

ТУз КЦОИ/БЭСП 

ТУз ТУ 

ТУз УБР 

два территориально удаленных кластерных 

комплекса из четырех серверов IBM x3850 и двух 

внешних серверов хранения IBM TotalStorage 

DS4700 с on-line репликацией данных 

1. Кластерный комплекс из двух серверов класса 

IBM x3850 и внешнего дискового массива 

2. Один сервер холодного резерва 

1. Сервер класса IBM x3650 

2. Один сервер холодного резерва 


1. ОС Windows 2003 EE 

2. ПО IBM WebSphere MQ 7.х 

3. ПО IBM WebSphere Message Broker 7.х 

4. СЗИ от НСД 

5. СЗ от ВВК 

1. ОС Windows 2003 EE; 

2. ПО WebSphere MQ 7.x; 

3. ПО «Stream»; 


5. СЗ от ВВК 

1. ОС Windows 2003 SE 

2. IBM WebSphere MQ 6.x/7.х 


4. СЗ от ВВК

Структурная схема ТСЭР 


Схема подключения ТСЭР к телекоммуникациям 


Показатели работы платежной и транспортной 

систем Банка России 

Количество электронных платежных документов в сутки: 

• 10 - 13 млн. 

Количество передаваемых сообщений: 

• среднее количество ЭС в сутки – 2 000 000; 

• максимальное количество ЭС в сутки – 2 500 000; 

• максимальная производительность (ЭС/сек) – 700; 

Размер передаваемых сообщений: 

• средний размер - 10 КБ ; 

• минимальный размер ЭС – 2 КБ; 

• максимальный размер ЭС – 100 МБ; 

Временные характеристики: 

• среднее время доставки ЭС среднего размера - < 1 сек.; 

• максимальное время доставки ЭС среднего размера - < 1 мин.; 


Обмен Электронными Сообщениями в платежной системе Банка России 

Схема передачи сообщений между ТУ, обслуживающимися в одном КЦОИ 

13 © Copyright 2012 Hewlett-Packard Development Company, L.P. The information contained herein is subject to change without notice. 

Схема передачи сообщений между ТУ, обслуживающимися в разных КЦОИ 

13

Система управления ТСЭР (СУ ТСЭР) 

СУ ТСЭР предназначена для автоматизации процедур управления и контроля состояния 

Транспортной системой электронных расчетов Банка России (ТСЭР). 

Задачи СУ ТСЭР: 

• Автоматизация деятельности эксплуатирующего персонала по контролю и управлению 

ТСЭР; 

• Обеспечение оперативного обнаружения, диагностирования и устранения нештатных 

ситуаций при эксплуатации ТСЭР в целом и отдельных ее подсистем; 

• Обеспечение централизованного управления ресурсами ТСЭР; 

• Автоматизация контроля состояния и эффективности функционирования ТСЭР; 

• Предоставление информации о работе ТСЭР внешним системам 


Декомпозиция объекта управления СУ ТСЭР 

краткое 

наименование 

 

 

 

 

полное 

наименование 

 

 

 

 

 

 

 

 

 

 

 

 

составляющие объекты 

ТСЭР 

 

WebSphere MQ Integrator 

Broker \ DataPower 

 

WebSphereMQ 


 

, : 

AIX IBM P-series 

Windows, MS Claster Sevice (Intel) 

 

– 

открытость 

для внешнего 

управления

ТУз 

УБР 

. . . 

ТУз 

УБР 

ТУз 

УБР 

. . . 

ТУз 

УБР 

1 

 

. . . 

Схема СУ ТСЭР 


 

 

n 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

2 

 

1 

 

 

 

 

MP

Подсистемы СУ ТСЭР 

СУ ТСЭР состоит из следующих подсистем: 

• Оперативно-техническая подсистема – мониторинг состояния и контроль ресурсов узлов ТСЭР 

• Подсистема администрирования ресурсов ТСЭР – управление состоянием и параметрами 

контролируемых объектов ТСЭР, выполнение административных воздействий 

• Подсистема мониторинга доставки электронных сообщений ТСЭР (ПМДЭС) - контроль процесса 

доставки ЭС ТСЭР 

• Подсистема контроля конфигураций ТСЭР (ПКК) – сбор, хранение и аудит конфигураций узлов ТСЭР 

• Подсистема автоматизации процедуры перевода обработки ЭС между центральными серверами ЦТУ 

ТСЭР (ПАПО) - автоматизация перевода обработки ЭС между серверами ЦТУ ТСЭР 


Обеспечивает: 

Оперативно-техническая подсистема 

• Сбор, приведение к единому виду и хранение информации о состоянии и процессе 

функционирования контролируемых объектов ТСЭР; 

• Сбор и хранение значений параметров загрузки и производительности контролируемых 

объектов; 

• Визуальное отображение информации о состоянии контролируемых объектов ТСЭР и значений 

параметров их функционирования; 

• Получение, хранение и отображение информации о состоянии телекоммуникационного 

оборудования, функционирующего в интересах ТСЭР; 

• Оперативное оповещение о нарушении процесса доставки сообщений ТСЭР и о переходе 

контролируемых объектов ТСЭР в состояние, угрожающее нарушением процесса доставки 

сообщений ТСЭР; 


Схема работы оперативно-технической подсистемы 

 

 

ТУз УБР 

 

ТУз УБР 

 

. . . 

ТУз ТУn 

 

1 

 

 

 

 

ТУз ДРУМПС 

ТУз ДНДО 

ТУз КЦОИ2 

1/ 

 


• На транспортных узлах ТСЭР 

установлены программные агенты СУ 

ТСЭР; 

• Взаимодействия агента с 

контролируемыми объектами 

транспортных узлов происходит с 

использованием средств операционной 

системы; 

• Взаимодействие агентов с серверными 

комплексами СУ ТСЭР осуществляется 

по протоколу RPC (Remote Procedure 

Call) или https (в зависимости от версии 

агента).

Консоли оперативно-технической подсистемы 


Подсистема администрирования ресурсов ТСЭР 

Обеспечивает: 

• Управление состоянием и параметрами контролируемых объектов ТСЭР; 

• Сбор и обработку статистической информации, формирование отчетов на основании 

полученных данных. 


Отчетность и аналитика 


Подсистема мониторинга доставки электронных 

сообщений ТСЭР (ПМДЭС) 

ПМДЭС обеспечивает: 

• Контроль в режиме реального времени процесса доставки каждого ЭС через транспортные узлы ТУ, 

КЦОИ и ЦТУ ТСЭР; 

• Оперативное оповещение персонала при превышении заданного времени доставки ЭС; 

• Определение места нахождения ЭС в заданный интервал времени; 

• Поиск ЭС в исторических данных по различным параметрам (время, отправитель, получатель, ID 

сообщения, по данным из конверта УФЭБС…); 

• Определение «узких» мест в ТСЭР при доставке ЭС; 

• Исторические данные собранные ПМДС являются основой для отчетов и аналитики. 

ПМДЭС - основа контроля качества работы ТСЭР по следующим показателям: 

• время доставки ЭС от отправителя получателю; 

• количество успешно переданных, отбракованных, повторно переданных ЭС. 


Сервис предоставляемый потребителям ТСЭР – 

доставка ЭС 

 

 

 

 


Чтобы нести ответственность за качество 

предоставляемого сервиса, необходимо его 

контролировать 

Сервис ТСЭР 


 

 

 

SLA 

SLA

Мониторинг доставки ЭС 

• Ключевая точка обработки – Транспортный шлюз (MS BizTalk) 

• При необходимости можно обеспечить непрерывность контроля доставки ЭС внутри СВК 


Экранные формы ПМДЭС 

 

 


Проблемы и решения в работе СУ ТСЭР в 2011 году 

Проблемы: 

• Агентское ПО ПМДЭС не поддерживает кодировку 866; 

• Нехватка производительности внутренних компонент ПМДЭС при обработке большого потока 

данных; 

• Сбои в работе серверной составляющей ПКК (UCMDB) при количестве агентов UCMDB более 25; 

• Недостаточная производительность базы данных; 

Решения: 

• Открыто около 25 запросов в службе поддержки HP; 

• Оптимизация настроек внутренних компонент ПМДС; 

• Установка обновления серверной составляющей ПКК (UCMDB) в рамках текущий версии; 

• Оптимизация настроек базы данных. 


Работы по развитию ПМДЭС 

В течении 2012 г проведены следующие работы по развитию ПМДЭС : 

• Улучшена оперативность сохранения информации о транзакциях в историческую базу данных 

ПМДЭС. Оптимизирована работа БД 

• Изменена структура таблиц исторической базы данных ПМДЭС. Новая структура расширяет 

возможности при построении отчетности. Данные ПМДЭС используются как основной источник 

информации при формировании отчета о работе ТСЭР 

• В связи с переводом обработки учетно-операционной информации ГУ/НБ из КЦОИ-2 в КЦОИ-1 и 

КЦОИ МР производились изменения в логике работы ПМДЭС (смена регионами центра обработки, 

создание новые объектов и т.п.) 

• Частичная интеграция ПМДЭС СУ ТСЭР с Подсистемой архивирования (ПА) ТСЭР при поиске 

сообщений 

• Доработана экранная форма оперативного контроля транспортных транзакций – повышена 

информативность, добавлена интерактивность 


В новой консоли 

повышена 

информативность 

и интерактивность 

Контроль транзакций 

 


Подсистема контроля конфигураций ТСЭР (ПКК) 

• Сбор конфигураций ТУз ТСЭР (ЦТУ, ТУз КЦОИ, ТУз ТУ), периодический аудит в автоматизированном 

режиме для оперативно контроля настроек и версии операционных систем, ПО и оборудования; 

• Актуальная информация о конфигурациях повышает оперативность диагностирования и 

разрешения НШС; 

• Актуальная информация о конфигурациях является основой для планирования изменений; 

• Периодический аудит позволяет отследить (не)санкционированные изменения конфигураций 

транспортных узлов в ТУ и КЦОИ; 

• Способствует стандартизации объектов ТСЭР. 


Экранные формы ПКК 


Пример построения запросов: 

«Версия WMQ на всех транспортных узлах ТСЭР» 


Подсистема автоматизации процедуры перевода 

обработки ЭС между центральными серверами 

ЦТУ ТСЭР (ПАПО) 

ПАПО решает следующие задачи: 

• Автоматизация критичных процедур; 

• Визуализация хода выполнения 

автоматизируемой процедуры; 

• Автоматизация отслеживания ошибок 

при выполнении процедуры; 

• Автоматизация диагностирования 

ошибок; 

• Автоматизация устранения ошибок. 


Достигнутые цели: 

• За счет автоматизации большого количества 

рутинных операций при переводе обработки 

ЭС между центральными серверами ЦТУ ТСЭР 

в разы повысила оперативность операции; 

• За счет снижения влияния человеческого 

фактора при большом количестве рутинных 

операций резко снизились риски потери 

сервиса ТСЭР для части ТУ; 

• Снизились требования к квалификации 

оператора.

Диаграмма перехода CTU01 на ЦС2 

 

CTU01 1 

RDF 

 

CTU01 2 

 

 

-22 

 

 

CTU01 2 

RDF CTU01 

RDF 2 

RDF 2 

RDF 2 

RDF 

Консоль администратора ПАПО 

Stopmq1_1.ttl 

Rdf.html 

stoprdf1.ttl 

newrdf1_2.ttl 

newrdf2_2.ttl 

startrdf2.ttl 

prestart1r.ttl 

\\MZ.TO.CTU02\ 

!switch.bat 

\\CTU01\ 

reset.bat ' + 

m_CTU01R \\ 

CTU01\start.bat ' 

+ m_CTU01R 


Развитие: контроль окончания транспортной 

транзакции в КЦОИ 

ПМДЭС 

MQ 

sensor 

WSMQ 

ТУз КЦОИ/ЦОиР БЭСП 

WSMQ 

ПС ОИТУ/ЦОиР БЭСП 


COA 

COD 

AS

Развитие: передача данных внешним системам 


Отчетность и аналитика 


1 800 M 

1 600 M 

1 400 M 

1 200 M 

1 000 M 

800 M 

600 M 

400 M 

200 M 

0 M

Спасибо за внимание! 

Александр Шибаев, 

sav@cbr.ru 


Технологии СУ ТСЭР 

Купцов Вячеслав, начальник отдела СУ 

ООО «Фактор-ТС» 

vkuptsov@factor-ts.ru 


Структура ТСЭР 


Задачи автоматизации эксплуатации ТСЭР 

Функциональный бизнеспроцессы 

Технические бизнеспроцессы 

Прикладное ПО 

Аппаратно-системные 

ресурсы 

ТСЭР 

Обработка документов 

Доставка электронных 


IBM WebShereMQ, 

IBM WMB, ПО«Stream» ... 

ОС, аппаратное 

обеспечение 


Задачи 

Контроль функциональных бизнес 

процессов 

Контроль транспортных сервисов 

Контроль программных и 

аппаратных ресурсов 

Автоматизация 

эксплуатационных 

операций 

Контроль конфигураций

Центральное Звено СУ ТСЭР 


Состав КТС ЦЗ СУ ТСЭР 


Подсистемы СУ ТСЭР 

СУ ТСЭР состоит из следующих подсистем: 

• Оперативно-техническая подсистема – мониторинг состояния и контроль ресурсов узлов ТСЭР 

• Подсистема администрирования ресурсов ТСЭР – управление состоянием и параметрами 

контролируемых объектов ТСЭР, выполнение административных воздействий 

• Подсистема мониторинга доставки электронных сообщений ТСЭР (ПМДЭС) - контроль процесса 

доставки ЭС ТСЭР 

• Подсистема контроля конфигураций ТСЭР (ПКК) – сбор, хранение и аудит конфигураций узлов ТСЭР 

• Подсистема автоматизации процедуры перевода обработки ЭС между центральными серверами ЦТУ 

ТСЭР (ПАПО) - автоматизация перевода обработки ЭС между серверами ЦТУ ТСЭР 


Оперативно-техническая подсистема и подсистема 

администрирования 






ТСЭР 









Программные решения 




HP OM, OMi 

HP NNMi 

HP Performance Manager 

HP Reporter 

HP Target Connector 

Автоматизация 

эксплуатационных 

операций 


ТУз УБР 

 

ТУз УБР 

 

. . . 

ТУз ТУn 

 

1 

Схема работы ОТП и ПА 

 

 

 

 

ТУз ДРУМПС 

ТУз ДНДО 

ТУз КЦОИ2 

1/ 

 


• На транспортных узлах ТСЭР 

установлены программные агенты СУ 

ТСЭР 

• В рамках эксплуатационной 

документации определены и 

согласованы основные метрики, пороги, 

KPI 

• C использованием функциональных 

возможностей HP OM настроено 

прикладное тестирование сервисов 

ТСЭР, тестирование 

телекоммуникационных каналов

Подсистема автоматизации процедуры перевода обработки 

ЭС между центральными серверами ЦТУ ТСЭР 

ТСЭР 























HP Operations 

Orchestration 


Архитектура ПАПО 


• Созданы операционные потоки 

которые включили в себя действия 

администраторов в процессе перевода 

обработки ЭС между ЦС ТСЭР с учетом 

возможных вариантов 

• Оператор в едином интерфейсе может 

выполнить перевод в режиме 

достаточно простого интерактивного 

интерфейса

Подсистема мониторинга доставки электронных сообщений 

ТСЭР 






ТСЭР 












HP TransactionVision 







Orchestration 


Структура ПО Transaction Vision 


Принцип работы ПМДЭС 


Дополнительно созданы: 

• Историческая база данных 

• Экранная форма контроля 

текущих транспортных 

транзакций 

• Шаблоны отчетов на основе 

исторических данных






Подсистема контроля конфигураций 

ТСЭР 



















Orchestration 

HP Universal CMDB

Структура ПКК 


• Основной компонент ПКК- 

UCMDB Server; 

• Разработано решение для 

сбора детальной информации 

о конфигурациях IBM 

WebSphere MQ;






Контроль бизнес процессов 

ТСЭР 










HP Business Process Inside 








Orchestration 

HP Universal CMDB

Фрагмент XML-схемы обрабатываемого ТСЭР ЭС 

 

 

 

 

uic:4525000000 

uic:4525545000 

34586940909 

44586940709 

1 

5 

 

 

 

Тело сообщения {Код аутентификации} 

 

 


. 

Прикладной бизнес-процесс 

 

 

Организуя корреляцию MessageID из t1 и CorrelationMessageID из t2 связываем t1, t2 и t3 в единый бизнес 

процесс 


t1 

t3 

MessageID 

get() 

put() 

CorrelationMessageID 

t2

Решение задач автоматизации эксплуатации 

информационных систем 

Заказчик Фактор-ТС HP Software 


Спасибо за внимание!

?????????? ???????????? ???????? ??????????? ???????? ... - HP

You also want an ePaper? Increase the reach of your titles

Delete template?

Save as template?