1С:MDM Управление нормативно-справочной информацией

ФУНКЦИОНАЛЬНЫЕ ВОЗМОЖНОСТИ
"1С:MDM УПРАВЛЕНИЕ НОРМАТИВНО-СПРАВОЧНОЙ ИНФОРМАЦИЕЙ"

Специализированное решение по управлению мастер-данными (Master Data Management) применяется для построения систем корпоративного уровня. Решение позволяет эффективно управлять мастер-данными, а также справочной информацией в организациях различных отраслей. Выполняет задачи сбора и нормализации данных, а также позволяет поддерживать актуальность информации в корпоративных системах с разнородным ИТ-ландшафтом отдельных организаций, групп компаний и холдингов.
Основные пользователи программы – сотрудники, работающие с нормативно-справочной информацией в корпоративных системах, эксперты и методологи НСИ, а также руководители среднего и высшего звена, выполняющие роль владельцев корпоративных данных.

Решение позволяет:

• Оптимизировать работу персонала с данными и сократить операционные издержки за счет централизации и формализации бизнес-процессов управления основными и справочными данными;
• Оперативно создавать и отслеживать заявки на изменение данных, эффективно управлять изменениями мастер-данных, соблюдая актуальные взаимосвязи во внешних системах-подписчиках;
• Реализовать современную систему управления данными, используя все возможности интегрированных систем класса Enterprise Service Bus (сервисная шина предприятия).
• Организовать эффективную систему бизнес-процессов и автоматизировать деятельность подразделений, осуществляющих функции управления корпоративными мастер-данными.
• Использовать современные способы интеллектуальной обработки данных, применяя агентов c искусственным интеллектом (AGI), большие языковые модели (LLM) и машинное обучение (с версии 2.5.12, подробнее здесь).
• Упорядочить и контролировать использование чувствительных персональных данных при помощи оригинальной подсистемы "Управление персональными данными".
• Разработать удобный комплекс отчетов, индикаторов, графиков и прочих средств визуализации текущего состояния процессов управления данными, с последующей их интеграцией в систему класса Corporate Performance Management (CPM) или Business Intelligence (BI).
• Повысить эффективность работы компании, предоставляя владельцам и руководителям широкий спектр инструментов для управления корпоративными данными, а сотрудникам – новые возможности для продуктивной работы с нормативно-справочной информацией.

Подсистема "Сырые данные"

  Оригинальная подсистема «Сырых данных» реализующая функциональность ETL (Extract, Transform, Load). Подсистема гибко настраивается и позволяет автоматизировать процесс загрузки данных используя хранилище алгоритмов на языке 1С:Предприятие. Импорт данных производится из любых формализованных структур (файлы, базы данных, хранилища, шины данных). Система позволяет производить анализ, трансформацию и загрузку данных в пакетном многоканальном режиме.

Управление процессами ETL

ETL - аббревиатура от Extract, Transform, Load. Таким образом в продукте теперь можно организовывать автономные процессы, позволяющие извлекать данные из внешних источников, трансформировать и преобразовывать их в нужный формат и вид инструментами Low-code, No-Code и с применением технологий искусственного интеллекта. После этого загружать их в специальное хранилище, отправляя их далее в справочники или в заявочную систему по изменению данных.

Применение новой подсистемы не исключает использование хранилища сырых данных. Новое хранилище использует возможности платформы "1С:Предприятие" и позволяет обрабатывать произвольные двоичные данные, а также использовать объектные S3-хранилища. Список процессов ETL позволяет создавать и управлять заданиями непосредственно из соответствующей формы списка. Задания обрабатываются при помощи специальных фоновых процессов и могут быть выполнены однократно, при помощи ручного запуска, либо многократно, при помощи стандартного расписания.

Подсистема содержит предопределенные шаги из которых можно составить нужный процесс. Доступны шаги с произвольными алгоритмами, а также специальный - "Обработка интеллектуальным ассистентом".

Для целей интеграции с ИИ-ассистентами был разработан специальный шаг (предустановленный алгоритм) для бизнес-процессов ETL, который позволяет интерактивно выполнить настройки обработки пакета извлекаемых данных, включая различные настройки промтов (наборов команд и инструкций для ИИ) для выполняемых операций с данными.

Управление структурой справочников, объединенных доменами

Унифицированный атрибутный состав встроенных справочников, охватывающий основные типовые решения корпоративной линейки 1С. Реализовано создание (в режиме предприятия) полноценных универсальных справочников и классификаторов для хранения произвольных справочных данных, необходимых пользователю. Реализовано добавление к встроенным справочникам дополнительных реквизитов и свойств, что дает возможность реализовывать произвольные структуры хранения данных.

Поиск и классификация

Реализованы эффективные функции поиска, классификации и нормализации данных. Для специализированных справочников, а также универсальных, реализована подсистема технических характеристики, что позволяет описывать физико-химические свойства объектов, допустим, таких как Материально-Технические Ресурсы (МТР). При этом каждый элемент справочника можно классифицировать при помощи неограниченного числа дополнительных классификаторов. Таким образом, классификацию одних и тех же объектов можно привязать, допустим, к подразделению или предприятию, что позволит соблюсти индивидуальные настройки классификации в рамках таких групп.

Для повышения эффективности визуального контроля и понимания сущности его атрибутного состава и связей данных, в решении реализована интерактивная панель анализа связей реквизитов. Она позволяет быстро находить ошибочные связи данных анализируемой записи справочника.

Управление данными

Система управления данными построена на формализованных бизнес-процессах, реализующих функции добавления, изменения, удаления и нормализации данных в рамках объектных сущностей. Это позволяет определить схему обработки информации с указанием ответственных и сроков исполнения. Для этого разработана подсистема заявок на изменение. Заявки настраиваются (в режиме предприятия) на любой атрибутных состав хранимых объектов. Исполнение заявок происходит с использованием настраиваемых бизнес-процессов, в рамках которых пользователям назначаются задачи исходя из присвоенных ролей.

Настраиваемые бизнес-процессы

Система бизнес-процессов решения позволяет реализовать практически любые сценарии работы с данными. Широко используются автоматизированные алгоритмы обработки данных, условия, а также вложенные заявки и вложенные бизнес-процессы. Возможно назначение на этапы и шаги любых исполнителей, маршрутизация по группам и ролям, а также автоматическое выполнение задач программируемыми ботами. Каждый этап требует обязательного указания времени ожидания и времени исполнения. Таким образом, настраивается регламент управления данными. Есть возможность при согласовании использовать бесшовную интеграцию с 1С:Документооборот КОРП.

Управление персональными данными

Основной целью подсистемы "Управление персональными данными" является идентификация персональных данных, разметка и классификация, а также другие функции процесса управления данными с применением мультидоменной системы 1С:MDM. Результатом работы подсистемы является обособленный реестр персональных данных (ПДн), содержащихся в самом решении, а также во внешних системах, который управляются при помощи настоящего решения. Унифицированное управление обособленным типом данных направлено на снижение рисков по защите персональных данных в рамках действующего законодательства.

Действия определяют процессы, используемые для анализа, обработки, хранения и уничтожения персональных данных, то есть описывающие полный жизненный цикл указанного типа данных. Рекомендуется использовать наименования и формулировки, применяемые в решении «1С:Зарплата и управление персоналом», для обеспечения совместимости консолидации данных в организации.

Подсистема предоставляет широкие возможности для разметки персональных данных в разрезе любых систем.

Политика обработки персональных данных предназначена для регистрации положений и настроек обработки ПДн. Так как 1С:MDM позволяет управление в разрезах нескольких операторов ПДн, то и политик в данном реестре может быть несколько. Реализация нескольких политик для одного оператора практического смысла не имеет, так как логичнее собирать все в единую политику, однако это напрямую законодательством не запрещено.

Непосредственная работа по управлению субъектами персональных данных ведется ответственными лицами в специальном реестре «Управление персональными данными». При первоначальном запуске подсистемы предполагается что в 1С:MDM имеется определенное количество данных по предполагаемым субъектам ПДн. Поэтому для облегчения старта была разработана служебная обработка для первичного заполнения реестра.

Процесс обработки в текущей функциональности заключается в регистрации последовательных статусов, создании на их основании «Согласий на обработку ПДн», отзыв зарегистрированных Согласий, а также автоматический контроль сроков обработки и хранения ПДн в разрезе каждого зарегистрированного субъекта.

Подсистема "Управление персональными данными" позволяет управлять удалением данных, соблюдая законодательные требования. В таком случае она используется совместно с типовой подсистемой "Защита персональных данных" из функций "1С:Библиотека стандартных подсистем".

Отчеты по управлению данными и визуализация

Решение содержит комплекс отчетов, позволяющих отследить деятельность персонала в области управления данными. Также ведется история изменения данных в нескольких механизмах, что исключает возможность бесконтрольного изменения данных. Конфигурация также содержит настраиваемую цвето-графическую схему, которая позволяет визуально контролировать данные на формах.

Интеграция

Решение содержит несколько механизмов интеграции и синхронизации данных. Один из основных механизмов – это корпоративная шина данных. То есть конфигурация поддерживает интеграцию с продуктом класса ESB – 1С:Интеграция КОРП. Для этого в составе присутствует отдельная подсистема «Универсальный коннектор». Кроме этого поддерживается несколько версий формата 1С:EnterpriseData с транспортом через прямое подключение, web-сервисы, ftp-соединение, электронную почту и файловый обмен. Также решение поддерживает стандартный обмен посредством OData.

Для решения сложных интеграционных задач, особенно при децентрализованной системе управления НСИ в решении предусмотрены вспомогательные механизмы, например, Таблица переходных ключей. Это специализированное хранилище взаимосвязей мастер-данных, хранящихся в 1С:MDM и записей-ключей систем-подписчиков, причем с сохранением истории изменений. Таким образом, это централизованное хранилище позволяет связывать сущности разнообразных ИТ систем.

Интеграция при помощи 1С:Шина

1С:MDM имеет встроенную поддержку интеграции основных и справочных данных через сервисы интеграции с продуктом класса ESB - 1С:Шина. Реализована передача данных по событию записи, а также прием информации в различных форматах, то есть как данные справочника, данные заявки и служебные данные. Асинхронный обмен реализован с использованием очередей данных, что позволяет организовать высокоскоростной обмен данными при минимальной нагрузке на саму систему. 
 
Для облегчения внедрения интеграции при помощи продуктов класса ESB в 1С:MDM добавлен "Помощник настройки синхронизации". Данная обработка позволяет быстро и эффективно настраивать базовую синхронизацию посредством 1С:Шины и поставляемого расширения для интеграции.

Для того, чтобы обеспечить пользователей максимальным комфортом вместе с 1С:MDM поставляется расширение для типовых конфигураций 1С, позволяющее реализовать обмен основными и справочными данными без доработки конфигураций.
В версии 2.5.12 в расширение были внесены изменения, позволяющие интерактивно конфигурировать пакеты данных, которыми типовой продукт 1С будет обмениваться с 1С:MDM при передаче ссылки на объект мастер-данных. Возможность конфигурирования подобных пакетов обмена на стороне 1С:MDM уже была реализована в более ранних версиях решения. Обновленное расширение теперь поддерживает интеграцию с использованием "1С:Шина" версии 7.1.

Управление изменениями НСИ в типовых продуктах 1С

Для работы с 1С:MDM пользователям, которые вносят заявки на изменение данных, необязательно запускать интерфейс системы. Для типовых продуктов 1С выпущено специальное расширение, которое позволяет это делать прямо из интерфейса основной системы пользователя.
Данное расширение обладает следующими преимуществами:

• Расширение реализует централизованное управление данными посредством собственного веб-сервиса;
• Ввод, просмотр и контроль заявок (ЗНИ) из интерфейса типовых продуктов 1С (бесшовная интеграция);
• Централизованное управление видами ЗНИ из "1С:MDM", включая кастомизацию;
• Позволяет работать с уже настроенными ЗНИ в "1С:MDM";
• Встраивается, без снятия с поддержки, в любую конфигурацию, имеющую БСП;
• Индивидуальные настройки отображения для каждого объекта данных;
• Настроенная логика обмена данными, нужно только отметить необходимые объекты;
• Контроль прав и запрет изменений данных без вмешательства в конфигурацию учетной системы.

Поэтому совместное использование с вышеописанным расширением позволяет организовать удобный и эффективный процесс управления изменением основных и справочных данных, как показано ниже на схеме:


Расширение предназначено для "1С:ERP WE", "1С:ERP Управление предприятием", "1С:ERP. Управление холдингом", "1С:Управление холдингом", "1С:Управление торговлей", "1С:Бухгалтерия", "1С:ЗУП", "1С:Комплексная автоматизация",  "1С:Управление нашей фирмой". Этот поставляемый модуль получил новый режим применения, при котором выполняется нужная пользователям функция – синхронизация и нормализация НСИ внешних информационных баз с помощью 1С:MDM.

Применение расширений для типовых продуктов 1С позволяет существенно снизить трудоемкость проектов создания гибридных и децентрализованных архитектур управления мастер-данными.

Наличие интерактивных и адаптивных механизмов интеграции при помощи "1С:Шина" позволит существенно снизить затраты на поддержку и масштабирование подобных архитектур.

Интеграция с сервисом "1С:Номенклатура" и облачными классификаторами

1С:MDM теперь напрямую интегрируется с:

• Сервисом "1С:Номенклатура" — централизованным каталогом товаров, включая подлежащие маркировке;
• Облачными классификаторами ТН ВЭД и ОКПД2 — для автоматического обновления данных по этим классификаторам.

"1С:Библиотека электронных документов" в 1С:MDM

В решении 1С:MDM теперь включена типовая "1С:Библиотека электронных документов". Наличие в продукте данной библиотеки позволит клиентам и партнерам снизить трудозатраты, при реализации комплексных интеграционных проектов используя привычные унифицированные процедуры обмена данными.

Цифровые технологии продукта.

Обновленная функциональная модель в 1С:Облачная карта решений.

Технологические преимущества

Решение "1С:MDM Управление нормативно-справочной информацией" разработано на технологической платформе "1С:Предприятие 8.3", которая позволяет: 

• обеспечить высокую надежность, производительность и масштабируемость системы;
• организовать работу с системой через Интернет, в режиме тонкого клиента или веб-клиента (через обычный интернет-браузер), в том числе в "облачном" режиме;
• настраивать интерфейс для конкретного пользователя или группы пользователей с учетом роли пользователя, его прав доступа и индивидуальных настроек.