Что такое мдм бизнес

Прежде чем перейти непосредственно к системам управления мастер-данными, давайте определим, какого рода вообще бывают данные.

Ниже представлены 5 ключевых типов:

1. Метаданные (Metadata);
2. Референс-данные (Reference data);
3. Мастер-данные (Master data);
4. Транзакционные данные (Transactional data);
5. Исторические данные (Historical data).

Метаданные – это данные о данных. Они нужны для понимания и определения, какими данными оперирует предприятие. Метаданные определяют структуры, типы данных, доступы к ним и т.д. Существуют различные схемы для описания метаданных. Например, для описания структуры XML-документа может применяться XSD-схема, для описания веб-сервиса – WSDL-схема.

Референс-данные – это относительно редко меняющиеся данные, которые определяют значения конкретных сущностей, используемых при выполнении операций в рамках всего предприятия. К таким сущностям чаще всего относятся: валюты, страны, единицы измерения, типы договоров/счетов и т.д.

Бизнес-центр “МДМ”

Мастер-данные – это базовые данные, которые определяют бизнес-сущности, с которыми имеет дело предприятие. К таким бизнес-сущностям обычно относятся (в зависимости от предметной отраслевой направленности предприятия) клиенты, поставщики, продукция, услуги, договора, счета, пациенты, граждане и т.п.

Кроме информации непосредственно о той или иной мастер-сущности, в мастер-данные входят взаимосвязи между этими сущностями и иерархии. Например, с точки зрения поиска дополнительных возможностей продаж, может быть очень важно выявлять явные и неявные взаимосвязи между физическими лицами. Мастер-данные распространяются по всему предприятию и участвуют во всех бизнес-процессах. Обычно мастер-данные воспринимаются как ключевой нематериальный актив предприятия, т.к. от их качества и полноты зависит эффективность его работы. В России часто вместо термина «мастер-данные» используют термин «нормативно-справочная информация».

Транзакционные данные – это данные, которые образовались в результаты выполнения предприятием каких-либо бизнес-транзакций. Например, для коммерческого предприятия: продажи продуктов и услуг, закупки, поступления/списания денежных средств, поступления на склад и т.п. Обычно такие данные базируются в системе управления ресурсами предприятия (ERP) или других отраслевых системах. Естественно, транзакционные системы широко используют мастер-данные при выполнении транзакций.

Исторические данные – это данные, которые включают в себя исторические транзакционные и мастер-данные. Чаще всего такие данные аккумулируются в ODS и DWH системах и служат для решения различных аналитических задач и поддержки принятия управленческих решений.

Cистемы управления мастер-данными

Прежде чем перейти к системе управления мастер-данными, определим, что такое управление мастер-данными вообще.

Управление мастер-данными (Master Data Management, MDM) – дисциплина, которая работает с мастер-данными в целях создания «золотой записи», то есть целостного и всестороннего представления о мастер-сущности и взаимосвязях, эталона мастер-данных, который используются всем предприятием, а иногда и между предприятиями для упрощения обмена информацией.

MDM-системы. Использование в архитектурной схеме современной IT-системы | kt.team

Специализированные системы управления мастер данными (MDM-системы) автоматизируют все аспекты этого процесса и являются «авторитетным» источником мастер-данных масштаба предприятия. Часто MDM-системы управляют также и референс-данными.

Ситуация, когда MDM-система является единственным источником мастер-данных, все изменения вносятся в MDM-систему и только потом передаются в системы-потребители, называется «системой записей». Это идеальная ситуация для управления мастер-данными. Однако в реальной жизни все не так просто: MDM-система не всегда будет являться «системой записей».

Из-за особенностей бизнес-процессов конкретного предприятия, технических сложностей конкретных систем и т.д., приходится создавать «копии» мастер-записей. Система, в которой содержится копия мастер-данных, называется «системой ссылок». Чтобы не терять управляемости, «система ссылок» обязательно должна находиться под управлением и синхронизироваться с «системой записей».

Три измерения MDM-систем

Рассмотрим MDM–систему в трех измерениях:

Обычно MDM-системы не внедряются «с наскоку», т.к. их внедрение – это сложный процесс последовательных преобразований масштаба всего предприятия, от ведения разрозненных данных до создания целостного всестороннего представления о мастер-сущности. Поэтому внедрение MDM-систем выполняется последовательно с постепенным приближением к целевому результату в трех указанных измерениях.

Рассмотрим подробнее эти измерения.

Домены

В контексте управления мастер-данными под доменом понимается конкретная область мастер-данных. Самые распространённые домены мастер-данных – это домен клиентов и домен продуктов. В западной литературе сложились устоявшиеся термины для управления мастер-данными в рамках этих доменов: Customer Data Integration (CDI) – для домена клиентов и Product Information Management (PIM) – для домена продуктов.

К CDI традиционно относятся не только клиенты, но и организации или физические лица, которые могут называться по-разному в зависимости от отрасли предприятия: клиенты, поставщики, банки, фонды, пациенты, граждане и т.д.

К PIM традиционно относятся: продукция, товары, материалы, услуги, работы и т.д. Есть много общего в подходах к управлению мастер-данными CDI и PIM, но есть также и много отличий. Например, при дедубликации клиентских сущностей в большинстве случаев выполняется простой синтаксический анализ атрибутов сущностей и их сопоставление на основе вероятностных алгоритмов, в то время как в продуктовом домене проводится семантический/онтологический анализ атрибутов с подключением механизмов самообучения. Кроме того, в продуктовом домене у сущностей в зависимости от выбранной категории могут сильно различаться атрибуты (например, у ноутбуков свой набор атрибутов, а у стиральных машинок – свой). Все эти особенности различных доменов должны поддерживаться MDM-системами.

В последнее время имеет место тенденция создания мультидоменных MDM-систем с возможностью гибкой настройки структуры метаданных. Такая гибкость дает предприятию возможность описать мастер-данные конкретно под себя с учетом всех особенностей и нюансов, но при этом требует немалого времени и знаний, чтобы грамотно спроектировать и настроить такую систему. Также на рынке присутствуют системы с «жесткой» структурой мастер-сущностей, которые имеют уже корректно настроенные механизмы, но использование такой системы возможно только теми предприятиями, которые смогут подстроиться под нее. Обычно такие системы хорошо применимы для решения задачи управления мастер-данными в рамках какой-то узкой отрасли. По моему мнению, наиболее перспективными являются системы с гибкой моделью метаданных, но имеющие при этом преднастроенные для предприятий разных отраслей модели, которые можно быстро перенастраивать.

Методы использования

Методы использования MDM (Method of use) определяют то, для чего MDM система будет использоваться на предприятии. Иными словами, кто будет потребителем мастер-данных (естественно, их может быть несколько).

Основных методов использования три:

1. Аналитический (Analytical)
2. Операционный (Operational)
3. Коллективный (Collaborative)

Аналитический метод использования поддерживает бизнес-процессы и приложения, которые используют мастер-данные преимущественно для анализа эффективности бизнеса, предоставляют необходимые отчеты и выполняют аналитические функции. Часто это происходит посредством взаимодействия MDM с инструментами и продуктами BI. Обычно аналитическая MDM-система работает с данными только в режиме чтения, она не изменяет данные в системах-источниках, но занимается их очисткой и обогащением.

Операционный метод использования позволяет собирать, изменять и использовать мастер-данные в процессе выполнения бизнес-транзакций (операций) и служит для поддержки семантической согласованности мастер-данных в рамках этих операций внутри всех операционных приложений. Фактически, в этом случае MDM функционирует как OLTP-система, которая отрабатывает запросы от других операционных приложений или пользователей. Работа в таком режиме зачастую требует построения единого интеграционного ландшафта с использованием принципов сервис-ориентированной архитектуры (SOA) и применением инструментария сервисной шины предприятия (ESB). Идеально, если такие инструменты или входят непосредственно в MDM-систему, или являются ее продолжением (есть вендоры, которые имеют в своей линейке и MDM и ESB-решения, глубоко интегрированные между собой).

Коллективный метод использования позволяет создавать мастер-сущности в случаях, когда требуется коллективное взаимодействие между различными группами пользователей в процессе этого создания. Такое согласование обычно имеет сложные «ветвящиеся» бизнес-процессы, состоящие из различных автоматических и ручных задач.

Ручные задачи выполняются различными специалистами по работе с данными (дата-стюардами) в порядке, определенном бизнес-процессом. Чаще всего коллективный метод использования применяется в продуктовом домене. Например, при создании нового продукта, когда существуют несколько ответственных за ввод разных данных, много ручной работы и финальное согласование. Важно, чтобы MDM-система позволяла настраивать произвольные бизнес-процессы для быстрой поддержки бизнес-процессов конкретного предприятия.

Стили внедрения

Обычно выделяют три основных стиля внедрения (implementation style):

1. Реестровый (registry);
2. Сосуществующий (coexistence);
3. Транзакционный (transactional).

Реестровый стиль внедрения предполагает создание источника мастер-данных как «системы ссылок» на нижестоящие источники данных. Реестровая MDM содержит только ключевые атрибуты, необходимые для идентификации и сопоставления сущностей. Реестровая MDM работает в режиме «только чтение», данные вводятся в системах-источниках и передаются в MDM для разрешения сущностей. Также в реестровой MDM могут храниться ссылки на источники неключевых данных, но сами эти данные обычно в MDM не передаются. Реестровый стиль внедрения обычно применяется в случае выбора операционного метода использования MDM (см. выше).

Сосуществующий стиль внедрения предполагает наличие распределенного ввода данных в нескольких источниках (бизнес-приложениях и MDM-системе). MDM-система в данном случае может являться «системой записей» только для части атрибутов. Тем не менее, в MDM-системе формируется полноценная мастер-сущность, изменения которой транслируются в другие системы (возможно, не все). Сосуществующий стиль внедрения довольно прост и часто применяется как первый шаг к следующему — транзакционному стилю, т.к. не требует глубокой переработки систем, взаимодействующих с MDM-системой.

Транзакционный стиль внедрения предполагает создание полноценной «системы записей», в которой хранятся все данные по мастер-сущностям. MDM-система в этом случае является «единственным источником правды» для всех систем-потребителей. Все операции по созданию и обработке данных выполняется на уровне MDM-системы. Ввод данных на уровне систем-потребителей запрещен. Такой подход обычно довольно сложен для внедрения, т.к. требует существенного изменения бизнес-процессов и систем-подписчиков.

Заключение

На практике, выбор той или иной стратегии внедрения MDM определяется многими факторами: целями предприятия в области управления мастер-данными, степенью зрелости предприятия, степенью готовности IT-инфраструктуры, наличием инвестиций на реализацию проекта и многими другими параметрами. Чтобы определиться со стратегией внедрения, нужно провести тщательный анализ всех этих факторов и составить подробное технико-экономическое обоснование проекта и детальный план-график с указанием фаз развития проекта. Но это уже другая обширная тема, требующая отдельного рассмотрения.

Одно можно сказать точно, что к внедрению MDM-системы нужно подходить очень взвешенно и поступательно. Большинство проектов внедрения MDM-систем проваливаются именно из-за недооценки сложности и объема изменений, с которыми приходится сталкиваться в MDM-проектах.

Источник: datareon.ru

Система управления мастер данными: выбор и внедрение MDM-решений

Данные — важная составляющая любого бизнеса. Информация о клиентах, сделках, товарах, сотрудниках — все это копится годами. Как структурировать накопленное, избежать появления противоречивых и неактуальных данных? Очевидно, необходима система управления мастер-данными. Расскажем, как выбрать подходящее MDM-решение для создания моделей корпоративных данных, систематизации работы с ними, а также о том, что такое управление мастер-данными.

Обычно в организации данные собираются, накапливаются и хранятся в разных информационных системах, таких как CRM, ERP, во всевозможных базах данных, специализированном программном обеспечении, а также в виде классических excel-табличек. Компании, использующие для сбора и хранения данных больше двух систем, сталкиваются с трудностями при формировании отчетности и единого представления о текущем состоянии дел.

Это приводит к дополнительным издержкам из-за увеличения трудозатрат, а также создает риск получения неполных или неактуальных данных. Именно из-за необходимости синхронизации информации о продукции, клиентах, персонале, услугах, контрагентах и т. т., поступающей из различных источников, были разработаны MDM-решения (от англ. Master Data Management — управление мастер-данными [1] Что такое «система управления мастер-данными» и зачем она нужна. 2017. URL: https://habr.com/ ). Разберемся, как же создать некий «идеальный источник» данных, используя который, можно строить качественные аналитические срезы и повышать эффективность бизнес-процессов.

Справочник

MDM-система — это совокупность процессов и инструментов для непрерывного определения и управления мастер-данными и нормативно-справочной информацией (НСИ) в организации.
НСИ (в классическом понимании) — фиксированные, исходно наполняемые и изменяемые только в редких случаях справочники (общероссийские или внутренние классификаторы, справочники стран, регионов, валют и т. д.).
Мастер-данные — данные организации со схожим составом и атрибутами, хранящиеся в виде линейных или иерархических справочников [2] Управление данными. Словарь терминов. URL: https://data-management.ru/ .

Задачи MDM-систем

Чтобы обеспечить целостность и непротиворечивость данных, необходимо очистить их и нормализовать. Что это значит? За счет синхронизации информации из разных источников в системе удаляются дубликаты и устаревшие фрагменты, восполняются пробелы. Таким образом, в базе данных MDM собирается и накапливается только актуальная информация.

В чем заключаются основные задачи системы?

• консолидация и централизованное хранение;
• управление записями и их актуализация;
• автоматизация ручного анализа и сбора данных из разных источников;
• группировка данных по признакам и быстрый доступ к необходимой информации;
• упрощение процесса формирования отчетности [3] Системы управления базами данных.2021. URL: https://nvsu.ru/ .

Все это позволяет создать «золотую запись» (от англ. golden record) [4] Золотая запись (Golden record). URL: https://wiki.loginom.ru/ — самое достоверное, непротиворечивое и полное представление обо всех данных компании. За счет настройки и определения достоверных источников данных, а также удаления дубликатов система предоставляет актуальную информацию.

Когда необходимы МДМ-системы

Как понять, что пора внедрять MDM-систему? Когда данных становится слишком много, консолидировать их вручную становится невозможно, они повторяются и хранятся в разных местах, а также используются несколькими подразделениями, значит, пришло время MDM. Если этого не сделать, организация может столкнуться с падением лояльности клиентов, незапланированными расходами, принятием неудачных управленческих решений. Внедрение МДМ-системы помогает очистить и структурировать данные, поступающие из нескольких источников, обеспечивает быстрый доступ к достоверной информации.

Эффективное управление данными положительно влияет на деятельность организации и бизнес в целом.

Для примера возьмем такую ситуацию: компания ведет справочник своих контрагентов во внутренней ERP-системе. Данные о контрагентах заносятся вручную и содержат различные атрибуты (ИНН, расчетный счет, адрес и т. д.).

При формировании новой операции с контрагентом сотрудник может вместо уже существующей в базе ООО «Компания» указать Общество с ограниченной ответственности «Компания». Тем самым в ERP или бухгалтерской системе создастся запись с новым контрагентом. Со временем такие дубли могут привести к неверно выставленным счетам, дублированию информационных рассылок и прочим проблемам. Чтобы этого не происходило, и нужна MDM-система.

MDM-системы подходят для управления данными во многих отраслях и структурах. Как это может быть реализовано на практике?

• Например, у промышленной компании несколько заводов. Запчасти для их конвейеров закупаются у нескольких поставщиков. Контроль состояния технического парка, своевременное обслуживание и ремонт обеспечиваются разнообразными информационными системами. Поэтому получение достоверного отчета о состоянии оборудования является серьезной проблемой. Внедрение MDM-системы позволяет структурированно хранить необходимые данные и оперативно получать доступ к актуальной информации:

• когда нужно производить ТО или замену комплектующих;
• где находится оборудование и его запасные части;
• какие цены на запчасти указаны на сайте поставщика.

Консолидация всей этой информации в одном месте позволяет компании вовремя принимать решения о закупке необходимых запчастей. А это значит, что производство не встанет в ожидании комплектующих.

• В медицинских учреждениях часто возникает проблема задвоения данных, когда одного и того же человека могут записать с разными вариантами ФИО, номера документа, адреса и т. п. Дедубликация данных в MDM-системе помогает избежать этого: система позволяет обнаружить повторы и объединить несколько записей в одну. Кроме того, когда все данные синхронизированы, становится намного проще организовать рассылку напоминаний о необходимости прививки, персонализировать предложения о дополнительных услугах для клиентов. Помимо информации о пациентах, в системе можно хранить сведения о сотрудниках учреждения, чтобы систематизировать проведение плановых профилактических осмотров персонала.
• Если речь идет о банке, MDM-система может выступать в роли единого хранилища данных обо всех финансовых продуктах и услугах, что позволяет упростить и ускорить взаимодействие между бизнес-подразделениями. При запуске нового продукта (кредит, вклад, ипотека) все согласования можно проводить непосредственно в MDM, избегая длинных переписок в почте и встреч. Также единая база клиентов, регулярно обогащаемая и актуализируемая, позволяет формировать специальные адресные предложения, исключая дублирование.
• В добывающей промышленности в MDM-системе может храниться информация об объемах добычи и отгрузки, используемом на объектах оборудовании и его составных частях, что позволяет оптимизировать затраты на техническое обслуживание и ремонт. Кроме того, строгий контроль при сопоставлении данных поступления и отгрузки материалов, централизованно хранящихся в MDM-системе и передающихся между всеми информационными системами предприятия, помогает предотвращать хищение оборудования и материалов.

Типы МДМ-систем

На сегодняшний день используются три основных типа систем [5] Системы НСИ: мировой опыт и тенденции развития. 2008. :

1. Централизованная система.
2. Аналитическая система.
3. Гармонизированная система.

В первом случае одна IT-система, новая или существующая, объединяет в себе все справочники и в дальнейшем считается единственно достоверной, данные в ней являются эталонными. У такого варианта есть недостаток — редактирование записей во всех остальных системах недопустимо.

Аналитическая система выглядит следующим образом: из справочников сторонних IT- приложений формируется единая база. Именно в ней содержится актуальная информация, при этом в самих системах возможно наличие дублей. Этот подход позволяет быстро внедрить MDM, внося минимальные изменения в задействованные системы.

Симбиозом первых двух решений является гармонизированная МДМ — наиболее эффективная система управления данными. Она предполагает как синхронизацию со сторонними IT-приложениями, так и удаление задвоенной информации, а также актуализацию данных путем сопоставления. Такая система умеет разрешать конфликты, связанные с одновременной корректировкой одних и тех же записей в разных IT-системах.

Выбор MDM-решений

Поскольку существуют разные типы MDM-систем, необходимо тщательно подходить к их выбору. При принятии решения о внедрении MDM важно учитывать следующие факторы:

• степень развития IT-инфраструктуры предприятия;
• потребности и цели компании;
• наличие инвестиций на реализацию проекта;
• цели и задачи предприятия в области управления мастер-данными.

Для правильного выбора системы хранения мастер-данных и стратегии ее внедрения важно предварительно проанализировать эти моменты и аргументированно обосновать проект с учетом экономических и технических возможностей. В идеале это нужно делать представителям бизнеса совместно с создателями MDM.

Сегодня компании все чаще обращаются к отечественным разработкам — наблюдается рост спроса на российское ПО [6] Перспективы развития российского ПО. 2022. URL: https://procomputery.ru/ . И у этого есть вполне понятное объяснение.

После ухода иностранных IТ-гигантов с российского рынка каждая вторая отечественная компания осталась без технической поддержки [7] Уход иностранных IТ-вендоров оставил больше 50% российских компаний без техподдержки. 2022. . Поэтому возрастает спрос на импортозамещение информационных систем, обеспечивающих функционирование бизнеса. Не все отечественные решения полностью отвечают требованиям, которые предъявляют заказчики — в данный момент российские MDM-решения не могут на 100% заменить продукты иностранных вендоров, хотя проектов, предполагающих переход на разработки местных компаний, довольно много и среди них уже выделились лидеры.

Одно можно сказать точно: переход к новым решениям по внедрению MDM должен быть взвешенным и осторожным. Организациям следует выбирать МДМ-системы, которые встраиваются практически в любой современный IT-ландшафт с сохранением прежнего набора инструментов.

Источник: www.kp.ru

6 неоспоримых преимуществ использования MDM для бизнеса

Управление данными и MDM стали критически важными для успешной деловой практики, поскольку организации придают все большее значение решениям, основанным на цифровых записях. Сегодня те, кто использует в своем бизнесе MDM систему, идут на шаг впереди и получают ощутимые преимущества.

Просмотров: 610 28.02.2020 MDM (мастер-данные)

Ценность системы MDM (Master Data Management) заключается не только в создании надежных методов управления данными. МДМ- есть средство, с помощью которого могут быть успешно достигнуты другие стратегические и операционные цели. Использование MDM системы оправдывается поддержкой бизнес-инициатив, основанных на преимуществах MDM:

• Повышение качества информации: основные данные, оформленные по установленным стандартам и бизнес-правилам позволяют организации иметь надежную базу данных, которая помогает более эффективно контролировать качество информации.
• Повышение производительности бизнеса и операционной эффективности: MDM помогает устранить дублирование и ручной ввод в нескольких системах по всему предприятию, снижая возможность введения невалидной, неполной информации, исключая необходимость многократной пересылки одних и тех же данных. Это также дает организациям понимание того, как одни и те же объекты данных представляются, обрабатываются или обмениваются приложениями, сервисами, программными комплексами, внутри предприятия и как эти объекты связаны с потоками бизнес-процессов. Подобная аналитика является основой для оценки эффективности автоматизации своих бизнес-процессов и определения необходимости улучшения бизнес-процессов за счет использования информационного актива.
• Улучшение взаимодействия: качественные основные данные обеспечивают эффективную перекрестную связь между разнородными системами и улучшают их совместимость
• Улучшение управления, соответствия нормативным требованиям и управления рисками: фрагментация основных данных имеет негативное влияние на процессы управления, соблюдения и управления рисками, затрудняя согласование данных. MDM устраняет несоответствия в основных данных и позволяет наладить эффективное управление процессом.
• Упрощение и ускорение работы приложений: когда объекты основных данных пересекающиеся в нескольких системах объединены в главное хранилище, имеется соответствующая возможность управлять функциональным циклом жизни основных данных. В такой схеме новые приложения должны интегрироваться только с приложением MDM для общего доступа к данным по существующему в организации портфелю приложений.
• Обеспечение согласованной отчетности и улучшение процесса принятия решений: При использовании MDM системы создание различных отчетов обеспечивается управляемыми процессами. Согласованность информации, предоставляемая MDM, способствует формированию высококачественных данных в бизнесе и позволяет принимать более четкие, быстрые, лучшие бизнес-решения.

Если ваша деятельность связана со сферой retail, читайте об эффективном управлении мастер-данными здесь.

Сфера MDM

Управление мастер-данными о товарах в каналах закупок и каналах продаж.

Согласование ассортимента, цен, листинг товаров, промо-акции, сертификаты, медиаданные и многое другое.

Для производителей, торговых сетей и дистрибьюторов.

Источник: www.esphere.ru