Содержание статьи
- Что такое НСИ и зачем нужен MDM
- Сначала назначьте владельцев полей
- Пример: почему «Кабель КЛ-17» — ещё не один товар
- Как хранить соответствия и предотвращать новые дубли
- Как разобрать уже накопленные дубли
- Ошибки, которые превращают очистку в новый проект
- Как определить границу мастер-объекта
- Процесс создания и изменения карточки
- Как измерять качество поиска дублей
- Единицы, упаковки и изменение коэффициентов
- Организационная устойчивость после очистки
- Как проверить результат пилота
- Источники и дата проверки
Что такое НСИ и зачем нужен MDM
Нормативно-справочная информация — согласованные сведения о товарах, контрагентах, единицах измерения и других объектах. MDM — подход к управлению мастер-данными: кто создаёт запись, какие поля обязательны, как принимаются изменения и какой идентификатор используют системы. Покупка MDM-продукта без этих правил не устраняет дубли.
В небольшой компании достаточно ответственного за справочник, правил заполнения и таблицы соответствий. Отдельная MDM-система становится кандидатом, когда справочники ведутся в нескольких базах, заявки требуют согласования, а изменения нужно контролируемо распространять. 1С:MDM КОРП — один из продуктов этого класса; выбирать его следует после описания процессов.
Сначала назначьте владельцев полей
| Данные | Пример владельца | Что согласовать |
|---|---|---|
| Инженерный артикул и исполнение | Конструкторская служба | Чем отличаются версии изделия |
| Базовая единица и упаковка | Учёт и склад | Коэффициент пересчёта и допустимые операции |
| Маркетинговое описание | Коммерческий отдел | Какие изменения не меняют идентичность |
| Глобальный ID и соответствия | Ответственный за НСИ | Создание, объединение и запрет повторного использования |
Это пример распределения, а не штатное расписание. Владельцем конкретного поля должна быть одна согласованная роль. Принцип «кто последним прислал, тот прав» опасен: CRM может перезаписать технические характеристики из PDM.
Пример: почему «Кабель КЛ-17» — ещё не один товар
| Источник | Локальный ID | Описание | Единица |
|---|---|---|---|
| 1С | 000123 | Кабель КЛ-17, исполнение А | м |
| CRM | P-77 | КЛ-17 А, бухта 100 м | бухта |
| PDM | ENG-17 | Кабель КЛ-17, исполнение Б | м |
Первые две записи могут описывать один материал в разных единицах; это нужно подтвердить по производителю и характеристикам. Третья относится к другому исполнению: объединять её только по КЛ-17 нельзя. После подтверждения первые две получают общий эталонный ID MAT-017-A, а PDM-запись — отдельный MAT-017-B.
Если подтверждено, что бухта содержит ровно 100 метров, заказ на две бухты соответствует 200 метрам. Коэффициент хранится как правило для конкретной упаковки, а не извлекается при каждом обмене из строки названия. При переменной длине бухты такой пересчёт уже неприменим: нужна фактическая длина партии.
Как хранить соответствия и предотвращать новые дубли
Минимальная таблица содержит систему-источник, область базы, тип объекта, локальный ID, эталонный ID и период действия. Связка источника, области и локального ID должна однозначно указывать на эталон. Локальные коды из двух разных баз могут совпадать, поэтому одного кода недостаточно.
source_system,source_scope,entity_type,local_id,master_id
1c,erp-main,item,000123,MAT-017-A
crm,sales-main,item,P-77,MAT-017-A
pdm,engineering,item,ENG-17,MAT-017-BЭто учебный контракт, не структура регистров типовой 1С. Для новой карточки сначала ищут существующее соответствие, затем кандидатов по значимым признакам. Нормализация пробелов и регистра полезна для поиска, но не доказывает тождество. Для контрагента ИНН тоже не решает все случаи: филиалы, КПП и роли требуют отдельной модели.
Как разобрать уже накопленные дубли
- Снимите резервную копию и соберите ссылки на подозрительные карточки, остатки и незавершённые документы.
- Сформируйте кандидатов по правилам, не выполняя автоматическое слияние.
- Владелец НСИ подтверждает идентичность, единицы, характеристики и эталонную запись.
- Определите порядок миграции ссылок в каждой системе и возможность отката. Проведённые документы обрабатывают только поддерживаемыми средствами и по согласованным учётным правилам.
- Старые ID сохраняйте в соответствиях; закройте создание новых операций на дубле после проверки.
- Сверьте остатки, суммы и межсистемные связи; проверьте, что следующий обмен не создаёт дубль заново.
Ошибки, которые превращают очистку в новый проект
| Ошибка | Последствие и проверка |
|---|---|
| Слить похожие названия | Можно объединить разные исполнения; сверяйте атрибуты |
| Удалить старые ID | Повторная выгрузка создаст новые карточки; сохраняйте соответствия |
| Очистить только 1С | Дубль вернётся из CRM; исправьте правила создания во всех источниках |
| Считать упаковку базовой единицей | Искажаются количество и цена; проверяйте пересчёт на одной операции |
| Переписать историю без плана | Меняются отчёты и ссылки; сначала тестовая миграция и сверка |
Как определить границу мастер-объекта
До очистки решите, что считается одним объектом. Для материала существенными могут быть производитель, марка, размер и исполнение; для услуги — состав работ и единица расчёта. Цвет упаковки иногда не меняет идентичность товара, а иногда определяет продаваемую модификацию. Набор значимых признаков выбирает владелец предметной области. Универсальная строка «артикул плюс название» редко покрывает все группы.
Разделите объект, его представления и временные свойства. Один материал может иметь складское название, коммерческое описание и код поставщика. При этом цена, статус доступности и остаток не должны превращаться в новые мастер-карточки при каждом изменении. Если создавать отдельный товар на каждую цену, справочник быстро разрастётся, а аналитика начнёт сравнивать разные записи вместо истории одного материала.
Для сложного ассортимента подготовьте несколько разобранных пар: очевидный дубль, похожие разные исполнения и одна запись в разных упаковках. Зафиксируйте решение и признаки, на которых оно основано. Такой справочник примеров полезнее общей команды «не создавать дубли»: оператор получает проверяемое правило. Спорные случаи направляйте эксперту, а не заставляйте алгоритм выбирать ближайший вариант без подтверждения.
Процесс создания и изменения карточки
Минимальный маршрут новой записи включает заявку, поиск существующего объекта, заполнение обязательных свойств, проверку экспертом и публикацию. Не каждую карточку нужно согласовывать несколькими руководителями. Достаточно разделить обычные операции и изменения, которые влияют на учёт или производство. Например, исправление опечатки и смена базовой единицы имеют разный риск и требуют разных полномочий.
Заявка должна содержать контекст использования: зачем объект нужен, кто его потребляет и к какому сроку. Без контекста эксперт может создать слишком общую карточку, которая позже не подойдёт для спецификации или заказа. Для повторяемых групп используйте шаблоны обязательных атрибутов. Не переносите все свойства всех товаров в одну огромную форму: сотрудники начнут заполнять её случайными значениями ради завершения.
После утверждения изменение получает версию и список получателей. Система должна различать «опубликовано в эталоне» и «применено всеми потребителями». Если CRM обновилась, а склад ещё работает со старым коэффициентом упаковки, процесс не завершён. Для значимых изменений определите момент вступления в силу и поведение незавершённых документов. Иногда правильнее создать новое исполнение, чем менять смысл уже используемой карточки.
Как измерять качество поиска дублей
Проверяйте не число найденных совпадений, а качество решений. Если алгоритм предложил сто пар и эксперт подтвердил только двадцать, оператор потратил время на восемьдесят ложных тревог. Если алгоритм нашёл мало пар, это тоже не доказывает чистоту справочника: он мог пропустить различающиеся написания. Для оценки нужна размеченная выборка с известными дублями и похожими разными объектами.
Начните с объяснимых признаков: нормализованного артикула, производителя, единицы и ключевых характеристик. Сходство названий используйте для ранжирования кандидатов, не как окончательное доказательство. Любая автоматическая нормализация должна сохранять исходное значение. Удалённый дефис или символ может быть частью маркировки, а не косметической разницей; решение зависит от конкретной группы материалов.
Разделите режим подсказок и автоматического объединения. Подсказка допустима при меньшей уверенности, потому что её проверяет человек. Для слияния нужны более строгие условия и возможность восстановить связи. Даже высокий общий процент правильных решений не оправдывает ошибочное объединение критических деталей. Отдельно учитывайте последствия ошибки, а не только среднюю точность по массовому недорогому ассортименту.
Единицы, упаковки и изменение коэффициентов
В примере две бухты дают 200 метров только при подтверждённой длине 100 метров. Допустим, новый поставщик выпускает бухту 80 метров под похожим названием. Нельзя заменить общий коэффициент со 100 на 80 и пересчитать все прошлые заказы. Привяжите упаковку к конкретному варианту поставки и периоду действия либо ведите отдельный идентификатор упаковки. История должна сохранять значение, использованное в операции.
Проверьте обратное преобразование. Заказ на 250 метров не всегда можно автоматически превратить в 2,5 бухты, если поставщик отгружает только целые упаковки. Нужны правило округления, допустимый излишек и подтверждение закупщика. Цена за бухту также не равна цене за метр: при обмене передавайте единицу цены отдельно от единицы количества, если они различаются в принятой модели.
Не смешивайте пересчёт упаковки и физические преобразования материала. Штуки и метры могут быть связаны фиксированной длиной конкретного изделия, а килограммы и литры требуют дополнительных условий. Если коэффициент зависит от партии, нельзя хранить его как постоянную характеристику всей номенклатуры. Это ограничение нужно объяснить пользователям до интеграции, иначе ошибка выглядит как случайный дефект суммы документа.
Организационная устойчивость после очистки
Разовая очистка не решает проблему, если пользователи продолжают создавать карточки в каждой системе независимо. Определите разрешённые точки создания, срок обработки заявок и резервный порядок при недоступности эталона. Слишком медленное согласование провоцирует обход процесса. Контролируйте не только запреты, но и то, может ли сотрудник вовремя получить корректную запись для реальной операции.
Для исключений нужен журнал с владельцем и сроком закрытия. Временная локальная карточка должна иметь признак и план сопоставления, иначе она становится постоянным дублем. Периодически проверяйте новые записи без соответствий, изменённые единицы и конфликты атрибутов. Такой контроль позволяет заметить возвращение проблемы до того, как она распространится в остатки, спецификации и отчётность.
Как проверить результат пилота
Выберите один справочник и небольшой согласованный набор кандидатов. Для примера выше результат должен быть таким: три исходных ID, два эталонных товара, пересчёт двух подтверждённых бухт в 200 метров, ноль потерянных ссылок и отсутствие новых карточек при повторной загрузке.
На реальной выборке измеряйте долю подтверждённых дублей среди кандидатов, число ошибочных объединений, время согласования новой записи и полноту сопоставления. Не называйте уменьшение числа карточек экономией без оценки последствий. После стабилизации НСИ можно строить ABC/XYZ-анализ и аналитические отчёты.
Для приёмки сопоставлений возьмите два внешних кода с одинаковым текстом названия, но разными подтверждёнными исполнениями. Обмен должен создать или найти два разных эталона. Затем отправьте прежние коды повторно с исправленной орфографией: число эталонов не должно увеличиться. Третий шаг — новая упаковка с другим подтверждённым коэффициентом; проверьте историю старых операций. Сохраните, кто принял каждое решение и на основании каких свойств. Такая последовательность одновременно проверяет идентичность, устойчивость соответствий и отсутствие скрытого изменения прошлого. Если спорный объект нельзя однозначно классифицировать, ожидаемое поведение — задача владельцу НСИ, а не произвольное объединение ради завершения загрузки.
Источники и дата проверки
Проверено . 1С:MDM КОРП: функциональность.