Интеграционная платформа на заказ: обмен данными между 1С, ERP, MES, WMS и CRM

Когда систем пять-шесть и каждая обменивается с несколькими другими, обмены перестают быть набором интеграций и превращаются в систему, за которую никто не отвечает. Мы строим эту систему явно: каналы к 1С, ERP, MES, WMS, CRM и порталам, преобразование форматов, очередь с повторами, журнал, мониторинг и справочник соответствий. Переходим к ней по одному потоку и прямо говорим, если вашему случаю платформа не нужна.

Обследование — 350 000 ₽, 3–4 неделиПервая версия платформы — 400 000–1 200 000 ₽, 2–3 месяцаИсходники и описание обменов в вашем репозитории с первого коммита

С чем приходят

Когда обменов столько, что ими никто не управляет

Схему обменов не нарисует никто

Кто с кем и когда обменивается, знают по кусочкам: новый сотрудник обходит пять человек, а схема всё равно неполная.

Замена системы тянет остальные

Меняете склад или CRM, и вместе с ней переписываете обмены с 1С, сайтом и отчётностью.

Один справочник сопоставляют по-разному

В одном обмене контрагент находится по ИНН, в другом по названию, в третьем по таблице менеджера.

Сбой ищут по пяти журналам

Заказ не дошёл до склада: открываем журналы сайта, 1С, очереди и склада, а время в них разное.

Обмены написаны как обработки

Правила спрятаны в обработках 1С и скриптах по расписанию, и знает их один сотрудник.

Новая система — отдельный проект

Каждая подключаемая система требует связей с остальными, и срок растёт быстрее числа систем.

Состав

Из чего состоит интеграционная платформа и где она ломается

Не набор «коннекторов», а семь частей, у каждой своё решение и своё место отказа. Часть функций уже есть у вас в виде скриптов и обработок. Повторы без дублей разобраны на странице про гарантированную доставку, обмен с партнёрами — на странице про EDI.

Часть
Что делает
Что решить
Где ломается
ЧастьКаналыподключение систем
Что делаетПринимают и отправляют данные на языке системы: HTTP-сервис, вебхук, файл, очередь
Что решитьСообщает ли система об изменениях сама или её надо опрашивать; какие права у учётной записи обмена
Где ломаетсяСистему обновили, канал молчит, пока не позвонит пользователь
ЧастьПреобразованиеформаты и поля
Что делаетПереводит сообщение из формата отправителя в формат получателя, подставляет соответствия
Что решитьОбщий формат нужен для объектов, которые читают три системы и больше; для пары хватает прямого перевода
Где ломаетсяБизнес-правила (цены, скидки) переезжают в платформу и расходятся с учётной системой
ЧастьМаршрутизациякому отправить
Что делаетВыбирает получателей по типу и содержимому: заказ в учёт и на склад, статус в кабинет и CRM
Что решитьКто вправе менять таблицу маршрутов
Где ломаетсяМаршруты зашиты в код, новый получатель — релиз
ЧастьОчередь и повторысбой не теряет данные
Что делаетХранит сообщения, пока получатель недоступен, повторяет отправку с паузой
Что решитьСколько хранить и когда ожидание дороже ручного разбора
Где ломаетсяСписок недоставленного никто не читает; повторная отправка создаёт дубль
ЧастьЖурналпуть сообщения
Что делаетФиксирует, что принято, как преобразовано, кому отправлено; ищется по номеру документа
Что решитьЧто пишем и как долго храним: в сообщениях бывают персональные данные и цены
Где ломаетсяПо номеру заказа не найти, а хранится всё подряд
ЧастьСправочник соответствийНСИ
Что делаетХранит перекрёстные идентификаторы: контрагент, номенклатура, склад, статус
Что решитьКакая система главная и кто разрешает спорные соответствия
Где ломаетсяСоответствия ведёт один сотрудник в таблице, и новая позиция ждёт его отпуска
ЧастьМониторингвидимость
Что делаетПоказывает, сколько ждёт самое старое сообщение; оповещает ответственного
Что решитьКто получает оповещение и что делает в ответ
Где ломаетсяОповещений слишком много, их отключают, и о сбое узнают от клиента
Способы обмена

Брокер, шлюз API, файлы или таблицы обмена: что берём для какого потока

Выбираем для каждого потока отдельно: для статусов одно, для прайса раз в сутки другое. Шлюз и шину различает статья про API gateway, вебхуки и опрос объясняет статья про API простыми словами.

Способ
Когда подходит
Что получаете
Что платите
СпособБрокер сообщений
Когда подходитПотоки неровные, получателей несколько, получатель бывает недоступен
Что получаетеОчередь с повторами, отдельная очередь на получателя, нагрузка не ложится на базы учёта
Что платитеЕщё один сервис: мониторинг, обновление, копия настроек
СпособШлюз API
Когда подходитНужен ответ сейчас: остаток при оформлении заказа, статус в кабинете
Что получаетеЕдиная точка входа, ключи и лимиты на потребителя, журнал обращений
Что платитеНе хранит сообщения: если получатель недоступен, запрос не проходит
СпособОбмен файлами
Когда подходитНет интерфейса, выгрузки крупные и раз в сутки
Что получаетеРаботает с любой системой, результат виден глазами
Что платитеПовреждённый файл без проверки при приёме останавливает обмен тихо
СпособТаблицы обмена
Когда подходитНет интерфейса, но владелец системы разрешает читать её базу или обмениваться через промежуточную базу
Что получаетеПростая отладка обычными запросами
Что платитеПривязка к чужой схеме: обновление системы ломает обмен. Крайняя мера; запись в базу 1С в обход неё не делаем
Переход

Как перейти от точечных обменов к платформе и не остановить работу

Платформа не заменяет старые обмены одним переключением. После каждого шага работа не хуже, чем до него, и остановиться можно на любом.

Шаг ноль: увидеть то, что есть

Собираем карту обменов: что с чем, в какую сторону, как часто, кто владелец, что при сбое. К существующим обменам, где возможно без переделки, подключаем общий журнал и оповещения: сбой, замеченный за минуты, дешевле того, о котором узнали от клиента. Работающие стандартные обмены, например типовой обмен 1С с сайтом, остаются как есть.

Шаг первый: справочники

По каждому общему объекту решаем, какая система главная, и заводим таблицу соответствий. Без этого платформа будет быстро и аккуратно передавать противоречия.

Шаг второй: каркас и один поток

Поднимаем ядро и переносим один поток с дорогим сбоем и простой логикой. Условный пример: статусы отгрузки от склада и перевозчика в кабинет партнёра и CRM. Пока статус не пришёл, клиент звонит менеджеру, а расчётов в потоке нет. Расчёт цены и резерв остатка в первый поток не берём.

Шаг третий: рядом со старым

Новый и старый путь работают параллельно, результаты сверяются, откат возможен до приёмки. Срок параллельной работы согласуем по каждому потоку.

Шаг четвёртый: остальные потоки по очереди

Каждый поток — этап со своей приёмкой и ценой; старый обмен отключаем после периода без расхождений. Если выгоды не видно, останавливаемся. Пары 1С и WMS и MES и 1С переносим отдельными потоками.

Справочники

Справочник соответствий: что в нём хранится и где подстерегает ловушка

Платформа аккуратно передаёт данные, но не знает, что «Ромашка ООО» в CRM и «ООО Ромашка» в 1С — один контрагент. Новое соответствие появляется по правилу: само, когда ключ однозначен, и через подтверждение, когда нет.

Объект
Кто главный
Что хранит платформа
Типичная ловушка
ОбъектКонтрагенты
Кто главныйРеквизиты — 1С, контакты — CRM
Что хранит платформаИдентификатор в каждой системе, кто подтвердил соответствие
Типичная ловушкаСопоставление по названию: два юридических лица с похожими именами сливаются в одно
ОбъектНоменклатура
Кто главныйУчёт или ERP
Что хранит платформаАртикулы, единицы измерения, коэффициенты пересчёта
Типичная ловушкаВ одной системе штука, в другой упаковка: число доходит, смысл теряется
ОбъектСтатусы
Кто главныйСистема, которая выполняет действие
Что хранит платформаТаблица перевода и единый словарь для кабинета
Типичная ловушкаВ одной системе четыре статуса, в другой девять: клиент неделю видит «в обработке»
Выбор

Готовая шина или своя платформа: когда лучше взять готовую

Готовый интеграционный продукт бывает разумнее своей платформы. Если ваш случай такой, скажем об этом в отчёте обследования и подключим ваши системы к нему.

Лучше взять готовую, если

  • для большинства ваших систем у поставщика есть готовые коннекторы;
  • есть команда эксплуатации и поддержка поставщика, за которую вы готовы платить;
  • схемы обмена должны менять специалисты без программирования;
  • срок и бюджет допускают внедрение продукта и лицензии на несколько лет.

Своя платформа оправдана, если

  • систем до десятка, а обмены нетиповые: правила вашей учётной системы, оборудование, отраслевое ПО без коннекторов;
  • контур закрытый, а готовый продукт требует облака или внешней лицензии;
  • код и описания обменов должны лежать у вас;
  • первая версия нужна за месяцы, а не за год.

До решения проверьте три самых неудобных обмена на образцах ваших систем, пробный перенос одного потока и стоимость владения на три года. Возможен гибрид: готовый брокер, а каналы и справочник свои.

Что делаем

Из чего состоит работа и сколько она стоит

Цены — по тарифам: первая версия платформы идёт там ступенью «Пилот, тяжёлый». Точная цена только у обследования, дальше вилка, которая сужается по его итогам.

Обследование: несколько систем

Карта обменов «как есть», источники истины, замер потоков и сбоев, решение «платформа или точечные обмены», порядок переноса, вилка бюджета. Вычитается из первого этапа, если продолжаете с нами.

350 000 ₽ · 3–4 недели

Обследование: контур с производством

То же плюс схема съёма данных с оборудования и требования к инфраструктуре.

500 000 ₽ · 4–6 недель

Обследование: один-два обмена

Нужна ли платформа вообще? Ответ «хватит журнала и оповещений» тоже результат.

200 000 ₽ · 2–3 недели

Пилот: каркас и один поток

Каналы к двум системам, очередь, журнал, оповещения и один поток на ваших данных рядом со старым обменом.

150 000 – 400 000 ₽ · 2–8 недель

Первая версия платформы

Ядро и несколько потоков на боевых системах, справочник соответствий, регламент эксплуатации. Копии с проверкой восстановления, нагрузочные испытания и полный мониторинг — в выводе в эксплуатацию.

400 000 – 1 200 000 ₽ · 2–3 месяца

Вывод в эксплуатацию

Остальные потоки этапами, опытная эксплуатация, отключение старых обменов, нагрузочные испытания, обучение, передача исходников и инструкций.

от 1 500 000 ₽ этапами по 300 000 – 700 000 ₽

Сопровождение

Мониторинг потоков, разбор недоставленного, правки, когда чужая сторона меняет формат или сертификат. Сверх пакета 5 000 ₽ в час.

20 000 / 60 000 / 120 000 ₽ в месяц
Процесс

Как идёт работа

3–6 недель — Обследование: карта обменов

Собираем описания систем и журналы за пиковые дни, говорим с владельцем каждой системы, рисуем схему «как есть», отмечаем сбои. На выходе документ, с которым можно идти в тендер и сравнивать предложения, в том числе не наши.

Перед разработкой — Справочники и контракты

Назначаем главную систему по каждому справочнику, описываем форматы сообщений и маршруты первого потока, договариваемся о тестовых контурах и правах обмена.

От 2 недель — Каркас и первый поток

Поднимаем ядро и переносим один поток рядом со старым обменом. Раз в две недели показываем рабочую версию на стенде.

Перед запуском — Проверка сбоев

Отключаем систему, отправляем сообщение дважды, перезапускаем платформу с непустой очередью. Договариваемся, кто получает оповещения. Запись в боевую систему включаем последней.

Дальше — Остальные потоки или остановка

Переносим следующие потоки, пока это окупается. Остановиться можно после любого.

Цена

Что двигает цену платформы внутри вилки

Вилка первой версии — ориентир. Если после обследования ядро с нужными потоками не помещается в 1 200 000 ₽, сократим набор потоков или разобьём работу на этапы, и скажем об этом сразу.

Число и закрытость систем

У каждой системы свои протокол, права и владелец. Закрытая система без документации стоит дороже открытой.

Состояние справочников

Чем меньше совпадают контрагенты и номенклатура, тем больше работы по соответствиям.

Точность и порядок

Статусы терпят задержку. Остатки, резервы и деньги требуют порядка сообщений, проверки версий и ежедневной сверки.

Кто будет эксплуатировать

Если у вас есть команда, сопровождающая сервисы, платформа ложится на её практики. Если нет, регламент и обучение входят в работу.

Контроль

Что остаётся у вас и чего мы не делаем

Остаётся у вас

  • Исходный код платформы, каналов и преобразований в вашем репозитории с первого коммита.
  • Описание обменов: карта, источники истины, форматы сообщений и маршруты, проверяемые в сборке.
  • Развёртывание на вашем оборудовании и инструкция для повтора без нас; учётные записи обмена и доступ к журналу оформлены на вас.
  • Право остановиться после любой ступени: платформа с несколькими потоками работает, остальные обмены прежние.

Мы этого не делаем

  • Не заменяем ERP и учётные системы: платформа соединяет, а не подменяет.
  • Не обещаем интеграцию «одной кнопкой»: подключение каждой системы — отдельная работа с отдельной оценкой.
  • Не внедряем шину на все системы предприятия сразу: такой проект стоит десятки миллионов и требует команды в несколько десятков человек. Берём один контур.
  • Не подключаем системы без интерфейса и без выгрузки: робот в окне программы хрупок и оценивается отдельно.
  • Не обещаем процент доступности и не дежурим круглосуточно. Лицензии ФСТЭК нет, аттестацию не проводим; подключение к внешним государственным сервисам согласуем с вашей службой безопасности и документацией оператора.
  • Не берём работы дешевле 150 000 ₽.
Инструменты

На чём собираем

Платформа и данные
  • Python (FastAPI, Django) или Go
  • PostgreSQL для журнала, справочника соответствий и очереди небольших потоков
  • RabbitMQ, когда нужны маршрутизация и отдельные очереди получателей
  • S3-совместимое хранилище для файловых обменов
Контракты, наблюдение, развёртывание
  • JSON Schema для сообщений и OpenAPI для синхронных интерфейсов, проверка совместимости в сборке
  • Метрики и панели в вашей системе мониторинга или Prometheus и Grafana
  • Docker, Nginx, GitLab CI, развёртывание в вашем контуре
Материалы

Материалы по теме

Статья

Интеграционная шина: что это и когда она нужна

Из чего состоит шина и как понять, что обменов уже слишком много.

  • Состав шины
  • Признаки «спагетти»
  • Когда рано
Читать →
Статья

API gateway: что это и зачем нужен шлюз

Чем шлюз отличается от шины и что не заменяет в безопасности.

  • Шлюз и шина
  • Безопасность
  • Точка отказа
Читать →
Заявка

Разберём, нужна ли вам интеграционная платформа

Сорок минут созвона: какие системы, кто с кем обменивается, где ломается. Скажем, нужна ли платформа, с какой ступени начинать и в какую вилку это укладывается.

или оставьте заявку

Спасибо, заявка отправлена. Ответим в течение рабочего дня.

Не удалось отправить. Напишите в Telegram или MAX, или позвоните.

Вопросы

Частые вопросы: интеграционная платформа

Сколько стоит интеграционная платформа?

Цена зависит от числа систем и потоков. Обследование — 350 000 ₽ за несколько систем, 500 000 ₽ с производством, 200 000 ₽ при одном-двух обменах; сумма вычитается из первого этапа, если продолжаете с нами. Каркас и один поток — лёгкий пилот за 150 000–400 000 ₽, первая версия платформы — тяжёлый пилот за 400 000–1 200 000 ₽ и 2–3 месяца. Вывод в эксплуатацию от 1 500 000 ₽ этапами по 300 000–700 000 ₽.

Чем платформа отличается от набора обменов между системами?

В наборе каждая связь написана отдельно, повторы и журнал в каждой свои. В платформе они общие: система подключается один раз, схема описана в одном месте, сбой ищется по одному журналу. Для двух-трёх стабильных обменов платформа не нужна.

Нужна ли платформа, если у нас три системы?

Скорее всего, нет: между тремя системами не больше трёх связей. Пора задуматься, когда схему обменов никто не может нарисовать, замена одной системы ломает другие, а сбои ищут по журналам нескольких систем. Ответ «не нужна» мы тоже записываем в отчёт обследования.

Выдержит ли платформа наш объём сообщений?

Назвать предел заранее нельзя: он зависит от вашего профиля — числа и размера сообщений, пиков. Профиль фиксируем на обследовании, измеряем на стенде, близком к боевому серверу, результат записываем в протокол при выводе в эксплуатацию.

Не станет ли платформа единой точкой отказа?

Станет узлом обмена, и это записывается как риск. Снижаем его так: отправители сохраняют исходящее у себя и повторяют отправку, компоненты без состояния ставятся в два экземпляра, хранилище сообщений копируется и восстанавливается, остановку и обновление отрабатываем на стенде. То, что должно работать при остановленной платформе (касса, склад), не вызывает её синхронно. Процент доступности не обещаем.

Можно ли подключить систему без программного интерфейса?

Можно, если у системы есть выгрузка файлов, доступ к базе или стандартный обмен конфигурации. Если нет ни интерфейса, ни выгрузки, скажем об этом до договора: робот в окне программы хрупок и оценивается отдельно.

Где работает платформа и кто её эксплуатирует?

На вашем оборудовании или у вашего хостера. Эксплуатировать могут ваши сотрудники по нашей инструкции либо мы по пакету сопровождения: 20 000, 60 000 или 120 000 ₽ в месяц, до 4, 12 или 25 часов. Круглосуточного дежурства нет.

Вы работаете только в Ростове-на-Дону?

Мы в Ростове-на-Дону, работаем с заказчиками по всей России: удалённо и в вашем контуре. Доступ к системам и обследование согласуем на старте с вашей службой безопасности.