Как автоматизировать отчёты? Не заменой Excel одним проектом, а пятью шагами, на каждом из которых отчёт продолжает выходить, а ручной работы становится меньше: описать отчёты и показатели, убрать ручную выгрузку, ввести регламент сборки с проверкой, перенести данные из файлов в базу и только потом строить витрину. Остановиться можно на любом шаге, и часто хватает второго или третьего.
Статья о процессе перехода. Вопрос «нужна ли аналитическая система вообще» разобран отдельно в статье «BI или Excel». Что мы строим на последних шагах, описано на странице «BI и аналитика для бизнеса».
Признаки, что пора уходить от Excel: версии, ручное объединение, ошибки формул
Один признак ничего не значит, три совпавших уже повод считать. Каждый можно измерить за неделю, и тогда разговор идёт о цифрах, а не о впечатлениях.
| Признак | Как выглядит на деле | Что измерить за неделю |
|---|---|---|
| Версии | В почте и на дисках лежат «отчёт_финал» и «отчёт_финал_2», на совещании у каждого своя копия | Сколько копий одного отчёта существует и какая считается главной |
| Ручное объединение | Данные 1С, CRM и склада сводятся функциями поиска и копированием, часть значений вписана руками | Сколько минут занимает сведение и сколько ячеек в отчёте содержат числа вместо формул |
| Ошибки формул | Диапазон не растянут, в итоговую ячейку вписано число, скрытый лист забыт | Сколько раз за квартал отчёт исправляли после рассылки |
| Зависимость от человека | Отчёт собирает один аналитик, порядок сборки нигде не записан | Кто выпустит отчёт, если аналитик в отпуске |
| Опоздание | Данные нужны к понедельнику, а выходят во вторник из-за сборки | На сколько часов отчёт опаздывает относительно решения, ради которого его читают |
Версии и зависимость от человека лечатся порядком: одно место для файла и записанный порядок сборки. Ручное объединение и ошибки формул лечатся автоматизацией сборки, а опоздание лечится и тем и другим. Какой уровень автоматизации выбрать, разобрано ниже.
Как автоматизировать отчёты по шагам: от таблицы к витрине
Шаги идут по возрастанию вложений, и после каждого отчёт выходит, как раньше. Это снимает главный риск: «переходный» месяц, когда старого уже нет, а нового ещё нет.
- Опись. Таблица отчётов: читатель, решение, частота, время сборки, источники, владелец.
- Определения. Для спорных показателей записаны формулы и владельцы, у каждого отчёта один набор определений.
- Автоматическая сборка. Выгрузка по расписанию, расчёт, проверки и рассылка по записанному регламенту.
- Данные в базу. Выгрузки складываются в базу с историей, отчёты читают её запросами, а не файлы друг у друга.
- Витрина и отключение файла. Показатели считаются один раз, панель и рассылка читают витрину, старый файл закрывается на запись.
Первые два шага не требуют программистов и занимают недели, третий часто решает задачу целиком, четвёртый и пятый нужны не всем. Если читателей немного, а источник один, закончить на третьем шаге нормально.
Шаги 1 и 2: опись отчётов и определения показателей
Опись выглядит скучно и экономит больше всего. Для каждого регулярного отчёта запишите: кто его читает, какое решение по нему принимается, как часто он выходит, сколько часов уходит на сборку в месяц, из каких источников он собирается и кто отвечает за цифры. Отчёты без решения станут кандидатами на удаление: часть из них собирают по привычке.
Приоритет считайте так: часы сборки в месяц × число читателей × цена ошибки в этом отчёте (оценка от одного до трёх). Первыми автоматизируйте отчёты с большим произведением, а не самые сложные или самые любимые.
Определения
Расхождения между отчётами почти всегда не ошибки, а разные определения. Остаток с резервом или без. Просрочка от обещанной даты или от первой записанной. Оборачиваемость по себестоимости или по цене продажи. Для каждого показателя записываются формула словами, источник, учитываемые документы (проведённые, из закрытых периодов) и владелец, который скажет «цифра неверна» и сможет это исправить в источнике. Без этого шага автоматизация только быстрее производит расхождения.
Шаг 3: как автоматизировать отчёты на трёх уровнях — запросы к базе, регламент сборки, витрина
Уровни различаются не технологией, а тем, что именно перестаёт делать человек. Выбирают по каждому отчёту, и в одной компании нормально, когда три отчёта живут на первом уровне, пять на втором и один на третьем.
| Уровень | Что это на деле | Когда достаточно | Чего не решает |
|---|---|---|---|
| 1. Запросы к базе | Отчёт получает данные запросом к источнику (отчёт 1С, запрос к копии базы, API) и сохраняет их в файл или таблицу по кнопке или расписанию | Один источник, один читатель, расчёт простой | Объединение нескольких систем, права по разрезам, история значений |
| 2. Регламент сборки | Выгрузка, проверки, расчёт и рассылка идут по записанному порядку по расписанию; сбой даёт сообщение ответственному, а не тихую ошибку | Несколько источников, десятки читателей, выход по графику | Единые определения для многих отчётов, самостоятельные срезы читателями |
| 3. Витрина | Данные из систем загружаются в отдельное хранилище, показатели считаются один раз и читаются многими отчётами и панелями | Общие показатели, много читателей, права по разрезам, закрытые периоды и история | Качество данных в самих источниках: расхождения показываются, но не исправляются |
Регламент сборки отличается от «макроса по кнопке» четырьмя вещами: у шагов есть порядок и зависимости, результат каждой проверки записывается, сбой не остаётся незамеченным, а повторный запуск не удваивает данные. Именно эти свойства делают сборку воспроизводимой, и их можно получить без отдельного хранилища.
Автоматизация отчётов из 1С: что можно получить без доступа к базе
Из 1С данные для отчётов можно получить четырьмя путями, от более безопасного к более рискованному. Что доступно в вашей конфигурации, зависит от версии и настроек; по описанию разработчика, условия проверяем на старте проекта.
- Готовый отчёт 1С по расписанию в файл. Отчёт, который аналитик уже формирует, сохраняется в папку без участия человека. Подходит для одного-двух отчётов, для десяти превращается в набор файлов с ручной сборкой.
- Стандартный интерфейс OData или HTTP-сервис. Данные отдаются таблицей по запросу, а доступ идёт отдельной учётной записью только на чтение.
- Файл обмена. Для старых конфигураций и закрытых контуров, когда интерфейсы недоступны.
- Прямое чтение базы. Только с согласия владельца базы и на копии или в окно малой нагрузки: запрос к рабочей базе в разгар дня замедляет людей, а структура таблиц меняется при обновлении конфигурации.
Что чаще всего искажает данные из 1С
- Непроведённые документы попадают в сумму, если фильтр не ограничивает отбор проведёнными.
- Периоды закрывают и исправляют задним числом, поэтому отчёт за прошлый месяц сегодня и вчера может различаться.
- Справочники дублируются: один контрагент под двумя названиями удваивает строки при объединении с CRM.
- После обновления конфигурации поле переименовано, и выгрузка либо падает, либо молча теряет столбец; хорошая загрузка выбирает первое.
Обмен 1С с другими системами описан на странице интеграции 1С с CRM, сайтом и маркетплейсами.
Шаги 4 и 5: база, витрина и отключение старого файла
На четвёртом шаге выгрузки складываются в базу с датой загрузки: теперь у отчёта есть история, а не только текущее состояние. На пятом шаге поверх базы строятся витрина (таблицы с готовыми показателями под вопросы подразделения), панель и рассылка. Общее устройство цепочки, то есть слои, загрузка и контроль, описано в статье об ETL и хранилище данных.
Параллельный выпуск вместо переключателя
Новый отчёт выходит рядом со старым в течение двух-четырёх периодов. Расхождения разбираются письменно: ошибка загрузки, разное определение или ошибка в самом файле (так бывает чаще, чем ожидают). Пока расхождение не объяснено, переключаться рано.
Дата отключения
Назначается заранее и записывается в паспорт отчёта: после неё старый файл открывается только на чтение и убирается из рассылки. Без даты рядом с новым отчётом остаётся старый, читатели берут тот, что привычнее, и расхождения возвращаются.
Что остаётся от переходного периода
Опись, словарь определений, запросы расчёта как файлы под контролем версий и инструкция по разбору сбоев. Это то, что должно лежать у вас, чтобы отчёт мог выпустить не один человек.
Расчёт стоимости владения: ручная сборка и автоматизация
Сравнивают не цену разработки с нулём, а два годовых потока расходов. У Excel расходы скрыты в часах людей и в ошибках, у автоматизации видны в смете. Цены продуктов здесь не приводятся намеренно: они меняются, а статьи расходов остаются.
| Статья | Ручная сборка в Excel | Автоматизация | Как посчитать |
|---|---|---|---|
| Работа по сбору | Часы аналитика на выгрузку, сведение, проверку и рассылку | Часы на контроль и разбор сбоев | Минуты на операцию × выпусков в месяц × число отчётов ÷ 60, до и после пилота |
| Ошибки | Исправления после рассылки, решения по неверной цифре | Расхождения ловит сверка, исправлений меньше | Сколько раз за год отчёт исправляли и что стоила каждая ошибка (оценка помечается как оценка) |
| Зависимость от человека | Отпуск или уход аналитика останавливает выпуск | Расчёт записан, отчёт выпустит другой человек | Сколько дней в году отчёт мог не выйти |
| Разработка | Нет | Единовременно: обследование, загрузка, расчёт, панели | Оценка подрядчика по ступеням, делится на годы, на которые вы считаете |
| Сопровождение | Время самого аналитика | Пакет часов в месяц и правки при обновлении источников | Пакет 20 000, 60 000 или 120 000 ₽ в месяц, сверх пакета 5 000 ₽ в час |
| Инфраструктура | Рабочие станции и лицензии | Сервер или виртуальная машина, копии, мониторинг | Тарифы вашего хостера или стоимость ваших серверов |
Формула проста: годовой расход ручной сборки равен часам в месяц × 12 × стоимость часа плюс стоимость ошибок и простоев. Годовой расход автоматизации равен доле разработки (стоимость, делённая на число лет, которыми вы пользуетесь отчётами) плюс сопровождение за 12 месяцев плюс инфраструктура. Автоматизация окупается, когда второе меньше первого. Стоимость часа вы подставляете свою: мы её не называем.
Условный пример без реального клиента. Пять отчётов, на каждый уходит около 12 часов в месяц, то есть 60 часов в месяц на отдел. Если пилот на двух отчётах покажет, например, что сбор занимает 3 часа в месяц вместо 12, расчёт на остальные три отчёта строится уже по этому замеру, а не по предположению. Общий подход к расчёту на несколько лет описан в статье «Как считать стоимость владения ИТ-системой».
Что делаем мы и с чего начать
Мы строим сборку отчётности по этим шагам: от описи и определений до регламента сборки и витрины на вашем сервере, с контрольной сверкой и параллельным выпуском. Если хватит первого или второго уровня, так и скажем: вы заплатите только за обследование. Бухгалтерскую и налоговую отчётность мы не ведём и не готовим. Описание работ — на странице «Автоматизация отчётности».
Начните с описи отчётов и расчёта часов по таблице выше, на это хватит нескольких дней. Если нужна помощь, обследование стоит 200 000 ₽ за один-два источника и 2–3 недели, 350 000 ₽ за несколько систем и 3–4 недели. На выходе опись, определения, схема загрузки, вывод «запросы, регламент или витрина» и вилка бюджета. Сумма вычитается из первого этапа, а документом можно пользоваться и без нас. Витрина и панели для одного подразделения начинаются от 250 000 ₽, сопровождение — от 20 000 ₽ в месяц. Все цены и сроки собраны на странице тарифов.
Частые вопросы
Как автоматизировать отчёты, если все данные в 1С?
Сначала выясните, что вы получаете из отчётов самой 1С и как часто. Если нужен один-два отчёта, хватает формирования по расписанию и проверки итогов. Если отчётов много или данные нужны вместе с CRM и складом, подключается интерфейс (OData, HTTP-сервис или файл) и регламент сборки. Условия проверяем на старте проекта.
Как уйти от отчётов в Excel, не потеряв гибкость аналитика?
Автоматизируется сборка, а не анализ. Аналитик по-прежнему открывает данные в Excel для разведки и проверки гипотез, но источником для него становится готовая выгрузка или база, а не файл из почты. Регулярные отчёты выходят по регламенту без его участия.
Сколько времени занимает переход от Excel к витрине?
Опись и определения занимают недели и не требуют программистов. Пилот на двух-трёх отчётах занимает 2–8 недель. Разработка витрины для одного подразделения идёт от четырёх недель, затем параллельный выпуск на несколько периодов. Срок растёт с числом источников и спорных определений.
Сколько стоит автоматизация отчётов?
Обследование стоит 200 000 ₽ или 350 000 ₽, лёгкий пилот 150 000–400 000 ₽, витрина и панели для одного подразделения от 250 000 ₽, сопровождение 20 000, 60 000 или 120 000 ₽ в месяц. Точную сумму называем после обследования; цены чужих продуктов не приводим.
Нужна ли витрина, если читателей мало?
Часто нет. Если источник один, расчёт простой, а читателей несколько, достаточно автоматической выгрузки и контрольной сверки. Витрина нужна, когда показатели общие для нескольких отчётов, читателей много, нужны права по разрезам и история значений.
Что делать с формулами и макросами при переносе?
Формулы описываются словами как определения показателей, затем переписываются в запросы. Макросы разбираются: что каждый делает, какой шаг регламента заменит его, что останется ручным. Копировать формулы в новую систему один в один не нужно.
Как не потерять доверие к цифрам во время перехода?
Параллельным выпуском старого и нового отчёта в течение нескольких периодов и письменным разбором каждого расхождения. Рядом с цифрой стоит время обновления данных, а при остановке загрузки появляется предупреждение, а не старое число.
Можно ли автоматизировать отчёты, если часть данных лежит в таблицах подразделений?
Да, но таблицы сначала приводят к шаблону: фиксированные листы и столбцы, проверка формата при приёме. Файл с изменённой структурой отклоняется с сообщением, а не принимается с потерей столбца. Принимать можно через форму или папку.