Как проверить прогноз спроса на базе ИИ перед запуском
Проверьте, стал ли прогноз полезнее текущего способа планирования. Сравнивайте одинаковые горизонты, выделяйте дорогие ошибки и проверяйте результат по сегментам.
Выберите горизонт, на котором меняется решение
Если поставщик привозит товар через три недели, сравните прогноз на этот срок. Прогноз на завтра нужен для другой операции, например сборки сменного плана. Укажите единицу расчёта: продажи в штуках по артикулу и складу, заказы покупателей по неделям или иной объект. Опишите, что в данных означает спрос. Наблюдаемые продажи могут снижаться из-за отсутствия товара. Если доступного остатка не было, отметьте соответствующий период и согласуйте подход к его учёту.
Проверьте возвраты, замены артикулов, переносы поставок и акции. Уточните, когда участнику действительно стали известны условия акции или закупки. В проверке модель должна пользоваться только сведениями, доступными на дату прогноза. Профессоры Роб Хайндман и Джордж Атанасопулос описывают проверку временных рядов на последовательных временных срезах с оценкой нужного горизонта. Методика проверки по времени.
Выберите базовый вариант и срезы
Сравните с текущим способом и простой альтернативой. Для стабильной позиции могут подойти последние недели, для повторяющейся сезонности — сопоставимый период. Храните срезы, на которых сделаны прогнозы, и отдельно сверяйте новые товары и позиции с нерегулярными продажами. Вынесите в отдельный отчёт артикулы с дефицитом и акции, если это влияет на решение.
| Что измерить | Чем это помогает |
|---|---|
| MAE, средняя абсолютная ошибка | Показывает типичную ошибку в штуках для сопоставимых рядов |
| Средняя ошибка со знаком | Выявляет устойчивое завышение или занижение на выбранной группе |
| Ошибка по сегментам | Показывает, где средняя цифра скрывает ухудшение |
| Эффект для решения | Сравнивает дефицит, лишний запас и действия планировщика в сценариях |
Средняя ошибка со знаком может быть близка к нулю при крупных ошибках в разные стороны. Смотрите её рядом с абсолютной ошибкой и отдельными сегментами. Процессы согласования прогноза описаны в статье про S&OP и IBP. Если прогноз используется для расчёта закупки компонентов, проверьте, как его изменения переносятся в планирование потребности в материалах.
Учебный расчёт по четырём неделям
Для одного товара фактический спрос составил 100, 120, 80 и 100 единиц. Простой метод на каждом срезе дал 100, новый — 105, 115, 95 и 90. Абсолютные ошибки простого метода равны 0, 20, 20 и 0. Его MAE — 10 единиц. У новой модели ошибки по модулю 5, 5, 15 и 10. Среднее равно 8,75 единицы. При определении «прогноз минус факт» средняя ошибка модели равна (5 − 5 + 15 − 10) ÷ 4 = 1,25 единицы. Эти четыре наблюдения подходят только для демонстрации расчёта.
У простой модели в третью неделю прогноз был завышен на 20, у новой на 15. В четвёртую неделю новая модель занизила спрос на 10. Действия по закупке в эти недели могут различаться. При дорогих дефицитах компания проверяет, на каких товарах занижение действительно привело бы к нехватке при обычных остатках и сроках поставки. Для такого вывода используйте допущения, одинаковые для обоих вариантов.
Для следующего среза сравните базовый и новый прогноз на одних и тех же товарах, не дополняя историю данными от увиденного результата. Если проверка показала ухудшение в важном сегменте, оставьте ему текущий способ расчёта до следующего решения. Для каждого исключения укажите правило и дату пересмотра.
Проверьте работу планировщика до подключения заказов
Покажите сотрудникам рекомендации в тестовом режиме и оставьте им принятие решения. Зафиксируйте, почему прогноз корректируют, кто проверяет новый артикул и как модель возвращается к базовому правилу при отсутствии данных. Сравните расчёт и ресурс, который уйдёт на ручной просмотр. Для запуска на большем наборе товаров пригодится процедура приёмки после пилота. События по бизнес-прогнозированию и ИИ собраны в афише ИИ для бизнеса.
В услугах ограничения мощности проверяются по другому календарю. Например, при планировании загрузки врачей отдельно учитывают доступные слоты, отмены и время оказания услуги.
Вопросы и ответы
Как проверить сезонность, если за год мало данных?
Используйте доступные периоды и честно опишите границы вывода. Проверяйте похожие позиции отдельно и постепенно набирайте подтверждённый факт.
Достаточно ли общей ошибки по всем товарам?
Дополните итог срезами по обороту, сезонности и риску нехватки. Для разных товаров одинаковое отклонение в штуках может означать разные последствия.
Что делать, если продажи были ниже из-за отсутствия товара?
Отметьте дни дефицита и проверьте доступные данные о потерянном спросе. Выбор правила учёта зафиксируйте до сравнения моделей.
Ближайшие практикумы, вебинары и конференции: сравните программу, дату и условия участия.
Выбрать мероприятие →