Ретроспективное тестирование

Карточка по цепочке поставок о ретроспективном тестировании. Это процесс оценки точности метода прогнозирования с использованием имеющихся исторических данных. МЫ НЕ МОЖЕМ ПРОВОДИТЬ РЕТРОСПЕКТИВНОЕ ТЕСТИРОВАНИЕ ДЛЯ ЭТОГО ПРОГНОЗА НОВОГО ПРОДУКТА – У НЕГО ОТСУТСТВУЕТ ИСТОРИЯ ПРОДАЖ! 2: Он используется для оценки ожидаемой будущей точности метода прогнозирования. ПОЭТОМУ ФАКТИЧЕСКАЯ ТОЧНОСТЬ МОЖЕТ ИЗМЕНИТЬСЯ – ВОЗМОЖНО, ЭТО ТО, ЧТО ВЫ ИМЕЕТЕ В ВИДУ ПОД РЕТРОСПЕКТИВНЫМ ТЕСТИРОВАНИЕМ? Несмотря на то, что это хорошая практика, ретроспективное тестирование имеет ограничения и может быть ограничено в применении при запуске новых продуктов и акциях. На изображении карточки присутствует персонаж, напоминающий Робин Гуда, который с гордостью демонстрирует мишень с яблоком, прибитым в самый центр. Через яблоко пронзена стрела, создавая иллюзию идеального выстрела. В другой руке он держит лук. Изображение служит метафорой проблемы переобучения в ретроспективном тестировании, когда модель может казаться идеальной, но это лишь потому, что она чрезмерно адаптирована к историческим данным.

Художник: Marina Besfamilnaya

Узнайте больше в записи Ретроспективное тестирование базы знаний Lokad.