#кейсы #ML
Раз уж зашла речь про фичи.
Посвящается каунтам (counts) в проме.
В одной далекой-далекой галактике канальи-DS решили сделать счетчики числа запросов с сайтов разных тематик в месяц. А чего б не сделать – есть 2гис, есть similarweb – сиди и считай сколько в каждой категории визитов на каждый id. Да для стабильности зафиксируй связку сайт-тематика, а то вдруг из черной дыры возникнет ужасное смещение!!! Прошла пара лет как такое чудо в проме.
Другие канальи-DS строили модель, а таргеты у них были на время примерно “текущий год минус 3” или “текущий минус 2”. И тест тоже примерно на “текущий год минус полтора”. Построили эти DS модель и даже проверили «как следует» на таком вот тесте – клиент-то важный.
Только вот в проме модель странно себя повела.
Стали копать после бодрого пинка от продажников – а каунты-то все раз в 10 меньше чем на трейне. Вы не поверите, но сайты в рунете появляются новые, а старые приходят в упадок или закрываются (кто еще помнит bash.im или lurk?).
Мораль простая – каунты (практически всегда) зло, но в следующем посте вас ждет зло еще злее.
Раз уж зашла речь про фичи.
Посвящается каунтам (counts) в проме.
В одной далекой-далекой галактике канальи-DS решили сделать счетчики числа запросов с сайтов разных тематик в месяц. А чего б не сделать – есть 2гис, есть similarweb – сиди и считай сколько в каждой категории визитов на каждый id. Да для стабильности зафиксируй связку сайт-тематика, а то вдруг из черной дыры возникнет ужасное смещение!!! Прошла пара лет как такое чудо в проме.
Другие канальи-DS строили модель, а таргеты у них были на время примерно “текущий год минус 3” или “текущий минус 2”. И тест тоже примерно на “текущий год минус полтора”. Построили эти DS модель и даже проверили «как следует» на таком вот тесте – клиент-то важный.
Только вот в проме модель странно себя повела.
Стали копать после бодрого пинка от продажников – а каунты-то все раз в 10 меньше чем на трейне. Вы не поверите, но сайты в рунете появляются новые, а старые приходят в упадок или закрываются (кто еще помнит bash.im или lurk?).
Мораль простая – каунты (практически всегда) зло, но в следующем посте вас ждет зло еще злее.