Про сертификацию дешей в Авито пост
За 10 лет тема сертификации в BI успела меня вдохновить и утомить несколько раз.
Есть в этом что-то супер разумное - отделять «хороший» контент от «херового».
Есть в этом что-то бюрократическое.
Но в итоге в этом есть и что-то неизбежное. Как ни крути - других эффективных решений проблемы "хаоса отчетов" найти не особо получается.
Важная тема короче.
AI-кипеш придал ей еще новый импульс.
Чем дальше прогружаешься в LLM+BI тем больше понимаешь, что деши немного подвинутся, но никуда не уйдут (сука).
Будут обрастать связями с метриками и ноутбуками, AI фичами для адхокинга - но проблема нехватки слоя здоровых+рекомендованных объектов остается.
В 25 году мы в Авито закрывали этот пробел.
См. свежую статью об этом от Жени Мичурина - тимлида BI в Avito Jobs.
Во многом мы переосмысляли фреймворк, уже проверенный в других компаниях.
Движок на бекенде проверят факторы здоровья и отображает статус в хедере, а BI-партнеры ревьюют и размечают ключевые деши.
Сама по себе сертификация не самоцель - конечно нас интересует больше пользы за меньшие усилия.
Что мы при этом пробовали новое
- Запилили в хедер деша прямо в BI системе. Твердый плюс оперсорс BI - можешь переверстать все под себя. Много сломали копий с Женей и Даней, вроде чистенько, но кнопка readme в итоге потерялась - зайдем на новый круг позже.
- Затестировали AI-генерацию описания деша по шаблону. Ожидаемо неплохо. Но сущностную инфу - зачем деш реально и какие есть в нем нюансы логики - все равно писать автору. Ну и надо докрутить human-in-the-loop. Добавлять описания, которые вообще не проверял автор - стремно.
Впрочем учитывая какой низкий процент их читает - может и ок) LLM пишет ридми, и потом LLM же этот ридми читает для поиска - это так тупо, что аж хорошо.
- Сделали Target audience — заполняемое автоматом и автором поле с целевыми группами (≠ группы имеющие доступ)
для рекомендаций и индивидуальной сборки коллекций дешей для юзера.
Впереди еще больше задач
- Надо прокачать мотивацию авторов. Сертифицированные деши - получают приоритет в поиске, у агента, в очереди на обновление. Есть план сфокусировать фидбек-бота только на ключевых сертифицированных отчетах. Но нужно что то еще.
- Сейчас в процессе нет главного компонента - автопроверки апстрима деша на наличие core слоя витрин. Тема в начале пути. Если ты DE с крутым опытом в этой теме - го к нам (пиши в лс)
Короче еще много поводов продолжать развлекаться❤️
В тему старое видео Ромы Бунина с куском про сертификацию в Яндекс такси.
Ну и нового года всем. Чтобы в нем было много нового и он сам был ..новым! 👍
#АвитоBI
За 10 лет тема сертификации в BI успела меня вдохновить и утомить несколько раз.
Есть в этом что-то супер разумное - отделять «хороший» контент от «херового».
Есть в этом что-то бюрократическое.
Но в итоге в этом есть и что-то неизбежное. Как ни крути - других эффективных решений проблемы "хаоса отчетов" найти не особо получается.
Важная тема короче.
AI-кипеш придал ей еще новый импульс.
Чем дальше прогружаешься в LLM+BI тем больше понимаешь, что деши немного подвинутся, но никуда не уйдут (сука).
Будут обрастать связями с метриками и ноутбуками, AI фичами для адхокинга - но проблема нехватки слоя здоровых+рекомендованных объектов остается.
В 25 году мы в Авито закрывали этот пробел.
См. свежую статью об этом от Жени Мичурина - тимлида BI в Avito Jobs.
Во многом мы переосмысляли фреймворк, уже проверенный в других компаниях.
Движок на бекенде проверят факторы здоровья и отображает статус в хедере, а BI-партнеры ревьюют и размечают ключевые деши.
Сама по себе сертификация не самоцель - конечно нас интересует больше пользы за меньшие усилия.
Что мы при этом пробовали новое
- Запилили в хедер деша прямо в BI системе. Твердый плюс оперсорс BI - можешь переверстать все под себя. Много сломали копий с Женей и Даней, вроде чистенько, но кнопка readme в итоге потерялась - зайдем на новый круг позже.
- Затестировали AI-генерацию описания деша по шаблону. Ожидаемо неплохо. Но сущностную инфу - зачем деш реально и какие есть в нем нюансы логики - все равно писать автору. Ну и надо докрутить human-in-the-loop. Добавлять описания, которые вообще не проверял автор - стремно.
Впрочем учитывая какой низкий процент их читает - может и ок) LLM пишет ридми, и потом LLM же этот ридми читает для поиска - это так тупо, что аж хорошо.
- Сделали Target audience — заполняемое автоматом и автором поле с целевыми группами (≠ группы имеющие доступ)
для рекомендаций и индивидуальной сборки коллекций дешей для юзера.
Впереди еще больше задач
- Надо прокачать мотивацию авторов. Сертифицированные деши - получают приоритет в поиске, у агента, в очереди на обновление. Есть план сфокусировать фидбек-бота только на ключевых сертифицированных отчетах. Но нужно что то еще.
- Сейчас в процессе нет главного компонента - автопроверки апстрима деша на наличие core слоя витрин. Тема в начале пути. Если ты DE с крутым опытом в этой теме - го к нам (пиши в лс)
Короче еще много поводов продолжать развлекаться❤️
В тему старое видео Ромы Бунина с куском про сертификацию в Яндекс такси.
Ну и нового года всем. Чтобы в нем было много нового и он сам был ..новым! 👍
#АвитоBI