IT's Tinkoff Product analytics Meetup #2

Все бизнесы хотят развиваться контролируемо, основываясь на данных. Для этого проводится большое количество A/B-экспериментов. Но, по мере роста, компании сталкиваются с проблемой, что коробочные решения, которые использовались ранее, по многим причинам им уже не подходят. Так случилось и с Тинькофф, и поэтому мы стали развивать нашу собственную A/B-платформу. В докладе мы поделимся опытом того, как создавалась наша платформа, какие кейсы позволила решить. В частности, расскажем про возможности безрелизного запуска тестов, а также о проведении сквозных кросс-платформенных тестов. В заключение, расскажем, про сложности, с которыми сталкиваемся, а также о путях их решения.

– Как разрабатывать и актуализировать метрики и на что обращать внимание;
– В какой момент может не хватать базовых метрик и стоит переходить к разработке прокси – и что для этого нужно;
– Как все это ложится на единое дерево и как помогает продукту.

– Сложности организации хранилищ данных Озон и закрытого контура, с которыми мы живем ежедневно;
– Техничесие баги инфраструктуры данных и сплита мы отлавливаем и анализируем при проведении АБ тестов; ;
– Влияние ограничений и нагрузки инфраструктуры на обязательные процессы аналитики; ;
– Как мы решили задачу отладки операционной аналитики для заказчиков через процессы и разработанные компоненты решений для онлайн мониторинга качества данных, алертинга, дежурства.