❤️ Интересы людей меняются, а вместе с ними — и рекомендации сервисов. Быстро подстраиваться под потребности пользователей им помогает YTsaurus Flow. Выкладываем технологию в опенсорс и рассказываем о ней в посте. 🔴 Что это такое? YTsaurus Flow непрерывно обрабатывает большие потоки данных в интернет-сервисах. Например, считает, сколько просмотров на видео или кликов по ссылке. На этих данных дообучаются рекомендательные и рекламные системы. 🔴 Зачем нужна технология? Потребности пользователей меняются за минуты: сначала они ищут товары для ремонта, а затем — для путешествия. Прежде чем данные станут частью рекомендаций, их нужно собрать и подготовить — это занимает много времени. 🔴 Зачем обрабатывать данные непрерывно? Например, вы заказываете еду из фудкорта или ресторана. Сервис мог бы дать скидку на доставку, если ваш заказ будет курьеру по пути. Эта ситуация актуальна только сейчас. Если вы сделаете аналогичный заказ завтра или даже через несколько часов, обстоятельства будут уже другими. 🔴 Как YTsaurus Flow используют в Яндексе? Например, в одном из процессов Яндекс Рекламы технология анализирует миллионы сообщений о действиях пользователей в секунду. До внедрения техническая задержка при подготовке данных могла составлять более десяти часов. С помощью YTsaurus Flow удалось сократить это время практически полностью. ↘️ YTsaurus Flow разработали инженеры Yandex Infrastructure и Яндекс Рекламы. Подробнее о технологии читайте на «Хабре». Она входит в экосистему YTsaurus — открытой платформы Яндекса для хранения и обработки больших объёмов данных. Подписывайтесь 〰️ @yandex