Мы в компании любим и уважаем Apache Kafka, и в ознаменование выхода ее недавнего обновления я решил подготовить статью про ее производительность. А еще рассказать немного про то, как выжать из нее максимум.
Читать полностью »
Рубрика «apache kafka» - 2
Apache Kafka и миллионы сообщений в секунду
2017-11-22 в 4:50, admin, рубрики: Apache, apache kafka, Producer, Блог компании Tinkoff.ru, задержка, оптимизация, производительность, пропускная способность, Системы обмена сообщениямиСоздаем микросервисную архитектуру вместе с Apache Kafka и .NET Core 2.0
2017-08-21 в 10:55, admin, рубрики: .net, .net core, apache kafka, C#, Микросервисная архитектура
Доброго времени суток! Apache Kafka – очень быстрый распределенный брокер сообщений, и сегодня я расскажу как его “готовить” и реализовать с его помощью простую микросервисную архитектуру из консольных приложений. Итак, всем, кто хочет познакомиться с Apache Kafka и опробовать ее в деле, добро пожаловать под кат.Читать полностью »
Интеграция Apache CloudStack со сторонними системами. Подписка на события с помощью Apache Kafka
2017-07-23 в 10:02, admin, рубрики: ampq, apache cloudstack, apache kafka, devops, integration, виртуализация, интеграция, Облачные вычисления, разработка, Серверное администрирование, системное администрирование
В данной статье рассматривается подход к интеграции Apache CloudStack (ACS) со сторонними системами посредством экспорта событий в брокер очередей сообщений Apache Kafka.
В современном мире полноценное оказание услуг без интеграции продуктов практически невозможно. В случае сетевых и облачных сервисов, важной является интеграция с биллинговыми системами, системами мониторинга доступности, службами клиентского сервиса и прочими инфраструктурыми и бизнес-ориентирванными компонентами.Читать полностью »
Семантика exactly-once в Apache Kafka
2017-07-14 в 10:25, admin, рубрики: apache kafka, Блог компании Badoo, высокая производительность, Программирование, Разработка систем передачи данных, Системы обмена сообщениями
Всем привет! Меня зовут Юрий Лилеков, я работаю в Server Team Badoo. На днях мне попалась довольно интересная статья о новой семантике exactly-once в Apache Kafka, которую я с радостью для вас перевёл.
Рекомендации на потоке
2016-02-05 в 12:43, admin, рубрики: Aerospike, apache kafka, apache spark streaming, big data, python, recommender system, stream processing, Алгоритмы, Блог компании E-ContentaВсем привет!
Сегодня мы расскажем о том, как с помощью потоковой обработки данных можно увеличить качество рекомендаций и снизить время отклика всей рекомендательной системы в 5 раз. Речь пойдет об одном из наших клиентов – сервисе потокового видео Rutube.
I am Groot. Делаем свою аналитику на событиях
2014-10-29 в 9:33, admin, рубрики: apache kafka, apache storm, big-data-bullshit, аналитика, Блог компании онлайн-кинотеатр ivi.ru, высокая производительность, разработка 
Весной этого года я узнал о возможности базы данных HP Vertica создавать запросы с матчингом паттернов событий. Так называемый Events Pattern Matching хорошо ложился под задачу анализировать поведение пользователей в продуктах ivi.ru. Мы решили попробовать разобраться с воронками оплаты, с поиском проблемных мест на устройствах, глубже погрузиться в анализ трафика. Нашей команде очень нравится, как реализована аналитика у Mixpanel и Localytics (она как раз основана на событиях и их свойствах), поэтому многие идеи были позаимствованы у них.
Читать полностью »