Айвен спонсировал этот пост.
Apache Kafka — одно из наиболее часто используемых приложений потоковой обработки. Высокая производительность, низкая задержка и лицензия с открытым исходным кодом — это лишь некоторые из причин, по которым 80% предприятий из списка Fortune 100 используют Kafka для поддержки приложений, управляемых событиями, и обеспечения отказоустойчивых конвейеров данных.
Но когда вы начинаете работать с огромными объемами высокоскоростных данных, вы быстро сталкиваетесь с проблемами стоимости, эксплуатации и сложности. Для облачных предприятий высокие затраты на репликацию при запуске Kafka в нескольких зонах доступности облака являются очень серьезной проблемой.
Недавно сообщество Kafka предложило три предложения по улучшению Kafka, разработанных специально для решения этой проблемы. Один из них, KP-1150 Diskless Topics, «предлагает новый класс тем в Apache Kafka, который делегирует репликацию объектному хранилищу», — написал в своем блоге Филип Йонов, руководитель потоковых сервисов компании Aiven, разработавшей KP-1150.
«Вместо того, чтобы полностью исключать диски, Diskless абстрагирует их, используя объектное хранилище (например, S3), чтобы снизить затраты и повысить гибкость», — сказал Йонов.
Как улучшить архитектуру Kafka
Если масштабная работа Kafka вызывает у вас головную боль, присоединяйтесь к нам 20 ноября в 8 утра по тихоокеанскому времени | В 11:00 по восточному времени состоится специальное онлайн-мероприятие: Kafka в масштабе: более умные архитектуры для повышения эффективности бизнеса в реальном времени.
Во время этого бесплатного вебинара Грег Харрис, инженер программного обеспечения с открытым исходным кодом в Aiven (и ведущий автор KP-1150), Дэвид Эспозито, архитектор потоковой передачи в Aiven, и Крис Пирилло, ведущий TNS, изучат, как ведущие компании адаптируют свою архитектуру Kafka для управления большими и быстрыми потоками данных и обеспечения реального влияния на бизнес сегодня.
Помимо обсуждения подводных камней, которых следует избегать при масштабировании Kafka в облаке, они также поделятся эксклюзивным кратким обзором Diskless Topics для Apache Kafka — прорыва, который удаляет локальные диски, делая Kafka на 80 % экономичнее, значительно снижая совокупную стоимость владения (TCO), одновременно упрощая операции и открывая новые способы масштабирования в облаке.
Зарегистрируйтесь на этот бесплатный вебинар сегодня!
Если вы не можете присоединиться к нам в прямом эфире, все равно зарегистрируйтесь, и мы вышлем вам запись после вебинара.
Что вы узнаете
Посетив это специальное онлайн-мероприятие, вы получите передовой опыт, примеры из реальной жизни и практические советы, в том числе:
- Роль Kafka в обеспечении роста, гибкости и качества обслуживания клиентов цифрового бизнеса.
- Распространенные проблемы при запуске Kafka в облаке, включая стоимость, ребалансировку и репликацию между зонами доступности.
- Как измерить влияние потоковой передачи в реальном времени на бизнес.
- Введение в бездисковые темы (KIP-1150) и что это значит для будущего Kafka.
- Реальные варианты использования: объединение бездисковых и классических тем в одном кластере.
Зарегистрируйтесь на этот бесплатный вебинар сегодня! Aiven упрощает настройку облачных баз данных. Наши решения по принципу «установил и забыл» избавляют от проблем с инфраструктурой облачных данных. Создайте полнофункциональную и управляемую инфраструктуру данных менее чем за 10 минут, используя все необходимые поставщики облачных услуг и инструменты в одном месте. Узнайте больше Последние новости от Айвен ТЕНДЕНЦИОННЫЕ ИСТОРИИ YOUTUBE.COM/THENEWSTACK Технологии развиваются быстро, не пропустите ни одной серии. Подпишитесь на наш канал YouTube, чтобы смотреть все наши подкасты, интервью, демонстрации и многое другое. ПОДПИСАТЬСЯ Группа, созданная в Sketch. Будучи старшим редактором-спонсором The New Stack, Вики сотрудничает с нашими спонсорами, чтобы создавать и публиковать исключительный контент, который находит отклик у наших читателей. У нее многолетний опыт (больше, чем она хотела бы признать) в сфере технологических публикаций… Подробнее от Вики Уокер