搜索结果
查询Tags标签： kafka，共有 918条记录-
面试官：Kafka索引设计有什么亮点？
前言 其实这篇文章只是从Kafka索引入手，来讲述算法在工程上基于场景的灵活运用。单单是因为看源码的时候有感而写之。 索引的重要性 索引对于我们来说并不陌生，每一本书籍的目录就是索引在现实生活中的应用。通过寥寥几页纸就得以让我等快速查找需要的内容。冗余了几页纸…
2020/7/3 17:27:21 人评论 次浏览 -
Kafka面试：基础27问，应该都会?
❝ 消息队列也叫 MQ(Message Queue)。Kafka作为消息队列中的优秀平台，被很多公司使用，是一种高吞吐量的分布式发布订阅消息系统，本篇给大家总结了27道Kafka知识点或者说面试题，持续更新中。。。 ❞ 1.什么是kafka? Apache Kafka是由Apache开发的一种发布订阅消息系统…
2020/6/15 17:27:05 人评论 次浏览 -
Kafka集群和CMAK部署整理文档
1.环境说明 JDK 1.8 + 【不要安装OpenJdk】 kafka 2.11-2.1.1 复制代码2. 源码安装 Kafka的安装包下载地址: https://archive.apache.org/dist/kafka/2.1.1/kafka_2.11-2.1.1.tgz 复制代码1.1、上传到服务器/data目录 # 解压 tar -zxvf kafka_2.11-2.1.…
2020/6/7 17:26:34 人评论 次浏览 -
大白话带你认识 Kafka
原文：juejin.im/post/5dcf6b6e51882510a23314f3 前言 应大部分的小伙伴的要求，在Yarn之前先来一个kafka的小插曲，轻松愉快。 一、Kafka基础 消息系统的作用 应该大部份小伙伴都清楚，用机油装箱举个例子所以消息系统就是如上图我们所说的仓库，能在中间过程作为缓存，并…
2020/5/22 14:26:35 人评论 次浏览 -
彻底搞懂 Kafka 消息大小相关参数设置的规则
前段时间接到用户要求，调整某个主题在 Kafka 集群消息大小为 4M。 根据 Kafka 消息大小规则设定，生产端自行将 max.request.size 调整为 4M 大小，Kafka 集群为该主题设置主题级别参数 max.message.bytes 的大小为 4M。 以上是针对 Kafka 2.2.x 版本的设置，需要注意的是…
2020/5/21 17:26:37 人评论 次浏览 -
深入浅出 Kafka 基本概念
1. Kafka 简介 1. 简介 Apache Kafka 是一个分布式的流处理平台。它具有以下特点：支持消息的发布和订阅，类似于 RabbtMQ、ActiveMQ 等消息队列 支持数据实时处理 能保证消息的可靠性投递 支持消息的持久化存储，并通过多副本分布式的存储方案来保证消息的容错 高吞吐率，…
2020/5/17 17:26:44 人评论 次浏览 -
Kafka的原理介绍及实践
kafka是近年来关注度飞速上升并得到越来越广泛应用的一个产品，本文将介绍一下它的实现原理以及在我们邮箱服务中的应用。1.1 Kafka – 官方定义根据官网的介绍，Kafka是一个提供统一的、高吞吐、低延迟的，用来处理实时数据的流式平台，它具备以下三特性：1、流式记录的发…
2020/5/12 17:26:33 人评论 次浏览 -
一文读懂kafka集群规划和调优
前言: 通常对于初创企业或者初创业务团队来说，对于开源组件的使用都会显的比较随意，而这种情况会随着业务量级的增长和时间的推移导致开源服务的滥用和乱用，进而造成的结果就是整体业务的稳定性和可靠性相对较差，而此时，扩容的行为是边际效应递减的，如果此时不对整体…
2020/5/3 17:25:39 人评论 次浏览 -
Kafka再次学习
其他更多java基础文章： java基础学习(目录)学习资料： Kafka的HW，LEO更新原理及运行流程总结 你一定能get到的Producer的初始化及元数据获取流程 可能是你看过最详细的RecordAccumulator解读 kafka数据可靠性深度解读距离上次学习Kafka（Kafka——基础知识）已经有一段时…
2020/5/2 17:02:46 人评论 次浏览 -
3台廉价机器每秒写入2百万！Kafka为什么那么快？
作者：邴越，简介：阿里资深工程师，关注分布式系统及高可用架构，方法论与认知升级，实践持续学习。出处：www.cnblogs.com/binyue/p/10308754.html 30秒简单回顾下kafka 让我们快速回顾一下Kafka的内容以及有关它的工作原理的一些细节。 Kafka是一种分布式消息系统，最初…
2020/4/30 14:02:50 人评论 次浏览 -
Filebeat + Kafka + Elasticsearch + Kibana 实现日志收集与管理
技术博客：github.com/yongxinz/te… 同时，也欢迎关注我的微信公众号 AlwaysBeta，更多精彩内容等你来。上篇文章介绍了 如何在 Django 中优雅的记录日志，这篇来谈谈怎么管理以及查看日志。 说到查看日志，这么简单的事情还值得写篇文章吗？文件已经有了，直接 vim 打开…
2020/4/29 17:02:37 人评论 次浏览 -
一张图理解Kafka时间轮(TimingWheel),看不懂算我输!
2020/3/31 17:02:38 人评论 次浏览 -
从源码和日志文件结构中分析 Kafka 重启失败事件
2020/3/18 17:24:02 人评论 次浏览 -
面试官问我如何保证Kafka不丢失消息?我哭了！
2020/3/16 17:31:13 人评论 次浏览 -
记一次 Kafka 重启失败问题排查
2020/3/16 17:01:50 人评论 次浏览
