本文章为书籍《深入理解Kafka》的读书笔记，不负任何版权责任。Kafka特征：系统解耦，流量削峰，冗余存储，持久化到磁盘，提供消息顺序性保障及回溯。目录：架构生产者消费者日志存储问题讨论名词：Producer：生产者，发送消息Consumer：消费者，接收消息，进行业务逻辑处理Zookeeper：树状2f+1集群保存metadataBroker：服务代理节点，将消息持久化到磁盘
深入理解Kafka设计原则一、简介1.1 Kafka的背景与演变1.2 Kafka的组成结构1.3 Kafka的优势和适用场景二、Kafka架构设计2.1 Kafka Broker2.1.1 Broker角色与特性2.1.2 Broker之间的数据同步机制2.2 Kafka消息存储模型2.2.1 分区Partition和偏移量Offset2.2.2 日志Log和索引Index2.3 Kafka消
最近开研究kafka，下面分享一下kafka的设计原理。kafka的设计初衷是希望作为一个统一的信息收集平台,能够实时的收集反馈信息,并需要能够支撑较大的数据量,且具备良好的容错能力. 1、持久性 kafka使用文件存储消息,这就直接决定kafka在性能上严重依赖文件系统的本身特性.且无论任何OS下,对文件系统本身的优化几乎没
原创
精选
2015-03-31 10:17:14
616阅读
点赞
在我们的项目中，尤其是我们的web项目，无论你是用何种语言编写，java、C#.....JavaScript这种前台页面的脚本语言都占居着举足轻重的地位，下面带大家深入走进JavaScript，探索其中的奥秘，一起学习，共同进步！！ 1、 要深入理解JavaScript，你得首先放下对象和类的概念，回到
1. 简介 SELinux带给Linux的主要价值是：提供了一个灵活的，可配置的MAC机制。 Security-Enhanced Linux (SELinux)
【冬察冬见】FFmpeg系列学习笔记综述FFmpeg是领先的多媒体框架， 能够解码、 编码、 转码、 混流、 解密、 流媒体、 过滤和播放人类和机器创造的几乎任何东西。FFmpeg的名称来自MPEG视频编码标准，前面的“FF”代表“Fast Forward”，FFmpeg是一套可以用来记录、转换数字音频、视频，并能将其转化为流的开源计算机程序。可以轻易地实现多种视频格式之间的相互转换。FFmpeg
Kafka 扮演的3个重要的角色 消息中间件 系统解耦：上游系统A成功后，需要发送消息到下游BCD；需要嵌入BCD的接口； 解耦A系统成功后就直接把消息放到KafKa中； BCD系统再去Kafka中去拿 削峰填谷： 系统在某些时段，请求量暴增几十倍，可以添加服务器，平时请求很少，增加了就没有发挥真正 ...
转载
2021-10-27 21:49:00
78阅读
2评论
一、svg是什么？ SVG 意为可缩放矢量图（Scalable Vector Graphics）。 SVG 是使用XML来描述二维图型和绘图程序的语言 SVG 图像是放大或改变尺寸的情况下其图形质量不会有所损失。
MySQL入门姥姥家的程序员带你走进数据库的入门什么是数据库（数据库的概念，DB:DataBase）MySQL数据库的安装数据库定义语言（DDL）一、DDL之操作数据库二、DDL之操作表（下面操作中的[]，代表可选配置）三、DDL之操作字段数据操作语言（DML）：对数据进行操作。数据查询语言（DQL）一、简单查询二、条件查询 姥姥家的程序员带你走进数据库的入门此篇博客献给想入门计算机数据库的小白
目录1. 执行上下文（1）执行上下文概念（2）创建执行上下文2. this 指向（1）默认绑定（全局环境）（2）隐式绑定（上下
原创
2022-07-12 17:31:25
247阅读
Android：WebKit介绍WebKit是一个开源的浏览器网页排版引擎，包含WebCore排版引擎和JSCore引擎。WebCore和JSCore引擎来自于KDE项目的KHTML和KJS开源项目。Android平台的Web引擎框架采用了WebKit项目中的WebCore和JSCore部分，上层由Java语言封装，并且作为API提供给Android应用开发者，而底层使用WebKit核心库（Web
这一讲中，我们先来了解下什么是osgi，为什么使用osgi，osgi的开发工具有哪些等基本内容。1、什么是osgi ？OSGI的英文全称是 Open Service Gateway Initiative ，直接翻译是 开放式的服务网关协议 。OSGI强调的是服务的概念。OSGI是一个服务平台，为JAVA开发环境提供各种服务（根据自己的业务逻辑，对java web来说，可能有用户登录服务，用户验证服
Python 技巧就是指一小段可以作为教学工具的代码，一个Python 技巧要么简要介绍了Python 的一个知识点，要么作为一个启发性的示例，让你自行深入挖掘，从而在大脑中形成直观的理解。函数是Python 的头等对象，可以把函数分配给变量、存储在数据结构中、作为参数传递给其他函数，甚至作为其他函数的返回值。深入掌握这些概念不仅有助于理解Python 中像lambda 和装饰器这样的高级特性，而
转载
2023-07-14 11:56:17
125阅读
开源Android pdf 解析 AndroidNDK
androidlibraryjavagooglesun测试
(1) 前段时间项目涉及到pdf阅读，因此我开始找了些源码阅读比较，现在贴出各实现方案的对比。希望对大家有帮助。方便大家的阅读，我将自己认为最好的排在最前。 &nbs
转载
2023-09-13 22:23:14
117阅读
学着学着classloader，一不小心变了个道，到osgi的行车道上来了，呵呵。 首先，什么是OSGI？为什么会有这个东西，存在的意义和价值是什么？因“模块化”而生；其可将应用程序劈分为多个模块单元，这样就可以更容易地管理这些模块单元之间的交叉依赖关系，做个性化定制等；OSGI，可理解为容器/环境/框架/规范；例如，可以这么理解，一种服务运行平台。通过实现能够提供服务的符合OSGi规
转载
2023-09-16 01:02:36
104阅读
一本以情景方式对Android的源代码进行深入分析的书。内容广泛，以对Framework层的分析为主，兼顾Native层和Application层；分析深入，每一部分源代码的分析都力求透彻；针对性强，注重实际应用开发需求，书中所涵盖的知识点都是Android应用开发者和系统开发者需要重点掌握的。共10章，第1章介绍了阅读本书所需要做的准备工作，主要包括对Android系统架构和源码阅读
转载
2023-08-23 22:13:46
0阅读
查看书籍详细信息：
深入理解MySQL核心技术
编辑推荐
从公共可用性的意义上讲，MySQL源代码是开放源代码，但如果对其不了解，则实质上，它对于您来说是封闭的。MySQL开发团队的前成／员Sasha Pachev通过本书给出了MySQL 5的全面指南，揭示了这一强大数据库的内部运作。您将直奔MySQL核心技术，了解各种数据结构和各种方便的功能的运作情况，了解如何添加新的存储
转载
2023-07-29 18:34:49
130阅读
笔记：深入理解Linux内核（一） 文章目录笔记：深入理解Linux内核（一）第一章：绪论Linux与其他类Unix比较硬件依赖操作系统基本概念多用户系统用户和组进程内核体系结构Unix文件系统概述文件硬链接与软链接文件类型文件描述符和索引节点访问权限和文件模式文件操作的系统调用打开文件访问打开的文件关闭文件更名及删除文件Unix内核概述进程/内核模式进程实现可重入内核进程地址空间同步和临界区
本书这一部分的信息代表了你轻松理解本书其余部分所需的基本知识。如果您已经熟悉Linux内核，或者您是一位经验丰富的软件工程师，您将能够很快地浏览这些章节。对于其他读者，我建议在继续阅读本书的以下部分之前先熟悉一下这些材料：第一章引言本章的大部分内容致力于介绍一些常见的编程你经常会在代码中遇到模式和技巧。第2章关键数据结构在本章中，您可以找到两个最重要数据的详细描述网络代码使用的结构：套接字缓冲区s
转载
2023-08-15 16:11:14
121阅读
