貌似非常多小伙伴都不能成功打包，共享下之前打包的文件：http://pan.baidu.com/s/1sjkE37J========kafka自己竟然没有还一个Web管理界面。。这里有个第三方的：https://github.com/claudemamo/kafka-web-console坑爹的是竟...
转载
2015-12-31 20:01:00
133阅读
2评论
kafka简介kafka是一个分布式消息发布和订阅系统，与zookeeper进行协调，多分区、多副本；特性是高吞吐、可持久化、可水平扩展、支持流数据处理，具备三大功能：消息系统：业务系统经常用到，常见解耦，还有削峰、异步通信、缓冲等功能。存储系统流式处理平台基本概念与原理Producer：生产者，发送消息的一方。Consumer：消费者，接收消息的一方。Broker：代理，kafka节点，一个节点
某些环境下无法连到服务器后台，可以使用浏览器控制台。先看一张图http://www.bryh.cn/a/233320.html相关命令dashboard：当前系统的实时数据面板getstatic：查看类的静态属性heapdump：dump java heap, 类似 jmap 命令的 heap dump 功能jvm：查看当前 JVM 的信息logger：查看和修改 loggermbean：查看 M
原创
2024-03-03 20:56:44
90阅读
1 Exactly Once 幂等性producer & 事务producer是保证Exactly Once的两种机制。2 幂等性producer2.1 什么是幂等性 幂等性producer 可以保证同一次会话同一分区的精确一次性。2.2 如何启用要启用幂等性，只需要对Producer的参数进行设置即可。props.put("enable.idempotence", true)或
prop
转载
2024-04-02 15:08:09
40阅读
众所周知，Kafka 0.11.0.0版本正式支持精确一次处理语义(exactly once semantics，下称EOS)。Kafka的EOS主要体现在3个方面：幂等producer：保证发送单个分区的消息只会发送一次，不会出现重复消息事务(transaction)：保证原子性地写入到多个分区，即写入到多个分区的消息要么全部成
转载
2024-05-09 15:41:09
75阅读
Producer 对应的脚本是 kafka-console-producer.sh，直接运行同样的会显示相关的参数参数描述–bootstrap-server <String: server to connect to>连接的Kafka broker 主机名称和端口–topic <String: topic>操作的topic名称–batch-size <Intege
转载
2024-03-27 12:08:50
28阅读
Producer幂等性在 Kafka 中，Producer 默认不是幂等性的，但我们可以创建幂等性 Producer。它其实是 0.11.0.0 版本引入的新功能。在此之前，Kafka 向分区发送数据时，可能会出现同一条消息被发送了多次，导致消息重复的情况。在 0.11 之后，指定 Producer 幂等性的方法很简单，仅需要设置一个参数即可，即 props.put(“enable.idempot
转载
2024-03-28 04:21:29
130阅读
1. 生产者原理这里分析的是Apache官方客户端代码，源码位于：https://github.com/apache/kafka/tree/trunk/clients从git clone 后 需要手动切换到对应分支。 1.1 生产者消费发送流程消息发送的整体流程如下：生产者主要由两个线程协调运行。这两条线程分别为main线程和sender线程（发送线程）我们可以看源码跟踪一下：从Producer
转载
2024-03-22 09:56:52
56阅读
Kafka是一款常用的开源消息系统，用于处理大规模数据流。在使用Kafka时，我们经常需要使用kafka-console-consumer.sh这个工具来消费Kafka中的消息。本文将向你介绍如何使用./kafka-console-consumer.sh来消费Kafka中的消息。
### 整体流程
首先，让我们看一下使用./kafka-console-consumer.sh消费Kafka消息的
原创
2024-04-25 11:11:43
248阅读
producer 生产消息consumer 消费消息consumer 消费消息 --from-beginning （生产消息时未启动）
原创
2022-01-19 15:26:17
77阅读
High Level Consumer很多时候，客户程序只是希望从Kafka读取数据，不太关心消息offset的处理。同时也希望提供一些语义，例如同一条消息只被某一个Consumer消费（单播）或被所有Consumer消费（广播）。因此，Kafka High Level Consumer提供了一个从Kafka消费数据的高层抽象，从而屏蔽掉其中的细节并提供丰富的语义。Consumer G
producer 生产消息consumer 消费消息consumer 消费消息 --from-beginning （生产消息时未启动）
原创
2021-07-06 09:55:45
290阅读
通过 已经对consumer有了一定的了解。producer比consumer要简单一些。一、旧版本producer0.9.0.0版本以前，是由scala编写的旧版本producer。入口类：kafka.producer.Producer代码示例：Properties properties = new Properties();
properties.put("metadata.b
转载
2024-04-17 12:48:30
173阅读
当忘记weblogic web console 密码后如何重新设置账户密码 1. Make sure all the services are down 2. change directory to <Middleware_Home>/user_projects\domains/bifoundation_domain/bin cd &
转载
精选
2015-02-04 23:38:51
609阅读
activeMQ有一个web管理端。启动方式:./bin/activemq关于jetty.xml、jetty-realm.properties、web、xmljetty.xml配置IP和port默认是8161.<beanid="jettyPort"class="org.apache.activemq.web.WebConsolePort"init-method="start"><
原创
2018-06-13 15:20:54
10000+阅读
Web Console是arthas提供的web页面，它可以让用户在自己的电脑上，连接远程服务器的arthas执行命令，命令的执行
原创
2022-09-20 21:12:58
2516阅读
Kafka consumerconsumer概览消费者组消费者组定义：消费者使用一个消费者组名（即group.id）来标记自己，topic的每条消息都只会被发送到每个订阅它的消费者组的一个消费者实例上一个consumer group可能有若干个consumer实例对于同一个group而言，topic的每条消息只能被发送到group下的一个consumer实例上topic消息可以被发送到多个grou
转载
2024-03-01 14:16:04
40阅读
作者：jiangzz 概述Kafka是Apache软件基金会的开源的流处理平台，该平台提供了消息的订阅与发布，能够基于Kafka实现对网络日志流实时在线处理，在这个维度上弥补了Hadoop的离线分析系统的不足。因为基于hadoop的MapReduce系统分析离线数据延迟较高，而且不支持动态数据处理和分析。Kafka的流处理平台不仅仅可以为离线系统储备数据（通常使用Kafka作为数据缓冲），而且Ka
转载
2024-06-04 23:05:43
148阅读
问题导读：1.什么是flume？2.如何安装flume？ 3.flume的配置文件与其它软件有什么不同？ 一、认识flume1.flume是什么？这里简单介绍一下，它是Cloudera的一个产品2.flume是干什么的？收集日志的3.flume如何搜集日志？我们把flume比作情报人员（1）搜集信息（2）获取记忆信息（3）传递报告间谍信息flume是怎么完成上面三件事情的，三个组件：source：
JBoss安装成功后，一般可以通过http://localhost:port来访问.Jmx Console和Jboss Web Console 里面可以修改和删除应用的参数，如果不加强安全设置，将会带来严重安全后果。
默认登录jmx-console的账号信息是：admin/admin，因此我们应该修改这个账号信息。
一、JMX安全配置
1： 找到%JBOSS_HOME%/serv
转载
精选
2010-11-19 11:54:48
2220阅读
