blackproof的博客_android,xml,sax原创(6)

kafka SocketServer类

SocketServer是kafka nio,包含一个accept线程，接受socket连接，并把连接（平均）放入processors中，多个processor线程接受nio的处理请求和相应processor请求只是将request放入requestchannel queue中（由KafkaRequestHandlerPool中handler完成）processor响应是在

kafka

SocketServer类

ci

Startup

原创 2023-04-21 01:04:09 64 阅读

kafka接口协议二详细

kafka没有直接将消息发给某个topic的partition，所以product必须发送partition的broker client可以从任意broker获得cluster metadata信息，获得paritition的leader broker，当leader broker处理数据有误时，有两种情况1.broker死了，2broker不在包含此partition；所以需...

kafka

接口协议

数据

bootstrap

原创 2023-04-21 01:04:04 93 阅读

python深浅复制，类型转换， json操作，数组操作

贝，深拷贝 python类型转换 1 函数描述 2 int(x [,base ]) 将x转换为一个整数 3 long(x [,base ]) 将x转换为一个

深浅复制

类型转换

json操作

数组操作

json

原创 2023-04-21 01:03:57 47 阅读

kafka 重新分配leader kafka-preferred-replica-election.sh

bin/kafka-preferred-replica-election.sh --zookeeper hostzk/kafka-real bin/kafka-preferred-replica-election.sh --zookeeper localhost:12913/kafka --path-to-json-file topicPartitionList.json top...

kafka

leader

json

zookeeper

原创 2023-04-21 01:03:49 151 阅读

storm Async loop died! & reconnect

storm 在有supervisor重启的时候，topology报错，导致所有spout不消费： 2015-07-15T09:48:26.470+0800 b.s.util [ERROR] Async loop die

storm

报错

jar

java

sed

原创 2023-04-21 01:03:45 112 阅读

hbase Number of empty REGIONINFO_QUALIFIER rows in hbase:meta: 1

机房断电 hbase产生漏洞，用http://blackproof.iteye.com/blog/2052898这个帖子，可以删除多余的meta上的region 在

hbase

zookeeper

mvc

bc

原创 2023-04-21 01:03:40 45 阅读

Java线上应用故障排查之一：高CPU占用

先确定pid：top找到最消耗cpu的进程15495 再确定tid：ps -mp 15495 -o THREAD,tid,time找到最占用cpu的进程18448 printf "%x\n" 184484810 打印堆栈jstack 15495 | grep 4810 -A 30 例如发现栈如下："regionserver60020-smallCompact

java

hadoop

apache

原创 2023-04-21 01:03:33 285 阅读

Java线上应用故障排查之二：高内存占用

搞Java开发的，经常会碰到下面两种异常：1、java.lang.OutOfMemoryError: PermGen space2、java.lang.OutOfMemoryError: Java heap space要详细解释这两种异常，需要简单重提下Java内存模型。Java内存模型是描述Java程序中各变量（实例域、静态域和数组元素）之间的关系，以及在实际计算机系统中将变量存储到内存和从内存

java 内存

Java

java

内存泄漏

原创 2023-04-21 01:02:57 290 阅读

hive sql优化

好), 这是由参数hive.auto.convert.join=true 和hive.smalltable.filesize=25000000L）参数控制（默认是25M），如果表文件大小在25M左右，可以

hive

ide

Hive

原创 2023-04-21 01:02:40 77 阅读

spark tachyon 搭建配置

mvn -Dhadoop.version=2.3.0 -DskipTests clean package

spark

tachyon

hadoop

hdfs

原创 2023-04-21 01:02:31 916 阅读

scala eclipse maven环境搭建

lns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache

scala

eclipse

maven

apache

hadoop

原创 2023-04-21 01:02:19 2987 阅读

kafka Reassign Partitions Tool

kafka 0.8增加了重新分配partition功能，进行扩容,增加减少replica，移动partitionkafka-reassign-partitions.sh脚本 O.

kafka

Reassign

json

zookeeper

原创 2023-04-21 01:01:24 105 阅读

scala 函数

println("1000") } def noRetrun2(x:Any) { println("no return") return x } 3 映射式定义从int到double def f:Int=>Double = { case 1 => 0.1 case 2 => 0.2 case _ => 0.0 }

scala

函数

函数参数

User

ci

原创 2023-04-21 01:01:13 12 阅读

to_char

to_char转换数字 to_char(3148.5,'9G999D999') '3 148,500' /* FM ：除空格 9999999.0099：允许小数点左边最大正数为7位，小数点右边最少2位，最多4位，且在第5位进行四舍五入 */&

oracle

to_char

四舍五入

数据

PLSQL

原创 2023-04-20 21:13:26 84 阅读

优化myeclipse

可以将一些不使用的模块禁止加载启动。通过Windows - Preferences打开配置窗口，依次选择左侧的General - Startup and Shutdown，这个时候在右侧就显示出了Eclipse启动时加载的模块，可以根据自己的实际情况去除一些模块。

优化myeclipse

eclipse

jar

配置文件

原创 2023-04-20 21:11:25 28 阅读

tomcat下的server.xml文件和context.xml

tomcat下的server.xml文件和context.xml <Server>元素它代表整个容器,是Tomcat实例的顶层元素.由org.apache.catalina.Server接口来定义.它包含一个<Service>元素.并且它不能做为任何元素的子元素.<Server port="8005" shutdown...

tomcat

server.xml

context.xml

服务器

默认值

原创 2023-04-20 17:56:01 301 阅读

ActiveMQ之Ajax调用

ActiveMQ之Ajax调用 ActiveMQ支持 Ajax ，这是应用在实时web应用中的一种异步的Javascript和Xml机制。这意味着你可以利用ActiveMQ的“发布/订阅”的天性，来创建高度实时的web应用。 Ajax允许一个常见的DHTML客户端（使用JavaScript和一个第5版及更高版本的现代浏览器）通过互联网收发信息。ActiveMQ对Ajax的支持

jms

activemq

客户端

服务器

javascript

原创 2023-04-20 17:54:44 106 阅读

Null component Catalina

pplication=none,J2EEServer=none java.lang.reflect.InvocationTargetException at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) at sun.reflect.

java

apache

Web

原创 2023-04-20 17:51:52 164 阅读

Window 端口冲突

Window 端口冲突的解决在Java 学习中Window操作系统下，类似ActiveMQ，Tomcat服务开启服务之后，服务在后台执行，经常遇到端口被占用该怎么办呢？可能多少童鞋都是进行修改端口或者重启相关的服务，但是重新启动之后，相关的端口仍然被占用。我们可能查找进程并kill进程。在window系统下：

端口

冲突

端口号

重启

后台执行

原创 2023-04-20 17:50:52 124 阅读

struts2 filter ActionContextCleanUp

action自己清除。为了使用WebWork,我们只需要在web.xml配置FilterDispatcher一个过滤器即可,阅读一下FilterDispatcher的JavaDoc和源码,我们可以看到它调用了

struts2 filter

ActionContextCleanUp

jsp页面

xml

自定义属性

原创 2023-04-20 17:50:27 53 阅读

Ant配置文件

roject A"> <description> 一段描述信息，没有实际作用。 </description> <!--property 元素相当于变量，存放一定的值，一旦给定以后不能改变，只能通过控制台命令行给初始值。

ant

配置

java

jar

Test

原创 2023-04-20 17:48:10 80 阅读

java CountDownLatch 实例

一个线程等待 CountDownLatch使用其await()等待其他线程完成（使用减值为0来判断是否完成）。是一个线程等待多个线程（1-N）的锁工具。以下为实例代码： package com.common;import java.util.concurrent.CountDownLatch;import java.util.concurrent.Exe...

java

CountDownLatch

实例

System

实例代码

原创 2023-04-20 17:47:05 56 阅读

java RandomAccess 遍历效率

RandomAccess 是判断集合是否支持快速随即访问，以下是个测试用例 JDK中推荐的是对List集合尽量要实现RandomAccess接口如果集合类是RandomAccess的实现，则尽量用for(int i = 0; i < size; i++) 来遍历而不要用Iterator迭...

java

RandomAccess

迭代

System

List

原创 2023-04-20 17:43:47 54 阅读

maven NoGoalSpecifiedException

ished at: Wed Apr 13 11:04:20 CST 2011[INFO] Final Memory: 1M/4M[INFO]E

maven

报错

apache

Memory

原创 2023-04-20 17:26:56 415 阅读

oracle 锁-悲观锁与乐观锁

总结于ocl编程艺术：经常发生的错误错误：更新丢失，旧数据更新了最新的数据。解决问题的方法：在Oracle中看好悲观锁（取决于oracle锁开销小，高并发），但在其他的数据库已Deprecated悲观锁：在用户有意执行更新等DML操作之前，就在行上加锁 for update nowait悲观锁的结果： &nb

oracle

锁

悲观锁

乐观锁

数据

原创 2023-04-20 17:26:33 315 阅读

java正则实例

java的正则很强大，谁用谁知道用到最多的还是ismatch,看看是否符合正则还可以用它替代字符串，过滤非法字符，截取字符串，分割字符串替代字符串：替代回车符号 Pattern ilSingle = Pattern.compile("\r|\n"); String message = "xxxxxx"; message = ilSingle.match

java

正则

字符串

List

分割字符串

原创 2023-04-20 17:25:06 42 阅读

数据仓库三

数据仓库数据导入：格式化获取传统数据库更新数据 1.时间戳 2.增量文件 3.日志文件 4.嵌入代码 5.前后映像时基变化数据必须附有时间元素 ---------------------------------- 数据模型 information system architecture 有三个层次：1.高层建模（ERD实体关系层）

数据仓库

数据

建模

原创 2023-04-20 17:24:39 43 阅读

hive local mr转

在hive中运行的sql有很多是比较小的sql,数据量小,计算量小.这些比较小的sql如果也采用分布式的方式来执行,那么是得不偿失的.因为sql真正执行的时间可能只有10秒,但是分布式任务的生成得其他过程的执行可能要1分钟.这样的小任务更适合采用lcoal mr的方式来执行.就是在本地来执行,通过把输入数据拉回客户端来执行.拿select 1 from dual来看下,两种执行方式的效率差距.分布

hive

local mr

sql

Hadoop

原创 2023-04-20 17:22:06 78 阅读

hive函数

/Hive/LanguageManual+UDF 1.内置运算符 1.1关系运算符运算符类型说明A = B所有原始类型如果A与B相等,返回TRUE,否则返回FALSEA

hive

函数

字符串

数组

运算符

原创 2023-04-20 17:10:10 61 阅读

hive row_number分组排序top

自从hive 0.11.0 开始，加入了类似orcle的分析函数，很强大，可以查询到分组排序top值使用方法跟oracle没有差别贴个

hive

rank

row_number

SQL

分析函数

原创 2023-04-20 17:09:57 96 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客