里冲的博客_JAVA,Spark,Linux原创

2121

21212

2121

原创 2018-01-22 17:53:12 603 阅读

32132

1321321

``11

原创 2018-01-22 17:52:48 491 阅读

324

32323232

232

原创 2017-12-11 20:28:41 576 阅读

我的友情链接

51CTO博客开发

原创 2017-11-22 23:11:53 197 阅读

1

其他

1

原创 2017-04-10 12:10:10 318 阅读

1

11

其他

1

原创 2017-04-07 14:20:10 353 阅读

11

其他

1

原创 2017-03-23 14:55:26 303 阅读

基于Netty的RPC框架

1

其他

1

原创 2017-02-17 23:44:28 614 阅读

Jetty内嵌式HttpServer

1

其他

jetty

原创 2017-02-17 23:44:01 856 阅读

Spark项目故障总结

1.OOM问题，reduce端的缓冲大小，太大的话，吃撑了，一下过来很多数据，容易OOM，默认48，可以改小哦。spark.reducer.maxSizeInFlight，48---》242.JVM-GC导致的shuffle文件拉取失败，shuffle file not foundspark.shuffle.io.maxRetries 3 第一个参数，意思就是说，shuffle文件拉取的时候，如果

spark

原创 2017-01-08 14:56:36 1844 阅读

IDEA源代码阅读环境搭建

下载源代码打开IntelliJ IDEA 后，在菜单栏中选择 VCS→Check out from Version Control→Git，之后在 Git Repository URL 中填入 Spark 项目的地址，并指定好本地路径，如下图所示：点击该窗口中的的 Clone 后，开始从 Github 中 clone 该项目，该过程试你网速而定，大概需要3-10分钟。当 c

spark 源码

原创 2017-01-04 12:40:56 652 阅读

寻找多数元素问题

问题：假如现在有一个序列，已知其中一个数的此书超过50%，请找出这个数。比如3、3、1、1、3、2、3中，出现次数超过50%的数是3 。方法1：两两比较，分别记录数字的出现次数，2个for循环就可以解决。时间复杂度O(N^2)。方法2：排序后，如果这个数出现的次数大于50%的话，排序之后就应该就是位于n/2位置的那个数。方法3：“寻找多元素问题”，我们很容易的看出来，在一个序列中如果去掉2个不同的

算法

原创 2016-12-31 20:56:38 924 阅读

Spark之二次排序

Ordered

1

原创 2016-12-31 00:45:48 552 阅读

Spark之自定义Accumulator使用

之前项目中用到了累加器，这里做个小结。

spark

原创 2016-12-30 13:36:41 737 阅读

Spark Stream 实时流初战

22

spark stream

原创 2016-12-24 20:13:13 348 阅读

人丑就要多读书之--书单整理

前言：针对网上搜罗的一些书籍，进行整理，持续更新哦。书单列表：JAVA《Java编程思想》《Effective JAVA》《JAVA并发编程实践》《Java解惑》操作系统《深入理解计算机系统》设计模式与软件架构《企业应用架构模式》《敏捷软件开发》《重构-改善既有代码的设计》《设计模式精解-GoF 23种设计模式解析》《面向模式的软件体系结构》技术冲浪《数学之美与浪潮之巅》《淘宝技术这十年》大数据相

书单

原创 2013-11-19 10:38:33 357 阅读

1

ws

ss

原创 2013-11-11 19:46:47 1456 阅读

git 常用命令及一些小技巧

1. 常用命令git init

git

原创 2013-04-08 01:07:41 363 阅读

严格就是大爱

严格

原创 2013-04-08 01:06:27 503 阅读

FFMPEG学习之一： Windows XP、Cygwin、NDKr8b编译Android下的ffmpeg(转)

今天，搞了半天，才搞定了 config.sh, 并成功滴 “./config.sh” ，主要参考：http://blog.csdn.net/xiaomao5200/article/details/7684700 http://my.oschina.net/wangqin/blog/80345

ffmpeg学习

原创 2013-04-04 00:13:13 2018 阅读

NDK问题之一： Javah 生成.h文件

作为学习NDK的第一步，总是困难丛丛啊。生成.h文件是，总是提示“类找不到”，或者“无法访问android.app.activity”，好伤心啊。痛定思痛，还是整理了一下思路，解决问题要紧。首先执行的是 javah +包名.类名，先确保“javah”是没问题的。我查了一下，我的javah是jdk1.6的，而Ecli

javah

原创 2013-04-02 23:35:27 2228 阅读

JVM之OOM与SOF

12

jvm

原创 2013-03-27 23:19:00 1006 阅读

读取大量图片导致的OOM问题

这短时间由于在改BUG，总是碰到OOM问题。特别关注了一下。也总结了一些OOM的处理方式：1.首先确保服务器来的图片大小合适。2.对图片进行压缩处理显示，具体用到BitmapFactory.Options 这个类，他可以提前向服务器请求，只得到图片的长宽，然后根据项目需要，自己设定size，在向服务器请求合适大小的图片。3.利用软引用来进行缓存。这个真心好用。具体就是用HashMap

bug

oom

原创 2013-03-26 22:50:12 792 阅读

数据结构学习(二)

2

数据结构

原创 2013-03-20 21:00:23 649 阅读

《JAVA 就业教程》一些摘录

1.可以在一个方法中使用 throw ，try-catch 语句来实现程序的跳转，如下代码 void fun() { try { if(...)

JAVA

原创 2013-02-15 21:59:23 499 阅读

数据结构学习（一）

数据结构与算法1. 链表与数组。2. 队列和栈，出栈与入栈。3. 链表的删除、插入、反向。4. 字符串操作。5. Hash表的hash函数，冲突解决方法有哪些。6. 各种排序：冒泡、选择、插入、希尔、归并、快排、堆排、桶排、基数的原理、平均时间复杂度、最坏时间复杂度、空间复杂度、是否稳定。7. 快排的partition函数与归并的Merge函数。8. 对冒泡与快排的改进。9. 二分查找，与变种二分

数据结构

原创 2013-01-26 15:06:19 714 阅读

MySQL Window免安装配置

环境windows 7 专业版安装包mysql-5.6.24-win32.zip步骤1.解压到某个目录，如C:\mysql\2.修改my-default.ini文件内容如下，并改名为my-ini#以下是修改内容，这行可不复制 [client] port=3306 default-character-set=utf8 #客户端字符类型，与服务端一致就行，建议utf8 [mysqld] port=33

mySQL

原创 2013-01-17 16:29:30 1083 阅读

几种常见的排序算法及JAVA实现（二）

2

算法

原创 2013-01-13 21:36:12 1168 阅读 1点赞 1评论

Java的四种引用，强弱软虚

软，内存不足时回收，内存缓存使用弱，强度比软还弱，只能活到下一个GC虚，唯一用途是在回收时会收到系统通知。NIO直接内存的自动回收就用到了这个。弱引用的作用在于解决强引用所带来的对象之间在存活时间上的耦合关系。弱引用最常见的用处是在集合类中，尤其在哈希表中。哈希表的接口允许使用任何Java对象作为键来使用。当一个键值对被放入到哈希表中之后，哈希表对象本身就有了对这些键和值对象的引用。如果这种引

Java

原创 2013-01-09 22:19:20 1674 阅读 1点赞 1评论

TCP/IP

1. OSI与TCP/IP各层的结构与功能，都有哪些协议。2. TCP与UDP的区别。3. TCP报文结构。4. TCP的三次握手与四次挥手过程，各个状态名称与含义，TIMEWAIT的作用。5. TCP拥塞控制。6. TCP滑动窗口与回退N针协议。7. Http的报文结构。8. Http的状态码含义。9. Http request的几种类型。10. Http1.1和Http1.0的区别11. Ht

TCP

原创 2013-01-09 20:37:40 374 阅读 1点赞

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

木子里冲