11-Hadoop MapReduce 原理 切片的概念和大小
如果这个MR程序是在本地去测试,那么默认块大小是32M,因为在本地Windows上去运行主要是用来测试,没必要用128MB
在集群上去运行是默认128MB
真正切文件的时候是按照32MB去切的,但是,我们判断是否还需要再去切的时候,是除以32是否大于1.1
11-Hadoop MapReduce 原理 切片的概念和大小
如果这个MR程序是在本地去测试,那么默认块大小是32M,因为在本地Windows上去运行主要是用来测试,没必要用128MB
在集群上去运行是默认128MB
真正切文件的时候是按照32MB去切的,但是,我们判断是否还需要再去切的时候,是除以32是否大于1.1
举报文章
请选择举报类型
补充说明
0/200
上传截图
格式支持JPEG/PNG/JPG,图片不超过1.9M