CDH安装完毕
CDH启动lzo压缩_CDH启动lzo压缩

2.添加parcel

CDH启动lzo压缩_CDH启动lzo压缩_02

CDH启动lzo压缩_CDH启动lzo压缩_03

CDH启动lzo压缩_CDH启动lzo压缩_04

CDH启动lzo压缩_CDH启动lzo压缩_05


CDH启动lzo压缩_CDH启动lzo压缩_06

CDH启动lzo压缩_CDH启动lzo压缩_07

CDH启动lzo压缩_CDH启动lzo压缩_08

CDH启动lzo压缩_CDH启动lzo压缩_09



HDFS配置

在HDFS配置项中搜索“压缩编码解码器”，加入com.hadoop.compression.lzo.LzopCodec

CDH启动lzo压缩_CDH启动lzo压缩_10

在Hive配置项中搜索“Hive 辅助 JAR 目录”，加入/opt/cloudera/parcels/GPLEXTRAS/lib/hadoop/lib

CDH启动lzo压缩_CDH启动lzo压缩_11

Sqoop 配置   sqoop-conf/sqoop-env.sh 的 Sqoop 1 Client 客户端高级配置代码段（安全阀）

HADOOP_CLASSPATH=$HADOOP_CLASSPATH:/opt/cloudera/parcels/GPLEXTRAS/lib/hadoop/lib/*

JAVA_LIBRARY_PATH=$JAVA_LIBRARY_PATH:/opt/cloudera/parcels/GPLEXTRAS/lib/hadoop/lib/native

CDH启动lzo压缩_CDH启动lzo压缩_12

yarn配置

在yarn配置项中搜索“yarn.nodemanager.resource.memory-mb”，修改成4G。

在yarn配置项中搜索“yarn.scheduler.maximum-allocation-mb”，修改成2G。