hadoop 

---------------------

1、可靠、可伸缩、分布式的计算框架,开源软件


四大模块

1、common

hadoop0-common

2、hdfs

3、mapreduce

4、yarn


---------------------

完全分布式:

1、hdfs

NameNode

DataNode

secondaryNode

启动脚本:start-all.sh(start-dfs.sh)

2、Yarn

ResourceManager

NodeManager

启动脚本:start-all.sh(start-yarn.sh)

3、hadoop-deamons.sh

hdfs.sh

yarn.sh

----------------------------

修改blocksize大小,默认的是128m

[hdfs-site.xml]

dfs.blocksize=8m

测试put 文件 > 8m。通过webui查看大小


----------------------------------

配置客户机得出静态ip

要求ip网段 | 网关 | 子网关

1、查看网关

vmware虚拟机---> 编辑菜单 ----> 虚拟机网络编辑----> 打开窗口--->选中vmware虚拟网卡--->nat设置---->查看网关ip

2、查看可用的ip网段

vmware虚拟机--->编辑菜单--->虚拟机网络编辑器----->打开窗口--->选中vmware虚拟网卡---->DHCP设置----->查看网段

3、挑选一个可用的ip

4、配置ubuntu的静态ip:

iface eth0 inet static

address eth0 192.168.92.154

netmask 255.255.255.0

gateway 192.168.92.2

dns-nameservers 192.168.92.2

auto eth0


生效静态ip地址:sudo /etc/init.d/networking restart

-----------------------------------------------------


客户机关机命令

1、sudo poweroff

2、sudo shutdown -h o


----------------------

配置ubuntu文本启动模式

1、sudo nano /etc/default/grub

GRUB_CMDLINE_LINUX_DEFAULI="text" //改成文本模式

GRUB_TERMINAL=console //打开该注释

2、执行:sudo update-grub 

3、重启sudo reboot

4、startx ---->是重新让ubuntu回到桌面

5、