#!/bin/bash # 设置Hadoop环境 unset YARN_OPTS export HADOOP_OPTS="-Djava.net.preferIPv4Stack=true" HADOOP_USER="hdfs" HADOOP_HOME="/opt/cloudera/parcels/CDH/lib/" OUTPUT_FILE="/var/lib/hadoop-hdfs/back/ou
总数据量:2PB=2000TB 35台datanode(26台+9台扩容) 2000/35=58TB(平均到每台datanode) 26台近70TB的数据量(迁移前26台的数据总量) 26*70=1820TB 均衡后的26台的平均数据量 26*58=1508(26台均衡后的总量) 26台的数据差量: 1820TB-1508TB=312TB 每天移动8TB,共多少天能完成 312/8TB=3
Copyright © 2005-2025 51CTO.COM 版权所有 京ICP证060544号