du(disk usage),顾名思义,查看目录/文件占用空间大小#查看当前目录下的所有目录以及子目录的大小$ du -h$ du -ah#-h:用K、M、G的人性化形式显示#-a:显示目录和文件du -h tmpdu -ah tmp#只查看当前目录下的tmp目录(包含子目录)的大小#查看当前目录及其指定深度目录的大小du -h –-max-depth=0#-–max-depth＝n:只深入到第n
## Hadoop 同步 AFS 数据
在大数据领域，Hadoop 是一个非常流行的分布式计算框架，但在实际应用中，有时需要将数据从其他存储系统同步到 Hadoop 中进行处理。其中，将数据从 AFS（Andrew File System）同步到 Hadoop 是一个常见的需求。本文将介绍如何实现 Hadoop 同步 AFS 数据的过程，并提供相应的代码示例。
### AFS 简介
AFS
# Hadoop 登陆 AFS 教程
## 1. 简介
在本教程中，我将教你如何使用 Hadoop 登陆 AFS。Hadoop 是一个开源的分布式计算框架，而 AFS (Andrew File System) 是一个分布式文件系统。通过将这两者结合起来，我们可以在 Hadoop 上进行对 AFS 的操作。
## 2. 流程
下面的流程图展示了实现 "Hadoop 登陆 AFS" 的步骤：
`
# Hadoop查看AFS地址数据
## 简介
在大数据领域中，Hadoop是一个十分重要的工具，它提供了分布式存储和处理大规模数据的能力。AFS（Alicloud File Storage）是一种可扩展的文件存储服务，为用户提供了高可靠、高性能、高可扩展的文件存储和访问能力。本文将介绍如何使用Hadoop来查看AFS地址数据，并提供代码示例。
## 准备工作
在开始之前，我们需要完成以下
1、背景介绍Hadoop2.0.0之前，在一个HDFS集群中，NameNode存在单节点故障（SPOF）：因为集群中只有一个NameNode，所以在使用过程中，如果该NameNode出现故障或数据丢失，那么整个集群将瘫痪，故障NameNode节点故障无法恢复，将导致整个集群不能恢复，这也是Hadoop2.0.0之前版本不可靠的表现。为了解决hadoop2.0.0之前的单点问题，在hadoop2通过
转载
2023-08-02 20:10:17
62阅读
标准的 Docker 容器卷一般是位于 Docker 主机上的一个本地目录。在这样的配置下，容器必须依赖于一台特定的主机，因此使得容器的迁移和扩展变得困难。通过使用容器卷插件，能让容器访问独立于主机的存储，使得迁移或者共享变得简单。Docker Volume Plugin for Azure File Storage 是 Microsoft 提供的容器共享存储解决方案。使用该插件，通过 SMB3.
转载
2017-10-19 17:15:00
94阅读
2评论
实验3服务启动控制 实验环境在虚拟机Linux系统下 实验目标 检查系统里有多少个独立系统多少个临时服务 &
原创
2014-08-23 22:28:57
334阅读
文章目录概述HDFS背景HDSF定义HDFS优缺点优点缺点组成架构NameNodeDataNodeClientSecondary NameNodeHDFS文件块大小（面试重点） 概述HDFS背景随着数据量越来越大，在一个操作系统存不下所有的数据，那么就分配到更多的操作系统管理的磁盘中，但是不方便维护，迫切需要一种系统来管理多台机器上的文件，这就是分布式管理系统，HDFS只是分布式管理系统中的一种
转载
2023-10-14 09:46:43
51阅读
1.1. 安装JDK直接执行下列语句即可：apt install openjdk-8-jre-headless1.2. 验证安装java -version软件测试工程师一只，也在不断的学习阶段，平时的小经验不定期分享。博主经验有限，若有不足，欢迎交流，共同改进~有意可加Q群 908417285 交流学习。乾坤未定，你我皆是黑马
原创
2022-02-06 15:06:05
61阅读
1.1. 安装JDK直接执行下列语句即可：apt install openjdk-8-jre-headless1.2. 验证安装java -version软件测试工程师一只，也在不断的学习阶段，平时的小经验不定期分享。
原创
2021-09-16 16:03:02
141阅读
简介NASNAS 指 Network Area Storage，它一般是将本地的存储空间共享给其他主机使用，一般通过 C/S 架构实现通信。它实现的是文件级别的共享，计算机通常将共享的设别识别为一个文件系统，其文件服务器会管理锁以实现并发访问。常见的 NAS 有 NFS 和 CIFS。
NFS
NFS是Network File System 的缩写, 即 网络文件系统.
# Linux重启Python3服务教程
作为一名经验丰富的开发者，我将教给你如何在Linux系统下重启Python3服务。下面是整个流程的步骤：
| 步骤 | 描述 |
| --- | --- |
| 步骤1 | 进入服务器 |
| 步骤2 | 杀死Python3进程 |
| 步骤3 | 重新启动Python3服务 |
## 步骤1：进入服务器
首先，你需要通过SSH或其他远程连接方式进
原创
2023-09-05 10:43:28
223阅读
Samba概述
Samba是一组软件包,使LINUX支持SMB协议,这个协议是在TCP/IP上实现的,它是Windows和Linux之间实现文件和共享的基础.
Samba的工作原理：
Samba服务器在Linux系统之上实现SMB/CIFS协议，即可以在Linux系统中为Windows主机提供网络文件共享服务；samba服务器中包括以下两个服务程序。Smbd服务程序和nmbd服务程
原创
2010-01-11 18:35:47
769阅读
linux下ftp服务阶段实验（3）
3. （1）匿名用户的FTP根目录是/ftp，只能下载，下载速度为100Kbps
（2）本地用户hello的FTP根目录为/hello，可以上传下载，家目录被锁定，下载速度为200Kbps
（3）管理员root的FTP根目录为/admin，可以上传下载，家目录不被锁定，下载速度不限制
​注意以上用户的本地宿主目录不要修改
1.修改vsftpd主配置文件；2.为不同的用户建立独立的配置文件；3.创建用户ftp根目录并创建一些标识性文件；
4.添加hello用户并重启vsftpd服务；5.验证用户登录
原创
2013-08-01 22:26:34
1727阅读
点赞
Linux网络服务之DNS（3）实验要求：实验一 实现分离解析：主机192.168.10.20解析www.zhy.com 结果为192.168.1.100主机192.168.10.21解析www.zhy.com 结果为192.168.1.101其他主机解析www.zhy.com 结果为192.168.1.102实验步骤：1、安装软件包略……2、修改配置文件[root@localhost etc]#
原创
2014-05-03 19:12:53
2095阅读
linux Maven+nexus3服务的搭建
原创
2017-07-13 10:58:04
2559阅读
Maven下载包：http://maven.apache.org/download.cgiwgethttp://apache.fayea.com/maven/maven-3/3.5.0/binaries/apache-maven-3.5.0-bin.tar.gztarxfapache-maven-3.5.0-bin.tar.gzmvapache-maven-3.5.0/usr/local/mave
原创
2018-03-16 09:06:38
1655阅读
点赞
1评论
3A服务器Linux系统安装FTP服务Linux系统1.安装ftp服务命令行输入yum install -y vsftpd安装完成后启动FTP服务：service vsftpd startchkconfig --level vsftpd chkconfig --level 2345 vsftpd on2.配置权限（1）匿名用户登录 匿名用户登录的登录名：ftp（anonymous） 密码空 登录的
原创
2022-08-22 22:49:07
200阅读
Linux下默认系统自带python2.6的版本，这个版本被系统很多程序所依赖，所以不建议删除，如果使用最新的Python3那么我们知道编译安装源码包和系统默认包之间是没有任何影响的，所以可以安装python3和python2共存 首先去python官网下载python3的源码包，网址：https://www.python.org/ 进去之后点击导航栏的Downloads，也可以鼠标放到Dow
原创
2022-11-20 00:46:09
106阅读
本文档介绍如何使用Sqoop工具实现文件存储HDFS和关系型数据库MySQL之间的双向数据迁移。背景信息 Sqoop是一款开源的工具，主要用于在Hadoop和结构化数据存储(如关系数据库)之间高效传输批量数据 。既可以将一个关系型数据库(MySQL 、Oracle 、Postgres等)中的数据导入HDFS中，也可以将HDFS的数据导入到关系型数据库中。 准备工作 现在Sqoop分为Sqoop1和
