假设Hadoop的安装目录HADOOP_HOME为/home/admin/hadoop。启动与关闭启动HADOOP1. 进入HADOOP_HOME目录。2. 执行sh bin/start-all.sh关闭HADOOP1. 进入HADOOP_HOME目录。2. 执行sh bin/stop-all.sh文件操作Hadoop使用的是HDFS
转载
2023-05-22 17:38:32
37阅读
p01 课程整体介绍p02 大数据的概念p03大数据的特点p04 05 大数据应用场景p06 未来工作内容p07hadoop入门 课程介绍p08 09 hadoop是什么p 10 hadoop3大发行版本p11 hadoop优势p12 hadoop 1 2 3版本区别p13 HDFS概述NameNode DataNode SecondNameNodep14 Hadoop入门 YARN概述Resou
转载
2023-09-22 13:31:31
85阅读
一 慕课网1.Hadoop大数据平台架构与实践--基础篇(已学习)链接:https://www.imooc.com/lea
原创
2023-05-06 22:38:23
110阅读
# Java Hadoop 视频教程实现流程
## 概述
在本文中，我将向你介绍如何使用Java和Hadoop来实现一个视频教程系统。我们将使用Hadoop的分布式文件系统（HDFS）和MapReduce编程模型来处理视频数据。
## 实现流程
下面是实现这个视频教程系统的流程图：
```flow
st=>start: 开始
op1=>operation: 上传视频文件到HDFS
op2=>
原创
2023-08-08 03:38:50
123阅读
着重介绍了HDFS运行了示例程序wordcount，自己也试了一遍（用的伪分布式）1.建立数据（和讲师的操作有些不一样，不过我相信自己）2.运行wordcount程序3.查看结果（可以看出来，只要没空格，它都看作是一个单词） 接下来介绍了50030和50070查看任务和HDFS状态......其中如果想看日志的话除了命令行也可以直接输入http://localhost:50070/log
转载
2023-09-22 13:24:22
63阅读
安装centos，配置stable ip address，文件系统，根目录用户密码，hostname，安装相关工具打开centos，创建hadoop用户，密码。配置eth0，onboot=YES， 重启网卡。关闭iptables，selinux，安装vsftpd安装辅助工具：flashfxp，secureCRT。vsftp上传 JDK 和 Hadoop。安装JDK，检测。配置SSH,实现maste
转载
2023-05-23 17:30:59
123阅读
hadoop入门(一)
一、概述
1.什么是hadoop
hadoop不仅是一个用于存储分布式文件系统,还是设计用来在有通用计算设备组成的大型集群上执行的分布式应用的基础框架。
hadoop框架最核心的设计是mapreduce和HDFS
1.2为什么要选择hadoop
转载
2023-09-22 12:49:20
53阅读
近一年来一直都在学习Hadoop，初接触时感觉是个全新的领域，后期随着学习的深入，本质上觉得就是那些Java大神写出来的一个分布式计算框架，终究还是Java的综合应用和架构的综合设计，除了Java语言的要求非常之高，还得有这种分布式处理的思想。Doug Cutting实在令我等膜拜。好了不说废话了，下面分享一些Hadoop及Java视频学习资料。1.Hadoop视频百度云链接：http://pan
转载
2023-07-25 20:58:29
94阅读
参考资源下载：http://pan.baidu.com/s/1ntwUij3视频安装教程：hadoop安装.flvVirtualBox虚拟机：hadoop.part1-part5.rarhadoop文件：hadoop-2.2.0.tar.gzhadoop配置文件：hadoop_conf.tar.gzhadoop学习教程：炼数成金-hadoop虚拟机下载安装：VirtualBox-4.3.12-93
转载
2023-09-12 11:15:38
64阅读
MapReduce的补充：完整的Map/Reduce的作业过程会把输入的数据分成很多独立的块，Map任务以完全独立的方式来处理他们，Map处理后的中间结果会被排序，然后分组进入到Reduce任务中，作业的输入输出都会放在文件系统中，Map/Reduce框架和HDFS运行在相同的节点，那么计算和存储操作都会在同一个节点上面进行。Master负责把任务指派给Slave，Slave只负责执行Maste
转载
2023-12-11 19:26:48
51阅读
今天开大数据原理的课了，特地去网上找了点视频教程 Hadoop入门视频
原创
2022-11-27 10:43:45
90阅读
配置VirtualBox 新建一个虚拟机 ps：步骤可参照我之前博客一、安装准备jdk-8u221-linux-x64.tarhadoop-2.6.0-cdh5.14.2.tar.gz ps:如何配置jdk可参照我之前的博客jdk安装配置这里就不一一赘述了话不多说我们直接开始 切换至software 文件目录： cd /software 将准备好的文件拖入software 目录下 将文件解压至 o
转载
2023-09-20 12:01:29
98阅读
课程内容：
01_尚学堂_肖斌_hadoop_hdfs1分布式文件系统01
02_尚学堂_肖斌_hadoop_hdfs1分布式文件系统02
转载
2021-08-05 14:56:46
279阅读
hadoop首先当然是hadoop，不过hadoop不是一门技术，而是一个大数据框架。它的logo是一只黄色的小象，据说是这个项目的创建者用女儿的玩具命名的。经过了很多年的发展，现在hadoop框架已经非常成熟，衍生出了一个庞大的家族。有多庞大呢，我在google里给大家找了一张图，大家可以看看感受一下，这里面有多少是自己知道的，有多少没听说过。当然对于算法工程师来说，hadoop家族并不需要全部
转载
2023-07-12 11:15:43
79阅读
1.环境变量配置2.ssh 免密配置在ssh文件夹下ssh-keygen -t rsassh-copy-id hadoop102cat ~/.ssh/id_dsa.pub >>~/.ssh/authorized_keyshdfs namenode -format2.配置集群配置workers hdoop/workerbut there is no HDFS_NA
转载
2024-03-12 21:37:48
42阅读
Springcloud 视频教程（精华版）目录精华版：极致简洁、不废话by 疯狂创客圈视频地址： 进入学习请点击[外链图片转存失败,源
--- JEECG开源项目视频教程 ---
Jeecg平台产品介绍 ： https://gitee.com/jeecg/jeecgJeecg技术文档下载 : http://t.cn/RnMBDngJeecg 本地Maven仓库 JEECG 新版教学视频
《JEECG-P3插件开发入门视频》＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊
原创
2021-07-27 14:15:18
1737阅读
一、声母g k h的教学把握以下几点（同步小学一年级语文教材拼音第5课g k h）1.正确理解和记忆拼音口诀。 分析：A.三个声母的教学：教学口诀，利用图片中实物的形联想字母的字形，同时图片里分别用“哥、蝌、喝”记住g k h的读音。9 是0-9十个数字中最大的，所以大家叫9是“哥哥”。视频课程里有动画书写，让孩子一看就明白，都无需多言。 2.
转载
2023-10-07 12:45:22
475阅读
vm和centos默认大家已经安装了本篇文章参照，尚硅谷Hadoop3x视频课程写的。（这里吐槽以下，关键代码老师一带而过，真的很烦。各种问题都是看弹幕解决的）建议操作的时候，看边看视频，边阅读这个文章，关键代码已经整理好放上去了目录网络配置一 windows 系统二 vmware三 进入vmware 打开终端辅助软件安装和连接下载x-shall和xftp连接VM
转载
2023-07-12 12:08:30
61阅读
1：什么是HDFS? HDFS适合做： 1.存储大文件。上G、T甚至P。 2.一次写入，多次读取。并且每次作业都要读取大部分的数据。 3.搭建在普通商业机群上就可以了。虽然会经常宕机，但HDFS有良好的容错机制。 HDFS不适合做： 1.实时数据获取。如果有这个需求可以用HBase。 2.很多小文件。因为namenode要存储HDFS的metadata（ 比如目录的树状结构，每个文件的文件名、AC
转载
2023-09-19 00:28:13
45阅读
