Hive:是一个构建在Hadoop 上的数据仓库框架,MapReduce (输入hive启动shell)metastore:是Hive元数据的集中存放地HBase:是一个在HDFS上开发的面向列的分布式nosql数据库(输入hbase shell启动shell)HBase 提供Avro,REST,T
转载
2016-04-12 20:13:00
93阅读
2评论
hadoop学习–（从hadoop框架讨论大数据生态）一、hadoop介绍hadoop是Apache基金会开发的分布式系统基础架构。主要解决海量数据的存储和海量数据分析计算。（传统工具存储不了海量数据，传统数据计算速度慢）。广义上来说。hadoop是指hadoop生态圈。二、hadoop的优势高可靠性 ：hadoop底层维护多个数据副本，一般备份3分数据。所以即使hadoop某个计算元素或者存储出
Hadoop基础学习
原创
2021-07-30 16:28:51
217阅读
HDFS
HDFS是Hadoop分布式文件系统（Hadoop Distributed File System）的缩写，为分布式计算存储提供了底层支持。采用Java语言开发，可以部署在多种普通的廉价机器上，以集群处理数量积达到大型主机处理性能。HDFS 架构原理
HDFS采用master/slave架构。一个HDFS集群包含一个单独的NameNode和多个DataNode。NameNode作为mas
原创
2023-12-20 15:39:16
64阅读
大数据学习---Hadoop的深入学习
原创
2022-02-21 17:11:35
119阅读
大数据学习---Hadoop的HBase的学习
原创
2022-02-21 17:07:03
235阅读
hadoop简要教程概述hadoop是apache软件基金会旗下的一个开源分布式计算平台。大数据的特点4v，volume（量大）、variety（种类多）、value（价值密度低）、velocity（处理速度快）云计算因大数据而存在，hadoop连接了大数据和云计算。国内外hadoop的应用现状 yahoo 总节点超过42000，单master节点有4500个节点。总集群量350pbfaceboo
转载
2024-02-22 23:04:09
63阅读
一、HDFS 使用基础 格式化配置HDFS文件系统，打开NameNode(HDFS服务器)，然后执行 hadoop namenode -format 格式化HDFS后，启动分布式文件系统, $ start-dfs.sh 找出文件列表中的目录，文件状态，可以传递一个目录或文件名作为参数: hadoop
转载
2023-11-15 14:47:02
50阅读
========================Apr.13th, 2012======================== 1. Why do we use Hadoop? 1)Stripped to its core, the tools of that Hadoop provides for building distributed systems - for data stora
原创
2012-04-14 00:01:24
784阅读
概述：Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。HDFS有高容错性的特点，并且设计用来部署在低廉的（low-cost）硬件上；而且它提供高吞吐量（high throu
转载
精选
2015-12-19 14:09:27
588阅读
Hadoop hadoop-1.2.1.tar.gz jdk-6u32-linux-x64.binUseradd -u 900 hadoopMv jdk1.6.0_32 /home/hadoopMv hadoop-1.2.1.tar.gz/home/hadoopChown hadoop.hadoop /home/hadoop -RSu -hadoopLn -s j
原创
2016-09-18 19:12:33
569阅读
# 学习Hadoop框架
Hadoop是一个由Apache基金会开发的开源框架，用于分布式存储和处理大规模数据集。它提供了一个可靠的、高性能的分布式计算环境，可以处理数千台服务器上的PB级数据。
## 为什么学习Hadoop框架
随着大数据时代的到来，越来越多的企业和组织需要处理海量的数据。Hadoop框架可以帮助我们有效地管理和分析这些数据，提取有价值的信息。学习Hadoop框架可以让我们
原创
2024-06-16 04:13:53
42阅读
# Hadoop学习路线
## 整体流程
| 步骤 | 描述 |
| -------- | -------- |
| 1 | 安装Hadoop |
| 2 | 学习Hadoop基础知识 |
| 3 | 开发Hadoop应用程序 |
| 4 | 调试和优化Hadoop应用程序 |
| 5 | 部署和运行Hadoop应用程序 |
## 步骤详解
### 步骤1：安装Hadoop
首先，你需要
原创
2023-12-20 06:36:01
68阅读
# Docker 学习Hadoop
Docker 是一种轻量级容器技术，可以帮助开发者更快速地构建、打包和部署应用程序。而Hadoop则是一个开源的分布式计算平台，用于存储和处理大规模数据。
在本文中，我们将介绍如何使用Docker学习Hadoop，并提供代码示例来帮助读者更好地理解。
## Docker安装与配置
首先需要安装Docker，我们可以在官方网站上找到适合自己操作系统的安装方
原创
2024-07-02 05:57:38
25阅读
最近在学习 hadoop , 这是一个非常优秀的分布式框架 , 在学习的过程中也遇到了很多的问题 , 几度让人崩溃 , 我现在说说我遇到的问题 , 现在记录下来和以后方便翻阅 , 同时也希望给在刚刚学习hadoop的朋友们一点小小的帮助。 我在看了hadoop自己的WordCount De
原创
2014-09-06 20:42:31
513阅读
一、Hadoop入门，了解什么是Hadoop1、Hadoop产生背景2、Hadoop在大数据、云计算中的位置和关系3、国内外Hadoop应用案例介绍4、国内Hadoop的就业情况分析及课程大纲介绍5、分布式系统概述6、Hadoop生态圈以及各组成部分的简介7、Hadoop核心MapReduce例子说明二、分布式文件系统HDFS，是数据库管理员的基础课程1、分布式文件系统HDFS简介2、HDFS的系
转载
精选
2015-01-19 13:51:20
993阅读
编写Java代码对HDFS进行一系列操作，Hadoop实现RPC机制，远程调用的实现
原创
2021-07-30 16:28:26
146阅读
Hadoop基础学习 1. Hadoop简介 Hadoop是一个开源分布式计算平台，为用户提供系统底层细节透明的分布式基础架构。Hadoop是基于Java语言开发的，具有很好的跨平台性，平且可以部署到廉价的计算机集群当中去。Hadoop的核心是Hadoop分布式文件系统（HDFS）和MapReduc ...
转载
2021-08-02 21:19:00
195阅读
2评论
Hadoop 学习资料 | 网址 | 官方文档 | https://hadoop.apache.org/docs/r1.0.4/cn/index.html 版本文档索引 | http://hadoop.apache.org/docs/
转载
2019-10-27 17:02:00
345阅读
2评论
还在学校的时候，就知道Hadoop的存在了。2012年在公司实习的时候，买了
原创
2023-04-05 13:46:25
61阅读
