51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
信创认证
公众号矩阵
移动端
视频课 免费课 排行榜 短视频 直播课 软考学堂
全部课程 软考 信创认证 华为认证 厂商认证 IT技术 PMP项目管理 免费题库
在线学习
文章 资源 问答 课堂 专栏 直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
CKA（Kubernetes 管理员认证）精品班
按照企业k8s需求进行技能培训，帮助用户快速拿下CKA认证，K8S采用新版本进行授课，课程内容全、讲解详细 。 免费试学
软考高级：系统架构设计师精品班
根据考试大纲对知识点、高频考点进行深入讲解，传授答题技巧及判断标准，助力高效备考。 免费试学
信创认证：系统架构师精品班（高级）
信息技术应用创新人才考试评价 免费试学

学习大数据：Hadoop
学习大数据
Hadoop
原创
wx5eba708eae438
2020-08-24 20:50:26
429阅读
1点赞

Hadoop学习--(大数据)
Hadoop学习–(大数据)一、大数据概念：大数据是指在一定时间内无法用常规软件工具进行捕捉、管理和处理的数据集合。大数据主要是解决海量数据的存储和分析计算。二、大数据特点：大量高速（产生速度）多样：结构化数据：以二维表来逻辑表达和实现的数据。例如：文本文件、库表非结构化数据：没有固定的结构。视频、图片半结构化数据：存储的数据信息类似结构化，但本身以非结构化数据存储。 半结构化数据，属于同一类实体
数据
大数据
结构化
原创
CV大师超超
1月前
25阅读

大数据学习——hadoop安装
上传centOS6.7-hadoop-2.6.4.tar.gz 解压 tar -zxvf centOS6.7-hadoop-2.6.4.tar.gz hadoop相关修改配置 1 修改 /root/apps/hadoop/etc/hadoop  目录下的hadoop-env.sh vi hadoop-env.sh 中 export JAVA_HOME=${JAVA_HOME}修改为 export
hadoop
xml
java
hdfs
mapreduce
转载
mob604756fc3573
2018-12-23 19:10:00
120阅读
2评论

怎么学习Hadoop大数据
 摘要：并行分析模块接受用户提交的多维分析命令，并将通过核心模块将该命令解析为Map-Reduce，提交给Hadoop集群之后，生成报表供报表中心展示。标签：大数据 数据分析 Hadoop 随着互联网、移动互联网和物联网的发展，谁也无法否认，我们已经切实地迎来了一个海量数据的时代，数据调查公司IDC预计2011年的数据总量将达到1.8万亿GB，对这些海量数据的分析已经成为一个非常重要且紧
怎么学习Hadoop大数据
Hadoop
数据分析
数据
转载
clghxq
4月前
30阅读

大数据学习Hadoop的优势
一、Hadoop的优势1）高可靠性：因为Hadoop假设计算元素和存储会出现故障，因为它维护多个工作数据副本，在出现故障时可以对失败的节点重新分布处理。2）高扩展性：在集群间分配任务数据，可方便的扩展数以千计的节点。3）高效性：在MapReduce的思想下，Hadoop是并行工作的，以加快任务处理速度。4）高容错性：自动保存多份副本数据，并且能够自动将失败的任务重新分配。二、Hadoop组成1）H
大数据
转载
wx5b850d01da0c3
2018-08-29 19:11:32
502阅读

学习Hadoop大数据基础框架
什么是大数据？进入本世纪以来，尤其是2010年之后，随着互联网特别是移动互联网的发展，数据的增长呈爆炸趋势，已经很难估计全世界的电子设备中存储的数据到底有多少，描述数据系统的数据量的计量单位从MB（1MB大约等于一百万字节）、GB（1024MB）、TB（1024GB），一直向上攀升，目前，PB（等于1024TB）级的数据系统已经很常见，随着移动个人数据、社交网站、科学计算、证券交易、网站日志、传感
支持
转载
本宫没空1
2018-11-14 10:29:05
527阅读

大数据学习——HADOOP集群搭建
4.1 HADOOP集群搭建 4.1.1集群简介 HADOOP集群具体来说包含两个集群：HDFS集群和YARN集群，两者逻辑上分离，但物理上常在一起 HDFS集群： 负责海量数据的存储，集群中的角色主要有 NameNode / DataNode YARN集群： 负责海量数据运算时的资源调度，集群中的角色主要有 ResourceManager /NodeManager (那mapredu
hadoop
hdfs
mapreduce
jar
上传
转载
mob604756fc3573
2018-12-23 10:57:00
178阅读
2评论

hadoop大数据前景 hadoop 大数据
第0章大数据概论一、大数据概念大数据：Big Data,指的是无法在一定时间范围内使用常规软进行捕捉，管理和处理的数据的集合。需要新的处理模式来进行决策力。洞察收取海量、高增长和多样化的信息进行管理。二、大数据的特点大量高速多样性低密度值三、大数据的应用场景物流仓储零售旅游商品广告推荐保险金融人工智能…四、大数据的部门组织结构平台组：数据仓储组：数据挖掘：报表工程：第一章Hadoop简介一、什么是
hadoop大数据前景
hadoop
big data
mapreduce
hdfs
转载
mob6454cc73e9a6
2023-07-25 20:09:02
189阅读

hadoop之外 大数据 hadoop与大数据
大数据在近些年来越来越火热，人们在提到大数据遇到了很多相关概念上的问题，比如云计算、 hadoop等等。那么，大数据是什么、Hadoop是什么，大数据和Hadoop有什么关系呢?　　大数据概念早在1980年，著名未来学家阿尔文·托夫勒提出的概念。2009年美国互联网数据中心证实大数据时代的来临。随着谷歌 MapReduce和 GoogleFile System (GFS)的发布，大数据不
hadoop之外 大数据
大数据
Hadoop
大数据技术
转载
mob64ca13fdd43c
2023-09-14 13:16:55
60阅读

大数据hadoop模型 大数据hadoop原理
MapReduce简介MapReduce是hadoop四大组件之一（HDFS，MapReduce，YARN和Comment），是一种分布式计算编程模型，用于解决海量数据的计算问题。MapReduce思想原理MapReduce采用分而治之的思想，将大文件切割成片，然后由多个map task并行处理，处理完成后交由reduce再做合并，最后输出结果MapReduce执行过程这里我们以经典例子WordC
大数据hadoop模型
数据
hadoop
HDFS
转载
mob6454cc73e9a6
2024-01-11 09:10:09
95阅读

大数据Hadoop 大数据hadoop是什么
1. 大数据的概念大数据（Big Data）：指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程  优化能力的海量、高增长率和多样化的信息资产。主要解决，海量数据的存储和海量数据的分析计算问题。1.2 大数据的包含以下4个特点：1.Volume（大量）2.Velocity（高速）3.Variety（多样）4
大数据Hadoop
hadoop
big data
人工智能
Hadoop
转载
云端创新者
2023-10-15 14:23:55
62阅读

大数据hadoop的简历 大数据 hadoop
一、什么是大数据，什么是Hadoop        大数据：指无法再一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多元化的信息资产。        数据存储单位：bit<Byte&
大数据hadoop的简历
大数据
Hadoop
数据
转载
mob64ca14101b2f
2024-02-22 15:39:19
64阅读

hadoop redis 大数据 hadoop处理大数据
hadoop是什么？Hadoop就是为大数据应运而生、Hadoop 框架是用 Java 编写的、Hadoop是Apache下的子项目、Hadoop是分布式系统基础架构，它主要是用于大数据的处理、Hadoop可以看成是一个平台或者生态系统。Hadoop生态系统包含哪些组件？有分布式存储HDFS，有并行计算 MapReduce，有NoSQL数裾库的HBase,有数据仓库工具 Hive, 有 Pig 工
hadoop redis 大数据
Hadoop
HDFS
大数据
转载
mob64ca1418e88d
2023-09-06 20:43:14
63阅读

大数据和Hadoop什么关系？为什么大数据要学习Hadoop？
大数据是一系列技术的统称，经过多年的发展，大数据已经形成了从数据采集、整理、传输、存储、安全、分析、呈现和应用等一系列环节，这些环节涉及到诸多大数据工作岗位，这些工作岗位与物联网、云计算也都有密切的联系。Hadoop是一个由Apache基金会所开发的分布式系统基础架构，是用Java语言开发的一个开源分布式计算平台，适合大数据的分布式存储和计算平台。广义上讲，大数据是时代发展和技术进步的产物。Had
java
数据挖掘
数据分析
数据处理
hadoop
原创
a大数据
2019-06-27 11:54:49
821阅读

大数据Hadoop学习总结 从零开始学hadoop大数据分析
hadoop基础环境搭建 关于博客 由于平常在做java开发及ETL，对大数据方向有了写兴趣，所以想学习学习，将学习过程笔记及心得写在博客中，用来共享，希望有所帮助基础环境搭建步骤1.配置阿里云yum源 2.安装常用软件 3.关闭防火墙 4.关闭selinux 5.安装JDK 6.创建hadoop用户并配置hadoop用户密码 7.给hadoop用户配置ssh秘钥 8.创建whell用户组，禁止
大数据Hadoop学习总结
hadoop集群搭建
java转hadoop
大数据
hadoop
转载
AIGC创想家
2024-01-10 22:08:43
46阅读

大数据学习——hadoop的RPC框架
项目结构   服务端代码 test-hadoop-rpc pom.xml <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
maven
hadoop
apache
xml
java
转载
mob60475705c8db
2019-01-03 22:47:00
210阅读
2评论

大数据框架Hadoop自主学习报告
引子虽然通过《小白学习大数据测试之hadoop初探》以及把hadoop的基本核心说明白了，但是似乎对于小白来说还是会有点懵逼。。。。那么这次我们就在来看看大数据粗暴理解大数据甭管什么，简单粗暴的理解为大！大！大！对，你没看错，不管什么都是大就对了，哈哈哈哈大数据应用的功能抽象出来基本就是：数据采集、数据存储、数据处理（过滤、拆分、聚合）、数据分析、数据应用。说白了就是对从各处采集的数据经过一系列的
大数据框架Hadoop自主学习报告
大数据
hadoop
数据测试
转载
墨色天香
4月前
31阅读

学习大数据：Hadoop的集群配置
Hadoop的集群配置
Hadoop
原创
wx5eba708eae438
2020-08-19 18:13:46
486阅读
1点赞

大数据之 Hadoop 学习教程分享
Hadoop 学习资料分享（3份）
hadoop
python
大数据
资料分享
游戏开发教程
转载
代码小生
2021-08-11 15:52:19
77阅读

1、Hadoop学习：大数据预备知识
1、大数据导论 1.1、大数据概念 大数据(Big Data)，指无法一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现和流程优化能力的海量、高增长率和多样化的信息资产。 我们来看看计算机数据的单位： 按照小到大的顺序：Bit->Byte->K
数据
服务器
大数据
其他
原创
苦行僧dh
2022-01-05 17:23:57
232阅读
  • 1
  • 2
  • 3
  • 4
  • 5
精品课程领资料
免费资料>
2025软考
系统架构设计师 系统规划与管理师 软件设计师 系统集成项目管理工程师
信创认证
系统架构师 信创集成项目管理师 信创规划管理师 系统开发工程师
厂商认证
CKA/CKS架构师 红帽认证工程师 Oracle-OCP认证 Oracle-OCM认证
IT技术
数据库高级工程师 AIGC大模型实战 Linux云计算架构师 Python全栈开发
华为认证
数通HCIP认证 云计算HCIE认证 华为存储HCIE认证 HCIP安全认证
相关文章

hadoop~大数据

hadoop 想学大数据 hadoop大数据开发方向

hadoop与大数据 hadoop与大数据平台

hadoop 与大数据 hadoop与大数据平台

hadoop 大数据 采集 hadoop大数据实战

大数据停止Hadoop服务 大数据 hadoop spark

hadoop 大数据 hadoop大数据分析培训

大数据搭建Hadoop心得 大数据架构hadoop

hadoop 大数据安装 hadoop大数据项目

hadoop 大数据平台 方案 hadoop大数据架构

Copyright © 2005-2025 51CTO.COM 版权所有 京ICP证060544号

关于我们
官方博客 全部文章 热门标签 班级博客
了解我们 网站地图 意见反馈
友情链接
鸿蒙开发者社区 51CTO学堂
51CTO 软考资讯