1、入门：现在云计算比较火，为了赶时髦，买了个视频跟着学。1、为什么学？大数据，比如1分钟 twitter发超10w信息，facebook浏览量600w，还有如国内的taobao：尤其光棍节。按需推送信息更精确的推广告现在做hadoop的还比较少，薪水会很高，如android刚出的时候。2、什么是云计算？网格、分布式、并行、网络存储、虚拟化、负载均衡等的合体，形成强大能力的系统，并借助SaaS、P
原创
2013-07-01 13:46:23
564阅读
3、安装Hadoop1、window上装 （建议xp 玩玩就行了，实际要在linux）1.1、装JDK（不要装到带空格等目录中。。）1.2、安装cygwin需要安装oenSSL、VIM、Base1.3、在cygwin安装SSHD ssh-host-config1.4、启动SSHD net start sshd1.5、实现ssh无密码登录 ssh-
原创
2013-07-01 13:48:04
566阅读
Hadoop（入门）-关注系列文章hadoop介绍部署文档-关注系列文章
原创
2022-10-26 11:13:00
196阅读
整体课程概览 第一部分：开始云计算之旅第二部分：初识Hadoop第三部分：Hadoop 环境安装部署第四部分：Hadoop Shell 基本操作介绍第五部分：Hadoop 分布式文件系统1第五部分：Hadoop 分布式文件系统2第五部分：Hadoop 分布式文件系统3第六部分：MapReduce 开发1第六部分：MapReduce 开发2
转载
精选
2013-12-03 14:31:15
357阅读
2、典型云平台介绍Google的云计算平台：主要MapReduce、GFS、BigTable。IBM“蓝云”Amazon弹性计算云；国内盛大云特点易管理灵活性高资源利用率高可靠性低成本安全性问题数据隐私数据安全学习云计算，希望能找个高薪工作。加油。谢谢私塾在线这么好的课程。加油。学东西的步骤：是什么、有什么、能干什么、优缺点、历史等。我的博客：http://sishuok.com/forum/bl
原创
2013-07-01 13:47:44
468阅读
hadoop 基础视频1 一， 大致内容：1, 源起与体系结构2，实施Hadoop 集群3，分布式HDFS， 大数据存储实战4，Map-Reduce 体系架构5，Map-Reduce 数据分析之一 API 实战6，HBase 体系架构与安装7.HBase数据分析与建模，实战案例剖析8.Hive体系架构安装与HiveQL，应用案例9.Pig安装与Pig Latin语言，应用案例10.had
转载
2023-07-04 21:42:23
61阅读
私塾在线《深入浅出学 Hadoop- 初级 部分》 —— 系列精品教程
整体课程概览
第一部分：开始云计算之旅
第二部分：初识Hadoop
第三部分：Hadoop 环境安装部署
第四部分：Hadoop Shell 基本操作介绍
第五部分：Hadoop 分布式文件系统1
第五部分：Hadoop 
原创
2014-01-13 14:34:06
404阅读
文章目录〇、要点一、HDFS 概述1.1 HDFS 的产生背景和定义1.2 HDFS 的优缺点1.3 HDFS 的组成1.4 HDFS 的文件块大小二、HDFS 的 Shell 操作2.1 基本语法2.2 命令大全三、HDFS 的客户端 API四、HDFS 的读写流程4.1 HDFS 写数据流程4.1.1 文件写入4.1.2 网络拓扑 - 节点距离计算4.1.3 机架感知（副本存储节点选择）4.
转载
2023-07-04 14:30:39
48阅读
近使用Vue编写前端项目代码比较多，以前一直用的是WebStorm来写代码，但最近需要使用开源免费的IDE软件，因此开始使用VSCode。作为VSCode的新手小白，刚上手使用时很不习惯，毕竟VSCode作为开源免费轻量级的编辑器，想要丝滑入门使用，还是需要通过安装一些额外的插件来实现的。本文总结了3个常见问题和解决方案给大家，希望对刚使用VSCode的童鞋们能有所帮助。二、如何实现vue语法高亮
[url]http://col.njtu.edu.cn/zskj/1013/JAPANESE.swf[/url]
转载
精选
2008-12-12 14:31:33
401阅读
1评论
1 概述学了那么久的hadoop，到底什么是hadoop呢？ 先来说说我的理解，从广义上说他可以代表hadoop整个生态圈例如，hive，spark，hbase，zookeeper等等一系列框架。 从狭义上说他是一个，他是分布式的，可扩展的，高可用的、可靠的框架，由hdfs，mapreduce，yarn组成（hadoop1.x只有hdfs，mapreduce）。该篇博客只进行整体思路的介绍，涉
转载
2023-12-06 22:57:52
38阅读
HDFS
HDFS是Hadoop分布式文件系统（Hadoop Distributed File System）的缩写，为分布式计算存储提供了底层支持。采用Java语言开发，可以部署在多种普通的廉价机器上，以集群处理数量积达到大型主机处理性能。HDFS 架构原理
HDFS采用master/slave架构。一个HDFS集群包含一个单独的NameNode和多个DataNode。NameNode作为mas
原创
2023-12-20 15:39:16
67阅读
Hive:是一个构建在Hadoop 上的数据仓库框架,MapReduce (输入hive启动shell)metastore:是Hive元数据的集中存放地HBase:是一个在HDFS上开发的面向列的分布式nosql数据库(输入hbase shell启动shell)HBase 提供Avro,REST,T
转载
2016-04-12 20:13:00
93阅读
2评论
hadoop学习–（从hadoop框架讨论大数据生态）一、hadoop介绍hadoop是Apache基金会开发的分布式系统基础架构。主要解决海量数据的存储和海量数据分析计算。（传统工具存储不了海量数据，传统数据计算速度慢）。广义上来说。hadoop是指hadoop生态圈。二、hadoop的优势高可靠性 ：hadoop底层维护多个数据副本，一般备份3分数据。所以即使hadoop某个计算元素或者存储出
一、HDFS 使用基础 格式化配置HDFS文件系统，打开NameNode(HDFS服务器)，然后执行 hadoop namenode -format 格式化HDFS后，启动分布式文件系统, $ start-dfs.sh 找出文件列表中的目录，文件状态，可以传递一个目录或文件名作为参数: hadoop
转载
2023-11-15 14:47:02
50阅读
