一:Hadoop基本概念 一个分布式系统基础架构,由Apache基金会所开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。 充分利用集群的威力进行高速运算和存储。 Hadoop的框架最核心的设计就是:HDFS和MapReduce 二:Hadoop解决问题 1.海量数据的存储(HDFS)
转载 2020-02-12 11:19:00
324阅读
2评论
Hadoop是一个是个海量数据的分布式存储和计算平台  对于数据,我们大致可以将其分为三类:                         结构化数据(对于结构化数据的处理可以通过RDBMS处理,通过将搜索码创建为索引页可以实现很快的查询速度) 
原创 2015-11-13 15:26:33
666阅读
今天学习了hadoop基本概念Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。
原创 2022-06-20 10:43:08
103阅读
Hadoop概述1、Hadoop介绍Hadoop是Apache旗下的一个用java语言实现开源软件框架,是一个开发和运行处理大规模数据的软件平台。允许使用简单的编程模型在大量计算机集群上对大型数据集进行分布式处理。 狭义上说,Hadoop指Apache这款开源框架,它的核心组件有:HDFS(分布式文件系统):解决海量数据存储YARN(作业调度和集群资源管理的框架):解决资源任务调度MAPREDUC
1.大数据概念大数据:指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产 主要解决的是 海量数据的存储、海量数据的分析计算、统一资源管理调度大数据特点:1、volume(大量) 2、velocity(高速) 3、variety(多样) 4、value(低价值密度)2.Hadoop1、H
转载 2023-08-18 20:27:11
49阅读
://blog..net/jankin6/category_10362674.html源码见
原创 2022-02-04 16:20:51
55阅读
Hdfs基本概念
原创 2022-09-03 09:22:29
77阅读
https://blog.csdn.net/jankin6/category_10362674.html源码见 https://github.com/hiszm/hadoop-train大数据概述导学学习内容Hadoop分布式文件系统HDFS分布式资源调度YARN分布式计算机框架MapRe
原创 2021-09-06 09:23:32
130阅读
函数         int:整形     int main    表示main函数调用 返回一个整型值    return 0=返回0    printf(function)复印,打印函数字母汉字    char:字符数据类型&
原创 2022-10-17 12:49:42
111阅读
基本概念 前言 Web开发: Web,网页的意思,www.baidu.com 静态Web html、css 提供给所有人看的数据始终不会发生变化! 动态Web 淘宝,几乎是所有的网站 提供给所有人看的数据始终会发生变化,每个人在不同的时间,不同的地点看到的信息各不相同! 技术栈: Servlet/J ...
转载 2021-05-21 23:42:00
479阅读
2评论
重载的运算符是具有特殊名字的函数:它们的名字由关键字 和其后要定义的运算符号共同组成,和其他函数一样,重载的运算符也包含返回类型、参数列表以及函数体。 重载运算符函数的参数数量与该运算符作用的运算对象一样多。如果一个运算符函数是成员函数,则它的第一个运算对象绑定到隐式的 指针上,因此,成员运算符函数
转载 2020-03-15 10:47:00
660阅读
2评论
一 DOM简介 1)概念 //DOM是W3C推荐 处理可扩展标记语言的 标准编程接口document Object Model 可扩展标记语言 = ( HTML 或者 XML ) 2)作用 // 通过一系列DOM接口,可以改变网页内容 结构 样式 3)DMO中专有名词 // 1 DOM树// 2 文
转载 2021-02-17 18:58:00
306阅读
2评论
1、什么是HadoopHadoop 是一个由 Apache 基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop 实现了一个分布式文件系统(Hadoop Distributed File System),简称 HDFS。 HDFS 有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提
转载 2023-07-12 12:27:08
28阅读
其实个人觉得MEF和WCF有点类似吧,都是要通过一个接口实现的形式来达到传递信息并且使用的目的以下是个人从网络上一些高手学习来使用的一些经验吧,或者是学习的心得吧一、基本概念MEF:Managed Extensibility Framework,.NET 4.0中带来的一个基于托管的扩展程序开发框架...
转载 2015-05-11 16:45:00
161阅读
2评论
原文地址:http://ixdba.blog.51cto.com/2895551/1428278一、数据块(blck)HDFS(Hadp Distributed File System)默认的最基本的存储单位是64M的数据块。 和普通文件系统相同的是,HDFS中的文件是被分成64M一块的数据块存储的。 不同于普通文件系统的是,HDFS中,如果一个文件小于一个数据块的大小,并不占
转载 精选 2015-04-18 21:58:55
577阅读
一、数据块(blck) HDFS(Hadp Distributed File System)默认的最基本的存储单位是64M的数据块。  和普通文件系统相同的是,HDFS中的文件是被分成64M一块的数据块存储的。  不同于普通文件系统的是,HDFS中,如果一个文件小于一个数据块的大小,并不占用整个数据块存储空间。二、元数据节点(Namende)和数据节点(datande) 元数据
原创 2014-06-19 16:57:37
3610阅读
3点赞
一、数据块(blck) HDFS(Hadp Distributed File System)默认的最基本的存储单位是64M的数据块。  和普通文件系统相同的是,HDFS中的文件是被分成64M一块的数据块存储的。  不同于普通文件系统的是,HDFS中,如果一个文件小于一个数据块的大小,并不占用整个数据块存储空间。二、元数据节点(Namende)和数据节点(datande) 元数据
原创 2016-02-19 10:11:44
559阅读
当移动用户或远程用户通过拨号方式远程访问公司或企业内部专用网络的时候,采用传统的远程访问方式不但通讯费用比较高,而且在与内部专用网络中的计算机进行数据传输时,不能保证通信的安全性。为了避免以上的问题,通过拨号与企业内部专用网络建立VPN连接是一个理想的选择。 何为VPN VPN(Virtual Private Network):虚拟专用网络,是一门网络新技术,为我们提供了一种通过公用网络安全地对企
转载 精选 2008-07-13 14:53:53
755阅读
UML由图和元模型组成,图是语法,元模型是语义。UML主要包括三个基本构造块:事物(Things)、关系(Relationships)和图(Diagrams)。本次连载我们将对UML的这些基本组成部分及UML工具和应用进行介绍,使读者对UML形成初步的整体印象。在其后的几次连载里,再以数个实例对这些内容逐步展开。  1.1 UML的基本构造块  1.1.1事
转载 精选 2008-11-05 19:30:30
1464阅读
统一建模语言UML轻松入门——UML基本概念 来源:天极软件   20 世纪80 年代,随着面向对象技术成为研究的热点,先后出现了几十种面向对象的软件开发方法。其中,Booch、OMT 和OOSE等方法得到了广泛的认可。然而,采用不同方法进行建模不利于开发者之间的交流。而UML则统一了Booch、OMT 和OOSE 的表示方法,而且对其作了进一步的发展。1997 年,UML 被
转载 2008-12-17 09:49:37
488阅读
  • 1
  • 2
  • 3
  • 4
  • 5