一、Spark体系结构Spark是一种基于内存的开源计算框架，不同于Hadoop的MapReduce和HDFS，Spark主要包括Spark Core和在Spark Core基础之上建立的应用框架Spark SQL、Spark Streaming、MLlib和GraphX。Core库中主要包括上下文Spark Context、抽象数据集RDD、调度器Scheduler、shuffle和序
转载
2024-06-28 15:38:52
133阅读
一. 简介 javascript是一门动态弱类型的解释性编程语言, 增强页面动画效果,实现页面与用户之间实时动态的交互. JavaScript有三部分组成: ECMAscript, DOM, BOM ECMAScript是由ECMA-262定义,提供核心语言功能(ECMA是欧洲计算机制造商协会) DOB(Document Object Model)文档对象模型,提供访问和操作网页
转载
2023-09-01 14:54:04
88阅读
# Hadoop集群的三部分实现步骤
## 引言
Hadoop是一个用于处理大数据的开源框架，它由三个关键组件组成：Hadoop分布式文件系统（HDFS），YARN资源管理器和MapReduce计算模型。在本文中，我将向你介绍如何实现Hadoop集群的三个部分。
## 整体流程
下面是实现Hadoop集群的三个部分的整体流程，我们将在下面的步骤中进行详细介绍。
| 步骤 | 部分 | 描述
原创
2023-07-22 00:05:02
106阅读
# JavaEE有哪三部分
JavaEE(Java Platform, Enterprise Edition)是一种用于构建企业级应用程序的Java平台。它提供了一套强大的API和工具，可以简化开发过程，并支持大规模、高可靠性的应用程序。JavaEE由三个主要部分组成：Web层、业务层和持久层。本文将介绍这三个部分的功能和使用方法，并提供相关的代码示例。
## Web层
Web层是JavaE
原创
2024-01-26 13:02:50
33阅读
第三部分：理论三 编写可测试代码案例实战 测试类 Transaction 是经过抽象简化之后的一个电商系统的交易类，用来记录每笔订单交易的情况。 execute() 函数负责执行转账操作，将钱从买家的钱包转到卖家的钱包中。 在execute() 中，真正的转账操作是通过调用 WalletRpcSer ...
转载
2021-10-04 20:56:00
247阅读
2评论
IPsec：因特网协议安全
在网络层提供IP安全性的协议
IP安全（IPSec）体系结构由一系列协议组成，制订这些协议主要是为了确保通过IP网络进行的数据通信的整体性、保密性和验证。一方面，IPSec标准的灵活性已经引起了商业界的兴趣; 另一方面，也正是这一灵活性使我们能够认识到这些协议因其复杂性的缘故而带来的问题。
IPSec 在IP层提供安全服务，它使系统能按需选择安全协议，决定服务所使用的算
转载
2024-07-29 18:35:56
70阅读
第三部分：理论四 “解耦”为何如此重要？ 软件设计与开发最重要的工作之一就是应对复杂性。 如果说重构是保证代码质量不至于腐化到无可救药地步的有效手段，那么利用解耦的方法对代码重构，就是保证代码不至于复杂到无法控制的有效手段。 “高内聚、松耦合”是一个比较通用的设计思想，不仅可以指导细粒度的类和类之间 ...
转载
2021-10-04 20:58:00
275阅读
2评论
时间紧迫啊....
今天主要看到是特殊区域和不规则区域的内容，不规则的还没弄完...明天补上
首先是特殊区域
特殊区域四种，stub， totally stub，nssa，totally nssa
两个totally都是cisco自己的东西
stub是没有4和5，abr自动下放三类默认路由
ts没有3，4，5，abr自动下放三类
stub大家都得配，ts只
原创
2012-05-10 17:58:22
364阅读
第三部分：理论五 命名 1、命名多长最合适？ 长的命名可以包含更多的信息，更能准确直观地表达意图，但最好不要长到两行的程度，影响代码的可读性。 在足够表达其含义的情况下，命名当然是越短越好。对于一些默认的、大家都比较熟知的词，我比较推荐用缩写。 对于作用域比较小的变量，我们可以使用相对短的命名，比如 ...
转载
2021-10-04 21:04:00
225阅读
2评论
第三部分：理论一 关于重构安排了六节课，主要包含一下几个方面： 对重构概括性的介绍，包括重构的目的（why）、对象（what）、时机（when）、方法（how） 保证重构不出错的手段，这里我会重点讲解单元测试和代码的可测试性 不同规模的重构，重点讲解大规模高层次重构（比如系统、模块、代码结构、类与类 ...
转载
2021-10-04 20:01:00
300阅读
2评论
第三部分：理论二 如何保证重构不出错呢？ 需要熟练掌握各种设计原则、思想、模式，还需要对所重构的业务和代码有足够的了解。 除了这些个人能力因素之外，最可落地执行、最有效的保证重构不出错的手段应该就是单元测试（Unit Testing）了。 什么是单元测试？ 文中举例，测试 Text 类中的 toNu ...
转载
2021-10-04 20:11:00
147阅读
2评论
JAVA是个啥？我在学校期间学校把JAVA的课程叫做面向对象编程，弱鸡的我还挂了一次重修才过。以我男理工的实力以课程名就可以看出JAVA的核心思想就是面向对象。一般来说JAVA被称作面向对象编程语言，继承了C艹的诸多优点，摒弃了其中难以理解的指针和多继承。传言在很久很久以前有一个JAVA小岛，盛产咖啡，咖啡也被称作是JAVA，而JAVA语言就是诞生于此，喝杯JAVA压压惊，哈哈。为什么要学习JAV
Lambda 架构Lambda 架构由Storm的作者Nathan Marz提出，其设计目的在于提供一个能满足大数据系统关键特性的架构，包括高容错、低延迟、可扩展等。其整合离线计算与实时计算，融合不可变性、读写分离和复杂性隔离等原则，可集成Hadoop, Kafka, Spark，Storm等各类大数据组件。 Lambda 架构可分解为三层Layer，即Batch Layer, Real-Time
转载
2023-07-30 23:20:52
124阅读
RFID(Radio Frequency Identification)采用无线射频实现可移动存储设备与计算机或PLC之间的数据交换。一个典型的RFID系统包括载码体（即数据存储器），与载码体通讯的天线，以及处理天线与PC（或PLC）之间通信的控制器（天线与控制器一体时，我们称之为只读器或读写器）。 载码体分为标识头、标签、PCB三种形式，通常附着于产品载体乃至是产品本身，这样就提供了一个随产品
转载
2024-02-17 13:20:04
139阅读
Hadoop概述信息hadoop 有三大组成部分，HDFS（分布式文件存储系统）、YARN（资源管理器）、MAPREDUCE（分布式计算框架） ,下边我们来简单介绍一下HDFS 分布式文件存储系统HDFS分布式文件系统，是由Google的GFS谷歌文件系统开源出来，其存储模型是有主从结构的，可以划分出来以下几点NameNode（NN）
基于内存存储，不会和磁盘发生交互，使用映射快照和日志文件进行持
转载
2023-08-08 22:06:45
130阅读
曝光补偿也是一种曝光控制方式，一般常见在±2-3EV左右，如果环境光源偏暗，即可增加曝光值(如调整为+1EV、+2EV)以突显画面的清晰度。 白平衡是摄像机的一个极重要的概念。 所谓白平衡，就是摄像机对白色物体的还原。当我们用肉眼观看这大千世界时，在不同的光线下，对相同的颜色的感觉基本是相同的，比如在早晨旭日初升时，我们看一个白色的物体，感到它是白的；而我们在夜晚昏暗的灯光下，看到的白色物体，感
转载
2024-09-30 13:45:12
52阅读
今天我们主要讲一下操作符（因为是初识，我们今天只浅浅的讲一下它的基本用法）操作符的类型1、算术操作符 + - * / %注意：/的意思为整除（5/2==4） %的意思为取模即求余（5/2==1）2、移位操作符 >>&nb
原创
精选
2022-10-09 21:17:52
240阅读
继续不规则区域的内容，第二种解决办法tunnel，将tunnel在area 0中发布，发现了某件奇怪的事情：开tunnel的路由变成了ASBR，需要进一步验证
第三种virtual link，配置很简单，要注意area x v-l r-id，x是要跨越的区域
最后就是有关认证的内容，三种大类型的内容
link，area，v-link
link上的认证是都在接口上面配置
area的认证接口
原创
2012-05-11 18:15:11
298阅读
3.2 条件语句
awk的if语句类似于C语言的if语句，没什么好说的，举一个例子吧：
{ if ( $1 == "foo" ) { if (
转载
精选
2013-04-16 14:10:23
4351阅读
很多源都有为OpenStack已经编译好的各种镜像了，您可以直接下载并通过使用这些镜像来熟悉OpenStack。
不过如果是为生产环境进行部署的话，您一定需要构建含有定制软件或配置的镜像文件。不要着急，本章将引领您完成几种较为流行的Linux发行版镜像，最后也将制作一份Windows的镜像。
转载
精选
2015-12-24 12:01:05
888阅读
