本小节 jacky 分享的是：Hadoop 核心的组成模块，依赖于 Hadoop 的其他的生态系统。随着jacky后面逐步的分享，会对本小节 Hadoop 概况中的这些概念有更好的加深与了解。（一）Hadoop 四大核心模块在 Hadoop 官网就告诉了我们 Hadoop 有4大核心模块：Hadoop Common一般 common 包的都是工具类，这个工具主要是支撑其他 hadoop 模块，它是
数据可以分为两种：元数据和数据。数据是描述一切的；元数据是关于数据的数据。什么意思呢，比如我有十个文件在十台计算机上，这些数据是关于学生信息的，什么学号啊，姓名之类的。当然每个文件有自己的文件名。数据是让人用的，要想用这些数据，首先就要知道数据在哪里是吧。描述数据在哪里的数据就是元数据，元嘛，就是开始的意思，比如开元寺，那就是那个地方最早的寺庙。一开始呢，你要想用这些数据就必须去到元数据里，找到关
转载
2023-08-27 17:08:41
44阅读
为什么选择hadoop 下面列举hadoop主要的一些特点:1)扩容能力(Scalable):能可靠地(reliably)存储和处理千兆字节(PB)数据。2)成本低(Economical):可以通过普通机器组成的服务器群来分发以及处理数据。这些服务器群总计可达数千个节点。3)高效率(Efficient):通过分发数据,hadoop可以在数据所在的节点上并行地(pa
转载
2023-07-14 09:54:17
2710阅读
点赞
屈指算来，Hadoop 已经诞生 13 年了。它最早诞生于 2006 年，并在 2008 年成为 Apache 顶级项目。诞生后没过多久就成为了互联网行业大数据计算的标准配置，同时也成了 Apache 软件基金会的金牌项目之一。但从 2016 年开始，国内外就开始出现唱衰 Hadoop 的声音，以 Hadoop 为代表的开源大数据的未来何去何从？十年前，三家资金雄厚的初创公司 Cloudera、H
4. 集群配置4.1 集群部署规划安装前先做好节点规划，完全分布式目前规划1个主节点（Master）和2个从节点（Slave）一共三个节点。 部署规划要求：NameNode和SecondaryNameNode不要安装在同一台服务器。ResourceManager也很消耗内存，不要和NameNode、SecondaryNameNode配置在同一台机器上。hadoop102hadoop103hadoo
首先需要修改配置文件 cp mapred-site.xml.template mapred-site.xml<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>修改yarn-site.xml，配置如下：<
转载
2023-05-24 14:22:43
51阅读
1.凡是布置工作 - 说标准 2.凡是请示工作 - 说方案 3.凡是汇总工作 - 说结果 4.凡是总结工作 - 说流程
原创
2021-07-13 17:42:09
777阅读
OSPF（Open Shortest Path First）是一种开放式的最短路径优先路由协议，被广泛应用于局域网和互联网中，也被称为链路状态路由协议。在OSPF协议中，有四个重要的概念和过程，包括邻接建立、LSA（链路状态通告）发送、LSDB（链路状态数据库）构建和最短路径计算。这四个环节是OSPF协议正常运行的关键。
首先，邻接建立是OSPF协议中非常重要的一个过程。在OSPF网络中，路由器
java三大框架之间的关系1.Struts:基于MVC的充当了其中的视图层和控制器；
2.Hibernate:做持久化的,对JDBC轻量级的封装,使得我们能过面向对象的操作数据库；
3.Spring: 采用了控制反转的技术,管理Bean,降低了各层之间的耦合。
4.Shiro: 验证权限的框架 常和其他框架组合使用一.Struts框架struts.xml//这个文件的核心作用
//个人理解
HadoopHA的配置文件与启动步骤这份文档所实现的hadoop集群namenodeHA和yarnHA。Hadoop版本是2.7.2。zookeeper版本是3.4.10.一、Hadoop用户自定义文档可以归纳为4+3+1模式。4指的是core-site.xml、hdfs-site.xml、yarn-site.xml、mapred-site.xml四个配置文件。Core是核心配置信息，hdfs是h
转载
2023-07-12 09:48:01
36阅读
目录一、HDFS二、分布式文件管理系统的优缺点三、HDFS shell操作及客户端四、HDFS数据操作五、NN和2NN的工作机制六、集群安全模式七、datanode的工作机制八、数据完整性九、服役新节点十、老节点退役十一、datanode的多目录配置十二、小文件处理十三、回收站十四、纠删码
一、HDFS分布式文件管理系统，分布式的意思是多态设备，适合一次性写入，多
场景： 已知四个点，画出矩形，并且计算出每个中垂线，并加箭头，标识符，点击四个顶点还能拖拽进行变动。
转载
2023-06-27 14:12:29
166阅读
笔记本电脑上常用的几个内核模块
笔记本电脑由于节省电力的需要，在设计上对于电源管理非常重视。以前常用的apm是通过bios进行电源管理，而新式的acpi作为apm的后继者，把电源管理的任务交给了操作系统。
以往大家常常会认为笔记本电脑的节能功能在linux中不如在windows中的，但我最近在dell inspiron 700m上安装linux之后，发现其实linux对于acp
UEFI BIOS 支持两种引导模式：Legacy BIOS 引导模式和 UEFI 引导模式。某些设备和操作系统尚不支持基于 UEFI 的 BIOS，因此只能从 Legacy BIOS 引导模式引导。根据您的情况，您可能必须指定要使用的 UEFI BIOS 引导模式：Legacy BIOS 引导模式或 UEFI 引导模式。选择 Legacy BIOS 引导模式可允许 HBA 和 Express M
转载
2023-08-27 10:28:02
182阅读
事务的四大特性（ACID）：1.原子性（atomicity）：一个事务必须视为一个不可分割的最小工作单元，整个事务中的所有操作要么全部提交成功，要么全部失败回滚，对于一个事务来说，不可能只执行其中的一部分操作，这就是事务的原子性。2.一致性（consistency）：数据库总数从一个一致性的状态转换到另一个一致性的状态。3.隔离性（isolation）：一个事务所做的修改在最终提交以前，对其他事务
转载
2023-06-24 16:24:03
210阅读
# GIL锁：python全局解释器锁，# 假设一个进程有多个线程，当前线程执行的时候，就会抢到GIL锁，此时# 其他线程不可以执行，如果该线程有耗时等待，则GIL锁会打开，会被其他线程# 抢到，然后去执行。所以说，线程执行顺序是有先后的，不是同时执行的## 操作系统：中断以及意义# 计算机运行过程
原创
2022-06-16 17:07:24
91阅读
MySQL事务四个特性 - 事务的四个隔离级别一、事务四大属性1、原子性（
原创
2023-02-09 11:05:15
120阅读
Android中常用的4大布局方式：- 线性布局（LinearLayout）：按照垂直或者水平方向布局的组件。- 帧布局（FrameLayout）：组件从屏幕左上方布局组件。- 表格布局（TableLayout）：按照行列方式布局组件。- 相对布局（RelativeLayout）：相对其它组件的布局方式。1. 线性布局（LinearLayout）：按照垂直或者水平方向布局的组件。线性布局是Andr
转载
2023-08-25 18:49:49
75阅读
append() - 在被选元素的结尾插入内容 prepend() - 在被选元素的开头插入内容 after() - 在被选元素之后插入内容 before() - 在被选元素之前插入内容
转载
2018-08-17 22:09:00
167阅读
2评论
## 如何实现MySQL四个季度
作为一名经验丰富的开发者，我将会教你如何在MySQL中实现四个季度。首先，我们需要明确整个流程，然后详细说明每一步需要做什么，包括需要使用的代码和代码注释。
### 流程
下面是实现MySQL四个季度的步骤：
| 步骤 | 描述 |
| ---- | ---- |
| 1 | 创建一个包含所有月份的表 |
| 2 | 将月份映射到季度 |
| 3 | 使用
