简易导图1Vm和Vim的编辑器常用命令1.1vi和vim的三种常见模式1.2vi和vim快捷键2开机、重启和用户登录注销3用户管理3.1添加用户3.2删除用户3.3查询用户信息3.4切换用户3.5查看当前用户/登录用户3.6创建用户组3.7删除用户组3.8增加用户时候直接加上组3.9修改用户组3.10用户和组的配置文件4实用指令4.1切换指定运行指令1.init指令4
原创
精选
2022-07-24 22:52:22
418阅读
8网络配置8.1静态ip设置1.配置文件地址:/etc/sysconfig/networkscripts/ifcfgens332.修改如下原来!image.png(https://s2.51cto.com/images/20220726/1658840249399586.png?xossprocess=image/watermark,size_14,text_QDUxQ1RP5Y2a5a6i,co
原创
精选
2022-07-26 21:03:10
361阅读
微信公众号:运维开发故事,作者:double冬 1、Kafka 概述2、Kafka 解决了什么问题3、Kafka 技术特性4、Kafka 工作原理4.1、架构图4.2、Kafka 写流程4.3、Kafka 读流程5、Kafka 数据结构说明5.1、Kafka 在 Zookeeper 中的注册数据结构5.2、Kafka Topic 的数据结构6、Kafka 运维6.1、
推荐
原创
2022-08-25 14:38:36
902阅读
这5种必知的大数据处理框架技术,你的项目到底应该使用其中的哪几种?大数据是收集、整理、处理大容量数据集,并从中获得见解所需的非传统战略和技术的总称。虽然处理数据所需的计算能力或存储容量早已超过一台计算机的上限,但这种计算类型的普遍性、规模,以及价值在最近几年才经历了大规模扩展。本文将介绍大数据系统一个最基本的组件:处理框架。处理框架负责对系统中的数据进行计算,例如处理从非易失存储中读取的数据,或处
原创
2019-01-31 13:33:03
408阅读
点赞
这5种必知的大数据处理框架技术,你的项目到底应该使用其中的哪几种?大数据是收集、整理、处理大容量数据集,并从中获得见解所需的非传统战略和技术的总称。虽然处理数据所需的计算能力或存储容量早已超过一台计算机的上限,但这种计算类型的普遍性、规模,以及价值在最近几年才经历了大规模扩展。本文将介绍大数据系统一个最基本的组件:处理框架。处理框架负责对系统中的数据进行计算,例如处理从非易失存储中读取的数据,或处
原创
2019-01-31 13:32:53
961阅读
点赞
在一个完整的离线大数据处理系统中,除了hdfs+mapreduce+hive组成分析系统的核心之外,还需要数据采集、结果数据导出、任务调度等不可或缺的辅助系统,而这些辅助工具在hadoop生态体系中都有便捷的开源框架,如图所示:文章目录1. Flume介绍1.1 概述1.2
原创
2022-04-01 10:49:28
293阅读
文章目录1. java中==和equals和hashCode的区别2. int与integer的区别3. String、StringBuffer、StringBuilder区别4. 什么是内部类?内部类的作用5. 进程和线程的区别6. final,finally,finalize的区别7. Serializable 和Parcelable 的区别
原创
2022-04-01 14:26:07
165阅读
1. java中==和equals和hashCode的区别基本数据类型的==比较的值相等.类的 == 比较的内存的地址,即是否是同一个对象,在不覆盖equals的情况下,同比较内存地址,原实现也为 == ,如String等重写了equals方法.hashCode也是Object类的一个方法,返回一个离散的int型整数。在集合类操作中使用,为了提高查询速度。(HashMap,HashSet等比较是否
原创
精选
2021-06-01 16:31:32
412阅读
点赞
在一个完整的离线大数据处理系统中,除了hdfs+mapreduce+hive组成分析系统的核心之外,还需要数据采集、结果数据导出、任务调度等不可或缺的辅助系统,而这些辅助工具在hadoop生态体系中都有便捷的开源框架,如图所示:文章目录1. Flume介绍1.1 概述1.2 运行机制1.3 Flum...
原创
2021-06-02 09:35:45
308阅读
当今这个时代,我相信大部分人对“大数据”这三个字肯定都不陌生,或多或少都有接触过,例如大数据杀熟。 对我们程序员来说,仅仅知道或听过一些名词是不够的,至少需要知晓其中大概的原理,并且对常见的大数据组件有一定的认识,不说拿出去吹牛,至少也要听得懂别人吹牛。 今天这篇文章就简单介绍下大数据的用途,大数据
转载
2022-10-23 00:30:55
88阅读
当今这个时代,我相信大部分人对“大数据”这三个字肯定都不陌生,或多或少都有接触过,例如大数据杀熟。对我们程序员来说,仅仅知道或听过一些名词是不够的,至少需要知晓其中大概的原理,并且对常见的大数据组件有一定的认识,不说拿出去吹牛,至少也要听得懂别人吹牛。今天这篇文章就简单介绍下大数据的用途,大数据的核心处理过程,以及常见组件的用处。简单了解下大数据能做什么大数据能做的东西有很多,涉及的领域也很多:1
转载
2022-10-17 11:16:16
67阅读
在实际的Java应用中,性能问题时常会出现,这会导致系统响应缓慢或资源浪费。以“java程序性能优化实战 葛一鸣”为例,我将详细记录解决性能优化问题的过程,包括问题背景、错误现象、根因分析、解决方案、验证测试和预防优化步骤。
### 问题背景
在一次性能评估中,我注意到某个Java后端服务在处理并发请求时,响应时间延迟显著增加。当请求量上升到一定程度时,系统的表现远不如预期。为了解决这个问题,
关于大数据面试中Spark的高频考点,快来学习!
推荐
原创
2021-06-01 17:20:31
1036阅读
点赞
Spark高频考点,你值得一看~
原创
2022-11-03 13:02:55
162阅读
关于大数据面试中Spark的高频考点,快来学习!
原创
2022-02-10 15:21:57
80阅读
对应“磁盘管理工具”中对硬盘所做的几个操作,硬盘中会做的记录
硬盘初始化:在硬盘的起始扇区会形成MBR记录(446个字节的引导程序和2个字节的终止标志,但分区表项是空的)。
划定分区:在MBR和逻辑主分区的分区表中记录分区的大小信息。
硬盘格式化:在硬盘主分区的起点(起始)和扩展分区的起始记录DBR。
分析分区时需要定义的四个概念
起点扇区
原创
2009-02-20 21:00:04
580阅读
2评论
《MySQL必知必会》从介绍简单的数据检索开始,逐步深入一些复杂的内容,包括联结的使用、子查询、正则表达式和基于全文本的搜索、存储过程、游标、触发器、表约束,等等。通过重点突出的章节,条理清晰、系统而扼要地讲述了读者应该掌握的知识,本着将书读薄的思想,循序渐进的记录对本书的学习笔记。
MySql必知必会思维导图 1. DBMS分类(1)关系数据库系统(2)面向对象的数据库系统(3
转载
2023-07-21 17:52:27
122阅读
LSM树是大多数提供高写入吞吐量的存储系统的核心,无论是像 dynamodb/cassandra 这样的键值存储还是像 Pulsar 这样的由 bookkeeper 支持的消息传递系统。典型 LSM 支持系统的各种组件如下所示。与传统的基于 B 树的实现相比,LSM 提供高写入吞吐量的主要原因是每个写入请求实际上仅在内存中执行,而基于B树的更新在磁盘上完成,这可以触发对索引的更新,但非常昂贵。那么
转载
2021-12-21 15:39:57
470阅读
文章目录检索数据SELECT检索分页限制结果排序检索排序数据降序排序过滤数据WHERE过滤通配符过滤正则表达式过滤计算拼接字段算数计算文本处理函数日期和时间处理函数数值处理函数聚集函数分组数据过滤分组SELECT子句顺序子查询用作过滤用作计算联结内部联结自联结外部联结使用聚集函数的联结组合查询全文本搜索扩展查询布尔文本搜索说明 检索数据SELECT检索检索多个列。SELECT col1, col
转载
2023-12-27 16:11:06
27阅读
如果能根据 SQL 自动生成 MapReduce,就可以极大降低大数据技术在数据分析领域的应用门槛,基于这样的一个需求场景,Hive 横空出世 ...
原创
2022-01-07 15:25:51
84阅读