大数据——四种数据库（MySQL,HBase,MongoDB,Redis）操作实例问题描述： &nbs
转载
2023-09-04 15:47:33
101阅读
HBase使用手册1.概述使用须知本文档适用于CRH产品中HBase组件应用开发。HBase简介HBase作为一个典型的NoSQL数据库，使用Hadoop的HDFS作为底层存储，可以通过行键（Rowkey）检索数据，仅支持单行事务，主要用于存储非结构化和半结构化的松散数据。与Hadoop相同，HBase的设计目标主要依靠横向扩展，通过不断的增加廉价商用服务器来增加和存储能力。HBase特性容量巨大
http://www.qconbeijing.com/download/Nicolas.pdf 重点看了下facebook做了哪些改进以及他们的运维经验，比较重要的有以下几点： 改进： 1 加强了行级的ACID约束 2 改善了数据的分布规则，可以配置hdfs的replicas所在节点 3 改...
转载
2013-11-25 12:41:00
238阅读
2评论
HBASE 运维
转载
2018-05-29 09:30:51
735阅读
问题分析的主要手段 1、监控系统：首先用于判断系统各项指标是否正常，明确系统目前状况 2、服务端日志：查看例如region移动轨迹，发生了什么动作，服务端接受处理了哪些客户端请求。 3、gc日志：gc情况是否正常 4、操作系统日志和命令：操作系统层面、硬件是否故障，当前状况如何 5、btrace...
转载
2013-12-29 00:06:00
118阅读
2评论
一：为什么出现hbase？在大数据的领域，一直摸索的有俩个方向，一个是存储，另外一个是计算。人们在这俩个领域不段的进行研究。按照之前的阶段来讲，存储使用hdfs，计算使用hive（map-reduce）。但是有个问题，使用hdfs存储数据，查询会非常慢，所以，我们在hdfs的基础上，创建了hbase，数据底层依旧是hdfs，我们在hdfs之上对于数据做一个类似的索引，将这些信息存放在一个物理表中。
转载
2023-07-13 16:55:31
87阅读
防止ssh 被别人暴力破解: 安装fail2ban, 安装jumpserver 数据库要给用户查询使用: metabase,从库 进程守护:supervisor(自动重启)
原创
2023-05-06 09:07:49
91阅读
运维笔记（一）标签： 运维 linux 内存溢出目录运维笔记（一）1.查看系统日志2.查看内存3.top4. ps -aux --sort -pmem | less5.ps -ef|grep java6.硬盘背景描述： 网站试用过程中有时出现突然卡主，过1、2分钟才有反应的情况，一开始没有在意，以为是测试人员的网络问题（疫情期间都在家办公）。后来这个问题每天都会出现，我意识到这其中必然存在某个
转载
2024-03-12 14:36:50
76阅读
一、整体架构1.Client客户端：操作HBase的入口 2.Zookeeper： （1）HMaster的主备选举 （2）心跳检测 （3）保存meta表，用于查询region 3.HMaster： （1）主节点，负责管理HRegionServer的负载均衡和table的创建 （2）当region分裂时，负责将新region分配到具体的HRegionServer （3）当HRegionServer宕
转载
2023-09-04 15:42:48
75阅读
文章目录1. 主机集合2. 数据中心管理3. 节点管理4. 存储管理5. Ceph存储池PG比例管理6. 计划任务7. Ceph管理8. 物理机GPU9. vGPU10. 透传设备管理11. 多外网管理12. 云平台物理网络互通13. 租户网络类型管理14. DPDK管理15. SR-IOV网络管理16. 大页内存管理17. 大屏展示18. 系统巡检19. 镜像库迁移1. 主机集合主机集合，又称主机聚集，即一系列有共同属性的物理机组成的一个逻辑的小集群，通常用于更好的分配和调度计算资源。一般情况下，一个
原创
2021-11-13 13:51:17
10000+阅读
文章目录1. 主机集合2. 数据中心管理3. 节点管理4. 存储管理5. Ceph存储池PG比例管理6. 计划任务7. Ceph管理8. 物理机GPU9. vGPU10. 透传设备管理11. 多外网管理12. 云平台物理网络互通
原创
2022-01-10 17:33:15
796阅读
# Python运维笔记实现流程
## 步骤概览
以下是实现"Python运维笔记"的步骤概览：
| 步骤 | 操作 |
| ---- | ----------------- |
| 1 | 创建Python虚拟环境 |
| 2 | 安装必要的库 |
| 3 | 编写代码 |
| 4 | 测试代码
原创
2024-01-12 07:09:44
38阅读
# MySQLDBA运维入门笔记
在现代信息技术迅速发展的背景下，数据库作为信息存储的重要工具，已经成为许多企业所依赖的核心部分。MySQL是目前最流行的开源关系数据库管理系统之一，被广泛用于网站建设、数据存储等场景。本文将对MySQL的基本运维进行科普，并提供相关的代码示例。
## 什么是MySQL？
MySQL是一款功能强大的开源关系数据库管理系统（RDBMS），它使用结构化查询语言（S
原创
2024-09-05 05:35:54
23阅读
一、将mysql的日志输出到syslog中：
(1)启动时添加参数
/usr/local/mysql/bin/mysqld_safe --syslog --syslog-tag="mysql-log" --user=mysql &
(2)修改调用mysql的mysqld_safe脚本的选项 40.10：40.3
vim
原创
2012-11-06 15:16:01
1054阅读
Kubernetes（简称K8S）是一个开源的容器编排平台，用于自动化部署、扩展和管理容器化应用程序。作为一名经验丰富的开发者，下面我将带领你了解Kubernetes运维笔记，并提供一些代码示例帮助你入门。
### K8S关键词实现流程
下面是实现K8S关键词的基本流程，可以用表格展示步骤：
| 步骤 | 描述 |
|------|------|
| 1 | 部署Kubernetes集群 |
原创
2024-01-25 20:49:00
110阅读
1.tar命令解压去掉(跳过)第一层目录tar-zxvffinename.tar.gz-C./--strip-components12.sed命令#删除最后一行sed-i'$d'filenamesed命令删除包含特定字符行#删除包含"xxx"的行sed-i'/xxx/d'filename
原创
2020-10-09 09:41:16
460阅读
1评论
Linux运维笔记是每位Linux系统管理员必备的技能之一，而在Linux系统管理员的工作中，使用红帽操作系统是非常常见的。红帽操作系统是一种基于Linux内核的开源操作系统，广泛应用于企业级服务器和工作站环境中。
在进行Linux运维工作时，掌握红帽操作系统的相关知识是非常重要的。在这篇文章中，我们将分享一些关于红帽操作系统的运维笔记，帮助大家更好地管理和维护Linux系统。
首先，了解红帽
原创
2024-03-01 11:06:35
84阅读
【代码】linux 运维笔记。
原创
2023-02-26 09:20:52
253阅读
一、前言 1.数据库能做什么？ 不论是淘宝，吃鸡，爱奇艺，抖音，快手，知乎， 百度贴吧等，总所周知的服务程序。 存储的数据，包含用户的账号，密码，级别，存款，余额，等级，购物记录，头像本地
转载
2023-10-08 20:30:07
72阅读
一个成熟的数据库架构并不是一开始设计就具备高可用、高伸缩等特性的，它是随着用户量的增加，基础架构才逐渐完善。这篇博文主要谈MySQL数据库发展周期中所面临的问题及优化方案，暂且抛开前端应用不说，大致分为以下五个阶段：1、数据库表设计 项目立项后，开发部根据产品部需求开发项目，开发工程师工作其中一部分就是对表结构设计。对于数据库来说，这点很重要，如果设计不当，会直接影响访问速度和用户体验
