MySQL运维篇一、日志1.错误日志2.二进制日志3.查询日志4.慢查询日志二、主从复制1.概述2.原理3.搭建4.总结三、分库分表1.介绍2.Mycat概述3.Mycat入门4.Mycat配置5.Mycat分片6.Mycat管理及监控7.总结四、读写分离1.介绍2.一主一从3.一主一从读写分离4.双主双从5.双主双从读写分离6.总结 学习地址 一、日志1.错误日志错误日志是MySQL中最重要的
转载
2023-09-28 14:47:19
65阅读
文章目录查看数据库表大小清空表查看mysql语句执行过程(查询优化相关)mysql truncate具有外键约束的表mysql 查看数据库状态和连接数Mysql导出表结构及表数据 (mysqldump用法) 查看数据库表大小SELECT TABLE_NAME,DATA_LENGTH+INDEX_LENGTH,TABLE_ROWS,concat(round((DATA_LENGTH+INDEX_L
转载
2023-12-09 13:14:56
17阅读
一、巡检表二、巡检参考2.1、centos巡检1> 身份鉴别:确保root是唯一的UID为0的账户,除root以外其他UID为0的用户都应该删除,或者为其分配新的UID;查看命令:cat /etc/passwd | awk -F: ‘($3 == 0) { print $1 }’|grep -v ‘^root$’2> 身份鉴别:密码复杂度检查,检查密码长度和密码是否使用多种字符类型编辑
转载
2024-03-11 19:46:09
136阅读
Hive教程Hive概念Hive是什么Hive不适合做什么数据单元数据类型内置运算和函数SQL用法和实例创建表浏览表和分区修改表删除表加载数据查询和插入数据简单的查询基于查询的分区连接聚合多表/文件插入动态分区插入插入到本地文件抽样全连接数组操作Map(关联数组)操作定制Map/Reduce脚本Co-Groups Hive教程Hive概念Hive是什么Hive是基于Apache Hadoop的数
转载
2023-09-20 04:59:26
39阅读
转载的,个人感觉写的很实在,简单明了,精辟!
运维工作尤其是linux运维,其实最考验你的能力,因为需要学习的东西实在太多,
你既要懂网络:思科华为设备的配置;
要懂性能调优:包括lamp或者lnmp的性能调优,也包括linux操作系统调优;
要懂数据库mysql或者nosql(例如mongodb):
要懂编程语言:Shell是最基本的,还要学习perl,pyth
转载
精选
2012-02-06 11:59:15
8652阅读
2评论
整理:张宋庆(Flink 社区志愿者)校对:李庆(Flink 社区志愿者)摘要:本文由阿里巴巴高级运维工程师杨阳(时溪)分享,主要介绍阿里巴巴常见问题诊断模块与思路,内容涵盖以下几个方面:常见运维问题问题处理方式作业生命周期1.常见运维问题1.1 作业运行环境本文中介绍的作业运行环境主要是在阿里巴巴集团内,构建在 Hadoop 生态之上的 Flink 集群,包含 Yarn、HDFS、ZK 等组件;
转载
2024-05-10 20:30:53
35阅读
本示例知识点1.学习如何管理和运行Flink Jobs 2.如何部署和监视应用程序 3.体验Flink如何从作业失败中恢复(重点) 4.执行日常操作任务,例如升级和缩放命令: docker-compose 常用命令 docker-compose exec kafka kafka-console-consumer.sh --bootstrap-server localhost:9092
转载
2024-05-26 16:37:56
17阅读
为了使Hadoop集群保持健康的状态,集群需要进行日常的维护,主要从基础运维,集群扩容和异常处理三个方面。1、基础运维1.1 启动 / 停止Hadoop在Hadoop_HOME/bin下执行./start-all.sh或者./stop-all.sh命令。(官方不推荐使用这两个命令)1.2 启动 / 停止 HDFS在Hadoop_HOME/bin下执行./start-dfs.sh或者./stop-d
转载
2023-09-20 10:28:42
38阅读
##虚拟机的基础操作rht-vmctl start desktop
rht-vmctl view desktop
hostnamectl ##查询本机的信息
Powering off desktop
rht-vmctl reset desktop##行提示符[kiosk@foundation63 Desktop]$
kiosk
转载
2024-05-06 10:37:45
62阅读
本文作者:驻云科技,刁德保随着云计算的大量应用,在云端场景的运维自动化领域也被赋予了更多的工作以及与传统运维自动化不同的使用方法。“在云端的所有资源如数据库、主机、负载均衡等,一切都是api”,这个不精确的说法从侧面可以看出云端自动化增添了很多可以编程处理的事情,如通过编程调用“api”完成数据库、主机等的增、减、控制等操作,通过”api”控制负载均衡完成业务系统的主备切换,通过“api”控制vp
转载
2023-12-12 22:26:36
63阅读
Apache Flink是一个支持有边界的和无边界的数据流的有状态计算的框架。因为很多流式应用被设计成在最短的停机时间内持续运行,所以一个流式处理器必须提供卓越的失败恢复能力,同时提供工具在应用运行的时候监控和维护他们。 Flink非常关注流式处理的操作方面。下面,我们说明一下Flink的失败恢复机制并且列出他的管理和监控运行程序的特性。 一、 24/7不间断地运行你的应用机器
转载
2023-11-02 19:21:31
71阅读
部署:环境规划、代码托管、自动化部署、差异配置文件处理等。监控:某个新业务上线,是否能够有效的监控、如何知道某个接口被调用的多少次?安全:都谁可以调用本业务的接口?(黑白名单),能调用多少次?(频率限制)。备份:该业务是否可以做负载均衡?负载均衡需要考虑什么(数据同步)?日志:该业务都产生哪些日志?日志如何收集、日志如何归档、日志保留时间。根据自己的经验将运维所需的技能分为几类:部署:系统安装、软
转载
2024-03-20 21:01:27
251阅读
发展至今,云计算提供三种形式的云服务,基础设施即服务(IaaS),平台即服务(PaaS)和软件即服务(SaaS)。尽管这三种服务形式有所差异,其最终的目的就是为用户提供服务(Service)的,而不仅仅是软硬件和各种资源。下面小编将带你了解一下为何说这三种云服务最终拼的都是运维,以下将了解一下关于云计算的技术难点和云计算的门槛。PaaS+IaaS+SaaS云计算的技术难点到今天,云计算的工业实现已
转载
2024-02-27 13:38:34
1306阅读
运维的工作层次来分,又分为硬件运维、桌面运维、系统运维、数据库运维和应用运维。他们运维的设备,小的从个人电脑,大的到数以亿计的高精尖计算设备(比如 大型机 )。根据公司 IT 系统规模的不同,运维团队小至1 人,大至数百人。每晚通宵达旦,为 IT 系统保驾护航。有句行话“累成狗,起的比鸡早,睡得比猪晚”。就这样还是种种抱怨和不满。我对运维总结成了两句话:“技术只是手段,业务才是王道”。运维的好坏评
转载
2023-08-30 16:31:42
657阅读
产出的价值无非2点(无论是小事还是大事,有价值的事情,就必须要去做,方法和工具都是灵活的。1.节约成本。2.724小时保证业务不间断运行。1)成本预算必须要做,否则当业务收支平稳的时候,boss就非常关心了:1.机器配置统一化,业务也知道配置的选择,而不是迷茫,狮子大开口。2.业务人数评估(正常量和突发量)3.各业务产品功能和逻辑梳理,包括使用场景。前期怎么做,后期扩展的方案有哪些?slb-web
转载
2018-02-05 10:26:55
6821阅读
点赞
在Kubernetes(K8S)中,运维(Operations)是一个至关重要的方面,它涉及到保持集群的高可用性、监控集群的健康状态、处理故障等。运维的系统可以帮助我们更有效地管理K8S集群,并确保应用程序的可靠运行。在接下来的文章中,我将向您介绍如何实现一个基本的运维系统,并为您提供相应的代码示例。
### 运维系统的实现流程
下面是实现一个基本运维系统的流程,我们将使用Prometheus
原创
2024-05-20 10:14:24
292阅读
术语名词IDC–(Internet Data Center)互联网数据中心,主要服务包括整机租用、服务器托管、机柜租用、机房租用、专线接入和网络管理服务等。广义上的IDC业务,实际上就是数据中心所提供的一切服务。客户租用数据中心
原创
2022-03-23 15:46:16
1478阅读
企业要求其企业信息系统的维护人员具备专门的信息知识,使用有效的监控工具,长期实时地为企业服务,还能根据企业的业务发展的需要随时重构其维护的人员结构和流程。但企业信息系统运维的实际情况却往往不尽如人意。IT运维外包能使IT人员从繁琐的事务性工作中解放出来,使其在业务、客户服务等方面可以投入更多精力,实现更多的效益。IT运维外包流程主要包括以下4个关键环节:1、外包战略制定外包必须首先保证企业的核
转载
2023-09-25 16:06:17
82阅读
运维(Operation and maintenance)一般是指对大型组织已经建立好的网络软硬件的维护,其中传统的运维是指信息技术运维(IT运维)。所谓IT运维管理,是指单位 IT 部门采用相关的方法、手段、技术、制度、流程和文档 等,对IT 运行环境(如软硬件环境、网络环境等)、IT 业务系统和 IT 运维人员进行的综合管理。 随着信息化进程
转载
2023-11-07 15:58:00
606阅读
概述本文将简单介绍运维数据分析系统 Elastic Stack,并描述其基础部署过程。简介ELK(Elasticsearch + Logstash + Kibana)用于日志集中分析系统,Elasticsearch
用于存储、搜索、分析数据,Logstash 用于接收并处理数据,Kibana 提供 Web UI 管理数据,客户端通过 Logstash-Forwarder
将指定的日志数据传递数据给
转载
2024-02-26 19:51:35
168阅读