HBase使用手册1.概述使用须知本文档适用于CRH产品中HBase组件应用开发。HBase简介HBase作为一个典型的NoSQL数据库，使用Hadoop的HDFS作为底层存储，可以通过行键（Rowkey）检索数据，仅支持单行事务，主要用于存储非结构化和半结构化的松散数据。与Hadoop相同，HBase的设计目标主要依靠横向扩展，通过不断的增加廉价商用服务器来增加和存储能力。HBase特性容量巨大
1、查看当前占用端口命令netstat -tanlpps -ef|grep javalsof -i:端口号
2、docker删除none镜像docker rmi $(docker images | grep "none" | awk '{print $3}')
3、grep -C 100 '关键字' xxx.log
转载
2020-12-31 10:53:00
366阅读
2评论
docker操作脚本根据容器名称查询容器ID并删除# 第一种写法
docker stop `docker ps -a| grep project | awk '{print $1}' `
docker rm `docker ps -a| grep project | awk '{print $1}' `
# 第二种写法
docker stop `docker ps -aq --filter
HBASE 运维
转载
2018-05-29 09:30:51
735阅读
问题分析的主要手段 1、监控系统：首先用于判断系统各项指标是否正常，明确系统目前状况 2、服务端日志：查看例如region移动轨迹，发生了什么动作，服务端接受处理了哪些客户端请求。 3、gc日志：gc情况是否正常 4、操作系统日志和命令：操作系统层面、硬件是否故障，当前状况如何 5、btrace...
转载
2013-12-29 00:06:00
114阅读
2评论
http://www.qconbeijing.com/download/Nicolas.pdf 重点看了下facebook做了哪些改进以及他们的运维经验，比较重要的有以下几点： 改进： 1 加强了行级的ACID约束 2 改善了数据的分布规则，可以配置hdfs的replicas所在节点 3 改...
转载
2013-11-25 12:41:00
238阅读
2评论
一：为什么出现hbase？在大数据的领域，一直摸索的有俩个方向，一个是存储，另外一个是计算。人们在这俩个领域不段的进行研究。按照之前的阶段来讲，存储使用hdfs，计算使用hive（map-reduce）。但是有个问题，使用hdfs存储数据，查询会非常慢，所以，我们在hdfs的基础上，创建了hbase，数据底层依旧是hdfs，我们在hdfs之上对于数据做一个类似的索引，将这些信息存放在一个物理表中。
转载
2023-07-13 16:55:31
82阅读
哈喽大家好我是咸鱼，今天给大家分享一个能够提升运维效率的 python 脚本咸鱼平常在工作当中通常会接触到下面类似的场景：容灾切换的时候批量对机器上的配置文件内容进行修改替换对机器批量替换某个文件中的字段对于 Linux 机器，咸鱼可以写个 shell 脚本或者直接批量使用 sed 命令就能很好的解决但对于 Windows 机器，上面的方法就不管用了，我们就需要想其他的办法这里咸鱼给大家分享一个由
转载
2023-10-04 15:49:14
96阅读
1、列举当前目录以及所有子目录下的文件，并打印出绝对路径#!/usr/bin/env python3
import os
for root,dirs,files in os.walk(os.getcwd()):
for name in files:
print(os.path.join(root,name)) 2、生成磁盘使用情况的日志文件#!/usr/bin/env
转载
2023-06-19 14:04:59
256阅读
从不会写代码，到自己独立能写代码解决问题 。这个问题很重要！盲目学习所谓的项目，最后还是不会自己写代码解决问题。首先解决了独立能写代码解决问题，再通过项目来加强训练。运维必须懂开发，特别是python开发，已经形成大家的共识，不懂开发的运维，路会越走越窄。部分运维遇到的困难是：有的连书都不懂；有的书是可以看懂，别人写的简单代码也可以看懂，但自己不会写代码解决问题。笔者认为学习编程不止是学习语法，需
转载
2023-08-15 15:16:34
131阅读
函数的非固定参数
转载
2018-06-10 13:17:00
270阅读
51运维脚本规范目录前言：一、命名规范1.1脚本命名1.2变量命名1.3参数命名1.4函数命名规范二、编写规范2.1.基本信息2.2代码注释规范2.3空行2.4缩进2.5续行2.6输出2.7 调用系统变量2.8 脚本中使用命令2.9 输入与退出三、调试3.1 错误退出3.2脚本语法检查3.3调试前言：本规范目的是保证运维成员编码的统一。本规范的核心规则就是脚本的命名规则。此规范必要是可以打破。一、
原创
2016-07-11 17:38:24
1505阅读
Oracle运维脚本
转载
2017-06-02 14:45:54
1859阅读
# 实现Python运维脚本
## 概述
在Kubernetes（K8S）中，编写Python运维脚本可以帮助简化一些重复性的操作，提高效率。本文将介绍如何使用Python编写K8S运维脚本，以及一些常用的操作和代码示例，帮助刚入行的小白快速上手。
## 实现步骤
以下是实现Python运维脚本的步骤：
| 步骤 | 操作 |
|------------|--
原创
2024-05-21 11:14:45
93阅读
#!/bin/sh
# 编译安装管理Nginx
App=nginx
# 终端输出显示程序名
AppName=Nginx
# 安装基路径
AppBase=/App
# 安装路径，即编译时"--prefix="指定的路径
AppDir=$AppBase/$App
# 二进制程序路径
AppProg=$AppDir/sbin/nginx
# 配
转载
精选
2015-03-31 08:53:32
540阅读
Linux作为一种开源操作系统，拥有庞大的用户群体，其用户群体中有许多运维人员。在Linux系统中，运维脚本是运维人员经常使用的工具，能够帮助他们快速、高效地完成各种系统管理任务。红帽作为一家知名的Linux发行版供应商，也为其用户提供了丰富的运维脚本工具。
首先，Linux运维脚本的作用是什么？Linux系统由于其开放性和可定制性，需要运维人员不断地对其进行维护和管理。而运维脚本就是一种能够简
原创
2024-03-20 10:01:59
111阅读
背景 系统运维过程中会遇到各种场景需要编写运维脚本处理频繁人工处理工作,本文主要描述 系统运维过程实战中遇到场景针对的问题编写运维脚本。
原创
2020-03-03 11:44:42
985阅读
# 如何实现 Python 运维脚本
在当今的技术世界中，自动化运维变得越来越重要。Python 是一种强大的编程语言，非常适合用于编写运维脚本。本文将指导你如何逐步实现一个简单的 Python 运维脚本。
## 整体流程
以下是实现 Python 运维脚本的整体流程：
| 步骤 | 描述 |
| ---- | ---- |
| 1 | 确定运维任务 |
| 2 | 环境准备
原创
2024-09-24 07:06:49
39阅读
1、用shell脚本批量建立Linux用户 实现要求：创建用户student1到student50,指定组为student组！而且每个用户需要设定一个不同的密码！脚本实现如下： #!/bin/bash
for i in `seq 1 50`
do
useradd -G student student$i ;
echo student$i | passwd student
转载
2024-05-06 10:31:17
143阅读
Python运维脚本网络收集阅读目录常用系统脚本python 命令行模块from optparse import OptionParser
parser = OptionParser()
parser.add_option("-u", "--user", action="store_true", dest="users", default=False, help="user names")
pa
转载
2024-04-16 10:34:18
48阅读
