51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
信创认证
公众号矩阵
移动端
视频课 免费课 排行榜 短视频 直播课 软考学堂
全部课程 软考 信创认证 华为认证 厂商认证 IT技术 PMP项目管理 免费题库
在线学习
文章 资源 问答 课堂 专栏 直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库

通过shell命令行精准调整时间

需求说明 有的时候我们做测试，需要把当前的时间，精准的往前或者往后调整个几秒钟，这个我写成了一个脚本，方便调整 思路是当前时间转换成unix时间，计算后，算到当前时间，然后设置 脚本 timenow=`date` unixtimenow=`date +%s` echo $timenow echo $

其他
原创 2020-12-18 16:34:00 187 阅读

rbd锁引起kvm虚拟机无法启动的故障

前言 环境因为一些问题（网络，或者磁盘，或者其它各种异常），引起了集群的状态的一些变化，变化之后，集群的某些虚拟机正常某些虚拟机出现异常，异常现象就是无法启动 特别是win server2008 ,会一直卡在滚动条这里 这个问题很久前碰到过一个哥们出现过，他问我是否遇到过，这个之前遇到过一次无法启动

其他
原创 2020-12-18 16:30:00 447 阅读

最简单的临时web服务器

前言 有的时候需要做个单页的网页显示，这个直接用python启动即可，但是存在一个问题，停止进程以后，如果网页正在被访问，socket会不释放，然后再启动就会提示端口占用，实际上是没有端口占用的 这个增加一个配置项就行 相关代码 #!/usr/bin/python3 from __future__

其他
原创 2020-12-17 23:18:00 981 阅读

预留linux系统随机端口-内核参数控制

前言 随机端口可能会占用后面准备使用的端口，然后在后面进程启动的时候，无法绑定端口引起服务异常 处理方法 通过内核参数控制，在/etc/sysctl.conf添加 net.ipv4.ip_local_reserved_ports=8000,8080 这个容易被冲掉，可以修改下默认的内核参数，通过tune实现 修改配置文件 /usr/lib/tuned/balanced/tuned.conf添加

Linux
原创 2020-12-16 11:15:00 683 阅读

简单的spec打包rpm包的方法

前言 有的时候为了提供一个完整的包，需要把一些零散的文件或者脚本汇总在一起提供，rpm包就是一个很好的方法，这里我们不需要复杂的写法，就纯粹打包的，复杂的可以参考内核或者其它软件包的打包方法 spec文件信息 Name: cephuse Version: 1.0 Release: 1%{?dist}

其他
原创 2020-11-25 18:15:00 615 阅读

内核补丁热更新ceph内核模块

前言 内核模块的更新一般需要卸载模块再加载，但是很多时候使用场景决定了无法做卸载的操作，而linux支持了热更新内核模块的功能，这个已经支持了有一段时间了，一直没有拿ceph的相关模块进行验证 注意模块的某些函数是不支持的，init的部分是不支持的，补丁弄完验证一下就可以知道支不支持，不支持的部分会

Ceph
原创 2020-11-19 17:10:00 559 阅读

rgw使用boto3生成可以访问的预签名url

##前言 如果想访问一个ceph里面的s3地址，但是又不想直接提供secrect key的时候，可以通过预签名的方式生成url 生成方法 下载boto3 脚本如下 cat s3.py import boto3 from botocore.client import Config s3_host="h

rgw
原创 2020-11-03 14:28:00 647 阅读

ceph的df容量显示计算

显示数据 [root@lab201 ~]# ceph df GLOBAL: SIZE AVAIL RAW USED %RAW USED 1092T 404T 688T 63.01% POOLS: NAME ID USED %USED MAX AVAIL OBJECTS rbd 0 17483G 15

Ceph
原创 2020-10-28 11:58:00 2956 阅读

ceph bluestore的db分区应该预留多大的空间

前言 关于bluestore的db应该预留多少空间，网上有很多资料 如果采用默认的 write_buffer_size=268435456 大小的话 那么几个rocksdb的数据等级是 L0: in memory L1: 256MB L2: 2.56 GB L3: 25.6 GB L4: 256 G

ceph
原创 2020-10-26 17:20:00 1399 阅读

ceph扩展bluestore的db分区

前言 在ceph 14版本里面才加入了bluefs-bdev-migrate，分区迁移相关的命令，那么在12版本里面其实也是可以扩展分区的 测试的版本 [root@lab102 ceph-0]# ceph -v ceph version 12.2.13 (584a20eb0237c657dc0567

Ceph
原创 2020-10-26 16:27:00 1433 阅读

重构克隆rbd的数据

前言 之前写过一篇重构rbd的元数据的文章，讲的是如果rbd的元数据丢失了，数据还在的时候怎么恢复相关的元数据，但是实际使用的场景是，集群可能崩溃了，数据还在，osd无法拉起来，数据又很重要，需要把数据拼接回来，这个也是最底层的一种数据还原方式了 网上有非快照的rbd的拼接的文章，对于快照使用方式的

其他
原创 2020-10-12 14:45:00 112 阅读

centos7单独编译nbd内核模块

前言 centos7默认内核没有带nbd的模块，可以通过下载跟当前版本匹配的内核源码，编译源码指定的模块，然后加载到系统 步骤 判断版本 [root@lab201 linux-3.10.0-957.el7]# uname -a Linux lab201 3.10.0-957.el7.x86_64 #

IT
原创 2020-10-09 10:34:00 900 阅读

通过tuned-adm调整服务器的各种参数

前言 centos7 服务器上面支持通过tuned进行统一的系统参数调整，以前我们可能会通过修改内核配置文件修改内核参数，通过echo去调整磁盘预读，等等很多调整会分散在各处 而系统实际上是可以通过一个地方进行固化的，这个就是tuned-adm做的事情，本篇是一个集合贴，会持续补充各种调整的方法 操

tuned-adm
原创 2020-09-25 12:18:00 266 阅读

测试cephfs写入海量文件

前言 测试cephfs的写入大量文件，通过mdtest写入1K大小的文件1亿个，每个目录里面文件为1万，目录总数为1万，总文件数目就为1亿了 写入的命令 mdtest -C -F -L -z 4 -b 10 -I 10000 -d /mnt/1yi/ -w 1024 -C 只创建 -F 只创建文件

Ceph
原创 2020-09-22 16:23:00 815 阅读

iscsi一致性的测试验证方法

前言 如果使用场景是多路径iscsi，那么数据一致性的就需要去验证一致性，就需要一个比较通用的测试方法，最近在处理这块，记录下简单的测试方法 测试方法 写入数据 dd if=/dev/urandom of=/dev/sdb bs=512 count=8000 oflag=direct 或者 dd i

其他
原创 2020-09-18 15:41:00 109 阅读

ceph各个版本之间参数变化分析

前言 本篇主要是分析ceph的版本之间参数的变化，参数变化意味着功能的变化，通过参数来分析增加，删除，修改了哪些功能，以及版本之间的变化，本篇主要通过导出参数，然后通过脚本去比对不同的版本的参数变化 14版本之前安装一个ceph-common,然后touch一个空配置文件就可以通过ceph --sh

Ceph
原创 2020-09-15 11:02:00 869 阅读

rgw的rgw_thread_pool_size配置调整

前言 在比对rgw的不同前端的区别的时候，官方说civetweb是通过线程池来控制连接的，beast是后面加入了流控相关的，这块一直也没有调整过相关的参数，然后通过ab压测了一下，还是有很明显的区别的 测试很简单，虚拟机下面就可以完成 测试过程 rgw_thread_pool_size = 512

rgw
原创 2020-09-11 12:05:00 754 阅读

rgw前端替换civetweb为beast

前言 ceph的rgw现在提供了两种前端， civetweb和beast 配置 修改配置文件 rgw_frontends = civetweb port=7481 为 rgw frontends = beast port=7481 然后重启rgw进程，查看日志 2020-09-11 10:23:52

rgw
原创 2020-09-11 10:40:00 1144 阅读

配置内网访问的TV

前言 通过内网模式访问tv远程机器 方法 云主机配置 一台云主机，云主机申请两个公网IP 云主机启动两个frps进程绑定到两个内网的ip 客户端配置 远程一台linux跳板机运行frpc，启动两个进程，分别访问不同的公网IP [tv] type = tcp local_ip = 192.168.1.

其他
原创 2020-09-10 20:30:00 149 阅读

关于vm.min_free_kbytes的合理设置推测

前言 之前系统出现过几次hung住的情况，没有oom，也没有其它内存相关的信息，而linux设计就是去尽量吃满内存，然后再回收清理的机制 探讨 目前这个参数还没有找到合适的处理这个预留的参数，一般也没有去调整的 系统是默认根据物理内存进行计算得到一个数值得 sysctl -a|grep min_fr

其他
原创 2020-09-09 16:45:00 1380 阅读

rbd的删除回收站功能

##前言 rbd 提供了一个回收站功能，这个是属于防呆设计，防止误操作删除rbd引起无法恢复的情况，rbd正常情况下的删除是马上会在后台回收空间的，这个也听说过有人做过误删除的操作，那么这个设计就是从操作逻辑上来尽量避免这个失误的 相关操作 命令比较简单就几条命令，luminous版本就支持了，提供

其他
原创 2020-09-09 11:45:00 1382 阅读

ceph打印出每秒的IO和pg状态

前言 在ceph 的jewel版本以及之前的版本，通过ceph -w命令是可以拿到每秒钟ceph集群的io状态的，现在的版本是ceph -s一秒秒手动去刷，ceph -w也不监控io的状态了，有的时候需要看io是否平滑，或者恢复还剩多少，能够比较直观的去看 实际上通过简单的脚本就可以实现之前差不多的

Ceph
原创 2020-09-09 10:47:00 198 阅读

rgw配置删除快速回收对象

前言 做rgw测试的时候，经常会有删除文件的操作，而用默认的参数的时候，rgw是通过gc回收机制来处理删除对象的，这个对于生产环境是有好处的，把删除对业务系统的压力分摊到不同的时间点，但是测试的时候，可能需要反复的写入删除，而这种情况下，可能希望能够迅速的回收对象，那么就需要修改几个参数了 参数 主

rgw
原创 2020-09-08 11:20:00 1728 阅读

ipmi常用的命令行命令

前言 记录一些常用的命令行操作 命令 查询机器的电源状态 ipmitool -I lanplus -U admin -P admin -H 172.16.21.215 power status 硬重启机器 ipmitool -I lanplus -U admin -P admin -H 172.16

其他
原创 2020-09-07 10:59:00 913 阅读

自动化翻译ceph文档

需求很简单，翻译官网的操作文档 下载ceph代码luminous版本 这个只用来编译doc的，我们只需要最新的这个分支即可，拉最少的代码 git clone -b v12.2.13 --single-branch --depth 1 git://github.com/ceph/ceph.git ce

其他
原创 2020-09-04 15:26:00 192 阅读

希捷powerchoice磁盘休眠功能arm打包

官方只提供了x86下面的包，没有提供arm下面的包，而我们的arm机器是32位的，需要编译一个支持armhf的二进制文件，这个文件只需要一个即可，但是编译是整套编译的，并且我们需要选定指定的版本，关闭nvme的支持（arm的缺库，也用不上），不带debug信息的 准备编译环境 编译环境选择的是ubu

其他
原创 2020-08-25 15:10:00 121 阅读

希捷powerchoice磁盘休眠功能配置方法

本篇关于希捷磁盘休眠的配置方法 准备设置的软件 下载地址 https://raw.githubusercontent.com/Seagate/ToolBin/master/SeaChest/PowerControl/v1.10.0/Linux/SeaChest_PowerControl_1100_1

其他
原创 2020-08-25 14:54:00 739 阅读

公网临时传输大文件

前言 我们经常遇到的一个场景是需要把一个大文件通过互联网传递到另外一个地方，类似日志，或者大的安装包，有的时候是传输给自己，有的时候传输给别人 传输方式 百度盘我们都知道速度限制到怀疑人生，没会员的时候基本就是浪费时间，这种基本就不考虑做传输工具，备份下还可以，这里介绍的是几款比较方便的传输方式，这

其他
原创 2020-07-31 14:45:00 698 阅读

历史文章

简单安装配置mariadb 如何构建自己的远程高带宽环境 mac常用软件记录 简单的统计剩余ceph迁移时间 通过shell命令行精准调整时间 rbd锁引起kvm虚拟机无法启动的故障 最简单的临时web服务器 预留linux系统随机端口-内核参数控制 简单的spec打包rpm包的方法 内核补丁热更新

其他
原创 2020-07-30 11:43:00 75 阅读

arm64大服务器安装ubuntu18看不到安装界面

前言 最近在使用arm的大服务器需要用到ubuntu相关的一些东西，在操作系统安装过程中遇到了一些问题 记录 华为鲲鹏服务器 这个默认安装centos的都很顺利，安装ubuntu18最新的，impi就花屏了，然后找各种地方都没找到原因，看到官网的，用18.04.01写的文档，然后试了下18.04.0

IT
原创 2020-07-14 16:33:00 238 阅读
  • 1
  • 2

Copyright © 2005-2025 51CTO.COM 版权所有 京ICP证060544号

关于我们
官方博客 全部文章 热门标签 班级博客
了解我们 网站地图 意见反馈
友情链接
鸿蒙开发者社区 51CTO学堂
51CTO 软考资讯