DBA大董的博客_Linux

欢迎

使用bbcp代替rsync进行数据同步

在运维中，我们通常使用rsync来进行文件的备份和传输，向较于scp、ftp等工具，rsync可以实现差异同步和断点续传（之前的文章提过但rsync也存在局限性，在上篇文章中提到过，在万兆网络环境下scp和rsync的传输速度都不太理想，及时修改加密方式，性能提升也是有限。文章中提到bbcp的传输速度远高于rsync，那么bbcp是否能够替代rsync来实现差异同步和断点续传呢？答案是肯定的。

数据库

服务器

运维

数据

数据目录

原创 5月前 59 阅读

Linux小技巧之文件差异对比

提起文件差异对比，最常想到的是diff，如果内容少还好，内容多的话就不太友好，其实 Linux 下还有一个小工具 comm 能够更加方便的对比两个文件。

linux

运维

DBA

原创 11月前 99 阅读

Bcc-tools 中文件系统相关工具介绍

linux

运维

笔记

json

bc

原创 11月前 172 阅读

mount你不知道的那些功能-挂载点共享

mount是 Linux 最常用的功能，用来将存储设备挂载到目录的挂载点上。注意：Linux 允许将文件系统挂载到已附加了文件系统的目录。这种操作通常很危险。

linux

运维

服务器

文件系统

常用功能

原创 2023-10-31 10:31:52 127 阅读

Linux小技巧之awk必知必会

Linux shell 三剑客之一，awk功能非常强大。awk不仅是小工具还是一种编程语言，功能之强大远超想象。

linux

运维

分隔符

时间格式转换

Shell

原创 2023-10-29 14:06:35 97 阅读

分区、裸盘、LVM到底咋选？

如果部署的环境是物理机，那么直接使用整个磁盘就可以，无需进行分区，是否需要使用LVM，看后期是否需要对文件系统进行扩展，还是只需要新增挂载点。比如说：TDengine 时序数据库，只有企业版支持多级存储，对于企业用户，可以通过增加挂载点来扩容，则不需要考虑 LVM。而对于开源版客户，最好使用 LVM 方便后期进行扩容。部署环境是云主

运维

tdengine

linux

磁盘分区

磁盘阵列

原创 2023-10-14 07:40:47 400 阅读

RHEL官网文档阅读笔记

以下内容来自RedHat 官方文档，版本为RHEL 8。主要是一些使用技巧和注意事项。影响IO的因素数据写入或读取特征顺序或随机buffered 或 Direct IO数据与底层 geometry 保持一致块大小文件系统大小日志大小和位置记录访问时间确保数据可靠性预抓取数据预分配磁盘空间文件碎片资源争用

笔记

服务器

linux

数据

设备名

原创 2023-10-14 07:40:34 100 阅读

Linux文件系统内核参数aio-max-nr&file-max&nr_open

常用的文件系统内核参数主要有如下三个：nr_open, aio-max-nr, file-max。以下介绍均来自。

linux

服务器

运维

文件句柄

sed

原创 2023-10-14 07:40:22 359 阅读

IO和文件系统性能分析工具

vmstat, iostat, blktrace, bpftrace 用于IO和文件系统性能分析工具

linux

运维

ios

数据

bc

原创 2023-10-14 07:40:16 136 阅读

一文说清楚swappiness

swappines 如何设置，Oracle，MySQL，PostgreSQL，TDengine中swappniess中设置。min_free_kbytes 设置于SWAP 启用。

linux

数据库

运维

sed

映射关系

原创 2023-07-30 22:53:55 161 阅读

sed 技巧收录

sed 是非常强大的文本编辑器，就是因为太强大，所以很多用法记不住。以下是整理自己工作中常用命令。

linux

运维

sed

参数说明

特殊字符

原创 2023-03-26 20:41:49 104 阅读

服务器被黑后最实用的命令lsattr/chattr

如果你的 Linux 服务器被黑过，那么对 lsattr/chattr 这个两个命令肯定不陌生。Linux 服务器被黑后，我们通常会发现/etc/hosts, .ssh/authorized_keys, /etc/crontab, /etc/passwd 等文件无法删除或无法修改。这些现象就是文件属性(attribute)被修改造成的。文章目录1.用法简介2.属性说明3.示例

服务器

linux

运维

系统安全

web安全

原创 2023-02-05 08:01:11 221 阅读

Ubuntu 18.04重启后网络配置失效处理办法

最近遇到个神奇的问题，两台 Ubuntu 18.04 服务器重启后网络配置失效，ip a显示网卡状态为DOWN下的配置也是正确的，服务器上还没有等命令。不知道是不是 Ubuntu 18 的BUG，遇到这种情况只能手动配置网络了。我的网络如下：地址段： 192.168.1.0/24网关： 192.168.1.1。

ubuntu

网络

服务器

运维

linux

原创 2023-01-14 01:37:26 1600 阅读

Proxmox PVE7 Centos7 Container 启动异常 old systemd (＜ v232) detected

old systemd (< v232) detected, container won't run in a pure cgroupv2 envir

linux

运维

服务器

虚拟化

容器

原创 2022-10-23 00:45:30 1755 阅读

Ubuntu/CentOS 磁盘分区扩展

虚拟化环境，通常在创建服务器分配的磁盘空间并不大，当后期数据量增大时，需要进行扩展。如果使用的是 LVM 则可以方便

ubuntu

centos

服务器

运维

linux

原创 2022-09-17 02:15:23 873 阅读

性能分析方法-《性能之巅》笔记

根据资源（CPU、内存、网络、磁盘等

Linux

运维

性能优化

数据库

性能分析

原创 2022-09-07 16:57:46 474 阅读

一文说清楚 Linux TCP 内核参数

Linux 运维中绕不开参数优化，尤其是 Naginx、Tomcat 这种 Web 应用中，需要调整很多 TCP 内核参数。不止 W

linux

tcp/ip

服务器

nginx

tomcat

原创 2022-07-17 00:11:59 1406 阅读

Linux net.core.somaxconn 参数详解

Linux 操作系统全局参数，每个 TCP 监听端口的队列长度。在 CentOS/RHEL 7.9 中，默认值为128

linux

运维

服务器

tcp/ip

nginx

原创 2022-07-10 00:51:12 2858 阅读

CVE-2022-26134 Confluence OGNL 注入漏洞处理

CVE-2022-26134 Confluence OGNL 注入漏洞处理。 Confluence 6.x Confluence 6.15 Confluence 6.15.7 不升级的临时修复方案。

java

开发语言

jira

安全

web安全

原创 2022-06-07 21:10:58 568 阅读

CVE-2022-26134 Confluence OGNL 注入漏洞检测

CVE-2022-26134 是2022年6月4号新发布的漏洞，360安全中心描述如下：在上一篇

安全

web安全

python

原创 2022-06-07 21:06:02 143 阅读

如何清理 lsof 中 deleted 状态的文件

在日常运维中，经常遇到磁盘空间满，但是找不到相应文件的情况。通

运维

linux

bash

sed

centos

原创 2022-05-25 10:00:36 2229 阅读

vscode中Python提示reportMissingImports

Visual Studio Code(VS Code)是微软2015年推出的一个轻量但功能强大的源代码编辑器，基于 Electron 开发，支持 Windows、Linux 和 macOS 操作系统。在编写 Python 时经常要 import 一些模块，有时 VSCode 会在模块名称下方标注波浪线

python

vscode

xcode

创建文件

根目录

原创 2022-05-23 09:56:13 2205 阅读

google authenticator no scratch code

最近遇到一个奇葩问题，用户使用动态验证报错openvpn(

时间设置

sed

服务器

原创 2022-04-12 10:50:28 128 阅读

在公用云环境部署TDengine的那些坑

使用阿里云、华为云、腾讯云、微软云、AWS等等公用云部署TDengine优点是非常明显的：可用性高；可动态扩展。但是在公有云部署还是有些坑需要避免。在TDengine写入性能估算中我们知道通常产生瓶颈的是磁盘和网络。在公有云中，这两个也是最常见的坑。见下图阿里云对ECS服务器的规格描述：以ecs.g5.2xlarge为例，8C/32G 对于TDengine算是比较高的配置了。但我们看网络带宽，默认提供的网卡速率是2.5Gb，最大支持4块弹性网卡。也就是说，默认网络传输速度800MB/s，最大

tdengine

阿里云

腾讯云

服务器

公有云

原创 2022-04-12 10:50:09 227 阅读

一张图解释dirty_background_ratio与dirty_ratio

一张简单的示意图官方定义：://.kernel.org/1、vm.

sed

.net

原创 2022-04-12 10:49:25 440 阅读

AIX 计划任务中 find 删除无法执行成功

find / -name “test” -exec rm -f {} \;直接执

linux

运维

aix

计划任务

原创 2022-04-12 10:37:01 117 阅读

du与df显示结果不一致

df与du统计方式不同，当文件被删除，但仍被占用时，du不会进行统计。使用 lsof |grep delete 查找文件，并清除占用进程即可恢复。实验如下：1.查看当前使用情况[root@ms10 ~]# df -hFilesystem Size Used Avail Use% Mounted on/dev/sda3 16G 8.8G 7.1G 56% /devtmpfs 909M 0 909M 0% /devtmpfs

linux

sed

查找文件

文件系统

其他

原创 2022-04-12 10:35:40 123 阅读

find 删除命令rm还是delete更快

当使用find来删除指定文件时有多种方法，但删除大量文件时存在效率问题。创建百万测试文件for i in {1..1000000} ; do touch tt$i; done方法1：xargs rm -f##由于time命令不支持管道符，因此将命令写入脚本中执行。[root@iZ259iq283hZ tmp]# cat del.shfind ./ -type f -name "tt*" |xargs rm -f[root@iZ259iq283hZ tmp]# time ./del.sh

linux

shell

文件名

外部调用

当前目录

原创 2022-04-12 10:35:39 191 阅读

进程是如何被OOM杀掉的

OOM 通常是指Out of Memory (OOM) killer.如何避免OOM如何优化OOMOOM评分机制vm.panic_on_oom = 0|1 默认0/proc/PID/oom_scorevm.min_free_kbytes

linux

OOM

内存不足

物理内存

内存分配

原创 2022-04-12 10:35:37 138 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

DBA大董的博客

欢迎

最新Wireshark查看包中gzip内容

使用bbcp代替rsync进行数据同步

Linux小技巧之文件差异对比

Bcc-tools 中文件系统相关工具介绍

mount你不知道的那些功能-挂载点共享

Linux小技巧之awk必知必会

分区、裸盘、LVM到底咋选？

RHEL官网文档阅读笔记

Linux文件系统内核参数aio-max-nr&file-max&nr_open

IO和文件系统性能分析工具

一文说清楚swappiness

sed 技巧收录

服务器被黑后最实用的命令lsattr/chattr

Ubuntu 18.04重启后网络配置失效处理办法

Proxmox PVE7 Centos7 Container 启动异常 old systemd (＜ v232) detected

Ubuntu/CentOS 磁盘分区扩展

性能分析方法-《性能之巅》笔记

一文说清楚 Linux TCP 内核参数

Linux net.core.somaxconn 参数详解

CVE-2022-26134 Confluence OGNL 注入漏洞处理

CVE-2022-26134 Confluence OGNL 注入漏洞检测

如何清理 lsof 中 deleted 状态的文件

vscode中Python提示reportMissingImports

google authenticator no scratch code

在公用云环境部署TDengine的那些坑

一张图解释dirty_background_ratio与dirty_ratio

AIX 计划任务中 find 删除无法执行成功

du与df显示结果不一致

find 删除命令rm还是delete更快

进程是如何被OOM杀掉的