centos cpu调度策略切换 linux io调度算法修改

转载

mob64ca1404476b 2024-02-19 07:21:54

文章标签 centos cpu调度策略切换 mysql io调度 mysql 重启文件系统 文章分类 架构后端开发

Mysql运行环境优化(Linux系统)

一、修改Linux默认的IO调度算法.

linux默认的IO调度算法为cfq,需要修改为dealine,如果是SSD或者PCIe-SSD设备,需要修改为noop,可以使用下面两种修改方式。

1、在线动态修改,重启失效。

echo “deadline” > /sys/block/sda/queue/scheduler

tips:这里的sda代表你需要修改的硬盘,根据你实际情况修改。

2、修改/etc/grub.conf,永久生效。

修改/etc/grub.conf配置文件,在kernel那行增加一个配置,例如:

kernel /vmlinuz-2.6.32-279.el6.x86_64 ro root=UUID=e01d6bb4-bd74-404f-855a-0f700fad4de0 rd_NO_LUKS rd_NO_LVM LANG=en_US.UTF-8 rd_NO_MD SYSFONT=latarcyrheb-sun1

6 crashkernel=auto KEYBOARDTYPE=pc KEYTABLE=us rd_NO_DM elevator=deadline rhgb quiet

主要关注elevator这个参数,设置内核的话需要重启系统才能生效。

最后可以通过 cat /sys/block/sda/queue/scheduler 观察一下,修改前和修改后的区别。

二、扩大文件描述符

这个是经常修改的参数,高并发的程序都会修改。

1、动态修改,重启失效,只能使用root,并且当前session有效。

ulimit -n 51200

2、修改配置文件,永久生效。

在/etc/security/limits.conf配置文件中增加一行

* hard nofile 51200

扩大可开启进程数 nprocess /etc/security/limits.conf

在/etc/security/limits.conf配置文件中增加一行

* hard nproc 51200

最后修改/etc/pam.d/login文件添加

session required /lib64/security/pam_limits.so

重启系统以后使用 ulimit -a 命令查看是否生效。

三、禁用numa特性

新一代架构的NUMA不适合跑数据库,它本意是为了提高内存利用率,但是实际效果不好,反而可能导致一CPU的内存尚有剩余,但是另外一个不够用,发生swap的问题,因此建议关闭或者修改NUMA的调度机制。

1、修改/etc/grub.conf关闭NUMA,重启后生效。

kernel /vmlinuz-2.6.32-279.el6.x86_64 ro root=UUID=e01d6bb4-bd74-404f-855a-0f700fad4de0 rd_NO_LUKS rd_NO_LVM LANG=en_US.UTF-8 rd_NO_MD SYSFONT=latarcyrheb-sun1

6 crashkernel=auto KEYBOARDTYPE=pc KEYTABLE=us rd_NO_DM elevator=deadline numa=off rhgb quiet

2、修改/etc/init.d/mysql或者mysqld_safe脚本,设置启动mysqld进程时的NUMA调度机制,例如。

在新版的mysqld_safe脚本中自带如下内容,所以不需要添加,你可以看看你的mysqld_safe脚本有没有如下内容。

if true && test $numa_interleave -eq 1
then
# Locate numactl, ensure it exists.
if ! my_which numactl > /dev/null 2>&1
then
log_error “numactl command not found, required for –numa-interleave”
exit 1
# Attempt to run a command, ensure it works.
elif ! numactl –interleave=all true
then
log_error “numactl failed, check if numactl is properly installed”
fi  # Launch mysqld with numactl.
cmd=”$cmd numactl –interleave=all”
elif test $numa_interleave -eq 1
then
log_error “–numa-interleave is not supported on this platform”
exit 1
fi

四、修改swappiness设置swappiness是linux的一个内核参数,用来控制物理内存交换出去的策略.它允许一个百分比的值,最小的为0,最大的为100,改值默认是60.可以通过下面命令观察

# sysctl -a | grep swappiness

vm.swappiness = 60

这个设置值到底有什么影响呢？

vm.swappiness设置为0表示尽量少使用swap,100表示尽量将inactive的内存页交换到swap里或者释放cache(cache类似于预读的文件)。

inactive内存的意思是程序映射着，但是”长时间”不用的内存。我们可以利用vmstat查看系统里面有多少inactive的内存。

# vmstat -a 1
procs ———–memory———- —swap– —–io—- –system– —–cpu——
r  b   swpd   free  inact active   si   so    bi    bo   in   cs us sy id wa st
0  0 16930764 192752 3673320 28601732    0    0    19    31    0    0  1  0 99  0  0
1  0 16930764 192752 3673320 28601732    0    0     0     0 1136  271  0  0 100  0  0
0  0 16930764 192748 3673320 28601732    0    0     0    56 1167  325  1  0 99  0  0
0  0 16930764 192740 3673320 28601732    0    0     0    40 1039  164  0  0 100  0  0

在Centos7之前,这个值建议设置为0，但是在新版本的内核里面,这样设置可能导致OOM(内存溢出),然后kernel会杀掉使用内存最多的mysqld进程。

所以现在这个值推荐设置为1,设置方法如下:

在/etc/sysctl.conf文件中增加一行。

vm.swappiness = 1

# sysctl -p //运行这个命令,让配置立刻生效。

五、优化文件系统挂载参数。

首先关于使用什么文件系统,网上很多测试,烟花缭乱.大概的结论如下。

xfs > ext3:xfs性能优于ext3

ext4 > ext3：ext4性能优于ext3

ext4 ??? xfs ：xfs和ext4谁更优秀？我说不太准…..

然后就是挂载文件系统使用的参数:

defaults,noatime,nodiratime,barrier=0(在xfs上使用nobarrier)

文件系统挂载参数是在/etc/fstab文件中修改,重启时候生效。

noatime表示不记录访问时间,nodiratime不记录目录的访问时间。

barrier=0,表示关闭barrier功能.barrier的主要目的是为了保证磁盘写数据的安全性,但是会降低性能。如果有BBU之类的电池备份电源保证控制卡不瞬间掉电,那么这个功能就可以放心大胆的关闭。

可以通过一下命令,查看配置是否生效.

# cat /proc/mounts
rootfs / rootfs rw 0 0
proc /proc proc rw,nosuid,nodev,noexec,relatime 0 0
sysfs /sys sysfs rw,seclabel,nosuid,nodev,noexec,relatime 0 0
devtmpfs /dev devtmpfs rw,seclabel,nosuid,relatime,size=8188388k,nr_inodes=2047097,mode=755 0 0
devpts /dev/pts devpts rw,seclabel,relatime,gid=5,mode=620,ptmxmode=000 0 0
tmpfs /dev/shm tmpfs rw,seclabel,nosuid,nodev,relatime 0 0
/dev/sda3 / ext4 rw,seclabel,relatime,noatime,nodiratime,barrier=0,data=ordered 0 0
none /selinux selinuxfs rw,relatime 0 0
devtmpfs /dev devtmpfs rw,seclabel,nosuid,relatime,size=8188388k,nr_inodes=2047097,mode=755 0 0
/proc/bus/usb /proc/bus/usb usbfs rw,relatime 0 0
none /proc/sys/fs/binfmt_misc binfmt_misc rw,relatime 0 0

/dev/sda1 /boot ext4 rw,seclabel,noatime,nodiratime,barrier=0,data=ordered 0 0相关阅读:

Win10的UAC对话框不可用按钮呈灰色该怎么办?

Windows 10 Build 10134即将发布微软测试负责人透露

sqlite循环批量插入数据采用批处理文件实现

Java设计模式之状态模式(State模式)介绍

苹果Macbook变压器妙用介绍

android Tween Animation属性设置方法实例

Android获取SD卡中选中图片的路径(URL)示例

Win10系统任务栏windows小图标到底有什么用?

Java的JSON转换库GSON的基本使用方法示例

Android实现短信验证码自动拦截读取功能

javascript学习笔记(八)正则表达式