一.NUMA设置
单机单实例，建议关闭NUMA，关闭的方法有三种：
1.硬件层，在BIOS中设置关闭；
2.OS内核，启动时设置numa=off；
3.可以用numactl命令将内存分配策略修改为interleave（交叉）
方法3
修改mysql.server 330行加上numactl
vi /opt/mysql/bin/mysql.server
/usr/bin/numactl --interleave all $bindir/mysqld_safe --datadir=$datadir --pid-file=$server_pid_file $other_args >/dev/null 2>&1 &
wait_for_pid created $!; return_value=$?
numastat 查看内存分配
node0 node1
numa_hit 56506002860 201877592362
numa_miss 9099468163 1450668930
numa_foreign 1450668930 9099468163
interleave_hit 6205106 4793392
local_node 56485823400 201848609519
other_node 9119647623 1479651773
二.IO调度算法
Linux有四种IO调度算法：CFQ，Deadline，Anticipatory和NOOP，CFQ是默认的IO调度算法。完全随机的访问环境下，CFQ与Deadline，NOOP性能差异很小，但是一旦有大的连续IO，CFQ可能会造成小IO的响应延时增加，所以数据库环境建议修改为deadline算法，表现更稳定。
IO调度算法都是基于磁盘设计，所以减少磁头移动是最重要的考虑因素之一，但是使用Flash存储设备之后，不再需要考虑磁头移动的问题，可以使用NOOP算法。NOOP的含义就是NonOperation，意味着不会做任何的IO优化，完全按照请求来FIFO的方式来处理IO。
IO调度,默认cfq
echo 'deadline' > /sys/block/sdb/queue/scheduler
cat /sys/block/sdb/queue/scheduler
noop anticipatory [deadline] cfq
减少预读,默认128
echo '16' > /sys/block/sda/queue/read_ahead_kb
增大队列,默认128
echo '512' > /sys/block/sda/queue/nr_requests
尽量不使用交换区,默认60
echo '0' > /proc/sys/vm/swappiness
开机运行
vi /etc/rc.local
echo 'deadline' > /sys/block/sdb/queue/scheduler
echo '16' > /sys/block/sda/queue/read_ahead_kb
echo '512' > /sys/block/sda/queue/nr_requests
vi /etc/sysctl.conf
vm.swappiness=0
参考:
http://blog.wl0.org/2011/03/how-to-start-mysqld-using-numactl/
http://jcole.us/blog/archives/2010/09/28/mysql-swap-insanity-and-the-numa-architecture/
http://linuxcommand.org/man_pages/numactl8.html
http://software.intel.com/zh-cn/blogs/2008/11/24/numaxeon1/
http://www.mysqlops.com/2011/07/01/mysql_multi_using_numactl.html
https://wickie.hlrs.de/platforms/index.php/Thread_And_Memory_Pinning
http://www.cyberciti.biz/tips/linux-hugetlbfs-and-mysql-performance.html
http://www.hellodb.net/2011/07/mysql-linux-hardware-tuning.html
http://blog.csdn.net/liuben/article/details/5482167
http://hatemysql.com/2011/07/05/mysql%E6%9C%BA%E5%99%A8%E9%85%8D%E7%BD%AE%E6%A0%87%E5%87%86/
相关 [numa io 优化] 推荐：
修改numa和io调度优化mysql性能
- 高春辉 - C1G军火库
单机单实例，建议关闭NUMA，关闭的方法有三种：. 1.硬件层，在BIOS中设置关闭；. 2.OS内核，启动时设置numa=off；. 3.可以用numactl命令将内存分配策略修改为interleave（交叉）. 修改mysql.server 330行加上numactl. numastat 查看内存分配.
Innodb IO优化－配置优化
- - OurMySQL
对于数据库来讲大多瓶颈都出现在IO问题上，所以现在SSD类的设备也才能大行其道. 那数据库的IO这块有什么可以优化的吗. 我这里大致谈一下我的看法，希望能达到一个抛砖引玉的效果. 这里谈一下数据库本身的配置方面. 配置方面对于IO优化的原则：尽可能能缓存，减少读对数据库的随机IO的请求；同时减少写的随机IO的随时发生，利用各种buffer去缓存.
hadoop的IO和MapReduce优化参数
- - CSDN博客系统运维推荐文章
在MapReduce执行过程中，特别是Shuffle阶段，尽量使用内存缓冲区存储数据，减少磁盘溢写次数；同时在作业执行过程中增加并行度，都能够显著提高系统性能，这也是配置优化的一个重要依据. 下面分别介绍I/O属性和MapReduce属性这两个类的部分属性，并指明其优化方向.
访问日志IO性能优化
- - CSDN博客推荐文章
在高并发量的场景下磁盘IO往往是性能的瓶颈所在，访问日志涉及到频繁的写操作，所以这部分要尽可能地优化，不然将拖累系统的整体性能. 针对文件记录及数据库记录两种方式可以有以下措施提高写性能，. 将日志写入文件的一般操作步骤是打开-写入-关闭，但假如在需要频繁写入日志的场景下，这种方式在性能上肯定会存在问题，因为每次打开关闭都是需要成本开销的，所以必须要想想是否有别的更好的方式，竟然问题出现在打开关闭的次数，那么解决问题思路就从这里下手，可以在第一次打开写入日志后不进行关闭操作，保持打开的状态，下一次写入则无需再次打开可直接写入.
NUMA微架构
- - 夏清然的日志
现在开始补日志，逐步的扫清以前写了一半的和“欠账未还的”. 半年之前开的头，今天先把NUMA说完. PC硬件结构近5年的最大变化是多核CPU在PC上的普及，多核最常用的SMP微架构：. 多个CPU之间是平等的，无主从关系（对比IBM Cell）；. 多个CPU平等的访问系统内存，也就是说内存是统一结构、统一寻址的（UMA，Uniform Memory Architecture）;.
梦幻西游服务器 IO 的一点优化
- zz - 云风的 BLOG
关注梦幻西游服务器的性能问题，是源于前几天跟同事的聊天. 谈到能否把梦幻西游服务器做成无盘站，或是放进虚拟机里，便于日常维护管理. 意外的了解到，现在磁盘 IO 性能居然成了梦幻西游服务器的瓶颈. 据我所知，梦幻西游的服务器数据储存是这样做的：. 主游戏进程不负责储存，一切都在内存中. 所有玩家的数据就是内存数据结构.
NUMA技术相关笔记
- - CSDN博客架构设计推荐文章
起源于在mongo启动脚本中看到numactl --interleave=all mongod .... NUMA,非统一内存访问(Non-uniform Memory Access),介于SMP(对称多处理)和MPP(大规模并行处理)之间，各个节点自有内存(甚至IO子系统),访问其它节点的内存则通过高速网络通道.
物理IO与逻辑IO
- - 操作系统 - ITeye博客
IO性能对于一个系统的影响是至关重要的. 一个系统经过多项优化以后，瓶颈往往落在数据库；而数据库经过多种优化以后，瓶颈最终会落到IO. 而IO性能的发展，明显落后于CPU的发展. Memchached也好，NoSql也好，这些流行技术的背后都在直接或者间接地回避IO瓶颈，从而提高系统性能. 上图层次比较多，但总的就是三部分.
NUMA 架构中 MySQL 的 “swap insanity” 问题
- khsing - Linux@SOHU
翻译：王鑫、朱翊然、李凯、曾怀东、马少兵、林业. 在一台包括了2个4核CPU，64GB内存的服务器上，给 MySQL 配置了 48GB 之巨的 InnoDB 缓冲，随着时间的推移，尽管观察到的数据（见最后注1）表示并没有真正的内存压力，Linux 也会把大量的内存交换到磁盘上. 通过监控发现，配置的内存超过了实际所需，而且也不存在内存泄漏，mysqld的RSS占用正常且稳定.
NUMA架构的CPU -- 你真的用好了么？
- - cenalulu's Tech Blog
本文从NUMA的介绍引出常见的NUMA使用中的陷阱，继而讨论对于NUMA系统的优化方法和一些值得关注的方向. 文章欢迎转载，但转载时请保留本段文字，并置于文章的顶部. 作者：卢钧轶(cenalulu). 本文原文地址： http://cenalulu.github.io/linux/numa/.
