概况

用python获取snmp信息有多个现成的库可以使用,其中比较常用的是 netsnmp 和 pysnmp 两个库。网上有较多的关于两个库的例子。

本文重点在于如何并发的获取snmp的数据,即同时获取多台机器的snmp信息。

netsnmp

python的netsnmp,其实是来自于net-snmp包。python通过一个c文件调用net-snmp的接口获取数据。因此,在并发获取多台机器的时候,不能够使用协程获取。因为使用协程,在get数据的时候,协程会一直等待net-snmp接口返回数据,而不会像socket使用时那样在等待数据时把CPU切换给其他协程使用。从这点上来说,使用协程和串行获取没有区别。

可以使用线程,多线程获取(当然也可以使用多进程)。多个线程同时调用net-snmp的接口获取数据,然后cpu在多个线程之间不停切换。当一个线程获取一个结果后,可以继续调用接口获取下一个snmp数据。

经过测试,python3.6版本安装对应到net-snmp-5.7.2版本可以正常工作。

pysnmp测试

pysnmp是用python实现的一套snmp协议的库。其自身提供了对于异步的支持,直接安装pysnmp包即可,

两者性能测试

网上摘取测试比较数据如下:

在同一个环境下,对两者进行了性能测试。两者对198个host,10个oid进行采集。

image.png

可以看到netsnmp的采集速度跟线程数有关。当线程数增大到一定程度,采集时间不再缩短。因为开辟线程同样会消耗时间。而已有的线程已经足够处理。

pysnmp性能较之略差一下。详细分析pysnmp在添加任务(执行getCmd时)消耗了约1.2s,之后的采集约消耗3.3秒。

在增加了oid数,在进行实验。host仍然是198个,oid是42个。

image.png

实际测试数据

对于netsnmp,环境上运行测试,snmp get操作比较多,单个访问在30多ms左右;walk操作时间比较长,访问50个host,9个oid,启用20个线程或者进程,对于多线程和多进程,时间没有太大差别,都在80s-100s之间。再启用更多都线程或者进程时间也不好缩短,由此可见,对于walk操作,时间大部分花费在异步等待上,多线程整体时间并没有显著改善,而且进程开销更大,因此启动20个线程轮询snmp数据;