aaabbbbttt的博客_Python

python处理大文件的内存问题

同学们时常会遇到要处理大文件的情况，现在是大数据时代，有些文件动辄几十个G，我们在处理这样文件的时候一不小心就把内存撑爆了，或者程序被强制kill掉了。原因是你一次性把文件的所有内容都读取到内存里面了。python里面有方法可以一段一段的读文件。

大文件

python

置顶原创 2016-11-01 16:52:49 8081 阅读 1收藏

python中json和字符编码的转换

json是用来转换python object 和json format 的，字符编码有gb2312，gb18030/gbk，utf-8等。在 Python 中出现的 str 都是用字符集编码的 ansi 字符串。Python 本身并不知道 str 的编码，需要由开发者指定正确的字符集 decode。因为 Python 认为 16 位的 unicode 才是字符的唯一内码，而大家常用的字符集如 gb

python

json

字符编码

原创 2016-09-13 14:04:33 9275 阅读

select.select()文件句柄的限制

python中的select.select()函数调用了系统底层的select(),但是他有一个限制，就是当打开的文件句柄的数字达到1024后，就会出现下面的错误 ValueError: filedescriptor out of range in select()

select

文件句柄

原创 2016-08-19 20:24:02 5865 阅读

利用sshpass和ssh编写脚本远程执行命令

ssh

sshpass

subprocess

原创 2016-08-01 18:27:46 8700 阅读

python unittest编写测试代码

做开发的朋友在写代码的同时一般都会写测试代码，这对于做运维的同学却很少用。今天我们就来写写测试代码，用unittest模块。

python

unittest

TestCase

原创 2016-07-05 16:53:04 1677 阅读

python抓取系统metrics吐给kafka

本篇介绍用python写脚本，抓取系统metrics，然后调用kafka client library把metrics吐给kafka的案例分享。对于用kafka的同学实用性很高。

python

metric

kafka

原创 2016-06-26 12:38:35 3242 阅读

API调用的几种类型

API是对APP的包装，也就是通常所说的接口，APP和APP间的互相调用，包括读取数据，修改数据等，就通过调用API来实现，API的好处显而易见，标准化，service化，外部用户看不到里面的复杂的东西。一个成熟的产品必须要有API来给其他应用提供接口。

API

其他

原创 2016-06-26 12:14:19 3376 阅读

python 批量执行脚本(服务端和客户端建立TCP连接）

有很多开源的批量部署的工具可以使用，比如puppet, ansible , saltstack , chef 。但这些工具都有自己的一套语法规则，你得按照他的语法来编写程序，然后批量执行。那有没有方法可以直接写bash 或者Python脚本，然后批量执行呢？方法当然是有的，需要自己写程序来传输脚本，拷贝文件，再复杂点，可以自定义脚本式同步还是异步执行，自定义要执行的主机组，等等，需要根据自己的业务需要来想。

tcp

python

socke

原创 2016-05-30 14:06:37 2443 阅读

python 多线程的使用

在实际编程过程中经常需要把任务包装成多进程或者多线程，多进程和多线程的区别在于多线程是内存共享、变量等共享的，多进程的进程间是独立运行的，所以创建多线程还是多进程取决于不同的需求。 python中因为有全局锁的机制，所以在python中多线程跑的时候其实只是在用一个CPU，尽管如此，多线程跑还是比单线程跑要快很多。

多线程

python

原创 2016-05-25 19:54:52 1206 阅读

Python 子类继承父类

写过程序的都知道类，就是面向对象的意思，编程的水平大致分为几个层次，基本语法，函数，面向对象，数据结构，架构，越往上水平越高。

python

子类

父类

原创 2016-05-25 19:24:05 2243 阅读

Python脚本远程批量执行命令

本文主要写用python脚本远程连接多台服务器，然后批量执行命令，最终返回命令执行结果。这个可以说是Ansible，Puppet等工具的最简单的雏形。做运维的同学应该都知道的

python 远程批量执行命令

原创 2015-11-13 20:31:52 3469 阅读

Django搭建简易监控系统

Django是使用最广泛的用python写的开源WEB框架，用它可以搭建一套WEB系统，它也可以和其他开源组件，如cellery组合使用，扩展性比较强。

python post django c

原创 2015-10-13 14:52:23 9840 阅读 1点赞 1收藏 1评论

Python记录日志的方法

日志不管对于开发或者运维都是一项非常重要的东西，它可以用来排错，解决故障，统计分析等。本文介绍python中的日志库的用法。

python 日志 logging

原创 2015-07-08 17:46:08 3695 阅读

Python调用REST API接口的几种方式

相信做过自动化运维的同学都用过REST API接口来完成某些动作。API是一套成熟系统所必需的接口，可以被其他系统或脚本来调用，这也是自动化运维的必修课。

python api

原创推荐 2015-06-28 17:24:04 10000+阅读 2点赞 1收藏 1评论

Python日志库的用法

日志不管对于开发或者运维都是一项非常重要的东西，它可以用来排错，解决故障，统计分析等。本文介绍python中的日志库的用法。

python 日志

原创 2015-06-28 15:58:49 708 阅读

Python调用shell的几种方式

1.cmd = "some unix command" retcode = subprocess.call(cmd,shell=True)2.ssh = paramiko.SSHClient() ssh.connect(server, username=username, password=pass

shell

调用

python

原创 2015-05-12 17:19:36 2126 阅读

python 的实用技巧

python技巧

技巧

python

原创 2015-03-17 11:08:06 678 阅读

python 字典嵌套

本文介绍python字典嵌套的一个实例。

嵌套

字典

python

原创 2015-03-14 12:49:58 1700 阅读

python处理脚本参数

参数

python

getopt

原创 2015-03-04 13:18:24 1336 阅读

python paramiko 验证和发送命令的几种方式

python

paramiko

验证发送命令

原创 2015-02-28 11:38:50 10000+阅读 1收藏

Python调用shell的几种方式

1.cmd = "some unix command" retcode = subprocess.call(cmd,shell=True)2.ssh = paramiko.SSHClient() ssh.connect(server, username=username, password=pass

shell

python

原创 2015-02-15 15:17:59 936 阅读

Python读文件的几种方式

本文介绍在python中读取文件的方法。

python

读文件

原创 2015-02-15 15:05:25 1149 阅读

Python实现socket通信

本文介绍如何用python脚本实现socket通信，在一台服务器上开一个端口监听，其他机器通过telnet连进来，模仿B/S模式进行通信。

socket

python

原创 2015-02-10 20:04:30 854 阅读 1点赞

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

Linux运维

python处理大文件的内存问题

python中json和字符编码的转换

select.select()文件句柄的限制

利用sshpass和ssh编写脚本远程执行命令

python unittest编写测试代码

python抓取系统metrics吐给kafka

API调用的几种类型

python 批量执行脚本(服务端和客户端建立TCP连接）

python 多线程的使用

Python 子类继承父类

Python脚本远程批量执行命令

Django搭建简易监控系统

Python记录日志的方法

Python调用REST API接口的几种方式

Python日志库的用法

Python调用shell的几种方式

python 的实用技巧

python 字典嵌套

python处理脚本参数

python paramiko 验证和发送命令的几种方式

Python调用shell的几种方式

Python读文件的几种方式

Python实现socket通信