rfyiamcool的博客_Mysql,Oracle,数据库,Linux,Nginx,shell,虚拟化,web相关,CDN缓存,负载均衡

使用python来访问Hadoop HDFS存储实现文件的操作

在调试环境下，咱们用hadoop提供的shell接口测试增加删除查看，但是不利于复杂的逻辑编程查看文件内容www.xiaorui.cc用python访问hdfs是个很头疼的事情。。。。这个是pyhdfs的库import pyhdfs fs = pyhdfs.connect("192.168.1.1", 9000) pyhdfs.get(fs, "/rui/111", "/var/111") f =

python hadoop接口

python hdfs

python hadoop

pyhdfs

原创 2013-07-26 19:38:16 10000+阅读 5点赞 4评论

基于zeromq的高性能分布式RPC框架Zerorpc 性能测试

Zeromq 是基于zeromq、gevent和 msgpack开发的分布式RPC框架zerorpc-python。这个框架简单、易用。1. 安装zeromqyum -y install zeromq yum install gcc gcc-c++ libuuid-devel python-uuid uuid wget http://download.zeromq.org/zeromq-2.1.9

zeromq

python zeromq

python rpc

zerorpc

原创推荐 2013-07-21 23:11:40 10000+阅读 7点赞 1收藏 5评论

生产环境中 Ngx_lua 使用技巧和应用的范例

Lua的性能超牛的，这个不需要再啰嗦了。。。Nginx_lua的适用场景网络I/O 阻塞时间远高于CPU 计算占用时间、同时上游资源非瓶颈（可伸缩）的网络应用，如高性能网络中间层、HTTP REST 接口服务等；期望简化系统架构，让服务向Nginx 同质化的Web 站点；优势：同步非阻塞I/O 形式直观易懂，并发服务能力强CPU、内存运行开销低同Nginx 结合度高，可方便粘合现有Nginx 模块

nginx lua

ngx_lua

lua 接口

lua cookie

lua mysql

原创推荐 2013-07-19 11:35:00 6303 阅读 4点赞 5评论

通过Lua解释器来扩展丰富nginx功能，实现复杂业务的处理

nginx lua

nginx lua post

nginx lua mysql

nginx lua api

原创推荐 2013-07-14 23:29:13 8809 阅读 2点赞 10评论

分布式任务分发框架Gearman测试、性能监控、队列持久化【python 实例】

Gearman提供了一种通用的程序框架来将你的任务分发到不同的机器或者不同的进程当中。它提供了你进行并行工作的能力、负载均衡处理的能力，以及在不同程序语言之间沟通的能力。Gearman能够应用的领域非常广泛，从高可用的网站到数据库的复制任务。总之，Gearman就是负责分发处理的中枢系统，它的优点包括：开源：Gearman免费并且开源而且有一个非常活跃的开源社区，如果你想来做一些贡献，请点击。多

python gearman

gearman rabbitmq

gearman 优化

gearman 测试

原创 2013-07-09 15:34:03 10000+阅读 4点赞 2评论

Nginx嵌入Lua语言实现redis的高性能http接口

redis没有直接提供一个http的接口，要是用php，python，当然也是可以实现的。性能的比较的话，lua的能力要比php强的不少。。。网上有很多的性能的比较，我也做过几次的压力测试，lua的性能确实很强。。。。安装nginx，以及lua环境git clone https://github.com/simpl/ngx_devel_kit.git git clone https://githu

nginx lua redis

lua redis

openstry redis

nginx redis

原创 2013-07-07 18:24:21 6174 阅读 2点赞 4评论

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

开源基础软件社区	51CTO学堂
51CTO	软考资讯	汽车开发者社区

51CTO博客

峰云，就她了。