Python本身自带了一套工具distutils ，用于发布 Python 应用程序。但 distutils 没有提供定义其它依赖包的功能，setuptools 的真正优点并不在于实现distutils 所能实现的功能——尽管它的确增强了distutils的功能并简化了setup.py 脚本中的内容。setuptools 最大的优势是它在包管理能力方面的增强。它可以使用一种更加透明的方法来查找、下
原创
2015-08-27 13:20:08
1933阅读
最近参与公司一个项目，计划对在线平台的大规模查询做到快速响应，预估数据总量大概在2-3亿条，数据库并发量大概每秒1500，一年后并发大概3000每秒，经过在Redis和mongodb之间艰难的选择之后，决定使用mongodb，主要看中其平行扩展能力和GridFS上的Map/Reduce。预估项目完成上线后，高峰时段每秒并发查询在1500-3000之间。
其实我个人是比较喜欢Redis的，其并发查询能力和超越memcached的速度都很令人心动，不过其持久化和集群扩展性不太适合业务需要，所以最后还是选择了mongodb。
下面是对mongodb测试的代码和结果。虽然公司用的一水的CentOS，但是由于我是FreeBSD的支持者，所以在FreeBSD和CentOS上都测试了一下结果。
写库程序是网上抄来的，查询程序是自己写的。
写库程序
#!/usr/bin/env python
from pymongo import Connection
import time,datetime
connection = Connection('127.0.0.1'
转载
精选
2012-03-03 01:02:26
355阅读
最近参与公司一个项目，计划对在线平台的大规模查询做到快速响应，预估数据总量大概在2-3亿条，数据库并发量大概每秒1500，一年后并发大概3000每秒，经过在Redis和mongodb之间艰难的选择之后，决定使用mongodb，主要看中其平行扩展能力和GridFS上的Map/Reduce。预估项目完成上线后，高峰时段每秒并发查询在1500-3000之间。其实我个人是比较喜欢Red
转载
2023-04-28 00:54:08
107阅读
最近参与公司一个项目，计划对在线平台的大规模查询做到快速响应，预估数据总量大概在2-3亿条，数据库并发量大概每秒1500，一年后并发大概3000每秒，经过在Redis和mongodb之间艰难的选择之后，决定使用mongodb，主要看中其平行扩展能力和GridFS上的Map/Reduce。预估项目完成上线后，高峰时段每秒并发查询在1500-3000之间。其实我个人是比较喜欢Redis的，其并发查询能
推荐
原创
2012-02-28 18:37:27
10000+阅读
点赞
3评论
测试文件test.csv。测试代码：test.py。
原创
2024-09-30 11:24:55
73阅读
引述:在计算机程序的开发过程中,随着程序代码越写越多,在一个文件里代码就会越来越长,
越来越不容易维护。
为了编写可维护的代码,我们把很多函数分组,分别放到不同的文件里,这样,每个文件
包含的代码就相对较少,很多编程语言都采用这种组织代码的方式。在 Python 中,一个.py
文件就称之为一个模块(Module)。一.模块的定义Python 模块(Module)，是一个 Python 文件，以
转载
2023-08-06 11:31:40
68阅读
hadoop环境介绍：master服务：node1slave服务器：node2，node3，node4mysql服务器：node29Thrift安装在node1服务器上！相关软件版本：hadoop版本：hadoop-0.20.2sqoop版本：sqoop-1.2.0-CDH3B4java版本：jdk1.7.0_67mysql版本：5.1.65Thrift版本：thrift-0.9.0thrift安
原创
精选
2014-10-24 16:39:34
10000+阅读
点赞
引入配置文件在项目中是常见的，一般是.ini或xml等格式，例如，在mysql中就是my.ini进行配置。xml对于非计算机类的用户来说，不是很友好。Mysql的简单配置如果要你写一个配置文件解析器，你有什么思路呢？例如：文件结构规定，规定参数和值、规定注释 读取配置文件的配置项，.
原创
2021-07-19 10:25:29
458阅读
以下内容翻译自nose官方文档，因为水平有限，难免会有错误。。。。nose是Python平台的一个测试工具，相信用Python开发过的人都知道unittest，nose比unittest更加强大，也更加好用（注：我没有用过unittest。。。我还是小白。。。。）nose使用的tests是unittest.TestCase的子类，当然你也可以自己写一些简单的测试函数以及测试类，而不一定要是unit
原创
2014-10-12 00:31:01
3180阅读
# Python模块与模块对象
## 引言
Python是一种高级编程语言，它支持模块化编程。模块是Python中组织代码的一种方式，可以将相关的功能封装到一个模块中，以便于复用和管理。本文将介绍Python模块的概念、如何创建和使用模块，以及模块对象的相关知识。
## 模块的概念
模块是一个包含Python代码的文件，它可以定义函数、类、变量等，并可以被其他程序导入和使用。一个模块可以包
原创
2023-10-13 09:17:24
50阅读
# Python 模块与子模块
在 Python 中，模块是指一组相关的函数、类和变量的集合，而子模块则是在一个模块中又包含了更细分的功能。通过使用模块和子模块，可以将代码分割为更小的部分，使得代码结构更加清晰，并且可以更好地组织和管理代码。
## 模块的定义
在 Python 中，一个文件就是一个模块，模块的名字就是文件的名字去掉后缀。一个模块可以包含多个函数、类和变量，通过导入模块可以使
原创
2024-07-10 06:03:34
42阅读
在Python的学习中经常见用到sys模块，就百度了下sys模块到底是什么很明显，sys是system的缩写，那么很自然就是跟系统相关的模块，那么到底是什么呢，简单来说可以用sys模块获取操作系统和编译器的一些配置，设置及操作。这个模块自然也存在很多方法： sys.argv: 实现从程序外部向程序传递参数。 sys.exit([arg]): 程序中间的退出，arg=0为正常退出
转载
2023-05-31 16:28:43
188阅读
在Python中编写单元测试可以使用标准库中的unittest模块。1、unittest 模块主要使用unittest.TestCase类。继承该类，编写成员方法作为测试用例。类成员方法（测试用例）名以test作为前缀。import unittestclass TestCls(unittest.TestCase): def test_method1(self): 
原创
2015-01-22 16:26:34
538阅读
1．模块化模块是数据说明、可执行语句等程序对象的集合。模块可以单独被命名，而且可通过名字来访问，例如，过程、函数、子程序、宏等都可作为模块。2．抽象与逐步求精软件工程的每一步都是对软件解法的抽象层次的一次精化。抽象与逐步求精是紧密相关的。3．信息隐蔽和局部化信息隐蔽是指一个模块将自身的内部信息向其他模块隐藏，以避免其他模块不恰当的访问和修改。只有那些为了完成系统功能不可或缺的数据交换才被允许在模块
原创
2023-09-12 18:12:24
264阅读
一、函数 a=1, b=2, 交换值定义中间量c,C=None,a,b=b,aa,b,c=1,2,3 sys.argv 实现指定的某些功能，使用的时候可以直接调用，简化代码，提高代码复用性def fun():#定义一个函数，后面是函数名 &n
time 模块1 1 >>> import time
2 2 >>> time.time()
3 3 1491064723.808669
4 4 >>> # time.time()返回当前时间的时间戳timestamp(定义为从格林威治时间1970年01月01日00时00分00秒起至现在的总秒数)的方法,无参数
5
configparser模块Python中configparser模块用于读取和编辑配置文件，更多的是用于读取配置文件。配置文件的格式如下，可以包含多个section（例如：db，email），每个section又可以有多个键值对（例如：database=bps）；其中'='也可以使用':'取代~[default]log_path=/tmp/csv.log[db]h
原创
2018-12-23 15:36:43
1357阅读
点赞
一般来说，编程语言中，库、包、模块是同一种概念，是代码的组织方式。Python中只有一种模块对象，但是为了模块化组织模块的便利，提供了一个概念——包！模块(module)：指的是Python的源代码文件。包(package)：是的是模块组织在一起的包名同名的目录及其相关文件。导入语句import 模块1，模块2：这是完全导入(导入不建议用逗号分隔写成一行，可以多个导入)
import……as……：
转载
2024-08-30 09:22:54
13阅读
文章目录1 为何要实行模块化编程2 模块化编程的流程3 创建模块4 包（package）的概念和结构 1 为何要实行模块化编程首先，python是面向对象的编程语言，python中的数据类型有字符串、浮点型、整型，这些数据被有序的整合起来形成了序列（列表、集合、元组、字典等），而对象过多即又产生了函数，紧接着又出现了类，多个类组合起来即形成了模块化编程。通常我们使用的标准库与第三方库即模块，例如
转载
2023-09-20 07:21:51
69阅读
ssl模块缺失表现为在python中执行如下命令import ssl会报错。在网上一查，是因为没有安装好openssl, 于是参照 完成了openssl的源码安装。安装完成后，openssl的安装位置在/usr/local/openssl在终端输入openssl version -a检测安装是否成功，并获取相关信息。 完成之后，需要重现编译安装python3.6 关键步骤在于：# cd
转载
2024-02-04 22:09:40
207阅读
