一、我们接着上期的博客继续对ORM框架进行补充,顺便把paramiko模块也给大家讲解一下:
1、ORM框架:
在连接操作数据库的第一个博客中也已经说了,sqlalchemy是一个ORM框架,总结就是:将对象转换成SQL,然后使用数据API执行SQL并获取执行结果。先来看下使用sqlalchemy来链接数据库的基本代码:
1 from sqlalchemy.ext.declarative import declarative_base
2 from sqlalchemy import Column, Integer, String, ForeignKey, UniqueConstraint, Index
3 from sqlalchemy.orm import sessionmaker, relationship
4 from sqlalchemy import create_engine
5
6 engine = create_engine("mysql+pymysql://mysql_test:123456@192.168.163.131:3306/pymysql", max_overflow=5)
7
8 Base = declarative_base()
首先,前四行是导入的有关模块,我们对这些模块进行简单的介绍,然后列举例子,你就能明白了;
第二行中导入的是Column(字段)、(Integer, String)字段类型、ForeignKey外键、create_engine创建数据库;使用declarative_base模块创建一个Base对象,这个在下面创建表的类中需要继承,在上面的代码中已经事先创建好了pymysql数据库,所以下面我们直接创建表以及插入数据:
1 class Host(Base):
2 __tablename__ = 'host'
3 h_id = Column(Integer,primary_key=True,autoincrement=True)
4 host_ip = Column(String(32))
5 host_port = Column(Integer)
6 class HostUser(Base):
7 __tablename__ = 'hostuser'
8 u_id = Column(Integer,primary_key=True,autoincrement=True)
9 username = Column(String(32))
10 password = Column(String(20))
11
12 Base.metadata.create_all(engine)
解释说明:
这两个类是用来创建表使用的,每个类对应一个表,在类里面可以定义多个字段,在字段里面的参数可以设置多个(比如:主键、自增等);最后一行才是把类创建成表并存到数据库,当你执行完代码之后,表已经创建了,那么下一步就是添加数据,看下面添加数据的代码:
1 Session = sessionmaker(bind=engine)
2 session = Session()
3
4 session.add(Host(host_ip = '1.1.1.4',host_port = 5555))
5
6 session.add_all([
7 Host(host_ip = '1.1.1.1',host_port = 22),
8 Host(host_ip = '1.1.1.2',host_port = 22),
9 Host(host_ip = '1.1.1.3',host_port = 22),
10 HostUser(username = 'ma',password = '123'),
11 HostUser(username = 'da',password = '123'),
12 ])
13 session.commit()
插入数据有两种方式,一种是一次插入一条数据,使用的方法是add ; 第二种是一次插入多条数据,使用的方法是add_all;你需要注意的是最后要执行commit方法,不然,你上面做的一切都是白费的,提交不到数据库。
下面看一条查询的语句:
1 ret1 = session.query(Host.host_ip,Host.host_port).filter(Host.host_ip == '1.1.1.2').all()
2 print(ret1)
3
4 ret2 = session.query(Host.host_ip,Host.host_port).all()
5 print(ret2)
6
7 #输出结果
8 [('1.1.1.2', 22)]
9 [('1.1.1.1', 22), ('1.1.1.2', 22), ('1.1.1.3', 22), ('1.1.1.4', 5555)]
带filter的是查询一条条件语句,不带条件语句的就查询全部的数据,输出的格式是列表中嵌套元祖。
2、上面说了那么多,其实只是sqlalchemy操作数据库的简单的用法,下面我们说下稍微复杂一点的,连表操作:
一对多:
1 class HostUser(Base):
2 __tablename__ = 'hostuser'
3 u_id = Column(Integer,primary_key=True,autoincrement=True)
4 username = Column(String(32))
5 password = Column(String(20))
6 host_id = Column(Integer,ForeignKey('host.h_id'))
7 #创建虚拟关系relationship,跟foreignkey配合使用
8 host = relationship('Host',backref='hh')
9
10 session.add_all([
11 HostUser(username = 'ma',password = '123',host_id = 1),
12 HostUser(username = 'da',password = '123',host_id = 2),
13 ])
14 session.commit()
还有个Host类跟上面是一样的,其实创建这个表的字段也是一样的,只不过在里面增加了一个外键和关系,分别是第六行和第八行,外键的作用就是可以根据特定的字段去查询其它表中的字段,关系的作用下面列举一个例子,你就会明白, 我们先来说下通常我们所做的查询时正向的,什么是正向的呢!就像这个HostUser中有关系,从这个表去其它表中查询数据就是正向的,从其它表中查询数据,但是是通过这个关系去查询的,这样就叫做反向查询,下面我们看个例子:
1 #正向查询,有虚拟关系
2 ret = session.query(HostUser).all()
3 for obj in ret:
4 print(obj.username,obj.host.host_ip,obj.host.host_port)
5
6 输出结果:
7 ma 1.1.1.1 22
8 da 1.1.1.2 22
这个例子说的是有虚拟关系,但是使用的是正向查询,就是利用关系去查询用户所对应的IP地址和端口,下面再说反向查询的原始方式以及有关系的反向查询:
1 #反向查询的原始方式
2 ret1 = session.query(HostUser.u_id,HostUser.username).join(Host,isouter=True).filter(Host.host_ip == '1.1.1.2').all()
3 print(ret1)
4
5 #反向查询的虚拟关系查询,需要遍历
6 obj = session.query(Host).filter(Host.host_ip == '1.1.1.2').first()
7 print(obj.hh)
8 for ret in obj.hh:
9 print(ret.u_id,ret.username)
解释说明:
上面两个例子,第一个是反向查询的原始方式,查询的内容是属于1.1.1.2这台机器的所有用户和对应的用户id;其实使用虚拟关系进行查询就是去掉了join,使用生成的HostUser对象进行调用backref的值hh,就可以查出用户了,两种不同的方式输出的结果的如下:
1 [(4, 'da')]
2 [<__main__.HostUser object at 0x0000000003BBB080>]
3 4 da
多对多:
多对多的一个关键点是需要第三张表去做关系,下面列举一个例子,来阐述一下,在多对多的查询中使用关系与不使用关系的sql执行:
1 engine = create_engine("mysql+pymysql://mysql_test:123456@192.168.163.131:3306/orm_test")
2 Base = declarative_base()
3
4 class HostToHostUser(Base):
5 __tablename__ = 'host_to_host_user'
6 nid = Column(Integer, primary_key=True,autoincrement=True)
7
8 host_id = Column(Integer,ForeignKey('host.nid'))
9 host_user_id = Column(Integer,ForeignKey('host_user.nid'))
10 #多对多操作
11 host = relationship('Host',backref='h')
12 host_user = relationship('HostUser',backref='u')
13
14
15 class Host(Base):
16 __tablename__ = 'host'
17 nid = Column(Integer, primary_key=True,autoincrement=True)
18 hostname = Column(String(32))
19 port = Column(String(32))
20 ip = Column(String(32))
21 ####最简单的方式,添加此行就行:
22 host_user=relationship('HostUser',secondary=HostToHostUser.__table__,backref='h')
23
24 class HostUser(Base):
25 __tablename__ = 'host_user'
26 nid = Column(Integer, primary_key=True,autoincrement=True)
27 username = Column(String(32))
28
29 Base.metadata.create_all(engine)
30 Session = sessionmaker(bind=engine)
31 session = Session()
32 '''
33 session.add_all([
34 Host(hostname='c1',port='22',ip='1.1.1.1'),
35 Host(hostname='c2',port='22',ip='1.1.1.2'),
36 Host(hostname='c3',port='22',ip='1.1.1.3'),
37 Host(hostname='c4',port='22',ip='1.1.1.4'),
38 Host(hostname='c5',port='22',ip='1.1.1.5'),
39 ])
40 session.commit()
41
42
43 session.add_all([
44 HostUser(username='root'),
45 HostUser(username='db'),
46 HostUser(username='nb'),
47 HostUser(username='sb'),
48 ])
49 session.commit()
50
51 session.add_all([
52 HostToHostUser(host_id=1,host_user_id=1),
53 HostToHostUser(host_id=1,host_user_id=2),
54 HostToHostUser(host_id=1,host_user_id=3),
55 HostToHostUser(host_id=2,host_user_id=2),
56 HostToHostUser(host_id=2,host_user_id=4),
57 HostToHostUser(host_id=2,host_user_id=3),
58 ])
59 session.commit()
60 '''
View Code
先使用类去创建三个表,那个HostToHostUser就是第三张表,用户存放其它两个表的外键和关系的;现在如果要查询c1主机对应的管理员账号,我们如果不用关系的话,应该是这样的:
1 #没有关系的原始方式
2 #1.先在host表中查询c1的nid
3 host_obj = session.query(Host).filter(Host.hostname=='c1').first()
4 #2.查询hosttohostuer表中的所有host_id等于c1的nid的对应的host_user_id
5 host_2_host_user = session.query(HostToHostUser.host_user_id).filter(HostToHostUser.host_id==host_obj.nid).all()
6 # print(host_2_host_user)
7 r=zip(*host_2_host_user)
8 # print(list(list(r)[0]))
9 #通过查到的host_user_id查询hostuser表中的对应的管理员用户名
10 users = session.query(HostUser.username).filter(HostUser.nid.in_(list(list(r)[0]))).all()
11 print(users)
12
13 #输出结果
14 [('root',), ('db',), ('nb',)]
里面说的很详细了,我就不再过多的阐述了,下面再看下有关系的查询:
1 # 1.反向查找,查询host表中c1的信息,会得到一个对象,对象中存在一个已经设置好的虚拟关系:h
2 host_obj = session.query(Host).filter(Host.hostname == 'c1').first()
3 #2.正向查找,遍历对象属性
4 for item in host_obj.h:
5 print(item.host_user.username)
6
7 #输出结果
8 root
9 db
10 nb
怎么样?这个方法是不是简单多了,其实我们在创建表的时候,也创建了一种更简单的方式,那就是把关系放在Host类中,,其实都差不多,都是遍历对象属性得到想要的结果。