gorm查询流程源码分析
gorm是用golang写的数据库orm库,目前golang写的orm库也有很多,例如xorm,beego orm,gomybatis等,各有各的优势特点,看一下gorm对golang基础框架中数据库相关接口是如何封装的。
gorm一般的初始化方式
db, err := gorm.Open("mysql", "user:password@/dbname?charset=utf8&parseTime=True&loc=Local")
if err != nil {
log.Errorf("init error!")
}
gorm中DB结构体的定义:
// DB的结构体
type DB struct {
sync.RWMutex // 锁
Value interface{} // 一般传入实际操作的表所对应的结构体
Error error // DB操作失败的error
RowsAffected int64 // 操作影响的行数
// single db
db SQLCommon // SQL接口,包括(Exec、Prepare、Query、QueryRow)
blockGlobalUpdate bool // 为true时,可以在update在没有where条件是报错,避免全局更新
logMode logModeValue // 日志模式,gorm提供了三种
logger logger // 内部日志实例
search *search // 查询相关的条件
values sync.Map // value Map
// global db
parent *DB // 父db,为了保存一个空的初始化后的db,也为了保存curd注册的的callback方法
callbacks *Callback // callback方法
dialect Dialect // 不同类型数据库对应的不同实现的相同接口
singularTable bool // 表名是否为复数形式,true时为user,false时为users
}
gorm的Open方法:
func Open(dialect string, args ...interface{}) (db *DB, err error) {
if len(args) == 0 {
err = errors.New("invalid database source")
return nil, err
}
var source string
var dbSQL SQLCommon
var ownDbSQL bool
switch value := args[0].(type) {
case string:
var driver = dialect
if len(args) == 1 {
source = value
} else if len(args) >= 2 {
driver = value
source = args[1].(string)
}
// 调用go基础库的Open方法获得db的connention附给dbSQL,
// 此时还没有真正连接数据库
dbSQL, err = sql.Open(driver, source)
ownDbSQL = true
case SQLCommon:
dbSQL = value
ownDbSQL = false
default:
return nil, fmt.Errorf("invalid database source: %v is not a valid type", value)
}
// 初始化DB
db = &DB{
db: dbSQL,
logger: defaultLogger,
callbacks: DefaultCallback,
dialect: newDialect(dialect, dbSQL),
}
// 将初始化的DB保存到db.parent中
db.parent = db
if err != nil {
return
}
// 调用go基础库的Ping方法检测数据库connention是否可以连通
if d, ok := dbSQL.(*sql.DB); ok {
if err = d.Ping(); err != nil && ownDbSQL {
d.Close()
}
}
return
}
gorm是通过多个callbsck方法来实现curd的,具体流程以一个查询为例:
DBEngine.Table(entry.TableName).
Select(entry.Select).
Where(entry.sql, entry.values).
Order(entry.order).
Find(entry.result)
执行步骤:
1.执行Table方法,添加tablename条件:
func (s *DB) Table(name string) *DB {
clone := s.clone() // 执行clone方法也就是从新的db中赋值一个空的,避免交叉影响
clone.search.Table(name) // 赋值table name
clone.Value = nil // 附空
return clone
}
2.执行Where方法,添加where条件:
// 首先也是调用clone方法,然后调用search的Where方法
func (s *DB) Where(query interface{}, args ...interface{}) *DB {
return s.clone().search.Where(query, args...).db
}
// search的Where方法是将传进来的条件进行拼接,存入search.whereConditions
func (s *search) Where(query interface{}, values ...interface{}) *search {
s.whereConditions = append(s.whereConditions, map[string]interface{}{"query": query, "args": values})
return s
}
3.执行Order方法,添加order条件:
// 类似Where,reorder为true会强制刷掉gorm默认的order by
func (s *DB) Order(value interface{}, reorder ...bool) *DB {
return s.clone().search.Order(value, reorder...).db
}
func (s *search) Order(value interface{}, reorder ...bool) *search {
// 如果为true,先清除s.orders
if len(reorder) > 0 && reorder[0] {
s.orders = []interface{}{}
}
// 将value拼接,存入s.orders
if value != nil && value != "" {
s.orders = append(s.orders, value)
}
return s
}
4.执行Find方法,真正实现查询:
// 首先先创建一个scope(可以理解成只针对本次数据库操作有效的一个环境),再调用inlineCondition内部方法,最后执行callcallbacks一系列方法实现真正的查询操作,并将db返回
func (s *DB) Find(out interface{}, where ...interface{}) *DB {
return s.NewScope(out).inlineCondition(where...).callCallbacks(s.parent.callbacks.queries).db
}
// NewScope方法就是初始化一个scope
func (s *DB) NewScope(value interface{}) *Scope {
dbClone := s.clone()
// 此时赋值value
dbClone.Value = value
scope := &Scope{db: dbClone, Value: value}
if s.search != nil {
scope.Search = s.search.clone()
} else {
scope.Search = &search{}
}
return scope
}
// inlineCondition方法是执行scope.Search.Where
func (scope *Scope) inlineCondition(values ...interface{}) *Scope {
if len(values) > 0 {
scope.Search.Where(values[0], values[1:]...)
}
return scope
}
// scope.Search.Where实际上也是执行条件拼接,由于我们在调用的时候没有在Find中传入条件,所以这个方法不会被执行
func (s *search) Where(query interface{}, values ...interface{}) *search {
s.whereConditions = append(s.whereConditions, map[string]interface{}{"query": query, "args": values})
return s
}
// 最重要的就是callcallbacks方法,是真正执行的地方
func (scope *Scope) callCallbacks(funcs []*func(s *Scope)) *Scope {
defer func() {
if err := recover(); err != nil {
if db, ok := scope.db.db.(sqlTx); ok {
db.Rollback()
}
panic(err)
}
}()
// 循环里面所有的注册的funcs
for _, f := range funcs {
(*f)(scope)
if scope.skipLeft {
break
}
}
return scope
}
// 这里的funcs实在程序启动时init方法注册的
func init() {
DefaultCallback.Query().Register("gorm:query", queryCallback)
DefaultCallback.Query().Register("gorm:preload", preloadCallback)
DefaultCallback.Query().Register("gorm:after_query", afterQueryCallback)
}
// 比如afterQueryCallback方法还提供了反射调用结构体的AfterFind方法,如果在查询前结构体实现了AfterFind方法就会被调用,这个机制比了灵活
func afterQueryCallback(scope *Scope) {
if !scope.HasError() {
scope.CallMethod("AfterFind")
}
}
Find方法主要的执行流程就是这样,还有些详细的后续再补充,写的不对的希望给指出更正