gorm查询流程源码分析

gorm是用golang写的数据库orm库,目前golang写的orm库也有很多,例如xorm,beego orm,gomybatis等,各有各的优势特点,看一下gorm对golang基础框架中数据库相关接口是如何封装的。

gorm一般的初始化方式

db, err := gorm.Open("mysql", "user:password@/dbname?charset=utf8&parseTime=True&loc=Local")
if err != nil {
	log.Errorf("init error!")
}

gorm中DB结构体的定义:

// DB的结构体
type DB struct {
	sync.RWMutex                       // 锁
	Value        interface{}           // 一般传入实际操作的表所对应的结构体
	Error        error                 // DB操作失败的error
	RowsAffected int64                 // 操作影响的行数

	// single db
	db                SQLCommon        // SQL接口,包括(Exec、Prepare、Query、QueryRow)
	blockGlobalUpdate bool             // 为true时,可以在update在没有where条件是报错,避免全局更新
	logMode           logModeValue     // 日志模式,gorm提供了三种   
	logger            logger           // 内部日志实例
	search            *search          // 查询相关的条件
	values            sync.Map         // value Map

	// global db
	parent        *DB                  // 父db,为了保存一个空的初始化后的db,也为了保存curd注册的的callback方法
	callbacks     *Callback            // callback方法
	dialect       Dialect              // 不同类型数据库对应的不同实现的相同接口 
	singularTable bool                 // 表名是否为复数形式,true时为user,false时为users
}

gorm的Open方法:

func Open(dialect string, args ...interface{}) (db *DB, err error) {
	if len(args) == 0 {
		err = errors.New("invalid database source")
		return nil, err
	}
	var source string
	var dbSQL SQLCommon
	var ownDbSQL bool

	switch value := args[0].(type) {
	case string:
		var driver = dialect
		if len(args) == 1 {
			source = value
		} else if len(args) >= 2 {
			driver = value
			source = args[1].(string)
		}
		// 调用go基础库的Open方法获得db的connention附给dbSQL,
		// 此时还没有真正连接数据库
		dbSQL, err = sql.Open(driver, source)
		ownDbSQL = true
	case SQLCommon:
		dbSQL = value
		ownDbSQL = false
	default:
		return nil, fmt.Errorf("invalid database source: %v is not a valid type", value)
	}
	// 初始化DB
	db = &DB{
		db:        dbSQL,
		logger:    defaultLogger,
		callbacks: DefaultCallback,
		dialect:   newDialect(dialect, dbSQL),
	}
	// 将初始化的DB保存到db.parent中
	db.parent = db
	if err != nil {
		return
	}
	// 调用go基础库的Ping方法检测数据库connention是否可以连通
	if d, ok := dbSQL.(*sql.DB); ok {
		if err = d.Ping(); err != nil && ownDbSQL {
			d.Close()
		}
	}
	return
}

gorm是通过多个callbsck方法来实现curd的,具体流程以一个查询为例:

DBEngine.Table(entry.TableName).
    Select(entry.Select).
    Where(entry.sql, entry.values).
    Order(entry.order).
    Find(entry.result)

执行步骤:

1.执行Table方法,添加tablename条件:

func (s *DB) Table(name string) *DB {
	clone := s.clone()        // 执行clone方法也就是从新的db中赋值一个空的,避免交叉影响
	clone.search.Table(name)  // 赋值table name
	clone.Value = nil         // 附空
	return clone
}

2.执行Where方法,添加where条件:

// 首先也是调用clone方法,然后调用search的Where方法
func (s *DB) Where(query interface{}, args ...interface{}) *DB {
	return s.clone().search.Where(query, args...).db
}

// search的Where方法是将传进来的条件进行拼接,存入search.whereConditions
func (s *search) Where(query interface{}, values ...interface{}) *search {
	s.whereConditions = append(s.whereConditions, map[string]interface{}{"query": query, "args": values})
	return s
}

3.执行Order方法,添加order条件:

// 类似Where,reorder为true会强制刷掉gorm默认的order by
func (s *DB) Order(value interface{}, reorder ...bool) *DB {
	return s.clone().search.Order(value, reorder...).db
}

func (s *search) Order(value interface{}, reorder ...bool) *search {
	// 如果为true,先清除s.orders
    if len(reorder) > 0 && reorder[0] {
		s.orders = []interface{}{}
	}
    // 将value拼接,存入s.orders
	if value != nil && value != "" {
		s.orders = append(s.orders, value)
	}
	return s
}

4.执行Find方法,真正实现查询:

// 首先先创建一个scope(可以理解成只针对本次数据库操作有效的一个环境),再调用inlineCondition内部方法,最后执行callcallbacks一系列方法实现真正的查询操作,并将db返回
func (s *DB) Find(out interface{}, where ...interface{}) *DB {
	return s.NewScope(out).inlineCondition(where...).callCallbacks(s.parent.callbacks.queries).db
}

// NewScope方法就是初始化一个scope
func (s *DB) NewScope(value interface{}) *Scope {
	dbClone := s.clone()
    // 此时赋值value
	dbClone.Value = value
	scope := &Scope{db: dbClone, Value: value}
	if s.search != nil {
		scope.Search = s.search.clone()
	} else {
		scope.Search = &search{}
	}
	return scope
}

// inlineCondition方法是执行scope.Search.Where
func (scope *Scope) inlineCondition(values ...interface{}) *Scope {
	if len(values) > 0 {
		scope.Search.Where(values[0], values[1:]...)
	}
	return scope
}
// scope.Search.Where实际上也是执行条件拼接,由于我们在调用的时候没有在Find中传入条件,所以这个方法不会被执行
func (s *search) Where(query interface{}, values ...interface{}) *search {
	s.whereConditions = append(s.whereConditions, map[string]interface{}{"query": query, "args": values})
	return s
}

// 最重要的就是callcallbacks方法,是真正执行的地方
func (scope *Scope) callCallbacks(funcs []*func(s *Scope)) *Scope {
	defer func() {
		if err := recover(); err != nil {
			if db, ok := scope.db.db.(sqlTx); ok {
				db.Rollback()
			}
			panic(err)
		}
	}()
    // 循环里面所有的注册的funcs
	for _, f := range funcs {
		(*f)(scope)
		if scope.skipLeft {
			break
		}
	}
	return scope
}

// 这里的funcs实在程序启动时init方法注册的
func init() {
	DefaultCallback.Query().Register("gorm:query", queryCallback)
	DefaultCallback.Query().Register("gorm:preload", preloadCallback)
	DefaultCallback.Query().Register("gorm:after_query", afterQueryCallback)
}

// 比如afterQueryCallback方法还提供了反射调用结构体的AfterFind方法,如果在查询前结构体实现了AfterFind方法就会被调用,这个机制比了灵活
func afterQueryCallback(scope *Scope) {
	if !scope.HasError() {
		scope.CallMethod("AfterFind")
	}
}

Find方法主要的执行流程就是这样,还有些详细的后续再补充,写的不对的希望给指出更正