initDb.go 5.5 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178
  1. package global
  2. import (
  3. "database/sql/driver"
  4. _ "dm"
  5. dm "dmgorm2"
  6. "eta/eta_api/utils"
  7. "fmt"
  8. "gorm.io/driver/mysql"
  9. "gorm.io/gorm"
  10. "gorm.io/gorm/logger"
  11. "gorm.io/gorm/schema"
  12. "io"
  13. "log"
  14. "os"
  15. "strings"
  16. "time"
  17. )
  18. var (
  19. //需要钩子函数执行的数据库表
  20. tableMap = map[string]int{
  21. "base_from_mysteel_chemical_data": 1,
  22. "future_good_edb_info": 1,
  23. }
  24. )
  25. type LocalTime time.Time
  26. // InitDb
  27. // @Description: 数据库初始化
  28. func InitDb() {
  29. dbMap := make(map[string]*gorm.DB)
  30. //开启日志
  31. logWriter := io.MultiWriter(utils.Binlog) //binlog日志,记录到文件中去
  32. if utils.RunMode == `dev` { // 测试环境,默认输出在控制台,不需要的话,可以注释if里面下面的这行
  33. logWriter = io.MultiWriter(utils.Binlog, os.Stdout)
  34. }
  35. newLogger := logger.New(log.New(logWriter, "\r\n", log.LstdFlags), logger.Config{
  36. SlowThreshold: 200 * time.Millisecond, //慢sql :200ms
  37. LogLevel: logger.Info, //记录的日志类型,info代表所有信息都记录
  38. IgnoreRecordNotFoundError: true, //是否忽略找不到数据错误信息(只是日志记录记录成err还是普通的输出的区别,并不影响业务代码中的:找不到数据行error)
  39. Colorful: false, //是否颜色输出
  40. })
  41. // 默认库
  42. connectDb(utils.MYSQL_URL, utils.DbNameMaster, newLogger, dbMap, true)
  43. // 报告库
  44. connectDb(utils.MYSQL_URL_RDDP, utils.DbNameReport, newLogger, dbMap, false)
  45. // 手工数据库
  46. connectDb(utils.MYSQL_URL_EDB, utils.DbNameManualIndex, newLogger, dbMap, false)
  47. // 指标库
  48. connectDb(utils.MYSQL_URL_DATA, utils.DbNameIndex, newLogger, dbMap, false)
  49. // 钢联库
  50. connectDb(utils.MYSQL_URL_GL, utils.DbNameGL, newLogger, dbMap, false)
  51. if utils.MYSQL_AI_URL != "" {
  52. // AI库
  53. connectDb(utils.MYSQL_AI_URL, utils.DbNameAI, newLogger, dbMap, false)
  54. }
  55. // 用户主库
  56. if utils.MYSQL_WEEKLY_URL != `` && (utils.BusinessCode == utils.BusinessCodeRelease || utils.BusinessCode == utils.BusinessCodeSandbox || utils.BusinessCode == utils.BusinessCodeDebug) {
  57. connectDb(utils.MYSQL_WEEKLY_URL, utils.DbNameWeekly, newLogger, dbMap, false)
  58. }
  59. for _, db := range dbMap {
  60. _ = db.Callback().Query().Before("gorm:query").Register("before_query", func(tx *gorm.DB) {
  61. orgSql := tx.Statement.SQL.String()
  62. if _, ok := tableMap[tx.Statement.Table]; ok && strings.Contains(strings.ToLower(orgSql), "select") {
  63. newSql := utils.ReplaceDriverKeywords(utils.DbDriverName, orgSql)
  64. tx.Statement.SQL.Reset()
  65. tx.Statement.SQL.WriteString(newSql)
  66. }
  67. })
  68. _ = db.Callback().Raw().Before("gorm:raw").Register("before_raw", func(tx *gorm.DB) {
  69. orgSql := tx.Statement.SQL.String()
  70. if _, ok := tableMap[tx.Statement.Table]; ok &&
  71. (strings.Contains(strings.ToLower(orgSql), "delete") ||
  72. strings.Contains(strings.ToLower(orgSql), "update") ||
  73. strings.Contains(strings.ToLower(orgSql), "insert")) {
  74. newSql := utils.ReplaceDriverKeywords(utils.DbDriverName, orgSql)
  75. tx.Statement.SQL.Reset()
  76. tx.Statement.SQL.WriteString(newSql)
  77. }
  78. })
  79. }
  80. //全局赋值数据库链接
  81. DbMap = dbMap
  82. }
  83. // connectDb
  84. // @Description: 达梦数据库连接
  85. // @param dsn
  86. // @param aliasName
  87. // @param newLogger
  88. // @param dbMap
  89. // @param isDefault
  90. func connectDb(dsn, aliasName string, newLogger logger.Interface, dbMap map[string]*gorm.DB, isDefault bool) {
  91. //fmt.Println("dsn:", dsn, " == ;aliasName:", aliasName)
  92. if dsn == `` {
  93. return
  94. }
  95. var dialector gorm.Dialector
  96. switch utils.DbDriverName {
  97. case utils.DbDriverByMysql:
  98. if !strings.Contains(dsn, `parseTime`) {
  99. dsn += `&parseTime=true`
  100. }
  101. dialector = mysql.Open(dsn)
  102. case utils.DbDriverByDm:
  103. dialector = dm.Open(dsn)
  104. default:
  105. panic(fmt.Errorf("数据库 链接异常,错误的数据库类型,数据库:%s", utils.DbDriverName))
  106. }
  107. db, err := gorm.Open(dialector, &gorm.Config{
  108. Logger: newLogger,
  109. NamingStrategy: schema.NamingStrategy{
  110. SingularTable: true, // 表示使用单数表名,启用该选项后,GORM 将不会对表名进行复数化处理
  111. },
  112. })
  113. if err != nil {
  114. //global.LOG.Errorf("mysql 启动异常,数据库:default;Err:", err)
  115. panic(fmt.Errorf("数据库 链接异常,数据库:%s;Err:%s", aliasName, err))
  116. }
  117. //创建连接池
  118. sqlDB, err := db.DB()
  119. if err != nil {
  120. //global.LOG.Errorf("达梦 创建连接池失败,数据库:default;Err:", err)
  121. panic(fmt.Errorf("数据库 创建连接池失败,数据库:%s;Err:%s", aliasName, err))
  122. }
  123. dbMap[aliasName] = db
  124. //默认数据库连接
  125. if isDefault {
  126. DEFAULT_DB = db
  127. }
  128. // SetMaxIdleConns 设置空闲连接池中连接的最大数量
  129. sqlDB.SetMaxIdleConns(50)
  130. // SetMaxOpenConns 设置打开数据库连接的最大数量。
  131. sqlDB.SetMaxOpenConns(100)
  132. // SetConnMaxLifetime 设置了连接可复用的最大时间。
  133. sqlDB.SetConnMaxLifetime(10 * time.Minute)
  134. }
  135. func (t *LocalTime) MarshalJSON() ([]byte, error) {
  136. tTime := time.Time(*t)
  137. if tTime.IsZero() {
  138. return []byte("\"\""), nil
  139. }
  140. return []byte(fmt.Sprintf("\"%v\"", tTime.Format("2006-01-02 15:04:05"))), nil
  141. }
  142. func (t LocalTime) Value() (driver.Value, error) {
  143. var zeroTime time.Time
  144. tlt := time.Time(t)
  145. //判断给定时间是否和默认零时间的时间戳相同
  146. if tlt.UnixNano() == zeroTime.UnixNano() {
  147. return nil, nil
  148. }
  149. return tlt, nil
  150. }
  151. func (t *LocalTime) Scan(v interface{}) error {
  152. if value, ok := v.(time.Time); ok {
  153. *t = LocalTime(value)
  154. return nil
  155. }
  156. return fmt.Errorf("can not convert %v to timestamp", v)
  157. }