initDb.go 5.4 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176
  1. package global
  2. import (
  3. "database/sql/driver"
  4. _ "dm"
  5. dm "dmgorm2"
  6. "eta/eta_api/utils"
  7. "fmt"
  8. "gorm.io/driver/mysql"
  9. "gorm.io/gorm"
  10. "gorm.io/gorm/logger"
  11. "gorm.io/gorm/schema"
  12. "io"
  13. "log"
  14. "os"
  15. "strings"
  16. "time"
  17. )
  18. var (
  19. tableMap = map[string]int{
  20. "base_from_mysteel_chemical_data": 1,
  21. }
  22. )
  23. type LocalTime time.Time
  24. // InitDb
  25. // @Description: 数据库初始化
  26. func InitDb() {
  27. dbMap := make(map[string]*gorm.DB)
  28. //开启日志
  29. logWriter := io.MultiWriter(utils.Binlog) //binlog日志,记录到文件中去
  30. if utils.RunMode == `dev` { // 测试环境,默认输出在控制台,不需要的话,可以注释if里面下面的这行
  31. logWriter = io.MultiWriter(utils.Binlog, os.Stdout)
  32. }
  33. newLogger := logger.New(log.New(logWriter, "\r\n", log.LstdFlags), logger.Config{
  34. SlowThreshold: 200 * time.Millisecond, //慢sql :200ms
  35. LogLevel: logger.Info, //记录的日志类型,info代表所有信息都记录
  36. IgnoreRecordNotFoundError: true, //是否忽略找不到数据错误信息(只是日志记录记录成err还是普通的输出的区别,并不影响业务代码中的:找不到数据行error)
  37. Colorful: false, //是否颜色输出
  38. })
  39. // 默认库
  40. connectDb(utils.MYSQL_URL, utils.DbNameMaster, newLogger, dbMap, true)
  41. // 报告库
  42. connectDb(utils.MYSQL_URL_RDDP, utils.DbNameReport, newLogger, dbMap, false)
  43. // 手工数据库
  44. connectDb(utils.MYSQL_URL_EDB, utils.DbNameManualIndex, newLogger, dbMap, false)
  45. // 指标库
  46. connectDb(utils.MYSQL_URL_DATA, utils.DbNameIndex, newLogger, dbMap, false)
  47. // 钢联库
  48. connectDb(utils.MYSQL_URL_GL, utils.DbNameGL, newLogger, dbMap, false)
  49. if utils.MYSQL_AI_URL != "" {
  50. // AI库
  51. connectDb(utils.MYSQL_AI_URL, utils.DbNameAI, newLogger, dbMap, false)
  52. }
  53. // 用户主库
  54. if utils.MYSQL_WEEKLY_URL != `` && (utils.BusinessCode == utils.BusinessCodeRelease || utils.BusinessCode == utils.BusinessCodeSandbox || utils.BusinessCode == utils.BusinessCodeDebug) {
  55. connectDb(utils.MYSQL_WEEKLY_URL, utils.DbNameWeekly, newLogger, dbMap, false)
  56. }
  57. for _, db := range dbMap {
  58. _ = db.Callback().Query().Before("gorm:query").Register("before_query", func(tx *gorm.DB) {
  59. orgSql := tx.Statement.SQL.String()
  60. if _, ok := tableMap[tx.Statement.Table]; ok && strings.Contains(strings.ToLower(orgSql), "select") {
  61. newSql := utils.ReplaceDriverKeywords(utils.DbDriverName, orgSql)
  62. tx.Statement.SQL.Reset()
  63. tx.Statement.SQL.WriteString(newSql)
  64. }
  65. })
  66. _ = db.Callback().Raw().Before("gorm:raw").Register("before_raw", func(tx *gorm.DB) {
  67. orgSql := tx.Statement.SQL.String()
  68. if _, ok := tableMap[tx.Statement.Table]; ok &&
  69. (strings.Contains(strings.ToLower(orgSql), "delete") ||
  70. strings.Contains(strings.ToLower(orgSql), "update") ||
  71. strings.Contains(strings.ToLower(orgSql), "insert")) {
  72. newSql := utils.ReplaceDriverKeywords(utils.DbDriverName, orgSql)
  73. tx.Statement.SQL.Reset()
  74. tx.Statement.SQL.WriteString(newSql)
  75. }
  76. })
  77. }
  78. //全局赋值数据库链接
  79. DbMap = dbMap
  80. }
  81. // connectDb
  82. // @Description: 达梦数据库连接
  83. // @param dsn
  84. // @param aliasName
  85. // @param newLogger
  86. // @param dbMap
  87. // @param isDefault
  88. func connectDb(dsn, aliasName string, newLogger logger.Interface, dbMap map[string]*gorm.DB, isDefault bool) {
  89. //fmt.Println("dsn:", dsn, " == ;aliasName:", aliasName)
  90. if dsn == `` {
  91. return
  92. }
  93. var dialector gorm.Dialector
  94. switch utils.DbDriverName {
  95. case utils.DbDriverByMysql:
  96. if !strings.Contains(dsn, `parseTime`) {
  97. dsn += `&parseTime=true`
  98. }
  99. dialector = mysql.Open(dsn)
  100. case utils.DbDriverByDm:
  101. dialector = dm.Open(dsn)
  102. default:
  103. panic(fmt.Errorf("数据库 链接异常,错误的数据库类型,数据库:%s", utils.DbDriverName))
  104. }
  105. db, err := gorm.Open(dialector, &gorm.Config{
  106. Logger: newLogger,
  107. NamingStrategy: schema.NamingStrategy{
  108. SingularTable: true, // 表示使用单数表名,启用该选项后,GORM 将不会对表名进行复数化处理
  109. },
  110. })
  111. if err != nil {
  112. //global.LOG.Errorf("mysql 启动异常,数据库:default;Err:", err)
  113. panic(fmt.Errorf("数据库 链接异常,数据库:%s;Err:%s", aliasName, err))
  114. }
  115. //创建连接池
  116. sqlDB, err := db.DB()
  117. if err != nil {
  118. //global.LOG.Errorf("达梦 创建连接池失败,数据库:default;Err:", err)
  119. panic(fmt.Errorf("数据库 创建连接池失败,数据库:%s;Err:%s", aliasName, err))
  120. }
  121. dbMap[aliasName] = db
  122. //默认数据库连接
  123. if isDefault {
  124. DEFAULT_DB = db
  125. }
  126. // SetMaxIdleConns 设置空闲连接池中连接的最大数量
  127. sqlDB.SetMaxIdleConns(50)
  128. // SetMaxOpenConns 设置打开数据库连接的最大数量。
  129. sqlDB.SetMaxOpenConns(100)
  130. // SetConnMaxLifetime 设置了连接可复用的最大时间。
  131. sqlDB.SetConnMaxLifetime(10 * time.Minute)
  132. }
  133. func (t *LocalTime) MarshalJSON() ([]byte, error) {
  134. tTime := time.Time(*t)
  135. if tTime.IsZero() {
  136. return []byte("\"\""), nil
  137. }
  138. return []byte(fmt.Sprintf("\"%v\"", tTime.Format("2006-01-02 15:04:05"))), nil
  139. }
  140. func (t LocalTime) Value() (driver.Value, error) {
  141. var zeroTime time.Time
  142. tlt := time.Time(t)
  143. //判断给定时间是否和默认零时间的时间戳相同
  144. if tlt.UnixNano() == zeroTime.UnixNano() {
  145. return nil, nil
  146. }
  147. return tlt, nil
  148. }
  149. func (t *LocalTime) Scan(v interface{}) error {
  150. if value, ok := v.(time.Time); ok {
  151. *t = LocalTime(value)
  152. return nil
  153. }
  154. return fmt.Errorf("can not convert %v to timestamp", v)
  155. }