缓存管理
概述
本章节介绍 monc 的用法。
准备条件
创建链接对象
数据库的连接创建提供了五个方法。
- MustNewModel
函数签名:
MustNewModel func(uri, db, collection string, c cache.CacheConf, opts ...cache.Option) *Model
说明:
1. 当 mongodb 连接创建存在问题时,会直接进退退出,输出错误日志。
2. 当 db 和 collection 不存在时,会创建 db 和 collection。
入参:
1. uri: mongodb uri
2. db: 数据库名
3. collection: 集合名
4. c: cache cluster config
5. opts: WithExpiry 自定义过期时间,WithNotFoundExpiry 没有记录时,缓存空记录时间(防止缓存穿透)
返回值:
1. *Model: 连接管理对象 - MustNewNodeModel
函数签名:
MustNewNodeModel func(uri, db, collection string, rds *redis.Redis, opts ...cache.Option) *Model
说明:
1. 当 mongodb 连接创建存在问题时,会直接进退退出,输出错误日志。
2. 当 db 和 collection 不存在时,会创建 db 和 collection。
入参:
1. uri: mongodb uri
2. db: 数据库名
3. collection: 集合名
4. rds: redis 链接对象
5. opts: WithExpiry 自定义过期时间,WithNotFoundExpiry 没有记录时,缓存空记录时间(防止缓存穿透)
返回值:
1. *Model: 连接管理对象 - NewModel
函数签名:
NewModel func(uri, db, collection string, conf cache.CacheConf, opts ...cache.Option) (*Model, error)
说明:
1. 当 db 和 collection 不存在时,会创建 db 和 collection。
入参:
1. uri: mongodb uri
2. db: 数据库名
3. collection: 集合名
4. c: cache cluster config
5. opts: WithExpiry 自定义过期时间,WithNotFoundExpiry 没有记录时,缓存空记录时间(防止缓存穿透)
返回值:
1. *Model: 连接管理对象
2. error: 创建错误 - NewNodeModel
函数签名:
NewNodeModel func(uri, db, collection string, rds *redis.Redis, opts ...cache.Option) (*Model, error)
说明:
1. 当 db 和 collection 不存在时,会创建 db 和 collection。
入参:
1. uri: mongodb uri
2. db: 数据库名
3. collection: 集合名
4. rds: redis 链接对象
5. opts: WithExpiry 自定义过期时间,WithNotFoundExpiry 没有记录时,缓存空记录时间(防止缓存穿透)
返回值:
1. *Model: 连接管理对象
2. error: 创建错误 - NewModelWithCache
函数签名:
NewModelWithCache func(uri, db, collection string, c cache.Cache) (*Model, error)
说明:
1. 当 db 和 collection 不存在时,会创建 db 和 collection。
入参:
1. uri: mongodb uri
2. db: 数据库名
3. collection: 集合名
4. c: 自定义 cache 实现
返回值:
1. *Model: 连接管理对象
2. error: 创建错误
新增
- InsertOne
函数签名:
InsertOne func(ctx context.Context, key string, document interface{},
opts ...*mopt.InsertOneOptions) (*mongo.InsertOneResult, error)
说明:
1. 新增单条记录,新增同时会清理 key 缓存。
入参:
1. ctx: context
2. key: 缓存 key
3. document: 记录
4. opts: 操作选项
返回值:
1. *mongo.InsertOneResult: 新增结果,包含记录 _id 信息
2. error: 操作结果
示例:
var prefixUserCacheKey = "cache:user:"
type User struct {
ID primitive.ObjectID `bson:"_id,omitempty" json:"id,omitempty"`
// TODO: Fill your own fields
UpdateAt time.Time `bson:"updateAt,omitempty" json:"updateAt,omitempty"`
CreateAt time.Time `bson:"createAt,omitempty" json:"createAt,omitempty"`
}
func (m *defaultUserModel) Insert(ctx context.Context, data *User) error {
if data.ID.IsZero() {
data.ID = primitive.NewObjectID()
data.CreateAt = time.Now()
data.UpdateAt = time.Now()
}
key := prefixUserCacheKey + data.ID.Hex()
_, err := m.conn.InsertOne(ctx, key, data)
return err
} - InsertOneNoCache
函数签名:
InsertOneNoCache func(ctx context.Context, document interface{},
opts ...*mopt.InsertOneOptions) (*mongo.InsertOneResult, error)
说明:
1. 新增单条记录,不会清理缓存。
入参:
1. ctx: context
2. document: 记录
3. opts: 操作选项
返回值:
1. *mongo.InsertOneResult: 新增结果,包含记录 _id 信息
2. error: 操作结果
示例:
type User struct {
ID primitive.ObjectID `bson:"_id,omitempty" json:"id,omitempty"`
// TODO: Fill your own fields
UpdateAt time.Time `bson:"updateAt,omitempty" json:"updateAt,omitempty"`
CreateAt time.Time `bson:"createAt,omitempty" json:"createAt,omitempty"`
}
func (m *defaultUserModel) Insert(ctx context.Context, data *User) error {
if data.ID.IsZero() {
data.ID = primitive.NewObjectID()
data.CreateAt = time.Now()
data.UpdateAt = time.Now()
}
_, err := m.conn.InsertOneNoCache(ctx, data)
return err
}
更新
- UpdateByID
函数签名:
UpdateByID func(ctx context.Context, key string, id, update interface{},
opts ...*mopt.UpdateOptions) (*mongo.UpdateResult, error)
说明:
1. 通过 _id 更新记录,同时会清理 key 缓存。
入参:
1. ctx: context
2. key: 缓存 key
3. id: 记录 _id
4. update: 记录
5. opts: 操作选项
返回值:
1. *mongo.UpdateResult: 更新结果,包含记录 _id 信息
2. error: 操作结果
示例:
var prefixUserCacheKey = "cache:user:"
type User struct {
ID primitive.ObjectID `bson:"_id,omitempty" json:"id,omitempty"`
// TODO: Fill your own fields
UpdateAt time.Time `bson:"updateAt,omitempty" json:"updateAt,omitempty"`
CreateAt time.Time `bson:"createAt,omitempty" json:"createAt,omitempty"`
}
func (m *defaultUserModel) Update(ctx context.Context, data *User) error {
data.UpdateAt = time.Now()
key := prefixUserCacheKey + data.ID.Hex()
_, err := m.conn.UpdateByID(ctx, key, bson.M{"_id": data.ID}, data)
return err
} - UpdateByIDNoCache
函数签名:
UpdateByIDNoCache func(ctx context.Context, id, update interface{},
opts ...*mopt.UpdateOptions) (*mongo.UpdateResult, error)
说明:
1. 通过 _id 更新记录,不会清理缓存。
入参:
1. ctx: context
3. id: 记录 _id
3. update: 记录
4. opts: 操作选项
返回值:
1. *mongo.UpdateResult: 更新结果,包含记录 _id 信息
2. error: 操作结果
示例:
type User struct {
ID primitive.ObjectID `bson:"_id,omitempty" json:"id,omitempty"`
// TODO: Fill your own fields
UpdateAt time.Time `bson:"updateAt,omitempty" json:"updateAt,omitempty"`
CreateAt time.Time `bson:"createAt,omitempty" json:"createAt,omitempty"`
}
func (m *defaultUserModel) Update(ctx context.Context, data *User) error {
data.UpdateAt = time.Now()
key := prefixUserCacheKey + data.ID.Hex()
_, err := m.conn.UpdateByIDNoCache(ctx, bson.M{"_id": data.ID}, data)
return err
} - UpdateMany
函数签名:
UpdateMany func(ctx context.Context, keys []string, filter, update interface{},
opts ...*mopt.UpdateOptions) (*mongo.UpdateResult, error)
说明:
1. 更新多条记录,同时会清理 keys 缓存。
入参:
1. ctx: context
2. keys: 缓存 key 列表
3. filter: 过滤条件
4. update: 记录
5. opts: 操作选项
返回值:
1. *mongo.UpdateResult: 更新结果,包含记录 _id 信息
2. error: 操作结果
示例:
var prefixUserCacheKey = "cache:user:"
type User struct {
ID primitive.ObjectID `bson:"_id,omitempty" json:"id,omitempty"`
Name string `bson:"name,omitempty" json:"name,omitempty"`
Age int `bson:"age,omitempty" json:"age,omitempty"`
// TODO: Fill your own fields
UpdateAt time.Time `bson:"updateAt,omitempty" json:"updateAt,omitempty"`
CreateAt time.Time `bson:"createAt,omitempty" json:"createAt,omitempty"`
}
func (m *defaultUserModel) UpdateMany(ctx context.Context, name string, data []*User) error {
var keys = make([]string, 0, len(data))
for _, v := range data {
keys = append(keys, prefixUserCacheKey+v.ID.Hex())
v.UpdateAt = time.Now()
}
_, err := m.conn.UpdateMany(ctx, keys, bson.M{"name": name}, data)
return err
} - UpdateManyNoCache
函数签名:
UpdateManyNoCache func(ctx context.Context, filter, update interface{},
opts ...*mopt.UpdateOptions) (*mongo.UpdateResult, error)
说明:
1. 通过 _id 更新记录,不会清理缓存。
入参:
1. ctx: context
2. filter: 过滤条件
3. update: 记录
4. opts: 操作选项
返回值:
1. *mongo.UpdateResult: 更新结果,包含记录 _id 信息
2. error: 操作结果
示例:
type User struct {
ID primitive.ObjectID `bson:"_id,omitempty" json:"id,omitempty"`
Name string `bson:"name,omitempty" json:"name,omitempty"`
Age int `bson:"age,omitempty" json:"age,omitempty"`
// TODO: Fill your own fields
UpdateAt time.Time `bson:"updateAt,omitempty" json:"updateAt,omitempty"`
CreateAt time.Time `bson:"createAt,omitempty" json:"createAt,omitempty"`
}
func (m *defaultUserModel) UpdateMany(ctx context.Context, name string, data []*User) error {
_, err := m.conn.UpdateManyNoCache(ctx, bson.M{"name": name}, data)
return err
} - UpdateOne
函数签名:
UpdateOne func(ctx context.Context, key string, filter, update interface{},
opts ...*mopt.UpdateOptions) (*mongo.UpdateResult, error)
说明:
1. 更新单条记录,同时清理 key 缓存。
入参:
1. ctx: context
2. key: 缓存 key
3. filter: 过滤条件
4. update: 记录
5. opts: 操作选项
返回值:
1. *mongo.UpdateResult: 更新结果,包含记录 _id 信息
2. error: 操作结果
示例:
var prefixUserCacheKey = "cache:user:"
type User struct {
ID primitive.ObjectID `bson:"_id,omitempty" json:"id,omitempty"`
Name string `bson:"name,omitempty" json:"name,omitempty"`
Age int `bson:"age,omitempty" json:"age,omitempty"`
// TODO: Fill your own fields
UpdateAt time.Time `bson:"updateAt,omitempty" json:"updateAt,omitempty"`
CreateAt time.Time `bson:"createAt,omitempty" json:"createAt,omitempty"`
}
func (m *defaultUserModel) Update(ctx context.Context, data *User) error {
data.UpdateAt = time.Now()
key := prefixUserCacheKey + data.ID.Hex()
_, err := m.conn.UpdateOne(ctx, key, bson.M{"name": data.Name}, data)
return err
} - UpdateOneNoCache
函数签名:
UpdateOneNoCache func(ctx context.Context, filter, update interface{},
opts ...*mopt.UpdateOptions) (*mongo.UpdateResult, error)
说明:
1. 更新单条记录,不会清理缓存。
入参:
1. ctx: context
2. filter: 过滤条件
3. update: 记录
4. opts: 操作选项
返回值:
1. *mongo.UpdateResult: 更新结果,包含记录 _id 信息
2. error: 操作结果
示例:
type User struct {
ID primitive.ObjectID `bson:"_id,omitempty" json:"id,omitempty"`
Name string `bson:"name,omitempty" json:"name,omitempty"`
Age int `bson:"age,omitempty" json:"age,omitempty"`
// TODO: Fill your own fields
UpdateAt time.Time `bson:"updateAt,omitempty" json:"updateAt,omitempty"`
CreateAt time.Time `bson:"createAt,omitempty" json:"createAt,omitempty"`
}
func (m *defaultUserModel) Update(ctx context.Context, data *User) error {
data.UpdateAt = time.Now()
_, err := m.conn.UpdateOneNoCache(ctx, bson.M{"name": data.Name}, data)
return err
}
查询
- FindOne
函数签名:
FindOne func(ctx context.Context, key string, v, filter interface{},
opts ...*mopt.FindOneOptions) error
说明:
1. 查询单条记录,优先通过缓存 key 查找,查不到会从数据库查找再插入缓存中,
如果数据库也不存在会在缓存中插入空记录,防止缓存穿透。
入参:
1. ctx: context
2. key: 缓存 key
3. v: 查询记录结果
4. filter: 查询条件
5. opts: 操作选项
返回值:
1. error: 操作结果
示例:
var prefixUserCacheKey = "cache:user:"
type User struct {
ID primitive.ObjectID `bson:"_id,omitempty" json:"id,omitempty"`
Name string `bson:"name,omitempty" json:"name,omitempty"`
Age int `bson:"age,omitempty" json:"age,omitempty"`
// TODO: Fill your own fields
UpdateAt time.Time `bson:"updateAt,omitempty" json:"updateAt,omitempty"`
CreateAt time.Time `bson:"createAt,omitempty" json:"createAt,omitempty"`
}
func (m *defaultUserModel) FindOne(ctx context.Context, id string) (*User, error) {
oid, err := primitive.ObjectIDFromHex(id)
if err != nil {
return nil, ErrInvalidObjectId
}
var data User
key := prefixUserCacheKey + id
err = m.conn.FindOne(ctx, key, &data, bson.M{"_id": oid})
switch err {
case nil:
return &data, nil
case monc.ErrNotFound:
return nil, ErrNotFound
default:
return nil, err
}
} - FindOneNoCache
函数签名:
FindOneNoCache func(ctx context.Context, v, filter interface{},
opts ...*mopt.FindOneOptions) error
说明:
1. 查询单条记录,不使用缓存。
入参:
1. ctx: context
2. v: 查询记录结果
3. filter: 查询条件
4. opts: 操作选项
返回值:
1. error: 操作结果
示例:
type User struct {
ID primitive.ObjectID `bson:"_id,omitempty" json:"id,omitempty"`
Name string `bson:"name,omitempty" json:"name,omitempty"`
Age int `bson:"age,omitempty" json:"age,omitempty"`
// TODO: Fill your own fields
UpdateAt time.Time `bson:"updateAt,omitempty" json:"updateAt,omitempty"`
CreateAt time.Time `bson:"createAt,omitempty" json:"createAt,omitempty"`
}
func (m *defaultUserModel) FindOne(ctx context.Context, id string) (*User, error) {
oid, err := primitive.ObjectIDFromHex(id)
if err != nil {
return nil, ErrInvalidObjectId
}
var data User
err = m.conn.FindOneNoCache(ctx, &data, bson.M{"_id": oid})
switch err {
case nil:
return &data, nil
case monc.ErrNotFound:
return nil, ErrNotFound
default:
return nil, err
}
}
删除
- DeleteOne
函数签名:
DeleteOne func(ctx context.Context, key string, filter interface{},
opts ...*mopt.DeleteOptions) (int64, error)
说明:
1. 删除单条记录,同时会清理 key 缓存
入参:
1. ctx: context
2. key: 缓存 key
3. filter: 查询条件
4. opts: 操作选项
返回值:
1. int64: 删除个数
2. error: 操作结果
示例:
var prefixUserCacheKey = "cache:user:"
type User struct {
ID primitive.ObjectID `bson:"_id,omitempty" json:"id,omitempty"`
Name string `bson:"name,omitempty" json:"name,omitempty"`
Age int `bson:"age,omitempty" json:"age,omitempty"`
// TODO: Fill your own fields
UpdateAt time.Time `bson:"updateAt,omitempty" json:"updateAt,omitempty"`
CreateAt time.Time `bson:"createAt,omitempty" json:"createAt,omitempty"`
}
func (m *defaultUserModel) Delete(ctx context.Context, id string) error {
oid, err := primitive.ObjectIDFromHex(id)
if err != nil {
return ErrInvalidObjectId
}
key := prefixUserCacheKey + id
_, err = m.conn.DeleteOne(ctx, key, bson.M{"_id": oid})
return err
} - DeleteOneNoCache
函数签名:
DeleteOneNoCache func(ctx context.Context, filter interface{},
opts ...*mopt.DeleteOptions) (int64, error)
说明:
1. 删除单条记录,同时会清理 key 缓存
入参:
1. ctx: context
2. filter: 查询条件
3. opts: 操作选项
返回值:
1. int64: 删除个数
2. error: 操作结果
示例:
type User struct {
ID primitive.ObjectID `bson:"_id,omitempty" json:"id,omitempty"`
Name string `bson:"name,omitempty" json:"name,omitempty"`
Age int `bson:"age,omitempty" json:"age,omitempty"`
// TODO: Fill your own fields
UpdateAt time.Time `bson:"updateAt,omitempty" json:"updateAt,omitempty"`
CreateAt time.Time `bson:"createAt,omitempty" json:"createAt,omitempty"`
}
func (m *defaultUserModel) Delete(ctx context.Context, id string) error {
oid, err := primitive.ObjectIDFromHex(id)
if err != nil {
return ErrInvalidObjectId
}
_, err = m.conn.DeleteOneNoCache(ctx, bson.M{"_id": oid})
return err
}