1 Star 0 Fork 0

蒋逸欣 / binlog2cache

加入 Gitee
与超过 1200万 开发者一起发现、参与优秀开源项目,私有仓库也完全免费 :)
免费加入
该仓库未声明开源许可证文件(LICENSE),使用请关注具体项目描述及其代码上游依赖。
克隆/下载
贡献代码
同步代码
取消
提示: 由于 Git 不支持空文件夾,创建文件夹后会生成空的 .keep 文件
Loading...
README

binlog2cache

监听Mysql binlog日志并实时将变更同步至缓存(redis)

为什么需要binlog2cache

存储在mysql中并且在redis中缓存的数据是易变的,这回引起脏数据。因此应该实时将数据库中最新的数据通过binlog2cache同步至redis缓存

使用方式

  1. clone项目并安装依赖
git clone https://github.com/jiangyx3915/binlog2cache.git
pip install -r requirements.txt
  1. 修改config.py文件中的连接配置
  2. 运行文件开始同步
python binlog2cache.py
  1. 查看redis修改
redis-cli monitor

案例描述

MySQL Data

+-------+-------------+------+-----+---------+----------------+
| Field | Type        | Null | Key | Default | Extra          |
+-------+-------------+------+-----+---------+----------------+
| id    | int(11)     | NO   | PRI | NULL    | auto_increment |
| name  | varchar(255)| YES  |     | NULL    |                |
| age   | int(11)     | YES  |     | NULL    |                |
+-------+-------------+------+-----+---------+----------------+

Redis Cache Data

以hash结构进行存储
生成的键为 db:table:id 定位一行数据

db:table:id
    id:   xxx
    name: xxx
    age:  xxx    

注意事项

使用 binlog2cache 必须开启MySQL中的 binlog 并且设置 binlog-format,配置如下

[mysqld]
server-id = 1
log_bin = /var/log/mysql/mysql-bin.log
expire_logs_days = 10
max_binlog_size = 1000M
binlog-format = row

max_binlog_size:bin log日志每达到设定大小后,会使用新的bin log日志。如mysql-bin.000002达到500M后,创建并使用mysql-bin.000003文件作为日志记录。 expire_logs_days:保留指定日期范围内的bin log历史日志,超出时间则会清除

空文件

简介

sync mysql binlog data to redis 展开 收起
Python
取消

发行版

暂无发行版

贡献者

全部

近期动态

加载更多
不能加载更多了
Python
1
https://gitee.com/jiangyixin1209/binlog2cache.git
git@gitee.com:jiangyixin1209/binlog2cache.git
jiangyixin1209
binlog2cache
binlog2cache
master

搜索帮助