构建任务依赖图,可多作业并行工作,构建一组任务执行单元,跟踪任务执行时间和状态,可增加页面控制任务是否执行。
RadonDB 是青云(QingCloud)基于 MySQL 研发的新一代分布式关系型数据库,于 5 月 10 日开源
dble是上海爱可生信息技术股份有限公司基于mysql的高可扩展性的分布式中间件,存在以下几个优势特性: 数据水平拆分 随着业务的发展,您可以使用dble来替换原始的单个MySQL
已经实现web界面和ZK集群,直接查看《MySQL-Binlog使用文档.doc》根据指示一步步操作即可。--- : 连接到MySQL数据库,基于Netty框架,实时解析MySQL的二进制日志binlog而非定时查询数据库,提取出用户级感兴趣的事件:INSERT,UPDATE,DELETE,供后续分析如事件抛到大数据系统进行分析。目前支持的事件包括:ROTATE, FORMAT_DESCRIPTION, QUERY,TABLE_MAP, [WRITE_ROWS,EXT_WRITE_ROWS] [UPDATE_ROWS,EXT_UPDATE_ROWS] [DELETE_ROWS,EXT_DELETE_ROWS] XID ROWS_QUERY --- JDK版本:1.8 MySQL版本:【5.6.12,5.6.20、5.6.27、5.7.12】、MariaDB【10.0.16】【5.5.5-10.1.8-MariaDB-log】通过测试,其它版本未进行兼容性测试。
使用Maxwell作为MySQL数据库的从库对数据进行记录,Maxwell将数据库的数据操作记录到binlog日志文件当中,kafka对该日志文件进行读取,取得数据库的操作数据,Storm取得从kafka中取得这些数据之后进行过滤,取得自己需要的数据,然后将自己需要的数据交给rabbitmq进行逻辑操作。然后将处理过的数据放入Redis中交给前端使用
用于给ElasticSearch建立索引的工具,数据源可以支持Binlog增量、阿里DTS增量、数据库全量
spring boot mybatis整合. 监听mysql binlog日志, 并通过rabbitMQ消息, 同步redis
已经实现web界面和ZK集群,直接查看《MySQL-Binlog使用文档.doc》根据指示一步步操作即可。--- : 连接到MySQL数据库,基于Netty框架,实时解析MySQL的二进制日志binlog而非定时查询数据库,提取出用户级感兴趣的事件:INSERT,UPDATE,DELETE,供后续分析如事件抛到大数据系统进行分析。目前支持的事件包括:ROTATE, FORMAT_DESCRIPTION, QUERY,TABLE_MAP, [WRITE_ROWS,EXT_WRITE_ROWS] [UPDATE_ROWS,EXT_UPDATE_ROWS] [DELETE_ROWS,EXT_DELETE_ROWS] XID ROWS_QUERY --- JDK版本:1.8 MySQL版本:【5.6.12,5.6.20、5.6.27、5.7.12】、MariaDB【10.0.16】【5.5.5-10.1.8-MariaDB-log】通过测试,其它版本未进行兼容性测试。
mysql_repl_repair mysql_repl_repair.py是一款用于修复mysql主从复制错误的python小工具,该工具可以修复由于主从数据不一致导致的1062