分布式dbs,分布式 | DBLE 3.23.04.0 版本发布

科技资讯 投稿 7100 0 评论

分布式dbs,以下对 DBLE 3.23.04.0 版本的 Release Notes 进行详细解读。

文章主要分为以下四部分内容:

一、DBLE 项目介绍

二、新版本主要更新解读

三、完整 Release Notes

四、LTS 版本更新

一、DBLE 项目介绍

DBLE 是企业级开源分布式中间件,江湖人送外号 “MyCat Plus”;以其简单稳定,持续维护,良好的社区环境和广大的群众基础得到了社区的大力支持;

DBLE 破壳日:2017.10.24

爱好:开源

技能:数据水平拆分、读写分离、分布式事务支持、多分片算法、全局 ID、IP/SQL 黑白名单

特长:MySQL 语法兼容、复杂查询优化、低改造成本、成熟稳定、成熟技术栈

    DBLE 官方项目:

    https://github.com/actiontech/dble

  • DBLE 官方文档(已更新):

    https://actiontech.github.io/dble-docs-cn

  • 新版本 DBLE 下载地址及 Release Notes:

    https://github.com/actiontech/dble/releases

官方课程:

    点击学习《DBLE 快速上手》,实操视频 + 图文稿!

  • 点击学习《DBLE 公开课》进阶课程

Tips:建议下载最新的 Releases 版本,下载 tar 压缩包即可,如有源码编译需求的,可以下载源码包。

二、新版本主要功能更新解

新版 DBLE 新增&重构功能 6 个,修复社区重要缺陷 5+,其他 bug 100+,和旧版本的不兼容项调整 1 处。

致谢

    感谢 Github 用户提供的优质 Issue,Star 突破 1024!

  • 感谢 QQ 群(669663113)和微信群内朋友提供的有效反馈,群用户突破千人!

  • 主要更新:

    1、针对分片表 JOIN 全局表,支持多表 UPDATE/DELETE

    当 UPDATE 满足以下判断条件时,部分复杂 UPDATE 语句会在确保数据正确的情况下被下发执行。

      包括 UPDATE 语句操作多表的时候

      • 操作的全是全局表,并拥有同样的分片范围,并且 WHERE 条件中不含有子查询 

      • 所有操作的表都有条件显式路由到同一个节点,并且 WHERE 条件不含有子查询 

    • 包括 UPDATE 语句操作单表,但是 WHERE 条件中包含子查询时

        被操作的表格是单节点表,WHERE 条件中的所有表格都有条件能路由到同一个节点

      • 被操作的表格是全局表或者分片表,其余所有表格都是全局表,并且分片范围都能覆盖被操作的表格(需注意“分片范围”指的是 配置文件里面配的表分片范围,而不是经过 WHERE 二次筛选后的范围)

    详情请见文档对应章节。

    2、TCP 保活相关参数

    DBLE 在启动时会创建与 MySQL 通信的连接池,但是这些连接可能在 TCP 三次握手时由于某些情况丢失了第三次握手的信息。此时这些连接被 MySQL 直接丢弃,而在 DBLE 侧并无感知,导致 DBLE 的连接池的连接的数量达不到预期设置的值,导致 DBLE 出现异常。

    Linux 本身就有 keep-alive 机制,并提供对应参数控制,但是这是系统级别参数,一旦直接修改可能影响其他应用影响面较大。为了解决这个问题,DBLE 在 bootstrap.cnf 中提供相关参数配置并且只影响 DBLE 内的连接。

    目前该功能为实验功能,对 JDK 版本有要求。

    详情请见文档对应章节。

    三、完整 Release Notes

    特性:

      [#3738] 针对分片表 JOIN 全局表,支持多表 UPDATE/DELETE。更多详细信息,请参见 doc,doc

    • [#3743] 对读写分离模式的 -DfakeMysqlVersion 设置规则进行了调整。更多详细信息,请参见 doc

    • [#3742] 调整最小栈值(-Xss)的默认值

    • [#3739] 支持调整 TCP 相关参数(实验功能)。更多详细信息,请参见 doc

    • [#3727] 优化全局序列加载内部逻辑

    • [#3745] 加强/优化支持 SSL 的内部逻辑代码,以及可能发展成内存泄漏的场景处理

    缺陷修复:

      [#3741] 读写分离中,当数据库的自增步长不等于 1 时,使用 JDBC 连接 DBLE 插入错误数据

    • [#3744] 读写分离中,执行大包语句不受 DBLE 设置的 maxPacketSize 的限制

    • [#3746] 扩缩容 connection-pool-evictor-thread 线程偶现退出

    • [#3747] 主从切换后,业务端开启事务进行 ROLLBACK 时,部分数据没有被回滚

    • 支持在管理端查询表时可以设置列别名

    • 调整一些日志打印

    • 解决一些 NPE 问题

    和旧版本的不兼容项:

      [#3743] 对读写分离模式的 -DfakeMysqlVersion 设置规则进行了调整。更多详细信息,请参见 doc

       

    四、LTS 版本更新

    对于 LTS 的版本,有小版本发出,修复一些 bug:

    3.22.07.3

    我们发布了 3.22.07.3,这是个基于 3.22.07.01 的 bug 修复版本。

      某些场景下执行大包语句出现 hang、Lost connection..。

    • 两张表通过非分片键关联查询,出现内存泄露

    • LOAD DATA local 执行报错

    • 主实例网络故障时,执行复杂查询导致 Business 线程 hang 住

    • 一些心跳问题

    3.22.01.5

    我们发布了 3.22.01.5,这是个基于 3.22.01.4 的 bug 修复版本。

      改善从连接池中获取连接的逻辑

    • 后端连接初始化时出现半连接场景的处理

    • 某些场景下执行大包语句出现 hang、Lost connection..。

    • 支持 UPDATE/DELETE 多表针对分片表 JOIN 全局表

    • 主从切换后,业务端开启事务进行 ROLLBACK 时,部分数据没有被回滚

    • 执行 LOAD DATA 出现 Lost connection... 和其他报错

    • 解决一些 NPE 问题

    3.21.10.14

    我们发布了 3.21.10.14,这是个基于 3.22.10.12 的 bug 修复版本。

      开启 SQL 统计,并发线程没有抢到锁陷入死循环引起 CPU 使用率过高

    • 连接池的扩缩容线程 connection-pool-evictor-thread 意外退出

    • 改善连接池中取连接的逻辑

    • 后端连接初始化时出现半连接场景的处理

    • 某些场景下执行大包语句出现 hang、Lost connection..。

    • 支持 UPDATE/DELETE 多表针对分片表 JOIN 全局表

    • 主从切换后,业务端开启事务进行 ROLLBACK 时,部分数据没有被回滚

    • 慢日志过多阻塞,导致心跳失败、创建连接失败

     

    引用参考

    [1] UPDATE:https://actiontech.github.io/dble-docs-cn/3.SQL_Syntax/3.2_DML/3.2.04_UPDATE.html

    [2] DELETE:https://actiontech.github.io/dble-docs-cn/3.SQL_Syntax/3.2_DML/3.2.03_DELETE.html

    [3] 版本变更:https://actiontech.github.io/dble-docs-cn/1.config_file/1.10_version_change.html

    [4] TCP 参数:https://actiontech.github.io/dble-docs-cn/2.Function/2.38_tcp_parameter.html

    编程笔记 » 分布式dbs,分布式 | DBLE 3.23.04.0 版本发布

    赞同 (42) or 分享 (0)
    游客 发表我的评论   换个身份
    取消评论

    表情
    (0)个小伙伴在吐槽