首页
在线工具
搜索
1
Kuboard与KubeSphere的区别:Kubernetes管理平台对比
2
ShardingSphere使用中的重点问题剖析
3
Flowable工作流引擎源码深度解析
4
用AI生成的原型设计稿效果还可以
5
如何将Virtualbox和VMware虚拟机相互转换
杂谈与随笔
工具与效率
源码阅读
技术管理
运维
数据库
前端开发
后端开发
Search
标签搜索
Angular
Docker
Phabricator
SpringBoot
Java
Chrome
SpringSecurity
SpringCloud
DDD
Git
Mac
K8S
Kubernetes
ESLint
SSH
高并发
Eclipse
Javascript
Vim
Centos
Jonathan
累计撰写
86
篇文章
累计收到
0
条评论
首页
栏目
杂谈与随笔
工具与效率
源码阅读
技术管理
运维
数据库
前端开发
后端开发
页面
搜索到
1
篇与
的结果
2020-02-02
ShardingSphere使用中的重点问题剖析
ShardingSphere使用中的重点问题剖析 一、引言 ShardingSphere是一款强大的分布式数据库中间件,在助力应用实现数据分片、读写分离等功能方面表现卓越。然而,在实际应用过程中,会遇到一些关键问题。本文将结合思维导图,深入探讨ShardingSphere在读写分离和事务处理方面的重点问题及应对策略。 二、读写分离相关问题 (一)数据库主从同步延迟问题 在读写分离架构下,主库负责写入操作,从库承担读取操作。但由于主从库之间的同步存在延迟,可能导致从库读取到的数据并非最新。 解决方案一:提供同一个线程的Ddl执行统一库。即对于在同一个线程内的一系列数据定义语言(DDL)操作,确保都在主库上执行,这样可以避免主从同步延迟带来的数据不一致问题,因为在同一线程内操作主库,能保证数据的实时性和一致性。 解决方案二:提供Hint强制读写库。通过特定的Hint机制,开发者可以在代码中明确指定某些查询操作必须在主库上执行,绕过从库,从而获取最新的数据,适用于对数据实时性要求极高的场景,如金融交易中的账户余额查询等。 (二)强制读主问题 当应用需要获取最新数据时,可能会面临强制读主的需求。但在现有的读写分离架构下,常规的基于对象关系映射(ORM)的基础增删改查(CRUD)操作可能无法直接满足这一要求。 解决方法:需要重构ORM封装的基础CRUD。通过对ORM框架进行定制化开发或扩展,使其能够支持根据业务需求灵活选择从主库还是从库进行读取操作。例如,在特定的业务方法中,通过修改ORM的查询逻辑,添加强制读主的标识,让查询直接路由到主库,保证数据的及时性。 (三)Sql兼容问题 在使用ShardingSphere进行读写分离时,部分SQL语句可能会出现兼容性问题。 部分Sql语句不支持,需要换语句:例如“Select Distinct Test_Int From T_Order;”这样的语句可能无法直接在ShardingSphere环境下正常执行。此时,开发者需要根据ShardingSphere的语法和规则,对SQL语句进行改写,以满足数据库的操作要求。 Union(合并)相关语句示例:像“Select User_Id, Order_Id, Status From T_Order Union All Select Item_Id, Order_Id, User_Id From T_Order_Item”这样的Union操作语句,在使用时也需要注意其在ShardingSphere中的兼容性。可能需要对表结构、字段类型等进行进一步的检查和调整,确保Union操作能够正确执行,实现数据的合并查询需求。 三、事务问题 (一)Sharding-Jdbc不支持强事务 Sharding-Jdbc作为ShardingSphere的一种使用模式,在事务处理方面存在一定局限性,它不支持传统的强事务(如严格的ACID事务)。 解决策略一:尽量在业务处理事务。在应用层的业务逻辑中,通过合理的流程设计和代码编写,将相关的操作进行分组和协调,以满足业务对数据一致性的要求。例如,在电商系统的下单流程中,通过在业务代码中依次处理库存扣减、订单生成等操作,并进行异常捕获和回滚处理,来模拟事务的一致性效果。 解决策略二:使用Sharding-Proxy,支持多种分布式事务。Sharding-Proxy提供了对分布式事务更好的支持,它可以采用两阶段提交(2PC)、TCC(Try - Confirm - Cancel)等多种分布式事务解决方案。对于一些对事务一致性要求较高的场景,如银行转账业务,可以使用Sharding-Proxy结合合适的分布式事务方案,确保跨库操作的数据一致性。 四、总结 ShardingSphere在实现读写分离和处理事务时,虽然存在一些棘手的问题,但通过合理的技术选型和针对性的解决方案,能够有效应对。在实际项目中,开发者需要深入理解这些问题的本质和解决方案的原理,根据业务场景的特点,灵活运用相关策略,以充分发挥ShardingSphere的优势,构建高效、稳定、可靠的分布式数据库应用系统。
2020年02月02日