分库分表的目的在于降低每个库、每张表的数据量，从而提高数据库效率。它包括垂直分表和垂直分库。垂直分表是将一个表的字段分散到多个表中，这样可以提高热门数据的操作效率，同时减少磁盘争用。而垂直分库则是按照业务将表进行分类，分布到不同的数据库上，每个库可以放在不同的服务器上，以达到多服务...
Java教程之mysql分库分表方案
分库分表是企业级开发中处理大量数据时的主流选择，尤其是在使用MySQL作为数据库的情况下。当数据量达到一定规模后，单库、单表性能下降，查询时间变长，甚至并发操作可能使系统卡死。因此，为了提升性能，降低数据库负担，通常会采用数据库分库分表的策略。
分库分表的目的在于降低每个库、每张表的数据量，从而提高数据库效率。它包括垂直分表和垂直分库。垂直分表是将一个表的字段分散到多个表中，这样可以提高热门数据的操作效率，同时减少磁盘争用。而垂直分库则是按照业务将表进行分类，分布到不同的数据库上，每个库可以放在不同的服务器上，以达到多服务器共同分摊压力的效果。
当数据量进一步增加，单库存储数据超出预估时，水平分库成为可能的选择。这种策略是通过判断数据ID的奇偶性，将数据分别存储在不同的数据库中，从而解决单库存储量及性能瓶颈。水平分表则是在同一个数据库内，将同一个表的数据按照一定规则拆分到多个表中，以解决单一表数据量过大的问题。
垂直和水平分表的选择应根据系统设计阶段的业务耦合度来决定。对于数据量不大，访问压力不高的情况，应首先考虑缓存、读写分离、索引技术等方案。当数据量极大，持续增长时，分库分表方案才能提供有效的缓解。
实施分库分表后，系统面临一些问题。事务一致性问题需要通过额外编程解决，以处理分布式事务。跨节点join和跨节点分页、排序及聚合函数等问题，需要额外编程来处理。主键避重问题需要设计全局主键，以避免跨库主键重复。
总结来说，分库分表有助于缓解大数据、高并发带来的性能和压力，但也伴随着一系列问题。在实施分库分表策略时，需要综合考虑业务需求、数据量、访问压力等因素，并采取适当的中间件解决方案，如Sharding-JDBC和mycat等，以应对可能出现的问题。2024-08-16
