分庫分表
分庫分表是一種數據庫水平擴展的方式，用于解決單一數據庫的性能瓶頸和容量限制。
分庫：將一個邏輯數據庫劃分為多個物理數據庫，每個數據庫中存儲部分數據。
分表：將一個表拆分為多個表，每個表中存儲部分數據。
分庫分表策略
常見的分庫策略有按：范圍、按哈希和按列表分片。
1.按范圍分片
根據某個字段的范圍將數據劃分到不同的數據庫中，例如按照用戶ID的范圍劃分。
2.按哈希分片
根據某個字段的哈希值將數據劃分到不同的數據庫中，例如根據用戶ID的哈希值劃分。
3.按列表分片
根據預定義的列表將數據劃分到不同的數據庫中，例如根據城市列表劃分用戶數據。
分庫分表實戰
下面是一個分庫分表的示例，演示如何使用MyCAT進行分庫分表。
1.創建數據庫表
首先，創建需要進行分庫分表的數據庫表，例如user表。
CREATE TABLE `user` ( `id` INT(11) NOT NULL AUTO_INCREMENT, `name` VARCHAR(50) NOT NULL, PRIMARY KEY (`id`)) ENGINE=InnoDB;
2.配置分片規則
在MyCAT的配置文件中，配置分片規則和數據節點信息。
如下所示：
<?xml version="1.0" encoding="UTF-8"?><!DOCTYPE mycat:config PUBLIC "-//MyCat//DTD MyCat config//EN" "http://mycat.io/dtd/mycat.dtd"><mycat:config xmlns:mycat="http://mycat.io/schema/mycat-config" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://mycat.io/schema/mycat-config http://mycat.io/schema/mycat-config.xsd">
<system> <property name="schema" value="sharding_db"/> </system>
<dataNode name="dn1" dataHost="localhost" database="db1" /> <dataNode name="dn2" dataHost="localhost" database="db2" />
<tableRule name="user_rule" dataNode="dn1,dn2"> <rule> <columns>id</columns> <algorithm>mod-long</algorithm> </rule> </tableRule></mycat:config>
在上述示例中，我們定義了兩個數據節點dn1和dn2，分別對應了兩個后端MySQL數據庫db1和db2。
然后，我們定義了一個表規則：user_rule，使用mod-long算法將數據根據id字段進行分片。
3.分庫分表代碼
在Java代碼中，使用JDBC連接到MyCAT數據庫，并執行分庫分表的操作。
如下所示：
import java.sql.*;
public class MyCatShardingExample { public static void main(String[] args) { try { String url = "jdbc:mysql://localhost:8066/sharding_db"; String username = "mycat_user"; String password = "mycat_password"; Connection conn = DriverManager.getConnection(url, username, password);
String sql = "INSERT INTO user (name) VALUES (?)"; PreparedStatement statement = conn.prepareStatement(sql); statement.setString(1, "John"); statement.executeUpdate();
String querySql = "SELECT * FROM user"; Statement queryStatement = conn.createStatement(); ResultSet resultSet = queryStatement.executeQuery(querySql); while (resultSet.next()) { int id = resultSet.getInt("id"); String name = resultSet.getString("name"); System.out.println("User ID: " + id + ", Name: " + name); }
conn.close(); } catch (SQLException e) { e.printStackTrace(); } }}
在上述示例中，我們使用JDBC連接字符串連接到MyCAT數據庫，并執行了插入和查詢操作。
分庫分表注意
分庫分表后有幾點很重要，需要重視，比如：
數據分布策略：選擇合適的數據分布策略，避免數據傾斜；
復雜性增加：數據分布在多個庫、或表中，管理、和維護變得更加復雜；
事務處理困難：跨庫、或跨表的事務處理，難度陡增，還會需要分布式事務管理....等等，因為數據已經分布到：不同的環境、和服務器上了。
開發成本增加：需要修改、和優化現有的數據庫訪問代碼，比如：需要引入中間件進行路由，比如：(ShardingSphere、MyCat......等等）來簡化分庫分表的管理。
閱讀原文：原文鏈接
該文章在 2025/7/2 0:14:16 編輯過
400 186 1886
