庫分表是一個詞,最好不要拆分去理解,它指的是對數據的拆分;
分庫分表分為兩種:水平拆分和垂直拆分;
一種是根據表中數據的邏輯關系,將同一個表中的數據按照某種條件拆分到多臺數據庫服務器上面,這種切分稱之為數據的水平切分,也可以稱為橫向切分;
水平拆分不是將表做分類,而是按照某個字段的某種規則來分散到多個庫之中,每個表中包含一部分數據。簡單來說,我們可以將數據的水平切分理解為是按照數據行的切分,就是將表中的某些行切分到一個數據庫,而另外的某些行又切分到其他的數據庫中。
一種是按照不同的表來切分到不同的數據庫服務器之上,這種切可以稱之為數據的垂直切分,也可以稱為縱向切分;
垂直切分一般是按照業務維度進行數據庫表的切分;把相同類型的表放在一個數據庫,另一些表放在另一個數據庫;也就是在不同庫建不同表,把表分散到各個數據庫;
Mycat 通過數據切分解決傳統數據庫的缺陷,又有了NoSQL易于擴展的優點。通過中間代理層規避了多數據源的處理問題,對應用完全透明,同時對數據切分后存在的問題,也做了解決方案。
指定主鍵生成策略
<!--配置數據庫的主鍵怎么生成,0為本地文件方式,1為數據庫方式,2為時間戳序列方式-->
<property name="sequnceHandlerType">0</property>
2、配置schema.xml
指定邏輯庫,分片結點,結點主機等
<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://io.mycat/">
<schema name="mycatdb" checkSQLschema="false" sqlMaxLimit="100">
<!-- 要實現分庫分表,那么就需要在<schema>標簽下配置表了,現在是水平切分,表示要對哪張表進行切分 -->
<table name="orders" primaryKey="id" autoIncrement="true" dataNode="dn1,dn2,dn3" rule="mod-long" />
</schema>
<!--配置真實的數據庫名稱 test -->
<dataNode name="dn1" dataHost="localhost1" database="test01" />
<dataNode name="dn2" dataHost="localhost1" database="test02" />
<dataNode name="dn3" dataHost="localhost1" database="test03" />
<dataHost name="localhost1"
maxCon="1000"
minCon="10"
balance="1"
writeType="0"
dbType="mysql"
dbDriver="native"
switchType="1"
slaveThreshold="100">
<heartbeat>select user()</heartbeat>
<writeHost host="hostM3307" url="localhost:3307" user="root" password="123456">
<readHost host="hostS3308" url="localhost:3308" user="root" password="123456" />
<readHost host="hostS3309" url="localhost:3309" user="root" password="123456" />
</writeHost>
<writeHost host="hostM3308" url="localhost:3308" user="root" password="123456">
<readHost host="hostS3307" url="localhost:3307" user="root" password="123456" />
<readHost host="hostS3310" url="localhost:3310" user="root" password="123456" />
</writeHost>
</dataHost>
</mycat:schema>
3、配置rule.xml
指定分片結點數
<function name="mod-long" class="io.mycat.route.function.PartitionByMod">
<!-- how many data nodes -->
<property name="count">3</property>
</function>
4、水平切分測試
● 通過Navicat在3307上創建三個庫test01,test02和test03,并在每個庫中創建orders表。
不管是何種方式的切分,主鍵生成必須交給MyCat實現。
● 插入數據驗證
next value for MYCATSEQ_GLOBAL:Mycat主鍵生成的方式。
insert into orders (id,money) values (next value for MYCATSEQ_GLOBAL,90.1);
insert into orders (id,money) values (next value for MYCATSEQ_GLOBAL,90.2);
insert into orders (id,money) values (next value for MYCATSEQ_GLOBAL,90.3);
insert into orders (id,money) values (next value for MYCATSEQ_GLOBAL,90.4);
分別插入到不同的數據庫的orders表中。
● 查詢測試
查詢操作,會將所有庫中的orders數據查詢出來。
指定主鍵生成策略
<!--配置數據庫的主鍵怎么生成,0為本地文件方式,1為數據庫方式,2為時間戳序列方式-->
<property name="sequnceHandlerType">0</property>
2、配置schema.xml
也同樣需要配置table標簽,水平切分是要對哪張表進行切分就配置那張表;垂直切分需要將數據庫中的所有表都配置上,指定不同的datanode。
需求:整個P2P平臺的數據庫(p2p)進行垂直切分,分為前臺數據庫(p2p-web)、后臺數據庫(p2p-admin)。
<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://io.mycat/">
<schema name="mycatdb" checkSQLschema="false" sqlMaxLimit="100">
<!-- 要實現分庫分表,那么就需要在<schema>標簽下配置表了,現在是垂直切分 -->
<!--需求:整個P2P平臺的數據庫(p2p)進行垂直切分,分為前臺數據庫(p2p-web)、后臺數據庫(p2p-admin)-->
<!--P2P前臺數據庫-->
<table name="orders" primaryKey="id" autoIncrement="true" dataNode="dn1"/>
<table name="users" primaryKey="id" autoIncrement="true" dataNode="dn1"/>
<!--P2P后臺數據庫-->
<table name="products" primaryKey="id" autoIncrement="true" dataNode="dn2"/>
<table name="creditor" primaryKey="id" autoIncrement="true" dataNode="dn2"/>
</schema>
<!--配置真實的數據庫名稱 testdb01 -->
<dataNode name="dn1" dataHost="localhost1" database="p2p-web" />
<dataNode name="dn2" dataHost="localhost1" database="p2p-admin" />
<dataHost name="localhost1"
maxCon="1000"
minCon="10"
balance="1"
writeType="0"
dbType="mysql"
dbDriver="native"
switchType="1"
slaveThreshold="100">
<heartbeat>select user()</heartbeat>
<writeHost host="hostM3307" url="localhost:3307" user="root" password="123456">
<readHost host="hostS3308" url="localhost:3308" user="root" password="123456" />
<readHost host="hostS3309" url="localhost:3309" user="root" password="123456" />
</writeHost>
<writeHost host="hostM3308" url="localhost:3308" user="root" password="123456">
<readHost host="hostS3307" url="localhost:3307" user="root" password="123456" />
<readHost host="hostS3310" url="localhost:3310" user="root" password="123456" />
</writeHost>
</dataHost>
</mycat:schema>
3、垂直切分測試
● 在3307上創建兩個個數據庫p2p-web,p2p-admin
● 在p2p-web庫中創建users和orders表
● 在p2p-admin庫中創建products和news表
● 插入、查詢測試
next value for MYCATSEQ_GLOBAL
垂直切分帶來的價值:可以屏蔽掉多數據源的問題,只需要一個統一入口mycat就可以操作下面的多個數據庫。
不管是何種方式的切分,主鍵生成必須交給MyCat實現。