• <menu id="gyiem"><menu id="gyiem"></menu></menu>
  • <menu id="gyiem"><code id="gyiem"></code></menu>

    分布式事務(一)兩階段提交及JTA

    原創文章,轉載請務必將下面這段話置于文章開頭處(保留超鏈接)。
    本文轉發自技術世界原文鏈接 http://www.luozeyang.com/big_data/two_phase_commit/

    分布式事務

    分布式事務簡介

    分布式事務是指會涉及到操作多個數據庫(或者提供事務語義的系統,如JMS)的事務。其實就是將對同一數據庫事務的概念擴大到了對多個數據庫的事務。目的是為了保證分布式系統中事務操作的原子性。分布式事務處理的關鍵是必須有一種方法可以知道事務在任何地方所做的所有動作,提交或回滾事務的決定必須產生統一的結果(全部提交或全部回滾)。

    分布式事務實現機制

    如同作者在《SQL優化(六) MVCC PostgreSQL實現事務和多版本并發控制的精華》一文中所講,事務包含原子性(Atomicity)、一致性(Consistency)、隔離性(Isolation)和持久性(Durability)。

    PostgreSQL針對ACID的實現技術如下表所示。

    ACID 實現技術
    原子性(Atomicity) MVCC
    一致性(Consistency) 約束(主鍵、外鍵等)
    隔離性 MVCC
    持久性 WAL

    分布式事務的實現技術如下表所示。(以PostgreSQL作為事務參與方為例)

    分布式ACID 實現技術
    原子性(Atomicity) MVCC + 兩階段提交
    一致性(Consistency) 約束(主鍵、外鍵等)
    隔離性 MVCC
    持久性 WAL

    從上表可以看到,一致性、隔離性和持久性靠的是各分布式事務參與方自己原有的機制,而兩階段提交主要保證了分布式事務的原子性。

    兩階段提交

    分布式事務如何保證原子性

    在分布式系統中,各個節點(或者事務參與方)之間在物理上相互獨立,通過網絡進行協調。每個獨立的節點(或組件)由于存在事務機制,可以保證其數據操作的ACID特性。但是,各節點之間由于相互獨立,無法確切地知道其經節點中的事務執行情況,所以多節點之間很難保證ACID,尤其是原子性。

    如果要實現分布式系統的原子性,則須保證所有節點的數據寫操作,要不全部都執行(生效),要么全部都不執行(生效)。但是,一個節點在執行本地事務的時候無法知道其它機器的本地事務的執行結果,所以它就不知道本次事務到底應該commit還是 roolback。常規的解決辦法是引入一個“協調者”的組件來統一調度所有分布式節點的執行。

    XA規范

    XA是由X/Open組織提出的分布式事務的規范。XA規范主要定義了(全局)事務管理器(Transaction Manager)和(局部)資源管理器(Resource Manager)之間的接口。XA接口是雙向的系統接口,在事務管理器(Transaction Manager)以及一個或多個資源管理器(Resource Manager)之間形成通信橋梁。XA引入的事務管理器充當上文所述全局事務中的“協調者”角色。事務管理器控制著全局事務,管理事務生命周期,并協調資源。資源管理器負責控制和管理實際資源(如數據庫或JMS隊列)。目前,Oracle、Informix、DB2、Sybase和PostgreSQL等各主流數據庫都提供了對XA的支持。

    XA規范中,事務管理器主要通過以下的接口對資源管理器進行管理

    • xa_open,xa_close:建立和關閉與資源管理器的連接。
    • xa_start,xa_end:開始和結束一個本地事務。
    • xa_prepare,xa_commit,xa_rollback:預提交、提交和回滾一個本地事務。
    • xa_recover:回滾一個已進行預提交的事務。

    兩階段提交原理

    二階段提交的算法思路可以概括為:協調者詢問參與者是否準備好了提交,并根據所有參與者的反饋情況決定向所有參與者發送commit或者rollback指令(協調者向所有參與者發送相同的指令)。

    所謂的兩個階段是指

    • 準備階段 又稱投票階段。在這一階段,協調者詢問所有參與者是否準備好提交,參與者如果已經準備好提交則回復Prepared,否則回復Non-Prepared
    • 提交階段 又稱執行階段。協調者如果在上一階段收到所有參與者回復的Prepared,則在此階段向所有參與者發送commit指令,所有參與者立即執行commit操作;否則協調者向所有參與者發送rollback指令,參與者立即執行rollback操作。

    兩階段提交中,協調者和參與方的交互過程如下圖所示。
    Two-phase commit

    兩階段提交前提條件

    • 網絡通信是可信的。雖然網絡并不可靠,但兩階段提交的主要目標并不是解決諸如拜占庭問題的網絡問題。同時兩階段提交的主要網絡通信危險期(In-doubt Time)在事務提交階段,而該階段非常短。
    • 所有crash的節點最終都會恢復,不會一直處于crash狀態。
    • 每個分布式事務參與方都有WAL日志,并且該日志存于穩定的存儲上。
    • 各節點上的本地事務狀態即使碰到機器crash都可從WAL日志上恢復。

    兩階段提交容錯方式

    兩階段提交中的異常主要分為如下三種情況

    1. 協調者正常,參與方crash
    2. 協調者crash,參與者正常
    3. 協調者和參與方都crash

    對于第一種情況,若參與方在準備階段crash,則協調者收不到Prepared回復,協調方不會發送commit命令,事務不會真正提交。若參與方在提交階段提交,當它恢復后可以通過從其它參與方或者協調方獲取事務是否應該提交,并作出相應的響應。

    第二種情況,可以通過選出新的協調者解決。

    第三種情況,是兩階段提交無法完美解決的情況。尤其是當協調者發送出commit命令后,唯一收到commit命令的參與者也crash,此時其它參與方不能從協調者和已經crash的參與者那兒了解事務提交狀態。但如同上一節兩階段提交前提條件所述,兩階段提交的前提條件之一是所有crash的節點最終都會恢復,所以當收到commit的參與方恢復后,其它節點可從它那里獲取事務狀態并作出相應操作。

    JTA

    JTA介紹

    作為java平臺上事務規范JTA(Java Transaction API)也定義了對XA事務的支持,實際上,JTA是基于XA架構上建模的。在JTA 中,事務管理器抽象為javax.transaction.TransactionManager接口,并通過底層事務服務(即Java Transaction Service)實現。像很多其他的Java規范一樣,JTA僅僅定義了接口,具體的實現則是由供應商(如J2EE廠商)負責提供,目前JTA的實現主要有以下幾種:

    • J2EE容器所提供的JTA實現(如JBoss)。
    • 獨立的JTA實現:如JOTM(Java Open Transaction Manager),Atomikos。這些實現可以應用在那些不使用J2EE應用服務器的環境里用以提供分布事事務保證。

    PostgreSQL兩階段提交接口

    • PREPARE TRANSACTION transaction_id PREPARE TRANSACTION 為當前事務的兩階段提交做準備。 在命令之后,事務就不再和當前會話關聯了;它的狀態完全保存在磁盤上, 它提交成功有非常高的可能性,即使是在請求提交之前數據庫發生了崩潰也如此。這條命令必須在一個用BEGIN顯式開始的事務塊里面使用。
    • COMMIT PREPARED transaction_id 提交已進入準備階段的ID為transaction_id的事務
    • ROLLBACK PREPARED transaction_id 回滾已進入準備階段的ID為transaction_id的事務

    典型的使用方式如下

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    postgres=> BEGIN;
    BEGIN
    postgres=> CREATE TABLE demo(a TEXT, b INTEGER);
    CREATE TABLE
    postgres=> PREPARE TRANSACTION 'the first prepared transaction';
    PREPARE TRANSACTION
    postgres=> SELECT * FROM pg_prepared_xacts;
    transaction | gid | prepared | owner | database
    -------------+--------------------------------+-------------------------------+-------+----------
    23970 | the first prepared transaction | 2016-08-01 20:44:55.816267+08 | casp | postgres
    (1 row)

    從上面代碼可看出,使用PREPARE TRANSACTION transaction_id語句后,PostgreSQL會在pg_catalog.pg_prepared_xact表中將該事務的transaction_id記于gid字段中,并將該事務的本地事務ID,即23970,存于transaction字段中,同時會記下該事務的創建時間及創建用戶和數據庫名。

    繼續執行如下命令

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    postgres=> \q
    SELECT * FROM pg_prepared_xacts;
    transaction | gid | prepared | owner | database
    -------------+--------------------------------+-------------------------------+-------+----------
    23970 | the first prepared transaction | 2016-08-01 20:44:55.816267+08 | casp | cqdb
    (1 row)

    cqdb=> ROLLBACK PREPARED 'the first prepared transaction';
    ROLLBACK PREPARED
    cqdb=> SELECT * FROM pg_prepared_xacts;
    transaction | gid | prepared | owner | database
    -------------+-----+----------+-------+----------
    (0 rows)

    即使退出當前session,pg_catalog.pg_prepared_xact表中關于已經進入準備階段的事務信息依然存在,這與上文所述準備階段后各節點會將事務信息存于磁盤中持久化相符。注:如果不使用PREPARED TRANSACTION 'transaction_id',則已BEGIN但還未COMMIT或ROLLBACK的事務會在session退出時自動ROLLBACK。

    在ROLLBACK已進入準備階段的事務時,必須指定其transaction_id

    PostgreSQL兩階段提交注意事項

    • PREPARE TRANSACTION transaction_id命令后,事務狀態完全保存在磁盤上。
    • PREPARE TRANSACTION transaction_id命令后,事務就不再和當前會話關聯,因此當前session可繼續執行其它事務。
    • COMMIT PREPAREDROLLBACK PREPARED可在任何會話中執行,而并不要求在提交準備的會話中執行。
    • 不允許對那些執行了涉及臨時表或者是創建了帶WITH HOLD游標的事務進行PREPARE。 這些特性和當前會話綁定得實在是太緊密了,因此在一個準備好的事務里沒什么可用的。
    • 如果事務用SET修改了運行時參數,這些效果在PREPARE TRANSACTION之后保留,并且不會被任何以后的COMMIT PREPAREDROLLBACK PREPARED所影響,因為SET的生效范圍是當前session。
    • 從性能的角度來看,把一個事務長時間停在準備好的狀態是不明智的,因為它會影響VACUUM回收存儲的能力。
    • 已準備好的事務會繼續持有它們獲得的鎖,直到該事務被commit或者rollback。所以如果已進入準備階段的事務一直不被處理,其它事務可能會因為獲取不到鎖而被block或者失敗。
    • 默認情況下,PostgreSQL并不開啟兩階段提交,可以通過在postgresql.conf文件中設置max_prepared_transactions配置項開啟PostgreSQL的兩階段提交。

    JTA實現PostgreSQL兩階段提交

    本文使用Atomikos提供的JTA實現,利用PostgreSQL提供的兩階段提交特性,實現了分布式事務。本文中的分布式事務使用了2個不同機器上的PostgreSQL實例。

    本例所示代碼可從作者Github獲取。

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    25
    26
    27
    28
    29
    30
    31
    32
    33
    34
    35
    36
    37
    38
    39
    40
    41
    42
    43
    44
    45
    46
    47
    48
    49
    50
    51
    52
    53
    54
    55
    56
    57
    58
    59
    60
    61
    62
    63
    64
    65
    package com.jasongj.jta.resource;

    import java.sql.Connection;
    import java.sql.SQLException;
    import java.sql.Statement;

    import javax.naming.Context;
    import javax.naming.InitialContext;
    import javax.naming.NamingException;
    import javax.sql.DataSource;
    import javax.transaction.NotSupportedException;
    import javax.transaction.SystemException;
    import javax.transaction.UserTransaction;
    import javax.ws.rs.GET;
    import javax.ws.rs.Path;
    import javax.ws.rs.PathParam;
    import javax.ws.rs.WebApplicationException;

    import org.slf4j.Logger;
    import org.slf4j.LoggerFactory;

    @Path("/jta")
    public class JTAResource {
    private static final Logger LOGGER = LoggerFactory.getLogger(JTAResource.class);

    @GET
    public String test(@PathParam(value = "commit") boolean isCommit)
    throws NamingException, SQLException, NotSupportedException, SystemException {
    UserTransaction userTransaction = null;
    try {
    Context context = new InitialContext();
    userTransaction = (UserTransaction) context.lookup("java:comp/UserTransaction");
    userTransaction.setTransactionTimeout(600);

    userTransaction.begin();

    DataSource dataSource1 = (DataSource) context.lookup("java:comp/env/jdbc/1");
    Connection xaConnection1 = dataSource1.getConnection();

    DataSource dataSource2 = (DataSource) context.lookup("java:comp/env/jdbc/2");
    Connection xaConnection2 = dataSource2.getConnection();
    LOGGER.info("Connection autocommit : {}", xaConnection1.getAutoCommit());

    Statement st1 = xaConnection1.createStatement();
    Statement st2 = xaConnection2.createStatement();
    LOGGER.info("Connection autocommit after created statement: {}", xaConnection1.getAutoCommit());


    st1.execute("update casp.test set qtime=current_timestamp, value = 1");
    st2.execute("update casp.test set qtime=current_timestamp, value = 2");
    LOGGER.info("Autocommit after execution : ", xaConnection1.getAutoCommit());

    userTransaction.commit();
    LOGGER.info("Autocommit after commit: ", xaConnection1.getAutoCommit());
    return "commit";

    } catch (Exception ex) {
    if (userTransaction != null) {
    userTransaction.rollback();
    }
    LOGGER.info(ex.toString());
    throw new WebApplicationException("failed", ex);
    }
    }
    }

    從上示代碼中可以看到,雖然使用了Atomikos的JTA實現,但因為使用了面向接口編程特性,所以只出現了JTA相關的接口,而未顯式使用Atomikos相關類。具體的Atomikos使用是在WebContent/META-INFO/context.xml中配置。

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    25
    26
    27
    28
    29
    30
    31
    32
    <Context>
    <Transaction factory="com.atomikos.icatch.jta.UserTransactionFactory" />
    <Resource name="jdbc/1"
    auth="Container"
    type="com.atomikos.jdbc.AtomikosDataSourceBean"
    factory="com.jasongj.jta.util.EnhancedTomcatAtomikosBeanFactory"
    uniqueResourceName="DataSource_Resource1"
    minPoolSize="2"
    maxPoolSize="8"
    testQuery="SELECT 1"
    xaDataSourceClassName="org.postgresql.xa.PGXADataSource"
    xaProperties.databaseName="postgres"
    xaProperties.serverName="192.168.0.1"
    xaProperties.portNumber="5432"
    xaProperties.user="casp"
    xaProperties.password=""/>

    <Resource name="jdbc/2"
    auth="Container"
    type="com.atomikos.jdbc.AtomikosDataSourceBean"
    factory="com.jasongj.jta.util.EnhancedTomcatAtomikosBeanFactory"
    uniqueResourceName="DataSource_Resource2"
    minPoolSize="2"
    maxPoolSize="8"
    testQuery="SELECT 1"
    xaDataSourceClassName="org.postgresql.xa.PGXADataSource"
    xaProperties.databaseName="postgres"
    xaProperties.serverName="192.168.0.2"
    xaProperties.portNumber="5432"
    xaProperties.user="casp"
    xaProperties.password=""/>
    </Context>
    郭俊 Jason wechat
    歡迎關注作者微信公眾號【大數據架構】
    您的贊賞將支持作者繼續原創分享
    速赢彩app 61325566.com | 3636888.com | www.55676b.com | 20160913.co | www.hld33.com | www.55scweb.com | ylzz1112.com | www.cp88168.xn | 80567j.com | www.0194004.com | 83377f.com | www.729019.com | www.22582.com | 61321177.com | www.66332t.com | www.81866x.com | www.187397.com | www.667288.com | 10800999.com | www.5856889.com | 21866r.com | www.178387.com | www.3846m.com | tt888c.com | www.60007s.com | www.tushan28.com | djbet338.com | www.69567c.com | 883399v.com | www.587502.com | www.000xy8.com | 51133ii.com | www.5441i.com | www.sb84.com | 3404o.cc | www.86339x.com | mgm3242j.com | 61324422.com | www.158024.com | 04343.com | www.155233.com | www.6606488.com | c7742.com | www.769211.com | www.555305.com | 574747.com | www.ascp4.com | www.681378.com | 3640kk.com | www.916044.com | www.871817.com | 33599jj.com | www.580896.com | www.8499.com | 3844p.com | www.32123i.com | www.4521k.com | 91019w.net | 4195z.com | www.siji07.com | www.77788806.com | 563451.com | www.2350l.com | www.447858.com | qpby2277.com | www.305995.com | www.b35ss.com | 58802x.com | mgm.com | www.705wb.com | www.09569g.com | 022531.com | www.8jcw.com | www.28000h.com | 256777e.com | 28288tt.com | www.4447758.com | www.00829p.com | 26119a.com | www.995sj.com | www.138cpl.com | 500000830.com | 66648m.com | www.x999789.com | www.588sun.com | 3482y.com | www.271902.com | www.xj6008.com | www.9374l.com | 1483pp.com | www.777768a.com | www.0099xpj.net | www.bm10000.com | zhcp59.com | www.978797.com | www.4972k.com | 91019g.net | 1669g.com | www.okw5.com | www.hg8jj.com | 00778f.com | 4995q.com | www.515233.com | www.79095x.com | www.hg4030.com | 4675j.com | www.330605.com | www.7340333.com | www.9816666.com | 4647d.com | yy2649.com | www.8667a.com | www.jz9788.com | www.pjdc2288.com | 3482s.com | 71005.com | www.60996.cc | www.115496.com | www.9679y.com | 3550j.com | 2820g.com | www.35918s.com | www.8473o.com | www.gt885.com | 9365.com | 3222e.cc | www.769971.com | www.55676s.com | www.24075.com | hbpc3258.com | 80188a.com | sjgc6.com | www.3126m.com | www.p1432.com | www.77117076.com | 500000771.com | 1331n.com | www.57578a.com | www.49956z.com | www.89677s.com | www.hg58.pw | 9977977.com | yhw8.cc | www.49956u.com | www.9356f.com | www.733485.com | www.hg2258.com | cu28.com | 3522qq.com | 80368xx.com | 2757j.com | www.978797.com | www.540729.com | www.22557t.com | www.yh567.com | 85698v.com | 4195j.com | bet28a.com | www.flcb2.com | www.1466o.com | www.77731c.com | www.21365zz.com | 2820s.com | 0289v.com | 7196ss.com | www.335037.com | www.7793l.com | www.12136n.com | www.5966lll.com | www.333133g.com | 6647g.com | 22207w.com | 316p.cc | 66885002.com | www.202341.com | www.055j.cc | www.win9789.com | www.16181s.com | www.003344.com | www.vns9983.com | 228888g.com | 3950u.com | 626810.com | jsjlb77.com | www.345897.com | www.66kcw.com | www.ag.hg3005.com | www.29937.com | www.000clf.com | www.hg3115.com | www.7830c.com | 452357.com | fll8.com | 8381zz.com | 44hg.cc | 667766u.com | ww2649.com | 29918q.com | www.373909.com | www.959209.com | www.11044.cc | www.33997f.com | www.6678685.com | www.js89c.vip | www.c33668.com | www.sscb11.cc | www.w10085.com | www.653pj.com | www.4848p.com | www.0006358.com | 588ddd.cc | bwin8w.com | 27878vv.com | tt3336.com | bllyuepu.cn | 8569811k.com | 3404p.cc | 5802ww.com | 14341434.com | 0500.com | 67890s.com | 4445365.com | 9506g.com | 4288cc.com | 3807yy.com | 4152u.com | ff3405.com | k4389.com | 4196r.com | 54146699.com | wns173.com | 2146z.com | 5309x.com | 8036aa.com | 228888g.com | zhcp43.com | 5443v.com | 0747xx.com | 2698r.com | 6175i.com | www.hd1188.com | www.5555wns.com | www.b0999.com | www.v0022.tv | www.266555a.com | www.0724drf.com | www.01.bet | www.x55.com | www.7788msc.com | www.b12189.com | www.vns89386.com | www.36584444.com | www.08299.com | www.gyfc0.com | www.871203.com | www.550304.com | www.108057.com | jj5443.com | 1591jjj.com | 1005rv.com | 86811ee.com | nn500e.com | 44488q.com | www.4759cc.com | www.p30226.com | www.d88118.com | www.85857k.com | www.cn365p.com | www.1119yl.com | www.7239e.com | www.ybao6.com | www.303853.com | 840pj.com | bcylc88.com | hg3737.mx | 8547j.com | www.81866k.com | www.55268uu.com | www.005596.com | www.456vip.com | www.111999qipai.com | www.7782v.com | www.609715.com | 21vnsvns.com | j84105.com | 84490.com | 1770g.com | www.4645555.com | www.tc8802.com | www.32031f.com | www.61655g.com | www.730719.com | c83b784w.com | 3534n.com | 923270.com | www.666204.com | www.918356c.com | www.68365.com | www.6661e.cc | www.50080i.com | 3mgmddd.com | 80368rr.com | www.4763006.com | www.381111.com | www.g3410.com | www.86889.com | www.106135.com | 6150w.com | 112v.net | www.pj2016.com | www.xy048.com | www.js18688.com | www.620239.com | 1669n.com | byc888c.com | www.63877w.com | www.155417.com | www.3301844.com | www.611874.com | 37a700.com | nn500r.com | www.xin888666.com | www.0662777.com | www.62118g.com | www.076591.com | 37688l.com | 19991y.com | www.227777.com | www.661365.cc | www.444957.com | o21148.com | 3938ee.com | www.118sjz.cc | www.v0077.tv | www.062166.com | wfc.com | www.95msc.com | www.agcpw.com | www.7239f.com | s4048bbb.com | lc99m.com | www.3459y.com | www.922424.com | www.qj63.com | 8988g.com | 2851q.com | www.888zhenren20.com | www.99677d.com | 1669d.com | ee5002.com | www.2846h.com | www.9895y.com | www.868216.com | 1596b.com | ms024.com | www.466587.com | www.9155g.cc | 50038d.com | 243d2.com | www.91500999.com | www.2109x.com | hb56138.com | hg168y.com | www.ggl.99233l.com | www.3416o.com | 35252l.com | bm1394.com | www.16181l.com | www.819770.com | 4773355.com | www.773114.com | www.9187u.com | www.105886.com | 3566rr.com | www.725558.com | www.50026r.com | 61789q.com | www.033033u.com | www.35700c.com | www.630137.com | 5853.com | www.396789.com | www.62118d.com | 5003mmm.com | www.033033e.com | www.678js777.com | www.079776.com | 76886j.com | www.55526r.com | www.c130.vip | 51133eee.com | www.89928.com | www.7793p.com | 36404433.com | www.v8867.com | www.ag.hg3005.com | 2013011.com | www.hg6969.org | www.1112yl.com | jmszszx.com | 44hh8331.com | www.6386c.com | 00gg8332.com | mm56667.com | www.668puj.com | js89t.vip | www.86611x.com | www.52062x.com | 239086.com | www.hg77848.com | www.7240y.com | 610260.com | www.benz4242.com | www.0270q.com | bet3659098.com | www.307607.com | www.9478h.com | 3033d.com | www.xxk6386.com | www.603614.com | v2351.com | www.00778w.com | 1468lll.com | www.888vh.com | www.790611.com | 55967p.com | www.345594.com | www.c6881.com | 33cc8331.com | www.3983.com | 32212j.com | www.777444m.com | www.7782w.com | 3656mm.com | www.1168n.com | www.50064i.com | www.1869s.com | www.2221102.com | 923350.com | www.hg773.com | www.209983.com | pj677x.com | www.954321z.com | 59889k.com | www.fff3997.com | www.025738.com | www.hg444.tv | www.8499z.com | yabo1188.com | www.88325l.com | 7777jdb.com | www.015456.com | www.584499.com | xcdc688.com | www.182323.com | 3404r.cc | www.35252d.com | 1389kk.com | www.767c.cc | www.210715.com | www.8124r.com | www.76gcw.com | yhshanghai.vip | www.86333f.com | js07749.com | www.4727099.com | s4255.com | www.01899.com | www.404677.com | www.cr345.net | www.371u.cc | 68228n.com | www.16065b.com | 3679aa.com | www.xpj8.net | vns8562.com | www.vip9582.com | 9994cc7.com | www.rg777.com | 3225j.com | www.4111511.com | shsxiwl.cn | www.hg984.com | www.186753.com | www.55268xx.com | www.609814.com | www.85770x.com | www.917787.com | www.wn68.com | www.912482.com | www.358msc.com | www.mcw6.com | hgw168x.com | www.sjgc2.com | spbo.com | www.ck9595.com | www.a67783.com | www.c139.vip | www.hg990011.com | www.662517.com | www.ra888vip.com | www.330265.com | www.09569d.com | www.195322.com | www.xj555666.com | 336v.com | www.799666v.com | 112d.net | www.3116a.com | 1288m.com | www.69567q.com | o3405.com | www.4563.am | 00048s.com | www.50732y.com | 091061.com | www.842223.com | www.7830m.com | www.67258e.com | www.456115.com | mw0621.com | www.xpj556677.com | 97799mcom | www.0967003.com | 201877880.com | www.1035i.com | www.32126n.net | www.178275.com | www.49200a.com | 6040099.com | www.79095u.com | 1h-5.cc | www.9356r.com | www.32126m.net | www.99677o.com | www.hd779.com | 55268zf.com | www.97828p.vip | 3225k.com | www.807860.com | www.js3838.com | 9103111.com | www.33678jj.com | 26668w.com | www.cpyz1.com | www.2846a.com | 5446ww.com | www.18k0048.com | 44662007.com | www.hy6931.com | www.xpj4464.com | 7552.com | www.12345606.cc | 88807q.com | www.602475.com | www.688558.com | 7989f.com | www.977008.com | www.99999jsc.com | 691 | www.16181m.com | 6137o.com | www.gu64.com | www.sjg700.com | 6396g.com | www.633547.com | www.9321n.com | 0015ll.com | www.1559505.com | 预览444000p.com | www.599840.com | www.mk939.com | 35222ee.com | www.igcp3.com | www.hg7942.com | 62077.net | www.07163d.com | www.g1018.com | 81366u.com | www.0096788.com | www.32126e.net | 3614p.com | www.093928.com | www.4759uu.com | 7742ss.com | www.mgm868006.com | 6766kk.com | www.hg0297.com | hg0088.com | 65005j.com | www.vns44.me | www.js66666.com | 607044.com | www.313999.cc | www.733665.com | 1003822.com | www.550021j.com | www.0279006.com | 2007tt.com | www.3478o.cc | www.hg7659.com | hhh4165.com | www.544094.com | www.7415x.com | 500c32.com | 2418r.com | www.tai3355.com | www.h7788r.com | 5295g.com | www.fen09.com | www.1667777.com | t888c.com | www.085366.com | www.62979a.com | www.xw3333.com | 1407a.com | www.5091c.com | www.114654.com | 17798888.com | zzylc3.com | www.x888789.com | www.58777d.com | lh66z.com | www.717224.com | www.biying970vip.com | www.68666c.com | 5651j.com | www.2632r.com | www.o9478.com | feicai0592.com | eme9725.com | www.87668p.com | www.14900a.com | 3522cc.com | 7686p.com | www.168749.com | www.sands6789.com | qq00558.com | 074a7.com | www.q94600.com | www.22995004.com | 66671k.com | www.50732i.com | www.9422d.com | www.xpj539.com | dz883.com | 55818m.com | www.8039e.com | www.38345z.com | www.gh0031.com | 22cc8332.com | www.368518.com | www.087p.com | www.48123.hk | 36989c.com | 3mgmmmm.com | www.022c.cc | www.5446mm.com | www.xinhao03.com | 3846ooo.com | www.50080u.com | www.1666c.com | www.k4042.com | 88850xx.com | 8827nn.com | www.273503.com | www.7449cc.com | www.870000.com | 4195c.com | 25288t.com | www.199207.com | www.sx1800.com | www.a01885.com | www.56733v.com | 33335375.com | 2381007.com | www.5095u.com | www.4058i.com | www.k64602.com | 6663847.com | 22665144.com | www.217113.com | www.81678y.com | www.jz5777.com | www.29886s.com | tour76.com | afcp04.com | www.029509.com | www.15355d.com | www.2021w.com | www.2998w.com | xpj588.com | 2021c.com | 1095528.com | www.708270.com | www.ampj3436.com | www.28000w.com | www.pj8491.com | 053144.com | 33668.com | 7003s.com | www.599260.com | www.07163i.com | www.biying960vip.com | www.122hg.com | bcylc55.com | 3679mm.com | 1468jjj.com | www.135398.com | www.5086t.com | www.0088hgee.com | www.c44vv.com | www.58777e.com | 99111ww.com | 3522f.cc | 1775tt.com | 59964cc.com | www.907883.com | www.dw777.net | www.3066gg.com | www.942232.com | www.hg7977.com | 034408.com | c600.com | 2277bet.com | 1468kkk.com | www.627793.com | www.00840s.com | www.flb905.com | www.5099pp.com | www.9196hg.com | www.77537r.com | 2883dl.com | 6118t.com | 4255nnn.com | 93922u.com | 3405.com | 22ll8331.com | www.348918.com | www.c229.net | www.50024q.com | www.567733.com | www.1754.com | www.559159.com | www.37337.com | www.7111g.com | www.hg67888.com | 88807s.com | 838388j.com | so3333.cc | 22883g.com | bx394.com | 20188j.com | 33sb.com | www.202427.com | www.707602.com | www.050.la | www.43818t.com | www.0194009.com | www.807sun.com | www.80188q.com | www.97937.com | www.hj358.com | www.js12258.com | www.hg2958.com | www.39695n.com | www.hgbb.com | www.81866o.com | 9895h.com | 168cp-v.com | bet8688.net | 7605a.com | 22117j.com | 47749p.com | 3788d.com | 40033yy.com | 93922z.com | 211707.com | 51133kk.com | bet8688.cc | 2383hh.com | 0485.com | hg0068g.com | 1213633.com | 02.bet | 23599l.com | 4025w.com | 67888u.cc | 9068l.com | 4025g.com | hhh4165.com | 9068v.com | 8449ll99.com | 00773uu.com | 91999.com | p939.com | 5168222.cc | 970816.com | 80892ww.com | www.wns8848.com | www.am9977.com | www.32126p.net | www.js3444.com | www.558js.com | www.hg285.com | www.883399u.com | www.57418.com | www.303033.com | www.hccp998.com | www.15365d.com | www.z063801.com | www.86339v.com | www.g98478.com | www.9646q.com | www.41518d.com | www.fh3993.com | www.731030.com | www.397477.com | b957.xyz | 23800s.com | 7736l.com | 81366i.com | 38365s.com | 112l.net | 55984t.com | www.w8606.com | www.hg5899.com | www.056005.com | www.99113o.com | www.9895i.com | www.186664.com | www.78700n.com | www.7fk.com | www.501433.com | 20160913.tv | 4018002.com | 8747.com | hg21222.com | 11vn77.com | www.h7788i.com | www.777348.com | www.38345y.com | www.7036ss.com | www.pj56.com | www.tlcp2.com | www.335247.com | 64898f.com | n888101.com | wx2211.com | lhc958999.com | www.3643v.com | www.js253.com | www.673888a.com | www.x666678.com | www.9149d.com | www.560265.com | tt5443.com | v997e.com | 2334vip9.com | www.js87000.com | www.20288w.com | www.3157b.com | www.5856882.com | www.000ac.com | www.127283.com | 28288j.com | 5219w.com | www.86611s.com | www.071097.com | www.bet91480.com | www.ww.68203e.com | www.cb5388.com | bj6666.com | f2894.com | aa7570a.com | www.xpj3398.com | www.70678d.com | www.0600b.cc | www.0014b.com | www.50732a.com | 8159hhh.cc | ylpp234.com | www.55268zz.com | www.dfh261.com | www.55717e.com | www.926730.com | 5002com | 53262.com | www.333xin2.com | www.kj88822.com | www.hg32228.com | www.3552o.com | 55545z.com | 0343o.com | 4123hh.com | www.hz444.com | www.3421d.com | www.df39.com | 22xx8332.com | vip4048.com | www.700y.com | www.4972s.com | www.78949s.com | www.177949.com | 4255e.com | 88807k.com | www.412666.com | www.pj55712.com | www.901833.com | 876878w.com | 2146r.com | www.9101905.com | www.820031.com | www.hy6935.com | 7811xx.com | 660411.com | www.rf0388.com | www.33303.com | www.752918.com | byc888b.com | 500c32.com | www.068038.com | www.hg082.com | www.305388.com | 20178.com | www.hg6080.com | www.8967h.com | www.7793b.com | 17yy.com | 91999.com | www.33sunncity.com | www.1206c.com | www.139670.com | 33668.com | www.o27229.com | www.4196s.com | www.860958.com | 88894f.com | www.hg5538.com | www.hg8dd.com | www.cf9906.com | 500000760.com | 20774411.com | www.ll55826.com | www.15czj.com | 00774yy.com | 66577.cc | www.8313k.com | www.cb2988.com | blm733.com | www.774426.com | www.xpj448888.com | www.703270.com | jjj5682.com | www.56520q.com | www.751828.com | www.128083.com | 3559zr.com | www.hg8178.com | www.81520l.com | 52599g.com | 29918e.com | www.bet91489.com | www.755908.com | 7r3777.com | www.hg0998.com | www.hg27388.com | 5509z.com | 69990e.com | www.673888h.com | www.602467.com | uu67890.com | www.w9630.com | www.71233z.com | 44995156.com | www.517ly13.com | www.73990s.com | www.022184.com | lymm188.com | www.957938.com | www.876312.com | 3846b.com | www.778849.com | www.5522t.cc | c31hyu57.com | www.18373876153.com | www.531089.com | js14f.com | www.4763118.com | www.761bbb.com | chengbet330.com | ca7099.com | www.4521r.com | 55545f.com | zhcp97.com | www.4196q.com | c388p.com | gg3189.com | www.xpj958.net | www.81678e.com | 2864z.com | www.519862.com | df8n.com | bg345.com | www.wns11.me | 9103pp.com | www.81a88.com | www.7886265.com | 3844oo.com | www.tyc900.com | www.61233z.com | 62077.net | www.234677.com | www.976981.com | 54140088.com | www.604886.com | www.127880.com | 51335u.com | www.55676h.com | 313989.com | www.47ey.com | www.3126v.com | 4289n.com | www.5049e.com | www.327836.com | LXYL351.com | www.86339v.com | 8520f.com | www.js2021.com | www.8667n.com | 4060vv.com | www.7370.com | 4195jj.com | www.m.8235n.com | www.2221104.com | c31hyu57.com | www.hg8127.com | www.544010.com | 2443j.com | www.130a56.com | mmm5144.com | www.688558.com | www.584611.com | 2764.com | www.6888775.com | 55882007.com | www.990707.com | www.332709.com | 8790n.com | www.ya2019u.com | 2021e.com | www.977305.com | 0156742.com | www.hgw0088.me | www.986jc.com | 8869emc.com | www.e848.com | 38820055.com | www.78854.com | www.81520e.com | www.vns9982.com | www.9149f.com | 5456a.com | www.820032.com | byc888b.com | www.54555.com | www.063353.com | www.wnsr838.com | www.5095m.com | ok8381.com | www.42456688.com | 22207z.com | www.55545o.com | 26444h.com | www.hg5867.com | www.183209.com | www.ven2222.com | www.c760.net | 6647u.com | www.33997h.com |