精品欧美一区二区三区在线观看 _久久久久国色av免费观看性色_国产精品久久在线观看_亚洲第一综合网站_91精品又粗又猛又爽_小泽玛利亚一区二区免费_91亚洲精品国偷拍自产在线观看 _久久精品视频在线播放_美女精品久久久_欧美日韩国产成人在线

分布式鎖用Redis還是Zookeeper?

數據庫 其他數據庫 分布式 Redis
redis和zookeeper都有其優缺點。我們在做技術選型的時候可以根據這些問題作為參考因素。

 為什么用分布式鎖?

在討論這個問題之前,我們先來看一個業務場景:

系統A是一個電商系統,目前是一臺機器部署,系統中有一個用戶下訂單的接口,但是用戶下訂單之前一定要去檢查一下庫存,確保庫存足夠了才會給用戶下單。

由于系統有一定的并發,所以會預先將商品的庫存保存在redis中,用戶下單的時候會更新redis的庫存。

此時系統架構如下:

但是這樣一來會產生一個問題:假如某個時刻,redis里面的某個商品庫存為1,此時兩個請求同時到來,其中一個請求執行到上圖的第3步,更新數據庫的庫存為0,但是第4步還沒有執行。

而另外一個請求執行到了第2步,發現庫存還是1,就繼續執行第3步。

這樣的結果,是導致賣出了2個商品,然而其實庫存只有1個。

很明顯不對啊!這就是典型的庫存超賣問題

此時,我們很容易想到解決方案:用鎖把2、3、4步鎖住,讓他們執行完之后,另一個線程才能進來執行第2步。

按照上面的圖,在執行第2步時,使用Java提供的synchronized或者ReentrantLock來鎖住,然后在第4步執行完之后才釋放鎖。

這樣一來,2、3、4 這3個步驟就被“鎖”住了,多個線程之間只能串行化執行。

但是好景不長,整個系統的并發飆升,一臺機器扛不住了。現在要增加一臺機器,如下圖:

增加機器之后,系統變成上圖所示,我的天!

假設此時兩個用戶的請求同時到來,但是落在了不同的機器上,那么這兩個請求是可以同時執行了,還是會出現庫存超賣的問題。

為什么呢?因為上圖中的兩個A系統,運行在兩個不同的JVM里面,他們加的鎖只對屬于自己JVM里面的線程有效,對于其他JVM的線程是無效的。

因此,這里的問題是:Java提供的原生鎖機制在多機部署場景下失效了

這是因為兩臺機器加的鎖不是同一個鎖(兩個鎖在不同的JVM里面)。

那么,我們只要保證兩臺機器加的鎖是同一個鎖,問題不就解決了嗎?

此時,就該分布式鎖隆重登場了,分布式鎖的思路是:

在整個系統提供一個全局、唯一的獲取鎖的“東西”,然后每個系統在需要加鎖時,都去問這個“東西”拿到一把鎖,這樣不同的系統拿到的就可以認為是同一把鎖。

至于這個“東西”,可以是Redis、Zookeeper,也可以是數據庫。

文字描述不太直觀,我們來看下圖:

通過上面的分析,我們知道了庫存超賣場景在分布式部署系統的情況下使用Java原生的鎖機制無法保證線程安全,所以我們需要用到分布式鎖的方案。

那么,如何實現分布式鎖呢?接著往下看!

基于Redis實現分布式鎖

上面分析為啥要使用分布式鎖了,這里我們來具體看看分布式鎖落地的時候應該怎么樣處理。擴展:Redisson是如何實現分布式鎖的?

最常見的一種方案就是使用Redis做分布式鎖

使用Redis做分布式鎖的思路大概是這樣的:在redis中設置一個值表示加了鎖,然后釋放鎖的時候就把這個key刪除。

具體代碼是這樣的: 

  1. // 獲取鎖  
  2. // NX是指如果key不存在就成功,key存在返回false,PX可以指定過期時間  
  3. SET anyLock unique_value NX PX 30000  
  4. // 釋放鎖:通過執行一段lua腳本  
  5. // 釋放鎖涉及到兩條指令,這兩條指令不是原子性的  
  6. // 需要用到redis的lua腳本支持特性,redis執行lua腳本是原子性的  
  7. if redis.call("get",KEYS[1]) == ARGV[1] then  
  8. return redis.call("del",KEYS[1]) 
  9.  else  
  10. return 0  
  11. end 

這種方式有幾大要點:

  •  一定要用SET key value NX PX milliseconds 命令

    如果不用,先設置了值,再設置過期時間,這個不是原子性操作,有可能在設置過期時間之前宕機,會造成死鎖(key永久存在)

  •  value要具有唯一性

    這個是為了在解鎖的時候,需要驗證value是和加鎖的一致才刪除key。

    這是避免了一種情況:假設A獲取了鎖,過期時間30s,此時35s之后,鎖已經自動釋放了,A去釋放鎖,但是此時可能B獲取了鎖。A客戶端就不能刪除B的鎖了。

除了要考慮客戶端要怎么實現分布式鎖之外,還需要考慮redis的部署問題。

redis有3種部署方式:

  •  單機模式
  •  master-slave + sentinel選舉模式
  •  redis cluster模式

使用redis做分布式鎖的缺點在于:如果采用單機部署模式,會存在單點問題,只要redis故障了。加鎖就不行了。

采用master-slave模式,加鎖的時候只對一個節點加鎖,即便通過sentinel做了高可用,但是如果master節點故障了,發生主從切換,此時就會有可能出現鎖丟失的問題。

基于以上的考慮,其實redis的作者也考慮到這個問題,他提出了一個RedLock的算法,這個算法的意思大概是這樣的:

假設redis的部署模式是redis cluster,總共有5個master節點,通過以下步驟獲取一把鎖:

  •  獲取當前時間戳,單位是毫秒
  •  輪流嘗試在每個master節點上創建鎖,過期時間設置較短,一般就幾十毫秒
  •  嘗試在大多數節點上建立一個鎖,比如5個節點就要求是3個節點(n / 2 +1)
  •  客戶端計算建立好鎖的時間,如果建立鎖的時間小于超時時間,就算建立成功了
  •  要是鎖建立失敗了,那么就依次刪除這個鎖
  •  只要別人建立了一把分布式鎖,你就得不斷輪詢去嘗試獲取鎖

但是這樣的這種算法還是頗具爭議的,可能還會存在不少的問題,無法保證加鎖的過程一定正確。

另一種方式:Redisson

此外,實現Redis的分布式鎖,除了自己基于redis client原生api來實現之外,還可以使用開源框架:Redission

Redisson是一個企業級的開源Redis Client,也提供了分布式鎖的支持。我也非常推薦大家使用,為什么呢?

回想一下上面說的,如果自己寫代碼來通過redis設置一個值,是通過下面這個命令設置的。

  •  SET anyLock unique_value NX PX 30000

這里設置的超時時間是30s,假如我超過30s都還沒有完成業務邏輯的情況下,key會過期,其他線程有可能會獲取到鎖。

這樣一來的話,第一個線程還沒執行完業務邏輯,第二個線程進來了也會出現線程安全問題。所以我們還需要額外的去維護這個過期時間,太麻煩了~

我們來看看redisson是怎么實現的?先感受一下使用redission的爽: 

  1. Config config = new Config();  
  2. config.useClusterServers()  
  3. .addNodeAddress("redis://192.168.31.101:7001")  
  4. .addNodeAddress("redis://192.168.31.101:7002")  
  5. .addNodeAddress("redis://192.168.31.101:7003")  
  6. .addNodeAddress("redis://192.168.31.102:7001")  
  7. .addNodeAddress("redis://192.168.31.102:7002")  
  8. .addNodeAddress("redis://192.168.31.102:7003");  
  9. RedissonClient redisson = Redisson.create(config);  
  10. RLock lock = redisson.getLock("anyLock");  
  11. lock.lock();  
  12. lock.unlock(); 

就是這么簡單,我們只需要通過它的api中的lock和unlock即可完成分布式鎖,他幫我們考慮了很多細節:

  •  redisson所有指令都通過lua腳本執行,redis支持lua腳本原子性執行
  •  redisson設置一個key的默認過期時間為30s,如果某個客戶端持有一個鎖超過了30s怎么辦?

          redisson中有一個watchdog的概念,翻譯過來就是看門狗,它會在你獲取鎖之后,每隔10秒幫你把key的超時時間設為30s

    這樣的話,就算一直持有鎖也不會出現key過期了,其他線程獲取到鎖的問題了。

  •  redisson的“看門狗”邏輯保證了沒有死鎖發生。

         (如果機器宕機了,看門狗也就沒了。此時就不會延長key的過期時間,到了30s之后就會自動過期了,其他線程可以獲取到鎖)

這里稍微貼出來其實現代碼: 

  1. // 加鎖邏輯  
  2. private <T> RFuture<Long> tryAcquireAsync(long leaseTime, TimeUnit unit, final long threadId) {  
  3.     if (leaseTime != -1) {  
  4.         return tryLockInnerAsync(leaseTime, unit, threadId, RedisCommands.EVAL_LONG); 
  5.     }  
  6.     // 調用一段lua腳本,設置一些key、過期時間  
  7.     RFuture<Long> ttlRemainingFuture = tryLockInnerAsync(commandExecutor.getConnectionManager().getCfg().getLockWatchdogTimeout(), TimeUnit.MILLISECONDS, threadId, RedisCommands.EVAL_LONG); 
  8.      ttlRemainingFuture.addListener(new FutureListener<Long>() {  
  9.         @Override  
  10.         public void operationComplete(Future<Long> future) throws Exception {  
  11.             if (!future.isSuccess()) {  
  12.                 return;  
  13.             }  
  14.             Long ttlRemaining = future.getNow();  
  15.             // lock acquired  
  16.             if (ttlRemaining == null) {  
  17.                 // 看門狗邏輯  
  18.                 scheduleExpirationRenewal(threadId);  
  19.             }  
  20.         }  
  21.     });  
  22.     return ttlRemainingFuture;  
  23.  
  24. <T> RFuture<T> tryLockInnerAsync(long leaseTime, TimeUnit unit, long threadId, RedisStrictCommand<T> command) {  
  25.     internalLockLeaseTime = unit.toMillis(leaseTime);  
  26.     return commandExecutor.evalWriteAsync(getName(), LongCodec.INSTANCE, command,  
  27.               "if (redis.call('exists', KEYS[1]) == 0) then " +  
  28.                   "redis.call('hset', KEYS[1], ARGV[2], 1); " +  
  29.                   "redis.call('pexpire', KEYS[1], ARGV[1]); " +  
  30.                   "return nil; " +  
  31.               "end; " +  
  32.               "if (redis.call('hexists', KEYS[1], ARGV[2]) == 1) then " +  
  33.                   "redis.call('hincrby', KEYS[1], ARGV[2], 1); " +  
  34.                   "redis.call('pexpire', KEYS[1], ARGV[1]); " +  
  35.                   "return nil; " +  
  36.               "end; " +  
  37.               "return redis.call('pttl', KEYS[1]);",  
  38.                 Collections.<Object>singletonList(getName()), internalLockLeaseTime, getLockName(threadId)); 
  39.  
  40. // 看門狗最終會調用了這里  
  41. private void scheduleExpirationRenewal(final long threadId) {  
  42.     if (expirationRenewalMap.containsKey(getEntryName())) {  
  43.         return;  
  44.     }  
  45.     // 這個任務會延遲10s執行  
  46.     Timeout task = commandExecutor.getConnectionManager().newTimeout(new TimerTask() {  
  47.         @Override  
  48.         public void run(Timeout timeout) throws Exception {  
  49.             // 這個操作會將key的過期時間重新設置為30s  
  50.             RFuture<Boolean> future = renewExpirationAsync(threadId);  
  51.             future.addListener(new FutureListener<Boolean>() {  
  52.                 @Override  
  53.                 public void operationComplete(Future<Boolean> future) throws Exception {  
  54.                     expirationRenewalMap.remove(getEntryName());  
  55.                     if (!future.isSuccess()) {  
  56.                         log.error("Can't update lock " + getName() + " expiration", future.cause());  
  57.                         return;  
  58.                     }  
  59.                     if (future.getNow()) {  
  60.                         // reschedule itself  
  61.                         // 通過遞歸調用本方法,無限循環延長過期時間  
  62.                         scheduleExpirationRenewal(threadId);  
  63.                     }  
  64.                 }  
  65.             });  
  66.         }  
  67.     }, internalLockLeaseTime / 3, TimeUnit.MILLISECONDS);  
  68.     if (expirationRenewalMap.putIfAbsent(getEntryName(), new ExpirationEntry(threadId, task)) != null) {  
  69.         task.cancel();  
  70.     }  

另外,redisson還提供了對redlock算法的支持,

它的用法也很簡單: 

  1. RedissonClient redisson = Redisson.create(config);  
  2. RLock lock1 = redisson.getFairLock("lock1");  
  3. RLock lock2 = redisson.getFairLock("lock2");  
  4. RLock lock3 = redisson.getFairLock("lock3");  
  5. RedissonRedLock multiLock = new RedissonRedLock(lock1, lock2, lock3);  
  6. multiLock.lock();  
  7. multiLock.unlock(); 

小結:

本節分析了使用redis作為分布式鎖的具體落地方案

以及其一些局限性

然后介紹了一個redis的客戶端框架redisson,

這也是我推薦大家使用的,

比自己寫代碼實現會少care很多細節。

基于zookeeper實現分布式鎖

常見的分布式鎖實現方案里面,除了使用redis來實現之外,使用zookeeper也可以實現分布式鎖。

在介紹zookeeper(下文用zk代替)實現分布式鎖的機制之前,先粗略介紹一下zk是什么東西:

Zookeeper是一種提供配置管理、分布式協同以及命名的中心化服務。

zk的模型是這樣的:zk包含一系列的節點,叫做znode,就好像文件系統一樣每個znode表示一個目錄,然后znode有一些特性:

  •  有序節點:假如當前有一個父節點為/lock,我們可以在這個父節點下面創建子節點;

          zookeeper提供了一個可選的有序特性,例如我們可以創建子節點“/lock/node-”并且指明有序,那么zookeeper在生成子節點時會根據當前的子節點數量自動添加整數序號

          也就是說,如果是第一個創建的子節點,那么生成的子節點為/lock/node-0000000000,下一個節點則為/lock/node-0000000001,依次類推。

  •  臨時節點:客戶端可以建立一個臨時節點,在會話結束或者會話超時后,zookeeper會自動刪除該節點。
  •  事件監聽:在讀取數據時,我們可以同時對節點設置事件監聽,當節點數據或結構變化時,zookeeper會通知客戶端。當前zookeeper有如下四種事件:
  •  節點創建
  •  節點刪除
  •  節點數據修改
  •  子節點變更

基于以上的一些zk的特性,我們很容易得出使用zk實現分布式鎖的落地方案:

  1.  使用zk的臨時節點和有序節點,每個線程獲取鎖就是在zk創建一個臨時有序的節點,比如在/lock/目錄下。
  2.  創建節點成功后,獲取/lock目錄下的所有臨時節點,再判斷當前線程創建的節點是否是所有的節點的序號最小的節點
  3.  如果當前線程創建的節點是所有節點序號最小的節點,則認為獲取鎖成功。
  4.  如果當前線程創建的節點不是所有節點序號最小的節點,則對節點序號的前一個節點添加一個事件監聽。
  5.  比如當前線程獲取到的節點序號為/lock/003,然后所有的節點列表為[/lock/001,/lock/002,/lock/003],則對/lock/002這個節點添加一個事件監聽器。

如果鎖釋放了,會喚醒下一個序號的節點,然后重新執行第3步,判斷是否自己的節點序號是最小。

比如/lock/001釋放了,/lock/002監聽到時間,此時節點集合為[/lock/002,/lock/003],則/lock/002為最小序號節點,獲取到鎖。

整個過程如下:

具體的實現思路就是這樣,至于代碼怎么寫,這里比較復雜就不貼出來了。

Curator介紹

Curator是一個zookeeper的開源客戶端,也提供了分布式鎖的實現。

他的使用方式也比較簡單: 

  1. InterProcessMutex interProcessMutex = new InterProcessMutex(client,"/anyLock");  
  2. interProcessMutex.acquire();  
  3. interProcessMutex.release(); 

其實現分布式鎖的核心源碼如下: 

  1. private boolean internalLockLoop(long startMillis, Long millisToWait, String ourPath) throws Exception  
  2.  
  3.     boolean  haveTheLock = false 
  4.     boolean  doDelete = false 
  5.     try {  
  6.         if ( revocable.get() != null ) {  
  7.             client.getData().usingWatcher(revocableWatcher).forPath(ourPath);  
  8.         }  
  9.         while ( (client.getState() == CuratorFrameworkState.STARTED) && !haveTheLock ) {  
  10.             // 獲取當前所有節點排序后的集合  
  11.             List<String>        children = getSortedChildren();  
  12.             // 獲取當前節點的名稱  
  13.             String              sequenceNodeName = ourPath.substring(basePath.length() + 1); // +1 to include the slash  
  14.             // 判斷當前節點是否是最小的節點  
  15.             PredicateResults    predicateResults = driver.getsTheLock(client, children, sequenceNodeName, maxLeases);  
  16.             if ( predicateResults.getsTheLock() ) {  
  17.                 // 獲取到鎖  
  18.                 haveTheLock = true 
  19.             } else {  
  20.                 // 沒獲取到鎖,對當前節點的上一個節點注冊一個監聽器  
  21.                 String  previousSequencePath = basePath + "/" + predicateResults.getPathToWatch();  
  22.                 synchronized(this){ 
  23.                      Stat stat = client.checkExists().usingWatcher(watcher).forPath(previousSequencePath);  
  24.                     if ( stat != null ){  
  25.                         if ( millisToWait != null ){  
  26.                             millisToWait -= (System.currentTimeMillis() - startMillis);  
  27.                             startMillis = System.currentTimeMillis();  
  28.                             if ( millisToWait <= 0 ){  
  29.                                 doDelete = true;    // timed out - delete our node  
  30.                                 break;  
  31.                             } 
  32.                              wait(millisToWait);  
  33.                         }else{  
  34.                             wait();  
  35.                         }  
  36.                     }  
  37.                 }  
  38.                 // else it may have been deleted (i.e. lock released). Try to acquire again  
  39.             }  
  40.         } 
  41.      }  
  42.     catch ( Exception e ) {  
  43.         doDelete = true 
  44.         throw e;  
  45.     } finally{  
  46.         if ( doDelete ){  
  47.             deleteOurPath(ourPath);  
  48.         }  
  49.     }  
  50.     return haveTheLock;  

其實curator實現分布式鎖的底層原理和上面分析的是差不多的。這里我們用一張圖詳細描述其原理:

小結:

本節介紹了zookeeperr實現分布式鎖的方案以及zk的開源客戶端的基本使用,簡要的介紹了其實現原理。相關可以參考:肝一下ZooKeeper實現分布式鎖的方案,附帶實例!

兩種方案的優缺點比較

學完了兩種分布式鎖的實現方案之后,本節需要討論的是redis和zk的實現方案中各自的優缺點。

對于redis的分布式鎖而言,它有以下缺點:

  •  它獲取鎖的方式簡單粗暴,獲取不到鎖直接不斷嘗試獲取鎖,比較消耗性能。
  •  另外來說的話,redis的設計定位決定了它的數據并不是強一致性的,在某些極端情況下,可能會出現問題。鎖的模型不夠健壯
  •  即便使用redlock算法來實現,在某些復雜場景下,也無法保證其實現100%沒有問題,關于redlock的討論可以看How to do distributed locking
  •  redis分布式鎖,其實需要自己不斷去嘗試獲取鎖,比較消耗性能。

但是另一方面使用redis實現分布式鎖在很多企業中非常常見,而且大部分情況下都不會遇到所謂的“極端復雜場景”

所以使用redis作為分布式鎖也不失為一種好的方案,最重要的一點是redis的性能很高,可以支撐高并發的獲取、釋放鎖操作。

對于zk分布式鎖而言:

  •  zookeeper天生設計定位就是分布式協調,強一致性。鎖的模型健壯、簡單易用、適合做分布式鎖。
  •  如果獲取不到鎖,只需要添加一個監聽器就可以了,不用一直輪詢,性能消耗較小。

但是zk也有其缺點:如果有較多的客戶端頻繁的申請加鎖、釋放鎖,對于zk集群的壓力會比較大。

小結:

綜上所述,redis和zookeeper都有其優缺點。我們在做技術選型的時候可以根據這些問題作為參考因素。

建議

通過前面的分析,實現分布式鎖的兩種常見方案:redis和zookeeper,他們各有千秋。應該如何選型呢?

就個人而言的話,我比較推崇zk實現的鎖:

因為redis是有可能存在隱患的,可能會導致數據不對的情況。但是,怎么選用要看具體在公司的場景了。

如果公司里面有zk集群條件,優先選用zk實現,但是如果說公司里面只有redis集群,沒有條件搭建zk集群。

那么其實用redis來實現也可以,另外還可能是系統設計者考慮到了系統已經有redis,但是又不希望再次引入一些外部依賴的情況下,可以選用redis。

這個是要系統設計者基于架構的考慮了。 

 

責任編輯:龐桂玉 來源: 馬哥Linux運維
相關推薦

2019-07-16 09:22:10

RedisZookeeper分布式鎖

2020-12-15 10:20:24

分布式鎖RedisZookeeper

2021-10-25 10:21:59

ZK分布式鎖ZooKeeper

2017-10-24 11:28:23

Zookeeper分布式鎖架構

2019-06-19 15:40:06

分布式鎖RedisJava

2021-07-16 07:57:34

ZooKeeperCurator源碼

2021-02-28 07:49:28

Zookeeper分布式

2023-08-21 19:10:34

Redis分布式

2022-01-06 10:58:07

Redis數據分布式鎖

2019-02-26 09:51:52

分布式鎖RedisZookeeper

2022-07-25 06:44:19

ZooKeeper分布式鎖

2022-10-27 10:44:14

分布式Zookeeper

2022-03-04 09:54:04

Redis分布式鎖腳本

2024-04-17 08:42:15

Go語言分布式鎖

2021-07-08 09:21:17

ZooKeeper分布式鎖 Curator

2022-09-19 08:17:09

Redis分布式

2024-10-07 10:07:31

2021-06-16 07:56:21

Redis分布式

2024-04-01 05:10:00

Redis數據庫分布式鎖

2022-06-16 08:01:24

redis分布式鎖
點贊
收藏

51CTO技術棧公眾號

欧美精品激情| 天堂资源在线| 国产成人a级片| 国内精品久久久久久久久| 老太脱裤子让老头玩xxxxx| 好吊视频一二三区| 国内激情久久| 亚洲另类图片色| 免费看涩涩视频| 羞羞电影在线观看www| 国产精品白丝jk黑袜喷水| 久久久中文字幕| 亚洲精品国产精品国自产网站| 狂野欧美性猛交xxxx| 亚洲综合色成人| 国产精品一区二区三区免费观看| 丁香六月婷婷综合| 国产高清一区二区| 欧美成人三级在线| 超碰影院在线观看| 日本天码aⅴ片在线电影网站| 99久久久精品免费观看国产蜜| 欧洲午夜精品久久久| 极品色av影院| 男人的天堂久久| 欧美视频一区二区三区| 国产免费黄色小视频| 日本在线天堂| 91蜜桃婷婷狠狠久久综合9色| 国产主播精品在线| 国产在线观看你懂的| 欧美精品色图| 亚洲国内高清视频| 一区二区在线免费看| sm久久捆绑调教精品一区| 国产精品美女久久久久aⅴ| 国产精品视频福利| 精品黑人一区二区三区国语馆| 日本强好片久久久久久aaa| 97色伦亚洲国产| 日本在线视频免费观看| 欧美特黄a级高清免费大片a级| 久久亚洲精品小早川怜子66| 五月天免费网站| 欧美色女视频| 亚洲天堂网在线观看| 免费在线观看成年人视频| 国内精品国产成人国产三级粉色| 日韩精品中文字幕一区| 天堂av手机在线| 在线免费成人| 7777精品伊人久久久大香线蕉的 | 男人天堂av电影| 青青一区二区| 日韩电影在线观看中文字幕| 大乳护士喂奶hd| 欧美网色网址| 精品亚洲一区二区三区| 午夜av免费看| 蜜臀91精品国产高清在线观看| 日韩经典一区二区三区| jizz欧美性20| 欧美手机视频| 亚洲美腿欧美偷拍| 亚洲图色在线| 成码无人av片在线观看网站| 亚洲精品乱码久久久久久日本蜜臀| 中文字幕日韩一区二区三区 | 欧美激情综合网| 亚洲国产精品综合| 欧美被日视频| 亚洲激情av在线| 成人午夜免费在线| 最新中文字幕在线播放| 欧美私人免费视频| 樱花草www在线| 6080亚洲理论片在线观看| 亚洲精品一区二区三区蜜桃下载 | 亚洲一区二区三区四区精品 | 精品国产一区二区三区四区vr| 午夜在线视频观看| 国产欧美日韩在线| 桥本有菜av在线| 日韩123区| 欧美视频在线看| 中文字幕天天干| 精品国产乱码久久久久久樱花| 日韩午夜av电影| 波多野结衣福利| 欧美国产一级| 国语自产偷拍精品视频偷| 99超碰在线观看| 国内成人精品2018免费看| 国产成人免费观看| 国产www.大片在线| 亚洲精选在线视频| 男人天堂999| 91成人福利社区| 日韩精品一区二区三区第95| 四虎影视一区二区| 亚洲毛片视频| 国产日本欧美一区二区三区| 黄色一级a毛片| 国产精品美女久久久久av爽李琼| 国产一线二线三线女| 国产韩日精品| 亚洲国产精品字幕| 免费精品在线视频| 性一交一乱一区二区洋洋av| 91亚洲人电影| 国产福利在线视频| 亚洲aaa精品| 亚洲精品在线视频播放| 亚洲丝袜美腿一区| 欧美激情亚洲自拍| 国产又大又黄的视频| 久久综合九色综合欧美就去吻| 熟女视频一区二区三区| 精品免费av在线 | 国模无码视频一区| 爽成人777777婷婷| 亲爱的老师9免费观看全集电视剧| 国产精品欧美激情在线| 国产欧美精品区一区二区三区| 日本欧美黄色片| 日本在线视频一区二区三区| 色av吧综合网| 久久久国产免费| 91免费在线播放| 欧美成人高潮一二区在线看| 免费观看性欧美大片无片| 色噜噜亚洲精品中文字幕| 台湾佬中文在线| 9色porny自拍视频一区二区| 国产一区二区三区在线免费| 亚洲影视资源| 久久九九热免费视频| 国产精品无码粉嫩小泬| 久久久久久一二三区| 波多野结衣之无限发射| 韩国精品福利一区二区三区| 欧美精品制服第一页| 99热这里是精品| **性色生活片久久毛片| 亚洲第一天堂久久| 伊人久久大香线蕉综合四虎小说 | 日韩精品一卡| 国产精品久久久久免费a∨大胸| 理论在线观看| 欧美在线观看一二区| 一级特黄曰皮片视频| 日韩精品一级二级| 亚洲欧美丝袜| 日韩免费在线电影| 久久高清视频免费| 国产高清视频免费| 亚洲精品videosex极品| 精品一区二区三区四区五区六区| 亚洲国内自拍| 美国av一区二区三区| 韩国精品主播一区二区在线观看 | av资源在线免费观看| 久久er99精品| 欧美与动交zoz0z| 亚洲网一区二区三区| 国内精品久久久久久中文字幕| 手机av免费在线观看| 一本一本久久a久久精品综合麻豆| 亚洲AV无码国产成人久久| 日本视频一区二区| 桥本有菜av在线| 久久97精品| 国产精品99久久久久久白浆小说| 午夜在线小视频| 日韩欧美精品在线视频| 日韩 欧美 综合| 国产无一区二区| 日本77777| 亚洲人成久久| 亚洲欧美久久234| 亚洲一区 二区| 欧洲亚洲在线视频| 麻豆av免费在线观看| 欧美草草影院在线视频| 中文字幕精品无码一区二区| 亚洲色图欧美偷拍| 欧类av怡春院| 激情综合五月天| 老太脱裤让老头玩ⅹxxxx| 精品视频免费| 操人视频欧美| 国产另类xxxxhd高清| 久久久精品2019中文字幕神马| 免费国产黄色片| 欧美午夜精品久久久| 欧美亚洲天堂网| 国产精品国产三级国产三级人妇 | 国产精品精品视频| 亚洲小说区图片| 亚洲香蕉成视频在线观看| 国产激情久久久久久熟女老人av| 色综合久久九月婷婷色综合| 久草免费在线观看视频| 欧美激情在线看| 亚洲婷婷在线观看| 精品一区二区三区在线播放视频| 自慰无码一区二区三区| 你懂的国产精品永久在线| 青娱乐国产91| 久久激情av| 91成人免费在线观看| 日本肉肉一区| 欧美亚洲第一页| 性欧美videos高清hd4k| 日韩在线欧美在线| 欧美日韩影视| 亚洲精品av在线| www.亚洲天堂.com| 欧美人伦禁忌dvd放荡欲情| 天天干天天干天天干天天| 亚洲亚洲人成综合网络| 日韩国产第一页| 国产欧美精品国产国产专区| 中文字幕5566| 91视频免费播放| 亚洲v在线观看| 国产一区二区不卡| 男人插女人下面免费视频| 99在线观看免费视频精品观看| 午夜啪啪福利视频| 91嫩草亚洲精品| 色综合电影网| 红桃成人av在线播放| 欧美极品日韩| 一区二区三区日本久久久| 久久精品ww人人做人人爽| 北条麻妃一区二区三区在线观看| 亚洲xxx视频| 欧美国产亚洲精品| 亚洲综合在线播放| 激情综合五月| 91|九色|视频| 欧美日韩中出| 国产99视频精品免费视频36| 亚洲综合影院| 国产精品入口免费| 欧美男人操女人视频| 精品视频免费观看| 色天天色综合| 欧美日韩国产综合在线| 欧美日韩播放| 亚洲福利av| 亚洲v在线看| 亚洲区成人777777精品| 欧美激情视频一区二区三区在线播放| 糖心vlog在线免费观看| 黄色成人av网站| 99热亚洲精品| 另类天堂av| 国产成人手机视频| 捆绑变态av一区二区三区| 一个色综合久久| 国产裸体歌舞团一区二区| 韩国三级在线看| 99久久综合精品| 欧美偷拍一区二区三区| 国产精品女人毛片| 日韩欧美中文字幕视频| 午夜精品久久久久影视| 永久免费无码av网站在线观看| 欧美亚洲动漫制服丝袜| 国产精品乱码久久久| 精品乱码亚洲一区二区不卡| 婷婷五月综合久久中文字幕| 亚洲精品一区二区在线| 69久久精品| 国模私拍一区二区三区| 免费在线观看一区| 亚洲自拍偷拍在线| 青青一区二区| 一区二区三区在线视频111| 国产真实久久| 国产成人无码一二三区视频| 久久超碰97人人做人人爱| 99精品一区二区三区无码吞精| 国产亚洲欧洲一区高清在线观看| 日本美女黄色一级片| 亚洲成人av电影| 这里只有精品国产| 精品国产sm最大网站免费看| 国产中文字幕在线看| 欧美床上激情在线观看| av资源亚洲| 亚洲一区二区三区毛片 | 影音先锋欧美资源| 亚洲三级网站| 精品综合久久久久| 91免费看视频| 免费一级黄色大片| 在线视频欧美精品| 免费a级片在线观看| 色哟哟入口国产精品| 欧美男人天堂| 999精品视频一区二区三区| 国产一区二区三区日韩精品| 成人免费看片'免费看| 蜜桃视频在线观看一区| 亚洲av成人片色在线观看高潮| 国产精品国产三级国产aⅴ无密码| 日韩精品视频播放| 在线电影欧美成精品| 国产在线资源| 88xx成人精品| ccyy激情综合| 强开小嫩苞一区二区三区网站| 日日嗨av一区二区三区四区| 国产免费a级片| 亚洲免费观看高清完整版在线 | 亚洲深夜福利在线| 国产精品探花在线| 成人免费激情视频| 精品久久久久久久久久久下田| 日韩亚洲欧美视频| 国产精品一区免费视频| 永久免费看片视频教学| 91极品视觉盛宴| 欧洲伦理片一区 二区 三区| 欧美精品xxx| 97人人澡人人爽91综合色| 久久免费看毛片| 美女在线观看视频一区二区| 国产精成人品免费观看| 一本大道久久a久久综合婷婷| 天堂网在线中文| 午夜精品福利在线观看| 超碰cao国产精品一区二区| 99er在线视频| 国产高清久久久久| 激情五月少妇a| 欧美xingq一区二区| 日本理论片午伦夜理片在线观看| 51国偷自产一区二区三区的来源| 99热在线成人| 国内av一区二区| 亚洲男同性恋视频| 国产ts变态重口人妖hd| 久久91亚洲人成电影网站| 国产一区二区三区| 欧美一二三不卡| 丁香六月综合激情| 国产成年人免费视频| 日韩精品在线观看网站| 欧美电影免费观看网站| 久久久久久艹| 爽好久久久欧美精品| 国产一二三四五区| 欧美日韩卡一卡二| 欧美69xxx| 超碰97在线人人| 最新亚洲激情| 谁有免费的黄色网址| 91国产丝袜在线播放| 日本综合在线| 俄罗斯精品一区二区三区| 亚洲第一网站| 免费一级做a爰片久久毛片潮| 在线观看日韩电影| 国产精品久久麻豆| 国产另类自拍| 久久这里有精品15一区二区三区| 91免费在线看片| 日韩欧美成人一区二区| 天堂√中文最新版在线| 五月天久久综合网| 国产丶欧美丶日本不卡视频| 欧美a∨亚洲欧美亚洲| 伊人久久精品视频| 国产一区二区三区免费观看在线| 国产一区二区三区乱码| 久久精品欧美一区二区三区不卡| 91激情在线观看| 久久久久亚洲精品| 欧美综合视频| 亚洲精品乱码久久久久久9色| 高跟丝袜欧美一区| 麻豆网站视频在线观看| 国产精品自拍首页| 美女视频黄免费的久久| 日本午夜小视频| 丝袜美腿亚洲一区二区| 成午夜精品一区二区三区软件| 五月天婷婷激情视频| 亚洲一区二区在线观看视频 | 亚洲少妇最新在线视频| 天天干在线观看| 成人日韩在线电影| 免费中文字幕日韩欧美| 老湿机69福利| 一本一本久久a久久精品综合小说| 欧美a级大片在线|