精品欧美一区二区三区在线观看 _久久久久国色av免费观看性色_国产精品久久在线观看_亚洲第一综合网站_91精品又粗又猛又爽_小泽玛利亚一区二区免费_91亚洲精品国偷拍自产在线观看 _久久精品视频在线播放_美女精品久久久_欧美日韩国产成人在线

分布式鎖用Redis還是Zookeeper?

開發 架構 開發工具 分布式 Redis
為什么用分布式鎖?在討論這個問題之前,我們先來看一個業務場景。

為什么用分布式鎖?在討論這個問題之前,我們先來看一個業務場景。

[[270723]]

圖片來自 Pexels

為什么用分布式鎖?

系統 A 是一個電商系統,目前是一臺機器部署,系統中有一個用戶下訂單的接口,但是用戶下訂單之前一定要去檢查一下庫存,確保庫存足夠了才會給用戶下單。

由于系統有一定的并發,所以會預先將商品的庫存保存在 Redis 中,用戶下單的時候會更新 Redis 的庫存。

此時系統架構如下:

但是這樣一來會產生一個問題:假如某個時刻,Redis 里面的某個商品庫存為 1。

此時兩個請求同時到來,其中一個請求執行到上圖的第 3 步,更新數據庫的庫存為 0,但是第 4 步還沒有執行。

而另外一個請求執行到了第 2 步,發現庫存還是 1,就繼續執行第 3 步。這樣的結果,是導致賣出了 2 個商品,然而其實庫存只有 1 個。

很明顯不對啊!這就是典型的庫存超賣問題。此時,我們很容易想到解決方案:用鎖把 2、3、4 步鎖住,讓他們執行完之后,另一個線程才能進來執行第 2 步。

按照上面的圖,在執行第 2 步時,使用 Java 提供的 Synchronized 或者 ReentrantLock 來鎖住,然后在第 4 步執行完之后才釋放鎖。

這樣一來,2、3、4 這 3 個步驟就被“鎖”住了,多個線程之間只能串行化執行。

但是好景不長,整個系統的并發飆升,一臺機器扛不住了。現在要增加一臺機器,如下圖:

增加機器之后,系統變成上圖所示,我的天!假設此時兩個用戶的請求同時到來,但是落在了不同的機器上,那么這兩個請求是可以同時執行了,還是會出現庫存超賣的問題。

為什么呢?因為上圖中的兩個 A 系統,運行在兩個不同的 JVM 里面,他們加的鎖只對屬于自己 JVM 里面的線程有效,對于其他 JVM 的線程是無效的。

因此,這里的問題是:Java 提供的原生鎖機制在多機部署場景下失效了,這是因為兩臺機器加的鎖不是同一個鎖(兩個鎖在不同的 JVM 里面)。

那么,我們只要保證兩臺機器加的鎖是同一個鎖,問題不就解決了嗎?此時,就該分布式鎖隆重登場了。

分布式鎖的思路是:在整個系統提供一個全局、唯一的獲取鎖的“東西”,然后每個系統在需要加鎖時,都去問這個“東西”拿到一把鎖,這樣不同的系統拿到的就可以認為是同一把鎖。

至于這個“東西”,可以是 Redis、Zookeeper,也可以是數據庫。文字描述不太直觀,我們來看下圖:

通過上面的分析,我們知道了庫存超賣場景在分布式部署系統的情況下使用 Java 原生的鎖機制無法保證線程安全,所以我們需要用到分布式鎖的方案。

那么,如何實現分布式鎖呢?接著往下看!

基于 Redis 實現分布式鎖

上面分析為啥要使用分布式鎖了,這里我們來具體看看分布式鎖落地的時候應該怎么樣處理。

①常見的一種方案就是使用 Redis 做分布式鎖

使用 Redis 做分布式鎖的思路大概是這樣的:在 Redis 中設置一個值表示加了鎖,然后釋放鎖的時候就把這個 Key 刪除。

具體代碼是這樣的:

  1. // 獲取鎖 
  2. // NX是指如果key不存在就成功,key存在返回false,PX可以指定過期時間 
  3. SET anyLock unique_value NX PX 30000 
  4.  
  5.  
  6. // 釋放鎖:通過執行一段lua腳本 
  7. // 釋放鎖涉及到兩條指令,這兩條指令不是原子性的 
  8. // 需要用到redis的lua腳本支持特性,redis執行lua腳本是原子性的 
  9. if redis.call("get",KEYS[1]) == ARGV[1] then 
  10. return redis.call("del",KEYS[1]) 
  11. else 
  12. return 0 
  13. end 

這種方式有幾大要點:

  • 一定要用 SET key value NX PX milliseconds 命令。如果不用,先設置了值,再設置過期時間,這個不是原子性操作,有可能在設置過期時間之前宕機,會造成死鎖(Key ***存在)
  • Value 要具有唯一性。這個是為了在解鎖的時候,需要驗證 Value 是和加鎖的一致才刪除 Key。

這時避免了一種情況:假設 A 獲取了鎖,過期時間 30s,此時 35s 之后,鎖已經自動釋放了,A 去釋放鎖,但是此時可能 B 獲取了鎖。A 客戶端就不能刪除 B 的鎖了。

除了要考慮客戶端要怎么實現分布式鎖之外,還需要考慮 Redis 的部署問題。

Redis 有 3 種部署方式:

  • 單機模式
  • Master-Slave+Sentinel 選舉模式
  • Redis Cluster 模式

使用 Redis 做分布式鎖的缺點在于:如果采用單機部署模式,會存在單點問題,只要 Redis 故障了。加鎖就不行了。

采用 Master-Slave 模式,加鎖的時候只對一個節點加鎖,即便通過 Sentinel 做了高可用,但是如果 Master 節點故障了,發生主從切換,此時就會有可能出現鎖丟失的問題。

基于以上的考慮,Redis 的作者也考慮到這個問題,他提出了一個 RedLock 的算法。

這個算法的意思大概是這樣的:假設 Redis 的部署模式是 Redis Cluster,總共有 5 個 Master 節點。

通過以下步驟獲取一把鎖:

  • 獲取當前時間戳,單位是毫秒。
  • 輪流嘗試在每個 Master 節點上創建鎖,過期時間設置較短,一般就幾十毫秒。
  • 嘗試在大多數節點上建立一個鎖,比如 5 個節點就要求是 3 個節點(n / 2 +1)。
  • 客戶端計算建立好鎖的時間,如果建立鎖的時間小于超時時間,就算建立成功了。
  • 要是鎖建立失敗了,那么就依次刪除這個鎖。
  • 只要別人建立了一把分布式鎖,你就得不斷輪詢去嘗試獲取鎖。

但是這樣的這種算法還是頗具爭議的,可能還會存在不少的問題,無法保證加鎖的過程一定正確。

②另一種方式:Redisson

此外,實現 Redis 的分布式鎖,除了自己基于 Redis Client 原生 API 來實現之外,還可以使用開源框架:Redission。

Redisson 是一個企業級的開源 Redis Client,也提供了分布式鎖的支持。我也非常推薦大家使用,為什么呢?

回想一下上面說的,如果自己寫代碼來通過 Redis 設置一個值,是通過下面這個命令設置的:

  1. SET anyLock unique_value NX PX 30000 

這里設置的超時時間是 30s,假如我超過 30s 都還沒有完成業務邏輯的情況下,Key 會過期,其他線程有可能會獲取到鎖。

這樣一來的話,***個線程還沒執行完業務邏輯,第二個線程進來了也會出現線程安全問題。

所以我們還需要額外的去維護這個過期時間,太麻煩了~我們來看看 Redisson 是怎么實現的?

先感受一下使用 Redission 的爽:

  1. Config config = new Config(); 
  2. config.useClusterServers() 
  3. .addNodeAddress("redis://192.168.31.101:7001"
  4. .addNodeAddress("redis://192.168.31.101:7002"
  5. .addNodeAddress("redis://192.168.31.101:7003"
  6. .addNodeAddress("redis://192.168.31.102:7001"
  7. .addNodeAddress("redis://192.168.31.102:7002"
  8. .addNodeAddress("redis://192.168.31.102:7003"); 
  9.  
  10. RedissonClient redisson = Redisson.create(config); 
  11.  
  12.  
  13. RLock lock = redisson.getLock("anyLock"); 
  14. lock.lock(); 
  15. lock.unlock(); 

就是這么簡單,我們只需要通過它的 API 中的 Lock 和 Unlock 即可完成分布式鎖,他幫我們考慮了很多細節:

  • Redisson 所有指令都通過 Lua 腳本執行,Redis 支持 Lua 腳本原子性執行。
  • Redisson 設置一個 Key 的默認過期時間為 30s,如果某個客戶端持有一個鎖超過了 30s 怎么辦?
  • Redisson 中有一個 Watchdog 的概念,翻譯過來就是看門狗,它會在你獲取鎖之后,每隔 10s 幫你把 Key 的超時時間設為 30s。

這樣的話,就算一直持有鎖也不會出現 Key 過期了,其他線程獲取到鎖的問題了。

  • Redisson 的“看門狗”邏輯保證了沒有死鎖發生。(如果機器宕機了,看門狗也就沒了。此時就不會延長 Key 的過期時間,到了 30s 之后就會自動過期了,其他線程可以獲取到鎖)

這里稍微貼出來其實現代碼:

  1. // 加鎖邏輯 
  2. private <T> RFuture<Long> tryAcquireAsync(long leaseTime, TimeUnit unit, final long threadId) { 
  3.     if (leaseTime != -1) { 
  4.         return tryLockInnerAsync(leaseTime, unit, threadId, RedisCommands.EVAL_LONG); 
  5.     } 
  6.     // 調用一段lua腳本,設置一些key、過期時間 
  7.     RFuture<Long> ttlRemainingFuture = tryLockInnerAsync(commandExecutor.getConnectionManager().getCfg().getLockWatchdogTimeout(), TimeUnit.MILLISECONDS, threadId, RedisCommands.EVAL_LONG); 
  8.     ttlRemainingFuture.addListener(new FutureListener<Long>() { 
  9.         @Override 
  10.         public void operationComplete(Future<Long> future) throws Exception { 
  11.             if (!future.isSuccess()) { 
  12.                 return
  13.             } 
  14.  
  15.             Long ttlRemaining = future.getNow(); 
  16.             // lock acquired 
  17.             if (ttlRemaining == null) { 
  18.                 // 看門狗邏輯 
  19.                 scheduleExpirationRenewal(threadId); 
  20.             } 
  21.         } 
  22.     }); 
  23.     return ttlRemainingFuture; 
  24.  
  25.  
  26. <T> RFuture<T> tryLockInnerAsync(long leaseTime, TimeUnit unit, long threadId, RedisStrictCommand<T> command) { 
  27.     internalLockLeaseTime = unit.toMillis(leaseTime); 
  28.  
  29.     return commandExecutor.evalWriteAsync(getName(), LongCodec.INSTANCE, command, 
  30.               "if (redis.call('exists', KEYS[1]) == 0) then " + 
  31.                   "redis.call('hset', KEYS[1], ARGV[2], 1); " + 
  32.                   "redis.call('pexpire', KEYS[1], ARGV[1]); " + 
  33.                   "return nil; " + 
  34.               "end; " + 
  35.               "if (redis.call('hexists', KEYS[1], ARGV[2]) == 1) then " + 
  36.                   "redis.call('hincrby', KEYS[1], ARGV[2], 1); " + 
  37.                   "redis.call('pexpire', KEYS[1], ARGV[1]); " + 
  38.                   "return nil; " + 
  39.               "end; " + 
  40.               "return redis.call('pttl', KEYS[1]);"
  41.                 Collections.<Object>singletonList(getName()), internalLockLeaseTime, getLockName(threadId)); 
  42.  
  43.  
  44.  
  45. // 看門狗最終會調用了這里 
  46. private void scheduleExpirationRenewal(final long threadId) { 
  47.     if (expirationRenewalMap.containsKey(getEntryName())) { 
  48.         return
  49.     } 
  50.  
  51.     // 這個任務會延遲10s執行 
  52.     Timeout task = commandExecutor.getConnectionManager().newTimeout(new TimerTask() { 
  53.         @Override 
  54.         public void run(Timeout timeout) throws Exception { 
  55.  
  56.             // 這個操作會將key的過期時間重新設置為30s 
  57.             RFuture<Boolean> future = renewExpirationAsync(threadId); 
  58.  
  59.             future.addListener(new FutureListener<Boolean>() { 
  60.                 @Override 
  61.                 public void operationComplete(Future<Boolean> future) throws Exception { 
  62.                     expirationRenewalMap.remove(getEntryName()); 
  63.                     if (!future.isSuccess()) { 
  64.                         log.error("Can't update lock " + getName() + " expiration", future.cause()); 
  65.                         return
  66.                     } 
  67.  
  68.                     if (future.getNow()) { 
  69.                         // reschedule itself 
  70.                         // 通過遞歸調用本方法,***循環延長過期時間 
  71.                         scheduleExpirationRenewal(threadId); 
  72.                     } 
  73.                 } 
  74.             }); 
  75.         } 
  76.  
  77.     }, internalLockLeaseTime / 3, TimeUnit.MILLISECONDS); 
  78.  
  79.     if (expirationRenewalMap.putIfAbsent(getEntryName(), new ExpirationEntry(threadId, task)) != null) { 
  80.         task.cancel(); 
  81.     } 

另外,Redisson 還提供了對 Redlock 算法的支持,它的用法也很簡單:

  1. RedissonClient redisson = Redisson.create(config); 
  2. RLock lock1 = redisson.getFairLock("lock1"); 
  3. RLock lock2 = redisson.getFairLock("lock2"); 
  4. RLock lock3 = redisson.getFairLock("lock3"); 
  5. RedissonRedLock multiLock = new RedissonRedLock(lock1, lock2, lock3); 
  6. multiLock.lock(); 
  7. multiLock.unlock(); 

小結:本節分析了使用 Redis 作為分布式鎖的具體落地方案以及其一些局限性,然后介紹了一個 Redis 的客戶端框架 Redisson,這也是我推薦大家使用的,比自己寫代碼實現會少 Care 很多細節。

基于 Zookeeper 實現分布式鎖

常見的分布式鎖實現方案里面,除了使用 Redis 來實現之外,使用 Zookeeper 也可以實現分布式鎖。

在介紹 Zookeeper(下文用 ZK 代替)實現分布式鎖的機制之前,先粗略介紹一下 ZK 是什么東西:ZK 是一種提供配置管理、分布式協同以及命名的中心化服務。

ZK 的模型是這樣的:ZK 包含一系列的節點,叫做 Znode,就好像文件系統一樣,每個 Znode 表示一個目錄。

然后 Znode 有一些特性:

  • 有序節點:假如當前有一個父節點為 /lock,我們可以在這個父節點下面創建子節點,ZK 提供了一個可選的有序特性。

例如我們可以創建子節點“/lock/node-”并且指明有序,那么 ZK 在生成子節點時會根據當前的子節點數量自動添加整數序號。

也就是說,如果是***個創建的子節點,那么生成的子節點為 /lock/node-0000000000,下一個節點則為 /lock/node-0000000001,依次類推。

  • 臨時節點:客戶端可以建立一個臨時節點,在會話結束或者會話超時后,ZK 會自動刪除該節點。
  • 事件監聽:在讀取數據時,我們可以同時對節點設置事件監聽,當節點數據或結構變化時,ZK 會通知客戶端。

當前 ZK 有如下四種事件:

  • 節點創建
  • 節點刪除
  • 節點數據修改
  • 子節點變更

基于以上的一些 ZK 的特性,我們很容易得出使用 ZK 實現分布式鎖的落地方案:

  • 使用 ZK 的臨時節點和有序節點,每個線程獲取鎖就是在 ZK 創建一個臨時有序的節點,比如在 /lock/ 目錄下。
  • 創建節點成功后,獲取 /lock 目錄下的所有臨時節點,再判斷當前線程創建的節點是否是所有的節點的序號最小的節點。
  • 如果當前線程創建的節點是所有節點序號最小的節點,則認為獲取鎖成功。
  • 如果當前線程創建的節點不是所有節點序號最小的節點,則對節點序號的前一個節點添加一個事件監聽。

比如當前線程獲取到的節點序號為 /lock/003,然后所有的節點列表為[/lock/001,/lock/002,/lock/003],則對 /lock/002 這個節點添加一個事件監聽器。

如果鎖釋放了,會喚醒下一個序號的節點,然后重新執行第 3 步,判斷是否自己的節點序號是最小。

比如 /lock/001 釋放了,/lock/002 監聽到時間,此時節點集合為[/lock/002,/lock/003],則 /lock/002 為最小序號節點,獲取到鎖。

整個過程如下:

具體的實現思路就是這樣,至于代碼怎么寫,這里比較復雜就不貼出來了。

Curator 介紹

Curator 是一個 ZK 的開源客戶端,也提供了分布式鎖的實現。它的使用方式也比較簡單:

  1. InterProcessMutex interProcessMutex = new InterProcessMutex(client,"/anyLock"); 
  2. interProcessMutex.acquire(); 
  3. interProcessMutex.release(); 

其實現分布式鎖的核心源碼如下:

  1. private boolean internalLockLoop(long startMillis, Long millisToWait, String ourPath) throws Exception 
  2.     boolean  haveTheLock = false
  3.     boolean  doDelete = false
  4.     try { 
  5.         if ( revocable.get() != null ) { 
  6.             client.getData().usingWatcher(revocableWatcher).forPath(ourPath); 
  7.         } 
  8.  
  9.         while ( (client.getState() == CuratorFrameworkState.STARTED) && !haveTheLock ) { 
  10.             // 獲取當前所有節點排序后的集合 
  11.             List<String>        children = getSortedChildren(); 
  12.             // 獲取當前節點的名稱 
  13.             String              sequenceNodeName = ourPath.substring(basePath.length() + 1); // +1 to include the slash 
  14.             // 判斷當前節點是否是最小的節點 
  15.             PredicateResults    predicateResults = driver.getsTheLock(client, children, sequenceNodeName, maxLeases); 
  16.             if ( predicateResults.getsTheLock() ) { 
  17.                 // 獲取到鎖 
  18.                 haveTheLock = true
  19.             } else { 
  20.                 // 沒獲取到鎖,對當前節點的上一個節點注冊一個監聽器 
  21.                 String  previousSequencePath = basePath + "/" + predicateResults.getPathToWatch(); 
  22.                 synchronized(this){ 
  23.                     Stat stat = client.checkExists().usingWatcher(watcher).forPath(previousSequencePath); 
  24.                     if ( stat != null ){ 
  25.                         if ( millisToWait != null ){ 
  26.                             millisToWait -= (System.currentTimeMillis() - startMillis); 
  27.                             startMillis = System.currentTimeMillis(); 
  28.                             if ( millisToWait <= 0 ){ 
  29.                                 doDelete = true;    // timed out - delete our node 
  30.                                 break; 
  31.                             } 
  32.                             wait(millisToWait); 
  33.                         }else
  34.                             wait(); 
  35.                         } 
  36.                     } 
  37.                 } 
  38.                 // else it may have been deleted (i.e. lock released). Try to acquire again 
  39.             } 
  40.         } 
  41.     } 
  42.     catch ( Exception e ) { 
  43.         doDelete = true
  44.         throw e; 
  45.     } finally{ 
  46.         if ( doDelete ){ 
  47.             deleteOurPath(ourPath); 
  48.         } 
  49.     } 
  50.     return haveTheLock; 

其實 Curator 實現分布式鎖的底層原理和上面分析的是差不多的。這里我們用一張圖詳細描述其原理:

小結:本節介紹了 ZK 實現分布式鎖的方案以及 ZK 的開源客戶端的基本使用,簡要的介紹了其實現原理。

兩種方案的優缺點比較

學完了兩種分布式鎖的實現方案之后,本節需要討論的是 Redis 和 ZK 的實現方案中各自的優缺點。

對于 Redis 的分布式鎖而言,它有以下缺點:

  • 它獲取鎖的方式簡單粗暴,獲取不到鎖直接不斷嘗試獲取鎖,比較消耗性能。
  • 另外來說的話,Redis 的設計定位決定了它的數據并不是強一致性的,在某些極端情況下,可能會出現問題。鎖的模型不夠健壯。
  • 即便使用 Redlock 算法來實現,在某些復雜場景下,也無法保證其實現 100% 沒有問題,關于 Redlock 的討論可以看 How to do distributed locking。
  • Redis 分布式鎖,其實需要自己不斷去嘗試獲取鎖,比較消耗性能。

但是另一方面使用 Redis 實現分布式鎖在很多企業中非常常見,而且大部分情況下都不會遇到所謂的“極端復雜場景”。

所以使用 Redis 作為分布式鎖也不失為一種好的方案,最重要的一點是 Redis 的性能很高,可以支撐高并發的獲取、釋放鎖操作。

對于 ZK 分布式鎖而言:

  • ZK 天生設計定位就是分布式協調,強一致性。鎖的模型健壯、簡單易用、適合做分布式鎖。
  • 如果獲取不到鎖,只需要添加一個監聽器就可以了,不用一直輪詢,性能消耗較小。

但是 ZK 也有其缺點:如果有較多的客戶端頻繁的申請加鎖、釋放鎖,對于 ZK 集群的壓力會比較大。

小結:綜上所述,Redis 和 ZK 都有其優缺點。我們在做技術選型的時候可以根據這些問題作為參考因素。

一些建議

通過前面的分析,實現分布式鎖的兩種常見方案:Redis 和 ZK,他們各有千秋。應該如何選型呢?

就個人而言的話,我比較推崇 ZK 實現的鎖:因為 Redis 是有可能存在隱患的,可能會導致數據不對的情況。但是,怎么選用要看具體在公司的場景了。

如果公司里面有 ZK 集群條件,優先選用 ZK 實現,但是如果說公司里面只有 Redis 集群,沒有條件搭建 ZK 集群。

那么其實用 Redis 來實現也可以,另外還可能是系統設計者考慮到了系統已經有 Redis,但是又不希望再次引入一些外部依賴的情況下,可以選用 Redis。這個是要系統設計者基于架構來考慮了。

中華石杉:十余年 BAT 架構經驗,一線互聯網公司技術總監。帶領上百人團隊開發過多個億級流量高并發系統。現將多年工作中積累下的研究手稿、經驗總結整理成文,傾囊相授。微信公眾號:石杉的架構筆記(ID:shishan100)。

 

責任編輯:武曉燕 來源: 石杉的架構筆記
相關推薦

2020-11-16 12:55:41

Redis分布式鎖Zookeeper

2020-12-15 10:20:24

分布式鎖RedisZookeeper

2021-10-25 10:21:59

ZK分布式鎖ZooKeeper

2017-10-24 11:28:23

Zookeeper分布式鎖架構

2019-06-19 15:40:06

分布式鎖RedisJava

2021-07-16 07:57:34

ZooKeeperCurator源碼

2021-02-28 07:49:28

Zookeeper分布式

2023-08-21 19:10:34

Redis分布式

2022-01-06 10:58:07

Redis數據分布式鎖

2022-07-25 06:44:19

ZooKeeper分布式鎖

2019-02-26 09:51:52

分布式鎖RedisZookeeper

2022-10-27 10:44:14

分布式Zookeeper

2022-03-04 09:54:04

Redis分布式鎖腳本

2024-04-17 08:42:15

Go語言分布式鎖

2021-07-08 09:21:17

ZooKeeper分布式鎖 Curator

2024-10-07 10:07:31

2022-09-19 08:17:09

Redis分布式

2021-06-16 07:56:21

Redis分布式

2024-04-01 05:10:00

Redis數據庫分布式鎖

2022-06-16 08:01:24

redis分布式鎖
點贊
收藏

51CTO技術棧公眾號

福利欧美精品在线| 色老头在线观看| 久久精品中文| 色噜噜狠狠狠综合曰曰曰88av| jizzzz日本| av在线看片| 91亚洲精品乱码久久久久久蜜桃| 国产91精品高潮白浆喷水| 日本二区在线观看| 欧美黄视频在线观看| 欧美日韩精品在线| 亚洲最新在线| 久久久久久久人妻无码中文字幕爆| а√天堂中文资源在线bt| 久久久精品免费观看| 国产美女精品免费电影| 久久久久久久久久综合| 国产欧美日韩免费观看| 日韩欧美一区电影| 亚洲国产精品久久久久爰色欲| 日本中文字幕在线观看| 91在线视频播放| 91精品国产综合久久香蕉922| 欧美成人aaaaⅴ片在线看| 日韩国产专区| 日韩成人中文字幕| 日本网站在线看| 国模冰冰炮一区二区| 亚洲精品乱码久久久久久久久 | av官网在线观看| 久久久久国产精品一区二区| 久久久久久久成人| 亚洲波多野结衣| 国产一区二区三区探花| 亚洲国产日韩欧美在线动漫| 亚洲天堂国产视频| 日本成人伦理电影| 激情亚洲一区二区三区四区| 中文字幕の友人北条麻妃| av在线二区| 久久精品在这里| 欧美极品一区| 午夜影院在线视频| 成人激情免费电影网址| 91传媒免费看| a网站在线观看| 美女一区二区三区在线观看| 国产99久久精品一区二区永久免费| 国产一级在线观看视频| 午夜日本精品| 欧美成人免费一级人片100| 91社区视频在线观看| 国产精伦一区二区三区| 欧美一级高清片在线观看| 中文字幕丰满乱码| 国产精品美女久久久久人| 欧美日韩国产综合久久| 国产精品久久久毛片| gogo亚洲高清大胆美女人体| 在线看日本不卡| 天天天干夜夜夜操| 欧美啪啪网站| 884aa四虎影成人精品一区| 国产日韩欧美久久| va天堂va亚洲va影视| 9191久久久久久久久久久| 色噜噜狠狠一区二区| 日韩成人综合网站| 日韩一区二区麻豆国产| 18禁一区二区三区| 加勒比中文字幕精品| 日韩av影院在线观看| 波多野结衣办公室33分钟| 一道本一区二区三区| 亚洲欧美日韩中文视频| 日本猛少妇色xxxxx免费网站| 久久不卡国产精品一区二区 | 欧美精品99久久久**| 91pony九色| 成人福利一区| 亚洲免费av网址| 亚洲国产精品一区二区久久hs| 国产精品毛片一区二区在线看| 欧美成人午夜视频| 成人免费区一区二区三区| 天堂久久一区二区三区| 成人精品一区二区三区电影免费| 国产黄色一级大片| 99国产精品国产精品毛片| 日本一区视频在线| 麻豆传媒在线完整视频| 亚洲午夜精品17c| 国产综合免费视频| 中文成人在线| 日韩黄在线观看| 欧美性生给视频| 一本色道久久综合亚洲精品不卡 | 久久的精品视频| 日韩xxx高潮hd| 美女视频黄频大全不卡视频在线播放| 91精品天堂| 国产精品久久一区二区三区不卡 | 久久国际精品| 亚洲精品中文字幕av| 看黄色录像一级片| 国产精品亚洲综合久久| 91视频免费网站| 三级做a全过程在线观看| 日韩美女视频一区二区 | 麻豆久久久久久久| 国产精品日韩一区二区免费视频| 国产精品久久久久久久龚玥菲| 亚洲最大的成人av| 性欧美1819| 欧洲亚洲成人| 欧美高清第一页| 91成品人影院| 久久久国产综合精品女国产盗摄| 大荫蒂性生交片| 欧美激情不卡| 中文精品99久久国产香蕉| 日本a在线观看| 国产一区二区三区四区五区美女 | 亚洲精品女人| 亚洲最大激情中文字幕| www.久久热.com| 欧美性猛交99久久久久99按摩| 下面一进一出好爽视频| 成人影视亚洲图片在线| 亚洲国产福利在线| 日本 欧美 国产| 日本视频中文字幕一区二区三区| 黄色91av| 国产美女精品写真福利视频| 日韩欧美成人激情| 成人高潮免费视频| 捆绑紧缚一区二区三区视频| 农村寡妇一区二区三区| 嗯~啊~轻一点视频日本在线观看| 3751色影院一区二区三区| 美女av免费看| 蜜臀av性久久久久蜜臀aⅴ四虎| 美国av一区二区三区| 狠狠操一区二区三区| 精品不卡在线视频| 欧美成欧美va| 国产黑丝在线一区二区三区| 中文字幕剧情在线观看一区| 韩国精品视频在线观看| 中文字幕国产亚洲2019| 一二三四区在线| 国产精品不卡在线| 国内自拍第二页| 欧美成人亚洲| 99在线视频免费观看| 欧美家庭影院| 亚洲精品在线观看网站| 久久久久无码国产精品不卡| 国产不卡视频一区| 亚洲精品蜜桃久久久久久| 北条麻妃一区二区三区在线观看| 欧美激情第三页| 蜜臀av中文字幕| 欧美日韩国产综合视频在线观看中文| 女同性恋一区二区三区| 国产精品久久久久9999高清| 欧美性大战久久久久| 韩日一区二区| 久久亚洲精品视频| 粉嫩av一区二区夜夜嗨| 天天影视涩香欲综合网| 午夜在线观看一区| 麻豆精品国产传媒mv男同| 热这里只有精品| 高清一区二区三区| 欧美最顶级的aⅴ艳星| 国产对白叫床清晰在线播放| 欧美裸体bbwbbwbbw| 欧美精品一级片| 久久综合色婷婷| 日韩av卡一卡二| 欧美视频一区| 欧美激情www| 国产精品视频首页| 欧美国产中文字幕| 性xxxxbbbb| 欧美三级日韩三级国产三级| 精国产品一区二区三区a片| av亚洲精华国产精华| 99草草国产熟女视频在线| 中出一区二区| 欧美日韩一区在线播放| 国产欧美视频在线| 2019最新中文字幕| 伦xxxx在线| 国产婷婷成人久久av免费高清 | 欧美大片在线观看| 无码人妻丰满熟妇奶水区码| 亚洲欧美电影院| 色一情一交一乱一区二区三区 | 亚洲区欧洲区| 亚洲人成在线电影| www.日韩高清| 在线观看一区二区视频| 久操免费在线视频| 国产精品三级在线观看| 亚洲自拍偷拍精品| 狠狠色伊人亚洲综合成人| 欧美 日韩 国产一区| 欧美日韩hd| 伊人久久大香线蕉精品| 伊人久久大香线蕉av不卡| 97碰碰视频| 国产精品第一国产精品| 91a在线视频| 自拍亚洲图区| 色偷偷综合社区| 日本a一级在线免费播放| 精品久久久网站| 国产精品视频a| 欧美性三三影院| 国产精品第5页| 亚洲国产日韩一区二区| 四虎884aa成人精品| 国产欧美久久久精品影院| 欧美xxxxx少妇| 国产精品一级片在线观看| 日韩一区二区三区久久| 天堂成人国产精品一区| 日本免费不卡一区二区| 国产主播精品| 亚洲精品少妇一区二区| 香蕉国产精品| 一区二区欧美日韩| 日韩免费久久| 日韩资源av在线| 加勒比久久综合| 欧美一区二区视频在线| 一区二区小说| 欧美极品日韩| 国产欧美日韩精品一区二区三区| 久久综合九色99| 亚洲婷婷丁香| 日本高清视频一区二区三区 | 亚洲欧美日韩国产中文| 天堂av在线资源| 日韩电影中文 亚洲精品乱码| 丰满熟女一区二区三区| 精品国产免费一区二区三区香蕉| 国产精品怡红院| 91精品国产91综合久久蜜臀| 国产模特av私拍大尺度| 日韩一区二区三区在线视频| 性生活黄色大片| 精品区一区二区| 少妇精品高潮欲妇又嫩中文字幕 | 第一次破处视频| 国产欧美一区二区精品婷婷 | 日韩一级片免费看| 精品99999| 香蕉视频免费看| 亚洲欧洲自拍偷拍| 伊人免费在线| 久热精品视频在线免费观看| 日本精品600av| 91精品国产乱码久久久久久久久| 爱情岛亚洲播放路线| 69av视频在线播放| 欧美性理论片在线观看片免费| 国产精品久久久久久亚洲影视| 99精品美女视频在线观看热舞| 成人动漫视频在线观看完整版 | 成人福利一区二区| 国产日本欧美在线观看| 日韩高清二区| 免费一区二区三区| 日韩欧美精品一区| av在线免费观看国产| 久久久噜噜噜久久狠狠50岁| 日本特黄a级片| 国产成人精品一区二| 特大黑人巨人吊xxxx| 中文字幕乱码一区二区免费| 波多野结衣不卡视频| 亚洲成人自拍网| 亚洲高清视频免费观看| 日韩三级视频在线观看| 黄色毛片在线看| 九九久久综合网站| 欧美成人免费电影| 亚洲va欧美va国产综合久久| 久久久久97| 一级全黄肉体裸体全过程| av成人黄色| 久久久久xxxx| 2023国产精品自拍| 内射一区二区三区| 亚洲妇女屁股眼交7| 在线观看毛片av| 亚洲国产精久久久久久久| 91精彩视频在线观看| 性欧美办公室18xxxxhd| 精品三级在线| 蜜桃av久久久亚洲精品| 女人香蕉久久**毛片精品| 日韩视频免费在线播放| 成人黄色a**站在线观看| 国产精品69久久久久孕妇欧美| 亚洲国产va精品久久久不卡综合| 中文字幕男人天堂| 亚洲精品国产精品自产a区红杏吧| 美女黄视频在线观看| 日本久久精品视频| 久久资源综合| 成年在线观看视频| 蜜臀av性久久久久蜜臀aⅴ流畅| 99久久免费看精品国产一区| 成人免费一区二区三区视频| 免费精品一区二区| 日韩国产高清视频在线| 黄在线免费看| 国产精品爽爽爽爽爽爽在线观看| 日韩欧美美女在线观看| 国产资源第一页| 精品亚洲免费视频| www.涩涩爱| 欧美日韩中文国产| 麻豆app在线观看| 91超碰中文字幕久久精品| aiai久久| 国产美女在线一区| 成人午夜av电影| 欧美黑吊大战白妞| 欧美一区二区三区日韩视频| 免费人成在线观看播放视频| 国产精品人成电影| 欧美色婷婷久久99精品红桃| 农村妇女精品一二区| 91香蕉视频在线| 日本一区二区三区四区五区| 欧美成人精品福利| 青春草在线视频| 成人动漫在线视频| 亚洲国产欧美国产综合一区| 精品久久久久久无码人妻| 一区二区三区中文免费| 国产夫妻在线观看| 欧美国产视频日韩| 成人知道污网站| 国产在线精品91| 99精品国产91久久久久久| 91在线视频在线观看| 亚洲美腿欧美激情另类| gogo亚洲高清大胆美女人体| 日韩欧美亚洲在线| 青青草精品视频| 精品国产大片大片大片| 91麻豆精品国产自产在线观看一区| 毛片在线不卡| 成人女人免费毛片| 国产视频一区欧美| 性少妇bbw张开| 欧美日韩精品久久久| 超碰最新在线| 国产精品久久精品视| 性xx色xx综合久久久xx| 国产jjizz一区二区三区视频| 欧美色手机在线观看| av中文字幕在线观看| 国产欧美日韩伦理| 麻豆91精品| 精品国产大片大片大片| 日韩精品一区二区三区在线播放 | 国产精品男女猛烈高潮激情| 久久看人人摘| 亚洲精品无码一区二区| 欧美日韩亚洲系列| 在线视频三区| 国产高清自拍一区| 丝瓜av网站精品一区二区| 777777国产7777777| 亚洲第一精品电影| 国产精品毛片久久久久久久久久99999999| 中文视频一区视频二区视频三区| 国产白丝网站精品污在线入口| 亚洲欧美偷拍视频| 久久久国产精品亚洲一区| 欧美日韩看看2015永久免费| 少妇一级淫免费放| 亚洲一区二区三区小说| 国产视频福利在线| 97久草视频| 美女尤物国产一区| 精品91久久久| 播播国产欧美激情| 天天久久夜夜| 天天干天天曰天天操| 色欧美片视频在线观看在线视频| 成人片在线看| 涩涩涩999|