精品欧美一区二区三区在线观看 _久久久久国色av免费观看性色_国产精品久久在线观看_亚洲第一综合网站_91精品又粗又猛又爽_小泽玛利亚一区二区免费_91亚洲精品国偷拍自产在线观看 _久久精品视频在线播放_美女精品久久久_欧美日韩国产成人在线

分布式之抉擇分布式鎖——多個(gè)方位比較

存儲(chǔ) 存儲(chǔ)軟件 分布式 分布式
無論是redis還是zookpeer,其實(shí)可靠性都存在一點(diǎn)問題。但是,zookpeer的分布式鎖的可靠性比redis強(qiáng)太多!但是,zookpeer讀寫性能不如redis,存在著性能瓶頸。大家在生產(chǎn)上使用,可自行進(jìn)行評(píng)估使用。

 引言

為什么寫這篇文章?

目前網(wǎng)上大部分的基于zookeeper,和redis的分布式鎖的文章都不夠全面。要么就是特意避開集群的情況,要么就是考慮不全,讀者看著還是一臉迷茫。坦白說,這種老題材,很難寫出新創(chuàng)意,博主內(nèi)心戰(zhàn)戰(zhàn)兢兢,如履薄冰,文中有什么不嚴(yán)謹(jǐn)之處,歡迎批評(píng)。

博主的這篇文章,不上代碼,只講分析。

(1)在redis方面,有開源redisson的jar包供你使用。
(2)在zookeeper方面,有開源的curator的jar包供你使用

因?yàn)橐呀?jīng)有開源jar包供你使用,沒有必要再去自己封裝一個(gè),大家出門百度一個(gè)api即可,不需要再羅列一堆實(shí)現(xiàn)代碼。

需要說明的是,Google有一個(gè)名為Chubby的粗粒度分布鎖的服務(wù),然而,Google Chubby并不是開源的,我們只能通過其論文和其他相關(guān)的文檔中了解具體的細(xì)節(jié)。值得慶幸的是,Yahoo!借鑒Chubby的設(shè)計(jì)思想開發(fā)了zookeeper,并將其開源,因此本文不討論Chubby。至于Tair,是阿里開源的一個(gè)分布式K-V存儲(chǔ)方案。我們?cè)诠ぷ髦谢旧蟫edis使用的比較多,討論Tair所實(shí)現(xiàn)的分布式鎖,不具有代表性。

因此,主要分析的還是redis和zookeeper所實(shí)現(xiàn)的分布式鎖。

[[236745]]

文章結(jié)構(gòu)

本文借鑒了兩篇國外大神的文章,redis的作者antirez的《

Is Redlock safe?

》以及分布式系統(tǒng)專家Martin的《

How to do distributed locking

》,再加上自己微薄的見解從而形成這篇文章,文章的目錄結(jié)構(gòu)如下:

(1)為什么使用分布式鎖
(2)單機(jī)情形比較
(3)集群情形比較
(4)鎖的其他特性比較

正文

先上結(jié)論:

zookeeper可靠性比redis強(qiáng)太多,只是效率低了點(diǎn),如果并發(fā)量不是特別大,追求可靠性,***zookeeper。為了效率,則***redis實(shí)現(xiàn)。

為什么使用分布式鎖?


使用分布式鎖的目的,無外乎就是保證同一時(shí)間只有一個(gè)客戶端可以對(duì)共享資源進(jìn)行操作。

但是Martin指出,根據(jù)鎖的用途還可以細(xì)分為以下兩類:

(1)允許多個(gè)客戶端操作共享資源
這種情況下,對(duì)共享資源的操作一定是冪等性操作,無論你操作多少次都不會(huì)出現(xiàn)不同結(jié)果。在這里使用鎖,無外乎就是為了避免重復(fù)操作共享資源從而提高效率。
(2)只允許一個(gè)客戶端操作共享資源
這種情況下,對(duì)共享資源的操作一般是非冪等性操作。在這種情況下,如果出現(xiàn)多個(gè)客戶端操作共享資源,就可能意味著數(shù)據(jù)不一致,數(shù)據(jù)丟失。

***回合,單機(jī)情形比較

(1)redis
先說加鎖,根據(jù)redis官網(wǎng)文檔的描述,使用下面的命令加鎖

SET resource_name my_random_value NX PX 30000

  • my_random_value是由客戶端生成的一個(gè)隨機(jī)字符串,相當(dāng)于是客戶端持有鎖的標(biāo)志
  • NX表示只有當(dāng)resource_name對(duì)應(yīng)的key值不存在的時(shí)候才能SET成功,相當(dāng)于只有***個(gè)請(qǐng)求的客戶端才能獲得鎖
  • PX 30000表示這個(gè)鎖有一個(gè)30秒的自動(dòng)過期時(shí)間。

至于解鎖,為了防止客戶端1獲得的鎖,被客戶端2給釋放,采用下面的Lua腳本來釋放鎖

  1. if redis.call("get",KEYS[1]) == ARGV[1] then 
  2. return redis.call("del",KEYS[1]) 
  3. else 
  4. return 0 

在執(zhí)行這段LUA腳本的時(shí)候,KEYS[1]的值為resource_name,ARGV[1]的值為my_random_value。原理就是先獲取鎖對(duì)應(yīng)的value值,保證和客戶端穿進(jìn)去的my_random_value值相等,這樣就能避免自己的鎖被其他人釋放。另外,采取Lua腳本操作保證了原子性.如果不是原子性操作,則有了下述情況出現(xiàn):

分析:這套redis加解鎖機(jī)制看起來很***,然而有一個(gè)無法避免的硬傷,就是過期時(shí)間如何設(shè)置。如果客戶端在操作共享資源的過程中,因?yàn)殚L期阻塞的原因,導(dǎo)致鎖過期,那么接下來訪問共享資源就不安全。

可是,有的人會(huì)說

    那可以在客戶端操作完共享資源后,判斷鎖是否依然歸該客戶端所有,如果依然歸客戶端所有,則提交資源,釋放鎖。若不歸客戶端所有,則不提交資源啊!

OK,這么做,只能降低多個(gè)客戶端操作共享資源發(fā)生的概率,并不能解決問題。

為了方便讀者理解,博主舉一個(gè)業(yè)務(wù)場景。

業(yè)務(wù)場景:我們有一個(gè)內(nèi)容修改頁面,為了避免出現(xiàn)多個(gè)客戶端修改同一個(gè)頁面的請(qǐng)求,采用分布式鎖。只有獲得鎖的客戶端,才能修改頁面。那么正常修改一次頁面的流程如下圖所示:

注意看,上面的步驟(3)-->步驟(4.1)并不是原子性操作。也就說,你可能出現(xiàn)在步驟(3)的時(shí)候返回的是有效這個(gè)標(biāo)志位,但是在傳輸過程中,因?yàn)檠訒r(shí)等原因,在步驟(4.1)的時(shí)候,鎖已經(jīng)超時(shí)失效了。那么,這個(gè)時(shí)候鎖就會(huì)被另一個(gè)客戶端鎖獲得。就出現(xiàn)了兩個(gè)客戶端共同操作共享資源的情況。

大家可以思考一下,無論你如何采用任何補(bǔ)償手段,你都只能降低多個(gè)客戶端操作共享資源的概率,而無法避免。例如,你在步驟(4.1)的時(shí)候也可能發(fā)生長時(shí)間GC停頓,然后在停頓的時(shí)候,鎖超時(shí)失效,從而鎖也有可能被其他客戶端獲得。這些大家可以自行思考推敲。

(2)zookeeper


先簡單說下原理,根據(jù)網(wǎng)上文檔描述,zookeeper的分布式鎖原理是利用了臨時(shí)節(jié)點(diǎn)(EPHEMERAL)的特性。

  • 當(dāng)znode被聲明為EPHEMERAL的后,如果創(chuàng)建znode的那個(gè)客戶端崩潰了,那么相應(yīng)的znode會(huì)被自動(dòng)刪除。這樣就避免了設(shè)置過期時(shí)間的問題。
  • 客戶端嘗試創(chuàng)建一個(gè)znode節(jié)點(diǎn),比如/lock。那么***個(gè)客戶端就創(chuàng)建成功了,相當(dāng)于拿到了鎖;而其它的客戶端會(huì)創(chuàng)建失敗(znode已存在),獲取鎖失敗。

分析:這種情況下,雖然避免了設(shè)置了有效時(shí)間問題,然而還是有可能出現(xiàn)多個(gè)客戶端操作共享資源的。

大家應(yīng)該知道,zookeeper如果長時(shí)間檢測不到客戶端的心跳的時(shí)候(Session時(shí)間),就會(huì)認(rèn)為Session過期了,那么這個(gè)Session所創(chuàng)建的所有的ephemeral類型的znode節(jié)點(diǎn)都會(huì)被自動(dòng)刪除。

這種時(shí)候會(huì)有如下情形出現(xiàn)

如上圖所示,客戶端1發(fā)生GC停頓的時(shí)候,zookeeper檢測不到心跳,也是有可能出現(xiàn)多個(gè)客戶端同時(shí)操作共享資源的情形。當(dāng)然,你可以說,我們可以通過JVM調(diào)優(yōu),避免GC停頓出現(xiàn)。但是注意了,我們所做的一切,只能盡可能避免多個(gè)客戶端操作共享資源,無法完全消除。

第二回合,集群情形比較

我們?cè)谏a(chǎn)中,一般都是用集群情形,所以***回合討論的單機(jī)情形。算是給大家熱熱身。

(1)redis

為了redis的高可用,一般都會(huì)給redis的節(jié)點(diǎn)掛一個(gè)slave,然后采用哨兵模式進(jìn)行主備切換。但由于Redis的主從復(fù)制(replication)是異步的,這可能會(huì)出現(xiàn)在數(shù)據(jù)同步過程中,master宕機(jī),slave來不及同步數(shù)據(jù)就被選為master,從而數(shù)據(jù)丟失。具體流程如下所示:

    (1)客戶端1從Master獲取了鎖。
    (2)Master宕機(jī)了,存儲(chǔ)鎖的key還沒有來得及同步到Slave上。
    (3)Slave升級(jí)為Master。
    (4)客戶端2從新的Master獲取到了對(duì)應(yīng)同一個(gè)資源的鎖。

為了應(yīng)對(duì)這個(gè)情形, redis的作者antirez提出了RedLock算法,步驟如下(該流程出自官方文檔),假設(shè)我們有N個(gè)master節(jié)點(diǎn)(官方文檔里將N設(shè)置成5,其實(shí)大等于3就行)

    (1)獲取當(dāng)前時(shí)間(單位是毫秒)。
    (2)輪流用相同的key和隨機(jī)值在N個(gè)節(jié)點(diǎn)上請(qǐng)求鎖,在這一步里,客戶端在每個(gè)master上請(qǐng)求鎖時(shí),會(huì)有一個(gè)和總的鎖釋放時(shí)間相比小的多的超時(shí)時(shí)間。比如如果鎖自動(dòng)釋放時(shí)間是10秒鐘,那每個(gè)節(jié)點(diǎn)鎖請(qǐng)求的超時(shí)時(shí)間可能是5-50毫秒的范圍,這個(gè)可以防止一個(gè)客戶端在某個(gè)宕掉的master節(jié)點(diǎn)上阻塞過長時(shí)間,如果一個(gè)master節(jié)點(diǎn)不可用了,我們應(yīng)該盡快嘗試下一個(gè)master節(jié)點(diǎn)。
    (3)客戶端計(jì)算第二步中獲取鎖所花的時(shí)間,只有當(dāng)客戶端在大多數(shù)master節(jié)點(diǎn)上成功獲取了鎖(在這里是3個(gè)),而且總共消耗的時(shí)間不超過鎖釋放時(shí)間,這個(gè)鎖就認(rèn)為是獲取成功了。
    (4)如果鎖獲取成功了,那現(xiàn)在鎖自動(dòng)釋放時(shí)間就是最初的鎖釋放時(shí)間減去之前獲取鎖所消耗的時(shí)間。
    (5)如果鎖獲取失敗了,不管是因?yàn)楂@取成功的鎖不超過一半(N/2+1)還是因?yàn)榭傁臅r(shí)間超過了鎖釋放時(shí)間,客戶端都會(huì)到每個(gè)master節(jié)點(diǎn)上釋放鎖,即便是那些他認(rèn)為沒有獲取成功的鎖。

分析:RedLock算法細(xì)想一下還存在下面的問題:

節(jié)點(diǎn)崩潰重啟,會(huì)出現(xiàn)多個(gè)客戶端持有鎖

假設(shè)一共有5個(gè)Redis節(jié)點(diǎn):A, B, C, D, E。設(shè)想發(fā)生了如下的事件序列:

(1)客戶端1成功鎖住了A, B, C,獲取鎖成功(但D和E沒有鎖住)。
(2)節(jié)點(diǎn)C崩潰重啟了,但客戶端1在C上加的鎖沒有持久化下來,丟失了。
(3)節(jié)點(diǎn)C重啟后,客戶端2鎖住了C, D, E,獲取鎖成功。
這樣,客戶端1和客戶端2同時(shí)獲得了鎖(針對(duì)同一資源)。

為了應(yīng)對(duì)節(jié)點(diǎn)重啟引發(fā)的鎖失效問題,redis的作者antirez提出了延遲重啟的概念,即一個(gè)節(jié)點(diǎn)崩潰后,先不立即重啟它,而是等待一段時(shí)間再重啟,等待的時(shí)間大于鎖的有效時(shí)間。采用這種方式,這個(gè)節(jié)點(diǎn)在重啟前所參與的鎖都會(huì)過期,它在重啟后就不會(huì)對(duì)現(xiàn)有的鎖造成影響。這其實(shí)也是通過人為補(bǔ)償措施,降低不一致發(fā)生的概率。

時(shí)間跳躍問題

(1)假設(shè)一共有5個(gè)Redis節(jié)點(diǎn):A, B, C, D, E。設(shè)想發(fā)生了如下的事件序列:
(2)客戶端1從Redis節(jié)點(diǎn)A, B, C成功獲取了鎖(多數(shù)節(jié)點(diǎn))。由于網(wǎng)絡(luò)問題,與D和E通信失敗。
(3)節(jié)點(diǎn)C上的時(shí)鐘發(fā)生了向前跳躍,導(dǎo)致它上面維護(hù)的鎖快速過期。
客戶端2從Redis節(jié)點(diǎn)C, D, E成功獲取了同一個(gè)資源的鎖(多數(shù)節(jié)點(diǎn))。
客戶端1和客戶端2現(xiàn)在都認(rèn)為自己持有了鎖。

為了應(yīng)對(duì)始終跳躍引發(fā)的鎖失效問題,redis的作者antirez提出了應(yīng)該禁止人為修改系統(tǒng)時(shí)間,使用一個(gè)不會(huì)進(jìn)行“跳躍”式調(diào)整系統(tǒng)時(shí)鐘的ntpd程序。這也是通過人為補(bǔ)償措施,降低不一致發(fā)生的概率。

超時(shí)導(dǎo)致鎖失效問題

RedLock算法并沒有解決,操作共享資源超時(shí),導(dǎo)致鎖失效的問題。回憶一下RedLock算法的過程,如下圖所示:

如圖所示,我們將其分為上下兩個(gè)部分。對(duì)于上半部分框圖里的步驟來說,無論因?yàn)槭裁丛虬l(fā)生了延遲,RedLock算法都能處理,客戶端不會(huì)拿到一個(gè)它認(rèn)為有效,實(shí)際卻失效的鎖。然而,對(duì)于下半部分框圖里的步驟來說,如果發(fā)生了延遲導(dǎo)致鎖失效,都有可能使得客戶端2拿到鎖。因此,RedLock算法并沒有解決該問題。

(2)zookeeper


zookeeper在集群部署中,zookeeper節(jié)點(diǎn)數(shù)量一般是奇數(shù),且一定大等于3。我們先回憶一下,zookeeper的寫數(shù)據(jù)的原理。

如圖所示,這張圖懶得畫,直接搬其他文章的了。

那么寫數(shù)據(jù)流程步驟如下:

1.在Client向Follwer發(fā)出一個(gè)寫的請(qǐng)求
2.Follwer把請(qǐng)求發(fā)送給Leader
3.Leader接收到以后開始發(fā)起投票并通知Follwer進(jìn)行投票
4.Follwer把投票結(jié)果發(fā)送給Leader,只要半數(shù)以上返回了ACK信息,就認(rèn)為通過
5.Leader將結(jié)果匯總后如果需要寫入,則開始寫入同時(shí)把寫入操作通知給Leader,然后commit;
6.Follwer把請(qǐng)求結(jié)果返回給Client

還有一點(diǎn),zookeeper采取的是全局串行化操作。

OK,現(xiàn)在開始分析。

集群同步

client給Follwer寫數(shù)據(jù),可是Follwer卻宕機(jī)了,會(huì)出現(xiàn)數(shù)據(jù)不一致問題么?不可能,這種時(shí)候,client建立節(jié)點(diǎn)失敗,根本獲取不到鎖。
client給Follwer寫數(shù)據(jù),F(xiàn)ollwer將請(qǐng)求轉(zhuǎn)發(fā)給Leader,Leader宕機(jī)了,會(huì)出現(xiàn)不一致的問題么?不可能,這種時(shí)候,zookeeper會(huì)選取新的leader,繼續(xù)上面的提到的寫流程。

總之,采用zookeeper作為分布式鎖,你要么就獲取不到鎖,一旦獲取到了,必定節(jié)點(diǎn)的數(shù)據(jù)是一致的,不會(huì)出現(xiàn)redis那種異步同步導(dǎo)致數(shù)據(jù)丟失的問題。

時(shí)間跳躍問題

不依賴全局時(shí)間,怎么會(huì)存在這種問題

超時(shí)導(dǎo)致鎖失效問題

不依賴有效時(shí)間,怎么會(huì)存在這種問題

第三回合,鎖的其他特性比較

(1)redis的讀寫性能比zookeeper強(qiáng)太多,如果在高并發(fā)場景中,使用zookeeper作為分布式鎖,那么會(huì)出現(xiàn)獲取鎖失敗的情況,存在性能瓶頸。
(2)zookeeper可以實(shí)現(xiàn)讀寫鎖,redis不行。
(3)zookeeper的watch機(jī)制,客戶端試圖創(chuàng)建znode的時(shí)候,發(fā)現(xiàn)它已經(jīng)存在了,這時(shí)候創(chuàng)建失敗,那么進(jìn)入一種等待狀態(tài),當(dāng)znode節(jié)點(diǎn)被刪除的時(shí)候,zookeeper通過watch機(jī)制通知它,這樣它就可以繼續(xù)完成創(chuàng)建操作(獲取鎖)。這可以讓分布式鎖在客戶端用起來就像一個(gè)本地的鎖一樣:加鎖失敗就阻塞住,直到獲取到鎖為止。這套機(jī)制,redis無法實(shí)現(xiàn)。

總結(jié)

OK,正文啰嗦了一大堆。其實(shí)只是想表明兩個(gè)觀點(diǎn),無論是redis還是zookeeper,其實(shí)可靠性都存在一點(diǎn)問題。但是,zookeeper的分布式鎖的可靠性比redis強(qiáng)太多!但是,zookeeper讀寫性能不如redis,存在著性能瓶頸。大家在生產(chǎn)上使用,可自行進(jìn)行評(píng)估使用。

責(zé)任編輯:武曉燕 來源: 博客園
相關(guān)推薦

2019-06-19 15:40:06

分布式鎖RedisJava

2021-07-16 07:57:34

ZooKeeperCurator源碼

2019-02-26 09:51:52

分布式鎖RedisZookeeper

2022-08-04 08:45:50

Redisson分布式鎖工具

2019-10-10 09:16:34

Zookeeper架構(gòu)分布式

2017-09-01 05:35:58

分布式計(jì)算存儲(chǔ)

2023-05-29 14:07:00

Zuul網(wǎng)關(guān)系統(tǒng)

2021-07-02 08:51:09

Redisson分布式鎖公平鎖

2021-06-30 14:56:12

Redisson分布式公平鎖

2018-11-27 16:17:13

分布式Tomcat

2021-11-26 06:43:19

Java分布式

2023-09-22 08:00:00

分布式鎖Redis

2022-01-06 10:58:07

Redis數(shù)據(jù)分布式鎖

2021-10-25 10:21:59

ZK分布式鎖ZooKeeper

2023-08-21 19:10:34

Redis分布式

2017-10-24 11:28:23

Zookeeper分布式鎖架構(gòu)

2023-01-13 07:39:07

2024-11-28 15:11:28

2025-07-30 09:34:04

2017-10-27 08:40:44

分布式存儲(chǔ)剪枝系統(tǒng)
點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號(hào)

里番在线播放| 亚洲黄色在线观看视频| 99久久亚洲精品蜜臀| 日韩亚洲欧美在线| 妺妺窝人体色www在线小说| 国产一区二区影视| 福利一区福利二区| 国产精品高潮呻吟久久av野狼 | 国产精品久久久久一区二区三区| 999国内精品视频在线| 中文字幕第四页| 自拍偷拍欧美专区| 亚洲午夜女主播在线直播| 性xxxxxxxxx| 国产精品久久久久77777丨| 调教+趴+乳夹+国产+精品| 亚洲欧美日韩不卡| 美国成人毛片| www.亚洲精品| 91在线观看免费网站| 成年人av网站| 一区二区三区高清视频在线观看| 欧美成人精品在线视频| 久久国产柳州莫菁门| 老司机精品视频在线播放| 91精品国产日韩91久久久久久| 18岁视频在线观看| 男人久久天堂| 亚洲成a人在线观看| 伊人久久99| 国产一级片在线播放| 91色.com| 精品亚洲一区二区三区四区五区高| aaa一区二区三区| 麻豆精品新av中文字幕| 国产精品1区2区在线观看| 天天操天天摸天天干| 亚洲性图久久| 欧美激情在线有限公司| 成人亚洲一区二区| 888久久久| 亚洲美女av黄| 国产91免费观看| 欧美国产精品一二三| 第一会所亚洲原创| 一道本无吗dⅴd在线播放一区| 97人妻天天摸天天爽天天| www.国产精品一区| 亚洲第一精品久久忘忧草社区| 一级片黄色免费| 久久久久久久性潮| 欧美日韩国产片| 中文字幕永久有效| 久久久久伊人| 7777精品伊人久久久大香线蕉最新版 | 国产成人无码精品久久久性色| 久久久久黄久久免费漫画| 一区二区三区四区蜜桃| 艳母动漫在线观看| 欧美xxx黑人xxx水蜜桃| 亚洲一二三四久久| 成年人网站免费视频| 九色porny丨国产首页在线| 黄色精品在线看| 久久久免费视频网站| gogo亚洲高清大胆美女人体| 欧美婷婷六月丁香综合色| 男人添女人下面免费视频| 先锋影音网一区二区| 91精品国产入口| 日本国产在线视频| 国产传媒欧美日韩成人精品大片| 尤物yw午夜国产精品视频| www成人啪啪18软件| 亚洲综合小说| 97超碰国产精品女人人人爽| 91视频在线视频| 久88久久88久久久| 国产日韩欧美一区二区三区四区 | 中文字幕免费精品一区高清| 又嫩又硬又黄又爽的视频| 在线看片不卡| 欧美一区二区三区精品电影| 波多野结衣一区二区三区在线| 久99久精品视频免费观看| 国产精品欧美久久| 大片免费播放在线视频| 亚洲视频一区二区免费在线观看| 国产乱淫av片杨贵妃| 粉嫩一区二区三区| 91精品久久久久久蜜臀| v天堂中文在线| 欧洲杯半决赛直播| 欧美激情精品久久久久| 四虎影院在线免费播放| 国产一区二区不卡老阿姨| 免费久久99精品国产自| 成人无遮挡免费网站视频在线观看| 午夜精品福利一区二区蜜股av| wwww.国产| 久久精品亚洲成在人线av网址| 中文字幕国产精品久久| 日韩欧美亚洲视频| 国内一区二区在线| 欧美成熟毛茸茸复古| a视频在线免费看| 色欲综合视频天天天| 中文字幕乱码在线人视频| 久久99影视| 久久久免费高清电视剧观看| 超碰在线97观看| 97se狠狠狠综合亚洲狠狠| 国产又爽又黄ai换脸| 日韩影片中文字幕| 亚洲第一级黄色片| 久草国产在线观看| 激情久久五月天| 欧美专区一二三| 高清毛片在线观看| 91精品国产色综合久久不卡电影| 91l九色lporny| 国产精品一二| 国产一区二区高清视频| 黄色网在线看| 欧美色图天堂网| v8888av| 国产日韩欧美| 国产有色视频色综合| 91三级在线| 欧美精品丝袜久久久中文字幕| 色婷婷在线影院| 亚洲影视综合| 国产在线一区二区三区播放| 伊人福利在线| 欧美一级高清片| 日本成人免费在线观看 | 91久久高清国语自产拍| 国产精品久久久久9999| 免费理论片在线观看播放老| 亚洲成在人线免费| 最新国产精品自拍| 欧美在线二区| av一本久道久久波多野结衣| av中文字幕在线播放| 91精品久久久久久久91蜜桃| 亚洲色图欧美色| 日本女人一区二区三区| 四虎永久国产精品| 国产日本久久| 久久综合九色九九| 国产国语亲子伦亲子| 亚洲精品视频自拍| 999热精品视频| 99精品网站| 成人欧美一区二区三区在线观看| 欧美亚洲天堂| 亚洲精品一线二线三线无人区| 久久精品第一页| 成人av网站在线| 99爱视频在线| 欧美少妇性xxxx| 91精品免费视频| 天天色天天射天天综合网| 精品国产一区二区三区久久久蜜月 | 亚洲福利视频三区| 最近中文字幕无免费| 久久久久久婷| 91xxx视频| 粉嫩久久久久久久极品| 97超碰国产精品女人人人爽| 国产精品无码2021在线观看| 欧美乱妇15p| 国产一级片久久| 91啪亚洲精品| 日韩精品你懂的| 一区二区影院| 久久本道综合色狠狠五月| 香蕉成人av| 久久精品成人动漫| 三级视频在线看| 欧美日韩精品一区二区三区蜜桃| www.色小姐com| 久久色在线视频| 中文字幕成人免费视频| 亚洲青色在线| 一区二区三区四区国产| eeuss鲁片一区二区三区| 国产精品久久97| 怡红院av在线| 中文字幕日韩在线播放| 亚洲第一页在线观看| 91成人国产精品| 欧美成人精品欧美一级私黄| 久久久精品国产免费观看同学| 天堂网成人在线| 美女久久网站| 日韩美女爱爱视频| 99久久www免费| 精品久久久久久综合日本| 青青青国产精品| 国产成人97精品免费看片| caoporn免费在线| 最近免费中文字幕视频2019| 狠狠综合久久av一区二区| 欧美日韩在线直播| 青草视频在线观看免费| 亚洲一线二线三线视频| ass极品国模人体欣赏| 99re视频精品| 欧美体内she精高潮| 日日欢夜夜爽一区| 男人添女人下面高潮视频| 欧美激情综合色综合啪啪| 天堂av一区二区| 欧美欧美黄在线二区| 国产视频精品网| 看亚洲a级一级毛片| 国产久一一精品| 亚洲a∨精品一区二区三区导航| 欧美激情中文字幕乱码免费| 黄色网址在线免费播放| 自拍偷拍亚洲区| 国产人成在线观看| 国产丝袜视频一区| 欧美一区二区三区激情| 日韩精品最新网址| 国产精品久久久久久久久毛片| 日本久久电影网| 毛片在线免费视频| 精品国产91久久久久久老师| 妺妺窝人体色www婷婷| 亚洲欧美aⅴ...| 蜜桃视频最新网址| 国产精品伦一区| 激情高潮到大叫狂喷水| 欧美国产精品一区二区三区| 在线观看日本中文字幕| 国产欧美一区视频| 夫妇露脸对白88av| 国产精品毛片久久久久久久| 国产成人免费观看网站| 国产精品看片你懂得| 东京热无码av男人的天堂| 中文在线一区二区| 欧美福利在线视频| 国产精品色在线观看| 国产三级aaa| 亚洲激情第一区| 久草视频中文在线| 亚洲成人精品影院| 91精品国产乱码在线观看| 欧美日韩国产在线看| 国产九色在线播放九色| 日本韩国精品一区二区在线观看| 成人毛片在线播放| 欧美在线免费视屏| 国产精品视频第一页| 91精品国产综合久久久蜜臀粉嫩 | 国产a亚洲精品| 成人动漫网站在线观看| 香蕉成人app| 国产一区免费观看| 国内精品久久久久久99蜜桃| 一道精品一区二区三区| 欧美jizzhd精品欧美巨大免费| 日韩欧美不卡在线| 亚洲欧美大片| 色啦啦av综合| 国产成人综合精品三级| 亚洲欧美日本一区| 国产欧美一区二区三区在线看蜜臀 | 女同性恋一区二区三区| 久久久久久毛片| 永久免费未视频| 亚洲成人精品一区| 尤物视频免费观看| 日韩欧美的一区二区| 四虎影视2018在线播放alocalhost| 国产一区二区黑人欧美xxxx| 在线中文字幕第一页| 欧美自拍视频在线观看| 四虎国产精品免费久久| 国产美女99p| 成人免费在线观看av| 精品人妻人人做人人爽| 媚黑女一区二区| 香蕉视频xxxx| 国产欧美精品一区二区色综合朱莉| 一级黄色片日本| 欧美日韩国产限制| 136福利视频导航| 日韩精品免费一线在线观看| 午夜伦理在线| 69久久夜色精品国产69| 999色成人| 日本在线播放一区| 在线欧美亚洲| 激情图片中文字幕| 91麻豆产精品久久久久久| 中文字幕av久久爽av| 在线观看日韩电影| 人妻与黑人一区二区三区| 最近中文字幕2019免费| 亚洲精品88| 国产精品一区二区三区不卡| 99久久精品费精品国产风间由美| 国产午夜福利视频在线观看| 国产精品一区一区| 色www亚洲国产阿娇yao| 色悠久久久久综合欧美99| 成人乱码一区二区三区 | 亚洲国产精品嫩草影院久久| 激情影院在线观看| 国产福利视频一区| 网曝91综合精品门事件在线| 黄色特一级视频| 精品无人码麻豆乱码1区2区| 中文字幕在线观看免费高清| 好吊成人免视频| 亚洲AV无码国产精品午夜字幕 | 日韩电影毛片| 国产高清在线一区| 一本一道久久a久久精品蜜桃 | 国产成人免费看| 日韩欧美不卡在线观看视频| 毛片网站在线免费观看| 国产美女扒开尿口久久久| 欧美色女视频| 成年人在线观看视频免费| 久久人人爽爽爽人久久久| 青青国产在线观看| 国产视频亚洲视频| a级大胆欧美人体大胆666| 国产精品免费视频一区二区| 国产一区日韩欧美| 折磨小男生性器羞耻的故事| 亚洲自拍与偷拍| 亚洲高清精品视频| 欧美精品video| 97精品久久| 霍思燕三级露全乳照| av网站免费线看精品| 日韩欧美一级视频| 精品小视频在线| 成人av观看| 香蕉久久夜色| 久久国产福利国产秒拍| 久久久99999| 91精品国产综合久久久久久| 最新av在线播放| 成人片在线免费看| 国产亚洲成人一区| 一区二区精品免费| 9191成人精品久久| 青草青在线视频| 精品一区二区三区国产| 日韩电影免费在线观看网站| 在线观看日本黄色| 日韩一区国产二区欧美三区| 久草在线新免费首页资源站| 精品乱码一区二区三区| 六月丁香综合| 手机免费观看av| 日韩一级免费一区| 一二三四视频在线中文| 亚洲精品在线免费| 国产一区二区三区黄视频| 国产午夜福利精品| 亚洲人成电影网站色…| 91嫩草国产线观看亚洲一区二区| av动漫在线免费观看| 91麻豆福利精品推荐| 亚洲天堂久久久久| 国内精品400部情侣激情| 国产99久久精品一区二区300| 在线能看的av网站| 亚洲午夜久久久久中文字幕久| 国际av在线| 成人黄色片视频网站| 天使萌一区二区三区免费观看| 婷婷国产成人精品视频| 欧美xxxx老人做受| 亚洲精品粉嫩美女一区| 久久人妻无码一区二区| 久久网这里都是精品| 国产黄a三级三级三级| 欧美在线国产精品| 亚洲男女av一区二区| 性久久久久久久久久| 欧美一级黄色片| 久久野战av| www精品久久| 中文字幕亚洲在| 日本不卡视频一区二区| 亚洲最大av网站| 美女一区二区视频| 亚洲国产成人精品激情在线| 久久精品在线视频| 国产探花一区在线观看| 成人午夜精品无码区|