精品欧美一区二区三区在线观看 _久久久久国色av免费观看性色_国产精品久久在线观看_亚洲第一综合网站_91精品又粗又猛又爽_小泽玛利亚一区二区免费_91亚洲精品国偷拍自产在线观看 _久久精品视频在线播放_美女精品久久久_欧美日韩国产成人在线

血淚教訓,八個線程池最佳實踐和坑

開發 前端
線程池和 ThreadLocal?共用,可能會導致線程從ThreadLocal?獲取到的是舊值/臟數據。這是因為線程池會復用線程對象,與線程對象綁定的類的靜態屬性 ThreadLocal? 變量也會被重用,這就導致一個線程可能獲取到其他線程的ThreadLocal 值。

1. 正確聲明線程池

線程池必須手動通過 ThreadPoolExecutor 的構造函數來聲明,避免使用Executors 類創建線程池,會有 OOM 風險。

Executors 返回線程池對象的弊端如下(后文會詳細介紹到):

  • FixedThreadPool 和 SingleThreadExecutor :使用的是無界的 LinkedBlockingQueue,任務隊列最大長度為 Integer.MAX_VALUE,可能堆積大量的請求,從而導致 OOM。
  • CachedThreadPool :使用的是同步隊列 SynchronousQueue, 允許創建的線程數量為 Integer.MAX_VALUE ,可能會創建大量線程,從而導致 OOM。
  • ScheduledThreadPool 和 SingleThreadScheduledExecutor : 使用的無界的延遲阻塞隊列DelayedWorkQueue,任務隊列最大長度為 Integer.MAX_VALUE,可能堆積大量的請求,從而導致 OOM。

說白了就是:使用有界隊列,控制線程創建數量。

除了避免 OOM 的原因之外,不推薦使用 Executors提供的兩種快捷的線程池的原因還有:

  • 實際使用中需要根據自己機器的性能、業務場景來手動配置線程池的參數比如核心線程數、使用的任務隊列、飽和策略等等。
  • 我們應該顯示地給我們的線程池命名,這樣有助于我們定位問題。

2. 監測線程池運行狀態

你可以通過一些手段來檢測線程池的運行狀態比如 SpringBoot 中的 Actuator 組件。

除此之外,我們還可以利用 ThreadPoolExecutor 的相關 API 做一個簡陋的監控。從下圖可以看出, ThreadPoolExecutor提供了獲取線程池當前的線程數和活躍線程數、已經執行完成的任務數、正在排隊中的任務數等等。

圖片圖片

下面是一個簡單的 Demo。printThreadPoolStatus()會每隔一秒打印出線程池的線程數、活躍線程數、完成的任務數、以及隊列中的任務數。

/**
 * 打印線程池的狀態
 *
 * @param threadPool 線程池對象
 */
public static void printThreadPoolStatus(ThreadPoolExecutor threadPool) {
    ScheduledExecutorService scheduledExecutorService = new ScheduledThreadPoolExecutor(1, createThreadFactory("print-images/thread-pool-status", false));
    scheduledExecutorService.scheduleAtFixedRate(() -> {
        log.info("=========================");
        log.info("ThreadPool Size: [{}]", threadPool.getPoolSize());
        log.info("Active Threads: {}", threadPool.getActiveCount());
        log.info("Number of Tasks : {}", threadPool.getCompletedTaskCount());
        log.info("Number of Tasks in Queue: {}", threadPool.getQueue().size());
        log.info("=========================");
    }, 0, 1, TimeUnit.SECONDS);
}

3. 建議不同類別的業務用不同的線程池

很多人在實際項目中都會有類似這樣的問題:我的項目中多個業務需要用到線程池,是為每個線程池都定義一個還是說定義一個公共的線程池呢?

一般建議是不同的業務使用不同的線程池,配置線程池的時候根據當前業務的情況對當前線程池進行配置,因為不同的業務的并發以及對資源的使用情況都不同,重心優化系統性能瓶頸相關的業務。

我們再來看一個真實的事故案例!

圖片圖片

上面的代碼可能會存在死鎖的情況,為什么呢?畫個圖給大家捋一捋。

試想這樣一種極端情況:假如我們線程池的核心線程數為 n,父任務(扣費任務)數量為 n,父任務下面有兩個子任務(扣費任務下的子任務),其中一個已經執行完成,另外一個被放在了任務隊列中。由于父任務把線程池核心線程資源用完,所以子任務因為無法獲取到線程資源無法正常執行,一直被阻塞在隊列中。父任務等待子任務執行完成,而子任務等待父任務釋放線程池資源,這也就造成了 "死鎖"

圖片圖片

解決方法也很簡單,就是新增加一個用于執行子任務的線程池專門為其服務(也就是所謂的線程隔離)。

4. 別忘記給線程池命名

初始化線程池的時候需要顯示命名(設置線程池名稱前綴),有利于定位問題。

默認情況下創建的線程名字類似 pool-1-thread-n 這樣的,沒有業務含義,不利于我們定位問題。

給線程池里的線程命名通常有下面兩種方式:

  • 利用 guava 的 ThreadFactoryBuilder
ThreadFactory threadFactory = new ThreadFactoryBuilder()
                        .setNameFormat(threadNamePrefix + "-%d")
                        .setDaemon(true).build();
ExecutorService threadPool = new ThreadPoolExecutor(corePoolSize, maximumPoolSize, keepAliveTime, TimeUnit.MINUTES, workQueue, threadFactory)
  • 自己實現 ThreadFactor
/**
 * 線程工廠,它設置線程名稱,有利于我們定位問題
 */
public final class NamingThreadFactory implements ThreadFactory {

    private final AtomicInteger threadNum = new AtomicInteger();
    private final ThreadFactory delegate;
    private final String name;

    /**
     * 創建一個帶名字的線程池生產工廠
     */
    public NamingThreadFactory(ThreadFactory delegate, String name) {
        this.delegate = delegate;
        this.name = name; // TODO consider uniquifying this
    }

    @Override
    public Thread newThread(Runnable r) {
        Thread t = delegate.newThread(r);
        t.setName(name + " [#" + threadNum.incrementAndGet() + "]");
        return t;
    }

}

5. 正確配置線程池參數

我們先來看一下各種書籍和博客上一般推薦的配置線程池參數的方式,可以作為參考!

常規操作

很多人甚至可能都會覺得把線程池配置過大一點比較好!我覺得這明顯是有問題的。就拿我們生活中非常常見的一例子來說:并不是人多就能把事情做好,增加了溝通交流成本。你本來一件事情只需要 3 個人做,你硬是拉來了 6 個人,會提升做事效率嘛?我想并不會。 線程數量過多的影響也是和我們分配多少人做事情一樣,對于多線程這個場景來說主要是增加了上下文切換成本。不清楚什么是上下文切換的話,可以看我下面的介紹。

上下文切換:

多線程編程中一般線程的個數都大于 CPU 核心的個數,而一個 CPU 核心在任意時刻只能被一個線程使用,為了讓這些線程都能得到有效執行,CPU 采取的策略是為每個線程分配時間片并輪轉的形式。當一個線程的時間片用完的時候就會重新處于就緒狀態讓給其他線程使用,這個過程就屬于一次上下文切換。概括來說就是:當前任務在執行完 CPU 時間片切換到另一個任務之前會先保存自己的狀態,以便下次再切換回這個任務時,可以再加載這個任務的狀態。任務從保存到再加載的過程就是一次上下文切換。

上下文切換通常是計算密集型的。也就是說,它需要相當可觀的處理器時間,在每秒幾十上百次的切換中,每次切換都需要納秒量級的時間。所以,上下文切換對系統來說意味著消耗大量的 CPU 時間,事實上,可能是操作系統中時間消耗最大的操作。

Linux 相比與其他操作系統(包括其他類 Unix 系統)有很多的優點,其中有一項就是,其上下文切換和模式切換的時間消耗非常少。

類比于實現世界中的人類通過合作做某件事情,我們可以肯定的一點是線程池大小設置過大或者過小都會有問題,合適的才是最好。

  • 如果我們設置的線程池數量太小的話,如果同一時間有大量任務/請求需要處理,可能會導致大量的請求/任務在任務隊列中排隊等待執行,甚至會出現任務隊列滿了之后任務/請求無法處理的情況,或者大量任務堆積在任務隊列導致 OOM。這樣很明顯是有問題的,CPU 根本沒有得到充分利用。
  • 如果我們設置線程數量太大,大量線程可能會同時在爭取 CPU 資源,這樣會導致大量的上下文切換,從而增加線程的執行時間,影響了整體執行效率。

有一個簡單并且適用面比較廣的公式:

  • CPU 密集型任務(N+1): 這種任務消耗的主要是 CPU 資源,可以將線程數設置為 N(CPU 核心數)+1。比 CPU 核心數多出來的一個線程是為了防止線程偶發的缺頁中斷,或者其它原因導致的任務暫停而帶來的影響。一旦任務暫停,CPU 就會處于空閑狀態,而在這種情況下多出來的一個線程就可以充分利用 CPU 的空閑時間。
  • I/O 密集型任務(2N): 這種任務應用起來,系統會用大部分的時間來處理 I/O 交互,而線程在處理 I/O 的時間段內不會占用 CPU 來處理,這時就可以將 CPU 交出給其它線程使用。因此在 I/O 密集型任務的應用中,我們可以多配置一些線程,具體的計算方法是 2N。

如何判斷是 CPU 密集任務還是 IO 密集任務?

CPU 密集型簡單理解就是利用 CPU 計算能力的任務比如你在內存中對大量數據進行排序。但凡涉及到網絡讀取,文件讀取這類都是 IO 密集型,這類任務的特點是 CPU 計算耗費時間相比于等待 IO 操作完成的時間來說很少,大部分時間都花在了等待 IO 操作完成上。

拓展一下:

線程數更嚴謹的計算的方法應該是:最佳線程數 = N(CPU 核心數)?(1+WT(線程等待時間)/ST(線程計算時間)),其中 WT(線程等待時間)=線程運行總時間 - ST(線程計算時間)。

線程等待時間所占比例越高,需要越多線程。線程計算時間所占比例越高,需要越少線程。

我們可以通過 JDK 自帶的工具 VisualVM 來查看 WT/ST 比例。

CPU 密集型任務的 WT/ST 接近或者等于 0,因此, 線程數可以設置為 N(CPU 核心數)?(1+0)= N,和我們上面說的 N(CPU 核心數)+1 差不多。

IO 密集型任務下,幾乎全是線程等待時間,從理論上來說,你就可以將線程數設置為 2N(按道理來說,WT/ST 的結果應該比較大,這里選擇 2N 的原因應該是為了避免創建過多線程吧)。

公示也只是參考,具體還是要根據項目實際線上運行情況來動態調整。我在后面介紹的美團的線程池參數動態配置這種方案就非常不錯,很實用!

動態線程池

美團技術團隊在**《Java 線程池實現原理及其在美團業務中的實踐》這篇文章中介紹到對線程池參數實現可自定義配置的思路和方法。

美團技術團隊的思路是主要對線程池的核心參數實現自定義可配置。這三個核心參數是:

  • corePoolSize : 核心線程數線程數定義了最小可以同時運行的線程數量。
  • maximumPoolSize : 當隊列中存放的任務達到隊列容量的時候,當前可以同時運行的線程數量變為最大線程數。
  • workQueue: 當新任務來的時候會先判斷當前運行的線程數量是否達到核心線程數,如果達到的話,新任務就會被存放在隊列中。

為什么是這三個參數?

如何支持參數動態配置? 且看 ThreadPoolExecutor 提供的下面這些方法。

圖片圖片

格外需要注意的是corePoolSize, 程序運行期間的時候,我們調用 setCorePoolSize()這個方法的話,線程池會首先判斷當前工作線程數是否大于corePoolSize,如果大于的話就會回收工作線程。

另外,你也看到了上面并沒有動態指定隊列長度的方法,美團的方式是自定義了一個叫做 ResizableCapacityLinkedBlockIngQueue 的隊列(主要就是把LinkedBlockingQueue的 capacity 字段的 final 關鍵字修飾給去掉了,讓它變為可變的)。

最終實現的可動態修改線程池參數效果如下

動態配置線程池參數最終效果動態配置線程池參數最終效果

如果我們的項目也想要實現這種效果的話,可以借助現成的開源項目:

  • Hippo-4 :一款強大的動態線程池框架,解決了傳統線程池使用存在的一些痛點比如線程池參數沒辦法動態修改、不支持運行時變量的傳遞、無法執行優雅關閉。除了支持動態修改線程池參數、線程池任務傳遞上下文,還支持通知報警、運行監控等開箱即用的功能。
  • Dynamic TP :輕量級動態線程池,內置監控告警功能,集成三方中間件線程池管理,基于主流配置中心(已支持 Nacos、Apollo,Zookeeper、Consul、Etcd,可通過 SPI 自定義實現)。

6. 線程池使用的一些小坑

重復創建線程池的坑

線程池是可以復用的,一定不要頻繁創建線程池比如一個用戶請求到了就單獨創建一個線程池。

@GetMapping("wrong")
public String wrong() throws InterruptedException {
    // 自定義線程池
    ThreadPoolExecutor executor = new ThreadPoolExecutor(5,10,1L,TimeUnit.SECONDS,new ArrayBlockingQueue<>(100),new ThreadPoolExecutor.CallerRunsPolicy());

    //  處理任務
    executor.execute(() -> {
      // ......
    }
    return "OK";
}

出現這種問題的原因還是對于線程池認識不夠,需要加強線程池的基礎知識。

Spring 內部線程池的坑

使用 Spring 內部線程池時,一定要手動自定義線程池,配置合理的參數,不然會出現生產問題(一個請求創建一個線程)。

@Configuration
@EnableAsync
public class ThreadPoolExecutorConfig {

    @Bean(name="threadPoolExecutor")
    public Executor threadPoolExecutor(){
        ThreadPoolTaskExecutor threadPoolExecutor = new ThreadPoolTaskExecutor();
        int processNum = Runtime.getRuntime().availableProcessors(); // 返回可用處理器的Java虛擬機的數量
        int corePoolSize = (int) (processNum / (1 - 0.2));
        int maxPoolSize = (int) (processNum / (1 - 0.5));
        threadPoolExecutor.setCorePoolSize(corePoolSize); // 核心池大小
        threadPoolExecutor.setMaxPoolSize(maxPoolSize); // 最大線程數
        threadPoolExecutor.setQueueCapacity(maxPoolSize * 1000); // 隊列程度
        threadPoolExecutor.setThreadPriority(Thread.MAX_PRIORITY);
        threadPoolExecutor.setDaemon(false);
        threadPoolExecutor.setKeepAliveSeconds(300);// 線程空閑時間
        threadPoolExecutor.setThreadNamePrefix("test-Executor-"); // 線程名字前綴
        return threadPoolExecutor;
    }
}

線程池和 ThreadLocal 共用的坑

線程池和 ThreadLocal共用,可能會導致線程從ThreadLocal獲取到的是舊值/臟數據。這是因為線程池會復用線程對象,與線程對象綁定的類的靜態屬性 ThreadLocal 變量也會被重用,這就導致一個線程可能獲取到其他線程的ThreadLocal 值。

不要以為代碼中沒有顯示使用線程池就不存在線程池了,像常用的 Web 服務器 Tomcat 處理任務為了提高并發量,就使用到了線程池,并且使用的是基于原生 Java 線程池改進完善得到的自定義線程池。

當然了,你可以將 Tomcat 設置為單線程處理任務。不過,這并不合適,會嚴重影響其處理任務的速度。

server.tomcat.max-threads = 1

解決上述問題比較建議的辦法是使用阿里巴巴開源的 TransmittableThreadLocal(TTL)。TransmittableThreadLocal類繼承并加強了 JDK 內置的InheritableThreadLocal類,在使用線程池等會池化復用線程的執行組件情況下,提供ThreadLocal值的傳遞功能,解決異步執行時上下文傳遞的問題。

責任編輯:武曉燕 來源: JAVA日知錄
相關推薦

2024-08-26 08:29:55

2025-09-05 07:28:34

2025-06-06 02:00:00

2019-01-15 10:29:48

物聯網IOTIT

2023-08-03 00:06:21

2011-01-13 15:37:25

vSphere備份

2024-12-06 10:46:03

2015-09-17 09:01:26

創業智能硬件

2022-03-23 14:46:28

安全IT網絡安全

2024-08-09 13:49:56

2023-03-02 12:11:21

2023-07-31 10:56:20

2023-05-15 08:24:46

2023-05-23 14:39:06

2009-12-09 10:16:42

ibmdwSOA

2023-09-12 14:03:44

2012-12-20 10:32:18

云時代云端集成開發環境云開發

2022-08-16 08:27:20

線程毀線程異步

2020-07-07 10:38:11

首席信息官IT領導者經驗教訓

2024-08-08 19:09:51

點贊
收藏

51CTO技術棧公眾號

久久99精品久久久久久园产越南| 国产18精品乱码免费看| 激情五月综合网| 欧美日韩激情一区| 国产成人一区二区三区别| 五月婷婷丁香花| 三级不卡在线观看| 精品亚洲va在线va天堂资源站| 国产一级不卡视频| 欧美色综合一区二区三区| 日韩激情在线观看| 欧美激情乱人伦| www成人啪啪18软件| 风间由美中文字幕在线看视频国产欧美 | 国产成人精品免费看视频| 99成人精品| 久久精品国产综合| 右手影院亚洲欧美 | 欧美老女人xx| 高清国产在线观看| 99re91这里只有精品| 欧美伊人久久大香线蕉综合69| 午夜精品美女久久久久av福利| 超碰在线观看91| 亚洲国产日韩欧美一区二区三区| 亚洲第一免费网站| 国产探花在线观看视频| 宅男网站在线免费观看| 国产色产综合产在线视频| 国产亚洲精品美女久久久m| 欧美人禽zoz0强交| 五月天久久狠狠| 欧美精品精品精品精品免费| 国产真实乱人偷精品| 日本免费成人| 亚洲欧美一区二区三区极速播放| 91最新国产视频| 中文字幕在线日本| 欧美亚洲在线| 国内精品久久久久久影视8| 日本福利片在线观看| 成人免费a**址| 亚洲欧美日韩中文在线制服| 91九色蝌蚪porny| 国产免费不卡| 精品日本美女福利在线观看| 国产在线xxxx| 丝袜美腿av在线| 一区二区三区欧美激情| 国产高清免费在线| 黄网站app在线观看| 国产精品久99| 日日噜噜夜夜狠狠久久丁香五月| 亚洲国产成人一区二区| 免费中文字幕日韩欧美| 97在线看福利| 久久久精品免费看| 欧美中文日韩| 国产精品成人aaaaa网站| 成人午夜视频在线播放| 丝袜美腿一区二区三区| 国产精品v日韩精品| 欧美日韩 一区二区三区| 日本亚洲天堂网| 成人免费看片视频| www.av网站| 99久久精品免费看| 欧美成人一区二区在线| 国产视频福利在线| 国产精品初高中害羞小美女文| 国偷自产av一区二区三区小尤奈| 中文字幕人妻丝袜乱一区三区| 极品少妇一区二区三区| 98精品国产自产在线观看| 黄色片中文字幕| 美女一区二区视频| 欧美亚洲在线视频| 69精品久久久| 久久精品免费| 成人激情免费在线| 搡老岳熟女国产熟妇| 久久久亚洲精品一区二区三区| 国产乱人伦精品一区二区| 天堂a√中文在线| 国产精品国产三级国产三级人妇 | 亚洲精品无码国产| 国内高清免费在线视频| 91久久一区二区| 四虎国产精品永久免费观看视频| 不卡一区视频| 日韩成人激情在线| 一本色道久久88| 亚洲黄网站黄| 国产精品一区电影| 性欧美一区二区三区| 久久久久99精品一区| 裸体裸乳免费看| 中文字幕在线免费观看视频| 欧美精品aⅴ在线视频| 香港三级日本三级| 婷婷激情图片久久| 日本精品久久中文字幕佐佐木| 91国产丝袜播放在线| 蜜臂av日日欢夜夜爽一区| 大波视频国产精品久久| 在线观看免费黄视频| 国产精品乱码人人做人人爱 | 精品理论电影| 欧美激情国产精品| 亚洲天堂中文字幕在线| 99久久99久久免费精品蜜臀| 91制片厂免费观看| 日韩不卡免费高清视频| 精品国产乱码久久久久久蜜臀| 亚洲AV成人精品| 三区四区不卡| 国产成人在线一区| 手机看片福利永久| 国产亚洲污的网站| 青草青青在线视频| 日本在线视频一区二区三区| 在线国产精品播放| www.av麻豆| 成人精品视频一区二区三区| 400部精品国偷自产在线观看| free性欧美16hd| 欧美一区二区免费| 青青青视频在线播放| 丝袜亚洲另类丝袜在线| 免费观看成人在线| 深夜成人在线| 亚洲精品suv精品一区二区| 永久免费看黄网站| 国产麻豆成人精品| 中国一级黄色录像| 高清一区二区三区av| 亚洲激情 国产| 久久午夜无码鲁丝片午夜精品| 亚洲激情影院| 国产高清精品一区| 国产免费av高清在线| 欧美午夜影院在线视频| 国产原创精品在线| 国产另类在线| 午夜精品福利视频| 一区二区国产欧美| 国产精品不卡在线| 日韩av影视大全| 欧美成熟视频| 大波视频国产精品久久| av资源新版天堂在线| 亚洲国产高清高潮精品美女| 日韩久久久久久久久| 蜜桃视频一区二区| 精品不卡一区二区三区| 黄在线观看免费网站ktv| 亚洲第一av在线| 美女又爽又黄免费视频| 国产视频视频一区| 日韩欧美亚洲另类| 欧美日本一区二区视频在线观看 | 国产精品黄色大片| 26uuu精品一区二区| av动漫免费看| 久久国产小视频| 亚洲xxxx视频| 国产直播在线| 中文在线资源观看视频网站免费不卡 | 四季av一区二区三区| 99久久精品网| 亚洲最大的免费| av电影在线免费| 国产香蕉一区二区三区在线视频| 久久精品国产亚洲AV无码男同| 日韩成人dvd| 综合色婷婷一区二区亚洲欧美国产| a天堂资源在线| 亚洲男人天堂网站| 88av在线视频| 亚洲午夜精品在线| 黄色性生活一级片| 美女网站一区二区| 日韩三级在线播放| 91精品国产色综合久久不卡粉嫩| 一区二区三区久久精品| 亚洲天堂中文在线| 性久久久久久久久久久久| 谁有免费的黄色网址| 国内精品写真在线观看| 日日碰狠狠添天天爽超碰97| 操欧美老女人| 国产精品日韩欧美一区二区| av影视在线| 中文字幕最新精品| 亚洲欧美激情另类| 欧美色手机在线观看| 日本特黄一级片| 国产精品国产三级国产aⅴ中文| 天天干天天干天天干天天干天天干| 亚洲另类av| 日本道色综合久久影院| 欧美一区二区视频| 日韩一区二区在线免费观看| 无码免费一区二区三区| 亚洲中国最大av网站| 日韩av网站在线播放| 99精品在线观看视频| 99精品在线免费视频| 91精品国产麻豆国产在线观看| 亚洲淫片在线视频| 最新日韩三级| 5278欧美一区二区三区| 亚洲综合影视| 久久黄色av网站| 黄色在线观看网| 日韩不卡在线观看| 中文字幕a级片| 欧美日韩黄色大片| 国产真实乱人偷精品视频| 中文字幕中文字幕在线一区 | 国产精品无码电影在线观看| 国产欧美日韩精品一区二区三区| 国产精品偷伦免费视频观看的| 免费av在线| 在线亚洲欧美视频| 人成在线免费视频| 日韩av在线网址| 神马午夜在线观看| 欧美一区三区二区| 91超薄丝袜肉丝一区二区| 欧美在线观看一区| 99热精品免费| 18成人在线视频| 欧美风情第一页| 国产精品白丝在线| 国精品人伦一区二区三区蜜桃| 成人一道本在线| 欧美日韩一区二区区别是什么| 免费久久99精品国产自在现线| 一区二区三区|亚洲午夜| 国产午夜一区| 日韩一本精品| 不卡日本视频| 爱爱爱视频网站| 性欧美lx╳lx╳| 久久久久一区二区| 国产精品巨作av| 久久精品国产美女| 国产一区二区三区视频在线| 成人日韩av在线| 国产视频一区二区在线播放| 成人性生交大片免费看小说| 黑人另类精品××××性爽| 久久久久久18| 国产夫妻在线播放| 国产91色在线| 精品123区| 77777少妇光屁股久久一区| 交100部在线观看| 人体精品一二三区| 成人av影院在线观看| 隔壁老王国产在线精品| 日韩伦理精品| 国产精品久久久久久久app| www.久久.com| 亚洲在线免费视频| 国产精品chinese在线观看| 91免费综合在线| 99ri日韩精品视频| 亚洲资源在线看| 国产一区二区三区亚洲| 蜜桃视频在线观看成人| av一区二区高清| 欧美亚洲另类在线一区二区三区 | 欧美日韩精品免费观看| 精品日本12videosex| 韩国一区二区三区美女美女秀| 国产不卡精品在线| 波多野结衣一区二区三区在线观看| 日韩综合av| 国产激情一区二区三区在线观看 | 欧美疯狂性受xxxxx另类| 久久国产精品亚洲va麻豆| 精品国产午夜福利在线观看| 精品精品导航| 亚洲国产精品女人久久久| 国产乱淫a∨片免费观看| 在线观看欧美日本| 亚洲免费在线观看av| 欧美综合一区二区三区| 国产日韩免费视频| 3d成人h动漫网站入口| 亚洲无码久久久久久久| 精品噜噜噜噜久久久久久久久试看| 99久久精品国产一区二区成人| 欧美精品一二三四| 日韩中文字幕免费观看| 这里只有精品丝袜| a天堂资源在线| 91精品在线播放| 九九综合在线| 久久手机在线视频| 老司机精品视频在线| 中文字幕 亚洲一区| 亚洲色图丝袜美腿| 秋霞av一区二区三区| 日韩免费成人网| 97超碰人人在线| 欧美一级免费看| 91精品久久久久久综合五月天| 不卡一卡2卡3卡4卡精品在| 99国产精品免费网站| 一区二区三区不卡在线| 国产欧美不卡| 在线观看你懂的视频| 中文字幕第一区| 欧美国产成人精品一区二区三区| 在线免费观看日本一区| 刘亦菲久久免费一区二区| 国产视频精品久久久| 中文在线字幕免费观看| 国产综合在线观看视频| 成人午夜av| 欧美两根一起进3p做受视频| www.久久久久久久久| 九九热国产精品视频| 欧美一区二区三区性视频| 黑人精品一区二区| 欧美乱大交xxxxx| 99精品女人在线观看免费视频| 国产伦精品一区二区三区高清版 | 国产成人女人毛片视频在线| 日韩欧美午夜| 网站一区二区三区| 久久精品亚洲国产奇米99| 色播视频在线播放| 精品视频一区二区不卡| 韩日视频在线| 日韩免费中文字幕| 亚洲都市激情| 国产成人久久777777| 久久久精品中文字幕麻豆发布| 波多野结衣亚洲一区二区| 欧美乱妇15p| 国产秀色在线www免费观看| 成人动漫网站在线观看| 国产精品精品国产一区二区| 男人添女人下面高潮视频| 精品一区二区三区香蕉蜜桃| 2017亚洲天堂| 欧美精品aⅴ在线视频| 黄a在线观看| 91精品国产99久久久久久红楼| 欧美人妖在线| 黄色片在线免费| 国产精品久久久久久久久动漫| 成人免费区一区二区三区| 亚洲国产高清自拍| 456亚洲精品成人影院| 亚洲va久久久噜噜噜久久狠狠| 日韩一区二区久久| 在线观看av中文字幕| 色综合久久中文字幕| 国产视频二区在线观看| 成人福利在线视频| 精品久久久久久久久久久aⅴ| 国产老熟妇精品观看| 91麻豆精品在线观看| 欧美亚洲另类小说| 色av中文字幕一区| 日本久久伊人| 国产精品宾馆在线精品酒店| 国产喷白浆一区二区三区| 国产又粗又猛又爽又黄视频| 色综合视频网站| 亚洲电影男人天堂| 日韩高清第一页| 亚洲一区二区av在线| 99久久精品日本一区二区免费| 在线看日韩欧美| 日本在线视频一区二区三区| 在线观看免费91| 成人精品电影在线观看| 欧美日韩成人免费观看| 日韩av在线播放资源| 日韩第二十一页| 欧美黑人经典片免费观看| 国产欧美日韩中文久久| wwwav网站| 国产精品va在线播放| 黄色亚洲精品| 国产视频123区| 亚洲精品电影网在线观看| 国产三级一区| 欧美综合在线播放| 亚洲欧洲美洲综合色网| 国产精品系列视频| 久久精品国产精品亚洲| 欧美黑人巨大videos精品| 中文字幕无码精品亚洲35|