精品欧美一区二区三区在线观看 _久久久久国色av免费观看性色_国产精品久久在线观看_亚洲第一综合网站_91精品又粗又猛又爽_小泽玛利亚一区二区免费_91亚洲精品国偷拍自产在线观看 _久久精品视频在线播放_美女精品久久久_欧美日韩国产成人在线

Android發(fā)熱監(jiān)控實踐

移動開發(fā) Android
在此也只是粗略介紹當前已經做的針對發(fā)熱治理的一些初步工作,以及對未來發(fā)熱功耗相關開展的思路,希望能讓 App 帶來更好的體驗,給用戶帶來更對美好事物的向往的感受。?

一、背景

相信移動端高度普及的現在,大家或多或少都會存在電量焦慮,擁有過手機發(fā)熱發(fā)燙的糟糕體驗。而發(fā)熱問題是一個長時間、多場景的指標存在,且涉及到端側應用層、手機 ROM 廠商系統(tǒng)、外界環(huán)境等多方面的影響。如何有效衡量發(fā)熱場景、定位發(fā)熱現場、以及歸因發(fā)熱問題成為了端側應用層發(fā)熱監(jiān)控的面前的三座大山。本文通過得物 Android 端側現有的一些監(jiān)控實踐,不深入功耗計算場景無法自拔,優(yōu)先聚焦于發(fā)熱場景本身,希望能給大家一些參考。

二、發(fā)熱定義

溫度是最直觀能反映發(fā)熱問題的指標,當前 Android 側,我們以體感溫度 37° 以上作為分界線,向上每 3° 作為一個發(fā)熱溫度區(qū)間,區(qū)間細分上限溫度 49° ,即劃分出 37-40,40-43,43-46,46-49,49+ 五個等級。

以手機溫度、CPU 使用率作為第一、第二要素來判斷用戶是否發(fā)熱的同時,獲取其他參數來支撐發(fā)熱現場情況。

具體指標如下:

手機溫度 CPU 使用率、GPU 使用率;

線程堆棧;

系統(tǒng)服務使用頻次;

設備前后臺、亮滅屏時長;

電量、充電情況;

熱緩解發(fā)熱等級;

系統(tǒng)機型、版本;

....

三、指標獲取

溫度

  • 電池溫度系統(tǒng) BatteryManger 已經提供了一系列自帶的接口和粘性廣播獲取電池信息。BatteryManager.EXTRA_TEMPERATURE 廣播,獲取的溫度值是攝氏度為單位的 10 倍數值。
//獲取電池溫度BatteryManager.EXTRA_TEMPERATURE,華氏溫度需要除以10
fun getBatteryTempImmediately(context: Context): Float {
    return try {
        val batIntent = getBatteryStickyIntent(context) ?: return 0f
        batIntent.getIntExtra(BatteryManager.EXTRA_TEMPERATURE, 0) / 10F
    } catch (e: Exception) {
        0f
    }
}


private fun getBatteryStickyIntent(context: Context): Intent? {
    return try {
        context.registerReceiver(null, IntentFilter(Intent.ACTION_BATTERY_CHANGED))
    } catch (e: Exception) {
        null
    }
}

BatteryManager 除支持電池溫度的系統(tǒng)廣播外,也包含電量、充電狀態(tài)等額外信息的讀取,均定義在其源碼中。

以下羅列幾個值得關注的:
//BATTERY_PROPERTY_CHARGE_COUNTER 剩余電池容量,單位為微安時
//BATTERY_PROPERTY_CURRENT_NOW 瞬時電池電流,單位為微安
//BATTERY_PROPERTY_CURRENT_AVERAGE 平均電池電流,單位為微安
//BATTERY_PROPERTY_CAPACITY 剩余電池容量,顯示為整數百分比
//BATTERY_PROPERTY_ENERGY_COUNTER 剩余能量,單位為納瓦時
// EXTRA_BATTERY_LOW  是否認為電量低
// EXTRA_HEALTH  電量健康常量的常數
// EXTRA_LEVEL  電量值
// EXTRA_VOLTAGE 電壓
// ACTION_CHARGING   進入充電狀態(tài)
// ACTION_DISCHARGING  進入放電狀態(tài)
  • 傳感器溫度Android是基于Linux 基礎上修改的開源操作系統(tǒng),同樣的在手機系統(tǒng)sys/class/thermal/ 目錄下存在以 thermal_zoneX 為代表各傳感器的溫度分區(qū),以及 cooling_deviceX 為代表風扇或散熱器等冷卻設備。以一加 9 為例,共存在 105 個溫度傳感器 or 溫度分區(qū),以及 48 個冷卻設備。

每個溫度分區(qū)下記錄下具體的參數類型,我們重點關注的是 type 文件和 temp 文件,分別記錄了該傳感器設備的名稱,以及當前的傳感器溫度。以 thermal_zone29 為例,代表了 CPU 第一核心的 第五處理單元的溫度值為 33.2 攝氏度。而對單一設備來說分區(qū)對應的名稱是固定的,從而我們可以通過讀取 thermal_zone 文件的方式來記錄當前第一個 type 文件名稱包含 CPU 的傳感器作為 CPU 溫度。

圖片圖片

  • 殼溫Android 10 Google 官方推出了熱緩解框架,通過 HAL2.0 框架監(jiān)聽底層硬件傳感器(主要為 USB 傳感器、Skin 傳感器)提供 USB、殼溫的熱信號等級變更監(jiān)聽, 系統(tǒng) PowerManager 源碼提供了對應發(fā)熱等級變更的回調和發(fā)熱等級的獲取,共 7 個等級,提供給開發(fā)者主動或被動獲取。

圖片圖片

final PowerManager powerManager = (PowerManager) mContext.getSystemService(Context.POWER_SERVICE);
powerManager.addThermalStatusListener(new PowerManager.OnThermalStatusChangedListener() {
    @Override
    public void onThermalStatusChanged(int status) {
       //返回對應的熱狀態(tài)
    }
});

但對于發(fā)熱等級來說,殼溫無疑是最為能夠反應手機的發(fā)熱情況的。可以看到 Android 系統(tǒng)的 API 實際上是提供了 AIDL 接口,可以直接注冊 Thermal 變更事件的監(jiān)聽,獲取到 Temperature 對象。但由于標識了 Hide API 。常規(guī)應用層是無法獲取到的,在考慮好 Android 版本兼容性前提下,通過反射代理 ThermalManagerService 方式進行讀取。

圖片圖片

但事與愿違,國內廠商并沒有完全適配官方熱緩解框架,熱狀態(tài)回調時常不夠準確,而是需要單獨接入每個廠商的熱緩解 SDK 去直接獲取到殼溫,具體 API 則以各應用廠商的內部接入文檔為準。

CPU使用率

CPU 使用率的采集通過讀取解析 Proc stat 文件的方式進行計算。

在系統(tǒng) proc/[pid]/stat  和  /proc/[pid]/task/[tid]/stat  分別記錄了對應進程 ID、進程 ID 下的線程 ID 的 CPU 信息。具體的字段描述在此不進行贅述,詳見:https://man7.org/linux/man-pages/man5/procfs.5.html。

圖片圖片

我們重點關注 14.15 位的信息,分別代表進程/線程的用戶態(tài)運行的時間和內核態(tài)運行的時間。

圖片圖片

通過解析當前進程的 Stat 文件,以及 Task 目錄下所有線程的 Stat 文件,在兩次采樣周期內(當前設置為 1s)的 utime+stime 之和的差值/采樣間隔,即可認為是進線程的 CPU 的使用率。即 進線程 CPU 使用率 = ((utime+stime)-(lastutime+laststime)) / period

GPU使用率

高通芯片的設備,我們可以參考 /sys/class/kgsl/kgsl-3d0/gpubusy 下文件內容,參考高通官網的說明。

GPU 的使用率 = (下圖)數值 1 / 數值 2 * 100,經過驗證與 SnapDragonProfiler 信息采集獲取的數值基本一致。

聯發(fā)科芯片的設備,我們可以直接通過讀取 /d/ged/hal/gpu_utilization 下的使用率數值。

同樣的通過指定周期(每秒 1 次)的采樣間隔,即可獲取到每秒的當前 GPU 使用率。

系統(tǒng)服務使用

Android 系統(tǒng)服務包括 Warelock、Alarm、Sensor、Wifi、Net、Location、Bluetooth、Camera等。

與市面上常規(guī)的監(jiān)控手段差異不大,都是通過系統(tǒng) Hook ServiceManager 的方式,監(jiān)聽系統(tǒng)服務的 Binder 通信,匹配對應的調用方法名,做對應中間層監(jiān)控的回調記錄處理。

熟悉 Android 開發(fā)的同學知道 Android 的 Zygote 進程是 Android 系統(tǒng)啟動時的第一個進程。在 Zygote Fork 進程中會孵化出系統(tǒng)服務相關的進程 SystemServer,在其核心的 RUN 方法中,會注冊啟動大量的系統(tǒng)服務,并通過 ServiceManager 進行管理。

圖片

故我們可以通過反射代理 ServiceManager 的方式,以 LocationManager 為例進行監(jiān)聽,攔截對應 LocationManager 內對應的方法,記錄我們期望獲取的數據。

// 獲取 ServiceManager 的 Class 對象
Class<?> serviceManagerClass = Class.forName("android.os.ServiceManager");
// 獲取 getService 方法
Method getServiceMethod = serviceManagerClass.getDeclaredMethod("getService", String.class);
// 通過反射調用 getService 方法獲取原始的 IBinder 對象
IBinder originalBinder = (IBinder) getServiceMethod.invoke(null, "location");
// 創(chuàng)建一個代理對象 Proxy
Class<?> iLocationManagerStubClass = Class.forName("android.location.ILocationManager$Stub");
Method asInterfaceMethod = iLocationManagerStubClass.getDeclaredMethod("asInterface", IBinder.class);
final Object originalLocationManager = asInterfaceMethod.invoke(null, originalBinder);
Object proxyLocationManager = Proxy.newProxyInstance(context.getClassLoader(),
        new Class[]{Class.forName("android.location.ILocationManager")},
        new InvocationHandler() {
            @Override
            public Object invoke(Object proxy, Method method, Object[] args) throws Throwable {
                // 在這里進行方法的攔截和處理
                Log.d("LocationManagerProxy", "Intercepted method: " + method.getName());
                // 執(zhí)行原始的方法
                return method.invoke(originalLocationManager, args);
            }
        });
// 替換原始的 IBinder 對象
getServiceMethod.invoke(null, "location", proxyLocationManager);

同理 我們獲取在固定采樣周期內 各系統(tǒng)服務對應 申請次數、計算間隔時長等進行記錄。

源碼 Power_profile 文件中定義了每個系統(tǒng)服務狀態(tài)下的電流量定義。

我們在需要記錄每個元器件在不同狀態(tài)的工作時間之后,通過以下計算方式,可以得出元器件的發(fā)熱貢獻排行,即:

元器件 電量消耗(發(fā)熱貢獻)  ~~  電流量 * 運行時長 * 電壓(一般為固定值,可忽略)

圖片圖片

線程堆棧

由于發(fā)熱問題是一個綜合性的問題,并不像 Crash 問題一樣,在發(fā)生現場我們就可以知道是哪個線程觸發(fā)的。如果將所有線程的堆棧都進行 Dump 記錄的話,得物當前運行時的子線程數量在 200+,全部進行存儲的話無疑是不合理的。問題就轉變?yōu)?如何較為準確的找到發(fā)熱代碼的線程堆棧?

上文說到 在計算 CPU 使用率的時讀取進程下所有線程的 Stat 文件,我們可以獲取到子線程的 CPU 使用率,對其使用率進行倒排,篩選超過閾值(當前定義 50% ) 或 占用 Top N 的線程進行存儲。由于堆棧頻繁采集時機上是有性能折損的,故犧牲了部分的堆棧采樣精度和準確性,在溫度、CPU 使用率等指標超過閾值定義后,才開始采集 指定下發(fā)時間的堆棧信息。

我們還要明確一個概念,線程 Stat 文件的文件名即為線程標識名,Thread.id 是指線程ID。

其兩者并不等價,但 Native 方法中給我們提供了對應的方式去建立兩者的映射關系。

在 Art  Thread.cc 方法中,將 Java 中的 Thread 對象轉換成 C++ 中的 Thread 對象,調用 ShortDump 打印線程的相關信息,我們通過字符串匹配到核心的 Tid= 的信息,即可獲取到線程的 Tid。

核心代碼邏輯如下:

//獲取隊列中最近一次cpu采樣的數據
 val threadCpuUsageData = cpuProfileStoreQueue.last().threadUsageDataList
       val hotStacks = mutableListOf<HotStack>()
        if (threadCpuUsageData != null) {
            val dataCount = if (threadCpuUsageData.size <= TOP_THREAD_COUNT) {
                threadCpuUsageData.size
            } else {
                TOP_THREAD_COUNT
            }
            val traces: MutableMap<Thread, Array<StackTraceElement>> = Thread.getAllStackTraces()
            //定義tid 和 thread的映射關系map
            val tidMap: MutableMap<String, Thread> = mutableMapOf()
            traces.keys.forEach { thread ->
                //調用native方法獲取到tid信息
                val tidInfo = hotMonitorListener?.findTidInfoByThread(thread)
                tidInfo?.let {
                    findTidByTidInfo(tidInfo).let { tid ->
                        if (tid.isNotEmpty()) {
                            tidMap[tid] = thread
                        }
                    }
                }
            }
            //采集topN的發(fā)熱堆棧
            for (index in 1..dataCount) {
                val singleThreadData = threadCpuUsageData[index - 1]
                val isMainThread = singleThreadData.pid == singleThreadData.tid
                val thread = tidMap[singleThreadData.tid.toString()]
                thread?.let { findThread ->
                    traces[findThread]?.let { findStackTrace ->
                        //獲取當前的線程堆棧
                        val sb = StringBuilder()
                        for (element in findStackTrace) {
                            sb.append(element.toString()).append("\n")
                        }
                        sb.append("\n")
                        if (findStackTrace.isNotEmpty()) {
                            //是否為主線程
                            //組裝hotStack
                            val hotStack = HotStack(
                                //進程id
                                singleThreadData.pid,
                                singleThreadData.tid,
                                singleThreadData.name,
                                singleThreadData.cpuUseRate,
                                sb.toString(),
                                thread.state
                                isMainThread
                            )
//                        Log.d("HotMonitor", sb.toString())
                            hotStacks.add(hotStack)
                        }
                    }
                }


            }
        }

四、監(jiān)控方案

了解核心指標數據是如何獲取的前提下,其實監(jiān)控方案的核心思路無非就是通過遠端 APM 配置中心下發(fā)的采樣閾值、采樣周期、各模塊數據開關等限定采樣配置,子線程 Handler 定時發(fā)消息,采集各個模塊的數據進行組裝,在合適的時機進行數據上報即可,具體的數據拆解、分析工作則由發(fā)熱平臺進一步處理。

模塊整體架構

圖片圖片

上報時機

圖片圖片

核心采集流程

圖片圖片

線上線下區(qū)分

由于所有子線程的 CPU 采集、堆棧采集實際上是會對性能有折損的,200+ 的線程的讀取耗時整體在 200ms 左右,采樣子線程的 CPU 使用率在 10%,考慮到線上用戶體驗問題,并不能全量開啟高頻率采樣。

圖片圖片

圖片圖片

故整體方案來說: 線下場景以重點側重發(fā)現、排查、治理全量問題,上報全量日志,以 CPU、GPU 使用率為第一衡量指標;

線上場景以重點側重觀察整體發(fā)熱大盤趨勢、分析潛在問題場景,上報核心日志,以電池溫度為第一衡量指標。

發(fā)熱平臺

在平臺側同學的支持下,發(fā)熱現場數據經過平臺側進行消費,將核心的發(fā)熱堆棧經過 Android 堆棧反混淆服務進行聚合,補齊充電狀態(tài)、主線程 CPU 使用率、問題類型、電池溫度等基礎字段,平臺側就具備發(fā)現、分析、解決的流程化監(jiān)控推進的能力。

具體的堆棧信息 & 發(fā)熱信息平臺展示如下:

圖片圖片

圖片圖片

由于電池溫度、CPU 使用率是針對運行時發(fā)熱場景最直觀的指標,且我們一期重點關注發(fā)熱場景的治理,不針對元器件 Hook 等耗電場景進行持續(xù)深入分析,故當前得物側是以電池溫度、CPU 使用率為第一第二指標  建立核心的發(fā)熱問題四象限,優(yōu)先關注高溫、高 CPU 的問題場景。

圖片圖片

在數據分析過程中,我們遇到了數據上的效率排查效率不夠高、問題精度不夠準的情況。

  • 如何定位是高溫場景是發(fā)生在 App 內部,且在使用過程中明顯上升的? 通過過濾從啟動開始即高溫、后臺切換回來即高溫的場景,重點關注在 App 內部溫度上升的場景。
  • 線上的采樣后仍舊單日有 6w+ 數據的上報,我們如何篩選出更為核心的數據?當前的做法是定義了溫度跨度的概念,優(yōu)先看在 App 內部溫度跨度較大的 Case。
  • 線程存在調用 Wait 等方法阻塞的堆棧,消耗內核態(tài)的時間分配,但實際不消耗整體 CPU 的誤報數據。補充了線程的運行狀態(tài)和 Proc 文件中記錄的 State,方便優(yōu)先處理 RUNNABLE線程的 CPU 高溫高占用問題。
  • 手機溫度上升作為漸進式的場景,如何實現溫度上升場景下的頁面精確歸因?增加溫度采樣頻率的同時,匯總 CPU 使用率和實時堆棧等瞬時數據作為數據支撐,但考慮到數據體量的情況,數據上報聚合裁剪方式仍在逐步探索更為合理的方式,力求在兩者之間找到一個平衡點。

圖片圖片

圖片圖片

五、收益

Android 端側發(fā)熱監(jiān)控自上線以來,背靠平臺側的支撐,陸續(xù)發(fā)現了一些問題并聯合開發(fā)同學做了對應場景的治理優(yōu)化工作,如:

耗時獨立線程任務 接入統(tǒng)一線程池調度管理;

動畫執(zhí)行死循環(huán)監(jiān)測修復;

高 IO 場景的文件讀寫策略優(yōu)化;

高并發(fā)任務鎖粒度優(yōu)化;

日志庫等 Json 解析頻繁場景 采用效率更高的序列化方;

系統(tǒng)相機等系統(tǒng)功率過高的采集參數設備分級嘗試;

基于 Webgl 的游戲場景 幀率降低和資源及時回收優(yōu)化運行時內存;

....

這無疑給未來體驗工作的場景技術選型、技術實現沉淀了一些有價值的經驗,符合對 App 體驗追求極致的高標準、高要求。

六、未來展望

手機發(fā)熱作為漸進式的體驗場景,涉及手機硬件、系統(tǒng)服務、軟件使用、外界環(huán)境多方位因素。對于端側的排查上來說,當前優(yōu)先級聚焦于應用層的不合理使用上,對于排查工具鏈路增強、問題業(yè)務歸因、低電量、低功耗模式下的動態(tài)策略降低、自動化診斷報告等環(huán)節(jié)仍舊有很多值得深入挖掘的點,例如:

監(jiān)控/工具增強

  • App 浮層分析工具 (CPU\GPU/頻率/溫度/功耗等信息)
  • 借鑒 BatteryHistorian、SnapdragonProfiler、Systrace 等工具,實現自研TeslaLab 能力增強。

業(yè)務歸因

  • 發(fā)熱堆棧自動分配
  • 調用溯源歸因精細化

場景策略、降級

  • CPU 調頻、動態(tài)幀率、分辨率降級
  • 端內低功耗模式探索

自動化診斷報告

  • 單用戶定向自動化分析輸出診斷報告

七、總結

在此也只是粗略介紹當前已經做的針對發(fā)熱治理的一些初步工作,以及對未來發(fā)熱功耗相關開展的思路,希望能讓 App 帶來更好的體驗,給用戶帶來更對美好事物的向往的感受。


責任編輯:武曉燕 來源: 得物技術
相關推薦

2021-09-14 23:50:17

Sentry后端監(jiān)控

2021-03-11 14:33:28

Kubernetes開源容器

2022-09-26 08:25:56

監(jiān)控平臺微服務

2023-07-24 09:03:38

汽車之家頁面性能監(jiān)控

2022-03-01 18:27:18

云原生日志監(jiān)控

2017-09-12 10:50:55

前端SDK開發(fā)

2022-06-28 13:25:19

K8sPrometheusGrafana

2023-08-24 07:46:21

服務器JVM

2022-12-29 08:56:30

監(jiān)控服務平臺

2025-03-05 07:00:00

Grafana可視化Kubernetes

2025-09-28 01:44:00

Airflow運維監(jiān)控

2021-11-26 13:43:01

服務器虛擬化數據中心

2021-08-04 09:38:00

Socket Trac網絡監(jiān)控阿里云

2019-05-16 09:00:06

云原生監(jiān)控日志管理

2021-08-02 13:00:45

網絡監(jiān)控Socket

2019-07-15 10:39:04

云計算基礎設施監(jiān)控軟件

2022-06-16 13:21:10

vivo容器集群云原生

2021-12-08 10:35:04

開源監(jiān)控Zabbix

2023-12-19 09:33:40

微服務監(jiān)控

2020-05-18 12:04:17

PrometheusMySQL監(jiān)控
點贊
收藏

51CTO技術棧公眾號

亚洲国产精品一区二区www在线| 午夜一级在线看亚洲| 日韩亚洲欧美高清| 日本在线xxx| av在线电影院| 福利视频网站一区二区三区| 欧美诱惑福利视频| 日韩一区二区不卡视频| 免费看成人人体视频| 91久久精品一区二区三| 青青草综合视频| 韩国三级av在线免费观看| 国产剧情一区二区三区| 欧洲亚洲在线视频| 九九视频免费观看| 成人激情开心网| 亚洲第一精品久久忘忧草社区| 在线免费视频a| 国产天堂在线播放视频| 国产精品短视频| 久久精品二区| 性色av蜜臀av| 麻豆免费看一区二区三区| 午夜精品www| 亚洲成人生活片| 欧美精品一二| 亚洲精品国偷自产在线99热 | 天堂资源在线中文| 91亚洲精品乱码久久久久久蜜桃 | 欧美激情成人网| 精品精品导航| 亚洲男人的天堂av| 亚洲精品一区二| 欧美香蕉爽爽人人爽| 成人av片在线观看| 91在线在线观看| 国产日韩在线观看一区| 美国欧美日韩国产在线播放| 日韩av免费在线观看| 国产精品xxxx喷水欧美| 极品日韩av| 欧美成aaa人片免费看| 国产三级aaa| 视频一区中文| 亚洲色图美腿丝袜| 久久久久久久久久久久| 亚洲激情播播| 亚洲跨种族黑人xxx| 亚洲调教欧美在线| 林ゆな中文字幕一区二区| 日韩精品影音先锋| 最新中文字幕日本| ccyy激情综合| 欧美mv日韩mv亚洲| 黄色免费视频网站| 精品无人区一区二区| 亚洲精品在线免费播放| 欧美图片自拍偷拍| 国产suv精品一区| 亚洲国产精品久久久久久| 大尺度做爰床戏呻吟舒畅| 盗摄牛牛av影视一区二区| 精品欧美久久久| 美女又爽又黄免费| 亚洲激情播播| 中日韩美女免费视频网址在线观看 | 大桥未久一区二区| 中文在线免费| 亚洲a一区二区| 国产真实乱子伦| 欧美片第1页| 欧美性三三影院| 亚洲一区二区三区四区精品| 国产一区 二区| 亚洲精品在线免费观看视频| 蜜臀av一区二区三区有限公司| 国产欧美日韩精品一区二区免费 | 亚洲午夜精品一区二区三区| 欧美极品视频| 亚洲国产综合人成综合网站| 国产91在线免费| 福利视频一区| 日韩一卡二卡三卡四卡| 玖草视频在线观看| 欧美一区2区| 美女少妇精品视频| 精品欧美一区二区三区免费观看| 丝袜亚洲另类丝袜在线| 国产一区视频在线播放| 懂色av成人一区二区三区| 91原创在线视频| 亚洲欧洲中文| 国产一线二线在线观看 | 久久久亚洲成人| 黄色av一区二区| 国产精品99久久久久久久女警 | 国产精品999999| 99在线精品视频免费观看20| 99精品偷自拍| 天天综合中文字幕| 性欧美又大又长又硬| 欧美剧情片在线观看| 亚洲精品第二页| 成人羞羞网站入口免费| 国a精品视频大全| 97视频免费在线| 2023国产精品自拍| 青青视频免费在线观看| 深夜成人影院| 精品国产一二三区| 懂色av粉嫩av蜜臀av一区二区三区| 欧美视频日韩| 国产在线精品播放| 欧美日韩国产中文字幕在线| 亚洲专区一二三| 亚洲欧美日韩三级| 亚洲美女15p| 久久久欧美精品| 国产美女无遮挡永久免费| 久久久久久黄色| 农民人伦一区二区三区| 99精品视频在线免费播放| 亚洲欧美综合精品久久成人| 精品无码人妻一区二区三| 精品在线一区二区三区| 人禽交欧美网站免费| 操人在线观看| 精品欧美一区二区在线观看| 欧美激情精品久久久久久免费| 久久久噜噜噜| 久久精品二区| 国产伦子伦对白在线播放观看| 欧美一区二区三区视频免费播放 | 国产精品欧美一区二区| 玖玖综合伊人| 狠狠综合久久av一区二区小说 | 国产一区二区在线播放视频| 国产三级三级三级精品8ⅰ区| 欧美v在线观看| 美腿丝袜亚洲图片| 韩国三级电影久久久久久| 亚洲av无码国产精品久久不卡 | 中文字幕日韩一级| 处破女av一区二区| 国产资源在线免费观看| 成人免费直播在线| 欧美精品久久久久久久| 亚洲国产av一区二区| 一区二区三区四区亚洲| 91丨porny丨九色| 欧美日韩亚洲一区在线观看| 亚洲精品日韩av| 日本不卡影院| 精品国产一区二区三区av性色| 九九免费精品视频| jvid福利写真一区二区三区| 鲁一鲁一鲁一鲁一色| 亚洲精品合集| 国产精品久久久久免费a∨大胸| 国产在线观看免费网站| 欧美日韩日日摸| 日本在线一级片| 国产不卡免费视频| 国产伦精品一区二区三区四区视频_| 国产精品毛片视频| 欧美在线中文字幕| 777电影在线观看| 555www色欧美视频| 久草网在线观看| 99re这里只有精品6| 国产福利视频在线播放| 日本一区二区高清不卡| 亚洲www在线| 波多野结衣视频一区二区| 亚洲视频在线观看免费| 国产精品毛片一区视频播| 一区二区三区日韩| 爱爱免费小视频| 精品亚洲国内自在自线福利| 轻点好疼好大好爽视频| 亚洲ab电影| 成人在线观看视频网站| 成年女人在线看片| 在线播放精品一区二区三区| 国产视频www| 欧美午夜女人视频在线| 黄色片子在线观看| av不卡免费电影| 国产无色aaa| 99热精品在线观看| 在线看无码的免费网站| 欧美男男freegayvideosroom| 国产精品永久免费| av影院在线免费观看| 最近2019中文免费高清视频观看www99| 草草视频在线播放| 欧美中文字幕一区二区三区 | 人妻熟女aⅴ一区二区三区汇编| 日韩电影在线观看电影| 久久精品xxx| 97视频热人人精品免费| 麻豆一区区三区四区产品精品蜜桃| 亚洲18在线| 欧美在线视频观看| 亚洲综合影视| 中文字幕成人精品久久不卡| 人成网站在线观看| 69久久99精品久久久久婷婷| 免费看一级视频| 亚洲va在线va天堂| 欧美做爰爽爽爽爽爽爽| 久久精品免费在线观看| 影音先锋资源av| 国产美女在线观看一区| 国产精品人人爽人人爽| 国产日产高清欧美一区二区三区| 国产又粗又爽又黄的视频| 国产综合久久久| 精品蜜桃一区二区三区| 香蕉成人app| 91人成网站www| 美女视频一区| 国产极品jizzhd欧美| 僵尸再翻生在线观看| 欧美大学生性色视频| 美女av在线播放| 一区二区三区日韩在线| 欧美捆绑视频| 日韩久久免费电影| 天堂网2014av| 亚洲精品在线网站| 免费av网站观看| 欧美tk—视频vk| 女人18毛片水真多18精品| 日韩欧美在线一区二区三区| 一级视频在线播放| 欧美日韩在线免费视频| 中文字幕一级片| 欧美日韩视频在线一区二区| www.亚洲激情| 在线观看日韩精品| 最近中文字幕免费在线观看| 色国产综合视频| 欧美超碰在线观看| 色狠狠色狠狠综合| 中文字幕人妻一区二区在线视频| 在线免费观看视频一区| 黄色av网站免费| 欧美色图片你懂的| 91成品人影院| 日韩一区二区三区免费看| 国产sm主人调教女m视频| 91精品福利在线一区二区三区 | 国产免费一区二区三区四区五区| 色综合天天综合在线视频| 国内自拍视频在线播放| 在线亚洲免费视频| 亚洲在线观看av| 在线综合+亚洲+欧美中文字幕| 国产精品高潮呻吟久久久| 91精品国产综合久久香蕉的特点| 99国产在线播放| 精品久久五月天| 日韩av成人| 在线亚洲国产精品网| 成年人黄视频在线观看| 久久久噜噜噜久久中文字免| 亚洲天堂免费电影| 国产精品欧美亚洲777777| 国产精品一区二区精品视频观看| av一区二区三区四区电影| 欧美日韩直播| 五月天国产一区| 欧美激情亚洲| 美女福利视频在线| 精品一区二区三区免费播放| 精品国产aⅴ一区二区三区东京热| a级精品国产片在线观看| 一色道久久88加勒比一| 国产精品国产成人国产三级| 免费在线观看黄色av| 疯狂做受xxxx欧美肥白少妇| 亚洲大尺度在线观看| 91精品国产欧美日韩| 四虎免费在线观看| 日韩中文视频免费在线观看| 天堂av资源在线观看| 人九九综合九九宗合| 国产一区2区在线观看| 鲁鲁狠狠狠7777一区二区| 国产精品毛片一区二区在线看| 久久久性生活视频| 久久成人综合网| 37p粉嫩大胆色噜噜噜| 亚洲男人的天堂一区二区| 无码人妻熟妇av又粗又大| 欧美一级在线观看| 久草在线青青草| 欧美大片在线看免费观看| av亚洲一区| 久久久久久九九九九| 国产精品久久久久久久免费观看| 精品少妇人妻av免费久久洗澡| 免费不卡在线观看| 一边摸一边做爽的视频17国产| 亚洲国产精品成人综合色在线婷婷| 亚洲国产成人精品综合99| 91国偷自产一区二区三区成为亚洲经典| 99热这里只有精品3| 亚洲一级一级97网| 草草在线观看| av资源一区二区| 97精品国产一区二区三区| 日韩视频在线免费看| 成人99免费视频| 免看一级a毛片一片成人不卡| 欧美色区777第一页| 免费理论片在线观看播放老| 久久久人成影片一区二区三区观看 | 色综合天天综合色综合av| 亚洲成人精品女人久久久| 色999日韩欧美国产| 性高爱久久久久久久久| 久久av一区二区| 亚洲国产婷婷| 欧美日韩一区二区三区四区五区六区| 日韩毛片视频在线看| 中文字幕人妻互换av久久| 亚洲欧美日韩直播| 亚洲精品**中文毛片| 精品国产一区二区三区免费| 黄色日韩在线| 日批视频免费看| 亚洲精品国产成人久久av盗摄| 国产精品无码AV| www日韩中文字幕在线看| 久久三级毛片| 一本色道久久综合亚洲二区三区 | 91精品二区| 亚洲天堂国产视频| 1024精品合集| 国产精品无码久久av| 美女av一区二区三区| 久久九九精品视频| 粉嫩av一区二区三区天美传媒| 国产精品中文欧美| 91视频免费在线看| 欧美成人性战久久| 国产丝袜精品丝袜| 国内精品视频免费| 国产精品主播| 亚洲精品乱码久久久久久久久久久久| 色爱区综合激月婷婷| 国产三级在线| 91精品久久久久久久| 91精品观看| 韩国av中国字幕| 欧美日韩国产中字| 国产高清自拍视频在线观看| 国产精品视频专区| 中文视频一区| 国产午夜在线一区二区三区| 天天综合网天天综合色| 麻豆导航在线观看| 国产精品自产拍高潮在线观看| 天天射综合网视频| 苍井空张开腿实干12次| 五月激情丁香一区二区三区| 国产在线观看免费| 91九色单男在线观看| 亚洲每日在线| 免费成人深夜天涯网站| 欧美一区二区三区成人| av电影在线免费| 亚洲a∨一区二区三区| 国产一区在线精品| 在线观看免费国产视频| 中文字幕av一区| 日韩视频一二区| 欧美 激情 在线| 亚洲欧美怡红院| 日批视频在线播放| 国产精品一区二区女厕厕| 欧美国产高潮xxxx1819| 亚洲男人在线天堂| 欧美日免费三级在线| 国产美女情趣调教h一区二区| 秋霞在线观看一区二区三区| 国产一区二区网址| 欧美一区免费看| 欧美激情一二区| 成久久久网站| 亚洲激情 欧美| 欧美久久久久久蜜桃| 黄色在线观看www| 黄色录像特级片| 国产欧美在线观看一区| 欧美一级性视频| 国产精品亚发布| 亚洲综合精品四区|