精品欧美一区二区三区在线观看 _久久久久国色av免费观看性色_国产精品久久在线观看_亚洲第一综合网站_91精品又粗又猛又爽_小泽玛利亚一区二区免费_91亚洲精品国偷拍自产在线观看 _久久精品视频在线播放_美女精品久久久_欧美日韩国产成人在线

APM從入門到放棄:可用性監控體系和優化手段的剖析

原創
移動開發 Android iOS 開發工具
在移動互聯網時代,一款應用是否成功,用戶體驗是一個關鍵的因素。APM的發展使得用戶體驗越來越完善,本文通過90年代互聯產品性能優化的發展過程到今天移動互聯網時代下的APM可用性監控體系,如何去解決日漸復雜的業務導致功能不斷迭代所突發的致命bug,以及日益增長的用戶和膨脹的數據導致流量過大所出現的一些問題。

【51CTO.com原創稿件】在《黑客帝國》電影中較為經典的一幕是讓Neo在紅藥丸和藍藥丸中做出選擇。紅藥丸作為一個跟蹤程序,幫助Neo定位物理身體位置,無論在哪里,出現任何問題都能夠第一時間定位并解決。而開發者基本都知道,想解決大部分的功能性問題的難點基本就在定位上,而電影里面出現的一些人工智能、機器學習、虛擬現實的技術,也只能夠在科幻電影中才能看到。

季度活躍設備增長趨勢

今天,在移動終端爆發以及用戶需求的推動下,移動應用的“數量”和“體量”急速擴大,APP性能數據在優化產品上變得越來越重要,國內大批APM廠商仿佛一夜間遍地開花,整個監控體系也從服務端到APP端再到H5端不斷的加強和改變策略來適應不同的場景需求,使得監控和優化的本質上已經發生了變化。

APM的雛形發展

在1996年時,Tivo與HP公司就從應用程序層面出發,他們認為網絡無疑就是應用的速度。直至1998年,面向以組件為中心基礎建設監控的APM產品出現,直到2011年,移動設備的普及和APP應用市場的爆發,讓大家對移動端的性能體驗要求也越來越苛刻。

在這個時候,國外的APM行業New Relic和AppDynamics已經在APM領域拔得頭籌,國內一些APM廠商看準移動的這個趨勢,APM仿佛一夜之間遍地開花,直至今日,作為國內比較具有代表性的APM廠商有:聽云、OneAPM、云智慧、博睿等,當前BAT領域也躋身這一領域,阿里百川碼力APM(簡稱“碼力APM”)也在云棲大會中發布公測。開發者無需從零開始構建性能探針、數據平臺和控制臺,就可以通過可視化、可運維的方式長期監控應用性能、及時解決應用中存在的問題。  

▲ APM 業務與 IT 發展關系變遷

APM可用性度量體系

如今,國內APM業務競爭越來越激烈,大家紛紛在可用性、用戶體驗上發力。比如,大家用手機淘寶,明顯感覺穩定性和流暢度比國內其他電商APP好很多,這不僅僅是因為他們有一堆優秀的開發工程師,更關鍵是其背后那一套完善的性能監控度量體系。

通過性能監控體系,app上發生的性能指標都會被實時上報,而碼力APM服務端會基于這些指標進行聚類和分析,聚合出問題和性能瓶頸,同時完善的日志信息也將支持開發工程師及時修復和優化。

阿里技術專家陳武認為,在性能優化方面,以往的度量是通過APP的打開率來進行對比,很多都是非常主觀。而度量體系里面面臨的一個很大的問題是常態化。那么,應該如何建立起這一套可視化的性能度量的體系呢?

阿里百川將影響用戶使用的性能指標分為可用性度量和體驗度量。

1、 可用性度量

可用性包含app可用性和服務可用性。app可用性問題中最常見的就是crash,而用戶遇到crash之后,大部分會選擇直接卸載app;服務可用性問題則包含網絡連接和服務端錯誤,這類問題往往可能造成用戶購買、訂閱等關鍵操作不可用,從而導致資損,而這類問題若長期未能解決,也會導致用戶流失。

這類問題需要第一時間被修復,越早修復,止損的效果就越好。

這需要客戶端探針具有強大的采集能力。探針SDK將負責采集用戶由于線程異常、內存溢出、手機殺進程等各種原因導致的崩潰,并捕獲到盡量全面的環境信息,和用戶操作軌跡來幫助開發者還原用戶操作,定位問題。同時,對網絡請求部分也是同樣,探針SDK需要支持自動采集網絡性能指標,并捕獲錯誤網絡請求的日志,來輔助開發工程師解決問題。

但是探針在用戶app端采集的均是單一的事件,若有1000個用戶出現可用性問題,那么服務端接收到的可能就是1000份日志。讓開發工程師在海量的日志中排查問題,顯然可行性不高。這就需要APM服務端實時對這些日志進行語義分析以及高效的聚類,比如,將1000條用戶日志聚合為3個問題,通過控制臺反饋給開發者。這將大大提升開發工程師排查和解決問題的效率。

2、 APP體驗度量

APP體驗是影響用戶留存和活躍的關鍵,大家對APP使用過程中“如絲般順滑”都具有天然的好感。但是目前市場大部分APP的體驗依舊非常差,用戶常會面對卡頓、圖片加載失敗、頁面長時間等待等各種不良體驗。這個時候,非常需要有一個系統體系化的去陳列和度量這些體驗類問題。

APM控制臺對卡頓的處理方式和崩潰類似,同類型的卡頓將被聚類在一起,發生該卡頓的用戶詳細日志也聚合在一起可以翻頁查閱。而對圖片加載失敗等,頁面元素無法正常顯示的問題,則可以關注該圖片所在靜態資源的服務主機是否異常(單分鐘請求量過多、圖片過大等)。若該靜態資源服務正常,則可以關注請求該圖片的URL的錯誤率,可以反推是否為圖片本身的問題。

在性能優化的量化方面,如何幫助企業去做定制?陳武認為,應該串聯關鍵路徑所需要的全部URL,從關鍵路徑整體來看服務的健康度指標,而非關注全部的URL。比如通過網絡性能監控,開發者無需對所有的URL進行關注,不同的開發者關注的核心業務不同,大家關注的URL也不一樣。比如,在電商的場景,一個關鍵的路徑是用戶通過登錄,打開商品,進入詳情,然后下單到支付,通過把對應的關鍵路徑所有的URL整合在一起,保障這條關鍵鏈路的性能,才能夠強化核心業務的服務以及穩定性。

APM的可用性檢測方式

▲ 阿里百川碼力APM的監控體系

對于加強應用的可用性,APM一般都采取應用監控結合服務監控的形式,使得開發者實現端到端的全鏈路性能管理。在碼力APM監控體系中,阿里巴巴技術專家熊奇介紹了碼力APM在監控體系里面的應用監控、服務監控、數據庫以及消息推送等性能監控,主要通過以下方式來完成:

★ 在應用監控上,采集了iOS、Android應用的內存、CPU、崩潰、網絡等方面的性能數據;

★ 在服務監控上,支持Tomcat、Jetty、JBoss容器和Spring、Struts等框架的性能檢測;

★ 支持MySQL等SQL數據庫和Redis、Mem cache等NoSQL數據庫的性能檢測;

★ 碼力APM還提供了支持淘寶消息服務TMC、分布式框架Dubbo、淘寶API調用的性能檢測。

對于數據采集之后會統一進入可以承載海量數據的存儲系統和日志系統,統計系統會利用落地的數據完成數據的計算處理、生成報表,幫助開發者長期跟蹤應用和服務的性能,而告警系統則會根據規則在問題發生時發出短信、郵件等即時告警,從而幫助開發者及時解決問題,降低損失。

可用性的度量檢測方式-性能

[[174377]]

在應用開發時,程序錯誤、主線程卡頓和資源使用超過系統限制導致的崩潰,是最嚴重、也是需要首先解決的問題。

通常開發者會借助模擬器、Instrument或者自動化測試發現一部分問題,但是測試往往難以覆蓋用戶使用場景下的設備、網絡等環境。如果借助于社交媒體或者郵件反饋渠道,雖然可以有限地拿到真實的用戶反饋,但是用戶往往不能清楚的描述出復現問題所需的信息,往復溝通成本極高。所以,在客戶端上,碼力APM通過以下檢測方式來收集應用崩潰信息。

 

碼力APM在信號捕獲方式中,通過sigaction設置信號中斷時的回調,這樣,就可以在回調中根據程序運行狀態生成對應的崩潰日志。此外,對于SIGARBT(abnormal termination),我們還需要通過NSSetUncaughtExceptionHandler來獲取未捕獲異常的堆棧,來補全崩潰信息。

而后,把崩潰日志上報到碼力APM,會依據崩潰日志的堆棧信息,聚合同一類型的崩潰后寫入數據存儲。同時,告警系統可以依據崩潰次數、崩潰率等規則,即時發出告警。

此外,碼力Apm提供了dSYM上報腳本,在Xcode的build phrase中添加腳本,就可以在編譯成功后自動上報dSYM文件。通過對dSYM文件的解析,重新聚合后寫入數據存儲,聚合可以減少高達90%數據庫行數;同時,也實現了崩潰日志符號化。不依賴mac環境符號化,更好地利用云計算平臺服務更多開發者。

第二種技術是卡頓檢測,卡頓檢測的基礎是RunLoop,通過RunLoop Observer監聽主線程RunLoop狀態的變更。在這里,把RunLoop當作在操場上跑圈的運動員,把Before Sources當做每圈的起點,同時另外開啟一條線程作為計時員,每5秒判斷一次RunLoop是否跑過一圈。如果5秒內RunLoop沒有完成一次RunLoop,則視為主線程卡頓。在發現主線程卡頓后,會生成卡頓日志,如果是復現的卡頓,可以選擇不重復上報。

此外,針對設備不同的運行時期,如啟動階段、后臺階段、空閑階段,我們會動態調整閾值,降低檢測的開銷。

對于無法通過信號捕獲、卡頓檢測的崩潰,碼力APM引入了應用中止檢測,中止檢測雖然不能還原崩潰現場,但是可以揭示問題的存在。在應用進入active狀態時,碼力APM在持久存儲上設立一個標志位,表示程序在正常運行。在應用退出active狀態或檢測到崩潰時,碼力APM就清除持久存儲上的標志位,表示程序在已知的情況下退出。這樣,在下一次應用啟動時,如果持久存儲上的標志位為真,則說明應用上一次運行在未知情況下退出,這種情況碼力APM就計為應用非正常中止上報。

同時,為了過濾因為電量耗盡導致的關機,碼力APM還增加了電量檢測,在低電量時,清除標志位,避免中止誤報。

可用性的度量檢測方式-網絡

 

[[174378]]

請求錯誤、流量開銷高、被運營商劫持等網絡問題是應用開發時另一類棘手的問題。當然我們也可以借助模擬器、Instrument或者自動化測試發現簡單的網絡問題,但是測試難以覆蓋復雜的用戶網絡環境,也難以導出網絡性能數據進行長期比對監控。如果使用手工埋點的方式記錄網絡性能,一方面,我們需要應對多種系統網絡接口,另一方面,我們需要同步應用網絡代碼和埋點代碼,維護成本將會居高不下。

為了監控應用在真實網絡環境中的性能,碼力APM中引入了無痕埋點的網絡性能監控,在網絡檢測中引入三種注入技術,幫助開發者長期監控應用的網絡性能,優化產品用戶體驗。

第一種是Method Swizzling。每一個NSObject類都包含一個isa指針,指向objc_class結構體,而每一個objc_class結構體又包含一個methodLists指針,指向objc_method_list結構體數組,在objc_method_list里又包含一個objc_method結構體成員,且每一個objc_method包含一個method_imp指針,指向方法實現。

因此,只要能修改method_imp的值,我們就能替換原有的實現。在<objc/runtime>中,通過class_getClassMethod和class_getInstanceMethod取得objc_method結構體指針,而后通過method_getImplementation取得方法的原始實現地址originIMP,之后在imp_implementationWithBlock生成新實現imp的參數block里,調用原始實現,就可以原有行為前后加入網絡性能埋點行為。最后調用method_setImplementation替換方法實現。這樣,任何調用都將使用新的實現。

 

第二種技術是Proxy。在Objective-C里,NSProxy是除NSObject外唯一的根類。NSProxy是一個實現了NSObject協議的抽象類,它的正常運作需要子類override -methodSignatureForSelector:方法為sel提供方法簽名,以及-forwardInvocation:方法來完成調用的轉發。

使用Proxy來注入NSURLConnection、NSURLSession等對delegate的回調。具體來說,在delegate proxy收到消息時,如果不是目標協議方法,則通過消息轉發機制,轉發給原delegate;如果是目標協議方法,則直接調用proxy實現,在proxy實現中委托調用原delegate;此外,多數協議和協議方法都是可選的,因此,在proxy的實現中需要實現-conformsToProtocol:和-respondsToSelector:方法來聲明proxy額外加入的協議和方法。這樣,我們就能在不影響原有回調的同時,增加網絡性能埋點邏輯。

第三種技術是fishhook。使用fishhook來替換動態鏈接庫中的C函數實現,具體來說是CFNetwork和CoreFoundation中的相關函數。這里,以開車的模型來解釋動態鏈接。設想一名新手司機開車從巴黎到羅馬,因為他不知道路線,于是他先去咨詢老司機;老司機告訴他正確的線路,這一次他可能還會繞點路,但下一次,他就會按照老司機的建議直接開到羅馬。

相應的,在程序運行時,動態鏈接的C函數dynamic(...)地址記錄在__DATA segment下的__la_symbol_ptr中;初始時,程序只知道dynamic函數的符號名而不知道函數的實現地址;首次調用時,程序通過__TEXT segment中的__stub_helper取得綁定信息,通過dyld_stub_binder來更新__la_symbol_ptr中的符號實現地址;這樣,再次調用時,就可以通過__la_symbol_ptr直接找到dynamic函數的實現;如果我們需要替換dynamic函數的實現,只需要修改__la_symbol_ptr即可。具體的實現方式,可以參閱Facebook的開源框架fishhook。

加強可用性的優化手段

通過以上兩種檢測方式,基本能夠大部分的性能和網絡需求,使得開發者能夠滿足如今移動互聯網下用戶的苛刻的需求,那么,建立起來的度量體系后,了解的具體的問題后,我們應該如何去解決這些問題來提升可用性呢?

1、網絡安全

運營商、DNS被劫持問題是應用開發時一類棘手的問題, 解決方案也比較多。51信用卡技術總監汪睿認為,51信用卡作為金融屬性的產品,基于安全考慮會放在第一位。解決方案主要是基于全棧HTTPS的方案來處理,但會帶來一些成本和性能上的損耗。甚至可以像FaceBook、google等一些解決方案,使用HTTP2.0方式,這取決于公司和開發者自身去評估實現的成本。汪睿還介紹了早起的一個過渡方案,那就是HTTP的DNS方式,通過獲取一個IP表通過IP來直接連接,可以避免HTTP劫持的問題。

而網絡是一個端到端的技術,阿里高級技術專家陳武認為,從電商的場景看,首先要保證服務端的穩定性,服務端可以有反刷,限流,單元化,異地容災,服務降級等策略保證連接的穩定性。另外,客戶端的角度主要看連接鏈路和數據量。鏈路里面資源可以做多CDN的備份,通過HTTP DNS或者HTTPS,HTTP2.0來反劫持。在鏈路穩定的基礎上,接著去保證傳輸的效率,這里面可以通過就近接入,連接復用,提升壓縮率,使用二進制協議等技術來減少包大小。當然,這里面最重要的是端到端的網絡監控體系,這樣在網絡服務治理上會更有抓手。

2、系統降級

降級的解決方案,是系統性能保障的最后一道防線,從性能優化的角度上說,沒有100%完善的設計,總會有一些意料突發的情況導致性能惡化。所以,在系統設計時,必須做好降級設計。

餓了么移動首席架構師王朝成認為,在餓了么517大促活動上,服務器端承受非常大的壓力,這個時候會通過降級部分服務的方式,來確保大促秒殺這種場景得以正常運行。但是,在用戶端上,以及APP,還在不斷積極的發送用戶請求和數據,反而增加服務器集群的壓力。這個時候,王朝成表示,他們會考慮把一部分的SDK或者APP上的服務也進行降級,來減少服務端在分析數據上的壓力。

降級分為手動降級和智能降級,在策略上分為流量降級、效果降級、功能性降級。流量降級主要表現在通過主動拒絕處理部分流量早餐部分用戶服務不可用。而效果降級和功能性降級都表現為服務質量的降級,一個是通過在流量高峰時期用相對低質量、低延時的服務來保障所有用戶的服務可用性,另外一個是通過減少功能的方式來提高用戶的服務可用性。

3、網絡性能

從數據結構上,需要根據不同的業務場景來選擇合適的數據結構,在數據流量較少的情況可能客戶端上表現不出什么區別,當在數據流量過大,且數據結構復雜的時候很可能就是直接影響到APP的性能。

類似餐飲領域“餓了么”這樣的應用,數據發送的頻率使得據量會非常大,對用戶來說可能沒有什么感知,但是商家接收大量的訂單,數據量影響很大,感知比較明顯。王朝成認為,可以考慮一些新的協議(Protobuf, Flatbuf)來優化數據量,比如HTTP2.0可以壓縮http協議的header,使用encoder來減少需要傳輸的header大小,通過通訊雙方各自cache一份header fields表,對于相同的數據不再通過每次請求和響應發送,又減少了需要傳輸的大小。再一個是采取二進制的協議,只認0和1的組合,通過把原來http1.x的header和body部分用frame重新封裝,實現方便且健壯。通過內容壓縮與并發傳輸機制,在低速、不穩定的無線條件下,較少其http body的發送大小,改善用戶體驗和資源效率。

▲ http1.x和http2.0協議關系

同時,阿里高級技術專家陳武也表示,如果在鏈路沒有問題的情況下,那么必須在整個網絡傳輸層要盡量快,不然很容易出現timeout。所以,第一要從協議層,在協議層里面通過http2.0來減少包頭的壓縮,同時支持服務端push消息,且通過雙通通道,對通道復用更快。第二是從數據層,數據可以通過二進制壓縮。在整個網絡連通率較低的時候,將打包拆成小包,達到很好的傳輸效果。

4、動態熱修復

所謂熱修復,就是使用熱補丁動態修復技術,通過向用戶發送Patch,在用戶無感知的情況下完成一些致命bug的修復。51信用卡客戶端負責人汪睿認為,在移動客戶端上最大的一個問題是發版,對于iOS的用戶來說,整個修復流程比較漫長。需要提交審核,但是在這段時間有可能已經錯過很多用戶。他認為,熱修復技術能夠很快并及時的在線進行修復,通常在使用的過程中就完成的修復過程。

在熱修復技術上,Android常用的是基于Android dex分包方案,而iOS可以利用JSPatch,它可以使得你用JavaScript書寫原生iOS APP,只需要在項目中引入極小的引擎,就可以用JavaScript調用任何的Objective-C的原生接口。

總結

以上所談到的性能優化手段基本是為了解決三種情況所造成的問題:1. 日漸復雜的業務導致功能不斷迭代所突發的致命bug修復方式,2. 日益增長的用戶和膨脹的數據導致流量過大,3.網絡安全和內存開銷的問題。

本文通過不同的場景來分析移動性能優化的模式,可以通過確定場景下解決某一類型的問題。當然,我們不能僅僅通過了解性能優化所解決的問題以及手段,更重要的是需要清楚該問題所發生的場景、原因需要的成本。

【51CTO原創稿件,合作站點轉載請注明原文作者和出處為51CTO.com】

 

責任編輯:林師授 來源: 51CTO.com
相關推薦

2017-03-07 16:49:45

2019-07-02 14:17:18

API網關網關流量

2024-08-13 15:42:19

2021-06-02 08:11:59

ElasticSearUptim監控

2017-03-25 20:30:15

2011-02-18 17:54:36

網站首頁 PET

2010-12-31 14:36:15

ExchangeSer

2025-04-22 02:00:00

芯片晶圓光刻機

2012-09-07 09:57:14

2024-02-27 09:48:25

Redis集群數據庫

2017-12-25 11:15:06

JavaArray數組

2020-07-07 10:50:19

Python丄則表達文本

2012-02-13 23:20:18

linux集群高可用

2010-06-03 15:23:48

2017-08-24 17:05:06

2022-01-17 08:52:32

CPUCPU工具顯卡

2019-09-06 09:50:52

云存儲硬盤云服務

2013-12-06 15:31:49

TechEd2013

2023-12-11 07:44:36

MySQL架構高可用

2018-06-22 09:28:22

數據中心可用性效率
點贊
收藏

51CTO技術棧公眾號

欧美日韩一区二区三区免费看 | 黄色aaa视频| 手机在线免费观看av| 奇米影视在线99精品| 久久夜色精品国产亚洲aⅴ| 一级片黄色免费| 中文在线аv在线| 成人免费在线播放视频| 精品九九九九| 国产麻豆一精品一男同| 国产伦理一区| 欧美成aaa人片在线观看蜜臀| 三上悠亚 电影| 成人国产综合| 欧美日韩黄色大片| 超碰超碰超碰超碰超碰| 久蕉依人在线视频| 成人免费观看男女羞羞视频| 亚洲美女免费在线| 成人免费看片网址| 亚洲在线精品视频| 国产精品久久久久9999高清| 日韩中文字幕在线播放| 中文字幕xxx| 高清不卡一区| 色偷偷88欧美精品久久久| 欧美日韩dvd| 欧美人xxx| 免费观看在线色综合| 亚洲免费一在线| 国产大片一区二区三区| 成人mm视频在线观看| 精品久久久久久中文字幕| 国内自拍中文字幕| 国产污视频在线| 91色九色蝌蚪| 国产一区二区三区无遮挡 | 国产a∨精品一区二区三区不卡| 欧美 日韩 国产 一区二区三区| 欧洲激情综合| 亚洲精品成人久久| 中国免费黄色片| 国产亚洲人成a在线v网站| 色婷婷激情综合| 人妻内射一区二区在线视频| 鲁鲁在线中文| 欧美日韩免费观看中文| 久久在线中文字幕| 爱情岛论坛亚洲品质自拍视频网站| 亚洲免费在线观看视频| 亚洲免费av网| a级影片在线| 亚洲精品大片www| 男女裸体影院高潮| 欧洲日本在线| 国产精品久久99| 中文字幕日韩精品久久| 大地资源网3页在线观看| 中文字幕日韩一区二区| 日本久久高清视频| 国产黄色在线免费观看| 亚洲主播在线观看| 少妇高潮毛片色欲ava片| 五月天国产在线| 一本久道久久综合中文字幕| 老熟妇仑乱视频一区二区| 亚洲日本网址| 日韩欧美成人免费视频| 午夜免费福利在线| 日韩美女精品| 久久99精品久久久久久久久久久久| 欧美另类交人妖| 欧美精品一区二区蜜桃| a天堂视频在线| 久久看片网站| 欧美中文字幕视频在线观看| 无码人妻精品一区二区三区蜜桃91 | 国产亚洲精久久久久久| 欧美亚州在线观看| 亚洲xxxxxx| 亚洲综合图片区| 日韩av片在线看| 久久爱.com| 欧美刺激午夜性久久久久久久| 极品白嫩少妇无套内谢| 亚欧洲精品视频在线观看| 影音先锋欧美精品| 激情五月婷婷在线| 亚洲欧美日韩国产| 成人一区二区电影| 国产黄a三级三级三级| 国产成人免费视| 欧美在线激情| 亚洲卡一卡二| 日本道免费精品一区二区三区| 欧美第一页浮力影院| 一区二区在线视频观看| 亚洲人成网7777777国产| 国产精品麻豆免费版现看视频| 国产综合自拍| 国产精品美女视频网站| 黄色美女一级片| 国产精品日日摸夜夜摸av| 丰满的少妇愉情hd高清果冻传媒 | 国产啪精品视频网站| 国产91视频在线| 国产喷白浆一区二区三区| 亚洲区一区二区三区| 国产精选在线| 6080国产精品一区二区| 免费a v网站| 91精品观看| 国产精品久久久久久久久久久久| 亚洲精品.www| 亚洲色图另类专区| 久久久久久久久久福利| 日韩在线观看中文字幕| 中文字幕免费国产精品| 亚洲天堂av片| 成人在线视频一区| 91精品国产吴梦梦| 亚洲久草在线| 亚洲香蕉成人av网站在线观看| 免费在线观看国产精品| 狠狠色狠狠色综合| 亚洲图片小说在线| 91天天综合| 亚洲视频999| av大片在线免费观看| 成人免费高清在线观看| 激情五月婷婷六月| 国产羞羞视频在线播放| 欧美日韩一区二区在线播放| 免费观看黄网站| 国内精品久久久久久久影视简单 | 我要看黄色一级片| 国产精品无码久久久久成人app| 日韩成人一区| 亚洲美女性视频| 久久久久久久久久久久久女过产乱| 青青草一区二区三区| 欧美另类一区| a天堂资源在线| 欧美性大战久久久久久久| 中文字幕国产专区| 国产尤物久久久| 欧美精品福利视频| 国产福利小视频| 亚洲美腿欧美偷拍| 在线观看你懂的视频| 欧美激情精品久久久六区热门| 日韩欧美国产综合在线一区二区三区| 蜜臀久久精品久久久用户群体| 久久国产夜色精品鲁鲁99| 一区二区三区四区欧美| 亚洲美女色播| 色综合男人天堂| 成人精品在线播放| 国产欧美一区二区三区米奇| 婷婷开心激情综合| 无码人妻精品一区二区三区温州 | 国产成人免费高清视频| 麻豆免费在线| 欧美国产欧美综合| 亚洲春色在线| 国产成人免费av一区二区午夜| 亚洲国产精品久久久| 国产精品免费精品一区| 中文字幕不卡在线播放| 在线免费黄色网| 黄色成人精品网站| 蜜桃导航-精品导航| 一区二区三区三区在线| 成av人片在线观看www| 国产偷国产偷亚洲清高网站| 国产成人愉拍精品久久| 国产午夜精品一区二区三区四区| 色免费在线视频| 亚洲精品电影| 久久99蜜桃综合影院免费观看| 深夜成人福利| 美乳少妇欧美精品| 色吊丝在线永久观看最新版本| 久久久久久久久久久9不雅视频| 麻豆成人在线看| 中文在线观看av| 中文字幕中文字幕一区二区| 亚洲一区和二区| 免费一区视频| 中文视频一区视频二区视频三区| 北条麻妃一区二区三区在线观看 | 99久久国产综合精品麻豆| 人人干人人视频| 欧美色综合网| 婷婷亚洲婷婷综合色香五月| 91精品国产乱码久久久竹菊| 国产亚洲视频中文字幕视频| 国产乱人乱偷精品视频a人人澡| 午夜久久中文| 欧美一区二区视频在线观看2020| 欧美日韩激情在线观看| 国产丝袜美腿一区二区三区| 国产aaaaa毛片| 欧美男男gaytwinkfreevideos| 91网站在线看| 成人免费看黄| 最近2019中文字幕mv免费看| www.av在线.com| 欧美性做爰猛烈叫床潮| 人妻少妇精品一区二区三区| 国产欧美精品区一区二区三区| 午夜精品免费看| 日韩二区在线观看| 黄色免费观看视频网站| 欧美日韩第一区| 欧美日韩一区在线播放| 精品成人自拍视频| 在线观看亚洲视频| 美女做暖暖视频免费在线观看全部网址91 | 午夜精品久久久久久久白皮肤| 1769视频在线播放免费观看| 国产丝袜精品第一页| 国模私拍视频在线| 欧美一级专区免费大片| 一本色道久久综合精品婷婷| 第四色中文综合网| 精品嫩草影院久久| 国产精品日韩无码| 欧美久久久久久久久久| 波多野结衣一二区| 日本道精品一区二区三区| 探花视频在线观看| 狠狠爱在线视频一区| 在线观看 中文字幕| 国产精品中文字幕一区二区三区| 九色porny自拍| 轻轻草成人在线| 欧美黄网在线观看| 在线电影一区二区| 亚洲午夜精品久久久久久浪潮| 亚洲区小说区图片区qvod按摩| 国产精品电影久久久久电影网| 9999精品成人免费毛片在线看 | 欧美一区观看| 国产一区毛片| 亚洲aⅴ天堂av在线电影软件| 欧美猛男男男激情videos| 欧洲精品码一区二区三区免费看| 国产精品探花在线观看| 天堂一区二区三区 | 欧洲三级视频| 一区二区在线视频| 亚洲第一色av| 久久精品免费观看| 亚洲日本黄色片| 国产综合一区二区| 日本55丰满熟妇厨房伦| 国产精品影视在线| 亚洲天堂av网站| av电影一区二区| 亚洲一区二区观看| 中文字幕免费不卡| 日韩高清dvd碟片| 亚洲一区影音先锋| 99精品欧美一区二区| 国产精品久久久久一区二区三区共| 久久一级免费视频| 一区在线播放视频| 久久高清无码视频| 一区二区三区在线视频观看| 日韩精品一区二区不卡| 色94色欧美sute亚洲线路一久| 91精品国产乱码在线观看| 在线免费亚洲电影| 99久久精品国产成人一区二区| 亚洲国产欧美精品| 日韩黄色在线播放| 亚洲福中文字幕伊人影院| 国产精品100| 在线不卡中文字幕播放| 欧美一区二区公司| 在线视频亚洲欧美| 欧美另类tv| 国产精品美女视频网站| 91精品短视频| 高跟丝袜一区二区三区| 少妇精品一区二区| 加勒比av一区二区| 97精品人妻一区二区三区蜜桃| 久久久精品综合| 久久精品视频免费在线观看| 亚洲www啪成人一区二区麻豆| 男操女视频网站| 日韩欧美亚洲国产另类 | 亚洲高清av在线| 95在线视频| 欧美国产一区二区三区| 国产精品高清乱码在线观看| 91av国产在线| 国产精品成人**免费视频| 国产日韩欧美一区二区| 成人污版视频| 日韩高清dvd| 在线视频亚洲| 制服丝袜中文字幕第一页| 国产69精品久久777的优势| 成人片黄网站色大片免费毛片| 成人午夜看片网址| а天堂中文在线资源| 亚洲曰韩产成在线| 中文字幕 亚洲视频| 日韩电影免费在线观看中文字幕| 久久久久久久久免费视频| 欧洲日韩成人av| 欧美1区2区3区4区| 成年在线观看视频| 狠狠狠色丁香婷婷综合激情| 日韩女同一区二区三区| 日韩欧美在线第一页| 日韩国产在线一区| av超碰免费在线| 国产精品av在线播放| 国产成人澳门| 日韩欧美一区二区在线观看| 午夜亚洲伦理| 亚洲精品乱码久久久久久蜜桃欧美| 91色在线porny| 国产微拍精品一区| 欧美成人三级电影在线| 男女视频在线观看免费| 久久久久久成人| 香港久久久电影| 97超碰人人爱| 蜜桃视频一区二区三区在线观看| 成人免费无码大片a毛片| 亚洲乱码国产乱码精品精可以看| 国产精品suv一区二区三区| 亚洲第一精品夜夜躁人人爽| 日本免费网站在线观看| 欧美极品少妇与黑人| 伊人色综合一区二区三区影院视频| 国产精品免费观看高清| 西瓜成人精品人成网站| 国产精品美女黄网| 国产一区二区你懂的| 国产精品探花在线播放| 久久色成人在线| 国产成人啪精品午夜在线观看| 精品国产91乱码一区二区三区| segui88久久综合| 国产欧美日韩亚洲| 欧美亚洲一区| 91香蕉国产视频| 日韩一区二区三区av| 日韩欧美国产片| 综合在线视频| 国产伦精品一区二区三区妓女下载 | 国产成人精品av在线| 久久a爱视频| 欧美精品在欧美一区二区| 蜜乳av一区二区| 男人在线观看视频| 欧美成人三级电影在线| 欧美日韩激情视频在线观看| 欧美在线首页| 成人三级做爰av| 午夜精品久久久久影视| 欧美视频免费一区二区三区| 国产精品国产三级国产专播精品人 | 亚洲欧美一区二区三区在线| 不卡视频观看| 国产精品嫩草在线观看| 夜夜爽av福利精品导航| 欧美人与性动交α欧美精品| 午夜精品久久久久久久99樱桃| 亚洲色偷精品一区二区三区| 国产精品wwwwww| 激情五月综合网| 亚洲xxx在线观看| 国产精品欧美极品| 精品久久久无码中文字幕| 91精品成人久久| 免费成人三级| 青青在线视频免费观看| 成人小视频在线| 久久久精品毛片| 久久综合伊人77777尤物| jazzjazz国产精品麻豆| 国产偷人视频免费| 亚洲人成人一区二区在线观看| 亚洲三区在线播放| 亚洲va国产va天堂va久久| 欧美专区在线| 日本大胆人体视频| 婷婷五月色综合香五月| 国产又大又黄又猛| 国产欧美日韩另类视频免费观看| 国产极品999| 国产精品久久久久久久久久久久久| 日韩免费高清|