亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

移動(dòng)端CPU與內(nèi)存監(jiān)測(cè)工具全盤點(diǎn):Android/iOS實(shí)戰(zhàn)指南

移動(dòng)端CPU與內(nèi)存監(jiān)測(cè)工具全盤點(diǎn):Android/iOS實(shí)戰(zhàn)指南 我自己這些年做App性能治理最頭疼的往往不是優(yōu)化本身而是找不準(zhǔn)數(shù)據(jù)來(lái)源。CPU飆到多少算異常內(nèi)存里的PSS到底該怎么看線上用戶反饋“用著用著就卡頓”我這邊連個(gè)像樣的曲線都拿不出來(lái)——這種狀態(tài)相信不少轉(zhuǎn)做專項(xiàng)性能的開發(fā)者都經(jīng)歷過(guò)。這篇文章把我在Android和iOS兩條線上實(shí)際跑過(guò)的監(jiān)測(cè)工具做了一次完整盤點(diǎn)覆蓋IDE自帶工具、命令行、開源庫(kù)、系統(tǒng)框架和自動(dòng)化腳本。準(zhǔn)備分六個(gè)部分講先是監(jiān)測(cè)指標(biāo)本身的認(rèn)知然后Android、iOS分別盤工具再講幾個(gè)關(guān)鍵數(shù)據(jù)的讀法最后落到專項(xiàng)測(cè)試和常見坑位上。適合剛接手性能監(jiān)控的開發(fā)、測(cè)試也適合想搭一套低成本監(jiān)測(cè)體系的技術(shù)負(fù)責(zé)人讀完可以直接按清單落地。1. 盤點(diǎn)前的關(guān)鍵認(rèn)知CPU與內(nèi)存監(jiān)測(cè)到底在監(jiān)控什么1.1 用戶視角的“卡”和工程師視角的數(shù)據(jù)經(jīng)常不同步用戶說(shuō)“這個(gè)App很卡”他感知到的是掉幀、點(diǎn)擊無(wú)響應(yīng)、App被系統(tǒng)殺掉重開。但落到CPU和內(nèi)存監(jiān)測(cè)上我們看到的往往是另外一套東西某段時(shí)間CPU使用率超過(guò)80%或者PSS內(nèi)存持續(xù)增長(zhǎng)、遲遲不回落。這兩者不是天然對(duì)應(yīng)的。CPU高不一定肉眼可見的卡比如后臺(tái)批量壓縮圖片頁(yè)面主線程可能根本不受影響內(nèi)存大也不一定馬上崩Android系統(tǒng)對(duì)“內(nèi)存壓力”有很長(zhǎng)的容忍期等它真正開始?xì)⑦M(jìn)程時(shí)你才感受到后果。所以盤點(diǎn)工具之前先要把目標(biāo)定清楚你是為了找卡頓根因還是為了控內(nèi)存上限還是為了發(fā)現(xiàn)泄漏工具選型完全不一樣。我的習(xí)慣是先把目標(biāo)拆成三類。第一類是定位問題需要可以回溯的函數(shù)調(diào)用棧和內(nèi)存分配棧典型工具是Android Profiler和Instruments第二類是持續(xù)觀測(cè)需要低開銷、長(zhǎng)時(shí)間采樣的指標(biāo)典型工具是Perfetto和MetricKit第三類是自動(dòng)化回歸需要能在CI里跑出對(duì)比數(shù)據(jù)的腳本方案。一篇文章很難同時(shí)覆蓋三類細(xì)節(jié)但這篇的每個(gè)工具會(huì)標(biāo)清楚用途邊界方便你按場(chǎng)景取用。1.2 CPU監(jiān)測(cè)不只看占用率還要看線程調(diào)度和調(diào)用棧不少剛?cè)腴T性能的同學(xué)有個(gè)習(xí)慣開個(gè)系統(tǒng)監(jiān)視器看到CPU 40%就覺得“正?!笨吹?5%就覺得“高了”。這種判斷在移動(dòng)端會(huì)誤導(dǎo)人——現(xiàn)在的CPU是多核架構(gòu)一顆大核跑到頂和八顆核全部滿載體現(xiàn)出來(lái)的占用率完全不同前端體感也完全不同。用生活類比來(lái)講CPU占用率像一棟辦公樓里亮燈的工位比例。你只知道亮燈多還是少但不知道哪些人真正在干活、哪些人是空轉(zhuǎn)更不知道哪條主干道在堵車。移動(dòng)端實(shí)際出問題的往往是單線程或單核的調(diào)度延遲主線程被一個(gè)耗時(shí)任務(wù)占住其它事情都排它后面。這時(shí)整體CPU占用率可能只有30%界面已經(jīng)卡到不行。所以CPU監(jiān)測(cè)有三個(gè)層次最淺的是進(jìn)程占用率只能做趨勢(shì)觀察稍深的是線程級(jí)占用率能看出哪個(gè)線程在忙再深一層是采樣調(diào)用棧能看到忙的時(shí)候CPU到底在跑哪段代碼。工具盤點(diǎn)里凡是能采樣調(diào)用棧的我標(biāo)了“定位專用”只能給占用率的我標(biāo)了“趨勢(shì)觀測(cè)”。定位問題和排查問題用的工具級(jí)別完全不同這也是很多團(tuán)隊(duì)工具買了不少、問題還是查不出來(lái)的原因。1.3 內(nèi)存監(jiān)測(cè)的維度比想象中多別只盯著“已用內(nèi)存”那個(gè)數(shù)內(nèi)存監(jiān)測(cè)比CPU更容易被誤讀。手機(jī)自己的存儲(chǔ)空間很大而App的進(jìn)程通常被分配了專用內(nèi)存空間但其中很多是“共享”和“可回收”的。單純看系統(tǒng)剩余內(nèi)存來(lái)判斷App有沒有問題就像數(shù)倉(cāng)庫(kù)里還剩多少紙箱卻不看這批貨里有多少是自家租的、多少是別人暫時(shí)寄放的。專業(yè)一點(diǎn)的監(jiān)控一般分三個(gè)維度。維度一是進(jìn)程的RSS它表示進(jìn)程實(shí)際占用的物理內(nèi)存頁(yè)數(shù)包含共享庫(kù)被多進(jìn)程共用后重復(fù)計(jì)算的部分這個(gè)數(shù)字通常會(huì)偏“虛胖”維度二是PSS它把共享內(nèi)存按進(jìn)程數(shù)量平分后再分配到每個(gè)進(jìn)程頭上是Android系統(tǒng)評(píng)判進(jìn)程大小最常用的口徑維度三是VSS它基本只是進(jìn)程地址空間大小除了一些極端場(chǎng)景沒人認(rèn)真看它。再往細(xì)了分Android側(cè)還分Java堆、Native堆、代碼段、棧、圖形緩沖等iOS側(cè)有物理內(nèi)存足跡、虛擬內(nèi)存、壓縮內(nèi)存等概念。工具給出來(lái)的每一個(gè)數(shù)字都有統(tǒng)計(jì)口徑如果你拿不同工具的數(shù)字去對(duì)接同一份報(bào)告很容易牛頭不對(duì)馬嘴。我后面專門用一節(jié)來(lái)講這些字段怎么讀這比單純背命令更有用。2. Android平臺(tái)從IDE到命令行的完整監(jiān)測(cè)梯隊(duì)2.1 Android Studio Profiler開發(fā)期最直觀的CPU與內(nèi)存在線觀測(cè)Android Studio自帶Profiler依然是開發(fā)期最省事的入口。它不需要額外配置Android Studio打開Profiler窗口選擇已經(jīng)運(yùn)行的App進(jìn)程就能看到CPU、內(nèi)存、網(wǎng)絡(luò)、能耗四條實(shí)時(shí)曲線。CPU模板適合看“當(dāng)前忙不忙”內(nèi)存模板則會(huì)把Java堆、Native堆、Graphics、Stack、Code等分塊展示初始定位問題很快。但要注意它和線上用戶跑的環(huán)境并不完全一樣模擬器和真機(jī)調(diào)度策略不同Profiler本身還會(huì)占用額外CPU和數(shù)據(jù)上報(bào)所以它更適合開發(fā)期說(shuō)服自己“這里確實(shí)有問題”不建議拿它出周報(bào)。我在實(shí)際項(xiàng)目里的用法是定位到一個(gè)具體操作時(shí)比如“點(diǎn)開商品詳情頁(yè)再返回”點(diǎn)擊CPU錄制錄個(gè)幾秒生成火焰圖看哪些函數(shù)吃掉了大量CPU時(shí)間。如果火焰圖里出現(xiàn)明顯的長(zhǎng)時(shí)間函數(shù)調(diào)用比如圖片主線程解碼就去優(yōu)化它。這種“操作路徑火焰圖”的排查法比看整體占用率精準(zhǔn)得多。有一點(diǎn)申請(qǐng)后需留意Android 10以上支持對(duì)release包開啟profileable模式這樣可以模擬線上混淆和release優(yōu)化后的性能。構(gòu)建時(shí)在AndroidManifest里加android:profileabletrue或者在debug包和release包之間對(duì)比能避免“debug下正常、release下崩”的尷尬。2.2 adb命令三件套top、dumpsys meminfo、Perfetto命令行工具適合不上IDE、人在遠(yuǎn)程或自動(dòng)化跑批量的場(chǎng)景。Android平臺(tái)上我最常用的三條命令是top、dumpsys meminfo和Perfetto。第一條是top用于快速看進(jìn)程級(jí)CPU和內(nèi)存實(shí)時(shí)狀況adb shell top -m 20 -n 1 -o PID,PCPU,RSS,NAME-m 20表示只顯示前20個(gè)進(jìn)程-n 1表示只掃一次-o指定輸出列。它給出的RSS是前面說(shuō)過(guò)的“虛胖”口徑不能直接和PSS混用但勝在一句話能拿到全機(jī)狀態(tài)。第二條是dumpsys meminfo專門看單個(gè)進(jìn)程內(nèi)存明細(xì)adb shell dumpsys meminfo com.demo.package輸出里最有價(jià)值的部分是“App Summary”里面列出Java Heap、Native Heap、Code、Stack、Graphics等分部占用以及TOTAL PSS。這個(gè)數(shù)字直接決定Android系統(tǒng)Memory Trim時(shí)的殺進(jìn)程優(yōu)先級(jí)也是做線上內(nèi)存水位線監(jiān)控最常用的字段。第三條是Perfetto它是Systrace的接棒者也是現(xiàn)在Android性能追蹤的標(biāo)配。命令行采集簡(jiǎn)單adb shell perfetto --time 15s -o /data/misc/perfetto-traces/trace adb pull /data/misc/perfetto-traces/trace然后把這個(gè)trace文件拖到ui.perfetto.dev里打開就能看到CPU調(diào)度片段、線程狀態(tài)、內(nèi)存生命周期、binder調(diào)用等非常詳細(xì)的信息。Perfetto的學(xué)習(xí)曲線比前兩條命令陡但排查“線程間互相等待”“CPU調(diào)頻跟不上”這類疑難問題它是真正能給出證據(jù)的工具。我通常只在top和dumpsys定位到大概問題后再用Perfetto抓更深的trace。2.3 內(nèi)存泄漏與對(duì)象引用檢測(cè)LeakCanary與Memory Profiler分工Android側(cè)的“找泄漏”有兩套工具互補(bǔ)。LeakCanary適合做持續(xù)性的動(dòng)態(tài)監(jiān)測(cè)它在Debug包中集成后一旦發(fā)現(xiàn)Activity或Fragment銷毀后仍被強(qiáng)引用持有就會(huì)落下通知并把引用鏈展示出來(lái)。這套東西不需要你主動(dòng)操作適合團(tuán)隊(duì)回歸。它在分析時(shí)依賴Shark庫(kù)直接讀取堆快照在Native層注入判斷非常省事。Android Studio的Memory Profiler則適合主動(dòng)調(diào)查。你可以手動(dòng)觸發(fā)一堆操作后點(diǎn)擊Memory視圖里的垃圾回收按鈕再對(duì)比堆占用是否回落到基線。如果回不去很可能有泄漏再點(diǎn)“Dump Java heap”生成堆轉(zhuǎn)儲(chǔ)用“Analyzer Tasks”里的“Detect Leaked Activity”跑一遍通常直接能提示“某個(gè)Activity實(shí)例還活著”。這兩者的分工我總結(jié)為一句話LeakCanary管“團(tuán)隊(duì)日常防線”Memory Profiler管“專項(xiàng)攻堅(jiān)抽樣”。實(shí)際項(xiàng)目里我見過(guò)有人依賴LeakCanary就再也不管內(nèi)存直到線上內(nèi)存水位一路上漲——其實(shí)LeakCanary默認(rèn)只在Debug下生效線上發(fā)布包并沒有它。所以線上還需要另外一套監(jiān)控這個(gè)話題放到第五節(jié)再展開。3. iOS平臺(tái)Instruments與MetricKit的組合玩法3.1 Instruments的四個(gè)標(biāo)配模板Activity Monitor、Allocations、Leaks、Time ProfileriOS上做性能分析的入口是Xcode里的Instruments。它自帶的模板很多但日常做CPU與內(nèi)存監(jiān)測(cè)我長(zhǎng)期只固定用四個(gè)其余大多是這四個(gè)的變體。Activity Monitor模板用來(lái)整體看進(jìn)程的CPU占用和內(nèi)存占用適合先抓“哪個(gè)進(jìn)程在頂”也可以配置成直接動(dòng)態(tài)選擇目標(biāo)App。Allocations模板用來(lái)記錄內(nèi)存分配可以看到對(duì)象分配的類型、數(shù)量和調(diào)用棧是排查增長(zhǎng)問題的關(guān)鍵比如內(nèi)存中圖片緩存不斷累積。Leaks模板專抓循環(huán)引用和泄露對(duì)象配合一個(gè)“旋轉(zhuǎn)一定角度再返回”的操作路徑反復(fù)測(cè)試往往能抓出不少ViewController沒被釋放的經(jīng)典問題。Time Profiler模板則按時(shí)段采樣CPU調(diào)用棧類似Android Profiler的火焰圖按耗時(shí)從大到小排序找熱點(diǎn)函數(shù)。這四件套的操作節(jié)奏通常是先用Activity Monitor確認(rèn)整體趨勢(shì)再用Time Profiler定位CPU熱點(diǎn)用Allocations定位內(nèi)存增長(zhǎng)最后用Leaks確認(rèn)是否有真正的泄漏。一個(gè)實(shí)操建議錄制時(shí)別急著全程跑改成“開始錄制-人工執(zhí)行操作-場(chǎng)景結(jié)束-點(diǎn)stop”。時(shí)間線越長(zhǎng)越難定位把操作路徑切得短一點(diǎn)后面分析的工作量會(huì)驟減。3.2 Xcode Memory Graph不打開Instruments也能看的對(duì)象關(guān)系圖Xcode從大概iOS 12開始提供的Memory Graph調(diào)試器是個(gè)被很多人忽略的好工具。它的入口在Debug工具欄里點(diǎn)擊那個(gè)看起來(lái)像三個(gè)圓圈疊在一起的按鈕就能在調(diào)試中看到當(dāng)前進(jìn)程的對(duì)象圖布局類似“一個(gè)矩形一個(gè)對(duì)象對(duì)象間的實(shí)線引用關(guān)系”。日常用法是把一個(gè)ViewController push進(jìn)導(dǎo)航棧再pop然后點(diǎn)擊內(nèi)存圖左下角搜索這個(gè)類名。如果類實(shí)例仍然存在它能直接顯示是誰(shuí)還在引用它比如一條保存在單例里的回調(diào)閉包或是一個(gè)沒有置空的定時(shí)器屬性。這個(gè)能力比Instruments里的定制Leak檢測(cè)更直觀適合在開發(fā)階段先快速過(guò)濾明顯問題。要注意的是Memory Graph并不能代替Instruments做統(tǒng)計(jì)數(shù)據(jù)它偏向?qū)ο箨P(guān)系圖重點(diǎn)解釋“為什么會(huì)活著”但不解釋“內(nèi)存整體漲了多少”。所以在我的工作流里Memory Graph是“定位異常引用”的放大鏡Instruments是“做量化對(duì)比”的標(biāo)尺兩者的使用時(shí)機(jī)并不相同。3.3 MetricKit把性能監(jiān)控搬到線上而不是只在連接電腦時(shí)才看Xcode和Instruments發(fā)作的前提是你有一臺(tái)連著電腦的測(cè)試機(jī)但線上真實(shí)用戶跑起來(lái)是什么樣它們完全無(wú)感知。蘋果提供的MetricKit就是為這種情況準(zhǔn)備的它讓App在用戶設(shè)備上采集性能指標(biāo)然后定期以報(bào)告形式送回開發(fā)端。接入方法不復(fù)雜在App啟動(dòng)時(shí)注冊(cè)一個(gè)MXMetricManager.MetricManager.shared.addSubscriber(...)的訂閱方然后實(shí)現(xiàn)回調(diào)就能收到包括CPU、內(nèi)存、磁盤I/O、啟動(dòng)時(shí)長(zhǎng)、掉幀等多類數(shù)據(jù)。這些是蘋果統(tǒng)一采集并標(biāo)準(zhǔn)化后匯總的不需要我們?cè)贏pp內(nèi)自己架哨兵隱私和電量影響也較小。它的局限是數(shù)據(jù)粒度偏“匯總型”適合做線上大盤和版本對(duì)比不太適合單獨(dú)定位某個(gè)用戶的某次具體問題。所以我的建議是MetricKit作為線上自動(dòng)化監(jiān)控的底板一旦它發(fā)現(xiàn)某版本CPU中位數(shù)明顯偏高再回到Xcode Instruments復(fù)現(xiàn)問題、采集更詳細(xì)的現(xiàn)場(chǎng)。線上報(bào)警和線下定位按理應(yīng)該是一套聯(lián)動(dòng)流程。4. 數(shù)據(jù)含義拆解為什么同一款A(yù)pp在兩個(gè)平臺(tái)看到的數(shù)字不一樣4.1 Android的Java堆、Native堆和“圖形內(nèi)存”到底代表什么打開dumpsys meminfo的輸出很多人會(huì)被那一排字段嚇到。其實(shí)歸類后一套邏輯就清楚了Java堆是經(jīng)過(guò)虛擬機(jī)和垃圾回收器管理的對(duì)象內(nèi)存平常new出來(lái)的普通對(duì)象基本都在這里Native堆是直接通過(guò)C/C分配的內(nèi)存比如Bitmap像素?cái)?shù)據(jù)、三方引擎內(nèi)部緩沖、部分網(wǎng)絡(luò)庫(kù)的緩沖區(qū)Code是App代碼和資源映射占的內(nèi)存Stack是線程棧Graphics是圖形緩沖和GPU相關(guān)內(nèi)存這塊數(shù)字經(jīng)常被忽略但它常常是吃內(nèi)存大戶。一個(gè)常見誤判是只盯著Java Heap看認(rèn)為Java Heap沒漲就沒問題。但實(shí)際項(xiàng)目里Bitmap在較新版本上大部分計(jì)算在Graphics和Native層如果這里持續(xù)上漲Java Heap反而很穩(wěn)。所以我們看內(nèi)存報(bào)告時(shí)我習(xí)慣先把“App Summary”里的TOTAL PSS拉出來(lái)當(dāng)?shù)谝粰谠侔袹ava Heap/Gaphics/Native這幾類單列做趨勢(shì)單列之間互相驗(yàn)證才能防漏。平臺(tái)區(qū)分也在這Android允許同一個(gè)Library被不同進(jìn)程通過(guò)共享內(nèi)存映射所以“Private Dirty”和“Shared Dirty”等術(shù)語(yǔ)頻繁出現(xiàn)。PSS會(huì)把共享部分按進(jìn)程數(shù)均攤所以我們說(shuō)“某App占了多少內(nèi)存”最嚴(yán)謹(jǐn)?shù)牧炕趶绞荘SS不是RSS更不是系統(tǒng)剩余內(nèi)存減出來(lái)的差值。4.2 iOS的phys_footprint、vsz與“壓縮內(nèi)存”不同在哪iOS側(cè)的內(nèi)存術(shù)語(yǔ)和Android完全不同但在社區(qū)討論里經(jīng)常被混著用。物理內(nèi)存足跡phys_footprint是iOS判斷進(jìn)程內(nèi)存壓力的核心指標(biāo)它把App的內(nèi)存壓縮、IOAccelerator、TASK_VM_INFO等匯總成一個(gè)可以被系統(tǒng)評(píng)估的值。Apple官方和MetricKit里的內(nèi)存報(bào)告基本都圍繞這個(gè)字段展開?!疤摂M內(nèi)存大小”則更像一個(gè)邏輯地址空間的大小iOS上不同的線程、庫(kù)、二進(jìn)制映射都會(huì)增大它但它不代表真實(shí)的物理占用。部分開發(fā)者看到模擬器監(jiān)控里vsz很大就被嚇到其實(shí)這是正?,F(xiàn)象虛擬內(nèi)存和物理占用不是一回事。另一個(gè)概念是壓縮內(nèi)存系統(tǒng)在內(nèi)存吃緊時(shí)會(huì)對(duì)符合條件的頁(yè)進(jìn)行壓縮壓縮后的數(shù)據(jù)在footprint里有一部分計(jì)入但壓縮本身也是CPU開銷。這就是為什么你常??吹侥承〢pp內(nèi)存曲線明顯下降性能卻變差了——它是在靠CPU換內(nèi)存。從工具上看Instruments的Activity Monitor會(huì)把Memory顯示為某個(gè)數(shù)值底部還能看到Compressed Memory選項(xiàng)。Memory Graph里選中某個(gè)對(duì)象也能看到它在某個(gè)區(qū)域里。你要盯的始終是footprint而不是籠統(tǒng)的“App占用內(nèi)存”。4.3 CPU采樣的“采樣”和“插樁”決定了優(yōu)化精度CPU數(shù)據(jù)的生成方式也影響準(zhǔn)確度。Instruments的Time Profiler是定時(shí)采樣每隔一小段時(shí)間記錄當(dāng)前CPU正在執(zhí)行的調(diào)用棧然后通過(guò)統(tǒng)計(jì)頻率推算出熱點(diǎn)。這種方式的優(yōu)點(diǎn)是開銷低缺點(diǎn)是短耗時(shí)的一閃而過(guò)函數(shù)可能完全被漏采所以它適合找“大頭”不適合找秒級(jí)以內(nèi)的毛刺問題。Android Profiler的CPU錄制更接近Trace事件的插樁方式它會(huì)更精確地記錄每次函數(shù)調(diào)用的開始結(jié)束時(shí)間代價(jià)是錄制時(shí)對(duì)性能的影響更大。Perfetto的調(diào)度事件屬于系統(tǒng)內(nèi)核打點(diǎn)可以看到線程狀態(tài)切換但對(duì)用戶態(tài)的代碼調(diào)用關(guān)系提供的信息相對(duì)有限。一句話總結(jié)要回答“哪段函數(shù)最耗時(shí)”用采樣型工具就夠要回答“突然卡頓的那幾毫秒發(fā)生了什么”盡量用插樁或Trace事件并把Perfetto的調(diào)度信息一起帶上。組會(huì)里最尷尬的事就是采樣頻率不夠復(fù)現(xiàn)時(shí)又沒抓到你想抓的那一幀。工具選型里務(wù)必將這個(gè)差異納入考慮。5. 專項(xiàng)測(cè)試與自動(dòng)化讓監(jiān)控跑成流水線5.1 一條adb循環(huán)腳本實(shí)現(xiàn)穩(wěn)定性曲線的低成本采集性能測(cè)試最枯燥的部分是長(zhǎng)時(shí)間觀察。線上問題往往不會(huì)在手工點(diǎn)兩下后立刻出現(xiàn)需要跑10分鐘、半小時(shí)甚至更久。手工盯屏幕完全不現(xiàn)實(shí)所以我的第一建議是哪怕不用任何工具也要先寫一條adb循環(huán)腳本把數(shù)據(jù)錄下來(lái)。以下腳本可以按實(shí)際項(xiàng)目改包名和時(shí)長(zhǎng)#!/bin/bash PACKAGEcom.demo.package DURATION300 START$(date %s) while [ $(($(date %s) - $START)) -lt $DURATION ]; do adb shell top -n 1 -o PID,PCPU,RSS,NAME | grep $PACKAGE cpu.log adb shell dumpsys meminfo $PACKAGE | grep -E TOTAL PSS|Java Heap|Native Heap mem.log sleep 2 done跑完后你會(huì)得到兩份文本日志接下來(lái)可以導(dǎo)入Excel或?qū)憘€(gè)小Python腳本畫曲線。這樣不用Perfetto也能看出內(nèi)存趨勢(shì)是“穩(wěn)步上漲”“鋸齒波”還是“突然跳變”。鋸齒波通常是正常的對(duì)象反復(fù)創(chuàng)建穩(wěn)步上漲極有可能是泄漏或緩存不清突然跳變可能是某次資源加載任務(wù)。這個(gè)腳本雖然原始卻是我做性能回歸時(shí)利用率最高的工具。要注意的是top里的RSS和dumpsys里的PSS不能在同一張圖里直接比較我在腳本里把它們拆開了分析時(shí)分開看。另外長(zhǎng)時(shí)間腳本最好帶上adb shell dumpsys batterystats一起記錄這樣后續(xù)分析還能順便解釋CPU升高和電量消耗的關(guān)系。5.2 iOS回歸xctrace與CI里可接受的采樣方式iOS側(cè)的自動(dòng)化相比Android要麻煩一些主要原因是命令行的權(quán)限和采樣的隱蔽性不如adb豐富。但有一條路徑可以走通用xctrace record在命令行采集Instruments模板數(shù)據(jù)。一個(gè)參考格式是xcrun xctrace record --template Time Profiler --device 你的設(shè)備名 --output /tmp/app_trace.trace --launch -- com.demo.package這樣可以在不打開Xcode圖形界面的情況下啟動(dòng)App并采集一段時(shí)間內(nèi)的CPU調(diào)用棧。采集完再解析trace文件就能把數(shù)據(jù)傳給報(bào)告或分析腳本。這個(gè)方案適合在固定測(cè)試機(jī)上跑回歸不適合大規(guī)模線上收集線上仍交給MetricKit。在本地CI里我更關(guān)心的是趨勢(shì)包對(duì)比同時(shí)跑兩遍同一個(gè)操作路徑一遍打基線版本一遍打新版本然后比較兩次trace里主要方法的采樣時(shí)長(zhǎng)。手工做過(guò)一兩次后會(huì)發(fā)現(xiàn)這比“看代碼猜性能”效率高得多。哪怕是粗略對(duì)比也能在提交前就發(fā)現(xiàn)某次改動(dòng)把列表滑動(dòng)幀時(shí)間拉長(zhǎng)了一大截。5.3 線上監(jiān)控APM SDK與自采樣的取舍線上用戶設(shè)備千差萬(wàn)別只有在線上才能看到真實(shí)的首屏分布、CPU高負(fù)載比例和系統(tǒng)殺進(jìn)程情況。常見的APM SDK包括Sentry、Firebase Performance等主流的移動(dòng)開發(fā)平臺(tái)也都有各自的性能監(jiān)控產(chǎn)品。它們可以在App內(nèi)定期采當(dāng)前進(jìn)程的CPU和內(nèi)存狀態(tài)上報(bào)到后臺(tái)做水位線和版本對(duì)比。不過(guò)用現(xiàn)成SDK之前先想清楚一個(gè)核心問題上報(bào)頻率和用戶隱私的平衡。CPU采樣太密SDK自己就是耗電和耗CPU的元兇采樣太疏曲線失去參考價(jià)值。比較合理的做法是按場(chǎng)景采樣比如只在關(guān)鍵頁(yè)面切換后采集或只在某條網(wǎng)絡(luò)請(qǐng)求完成之后采一條CPU快照。上報(bào)頻率按版本灰度逐步放量先灰度10%用戶確認(rèn)功耗沒有明顯上升再放大比例。此外如果你的App里有大量Native代碼第三方SDK默認(rèn)采到的只是整個(gè)進(jìn)程的占用率很難區(qū)分是Native庫(kù)還是Java層引入的。這時(shí)可以在自建采樣里額外記錄線程名稱把“渲染線程”“IO線程”“網(wǎng)絡(luò)線程”區(qū)分出來(lái)。線上報(bào)告能區(qū)分線程才算有一點(diǎn)點(diǎn)可用性。6. 實(shí)測(cè)手冊(cè)常見誤判、隱藏坑位與排查速查表6.1 常見誤判Profiler開著測(cè)、模擬器數(shù)字倒掛、Debug與Release不一致先說(shuō)我見到的頭號(hào)誤判開著Android Studio Profiler或Instruments錄制去測(cè)性能數(shù)據(jù)然后把結(jié)果直接作為“App真實(shí)性能”寫入報(bào)告。這兩個(gè)工具本身會(huì)占用一定的CPU和內(nèi)存錄制得越密干擾越大。如果是插樁型錄制JIT編譯行為也可能被改變。所以它們最適合定位問題方向不適合出精確的基準(zhǔn)數(shù)字。第二個(gè)高頻誤判是模擬器和真機(jī)對(duì)比。模擬器共享宿主機(jī)CPU調(diào)度模型和真機(jī)大核小核的結(jié)構(gòu)完全不同跑出來(lái)的CPU占用率和內(nèi)存壓縮行為往往會(huì)和真機(jī)倒掛模擬器表現(xiàn)正常的場(chǎng)景真機(jī)上可能一直卡頓。我的經(jīng)驗(yàn)是做趨勢(shì)分析可以用模擬器但任何系統(tǒng)性結(jié)論必須到真機(jī)上復(fù)核。第三個(gè)誤判是把Debug版的性能當(dāng)Release版。Debug模式下代碼未混淆、未優(yōu)化系統(tǒng)中還有大量日志輸出和調(diào)試信息CPU和內(nèi)存占用都會(huì)明顯偏高。線上問題的復(fù)現(xiàn)如果只在Debug上成立先不要急著改代碼打開profileable的Release配置再跑一遍很多時(shí)候會(huì)發(fā)現(xiàn)根本不是同一個(gè)問題。6.2 容易被忽略的坑GC延遲、系統(tǒng)內(nèi)存壓縮、日志采樣上限另一個(gè)在實(shí)戰(zhàn)中耗費(fèi)過(guò)時(shí)間的坑是系統(tǒng)垃圾回收帶來(lái)的延遲。Java堆頻繁增長(zhǎng)到水位線后系統(tǒng)會(huì)自動(dòng)觸發(fā)GC此時(shí)主線程經(jīng)常會(huì)被暫停表現(xiàn)為瞬時(shí)卡頓。這種卡頓用CPU占用率看往往不高甚至還會(huì)出現(xiàn)內(nèi)存曲線掉頭向下的“假平穩(wěn)”。排查時(shí)一定要搭配看GC日志或Perfetto的GC片段否則你會(huì)盯著CPU火焰圖卻找不到真正兇手。iOS側(cè)最容易被忽略的是內(nèi)存壓縮進(jìn)程內(nèi)存上限逼近時(shí)系統(tǒng)會(huì)壓縮舊頁(yè)面來(lái)騰出可用空間表面上看內(nèi)存曲線不高但CPU會(huì)多出大量解壓、壓縮的工作。在Instruments里同時(shí)對(duì)比“Compressed Memory”和CPU占用率這類問題會(huì)更容易看清。還有一個(gè)偏工具層面的坑Perfetto和Instruments的長(zhǎng)trace輸出會(huì)非常大動(dòng)不動(dòng)幾百M(fèi)B甚至上GB。帶采樣頻率的文件很容易在傳輸時(shí)被截?cái)嗷蛘叽蜷_后卡死。我建議長(zhǎng)實(shí)操場(chǎng)景分段錄制每段控制在10到20秒之間明確標(biāo)記路徑然后再另跑一條全局趨勢(shì)的采樣顆粒度粗一點(diǎn)也沒事。兩段數(shù)據(jù)情景不同信息互補(bǔ)就不會(huì)因?yàn)橐粋€(gè)文件過(guò)大而丟掉全部線索。6.3 面對(duì)實(shí)際現(xiàn)場(chǎng)的工具速查表等于是自救清單最后把這套工具整理成一張表按“我想知道什么 - 用什么工具 - 注意什么”的路徑對(duì)照著參考監(jiān)測(cè)需求Android側(cè)推薦iOS側(cè)推薦主要注意點(diǎn)整體趨勢(shì)觀測(cè)adb top、PerfettoInstruments Activity Monitor只能看趨勢(shì)不能直接定位調(diào)用棧定位CPU熱點(diǎn)函數(shù)Android Profiler CPU錄制Instruments Time Profiler采樣型工具可能漏短耗時(shí)熱點(diǎn)定位內(nèi)存分配增長(zhǎng)Android Profiler Dump Java heapInstruments Allocations需要對(duì)比前后兩輪堆轉(zhuǎn)儲(chǔ)檢測(cè)泄漏與引用鏈LeakCanary、Memory GraphInstruments Leaks、Xcode Memory Graph線上默認(rèn)不生效需單獨(dú)處理系統(tǒng)級(jí)trace回溯PerfettoInstruments配合系統(tǒng)Trace長(zhǎng)trace文件要注意分段采集線上周期上報(bào)自建采樣或APM SDKMetricKit注意頻率和隱私邊界灰度放量我在實(shí)操項(xiàng)目里養(yǎng)成的習(xí)慣是拿這張表反過(guò)來(lái)倒推現(xiàn)象先歸類再選工具不要打開一個(gè)工具就什么信息都想抓。性能監(jiān)控生態(tài)發(fā)展到2026年已經(jīng)比較成熟但真正拉開差距的并不是工具本身而是你對(duì)工具輸出數(shù)據(jù)的理解方式。CPU和內(nèi)存不是兩個(gè)孤立的指標(biāo)它們經(jīng)常互相牽引——內(nèi)存壓縮帶來(lái)CPU上升GC卡頓引發(fā)掉幀CPU過(guò)載導(dǎo)致線程調(diào)度延遲。多數(shù)據(jù)源交叉驗(yàn)證比在單一工具里死磕更有價(jià)值。把這些基礎(chǔ)工具用扎實(shí)后續(xù)再上更重的自動(dòng)化或AI輔助分析時(shí)你的判斷力也能跟得上。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
超碰人人干| 久久久久久亚洲精品中文字幕人妻| 成人综合色网| 久久久国产护士丝袜美腿一| 中文字幕第页| 国产v亚洲v日韩v欧美v片另类| 人妻精品综合中文字幕在线 | 欧美色图欧美| 青青草大香蕉在线视频| 日韩精品区二区三区不卡| 日本淫乱女一区二区三区视频| 欲射影视| 天天干人妇| 99亚洲国产精品色一区二区三区| 9ⅰ久久久天天| 白丝1区2区3区| 亚洲成人性爱在线观看| 久久久久久人| 色噜噜人妻丝袜AV资源| 丁香五月久久| 日本免费一级AAA大片器| 亚洲天堂一区二区| 国产一区二区在线播放,久久亚洲精品中文字幕第一区,亚洲精品在线中文字幕视频 | 中文字幕国产| 尤物网站91| 久久日韩肥臀| 一本色道久久综合亚洲二区三区| 青青11操操操操操操操操| 综合欧美日本三级| 亚洲色图日韩精品| 九九九国产精品| 国产精品自产拍在线观看社区| 欧美91变态| 日韩久久三区| 9久超碰| 网页导航五月天免费一二三区| 精品无码一区二区三区色欲| 韩国免费播放一级毛片| 91美女国产在线| 综合欧美日韩在线| 国产一区二区三区,在线观看观看| 国产少妇肉丝在线观看| 五月丁香在线| 国产精品白丝在线播放| 三级色影综合网| 精品视频一区二区| 91在线视频免费中出| 国产午夜激片Av毛片不卡| 亚洲欧美日韩制服另类| 久久精品超碰| 2017超碰| 欧美天堂第二区| 久久一区二区三区入口| 粉嫩AV一区夜夜嗨| 久久综合久色欧美综合狠狠 | 在线视频资源| 男人的天堂免费| www.AV有限公司一区| 一区麻豆 高清中文字幕| 玖玖在线视频| 美女啊啊啊啊pc| 日日夜夜天天| 久久久久久久久久久久久久久性生活视频 | 亚洲射综合网| 欧美变态激情网| 婷婷伊人| 熟女一区二区三区| 激情文学亚洲| 亚洲综合草草| 国产在线能看的你懂的| 欧美熟女操屄| 亚洲色吧网| 婷婷三区| 日韩精品高清资源在线| 亚洲精品视频在线播放| 人妻激情偷乱视频一区二区三区 | 欧美日韩 强奸乱伦| 午夜精品久久久久久久99蜜桃一| 亚洲影视综合网| 精品一区二区三区四区外站| 78精品| 99999精品| 91爽啪| 天天看少妇| 99久热精品99re6热| 青青草原人妻| 麻豆伊人网| 好一吊区二区| 黄色人人| 欧美色偷拍| 青青草狠狠撸| 韩日色费| 成功精品影院| 玖玖大干人妻| 亚洲国产精品99久久久| 99成人| 中日韩久久人妻一区二区| 成熟熟女国产精品一区二区| 狠狠操狠狠操操| 欧美视频一区二区在线| 五月丁香成人网| 久久欧洲| 夜夜免费视频| 欧美日韩操逼动图| 日日黄色三级网站| 亚洲自拍天堂| 蜜桃视频精品一区二区三区| 99久久无色码| 久久中文字幕在线观看| 亚洲天堂人妻熟妇视频| 97人肏| baiduhicn.com。| 欧美美女视频| 色色无码| 精品国产乱码久久久| 粉嫩不卡一区二区性爱| 九九热九九热| 中日韩久久人妻一区二区| 欧美少妇高潮久久91| 欧美成97爱| 熟女精品va中文字幕| 96精品在线| 成人情色综合网| 老熟女91av| 中日992视频| 国产 日韩 欧美高清| 日韩美女久久一区二区三区| 99久久久无码国产精品性啊聊| 亚洲欧美日韩免费电影| 天天综合有色网| 淫荡网址| 97久精品| 91n欧美| hd成人一区二区在线| 91九九九小逼| 思思性爱| 无码男人天堂| 思思热在线cao| 好淫网一二三视区| 无码人妻一区二区三区色欲aⅴ| www超碰| 久久婷婷一区| 偷拍 精品 另类 四区| 东京男人天堂| 好淫网一二三视区| 日韩中文字幕人妻视频| 黄色不卡视频| 大香蕉专区| 欧亚第一综合网| 亚洲一区中文精品| 91丝袜在线视频| 91午夜无码| 色女免费在线观看视频网址| 六月色色| 精品免费一区二区三区在线亚洲人成| 97免费在线观看| 丁香五月天激情网站| 久操九九九九九九九九九九九九九九九九九九九九九九九九九九九九 | 丁香婷婷久久 | 黄色欧美性爱视频| 国产激情在线| 欧美日本久久精品一区 | AA特级绝黄| 久久久久久久久九九久孕交| 入口操逼网站| 99中文字幕| 精品国产72| 国产日韩精品suv| 成人久久无码www| 手机在线A片| 极品出轨视频网站| 91视频观看网站| 搡老人老9丨女老熟人| 91麻豆天美国产欧美高潮| 婷婷综合五月天| a亚洲欧美色欲| 超碰在线综合97| 极品粉嫩一区二区| 一区二区三区 日韩欧美| 婷婷性网| 国产97综合| 久久欧美性爱视频| 秋霞成人一级在线观看| 色香av| 老司机免费视频在线91| 欧美九9 9 9| 久久久精品91八戒| 国产二区三区免费视频| 欧洲综合色| 伊蕉97蜜桃97狠狠综合干| 亚洲啪啪性视频| 久久狠狠色噜噜狠狠狠狠97| 国产天天看| 欧美精品第3页| 粉嫩粉嫩一区性色AV片| 涩综合导航| 91第一页| 欧美精品久久| 99re视频在线观看这里只有精品| av天堂天堂av日韩| 人人操我人人干| 97视频播放| 97操97色| 920日本午夜免费| 欧美日韩国内不卡| www.yeyecao| 久久少妇| 青娱乐黄色录像| 亚洲第一页欧美| 中文字幕二区日韩天堂| 91N欧美| 99视频自拍| 亚洲成人日韩小说| 北约熟女超碰| 国产成人综合在线播放| 亚洲人妻中文高清| 一区二区三区 日韩欧美| 日本性感人妻91| 天美传媒AV在线播放| 锕锕好爽 死我在线观看| 青青草久久一区网| 蜜臀99精品国产高清在线观看| 中文字幕久久精视频久久大全| 久久免费老司机精品| 五月天啪啪| 亚洲丝袜二区| 97超碰69| 上床不卡网站| 97精品国产精品免费观看| 啊啊啊啊啊啊啊国| 久久亚洲天天做| 久久视网78| 亚洲欧洲另类| 高潮内射在线| 国产女人高潮视频| 97国产精品国| 国产精品亚洲一区二区三区四区| 国产精品自在线发布| 九九精品99| 日韩亚洲中文字幕在线| 亚洲麻豆av一区二区| 欧美色图20P| 2017大香蕉| 亚洲**2021在线观看| 精品久久久久久无码| 日韩有码中文字幕女同性恋| 干少妇视频| 色欲久久99国产精品久久久久久| 日本幼女18+| 久久男人天堂| 毛片一区二区| a片久久久久久久久久久久 | 九九九热| 婷婷丁香五月天综合东京热| v91av| 97超碰资源网| 极品少妇久久久| 一级做受视频免费是看美女| 精品亚洲黄色片 国产精品导航一区二区 | 天天躁日日躁成人字幕aⅴ| 97九色| 国产色精品午夜大片| www99热| 国产av强奸美女| 日本欧美韩国国产在线| 亚洲精品99| 四季AV一区二区凹凸精品小说| 97久久国产精品| 无码人妻一区二区三区免费九色| 国产高清无码一区三区二区| 黑丝91视频| 97超碰无码网| 男人的天堂99| 夜色AV无码手机在线影院| 另类图片五月| 激情文学 国产一二三aV| 欧美激情亚洲情色| 国产精品毛片?v一区二区三区 | 国产精品制服丝袜中文字幕日韩一区二区三区| 色偷偷男人的天堂麻豆| 日韩免费一级性爱视频| 9热9热综合网| 亚洲美女精品九九视频| 国产精品人妻无码久久久老鸭窝| 国产亚洲精品av一区| 日本青青草在线| 中文字幕诱惑制服人妻丝袜美丝袜美| 风间由美日韩欧美久久| 日韩一性一交一A片俄罗斯| 亚洲欧美洲综合| 激情抓乳插进去啪啪啪日韩| 97精品久久久久中文字幕| 亚洲欧美91√| 国产女人操逼视频| 久久草视频污视频| 嗯嗯啊啊好大好爽| 久久婷婷亚洲欧| 又大又大又大又粗爽高潮观看 | 亚洲三级网址久久最新| 中文字幕福利视频一区二区三区在线观看| 成人一道本免费视频| 丝袜 亚洲 偷拍| 曰本精品久久久| 国产强奸乱伦第1页| 午夜男女爽爽爽在线视频| 亚洲熟女乱综合一区二区三区| 色九九久九九| 婷婷丁香成人| 天天欧美97| 国产欧美日韩在线不卡第一页| 台欧久久精品视频| 97超碰人妻| 91超碰人人操| 亚洲一二三| 性爱网站一区二区| 9久超碰| 欧美少妇高潮| 91在线精品| 2017大香蕉国产精品久久| 日韩成人性日韩成人性爱视频在线免费观看| 97干在线| 亚洲黄色电影| 九九热九九热| 青娱乐999| 色嘟嘟人妻天堂网| av网站国产主播在线| 一区 欧美 日韩 麻豆| 狠狠婷婷亚洲中文综合久久| 超碰97男人| 日韩中文字幕宗合在线| 18禁中文字幕| 青青欧洲黑| av日韩在线观看电影| 夜夜一区二区| 人妻献身系列第54部| 亚拍在线| 91色情黑丝搞鸡在线观看一区二区三区三州| 97在线资源| 欧美黄色片AAAAA| 天美av在线| 日本免费一区二| 操东北女人| 殴洲老熟女| 久操不卡视频| 超碰在线免费一区二区三区| 美女的肌被草喷水视频| 干婷婷综合网| 中文久久久| 精品一区二区啪啪啪| 91九色丨风韵犹存| 操淫穴亚洲五月丁香 | 国产极品美女高潮无套在线观看| 97网站在线观看| 亚洲情欲| 欧美综合色综合| 快点操死我| 丝袜美腿制服人妻二区中文字幕| 美女久久久久久久久久久| 欧美色色色| 日本一区二区三区免费观看| 亚洲丝袜少妇在线| 综合91网| 亚洲 图片 综合91| 不卡免费av在线播放| 少妇综合网| 青青草影视蜜久久| 情色AV电影| 色色福利| 久久首页| 亚洲啪啪视频免费| 干美女人妻| 亚洲天堂电影精品一区| 91丨人妻丨国产丨丝袜| 欧洲站一级二级三级h| 97超碰色屌| 91大学精品激情戏| 国产伦精品一区二区三区在线观| 狼狼色丁香久久婷婷综合五月 | 青娱乐国产精品| 久久久久久久久久久久久女过产乱-少妇高潮一区二区三区喷水-成人AV | 亚洲97成人在线观看| 熟女久久| 欧美综合色综合| 97频视在线| 午夜天堂精品久久| 最新AVzaixian| 韩国黄色片精品久久久| 日日操丁香五月天| 啊啊啊草死我| 超碰97亚洲| 欧美日韩人妻精品系列一区二区三区| 黄色十八禁网站| 国产女上位好爽在线| 性吧在线视频| 九九热精品在线| 中文字幕丝袜国产第一页不卡| 精品无码秘 人妻一区二区| 偷拍导航视频网站| 久久久久国色αv免费观看| 97操综合| 就去色综合| 亚洲精品不卡一二三区| 国产久久一区二区三区野外在线| 亚洲国产一级中文综合久久天堂在线免费观看 | 超碰99在线观看| 夜夜爽妓女| 天天综合91| 毛片一区二区| 青娱乐淫乱1314| 日韩三级在线观看网站| 好爽要喷了| 精品人妻一区二区蜜桃视频| 亚洲97p| 久操视频免费观看| 国产自偷| 色九九久九九| 少妇被c 黄 免费观看| 国产一级舔足在线观看| 97ai亚洲| 秋霞一集毛片观看| 岛国在线一区二区三区| 97超碰磁| 亚洲巨爆乳一区二区三区四季网| 亚洲成人性爱网站在线播放| 无码高清操逼网址| 国产精品黄色三级av| 视频黄色国产一级| 丁香五月天堂网| japan日本高清乱xxxx| 蜜乳Av成人片网站| 人妻啊啊人妻啊| 综合 青草 伊久久 影院 综合| 蜜臀AV成人精品蜜臀AV久久| 睡产熟女乱伦| 精品天堂| 欧美综合91| 久久精品72| 黄色AAAAAAAAAAA大片| 欧美亚州综合网图片| 东京太热男人的天堂久久久| 亚州熟女乱伦| A 天堂在线观看视频| 中文字幕乱在线伦视频中文字幕乱码在线| 国产色呦呦| 热天堂一区二区| 久久精品99久久久久久| 91色狼| 青娱乐国产剧情av一区| 午夜福利视频在线一区| 成人性爱美曰韩| 一区二区娱乐网站| 色女综合| 亚洲熟女诱惑| 91久久精品蜜臀| 久久精品一区| 一区二区三区四区久久视1| 4tube欧美女厕所| 中文字幕美女91| 五月婷色| 少妇精品久久久八区九区| 成人免费性爱视视| 99亚洲精品| 99国内熟女露脸视频| 婷婷精品久久av影视| 久久精品久久久久久久久| 91久久婷婷| 天天日天天射天天干| 伊人96在线| 久艹日日日| 亚洲国产日韩欧美熟妇在线| 性色av一区二区| 国产成人91一区二区三区| 自偷自拍的亚洲视频| 人人喜人人妻| 欧美日日人人天天| 亚洲AV无码AV吞精久久久久 | 国产日韩欧美操逼视频| 热天堂一区二区| 综合第一页| 亚洲色图一区二区三区| 久久精彩视频| 九九久久久| 五月激情综合网| 97操B| 亚洲性爱无码乱伦av| 亚洲天堂日本| 乱伦av麻豆| 60秒免费小视频| 秋霞一级A片黄色视频| 五月丁香综合| 蜜臀久久99精品久久久久久酒店| 久久人妻视频| 97资源久久| 全球成人中文在线| 欧美另类自拍 | 久久久久久中文版| 污色区网站| 啊啊啊啊视频免费| 91爱| 高树玛利亚无码流出| 久久久91| 人妻在线臀日韩| 超碰在线人妻中文字幕| 欧洲乱码视频| 91大神精品长腿在线观看网站| 嗯啊啊啊轻点视频 | 人妻天天夜夜爽一区二区| 国产麻豆一区二三区| 操婢日韩| 伊人嫩草| 国产超碰国产97| 久久六六| 亚洲日韩XXX| 婷婷丁香五月激情啪啪| 99久久久| 激情五月天色色网| 欧美高清无码免费视频高清版| 国产青视频| 97超碰久久| 天天日天天屌天天操| 不卡啪啪视频| 日韩激情无码影院| 中文字幕av片| 国产夜夜艹| 日韩国产精品人妻无码久久久| 国产13区| 岛国片在线观看视频亚洲| 97精品全部| 欧美九九99久久精品| 波多野42部无码喷潮在线观看| 老熟妇一区二区三区| 国产无套粉嫩白浆在| 91熟女丨老女人| 无码视频一区二区| 美国三级日本三级久久99| 在线国产探花| 特污精品女优骚货黄色视频在线免费观看| 五月色网| 国产精品高潮久久久无码| 97超碰免费生活| 成人三级片无码| 国产91影院| 夜夜做夜夜爽精品视频| 久久久久一本一区二区青青蜜月| 人妻av在线| 新婚人妻扶着粗大强行坐下| av爱爱爱| 丁香婷婷五月| 久久久四区| 国产白丝在线| 人妻出轨一区二区三区| 久久性爱大全| 东北丰满熟女国产一区 | 欧美人与动性人交a| 一摸二插三插| 素人无码中文字幕| 久久綜合很很很| 国产激情片在线观看| 精品久久久高清无码| 91色色网站| 亚洲Av诱惑| 中文字幕日产av人| 丰满人妻一区二区三区四| 蜜桃无码AV一区二区| 国产精品自拍xxxx| 青青伊人这里只有精品| 五十路成人在线视频二区三区| 中文字幕二区日韩天堂| 人人透人人操| 婷婷亚洲综合| 久久久婷| 久久一区二区三区入口| 日本人妻A片成人免费看片| 久久男女激情视频网站| 日韩性爱小视频在线观看| 成人久久久精品| av草草在线电影| 97jingpin| 人妻人久久精品中文字幕| 人妻天堂三区| 欧美日韩中文视频播放| 在线 制服丝袜中出 人妻| 国产尤物AV尤物在线观看不卡| 综合免费无码中文| 日韩AV熟女乱伦| 亚洲乱熟女一区二区三区大香蕉| 日韩激情小说一区二区| A片大香蕉在线| 久久免费99精品久久久久久| 国产美女裸体秘 永久无遮挡| se01国产在线视频| 欧美日韩性爱操大逼| 日韩av影片在线观看| 久久丁香五月婷婷| 热久久精品| 操b网站亚洲无码| 黄色av播放免不| 青青草一区二区高清无码视频| 亚洲久久东京热一二三四五区视频| 人妻喷水| 欧美裸体美女日麻屄| 色哟哟综合| 精品国产无码中文| 欧美一区91大爱| 天美一二三在线观看Av| 999熟女精品| 黑人粗大V S日韩女优视频| 91N综合网| 久久久新亚洲AV| 国产在线能看的你懂的| 婷婷视频在线免费观看| 一区二区三区 丝袜 高跟 美腿| 国模不卡一本二本三电影| 超碰综合色| 天无日色综合| 男人天堂无码| 呦呦影院| 天天日日夜夜| 国产精品丝袜久久亚洲不卡| 四方色播| 国产av又色又爽又黄| 亚洲欧美精品91| 婷婷五月天色网| juliaann丝袜| 成人 日本A片无码8888| 亚州精人品大香蕉| 后入日本1234| 九九九免费视频| 大鸡巴久久| 亚洲欧洲精品视频发布| 中文字幕视频在线观看一区二区| 国产一级内射无挡观看| 亚洲午夜福利在线影院| 精品无吗久久| 立川理惠被中出无码| 国产日韩欧美三级片| 91网站18在线| dy888午夜老子影视达达兔| 久久亚洲国产成人| 成人资源中文字幕在线观看天天| 亚欧中文字幕在线视频| 啊啊啊在线观看| · —级AA伦aa坐爱午夜极速ⅴA一区天天噪天天噪天天噪 | 91日韩在线| 黄色十八禁| 成人性爱AV在线免费观看| 久久97资源 网| 91精品国产乱码| 无码精品久久| 人人爽夜夜操| 伊人宅男大香蕉| 美国一区二区免费视频| 青青欧洲黑| 丁香五六月啪啪| 在线只有精品| 精人妻一区二区三区| 日韩在线欧美精品一区二区| 男人天堂站| 欧美性爱第1 页| 亚洲精品一二三四区| 91亚洲欧洲| 国产乱码久久| 日本不卡一区| 亚洲国产一区二区三区在线| 亚洲天堂一区| 中文字幕av乱伦| 久久久久久久久9| 操逼啊啊啊91| 欧美精品欧美精品系列| 黄色片,com| 偷拍亚洲高清图片| 亚洲国产91精品一区二区久久| 欧美大香蕉97| 无码不卡亚洲成?人片| 欧美狠狠弄| 欧美一二三级精品在线| 四虎AV在线观看| 97久久精品| 免费农村成人少妇人妻Aa一区二区视频 | 97狠狠| 黑丝内射一区二区三区| 92一区二区| 丁香激情五月天| 成·人免费午夜在线观看| 人妻熟女字幕一区二区| 超碰久超碰久| 性色高清在线| 夜夜天天噜狠狠爱2021| 超碰偷拍| 五月婷婷六月丁香| 一起草三级AV电影在线观看 | 青草视频人妻在线观看| 爆操无码| 欧美裸体美女日麻屄| 韩国久久97| 岛国网址国产 | 亚洲在钱| 狼人综合婷婷激情四射 | 国产精品嫩草久久久久| 欧美激情黑人| 校园春色之综合网| 99re国产精品视频| julia国产在线| 日本一片一区| 日本午夜福利影院| 一区AV| 一本一首道人妻少妇免费久久| 国产午夜激片Av毛片不卡| 亚洲男人天堂2017| 亚洲色图美腿丝袜| 超碰av在线| 免费啪啪av| 9精品久久久久| 欧美激情视频一区二区三区不卡| av日韩在线观看电影| 天天综合97| 少妇高潮喷水无套久久久久久| 翘臀vidoes| 久久精品国产亚洲AV无码电影| 屁股久久久久久久久| 熟女91网站| 大香蕉综合在线| 久久久久成人蜜桃精品| 亚洲美女自拍偷拍视频| 人妻精品一区二区三区| 日韩78m视频| 久久久久久久一级黄色打同平台| 国产性久久久| 精品人妻免费观看| 欧美精品97| 久久9精品网站| 国产丰满少妇久久久精品影院| 国产a级午夜毛片| 欧美人人曰人人操人人射射 | av黄图片在线观看| 久久夜嗨| 久久9 9 9精品| 久久久久久久人妻| 中文字幕 国产 精品| 亚洲,日韩,欧美,成人播放| 人妻熟女一区二区在线视频| 四虎在线观看网站| 91欧美另类| 强上我不卡卡| 99re3这里只有精品| 久久精品国产精品亚洲艾通辽熟妇 | 99色婷婷| 蜜臀一区二区三区亚洲最新章节在线观看 - 高清蜜臀一区二区三区亚洲全集播放 | 狠狠五月天| 久草免费福利在线播放| 亚州一区二区| 亚州色图欧美色图| 狠狠操狠狠燥| 女人的天堂大香蕉网| 99热在线播放| 成人片在线播放| 欧美巨大性舒爽顶到了| 丝袜美腿操av| 黑白配性爱AV成| 97伪v| 欧美日韩精品国产91| 91jk色拍| 亚州色站 日韩电影| 夜夜操天天肏| 有码色中文字幕在线观看| 欧美成不卡网| 草伊人高潮喷水超碰| 国产农村妇女精品1区二区| 综合干干干av久久久综合网| 美女露胸露奶头| 久久久久久性爱视频| 久久久久久久少妇| 色女综合| 无码视频一区二区| 欧美在线视频播放| 97爱啪| 91伊人久久在线| 久热这里| 欧美天天搞| 88xx成人精品视频| 国产精品一级片在线看| 国产毛片久久久久久久| 夜夜天天噜狠狠爱2021| 精品v日韩欧美国产| 成人麻豆av电影网站| 人人爱人人操人人性| 小情侣高清国产在线视频| 色婷视频| 蜜桃久久久久久久| 夜夜嗷嗷一区二区| 丰满人妻一区二区中文| 啊啊啊啊无码| 狠狠干妹子| 亚洲欧美碰碰| 国产黄色视频久久| 日韩久久.一级黄色片| 亚洲成av人片色午夜乱码| 蜜臀av在线播放一区二区三区| 色综合98| 9 9无尺码天堂网| 久草新在线| 午夜男女爽爽爽影院视频| 最新日本中文字幕| 丝袜美腿制服人妻二区中文字幕| 色五月亚洲| 超碰97色色| 97 国产精品| 成人精品无码| 欧美午夜一区二区三区| 国产一级片| 青青草五月天| 欧美写真视频一区| 亚洲中文字幕熟女| 精品一区二区成人| 激情自拍 校园春色| 欧美人人天天网| 夜夜无码| 神马久久久久久| 无码人妻一区二区三区色欲aⅴ| 日韩AV一起草| 黄色不卡视频| 久久久久久久97| 国产三级日产三级韩国三级| 欧美精品另类人妖xxxx| 久久 久久国内精品亚洲| 色香AV| 国产精品亚洲免费| 亚洲欧美一区二区不卡视频播放 | 久久久久女教师免费一区 | 黄色区免费观看中文字幕| 欧美日本中字另类在线| 天天干天天操天天拍| 97超碰色屌| 久久二| 婷婷亚洲五月***久久| 国产60区。| 91丨人妻丨国产丨丝袜| 国产精品操| 操一区| 玖日综合网| 91艹B视频| 精品一久久久| 成人线上超碰| 中文字幕jul-617人妻熟女| 超碰97资源大奶| 日韩熟女精一区二区三区不卡| JIZZJIZZ亚洲女人被躁| 久久麻豆一区二区| 夜夜 中文视频rt| 内射夫妻三片| 日韩精品熟妇| 亚洲男人综合| 久久这里都是精品| 日日爱99| 九色 人妻 大香蕉| 亚洲无线码一区国产欧美国| 国产suv精品一区二区四区999 | 欧美色图片欧美色图| 亚洲综合图片在线| 国产AV精久久| 伊人一区二区在线播放| 五月婷婷丁香六月丁香| 国产精品免费久久久久久久久久| 激情婷婷丁香| 俞拍久久国应视频| 蜜桃视频一区二区三区| 一区二区三区探花在线观看| 97亚洲在线| 亚洲无码超碰免费| 思思热影视| 色y情视频免费看| 亚洲乱妇p22| 国内精品不卡无毒99999| 久久九九99| 丝袜无码a片| 精品一区二区2| 视频在线观看免费一区二区三区| 啊v在线观看视频| 精品人妻伦一二三区久久| 欧美高清16| 乱日视频| 无码精品久久久久久亚洲| 91在线美女| 国产午夜福利专区综合| 日本不卡二三区| 99热在线播放| 97超碰国产亚洲精品资源| 蜜臀久久99精品久久久久久-DVD原版全| 亚洲人妻一区二区三区| 99久久亚洲精品无码毛片潘甜甜 | 玖玖爱视频网站| 91精品成人www| 人人看黄色视频| 男人的天堂在线| 在线看免费无码AV天堂的| 国产美女自拍视频| 97任你吞精| 久热伊人| 国产欧美岛国精品一区| 91久热| 国产一区二区在线看| 99色婷婷中文字幕乱色| 91美女片在线| 欧美精品宗合| 欧美日韩性爱无码| www.婷婷| 超碰这里只有精品| 人妻91少妇| 蜜乳AV免费观看| 六九九九| av天天在线观看| 韩国毛片一区二区三区| 精品射1999| 99激情视频| 欧美日韩婷婷中文| 一级AV性爱| 大白逼三四级| 亚洲婷婷综合网| 91人妻久久久久久久久久久久久| 香蕉99秘 精品一区丁香| 一区二区三区成人高清视频| 一区二区 电影 亚洲| 久热伊人| 99re公开精品免费视频| 2025年A片视频精品| 亚洲色图欧美色18直播在线| 亚洲色图综合网| 亚洲另类久操网| 怡红院一区二区熟女人妻| 免费中文综合精品| 综合亚洲网| 亚洲影视高清第一页| 久插综合| 91电影色诱| 日本人体九九九九九九| 国产玖玖| 亚洲夜夜欢无码一区二区 | 黄色免费网页无码| 熟妇女伦乱视频| 激情小说激情视频| 亚洲成人妻日韩在线| 新97国产超碰| 大香蕉免| 久久大香蕉手机高清| 久久久一热在线播放| 大香蕉黄色一区| 国产中文精品一区二区在线观看| 日本国产亚洲一区在线观看| 国产精品久久久久久久无码AV| 欧美 牲| 啊啊啊 在线观看| 黄色大片一区二区密桃丝袜| 亚洲最大91网| 超碰在线99| 人人爱操| 91黑丝少妇| 色一射色一射| 欧美日韩国第一区| 夜夜夜夜夜夜夜夜夜狠狠狠狠狠狠狠| 亚洲色图20p| 欧美色九九九| 色老汉色| 超碰97导航| 久操视频在线| 国产精品乱码久久| 亚洲97综| 午夜AV人气不卡| 激情无码日韩| 操人91| 91校园春色长篇| 91红杏| 国产美女口爆吞精| 人妻少妇久久| 日本布卡一区二三区| 一区二区乱码福利| 亚洲精品国产精品成人| 欧美性高潮在线| 欧美色性情| 91N综合网| 精品无码久久久久久久久果冻糖心| 午夜噜噜噜| 国产一级高清免费观看| 高清无码久操视频| 国产精品干干干| 欧美日韩操逼嗦吊| 欧苏综合色综合| 亚洲精品一区二区免费在线观看| 天天日美女的B| 清纯唯美综合亚洲| 久久久精品网| 无码高清国产AV| 白嫩国模丰满一二三区| 婷婷大香蕉| 五月天婷婷成人网| 久久天天躁日日躁狠狠躁| 日韩少妇在线视频| 欧美亚洲综合高清在线| 国产精品久久久久久久久久梁医生| 超碰97亚洲| 人妻aa| 欧州色图区| 亚洲加勒比色图| 白丝一区| 91GD.COM| 欧美一二在线| 久久久精品网| 精品人妻一区二区视频| 玖玖人人爱| av东京热男人的天堂| 久久六六| 国产一区二区三区视频在线看| 五月丁香色综合| 国产丰满少妇久久久精品影院| 欧综合网| 夜夜躁狠狠躁日日躁av| 97人妻免费中文字幕| 人妻少妇久久久| 亚春色色| 精品成人无码| 五月婷婷丁香| 色偷综合| 久操网无码在线| av优播| 亚洲欧美啪啪| 天天操人人操狠狠插| 精品免费一区二区三区在线亚洲人成| 美国三级日本三级久久99| 国产真实子伦对白| 国模精品一区二区三区苹果色戒| 91激情综合| 人人性爱视频免费| 97色婷| 综合97久久| 操逼操逼逼操操逼91 | 国产67194| 久久婷婷欧美| 麻豆国产视频精品观看| 97天天爽| 啊啊啊想要| 色色五月丁香| 国产精品久久久午夜夜伦鲁鲁| 亚洲中文字幕在现观看| www.yw尤物| 熟女AV一区| 2020中文在线一区二区三区| 四虎永久在线精品免费网址| 国产久久久久久| 手机在线人成免费视频| 中文字幕一区 二 区 三 四 五 区日 日 骚 | 少妇人妻激情四射| 日韩欧美大力操| 欧美天天谢综合网| 人人看人人插| 丁香五月社区| 五月天久久人妻| 欧美激情内射| 九九Av| 久久99草| 97精品熟女少妇一区 | 天天操天天插| 无码人妻精品一区二区三区九九 | 成人羞羞视频国产| 久9视频| 日本一区不卡| 伊人影院在线理论播放| 欧洲综合无码| 日韩有码免费视频| 东京热大香蕉| 人妻AV在线| 日语五十路和六十路亚洲国产精品| 麻豆影音天美视频| 精品一区二区国产日韩| 日韩AV一区二区三区三州三州| 日本1区2区不卡视频| 亚洲限制级| 立川理惠加勒比无码| 无码人妻系列少妇| 久热9| 操逼视频国产无套| 久草资源欧美在线视频| 欧美爱三级日韩久久| 97国产天堂岛| 久久性视频| 97碰久久| 久日91在线| 国产无码一二三区| 国产不卡的视频 | 91三级理论片播放器| 久久久久幕乱码| 久久91精品国产9丨久久分亭| 躁躁日曰躁2020| 一区二区精品日韩欧美在线观看| 噜噜噜久久亚洲精品色情| 啪一啪免费视频| 激情在线青青操| 六月丁香啪啪| 91天天综合网| 麻豆av一区二区三区| 中文字幕天堂在线| 91 综合 色| 丁香五月自拍| 中文字幕国产在线天堂| 伊人991| 欧美另类色图片| 香蕉国产精品麻豆亚洲欧美日韩| 人妻无码久久一区二区三区免费| 欧美成va视频网站| 夜色综合| www久久精品| 激情久久久| wwwxxx日本爽| 亚洲精品电影| 日韩人妻丝袜美腿中文| 五月开心网| 91香蕉视频在线观看免费| 欧美97色| 91 亚洲情侣偷拍 久久| 九九久久久九九| 亚洲精品无码少妇久久| 日本操逼无码| 丰满搜索结果 -第18页- 久久高清无码 | 3级毛片一二| 久久九精品| 91超碰人人| 99久久久无码国产精品性男| 欧美一区二区男人天堂| 3P丝袜熟女 色综合| 97碰碰日本乱偷人妻中文的| 欧美三级一级| 精品人妻中文字幕4399| 亚洲一区在线观看欧洲 | 久久久久久久| 97在线观看免费| 欧美超碰人妻97| 熟女一区二区| 男人下部插入女人下部| 五月丁香综合| 久久婷婷亚洲| 大香蕉人妻| 深夜国产一区二区三区在线看| 乱伦a片视频| a片 xxxx受爽视频| 在线视频亚洲无码| 日本久久久久久久久久| 青青草国产盗摄一二三区| 精品国产72| 国产欧美一区激情交| 日逼国产| 日韩人妻播放| 久草国产在线视频| 日韩中文字幕视频| 国产精品久久久久婷婷二区次| 五月丁香色情| 不卡一区视频| 国产91精品久久久久久久网曝门| 天天天天天干夜夜夜夜夜操| 午夜福利国产欧美日韩夜夜| 97精品国产| 国产无码久久高清| 乱欲视频|