久久亚洲成a人片熟女精品色一区二区三区|国产精品视频第一精品视频|av天堂热无码手机版|亚洲?v无码久久无遮挡|国产精品偷伦视频免费观看国产|麻豆国产自产精品丰满熟妇|av无码av不卡一区二区|久久亚洲精品中文字

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

嵌入式內(nèi)存管理實戰(zhàn):泄漏、碎片化與棧溢出排查指南

嵌入式內(nèi)存管理實戰(zhàn):泄漏、碎片化與棧溢出排查指南 你有過這種經(jīng)歷嗎一個設備放產(chǎn)線上一跑就是好幾天突然某天早上現(xiàn)場打電話過來說設備掛了看門狗復位串口日志最后幾行全是亂碼。上去看了一眼CPU占用不高溫度也正常Flash也還有空間想了半天才發(fā)現(xiàn)是內(nèi)存的問題——不是內(nèi)存條壞了而是代碼里的內(nèi)存被悄悄耗光、踩爛、碎片化了。這就是我寫“一堂嵌入式內(nèi)存課”的原因。嵌入式開發(fā)里內(nèi)存從來不是“配置項”而是你每天都在跟它博弈的對手。很多人學單片機、學Linux驅(qū)動、學RTOS可以寫出一堆功能正常的代碼但一到長時間運行、高并發(fā)中斷、多任務調(diào)度的場景就露餡。而內(nèi)存相關的知識點恰恰也是嵌入式面試里的高頻八股結構體對齊為什么浪費空間malloc失敗是不是只有內(nèi)存不夠這一個原因棧和堆到底誰快全局變量為什么最好別亂用這些問題背答案容易真拿到代碼里說清楚很多人會卡殼。這篇文章不打算給你上一節(jié)學院派的理論課我會從實際項目的角度出發(fā)把嵌入式內(nèi)存的整個框架拆開內(nèi)存到底長什么樣、哪些地方容易出問題、出了問題怎么定位、平時怎么從設計上省內(nèi)存。無論你是剛轉(zhuǎn)嵌入式的小白還是被線上問題折磨的苦逼工程師或者正在準備嵌入式崗位面試這篇內(nèi)容都值得你花十分鐘慢慢看完。1. 為什么嵌入式開發(fā)者必須把內(nèi)存當成第一等大事1.1 一個跑了幾天的設備為什么說掛就掛先講一個我實際處理過的故障。一個遠程升級后的終端設備用戶反饋平均每三天自動重啟一次。排查方向一開始完全跑偏了懷疑是網(wǎng)絡心跳超時導致看門狗復位又懷疑是Flash寫入導致系統(tǒng)卡死查了兩周沒結果。后來我把日志里每次復位前的上下文全部打出來發(fā)現(xiàn)進程是在調(diào)用一個網(wǎng)絡報文解析函數(shù)時掛掉的再往深挖是函數(shù)里有一段對緩沖區(qū)寫入的操作長度沒有做邊界檢查數(shù)據(jù)稍大就把棧給踩了。這種問題在開發(fā)環(huán)境里很難復現(xiàn)因為測試數(shù)據(jù)量小你不可能每次都發(fā)超長報文可一旦上了產(chǎn)線各種極端情況都會冒出來。這個案例想說明一個非常樸素的道理嵌入式環(huán)境里的大部分嚴重故障根源都在內(nèi)存。棧溢出、堆越界、野指針、內(nèi)存泄漏它們不會立刻讓你程序崩掉而是像一顆定時炸彈跑幾小時、幾天、甚至幾周后突然發(fā)作。更麻煩的是這類問題通常在開發(fā)機上無法穩(wěn)定復現(xiàn)等到現(xiàn)場才暴露排障成本極其高昂。所以這塊內(nèi)容值得你提前用心學而不是等炸彈炸了再補課。1.2 從面試題到架構設計內(nèi)存是嵌入式崗位的分水嶺嵌入式崗位的面試題里和內(nèi)存相關的題目幾乎必考。我隨手列幾個高頻的sizeof一個結構體為什么不是成員大小之和malloc返回NULL的概率有多大返回非NULL就一定能用嗎free之后指針為什么要置NULL局部數(shù)組開多大才算合理遞歸在嵌入式里為什么危險這些題目考的不是記憶力而是你有沒有真正理解程序運行時的內(nèi)存模型。能背出答案的人很多但能把答案講透的人很少。比如結構體對齊很多人知道CPU為了性能會填充字節(jié)但到了自己定義結構體時依然把char、uint32_t、uint16_t隨便排列一個簡單的配置文件結構體白白多占幾十字節(jié)。再比如malloc失敗很多人以為系統(tǒng)只剩下一點點內(nèi)存才會失敗但實際情況里堆碎片化導致連續(xù)大塊內(nèi)存分配失敗比真正物理內(nèi)存不足要常見得多。這些問題在工作中一旦遇到就非??简災銓?nèi)存機制的理解深度。往上看一層嵌入式架構師和普通開發(fā)者的差異也往往體現(xiàn)在內(nèi)存設計上。普通開發(fā)者考慮的是一段代碼怎么跑通架構師考慮的是這個系統(tǒng)允許有多少個連接、每個連接占用多少緩沖、總量控制在多少、峰值情況怎么降級。內(nèi)存對于嵌入式系統(tǒng)來說就是預算花錢要有規(guī)劃不能想怎么花就怎么花。1.3 嵌入式內(nèi)存觀把“夠用”變成“省著用”PC和服務器上的程序員可以不用太在意內(nèi)存反正物理內(nèi)存不夠還有虛擬內(nèi)存虛擬內(nèi)存不夠還能加條子。但嵌入式的內(nèi)存觀完全不同我總結了幾個關鍵差異。第一嵌入式設備通常沒有swap交換空間。也就是說內(nèi)存告急就是真的告急操作系統(tǒng)沒法把一部分數(shù)據(jù)挪到磁盤上緩解壓力系統(tǒng)只會直接分配失敗甚至觸發(fā)看門狗復位。第二嵌入式系統(tǒng)的堆空間往往是固定的比如你在鏈接腳本里給堆分配了64KB那就是64KB用完了就沒了。第三嵌入式系統(tǒng)里不僅有CPU訪問的內(nèi)存還有DMA緩沖區(qū)、外設寄存器映射、共享內(nèi)存、DDR和SRAM等不同物理內(nèi)存域它們的訪問方式、生命周期、對齊要求都不一樣比純應用開發(fā)復雜得多。所以做嵌入式開發(fā)心態(tài)要調(diào)整成“省著用”。內(nèi)存不是拿來浪費的而是要精確計算、合理分配的。這個意識會貫穿你整個職業(yè)生涯從第一行嵌入式代碼開始到設計一個完整的嵌入式Linux項目你都在跟內(nèi)存打交道。懂得內(nèi)存你才敢說自己入門了嵌入式。2. 先把內(nèi)存的全景摸清楚棧、堆、全局區(qū)與外設2.1 C程序的內(nèi)存布局背下來未必有用畫出來才有用嵌入式C程序的內(nèi)存布局其實非常固定但很多人從來沒有認真畫過一遍。以典型的單片機或者嵌入式Linux用戶態(tài)程序為例從低地址到高地址大致就是代碼段、只讀數(shù)據(jù)段、已初始化數(shù)據(jù)段、未初始化數(shù)據(jù)段、堆、棧棧頂以下是內(nèi)核映射區(qū)或保留區(qū)域。代碼段存放機器指令正常情況下只讀只讀數(shù)據(jù)段放字符串常量、const修飾的全局變量已初始化數(shù)據(jù)段也叫.data段放有初值的全局變量和靜態(tài)變量未初始化數(shù)據(jù)段也就是.bss段放沒顯式初始化的全局變量和靜態(tài)變量這一段不占用實際的Flash空間加載時被清零堆是向上生長的那塊動態(tài)內(nèi)存區(qū)域由malloc/new或者RTOS里專用的堆管理來分配棧是向下生長的存函數(shù)調(diào)用幀、局部變量、函數(shù)返回地址等。畫過一遍你就會發(fā)現(xiàn)C語言的很多經(jīng)典問題都可以在這個圖里找到答案。比如為什么函數(shù)里定義一個超大數(shù)組容易出事因為它用的是??臻g而棧空間通常只有幾KB到幾十KB一個4KB的局部數(shù)組對某些MCU來說已經(jīng)是災難了。再比如為什么字符串常量不能修改因為它住在只讀數(shù)據(jù)段強行寫進去就是越權訪問在MCU上會觸發(fā)硬件異常在嵌入式Linux上會拿到一個Segmentation fault。2.2 堆、棧、全局區(qū)/常量區(qū)分別該放什么不放什么我經(jīng)常被問到寫代碼時到底應該把數(shù)據(jù)放在哪這里給出我個人的分法不一定適合所有場景但大部分嵌入式項目都可以參考。棧上放的應該是生命周期很短的臨時數(shù)據(jù)比如函數(shù)里的解析緩沖區(qū)、循環(huán)變量、臨時結構體。它的好處是自動分配自動釋放速度快基本沒有管理成本。缺點也很明顯空間有限函數(shù)退出就失效不能跨函數(shù)傳遞大塊數(shù)據(jù)。堆上放的是生命周期需要人工控制的數(shù)據(jù)比如動態(tài)增長的鏈表節(jié)點、接收緩存、協(xié)議幀隊列。它的靈活性最高但如果忘記釋放就會泄漏釋放之后繼續(xù)用就會出現(xiàn)踩內(nèi)存。全局區(qū)和靜態(tài)區(qū)適合放生命周期貫穿整個程序的數(shù)據(jù)比如協(xié)議棧的收發(fā)緩沖區(qū)、系統(tǒng)配置表、日志緩沖。它的訪問效率高沒有堆分配的開銷但要注意多個模塊同時訪問時會產(chǎn)生耦合而且全局變量多了代碼很難維護。這里有一條關鍵建議能用靜態(tài)和棧解決的就不要上堆。在嵌入式環(huán)境里堆是風險最集中的區(qū)域碎片化、泄漏、越界全都在堆上爆發(fā)。如果你發(fā)現(xiàn)自己的代碼大量使用malloc/free每隔幾毫秒就來一次那么第一反應不應該是“我的程序很靈活”而應該是“我的設計是不是有問題”。2.3 寄存器、DMA、外設地址映射RAM之外的內(nèi)存嚴格來說嵌入式工程師口里的“內(nèi)存”不只是RAM。你寫的每一條訪問外設寄存器的語句本質(zhì)上也是在操作“內(nèi)存”。在STM32這類單片機上GPIO、UART、DMA控制器的寄存器都被映射到固定的地址空間你直接對指針賦值就能控制外設在嵌入式Linux上驅(qū)動工程師用ioremap把物理地址映射到內(nèi)核虛擬地址空間操作方式和操作內(nèi)存一模一樣。這里最需要注意的關鍵字是volatile。外設寄存器是隨時可能被硬件改變的如果你的代碼里用了一個普通指針去讀它編譯器很可能會做出錯誤優(yōu)化把多次讀取合并成一次導致你讀到的永遠是舊值。我見過不止一次串口接收標志位明明已經(jīng)置1了但主循環(huán)一直讀不到就是這個原因。DMA緩沖區(qū)則是另一個容易出問題的地方。DMA直接搬運內(nèi)存不走CPU所以如果CPU和DMA同時訪問一塊區(qū)域就存在數(shù)據(jù)一致性的風險。在帶Cache的嵌入式處理器上這個風險會被放大DMA寫入的數(shù)據(jù)可能還在Cache里沒有回到物理內(nèi)存CPU去讀物理內(nèi)存時讀到的是舊數(shù)據(jù)反過來CPU寫好的數(shù)據(jù)還躺在Cache里DMA去搬物理內(nèi)存時搬走的也是舊數(shù)據(jù)。正確的做法是在DMA操作前做Cache的clean或invalidate操作很多嵌入式Linux驅(qū)動里都能看到dma_map_single、dma_alloc_coherent這類API就是在幫你處理這種一致性。2.4 三種分配方式的實際對比靜態(tài)、動態(tài)、池化內(nèi)存從哪里來最直觀影響系統(tǒng)穩(wěn)定性的就是堆的管理方式。靜態(tài)分配、動態(tài)分配、內(nèi)存池分配三種方式各有適用場景工程上我會這樣取舍。靜態(tài)分配是在編譯期確定大小最簡單、最穩(wěn)定沒有任何運行時開銷也不會碎片化但靈活性差。如果某個緩沖區(qū)設計小了就只能改代碼重新編譯。動態(tài)分配是malloc/free靈活度最高但碎片和泄漏的風險也最高。實時性要求高的系統(tǒng)還要警惕malloc內(nèi)部的鎖和復雜算法它可能在你需要毫秒級響應的時候給你來一次幾十微秒的卡頓。內(nèi)存池分配是提前開好一塊內(nèi)存然后切成固定大小的塊用鏈表維護空閑塊。分配釋放都只是從鏈表頭摘節(jié)點速度極快沒有碎片問題代價是每個塊只能按最大規(guī)格使用會有內(nèi)部浪費。我自己的實踐里網(wǎng)絡協(xié)議棧、消息隊列、RTOS的任務棧這一類高頻使用、大小基本固定的資源全部走內(nèi)存池偶爾一次性分配的大塊資源比如配置文件讀入、開機時申請的臨時大緩沖才用malloc至于那些貫穿整個生命周期的協(xié)議幀緩沖直接靜態(tài)全局數(shù)組。這套組合拳在長時間運行的設備上實測非常穩(wěn)內(nèi)存占用始終是一條平線不會有緩慢爬升的詭異曲線。3. 嵌入式內(nèi)存四大頑疾泄漏、踩踏、碎片與棧溢出3.1 內(nèi)存泄漏寫入緩沖區(qū)的方式和“拆東墻補西墻”內(nèi)存泄漏是嵌入式現(xiàn)場最經(jīng)典的問題。代碼邏輯本身沒有任何編譯錯誤功能也正常但設備跑著跑著越來越卡最后內(nèi)存耗盡復位。我舉個最常見的錯誤寫法void on_rx_data(uint8_t *buf, uint16_t len) { char *tmp (char *)malloc(len); if (tmp NULL) { return; } memcpy(tmp, buf, len); // 處理數(shù)據(jù)... // 忘記 free(tmp) }這段代碼里每次收到一幀數(shù)據(jù)就malloc一塊內(nèi)存處理完卻沒有free。一次兩次看不出來但嵌入式設備的網(wǎng)絡連接往往會長久保持每秒來幾幀數(shù)據(jù)幾個小時泄漏幾百KB幾天下來整個堆全被吃光。這種“寫入緩沖區(qū)之后忘記釋放”的模式在協(xié)議解析、日志上報、消息轉(zhuǎn)發(fā)的代碼里特別常見寫的時候很順手排查的時候特別煎熬。定位內(nèi)存泄漏常用的手段有幾招。Linux環(huán)境下可以用valgrind雖然慢但定位準確也可以用AddressSanitizer編譯加-fsanitizeaddress就能在運行時檢測泄漏。裸機和RTOS環(huán)境就比較原始了通常是在堆管理函數(shù)里加統(tǒng)計計數(shù)申請一次加一釋放一次減一定期把當前剩余堆大小打印出來。如果一個模塊的剩余堆大小隨時間單調(diào)下降那基本就是它泄漏了。我自己的習慣是每個動態(tài)內(nèi)存申請點都記得在注釋里寫清釋放配對的位置雖然聽起來很傻但真的很管用。3.2 緩沖區(qū)溢出與踩內(nèi)存valgrind 與 ASan 雙殺緩沖區(qū)溢出和踩內(nèi)存是最讓人頭疼的問題因為爆炸現(xiàn)場和肇事現(xiàn)場往往不是同一個地方。你可能在A模塊往緩沖區(qū)里寫多了幾個字節(jié)B模塊的全局變量就被改掉設備在某一個完全無關的功能上表現(xiàn)異常??催@段典型的越界代碼void process_packet(uint8_t *data, uint16_t len) { uint8_t local_buf[64]; if (len 64) { // 缺陷沒有做長度檢查直接越界拷貝 } memcpy(local_buf, data, len); }當len超過64時memcpy就會越過local_buf的邊界把后面的棧內(nèi)容——包括函數(shù)返回地址——全部覆蓋掉。程序跑完這個函數(shù)后返回地址已經(jīng)變成一個隨機值CPU跳飛硬件異??撮T狗復位只是時間問題。更陰險的情況是越界量比較小比如只多寫了2字節(jié)剛好覆蓋了相鄰變量程序還能繼續(xù)跑但某個變量值開始無規(guī)律變化這種問題排查起來需要極致的耐心。我的排障習慣是優(yōu)先用工具。嵌入式Linux下直接開ASan編一版出來跑測試它能精確報告是哪個文件哪一行越界了沒有ASan條件的話就用valgrind的memcheck工具把越界寫和非法讀都揪出來。裸機環(huán)境下通常沒有現(xiàn)成工具我會在可疑數(shù)組前后放特殊填充字節(jié)比如0xAA、0x55定期檢查填充字節(jié)有沒有被改寫。如果被改了說明附近有人越界。這個土辦法雖然原始但關鍵時候比什么高級工具都靠譜。3.3 堆碎片化bin/arena/分配器以及長時間運行的隱形殺手內(nèi)存碎片化這個主題很多做上位機開發(fā)的程序員根本沒概念。PC上有swap機制虛擬內(nèi)存把碎片問題掩蓋掉了。但在嵌入式設備里堆碎片化是讓系統(tǒng)崩潰的隱形殺手。碎片化的原理不難理解你不停地malloc和free各種大小的內(nèi)存塊內(nèi)存空間被切成了很多小窟窿。每一塊單個看都不小但它們在物理上不連續(xù)。當你需要申請一塊較大的連續(xù)內(nèi)存時雖然空閑內(nèi)存總額是夠的但沒有一塊連續(xù)空間能滿足需求malloc就會返回NULL。典型的例子是設備運行三天后調(diào)用鏈穩(wěn)定的malloc突然開始失敗但你看free內(nèi)存還有好幾KB。glibc的malloc實現(xiàn)里fastbin和smallbin會在一定程度上減少碎片但長期交錯分配大小時仍然無力回天。內(nèi)核側的伙伴系統(tǒng)和slab分配器本質(zhì)上也是在做碎片控制伙伴系統(tǒng)按2的冪次劃分頁塊slab則緩存同類型對象。這些思想在應用層完全可以借鑒最直接的方案就是我前面提到的內(nèi)存池。固定大小的池沒有碎片問題因為釋放回去的塊和申請的塊規(guī)格一樣如果有不同大小的需求就開兩個池子分別管理。這個設計在我的項目里能把堆分配次數(shù)降到接近零系統(tǒng)的長期運行穩(wěn)定性提升非常明顯。3.4 棧溢出局部數(shù)組、遞歸和任務棧配置棧溢出在嵌入式系統(tǒng)里非常隱蔽因為很多時候它不報錯只是悄悄破壞數(shù)據(jù)。我在1.1里講的那個設備三天重啟一次的案例根源就是棧被越界拷貝踩了。常見引發(fā)棧溢出的行為包括局部數(shù)組開得太大比如在函數(shù)里定義uint8_t big_buffer[8192]而整個任務棧才8192字節(jié)遞歸調(diào)用沒有深度限制每個遞歸層級都消耗棧幀深層函數(shù)調(diào)用鏈加上大的局部變量在多層調(diào)用疊加后瞬間擊穿棧底。RTOS環(huán)境里每個任務都有自己的棧棧大小由你在創(chuàng)建任務時指定。很多人不重視這個參數(shù)隨手填個128或者512字節(jié)省空間結果運行一段時間后任務棧溢出系統(tǒng)隨機死機。我建議的做法是在任務棧的底部放幾個特殊魔數(shù)定期去檢查魔數(shù)有沒有被改寫。如果被改了就說明棧溢出了然后逐步加大棧大小直到魔數(shù)保持穩(wěn)定。另外還可以用工具鏈提供的棧使用統(tǒng)計比如GCC的-fstack-usage選項編譯后能生成每個函數(shù)的棧占用報告匯總一下就能算出任務棧的理論上限非常實用。4. 實操一個嵌入式Linux項目的內(nèi)存優(yōu)化實戰(zhàn)4.1 對著 /proc 和 top 看內(nèi)存別只看 free嵌入式Linux項目里排查內(nèi)存很多人上來就敲free -m看到MemFree剩幾十MB就覺得沒問題。這個判斷方式會誤導你。Linux內(nèi)核會盡量把空閑內(nèi)存拿去做page cache所以MemFree低不代表內(nèi)存真不夠用MemAvailable才是系統(tǒng)當前實際可以分配出去的內(nèi)存估算值。我習慣是這樣的先看/proc/meminfo里的關鍵項其次是具體進程的內(nèi)存占用。給大家?guī)讉€最常用的命令組合# 系統(tǒng)級內(nèi)存總覽 cat /proc/meminfo | head -n 5 # 某個進程的虛擬內(nèi)存和物理內(nèi)存峰值 cat /proc/pid/status | grep -E VmPeak|VmSize|VmRSS|RssAnon|RssFile # 按物理內(nèi)存占用排序進程 ps -eo pid,comm,rss --sort-rss | head -n 20VmRSS代表進程當前實際占用的物理內(nèi)存這是最值得關注的指標。如果一個長期運行的進程VmRSS持續(xù)增長那就要懷疑泄漏如果VmRSS保持平穩(wěn)但malloc偶爾失敗那要懷疑是不是虛擬內(nèi)存映射過多或者碎片化了。數(shù)據(jù)要看趨勢不要只看孤立的某一個瞬間。4.2 抓大放小按 VmRSS 找大頭再按調(diào)用鏈治本定位內(nèi)存大頭不能靠猜我有一套固定的實操流程。第一步用ps命令按RSS排序找到占內(nèi)存最多的幾個進程第二步對嫌疑進程查看/proc/PID/maps看清楚它映射了哪些庫、哪些大塊內(nèi)存第三步如果是自己的程序可以臨時打開glibc的malloc統(tǒng)計代碼里調(diào)用mallinfo()拿到uordblks等字段看堆里真正使用的字節(jié)數(shù)第四步結合代碼的調(diào)用鏈找出內(nèi)存增長的真實來源。有一個真實案例我印象很深。一臺嵌入式網(wǎng)關設備內(nèi)存總占用隨運行時間穩(wěn)定爬升數(shù)值很規(guī)律每小時漲幾十KB。一開始懷疑是某個網(wǎng)絡會話泄漏排查了很久沒結果。后來無意中發(fā)現(xiàn)是日志模塊的問題日志字符串用的是追加寫入的方式每次寫日志都realloc擴大緩沖區(qū)但日志滿了之后只做了截斷沒有把malloc的冗余容量realloc回來導致緩沖區(qū)容量越漲越大變成了幾十MB。這類問題本質(zhì)上是“偽泄漏”malloc的總量并沒有一直漲但緩沖區(qū)冗余越來越大反映在RSS上就是一條持續(xù)上升的曲線。定位到原因后我在日志模塊里加了一個容量收縮策略每次flush完就把緩沖區(qū)縮小到實際內(nèi)容大小內(nèi)存曲線立刻恢復正常。所以在做內(nèi)存優(yōu)化時第一原則是抓大放小。不要一開始就糾結那幾字節(jié)的結構體對齊先用工具把內(nèi)存大頭找出來再決定值不值得優(yōu)化。真正的優(yōu)化永遠是有數(shù)據(jù)支撐的優(yōu)化。4.3 結構體重排、位域、環(huán)形緩沖……我常用的幾個省錢技巧在內(nèi)存大頭解決之后再來摳細節(jié)才有意義。我最常用的幾個“省錢”技巧全部在工程里實測有效。第一個是結構體成員重排。因為編譯器會對齊訪問結構體成員順序直接決定最終大小??聪旅孢@個例子// 不推薦按隨意順序聲明浪費空間 struct cfg_a { char type; // 1字節(jié) uint32_t value; // 4字節(jié) uint16_t id; // 2字節(jié) }; // sizeof 12 // 推薦按對齊字節(jié)數(shù)從大到小排列 struct cfg_b { uint32_t value; // 4字節(jié) uint16_t id; // 2字節(jié) char type; // 1字節(jié) }; // sizeof 8兩個結構體字段完全一樣只是順序不同cfg_a占了12字節(jié)cfg_b只占8字節(jié)。如果一個數(shù)組有1000個元素差距就是4KB。規(guī)則很簡單從最大的類型開始放小的往后排最后統(tǒng)一補padding。至于#pragma pack強行壓縮對齊我建議慎用雖然能省空間但可能導致非對齊訪問在ARM平臺上輕則性能下降重則觸發(fā)硬件異常。第二個是位域。對于大量bool型的配置項與其每個都占一個字節(jié)不如按位打包。比如8個開關狀態(tài)用一個uint8_t就裝下了比8個uint8_t省7個字節(jié)。代價是代碼可讀性下降存取都要做位運算所以只建議在配置結構體這類對空間敏感的場景使用。第三個是環(huán)形緩沖區(qū)。協(xié)議解析、串口收發(fā)、日志輸出這類場景最理想的結構就是ring buffer。固定大小、無動態(tài)分配、天然FIFO我用得非常多。一個常用的優(yōu)化技巧是把ring buffer的size設置為2的冪然后用位與運算代替取模運算性能會有明顯提升#define RING_SIZE 4096 static uint8_t ring_buf[RING_SIZE]; static uint16_t head, tail; int ring_push(uint8_t byte) { // 判斷是否滿保留一個空位區(qū)分空和滿 if (((head 1) (RING_SIZE - 1)) tail) { return -1; // 滿 } ring_buf[head] byte; head (head 1) (RING_SIZE - 1); return 0; }在嵌入式Linux同樣適用mmap加MAP_SHARED之后配合信號量或者自旋鎖做互斥。這里面有個隱藏的坑共享內(nèi)存里的結構體涉及多端編譯時一定要顯式控制內(nèi)存布局否則一個平臺認4字節(jié)對齊另一個平臺認8字節(jié)對齊共享數(shù)據(jù)就全亂了。標準做法是定義明確寬度的整數(shù)類型加上packed屬性或者精心設計的對齊必要時還要固定大小端。這塊我后面講。4.4 多任務系統(tǒng)里的共享內(nèi)存與堆外內(nèi)存怎么玩嵌入式系統(tǒng)很少只有一個任務。RTOS環(huán)境里多個任務并發(fā)訪問同一塊內(nèi)存嵌入式Linux環(huán)境里多進程通過mmap共享內(nèi)存這些都是普通應用不常遇到的高級場景。RTOS里的任務間通信我首推消息隊列而不是裸的全局變量共享。消息隊列的本質(zhì)是內(nèi)核幫你管理一塊緩沖區(qū)發(fā)送方寫入接收方讀取不涉及直接競爭也就繞開了大部分并發(fā)訪問問題。但有些場景必須共享大塊內(nèi)存比如音頻數(shù)據(jù)、圖像幀這時候就要用到互斥鎖。要注意RTOS的互斥鎖有優(yōu)先級繼承機制普通信號量沒有用錯了在實時系統(tǒng)中會造成優(yōu)先級翻轉(zhuǎn)這個細節(jié)在面試里也經(jīng)常被問。嵌入式Linux下最常用的共享內(nèi)存方式就是mmap。一個典型的做法是MAP_SHARED加寫回文件兩個進程都能讀寫同一段物理內(nèi)存。這個過程里有兩個關鍵細節(jié)第一共享內(nèi)存區(qū)需要專門的初始化流程通常先由主進程創(chuàng)建并清零再從設備節(jié)點或共享文件系統(tǒng)里映射第二跨進程的共享內(nèi)存訪問必須配套同步機制否則兩個進程同時寫就會出現(xiàn)數(shù)據(jù)錯亂。至于“堆外內(nèi)存”這個概念在嵌入式的語境下通常指不經(jīng)過AC標準庫malloc管理的內(nèi)存。比如你直接用一個固定的物理地址做DMA緩沖區(qū)或者用mmap映射一塊設備內(nèi)存這些都算堆外內(nèi)存。它的好處是繞過堆管理器的碎片和開銷問題壞處是你要自己負責生命周期和對齊。嵌入式Linux里分配DMA連續(xù)內(nèi)存一般要靠CMA機制makedma_contiguous或設備樹里配置reserved-memory普通malloc拿不到連續(xù)的物理頁這是“大內(nèi)存架構”設計里繞不開的一部分。5. 嵌入式內(nèi)存面試八股與排障速查5.1 嵌入式八股文哪些內(nèi)存問題會被反復問接下來說說面試。八股文這個詞在嵌入式圈子里很有爭議有人說面試造火箭、工作擰螺絲但內(nèi)存相關的八股我建議你還是好好背因為它們是嵌入式開發(fā)的地基。下面是我整理的幾道高頻題和要點方便你快速過一遍。第一題sizeof結構體為什么不是成員大小之和因為編譯器會做對齊填充具體和CPU架構、編譯器選項、成員順序有關。第二題malloc失敗就代表內(nèi)存不足嗎不代表。可能是堆碎片化導致沒有足夠大的連續(xù)空間也可能是當前進程的虛擬內(nèi)存映射受限。第三題malloc返回非NULL就安全嗎不安全。Linux默認開啟了內(nèi)存overcommitmalloc可能返回非NULL但真正訪問時系統(tǒng)已經(jīng)沒有物理內(nèi)存觸發(fā)OOM killer。第四題棧和堆哪個快??臁7峙渲灰苿訔V羔樁逊峙湫枰檎铱臻e塊、可能觸發(fā)系統(tǒng)調(diào)用、還要處理并發(fā)鎖。所以高頻的小塊臨時數(shù)據(jù)首選棧。第五題free之后指針要置NULL嗎要看場景。free之后指針本身還持有原地址這是懸空指針再次free或訪問就會踩內(nèi)存。在模塊內(nèi)置NULL是安全習慣但要清楚這只對當前指針有效如果多個指針指向同一塊內(nèi)存只置其中一個意義有限。第六題結構體里的柔性數(shù)組用來干什么柔性數(shù)組是C99的特性在結構體尾部聲明一個不完整數(shù)組可以在不額外分配內(nèi)存的情況下攜帶變長數(shù)據(jù)很多協(xié)議棧的幀結構喜歡這么設計既省空間又避免多次malloc。5.2 一份可以直接抄的排查流程每次遇到內(nèi)存問題我都按固定流程走很多團隊里我也這么帶新人。整理成一套六步法你可以直接抄作業(yè)。第一步先歸類現(xiàn)象。是系統(tǒng)復位、是功能錯亂、還是性能劣化不同類型的線索指向不同方向。復位優(yōu)先查棧溢出和返回地址被踩功能錯亂優(yōu)先查野指針和緩沖區(qū)越界性能劣化優(yōu)先查泄漏和碎片。第二步保護現(xiàn)場。按1.1里說的把復位前最后一段日志打全把用到的全局狀態(tài)dump出來。沒有現(xiàn)場數(shù)據(jù)后面全是在猜。第三步盡量復現(xiàn)。嵌入式問題難復現(xiàn)但可以構造條件比如把緩沖區(qū)長度調(diào)到極端值、把任務??s小一半、加大網(wǎng)絡報文頻率。第四步上工具。Linux下按優(yōu)先級排序是AddressSanitizer、valgrind、gdb、/proc統(tǒng)計MCU下按優(yōu)先級排序是棧哨兵、malloc計數(shù)、手工填充檢查。第五步追蹤趨勢。不要只拍一個瞬間的快照要連續(xù)采集內(nèi)存數(shù)據(jù)形成曲線看是線性增長、階梯增長還是偶發(fā)跳變不同曲線對應不同根因。第六步驗證修復。改完代碼不代表結束要跑足夠長時間的壓力測試確認內(nèi)存曲線回歸平穩(wěn)然后保留監(jiān)控手段等數(shù)據(jù)說話。5.3 嵌入式內(nèi)存相關常見問題速查表最后送一張排障速查表平時遇到問題先對號入座能省不少時間。癥狀可能原因快速定位手段建議方案運行幾天后malloc失敗堆碎片化/內(nèi)存泄漏malloc統(tǒng)計、mallinfo、valgrind內(nèi)存池化、定位泄漏點某個全局變量被莫名改寫緩沖區(qū)越界變量附近放canary、ASan檢查memcpy和數(shù)組邊界函數(shù)返回后跳飛/PC亂跳棧被踩/返回地址損壞gdb bt、棧哨兵模式檢查局部數(shù)組大小和遞歸深度設備頻繁hardfault棧溢出/野指針/非對齊訪問HardFault_Handler分析、RTT增大任務棧、查野指針內(nèi)存占用線性上升泄漏或緩沖區(qū)冗余監(jiān)控VmRSS趨勢、valgrind按調(diào)用鏈定位修復兩個進程共享數(shù)據(jù)偶爾錯亂缺少同步/結構體布局不一致檢查互斥機制、比對各自sizeof加鎖、固定對齊和大小端DMA數(shù)據(jù)讀到舊值Cache一致性問題增加flush/invalidate調(diào)試使用標準DMA映射API這張表覆蓋了我在實際工作中遇到的大部分內(nèi)存問題場景。嵌入式內(nèi)存的排查沒有銀彈靠的就是對內(nèi)存布局的理解、對工具的熟練使用以及一步步逼近根因的耐心。我自己踩過很多坑最有感觸的一點是內(nèi)存問題的修復往往只需要幾行代碼但定位的過程可能花費好幾天。所以一定要在系統(tǒng)設計階段就把內(nèi)存策略想清楚不要等設備上了產(chǎn)線再追著問題跑。說到底嵌入式開發(fā)拼的不是誰功能寫得花哨而是誰的系統(tǒng)能一年365天穩(wěn)定運行不出岔子。內(nèi)存這一關每個人都繞不開。希望這堂“嵌入式內(nèi)存課”能幫你把這塊短板補上也歡迎你在評論區(qū)留下你自己踩過的內(nèi)存相關的坑一起交流一起進步。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
高精欧美色| 五月天激情四射| 精品免费囯产一区二区三区 | 精品性爱久久视频| 欧美精品四区| 亚洲精品男人的天堂| 色嗨嗨在线| site:sinbotex.com| 欧美色图在线视频少妇| 色婷婷成人综合| 日韩一级片在线看| 国产超碰AV在线精品| 超碰9 7女人| 91丝袜熟女| 视频在线观看一二三区| 色五月网址| 国产熟女免费观看久久| 99久久e免费热视| 偷拍偷窥与盗摄视频专区| 国产精品久久久亚洲第一牛牛_在线观看| 欧美综合97www| 亚洲操人| 国产树林里野战在线看| 在线观看av区| 少妇高潮对白在线观看| 不卡一区二区日本视频| 曰韩操B| 日本伦乱九九九综合| 色与欲影视| 国内一级精品| 97爱爱官网| 欧美91丝袜| 蜜桃色院一区久久| 天天摸天天舔天天操| 在线观看视频91| 一区二区三区 丝袜高跟| 久久一二三四不卡| 日本大香蕉| 97伪v| 伊人国产视频| 91一区二匹| 超碰吊日色| 欧美综合1性辶| 97免费在线观看| 啊啊啊久久| 2017天天拍大香蕉| 黄片免费日韩| 九九亚洲视频| 色婷婷婷五月天激情四射| 人妻aa| 中文久久一区| 啊啊啊想要| 亚洲情色视频| 九九综合九九综合| 婷婷丁香九月| 人妻精品视频一区二区| 国产原创精品| 校园春色亚洲无码| 中文字幕后石码四区五区| 欧美精品精品一区二区| 操迟操逼在巾线Fre看| 午夜AV人气不卡| 亚洲第一狼人丝袜美女另类| 久久99午夜精品一区人妻| 日韩不卡av一二三| 操香逼| 欧美第一页| 巨乳特殊服务按摩| 久久免费精品视频免一| 久久久999日本大片| 搞中出视频在线观看| 啊嗯嗯啊好大好爽| 狠狠超| 国产欧美精选激情视频| 欧美亚洲激情小说| 天天影视综合色| 国产中出内射一区二区| 久久久精品网| 青青草天天亲夜夜操网| 啊啊啊啊啊啊啊好爽不要| 91强在线播放| 中文视频在线观看| 欧美久久人人网| 日本黄 R色 成 人网站| 久干网| 婷婷探花久久精品一区| 东北黄色电影| 日韩国产十八禁| 福利五区| 大奶啊啊好爽| 欧美极品少妇| 日韩美女操b| 免费观看啪视频| 女人一区| 毛片久久| 国模精品一区二区三区苹果色戒 | 嗯嗯啊啊操死我| 热热色综合网| 一区二区三区成人高清视频| 超碰天天操| 97超碰色情| 国产精品青草综合久久| 美女黄色91| 乱论91| 91肏屄网| 黑人免费福利视频| 久热久| 成人九九| 亚洲成人性爱在线观看| 在线小说视频一区| 免费观看的黄色的网站| 亚洲十八禁止| 国产白嫩漂亮KTV在线| 色五月婷婷色| 东京热双插| 国产三级电影免费观看| 男人天堂无码| 亚洲免费成人精品电影| 国产精品午夜福利视频| 黄色AAAAAAAAAAA大片| 亚洲污污网站| 国产精品探花视频| 久久久久久九九九九九九| 午夜乱轮操逼视频免费看| 97超碰色屌| 久久永久无码人妻视频| 啪啪91| 2017天天拍大香蕉| 操亚州| 国产视频一区二区三区在线免费观看 | 国产免a费看黄片在线| 麻豆AV一区二区| 亚洲精品自拍| 99蜜桃臀亚洲成人在线观看| 岛国视频免费在线观看| 欧美偷| 亚洲色综合| 欧亚韩国999| 插穴性爱视频在线观看| 99热这里都是精品| 亚洲午夜免费狠狠干| 亚洲丝袜诱惑| 伊人成人情色综合| 天天干夜夜一操| 乱操9999| 国产男女无套97| 亚洲天天做日日做天天谢日日| 97一本大道亚洲一区| www.91人妻.com| 欧美激色| 超碰97起碰| 国产亚洲精品精AV.| 神马久久69| 婷婷亚洲五月***久久| 久久一二三四五六七八九区| 大香网伊人久久综合网eew| 亚洲欧美在线丝袜| 操亚州| 国内毛片无码一级毛片| 亚洲国产97| 青青草国产亚洲精品久久| 91一区二匹| 农村妇女精品一区二区| 人人看人人摸人人色| 一区二区三| 免费人人搞97| 亚洲成人av色网| 999久久久免费精品国产牛牛| 亚洲日韩XXX| 精品-91人妻子系列| 97视频免费在线观看| 热久日综合| 日本在线不卡123| 亚洲欧洲日本精品中文a∨| 天天综合欧美黑人| 中美日韩毛片| 激情综合五月天| 无码免费在线观看黄色片| 亚洲AV色图一区| 亚洲综合113页| 天天弄天天操| 亚洲av无线观看| 日韩射图| 日本操大逼| 东京太热男人的天堂久久久| 蜜臀一二三区| 91欧美美女日韩国产婷婷| 亚洲男人bt天堂| 亚洲色色探花| 免费一级a毛片久久久久久鸭绿欲| 国产蜜臀在线| 中文欧丝袜诱惑| 亚洲精品久久久久久久久豆丁网| 日韩一区二区精品视频| 人人操人人大香蕉| 激情小说成人日本无码一| 精品欧美老熟女一二区| 风月影院十八禁| 久久中久文96| 人妻喷水| AV天黑人| 九九九九一区| 天天日骚逼熟女| 麻豆区久久久久亚| 97视频新免费| AV女资源| 91精品导航| 日本熟妇自慰性高潮一区二区三区| 熟女中出视频| 国产精品久久久久久久久久久久久久久久久久 | 麻豆三极片| 欧美日韩一二三| 精品人妻视频一区二区在线播放| 欧美图片校园春色| 色婷婷日韩精品一区二区三区| 欧美与日韩97| 久久久久久无码人妻中文字幕| 天堂亚洲精品久久老牛| 无码男人天堂| 久久精品国产99久久,亚洲日韩久久日本一区一区三区 | 精品久久在线区一区| 婷婷五月综合激情| 国产九月婷婷| 7月婷婷综合| 蜜桃臀 后入 一区 二区 三区 在线| 青娱乐av在线| 色眯眯av| 人人妻人人澡人人爽久久av| 大香蕉欧美| 久草加勒比一区在线| 欧美亚洲天堂| 中日亚韩免费视频| 丁香五月天激情| 骚货人妻偷情自拍在线视频| 亚洲一二三精品久久网 | 97舔舔| 亚洲少妇色| 亚洲天堂另类美腿| 国模久久在线| 欧美亚洲图片| 亚洲黄网在哪免费看| 无码抄逼网| 久久久久日本视| 欧美中字二区| 深夜福利黄片| 超碰成人最新最好看| 国产欧美一区激情交| 九九综合久久| 亚洲精品一区二区免费在线观看| 91九色丰满高潮| 少妇久久| 国产人妻天天干精品| 嗯嗯嗯嗯啊啊啊好紧好大| 美腿丝袜偷拍亚洲欧美| 精品综合久久久久久五月天| 精品一区二区成人| 精品国产乱码久久久久久影片| 亚洲永久AV无码精品秋霞| 国产蜜臀在线| 国产无马在线| 日本天天人人狠狠在线日美女| 亚洲欧美setu| 亚洲成人激情小说视频| 日本3级一区二区免费| 蜜臀AV成人精品蜜臀AV久久| 亚洲中字慕不卡| 嫩呦国产一区二区三区AV| 亚洲蜜桃V妇女| 人妻在线中出视频| 91白虎| 日韩亚洲精品一区二区| 日韩99神马视频播放片在线播放| 国产精品乱码久久久久久久久| 91色人妻| 啊啊好多水| 综合五月天| 一区在线观看中文字幕| 亚州宗合另类| 中文 人妻 制服| 成人三级片无码| 2025亚洲男人天堂| 一本色道无码DVD中文字幕| 久久艹逼视频| 性高潮久久久| 国产成人在线观看综合| 精品丰满熟妇人妻一区| 国产精品探花视频| 欧美青青草视频| 国产精品不卡一区二区电影| 青女在线| 久久精品久久久久久久久| 精品日韩产品在线,日韩在线不卡视频,欧美日韩免费专区/久, | 在线只有精品| 校园激情狠狠四射| 欧美一区二区亚洲天堂| 加勒比久久av| 福利在线观看一区二区| 人人澡综合涩| 九九九九精品在线| 激情抓乳插进去啪啪啪日韩| 884t在线| 91美女视频在线观看| 操逼逼无码| www.久久超碰| 日本天天色| 亚洲欧美综合网站| 久草国产在线视频| 无码精品啪啪啪一区二区三区三州| 国产美女销魂在线观看不卡| 欧洲精品一区二区三区| 岛国激情视频在线观看| 99精品高潮| 深夜国产一区二区三区在线看| 国产精品午夜福利视频| www网站黄| 啊啊在线| 国产精品一二三区福利| 精品视频一二三中文| 久久欧美1卡2卡3| 久热一区二区| 色爱欲亚洲| 日本色色的视频| 日本免费一区二区不卡| 农村妇女一级二级三级视频| 操逼网站网站| 日韩亚洲97| 在线播放中文字幕| 国产精品国产亚洲区艳妇糸列| 日本不卡码黄色 | 四虎884| 香蕉在线一区二区三区| 熟女这里只有精品6| 色综合久久夜色精品国产天堂| 日韩激情啪啪| 国产97在线视频| 久久色一区二区| 亚洲午夜福利视频| V A在线| 天堂射| 久热超碰| 国产野战露脸在线播放| 97国产精品久久久久| 婷婷五月天av| 欧美激情性爱视频网站| 免费成人在线观看91| 伊人国产视频| 五月丁香影院| 午夜福利av电影在线| 天天干18禁| 久久视频少妇美女| 天天看综合网| 久/久精品99看9| 亚洲春色欧美激情自拍| 天天做天天爱| 99re在线精品78| 99re这里只有精品3| 曰本人妻人人澡人人夹| 亚洲精品国产无码高清| 综合亚洲欧美| 四虎影视 亚洲无码| 夜夜操老骚逼视频网站| 可以免费观看的av| 国产AV久久久蜜爱影集| 国产精品久久久久久久毛片1| 久久性爱视频免费看| 亚洲综人| 玖色av| 久久国产精品91| 亚洲黄色视频在线观看视频| 在线中文字幕视频| 東南亚性呦成人伦理资源在线视频| 超碰精品| 天美传媒在线一区| 日han少妇无码| 国产欧美一区二区| 天天影视综合网欧美精品| 97在线精品| 男人高清无码一区二区| 亚洲AV无码AV吞精久久久久 | 丁香五月天社区| 青青操狠狠撩| 中日亚韩免费视频| www..com操老师| 97啪啪| 亚洲国产丝袜熟女av| 人妻激情视频| 青青草好吊色| 青青草国产欧美非洲黑人| 国产日本顶级一区二区三区| 91狠狠综合久久| 四季av一区二区凹凸精品小说| 综合大香蕉美。| 亚洲怡春院| 欧美性五月| 国产精品乱码久久久久久| 伊人四虎综合| 噜噜噜噜天天狠狠| 97无码视频在线播放| 超碰免费97| 中国AV美女| 99精品视频在线观看免费| 天天色黄色影院天天操| 国产成人无码久久精品| 很很干很很操| 夜夜爽夜夜爽| 老女人综合网| 亚洲一区二区三区AV无码| 婷婷丁香五月天综合东京热| 99热精品免费| 东京热激情视频一二三区| 丝袜美腿欧美| 亚洲诱惑| 91久热| av影片在线观看不卡| 人人妻碰人人免费| 日韩在线观看中文字幕视频| www.婷婷五月天| 殴美综合色88| 97资源站久久| 97无码视频在线播放| 免费观看国产小粉嫩喷水精品午| 日操粉逼逼| 囯产精品一区二区三区线|亚洲人成无码网WWW动漫|国产精品免费一级... | 亚洲码在线中文在线观看| 欧美性色网| 亚洲一区二区在线观看91| 国产精品毛片?v一区二区三区| 日本激情免费大片| 五月婷婷六月丁香| 91精品免费| 欧美性91| 国产精品探花在线| 超碰79人人乐| 麻豆区久久久久亚| 国产精品人妻免费精品| 99热这里只有精品地址| 99精品网| 欧美天堂第二区| 97超碰欧美手机| 亚洲精品国产日韩无码AV永久免 | 亚洲欧美精品福利在线| 97人人爱人人做人人乐| 91美女片在线| 亚欧成人中文字幕一区| 精品乱子一区二区三区99| 深夜激情| 五月丁香社区婷婷日韩欧美精品影院 | 久操网视频| 嗯嗯啊啊视频在线看| 久久久性爱视频| 午夜爽爽爽| 日韩一级成人毛片免费观看| 欧美白嫩女HD| 欧成人精品H无码| 欧美极度丰满熟妇hd| 欧美操逼熟女| 亚洲视频,小说| 亚洲婷婷丁香在线| 亚洲 欧美 中文 日韩超碰| 91中出视频| 黄片色区软件| 午夜毛片高清免费不卡| 69视频入口| 久久啊哟| 欧美岛国精品在线观看| 久久久草成人网站久久久草成人久久久草久久久 | 宅男91视频在线播放| 色香在线| 久久成人午夜精品影院| 国产传媒日韩| 无码抄逼网| 欧美肥臀在线| 欧美麻豆成人同性GⅤ在线| 熟女精品一区二区在线观看| 成人一级性爱| 国产精品久久久999| 亚洲欧美自拍偷拍| 性爱欧美五月| 日本高清有码网址视频| 色哟哟AV| 成人欧美一区二区三区黑人一| 9精品在线| 久草国产在线视频| 国产自偷| 国产亚洲综合欧美一区| 欧美美女视频| 日韩草久视频| 欧美性爱免费短视频| 国产一区96在线| 国产一级高清免费观看| 狠狠搞 亚洲91| 国产毛片在线| 四虎在线观看网站| 五月天综合网| 农村女一级毛卡片| www.男人天堂| 日韩成人性爱电影在线播放| 狠狠爱夜夜| 手机在线看片免费人成视频| 亚洲男人电影天堂| 久9久精品视频| 思思性爱| 伊人一级免费黄片| 国产地址二三| 欧美国产日韩清纯唯美| 欧美一区二区男人天堂| 后入式999| 国产怡红院| 先锋激情∨在线视频播放| 91热色| 男人的天堂不卡一区二区| 91一区二区三区蜜桃| 精品久久9| 99激情| 国产亚洲日韩在线三区黑人| 午夜噜噜噜| 青青操在线亚洲视频观看欧美在线 | 久久爽爽精品| 综合网色| 亚洲激情综合另类男同| 91色香| 大香蕉色欲AV| 97中文天堂| 乱伦1色页| 午夜一区| 9ⅰ久久久天天| 婷婷在线视频| 岛国黄色大片网站| 久久久精品中文字幕爱豆| 日本精品免费一区二区三区四区| 人妻81p| 欧美色图亚洲色| 久久久久久久久久黄色网| www.99热| 成人网址在线观看| 国产精品亚洲无码| 日本操逼无码| 久久这里只| 九九九九一级| 综合av影片| ′ !γ}丶。。久久精品欧美一区二区三区| www.av在线观看| 欧美日韩*字幕一区| 蜜臀久久99精品久久久久久-DVD原版全| 亚洲天堂资源| 96免费视频在线| 天天操天天射青青草| 日韩在线观看字幕精品| 久草网站免费在线观看| 欧美日韩久久精品爱爱| 加勒比综合88| 亚洲色阁| 色爱亚洲| 精品国产Av无码久久久伦古装| com 首页 18岁 禁区 女优 免费 精选 同城| 日韩人妻无码精品系列| 91高跟美女在线播放| 97精品国产97久久久久久户外免费| 久久,精品一二三| 日韩黄色电影网站| 后入式在线免费观看60秒| 另类综合另类| 国产女上位好爽在线| 天美国产三级传媒| 青青国产精品在线| 国产一区二区三区不卡手机在线| 美女诱惑爱爱| 极品少妇99| 色 亚洲 91| 青青草精玖玖69精品| 日日夜夜国产综合| 97亚洲资源| 中 文字幕一区二区三四 五 区日 日 骚| 熟妇一区二区三区| 黄色二级片网站| 成人A片男人的天堂| 欧美天天综| 国产偷人妻精品一区二区在线| 青青草狠狠撸| 国产久9| 熟妇色99| 一中国女人毛片水真多| 性色生活片久久毛片婬片免费放女人一级毛片 | 日本操逼视频免费| 操逼操逼操| 亚洲91在线播放影院| 美国日韩黄色片| 岛国网址国产 | 国产91福利小视频在线观看| 欧美午夜视频免费观看| 午夜无遮挡男女啪啪视频| 夜间福利片1000无码| 中日高清无码操逼视频| 97资源超碰| 自拍亚洲综合| 亚洲天堂电影网99999| 无码精品久久久久久亚洲| 岛国网址国产 | 易易A毛视频| 精品熟女呻吟久久91| 久久受www免费人成| 熟女人妇一区二区三区| 白丝1区2区3区| 无卡一区=区| 中国91AV| 亚洲第一狼人丝袜美女另类| av在线资源| 亚洲少妇激情视频| 久久久精品网| 淫荡少妇免费| 国产怡红院| 成人一级二级| 无码人妻一区二区三区色欲aⅴ | 欧美 亚洲 另类 综合| 国产又粗又长又大的视频| 99久久国产精品免费高潮| 在线精品福利免费播放| 亚州色图狠狠干| 另类图片五月天| 色五天伊人| 久久精品国产精品亚洲艾通辽熟妇| 超碰碰激情97+久| 中文字幕精品探花视频| 女人被添高潮免费视频| 国产白领连续中出在线播放| 亚洲高清91| 精品区国产区一区二区三区| 男人的天堂2000| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | AV天天在线观看| 天天舔天天日天天射| Sekablack无码一区| 久久久久9| 天天天堂影视日韩亚洲91| 99这里只有精品国产| 日韩精品国产精品五码一区二区| 日本不卡免费二区| 日本三级一区二区 在线| wwe 天天干.com| 一级做a爰片性色毛片久久| 2024人人操人人摸| 欧美96交| 影视综合无码少妇| 婷婷激情一区二区三区俺也去| 蜜臀在线视频| 夜夜爽爽爽| 97操| 久久久久久久久久久人妻| 亚洲激情在线| 亚洲午夜免费狠狠干| 精品无av| 日本三级韩国三级99| 少妇熟女一区二区三区| 激情开心五月天| 校园春色五月天| 日日爽夜夜爽| 国产精品com| 欧洲乱码一区二区| 亚洲无码精品AV久久久| 日本97久久久精品| 免费亚洲黄色视频在线观看| 1000午夜黄色| 性爱av在线免费观看| 国产精品一区二区麻豆| 91久久久久免| 超碰成人人人爽人人爽| 日本淫色网| 国产精品一区av在线| 99只有精品| 天天天天天干夜夜夜夜夜操| 性猛交| 啊好爽受不了无码| 亚洲一卡2卡3卡4卡乱码网站 | 日韩性爱视频在线免费观看| 嫩草黄页| www.99热| 久久首页| 国产精品网站www| 亚洲码专区| 精品国产乱码久久| 蜜桃精品视频一区| 国产亚洲精品自在线亚洲情侣| 97日韩超碰超碰中文字幕| 日韩无码嘿咻黑热久| 熟女五十路一区二区三| 久久久少妇诱惑精品视频| 一品道视频一区二区三区| 五十路六十路七十路熟婆| 欧美精品久久| 综合网,亚洲,欧美| a级成人毛片免费视频高清| 久肏视频字幕| 69精品人人人人| 日韩精品永久在线观看| 日语五十路和六十路亚洲国产精品| 国产1727欧美| 成人夜夜爽| av日韩手机在线影视| 深夜福利黄片| 果冻传媒A片一二三区| 亚洲最大黄网| 亚洲日本激情| 我要色综合网| 天天综合站| 天天影视激情欧美| 七久久久| 久久亚洲av成人无码国产| 免费A片三p视频| 中国少妇啪啪视频| 神马九九九| 97欧美精品综合| 看日韩美女二区三区免费操逼视频| 最新国内自拍av免费| 9Ⅰ老熟女| 四虎精品永久在线观看| 啊操爽品善一区二区三区| 国产欧美伊人| 婷婷月色| 久久婷婷综合国际产色怕| 精品久久久高清无码| 欧差乱伦二三| 国产99999| 色网亚洲人| 亚洲欧洲久久天堂| 欧美精品丝袜久久久中文字幕| 日日夜夜天天| 尤物一级在线免费观看| 波多野结衣先锋影音| 亚洲一区二区三区不卡国产欧美| 国产97在线 | 亚洲| 天天狂操夜夜狂日| 大茄子熟女AV导航| 97视频新免费| 青青草国产盗摄一二三区| 青青11操操操操操操操操| 97这里只有精品| 99精品热| 性性久久| 啊啊啊在线观看免费视频| 不卡啪啪视频| 成人国产精品三级A片| 日本性爱网址| 美女午夜福利免费视频| 亚洲午夜福利在线影院| 404操逼福利视频| 看大黄色大片原件| 青娱乐亚洲自拍| 精品一啪| 亚洲AV性爱电影| 欧美成人黄网色网站| 在线观看综合精品亚洲| 色网在线视频观看免费| 一起草日韩| 亚洲不卡三级手机播放| 夜夜草天天| 911av网站免费观看| 国产精品女生av| 国产中文精品一区二区在线观看| 色噜噜精品一区二区三| 老司机老司机午夜影院| 亚洲综合婷婷| 日本韩国一本产品小视频日本韩国一本产品久久久产品小视频日本韩国一本产品久 | 大粗鳼巴久久久久| 欧亚日韩中文在线| 亚洲 暴爽 AV人人爽日日碰| 午夜乱轮操逼视频免费看| 国产精品探花视频| 超碰人人干| 婷婷三区| 天天综合网合集91| 青娱乐黄色录像| 欧美在线永久天堂| 国产亲戚伦亲在线| 毛片电影一区二区三区| 九九精品美女高溯喷水| 操死我了嗯嗯嗯| 久久久草草精品| 国产精品96| 午夜视频黄| 天天做日日做天天欢。| 一本道综合色图| 色妹子A V| 96免费视频在线| 久久99干一本高清| 亚洲黄色电影| 久久无码一区二区二三区性色| 亚洲第一无码播放立川理惠| 婷婷中文字幕| 青草园大香蕉| aaa亚无码专区| 91精品无码久久久久久久| 男人的天堂一区三区| 欧美精品91| 老女人老91妇女老热女| 97视频在线看| 婷婷五月天激情网| 色婷婷综合视频| 九九九精品一区二区无码| 亚洲色图综合| 三级特黄60分钟播放| 花野真衣| 欧美精品一二三| 国产呦精品系列在线观看| 国产一级αv免费看片| 国产熟妇一区二区| 亚洲人妻久久久| 老司机天天操| 成人精品视频一区二区| 色淫网站优优视频| 自拍视频一区在线观看| 78p欧美| 玖草在线视频| av凤凰久久久| AV色图| 日韩精品在线观看观看| 99少妇精品视频| 日韩欧视频| 干婷婷综合网| 少妇内射www在线观看视频| 国产精品白领在线观看| 一色网男人的天堂| 高清无码91| 日韩性爱网址| 欧美综合亚洲| 久草视频在线视频在线视频在线观看| 5252色欧美在线| 精品无码秘 人妻一区二区 | 国产丝袜啪啪| 欧美性生活综合| 久久精品免视看国产成人﹣蜜臀av一区. 久久精品免视看国产成人,蜜臀av一区 | 日本淫色网| 久久久久女教师免费一区| 国产免费一区在线观看| 1204人成网站色www| www.99中文字幕| 熟妇高潮精品一区二区三区下载| 日韩欧美aⅴ综合网站发布| 特级大荫道BBwBBwBBW| 啪啪视频免费在线观看| 天天干天天日天天射黄色| 久久久久女教师免费一区| 久热9| 九九九九AV| 精品久热| 久久男人的天堂| 久久久久久久久久久久久久9999| 天美传媒AV在线| 中文字幕一区 二区三四五 区日 日骚| 天美传媒AV在线| 国产精品交换一区二区| 在线视频 亚洲精品| 国产精品色哟哟| 九九九热| 伊人网在线视频| 精品超碰国产| 久久九色| 亚洲三级网址久久最新| 操逼逼福利视频| 超碰色97| 91久久久久久久久久久| 久久欲| 快播久久人人aV| 欧美一级国产一级| av天堂加勒比| 天天天肏屄欧美| 精品少妇人妻av久久免费| 欧美性综合| 五月天综合| 在线观看亚洲成人精品| 久操大香蕉超碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰 | www.99中文字幕| 啊啊啊操死我了| 99色| 超碰成人公开| 99精品九九九九九九| 激情文学网伊人| 日本免费中文字幕在线| 欧美九九九| WWW4虎| 成人性爱全视频观看| 日本精品一区二区三区四区的功能| 日han少妇无码| 自拍偷拍 日韩无码| 欧美一二三| 美女91色黄18| 亚洲综合另类| 在线国产福利网址导航| 玖玖婷婷五月天| 天躁夜夜躁2021| 性爱欧美五月| 97WW精品| 温婉少妇玩3p| 精品一区二区国产日韩| a啊啊啊啊啊啊啊啊一区二区| 青青草吊丝| 精品久久人妻成人网| 亚洲另类欧美精品| 亚洲精品电影| 青青草手机在线免费观看| 色情五月婷婷| 国产高清免费不卡av| 91白嫩| 亚洲色悠悠久久88| 按摩中文字幕| 99久久综合| 国产日韩欧美操逼视频| 97在线免费看视频| 91男女| 欧美亚洲20p| 亚洲精品丝袜-不卡成人免费…… 久久久久成人蜜桃精品 | 操逼操逼视频操逼| 日本一区二区亚洲综合| 精品一级| 熟妇人妻一二三区免费| 国精综合一二三区影视| 熟妇亚洲一区二区三区| 婷婷性爱| 色青青久久影视| 一起草日韩| 亚洲图片色图欧美另类| 亚洲AV成人精品网站在AV| 久草综合网| 亚洲drav色图| 国产白领连续中出在线观看| 久久综合亚洲色1080p| 国产精品久久久| 性色aV一区二区三区噜噜| 青青草日韩免费观看高清在线| 白丝jkav| 污污污8888| 日韩情色视频| 久久,精品一二三| 丁香激情网| 欧洲色色| 亚洲色啪| 91狠| 亚洲熟妇图片| 日本人妻一区二区| 嗯啊不要在线| www.97在线| 午夜呻吟欧美| 日韩99神马视频播放| 日韩天堂av电影在线观看| 亚洲s在线观看| 国产夜夜操| 啪啪视频mP4| 曰本精品久久久| 台湾大香蕉99热| 欧美日韩青操| 97精品国产手机| 91久久久久久久| 99热这里只有精品1| 欧美一区二区| 男人天堂2030| 国语对白露脸XXXXXX| 免费福利视频中文字幕| 狠狠中文字幕| 色小视频蜜乳| 一二三四日本视频高清| 日少妇亚洲版| 殴洲老熟女| 日韩射图| 人妻丝袜美腿中文字幕| a片 xxxx受爽视频| 亚洲视频1区| 国产亚州高清国产拍精| 色情五月婷婷| 91 在线亚洲| 亚洲少妇激情视频| 欧美骚少妇| 亚洲国产成人综合碰碰三级经典| 亚洲色综合| 91快色色色色色| 东京日日夜夜| 国产午夜视频| 操逼无毒无码免费视频| 国产精品伦理| 密乳视频在线| 成人一区二区三区四区| 成人av动漫在线观看| 免费精品国偷自产在线在线| yiqicaoav| 国产精品日韩在线一区| 国产不卡免费在线视频| 婷婷在线精品| 97超久碰| 一本色道久久综合亚洲二区三区| www男人天堂| 被男人吃奶很爽的毛片| 日韩欧美俄罗斯A片| 九九av| 中文字日本乱码| 风韵犹存大大大大香蕉| 国产福利视频精品视频| 亚洲男人天堂2019| 人妻人人澡人人爽人人| 欧美日韩在线小说 | 97干97色| 欧美一区二区观看在线| 大香蕉综合| 99热婷婷一区二区三| 精品午夜福利国产一区二区在线观看 | 亚洲色图尤物视频 | 日本色色网| 久欲AV| 免费啪啪啪网站18岁| 婷婷激情一区二区三区俺也去| 玖玖久久久| 91在线精品| 超碰 欧美| 中文字幕 国产 精品| 91亚.色| 国产精品视频精品一二| 亚洲精品白丝| 亚洲国产麻豆一区二区三区| 欧美亚洲日韩16色| 人妻啪| 天天影视之亚洲综合网| 亚洲AV噜噜狠狠网址蜜桃动漫| 欧美韩国你懂得在线| 国产精品直播在线观看直播| 综合天天网| 91碰超| 五月天婷婷社区| 久久超碰亚洲人| 日本1区2区不卡视频| 九九人妻| 操一区| 大香蕉乱级| 在线免费试看60秒| 六月天婷婷| 日韩色欲久久一二三四区| 中国黄色特级精品一区二区三区片| 精品人妻美妇91job| 91亚洲电影| 玖玖草久草99蜜月一区二区三区| 国产 无码 一区二区| 不卡日本一区二区| 亚洲国内精品成人不卡| 91日本在线观看| 九九综合久久中文字幕| 97久操| 九九九偷拍| 99热欧美| 小视频国产| 欧美色狠| 亚洲在线观看| 欧美韩国你懂得在线| 亚洲精品久久久久久久蜜桃臀| 97色碰| 性色aV一区二区三区噜噜| 亚洲国产精品久久久男人的天堂| 97亚洲性爱| 性暴力欧美猛交在线直播| 91久久久久久久久18| 精品视频一区二区| 伦在线97| 久久久99999久网站| 闷骚老熟女15P| 2025亚洲男人天堂| 丝袜综合色图| 色欲日韩欧美在线一区| 操B视频日韩无码| 伊人热综合| 碰碰97| 日韩性爱1级片视频| 中文字幕在线免费观看2| 久久成人精品| 嗯嗯嗯啊啊啊操的我好爽| 亚洲二区精品在线观看| 凹凸视频在线一区二区| 国产毛片毛片4p懂色| 日韩中文字幕精品一二三事国产精品| 国产极品一区二区三区三州| 亚洲九九九| 日韩黄色片子| 操逼逼福利视频| 人妻日日干| 欧美熟女少妇| 一牛影视久久久一区二区三区| 久久久久久久久久久久久久9999| 色婷婷综合久久中文字幕雪峰| 精品免费1| 热热色国产一二区AV| 久草这里只有精品| 日韩综合无码一区久久92| 天天艹天天日| 亚洲精品成人激情在线| 天天操天天射青青草| 男女香蕉一区二区| 亚洲天天自拍| 蜜乳AV.COM| 在线视频亚洲无码| 人人妻人人玩人人澡人人爽| 国产狂喷潮在线精品| 国模不卡| 超碰色中文| 超碰久超碰久| 国产黄色影片在线观看| 爱射综合| 一区| 色妇综合网| 九九AV| 97欧美色综合| 亚洲va有码在线天堂| 欧美婷婷久久| 精品视频一二三中文| 久久婷综合| 天天干人人乐| 强歼乱伦资源网| 国产精品不卡一区二区三区| 成人av福利在线观看| 五月婷婷色| 嗯嗯啊啊操我| 久久精品国产96精品亚洲拳交| 精产国品一区二三产品| 秋霞Av理论一级在线| 伊人综合色网| 久久在线观看免费视频| 操我啊啊啊啊啊| 啊啊啊好多水| av在线人气| 日韩一性一交一A片俄罗斯| 动漫av中文| 精品在线观看视频在线| 久久久精品九| a在线观看| 超碰97COm中文| 男人的天堂2019AV| 大香蕉中文| 国产精品色哟哟| 先锋激情∨在线视频播放| 亚洲色图91欧美日韩| 超碰导航97| 污啪啪啪视频| 偷拍精品一区二区三区| 性色avv| 天天综合中文字幕 91| yirendaxiangjiashipin| 国产欧美另类久久久精品课程| 大香蕉婷婷| 国产a片操逼| chaopen97久久| 禁十八久久| 大香蕉九九| 久久这里只有精品9| 新精精品久久精品| 亚洲另类久操网| 91N综合网| 一区超碰一区| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 大地资源在线观看中文第二页| 日韩精品免费高清视频在线| 91插B网站| 国产精品乱码久久久久久| 日韩紧密久久| www.五月天| 大香蕉啪啪啪| 久热99| 人干人人人操人人摸|