免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線(xiàn)實(shí)戰(zhàn)洞察。

C/C++跨平臺(tái)進(jìn)程內(nèi)存監(jiān)控:從概念到實(shí)戰(zhàn),精準(zhǔn)定位內(nèi)存泄漏

C/C++跨平臺(tái)進(jìn)程內(nèi)存監(jiān)控:從概念到實(shí)戰(zhàn),精準(zhǔn)定位內(nèi)存泄漏 1. 項(xiàng)目概述與核心價(jià)值最近在調(diào)試一個(gè)長(zhǎng)時(shí)間運(yùn)行的后臺(tái)服務(wù)時(shí)遇到了一個(gè)典型問(wèn)題程序運(yùn)行幾天后響應(yīng)速度明顯變慢但通過(guò)任務(wù)管理器或top命令查看CPU使用率并不高。直覺(jué)告訴我這很可能是內(nèi)存使用在緩慢增長(zhǎng)也就是常說(shuō)的“疑似內(nèi)存泄漏”。然而無(wú)論是Windows的任務(wù)管理器還是Linux的top顯示的“內(nèi)存”指標(biāo)往往有好幾個(gè)比如“工作集內(nèi)存”、“專(zhuān)用工作集”、“提交大小”、“虛擬內(nèi)存大小”、“RSS”、“VSZ”等等看得人眼花繚亂。對(duì)于一個(gè)C/C開(kāi)發(fā)者來(lái)說(shuō)我們需要的不是一個(gè)籠統(tǒng)的、可能被操作系統(tǒng)內(nèi)存管理策略影響的數(shù)字而是一個(gè)能準(zhǔn)確反映我們程序“真實(shí)”占用了多少物理內(nèi)存的指標(biāo)以便進(jìn)行精準(zhǔn)的性能分析和問(wèn)題定位。這個(gè)項(xiàng)目的核心目標(biāo)就是深入探討如何在C/C程序中以編程的方式、跨平臺(tái)地涵蓋Windows和Linux獲取當(dāng)前進(jìn)程精確的內(nèi)存占用信息。這不僅僅是調(diào)用一個(gè)API那么簡(jiǎn)單它涉及到對(duì)操作系統(tǒng)內(nèi)存管理機(jī)制的理解以及對(duì)不同內(nèi)存統(tǒng)計(jì)口徑的辨析。掌握這項(xiàng)技能對(duì)于開(kāi)發(fā)高性能服務(wù)、嵌入式系統(tǒng)、游戲引擎或任何對(duì)資源敏感的應(yīng)用都至關(guān)重要。它能幫助你構(gòu)建自己的監(jiān)控模塊、實(shí)現(xiàn)內(nèi)存預(yù)警、輔助排查內(nèi)存泄漏是進(jìn)階開(kāi)發(fā)者工具箱里的必備利器。2. 內(nèi)存概念辨析我們到底要統(tǒng)計(jì)什么在動(dòng)手寫(xiě)代碼之前我們必須先搞清楚目標(biāo)。操作系統(tǒng)報(bào)告的內(nèi)存使用情況有多重含義用錯(cuò)指標(biāo)會(huì)導(dǎo)致完全錯(cuò)誤的結(jié)論。2.1 物理內(nèi)存 vs 虛擬內(nèi)存這是最基本的區(qū)分。我們程序代碼中通過(guò)malloc或new申請(qǐng)的內(nèi)存首先獲得的是虛擬內(nèi)存地址。操作系統(tǒng)和CPU的MMU內(nèi)存管理單元負(fù)責(zé)將這些虛擬地址映射到物理內(nèi)存條上的真實(shí)地址。一個(gè)進(jìn)程的虛擬地址空間通常非常大在32位系統(tǒng)上是4GB64位系統(tǒng)更是天文數(shù)字但實(shí)際使用的物理內(nèi)存卻有限。當(dāng)我們說(shuō)“內(nèi)存占用高”通常指的是物理內(nèi)存RAM的占用高因?yàn)檫@直接關(guān)系到系統(tǒng)是否會(huì)開(kāi)始使用緩慢的交換分區(qū)Swap從而導(dǎo)致性能驟降。2.2 關(guān)鍵內(nèi)存指標(biāo)詳解不同的工具和API會(huì)返回不同的內(nèi)存值以下是幾個(gè)最常見(jiàn)的工作集Working Set 這是進(jìn)程當(dāng)前在物理內(nèi)存中的那部分內(nèi)存頁(yè)的集合。操作系統(tǒng)會(huì)根據(jù)訪(fǎng)問(wèn)頻率動(dòng)態(tài)地將一些不常用的頁(yè)面移出工作集可能寫(xiě)入交換文件。這個(gè)值波動(dòng)很大但最能反映“此刻”對(duì)物理內(nèi)存的壓力。專(zhuān)用工作集Private Working Set 工作集中僅屬于該進(jìn)程自身、無(wú)法與其他進(jìn)程共享的內(nèi)存部分。這更接近我們通常理解的“這個(gè)進(jìn)程自己用了多少物理內(nèi)存”。共享庫(kù)DLL, .so的代碼段雖然在工作集中但因?yàn)槭枪蚕淼牟挥?jì)入此項(xiàng)。提交大小Commit Size 進(jìn)程向系統(tǒng)承諾保留的虛擬內(nèi)存總量。這包括了已在物理內(nèi)存中的部分也包括在磁盤(pán)頁(yè)面文件交換分區(qū)中預(yù)留的空間。這個(gè)值反映了進(jìn)程對(duì)系統(tǒng)虛擬內(nèi)存資源的總體需求。RSSResident Set Size Linux/Unix下的概念類(lèi)似于“工作集”指進(jìn)程在物理內(nèi)存中的總頁(yè)數(shù)。但它包括了共享庫(kù)所以多個(gè)進(jìn)程的RSS之和可能大于系統(tǒng)總物理內(nèi)存。VSZVirtual Memory Size Linux/Unix下的概念指進(jìn)程可訪(fǎng)問(wèn)的虛擬內(nèi)存總量類(lèi)似于“提交大小”。私有字節(jié)Private Bytes Windows下的性能計(jì)數(shù)器概念指進(jìn)程分配的、無(wú)法與其他進(jìn)程共享的虛擬內(nèi)存大小。這是診斷內(nèi)存泄漏最常用的指標(biāo)之一因?yàn)樗皇芪锢韮?nèi)存換入換出的影響只增不減除非釋放。對(duì)于我們這個(gè)項(xiàng)目如果目標(biāo)是監(jiān)控程序自身的內(nèi)存消耗趨勢(shì)尤其是排查泄漏私有字節(jié)Windows和進(jìn)程獨(dú)占的物理內(nèi)存Linux下需從RSS中估算是更可靠的指標(biāo)。如果目標(biāo)是評(píng)估程序?qū)Ξ?dāng)前系統(tǒng)物理內(nèi)存的實(shí)時(shí)壓力專(zhuān)用工作集Windows或PSSProportional Set Size Linux下更準(zhǔn)則更有參考價(jià)值。注意 沒(méi)有一個(gè)“絕對(duì)正確”的答案。選擇哪個(gè)指標(biāo)取決于你的目的。監(jiān)控泄漏看“私有字節(jié)”看實(shí)時(shí)影響看“專(zhuān)用工作集”或“PSS”。3. Windows平臺(tái)實(shí)現(xiàn)詳解Windows提供了多個(gè)API來(lái)獲取進(jìn)程內(nèi)存信息這里我們聚焦于最常用和準(zhǔn)確的兩種方式。3.1 使用GetProcessMemoryInfoAPI推薦這是最直接、信息最全的方式。它通過(guò)Psapi.h頭文件和Psapi.lib庫(kù)或Kernel32.lib提供。#include windows.h #include psapi.h #include stdio.h #include tchar.h // 確保鏈接 Psapi.lib #pragma comment(lib, Psapi.lib) // 對(duì)于高版本VS也可能是 Kernel32.lib // #pragma comment(lib, Kernel32.lib) void PrintMemoryInfoWindows() { HANDLE hProcess GetCurrentProcess(); PROCESS_MEMORY_COUNTERS pmc; ZeroMemory(pmc, sizeof(pmc)); pmc.cb sizeof(pmc); if (GetProcessMemoryInfo(hProcess, pmc, sizeof(pmc))) { _tprintf(_T( Windows 進(jìn)程內(nèi)存信息 \n)); _tprintf(_T(PageFaultCount頁(yè)面錯(cuò)誤次數(shù): %u\n), pmc.PageFaultCount); _tprintf(_T(PeakWorkingSetSize峰值工作集: %llu KB\n), pmc.PeakWorkingSetSize / 1024); _tprintf(_T(WorkingSetSize工作集: %llu KB\n), pmc.WorkingSetSize / 1024); // 這是我們最關(guān)心的指標(biāo)之一專(zhuān)用工作集物理內(nèi)存 _tprintf(_T(QuotaPeakPagedPoolUsage分頁(yè)池峰值: %llu KB\n), pmc.QuotaPeakPagedPoolUsage / 1024); _tprintf(_T(QuotaPagedPoolUsage分頁(yè)池: %llu KB\n), pmc.QuotaPagedPoolUsage / 1024); _tprintf(_T(QuotaPeakNonPagedPoolUsage非分頁(yè)池峰值: %llu KB\n), pmc.QuotaPeakNonPagedPoolUsage / 1024); _tprintf(_T(QuotaNonPagedPoolUsage非分頁(yè)池: %llu KB\n), pmc.QuotaNonPagedPoolUsage / 1024); _tprintf(_T(PagefileUsage頁(yè)面文件使用量: %llu KB\n), pmc.PagefileUsage / 1024); // 這是診斷內(nèi)存泄漏最關(guān)鍵的指標(biāo)私有字節(jié)虛擬內(nèi)存 _tprintf(_T(PeakPagefileUsage峰值頁(yè)面文件: %llu KB\n), pmc.PeakPagefileUsage / 1024); _tprintf(_T(PrivateUsage私有字節(jié): %llu KB\n), pmc.PrivateUsage / 1024); } else { _tprintf(_T(GetProcessMemoryInfo 失敗! 錯(cuò)誤碼: %d\n), GetLastError()); } CloseHandle(hProcess); // 雖然GetCurrentProcess不需要關(guān)閉但保持好習(xí)慣 }關(guān)鍵指標(biāo)解讀WorkingSetSize 當(dāng)前工作集大小即進(jìn)程在物理內(nèi)存中的總占用。PrivateUsage私有字節(jié)數(shù)。這是進(jìn)程通過(guò)malloc/new等分配的、不與其他進(jìn)程共享的虛擬內(nèi)存總量。內(nèi)存泄漏時(shí)這個(gè)值會(huì)持續(xù)增長(zhǎng)是監(jiān)控的重點(diǎn)。PagefileUsage 進(jìn)程在頁(yè)面文件中占用的空間量。PrivateUsage通常略大于或等于PagefileUsage因?yàn)榍罢甙烟峤坏形幢环猪?yè)到磁盤(pán)的內(nèi)存。實(shí)操心得在調(diào)試內(nèi)存泄漏時(shí)我通常會(huì)周期性地例如每分鐘記錄PrivateUsage的值到日志文件觀(guān)察其增長(zhǎng)趨勢(shì)。如果在一個(gè)負(fù)載穩(wěn)定的階段該值仍持續(xù)線(xiàn)性增長(zhǎng)基本可以斷定存在泄漏。GetProcessMemoryInfo需要PROCESS_QUERY_INFORMATION或PROCESS_QUERY_LIMITED_INFORMATION權(quán)限。對(duì)于當(dāng)前進(jìn)程GetCurrentProcess()這沒(méi)問(wèn)題如果你想查詢(xún)其他進(jìn)程的內(nèi)存需要先以相應(yīng)權(quán)限打開(kāi)進(jìn)程句柄。3.2 使用GlobalMemoryStatusEx和GetProcessWorkingSetSize這兩個(gè)API提供不同角度的信息。#include windows.h #include stdio.h void PrintSystemAndProcessMemory() { // 1. 獲取系統(tǒng)全局內(nèi)存狀態(tài) MEMORYSTATUSEX memStatus; memStatus.dwLength sizeof(memStatus); if (GlobalMemoryStatusEx(memStatus)) { _tprintf(_T(------ 系統(tǒng)全局內(nèi)存 ------\n)); _tprintf(_T(物理內(nèi)存總量: %llu MB\n), memStatus.ullTotalPhys / (1024 * 1024)); _tprintf(_T(可用物理內(nèi)存: %llu MB\n), memStatus.ullAvailPhys / (1024 * 1024)); _tprintf(_T(系統(tǒng)提交上限: %llu MB\n), memStatus.ullTotalPageFile / (1024 * 1024)); _tprintf(_T(當(dāng)前提交用量: %llu MB\n), memStatus.ullTotalPageFile - memStatus.ullAvailPageFile) / (1024 * 1024)); } // 2. 獲取當(dāng)前進(jìn)程的工作集大小范圍這是一個(gè)軟限制 SIZE_T minWs, maxWs; if (GetProcessWorkingSetSize(GetCurrentProcess(), minWs, maxWs)) { _tprintf(_T(------ 進(jìn)程工作集限制 ------\n)); _tprintf(_T(最小工作集: %llu KB\n), minWs / 1024); _tprintf(_T(最大工作集: %llu KB\n), maxWs / 1024); } }注意事項(xiàng)GlobalMemoryStatusEx獲取的是整個(gè)系統(tǒng)的內(nèi)存情況有助于判斷你的程序是否處于一個(gè)內(nèi)存緊張的環(huán)境中。GetProcessWorkingSetSize獲取的是工作集大小的軟限制操作系統(tǒng)會(huì)嘗試將進(jìn)程的工作集維持在這個(gè)范圍內(nèi)但并非強(qiáng)制。你可以使用SetProcessWorkingSetSize來(lái)嘗試設(shè)置它但強(qiáng)制縮小可能導(dǎo)致性能問(wèn)題因?yàn)轫?yè)面錯(cuò)誤會(huì)急劇增加。4. Linux平臺(tái)實(shí)現(xiàn)詳解Linux下獲取進(jìn)程內(nèi)存信息主要依賴(lài)于讀取虛擬文件系統(tǒng)/proc中的文件。/proc/[pid]/status和/proc/[pid]/statm是兩個(gè)關(guān)鍵文件。4.1 解析/proc/self/status文件信息全面/proc/self是一個(gè)指向當(dāng)前進(jìn)程/proc/[pid]目錄的符號(hào)鏈接使用起來(lái)很方便。#include stdio.h #include stdlib.h #include string.h void PrintMemoryInfoLinuxFromStatus() { FILE* f fopen(/proc/self/status, r); if (!f) { perror(Failed to open /proc/self/status); return; } char line[256]; long vmSizeKb 0, vmRSSKb 0, vmDataKb 0, vmStkKb 0, vmExeKb 0, vmLibKb 0; printf( Linux 進(jìn)程內(nèi)存信息 (/proc/self/status) \n); while (fgets(line, sizeof(line), f)) { // 查找關(guān)鍵字段 if (strncmp(line, VmSize:, 7) 0) { sscanf(line 7, %ld, vmSizeKb); printf(VmSize (虛擬內(nèi)存總量類(lèi)似VSZ): %ld KB\n, vmSizeKb); } else if (strncmp(line, VmRSS:, 6) 0) { sscanf(line 6, %ld, vmRSSKb); printf(VmRSS (常駐物理內(nèi)存類(lèi)似RSS): %ld KB\n, vmRSSKb); } else if (strncmp(line, VmData:, 7) 0) { sscanf(line 7, %ld, vmDataKb); printf(VmData (數(shù)據(jù)段堆內(nèi)存): %ld KB\n, vmDataKb); } else if (strncmp(line, VmStk:, 6) 0) { sscanf(line 6, %ld, vmStkKb); printf(VmStk (棧內(nèi)存): %ld KB\n, vmStkKb); } else if (strncmp(line, VmExe:, 6) 0) { sscanf(line 6, %ld, vmExeKb); printf(VmExe (代碼段): %ld KB\n, vmExeKb); } else if (strncmp(line, VmLib:, 6) 0) { sscanf(line 6, %ld, vmLibKb); printf(VmLib (共享庫(kù)代碼): %ld KB\n, vmLibKb); } // 還可以解析 VmSwap, VmPTE, VmPeak 等 } fclose(f); // 估算近似“私有內(nèi)存”RSS - 共享庫(kù)部分這是一個(gè)粗略估算 // 注意更準(zhǔn)確的“私有內(nèi)存”需要計(jì)算PSS但解析/proc/self/smaps更復(fù)雜 printf(\n[估算] 近似私有物理內(nèi)存 (VmRSS - VmLib): %ld KB\n, vmRSSKb - vmLibKb); printf([估算] 程序自身虛擬內(nèi)存 (VmDataVmStkVmExe): %ld KB\n, vmDataKb vmStkKb vmExeKb); }關(guān)鍵指標(biāo)解讀VmSize 相當(dāng)于VSZ進(jìn)程總的虛擬內(nèi)存空間。VmRSS 相當(dāng)于RSS進(jìn)程占用的物理內(nèi)存總和包含共享庫(kù)。VmData 這是堆heap和已初始化數(shù)據(jù)段的大小。程序運(yùn)行時(shí)通過(guò)malloc/new分配的內(nèi)存主要反映在這里的增長(zhǎng)上。監(jiān)控這個(gè)值的變化對(duì)發(fā)現(xiàn)內(nèi)存泄漏很有幫助。VmStk 棧內(nèi)存大小。VmLib 共享庫(kù)代碼占用的物理內(nèi)存。注意/proc/self/status中的值單位是KB。VmData的增長(zhǎng)是發(fā)現(xiàn)內(nèi)存泄漏的強(qiáng)信號(hào)但它屬于虛擬內(nèi)存范疇。要估算“私有物理內(nèi)存”用VmRSS - VmLib非常粗略因?yàn)楣蚕韼?kù)的數(shù)據(jù)部分也可能被共享。更準(zhǔn)確的方法是解析/proc/self/smaps計(jì)算PSS。4.2 解析/proc/self/statm文件快速輕量如果你只需要最核心的RSS和VSZ信息statm文件更快它只包含7個(gè)以頁(yè)為單位的數(shù)字。#include stdio.h #include unistd.h // for sysconf void PrintMemoryInfoLinuxFromStatm() { FILE* f fopen(/proc/self/statm, r); if (!f) { perror(Failed to open /proc/self/statm); return; } long size, resident, share, text, lib, data, dt; // 格式: size resident share text lib data dt if (fscanf(f, %ld %ld %ld %ld %ld %ld %ld, size, resident, share, text, lib, data, dt) ! 7) { printf(Failed to parse /proc/self/statm\n); fclose(f); return; } fclose(f); long pageSizeKb sysconf(_SC_PAGESIZE) / 1024; // 獲取系統(tǒng)頁(yè)大小并轉(zhuǎn)換為KB printf( Linux 進(jìn)程內(nèi)存信息 (/proc/self/statm) \n); printf(虛擬內(nèi)存大小 (VSZ): %ld pages - %ld KB\n, size, size * pageSizeKb); printf(常駐物理內(nèi)存 (RSS): %ld pages - %ld KB\n, resident, resident * pageSizeKb); printf(共享內(nèi)存頁(yè): %ld pages - %ld KB\n, share, share * pageSizeKb); printf(代碼段: %ld pages - %ld KB\n, text, text * pageSizeKb); printf(數(shù)據(jù)段堆棧: %ld pages - %ld KB\n, data, data * pageSizeKb); // 估算私有RSS (近似) printf(\n[估算] 近似私有RSS (resident - share): %ld pages - %ld KB\n, resident - share, (resident - share) * pageSizeKb); }實(shí)操心得/proc/self/statm讀取和解析速度極快適合需要高頻采樣內(nèi)存使用的場(chǎng)景比如每秒鐘記錄一次。它的“share”字段表示共享內(nèi)存頁(yè)數(shù)用RSS - share來(lái)估算私有物理內(nèi)存比用status的VmRSS - VmLib稍好一點(diǎn)但依然不完美。對(duì)于嚴(yán)謹(jǐn)?shù)膬?nèi)存分析特別是容器如Docker環(huán)境PSS Proportional Set Size才是黃金標(biāo)準(zhǔn)它按比例分?jǐn)偣蚕韮?nèi)存。獲取PSS需要解析更復(fù)雜的/proc/self/smaps或/proc/[pid]/smaps_rollup文件。5. 跨平臺(tái)封裝與實(shí)踐在實(shí)際項(xiàng)目中我們通常需要一套統(tǒng)一的接口來(lái)獲取內(nèi)存信息以便代碼能在Windows和Linux上編譯運(yùn)行。5.1 設(shè)計(jì)統(tǒng)一的數(shù)據(jù)結(jié)構(gòu)首先我們定義一個(gè)結(jié)構(gòu)體來(lái)存放我們關(guān)心的核心內(nèi)存指標(biāo)。// memory_info.h #ifndef MEMORY_INFO_H #define MEMORY_INFO_H typedef struct { unsigned long long virtualMemoryKb; // 虛擬內(nèi)存大小 (VSZ/PrivateUsage) unsigned long long physicalMemoryKb; // 物理內(nèi)存占用 (RSS/WorkingSet) unsigned long long privateMemoryKb; // 私有內(nèi)存關(guān)鍵泄漏指標(biāo) unsigned long long peakPhysicalMemoryKb; // 峰值物理內(nèi)存占用 } ProcessMemoryInfo; #ifdef _WIN32 #include windows.h #include psapi.h #elif defined(__linux__) #include unistd.h #include stdio.h #include string.h #endif // 聲明統(tǒng)一的獲取函數(shù) int GetCurrentProcessMemoryInfo(ProcessMemoryInfo* info); #endif // MEMORY_INFO_H5.2 實(shí)現(xiàn)平臺(tái)相關(guān)代碼接下來(lái)在.c或.cpp文件中實(shí)現(xiàn)平臺(tái)特定的邏輯。// memory_info.c #include memory_info.h #include stdio.h // for perror on Linux int GetCurrentProcessMemoryInfo(ProcessMemoryInfo* info) { if (!info) return -1; #ifdef _WIN32 HANDLE hProcess GetCurrentProcess(); PROCESS_MEMORY_COUNTERS pmc; pmc.cb sizeof(pmc); if (!GetProcessMemoryInfo(hProcess, pmc, sizeof(pmc))) { fprintf(stderr, GetProcessMemoryInfo failed. Error: %lu\n, GetLastError()); return -1; } info-virtualMemoryKb pmc.PrivateUsage / 1024; // 使用私有字節(jié)作為虛擬內(nèi)存指標(biāo) info-physicalMemoryKb pmc.WorkingSetSize / 1024; info-privateMemoryKb pmc.PrivateUsage / 1024; // Windows下私有字節(jié)是最佳泄漏指標(biāo) info-peakPhysicalMemoryKb pmc.PeakWorkingSetSize / 1024; CloseHandle(hProcess); return 0; #elif defined(__linux__) // 使用 /proc/self/statm 獲取快速信息 FILE* f fopen(/proc/self/statm, r); if (!f) { perror(Failed to open /proc/self/statm); return -1; } long size, resident, share, text, lib, data, dt; if (fscanf(f, %ld %ld %ld %ld %ld %ld %ld, size, resident, share, text, lib, data, dt) ! 7) { fclose(f); fprintf(stderr, Failed to parse /proc/self/statm\n); return -1; } fclose(f); long pageSizeKb sysconf(_SC_PAGESIZE) / 1024; info-virtualMemoryKb size * pageSizeKb; // VSZ info-physicalMemoryKb resident * pageSizeKb; // RSS // Linux下沒(méi)有直接的“私有字節(jié)”概念用 (RSS - 共享) 近似或從status取VmData info-privateMemoryKb (resident - share) * pageSizeKb; // 近似私有物理內(nèi)存 // 峰值物理內(nèi)存需要從 /proc/self/status 的 VmPeak 獲取這里簡(jiǎn)化處理 // 實(shí)際項(xiàng)目中建議解析 /proc/self/status 獲取 VmPeak info-peakPhysicalMemoryKb 0; // 需要額外解析 // 為了更準(zhǔn)確的私有虛擬內(nèi)存類(lèi)似Windows PrivateUsage可以嘗試獲取VmData // 這里作為示例我們簡(jiǎn)單地將 data*pageSizeKb 作為私有虛擬內(nèi)存的另一種表示 // 注意這只是一個(gè)示例實(shí)際含義不同 // info-privateMemoryKb data * pageSizeKb; // 另一種近似 return 0; #else #error Platform not supported (Windows or Linux required) return -1; #endif }5.3 使用示例與監(jiān)控循環(huán)下面是一個(gè)簡(jiǎn)單的示例展示如何周期性地監(jiān)控內(nèi)存使用情況。// main.c #include memory_info.h #include stdio.h #include unistd.h // for sleep int main() { ProcessMemoryInfo memInfo; int sampleCount 10; int intervalSeconds 2; printf(開(kāi)始內(nèi)存監(jiān)控每 %d 秒采樣一次共 %d 次...\n\n, intervalSeconds, sampleCount); for (int i 0; i sampleCount; i) { if (GetCurrentProcessMemoryInfo(memInfo) 0) { printf([采樣 %d]\n, i 1); printf( 虛擬內(nèi)存: %llu KB\n, memInfo.virtualMemoryKb); printf( 物理內(nèi)存: %llu KB\n, memInfo.physicalMemoryKb); printf( 私有內(nèi)存: %llu KB\n, memInfo.privateMemoryKb); printf( 峰值物理內(nèi)存: %llu KB\n, memInfo.peakPhysicalMemoryKb); printf( --------------------\n); } else { printf(獲取內(nèi)存信息失敗。\n); } // 模擬一些內(nèi)存分配觀(guān)察變化 if (i 3) { void* leakBlock malloc(10 * 1024 * 1024); // 分配10MB但不釋放 printf( 模擬分配了 10MB 內(nèi)存未釋放\n); } sleep(intervalSeconds); // Windows下需替換為 Sleep(intervalSeconds * 1000) } printf(\n監(jiān)控結(jié)束。如果‘私有內(nèi)存’在模擬分配后持續(xù)高位可能指示問(wèn)題。\n); return 0; }編譯與運(yùn)行Windows (MSVC):cl main.c memory_info.c Psapi.libLinux (GCC):gcc -o mem_monitor main.c memory_info.c6. 高級(jí)話(huà)題與疑難排查掌握了基礎(chǔ)方法后我們來(lái)看看更深入的問(wèn)題和實(shí)踐中常見(jiàn)的坑。6.1 容器Docker環(huán)境下的內(nèi)存統(tǒng)計(jì)在Docker容器內(nèi)直接從/proc/self/讀取的信息反映的是整個(gè)宿主機(jī)的視角默認(rèn)情況下。/proc文件系統(tǒng)通常是從宿主機(jī)掛載的。這會(huì)導(dǎo)致你在容器內(nèi)看到的VmRSS可能包含其他容器或宿主機(jī)進(jìn)程的共享緩存造成誤判。解決方案使用cgroup內(nèi)存統(tǒng)計(jì) Docker使用cgroup限制和統(tǒng)計(jì)資源。容器的真實(shí)內(nèi)存使用應(yīng)查看cgroup文件。# 查看當(dāng)前容器的內(nèi)存使用和限制 cat /sys/fs/cgroup/memory/memory.usage_in_bytes cat /sys/fs/cgroup/memory/memory.limit_in_bytes cat /sys/fs/cgroup/memory/memory.stat # 詳細(xì)統(tǒng)計(jì)在C程序中你可以讀取這些文件來(lái)獲取更準(zhǔn)確的內(nèi)存使用量特別是memory.usage_in_bytes減去total_cache來(lái)自memory.stat可以估算出更接近“私有工作集”的值。使用/proc/self/smaps_rollup(Linux 4.14): 這個(gè)文件提供了當(dāng)前進(jìn)程內(nèi)存映射的匯總信息計(jì)算PSS更準(zhǔn)確且在容器內(nèi)相對(duì)更可靠。解析它比/proc/self/smaps簡(jiǎn)單一些。6.2 內(nèi)存碎片與分配器的影響你可能會(huì)發(fā)現(xiàn)即使頻繁分配和釋放等量?jī)?nèi)存進(jìn)程的“私有字節(jié)”或VmData也不會(huì)降回原來(lái)的水平。這不一定就是泄漏更可能是內(nèi)存碎片或glibc的malloc實(shí)現(xiàn)行為所致。glibc的malloc 為了性能它不會(huì)輕易將釋放的內(nèi)存歸還給操作系統(tǒng)通過(guò)brk/sbrk或mmap而是留在進(jìn)程的堆空間內(nèi)以備后續(xù)分配。只有堆頂?shù)倪B續(xù)空閑內(nèi)存達(dá)到一定閾值M_TRIM_THRESHOLD默認(rèn)128KB時(shí)才會(huì)進(jìn)行裁剪trim。你可以通過(guò)mallopt(M_TRIM_THRESHOLD, ...)來(lái)調(diào)整這個(gè)行為但需謹(jǐn)慎。內(nèi)存碎片 頻繁分配不同大小的對(duì)象會(huì)導(dǎo)致堆空間出現(xiàn)許多“空洞”即使總空閑內(nèi)存很多也可能無(wú)法滿(mǎn)足一個(gè)新的較大分配請(qǐng)求從而導(dǎo)致堆擴(kuò)張。排查技巧 使用工具如valgrind --toolmemcheck、AddressSanitizer(-fsanitizeaddress) 來(lái)檢測(cè)真正的內(nèi)存泄漏未釋放的分配。對(duì)于碎片問(wèn)題可以考慮使用jemalloc或tcmalloc等替代的內(nèi)存分配器它們通常在多線(xiàn)程環(huán)境和特定分配模式下降碎片化方面表現(xiàn)更好。6.3 共享內(nèi)存Shared Memory的統(tǒng)計(jì)如果進(jìn)程使用了shmget、mmapwithMAP_SHARED等方式創(chuàng)建了共享內(nèi)存這部分內(nèi)存在統(tǒng)計(jì)上需要特別注意在/proc/self/statm的share字段中會(huì)被計(jì)入。在/proc/self/smaps中共享內(nèi)存映射的Shared_Clean、Shared_Dirty屬性會(huì)有值。在Windows中由CreateFileMapping創(chuàng)建的共享內(nèi)存其占用會(huì)計(jì)入系統(tǒng)的頁(yè)面文件但具體歸屬哪個(gè)進(jìn)程的“私有字節(jié)”可能不直觀(guān)需要結(jié)合MapViewOfFile的視圖大小來(lái)分析。6.4 常見(jiàn)問(wèn)題速查表問(wèn)題現(xiàn)象可能原因排查手段PrivateUsage/VmData持續(xù)線(xiàn)性增長(zhǎng)經(jīng)典內(nèi)存泄漏1. 使用Valgrind或AddressSanitizer。2. 檢查new/delete, malloc/free是否成對(duì)。3. 檢查容器、智能指針的循環(huán)引用。WorkingSet/VmRSS高但Private不高大量使用共享庫(kù)或文件緩存正?,F(xiàn)象。使用PSS指標(biāo)評(píng)估更公平。內(nèi)存使用量階梯式下降glibc malloc的trim機(jī)制觸發(fā)觀(guān)察VmData在大量釋放后可能不會(huì)立即下降直到堆頂空閑足夠大。容器內(nèi)看到的內(nèi)存遠(yuǎn)高于預(yù)期使用了宿主機(jī)的/proc視圖改用/sys/fs/cgroup/memory/memory.usage_in_bytes并參考memory.stat。程序退出后內(nèi)存不釋放子進(jìn)程未終止或資源未清理檢查是否有僵尸進(jìn)程或未關(guān)閉的文件描述符、網(wǎng)絡(luò)連接。PeakWorkingSetSize異常高程序歷史中曾有過(guò)巨大內(nèi)存需求可能是正常的峰值但如果持續(xù)很高檢查是否有一次性加載大文件到內(nèi)存的操作。7. 集成到實(shí)際項(xiàng)目與擴(kuò)展思路將內(nèi)存監(jiān)控模塊集成到你的C/C服務(wù)中可以極大提升運(yùn)維和調(diào)試效率。集成建議獨(dú)立監(jiān)控線(xiàn)程 創(chuàng)建一個(gè)低優(yōu)先級(jí)的后臺(tái)線(xiàn)程每隔一段時(shí)間如30秒采集一次內(nèi)存信息。日志記錄 將采集到的ProcessMemoryInfo結(jié)構(gòu)體數(shù)據(jù)以JSON或CSV格式寫(xiě)入日志文件。記錄時(shí)間戳、關(guān)鍵指標(biāo)。閾值告警 設(shè)定閾值如私有內(nèi)存超過(guò)500MB一旦觸發(fā)除了記錄日志還可以通過(guò)郵件、即時(shí)通訊工具機(jī)器人等方式告警。與性能剖析結(jié)合 在記錄內(nèi)存的同時(shí)可以一并記錄CPU使用率、線(xiàn)程數(shù)、打開(kāi)文件描述符數(shù)量等形成完整的性能快照。擴(kuò)展思路更細(xì)粒度監(jiān)控 除了進(jìn)程級(jí)還可以監(jiān)控線(xiàn)程級(jí)的內(nèi)存使用盡管操作系統(tǒng)通常不直接提供但可以通過(guò)定期檢查所有線(xiàn)程棧指針來(lái)估算。內(nèi)存池監(jiān)控 如果你在項(xiàng)目中使用自定義內(nèi)存池可以在池的分配/釋放接口中增加計(jì)數(shù)器直接輸出池的內(nèi)部分配情況這與系統(tǒng)級(jí)監(jiān)控形成互補(bǔ)。圖形化展示 將日志文件解析用Python的Matplotlib或Grafana等工具繪制內(nèi)存使用曲線(xiàn)圖直觀(guān)展示趨勢(shì)和異常點(diǎn)。與調(diào)試器結(jié)合 在開(kāi)發(fā)階段可以在內(nèi)存分配/釋放函數(shù)上掛鉤子hook記錄每次操作的調(diào)用棧和大小在泄漏發(fā)生時(shí)輸出報(bào)告。這類(lèi)似于mtrace或自定義的分配器跟蹤。最后我想分享一個(gè)我自己的深刻體會(huì)內(nèi)存問(wèn)題尤其是泄漏很多時(shí)候不是技術(shù)問(wèn)題而是習(xí)慣和紀(jì)律問(wèn)題。在C/C項(xiàng)目中堅(jiān)持以下原則能避免絕大多數(shù)麻煩誰(shuí)分配誰(shuí)釋放 明確所有權(quán)。使用RAII 在C中充分利用智能指針std::unique_ptr,std::shared_ptr和容器std::vector,std::string。邊界檢查 數(shù)組越界、指針溢出可能破壞堆管理結(jié)構(gòu)導(dǎo)致詭異的“內(nèi)存問(wèn)題”。善用工具 在開(kāi)發(fā)周期中定期尤其是集成測(cè)試階段用Valgrind或AddressSanitizer跑一遍測(cè)試用例。持續(xù)監(jiān)控 在生產(chǎn)環(huán)境部署像本文實(shí)現(xiàn)的內(nèi)存監(jiān)控模塊它能幫你發(fā)現(xiàn)那些在測(cè)試環(huán)境中因數(shù)據(jù)量小或運(yùn)行時(shí)間短而無(wú)法暴露的緩慢泄漏。掌握進(jìn)程內(nèi)存統(tǒng)計(jì)就像給你的程序裝上了“血壓計(jì)”和“心電圖”能讓它運(yùn)行得更加健康、穩(wěn)定。希望這篇長(zhǎng)文能為你提供從理論到實(shí)踐的完整路徑。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
日日夜夜干| 欧美性猛交 XXXX 乱大交| 色婷婷先锋| 久草A片| 丁香六月色婷婷| 色一情一乱一乱一区91Av| 狠狠操天天操天天操| 日韩成人电泉AV| 欧美六月| 激情六月天婷婷| 成人精品在线| 丁香五月另类小说| 五月丁香AV、伊人业余、性色熟妇| 亚洲区在线| 五月婷婷综合久久| 九九视频这里只有精品| 天天拍夜夜爽| 99热这只有| 人人妻人人澡人人爽| 97精品综合久久| 可以免费看的AV网站| 啪啪激情综合| 玖玖婷婷色| 天天干一干| 日婷婷| 人人色人人摸人人看| WWW久久99久久99久久| 日本无va视频| 丁香九月激情| 婷婷伊人久久| 色婷婷超碰| 日韩艹比| 九九综合九色欧美狠狠| 中文字幕在线视频播放| 青吴乐视频| 综合激情视频| 天天插天天干| 日欧一片内射VA在线影院| 色婷婷免费视频| 久久精品亚洲一级牲爱综合 | 婷婷五月丁香成人网| 五月停亭六月,六月停亭的英语| 婷婷丁香色情| 色色综合激情| 91肏| 欧美日韩国产伦精品日韩人妻一| 在线看av| 另类激情五| 一区二区你懂的| 777精品久无码人妻蜜桃| 久久久久9| 色五月综合在线| 色青青视频| 少妇真实被内射视频三四区| 99久视频| 五月婷婷激情| 青青草国产亚洲精品久久| 五月丁香婷草| 九九综合九九| 激情综合久久| 五月婷婷黄色网址| 亚洲综合色网| 国产激情av| 欧美日韩AAAA| 99热只有| 九九Av| 久久久.COM| 九九久久网| 人人色AV| 丁香五月婷婷六月| 婷婷丁香激情综合色情| www色五月| 91超碰九色| 色五月成人| 99热老网站| 天天色天天日天天舔| 蜜桃婷婷丁香| 久久天堂| 色伊人91在线视频| 五月婷久久| www.狠狠| 热99色| 99网址在线观看| 久9热在线免费观看| 91fuliwang| 色婷婷影| 日日色五月天| 一区二区乱码视频| 日韩ww| 久操大屁股女人av| 欧美日韩大黄| h亚洲| 九九视频在线| 日韩小视频在线99| 丁香婷婷人妻| 这里只有精品在线观看视频| 天天做天天爽| 九九精品免费| 婷婷玖玖丁香| 色婷婷中文字母五月丁香| 色播丁香五月婷婷操:屄| 综合色色婷婷| 99久在线精品99re8| 欧美电影在线观看| 九九久久99精品免费观看www| 青青操绿aaa一区日v| 开心五月婷婷99| 九九性爱网| 开心激情婷婷| 五月婷婷激情性爱| 国产VA亚洲VA96| 欧美精品99| 欧美 日韩 人妻 高清 中文| 五月丁香激情四射| 玖玖热视频| 丁香五月天激情婷婷丁香六月| 久久五月天黄色五月天色网址| 噜噜精品| 99riAV成人在线视频| 欧美图片丁香五月天| 天天插天天很| 99久久极情精品一区| 综合久久激情久久| 五月天婷婷自拍图片在线观看| 色播五月婷婷五月| 色婷婷呢狠禁久禁| 99热精品在线播放观看| 九九综合| www.五月婷婷久久.com| 九九在线精点品| 亚洲国产精品二二三三区| 97香蕉人人在线观看| 色爱综合视频| 91九色首页| 色综合久| 2017狠狠干| 操日本人妻视频| 99在线视频播放| 丁香婷婷五月综合欧美另类| 婷婷成人五月天一区| 色综合另类| 91玖玖| 亚洲国产网址| 五月天成人网在线观看| 九九热91| 天天干天天操天天射| 丁香六月婷婷操逼网| 亚洲成人在线播放| 五月天婷婷激情| 99男人天堂| 亚洲激情免费视频观看| 伊人玖玖综合| 欧美久草在线日本一级特黄大片做受9在线观看韩国电影《两个女人》未删减-毛片 | 8050一级网| 99er精品| 超碰人妻在线| 色情丁香五月天| 激情小说婷婷| 人人色婷婷五月天| 无码日本精品XXXXXXXXX| 婷婷五月天AV| 亚洲综合五月天婷婷丁香| 久久er视频6| 色色婷| 丁香婷婷基地| 久久久久9999| 五月婷丁香亚洲| 国产午夜精品AV一区二区麻豆| www.狠狠操.co m| 色色色无码| 香蕉AV777XXX色综合一区| 玖玖视频福利| 9久热精品在线视频| 人人舔人人色人人高潮| 亚洲黄色操逼| 97九色视频| 亚洲视频国产一区| 超碰在线99| 五月天婷婷自拍图片在线观看| 狠狠干,狠狠操| 五月天激情国产综合婷婷婷就去爱| 91人人操人人| 丁香五月天婷婷久久| 影音先锋女人AA鲁色资源| wuyuedingxiang99| 丁香五月天91| 日本超碰在线| 婷婷六月激情丁香| 嫩草视频观看| 五月丁香六月婷婷不卡免费无码| 一区=区操屄高清大全av| 婷婷五月天美女21p| 香蕉伊人综合| 婷婷六月色| 99精品视频在线| 大香久久综合网| 日本色婷婷| 99激情在线| 六月婷婷中文字幕| 丁香五月激情在线| AV伊人青草丁香六月| 欧美色五月| 亚洲 在线 性爱| 99久久終合| 欧美日韩成人在线网| 国产日产成人亚洲欧美国产VA| 大香蕉AV在线| 殴美日韩成人| 96色婷婷| 九九视频在线观看视频6 | 婷婷五月天综合色| 激情综合网五月在线播放| 国产成人精品一区二三区熟女在线 | 日韩综合久| 99色婷婷| 播播网色播播| 天天爽夜夜爽天天爽夜夜爽| 色婷婷五月天中文字幕| 亚洲成人AV在线| 天天狠狠夜夜狠狠2023| 播播网色播播| 狠色色狠网| 97干欧美| 五月婷婷丁香啪啪| 亚洲黄色av网站| 五月天色色网站| 天天插,天天射| 午夜69成人做爰视频| 色色色色色色网站| 久久久久久综合五月婷婷| 五月丁香另类图片| 日本九九九九九九| 久久婷婷艹| 色色网站在线| 99超级碰免费视频| 婷婷激情人妻| 综合网啪| 丁香六月激情综合| 色七七色九九| 久久性爱视频这里只有精品| 丁香五月激情婷婷| 婷婷五月丁香伊人网| 操一区| 六月婷婷日| 97操操网| 韩日另类| 色色欧美。| 狠狠狠人妻| 女婷久久| www.激情五月天。com| 国产黄色av| 乱精品一区字幕二区| 五月婷婷六月丁香在线| 丁香六月激情| 亚洲V国产V欧美V久久久久久| 亚洲另类电影| 色玖玖| 九九热这里| 五月丁香婷婷在线| 五月激情站| 九九九九国产| 大香网伊人久久综合| 97久久久久| 五月婷婷激情| 99热国产| 国产在线aaa片一区二区99| 成人丁香| 国产午夜成人AV在线播放| 99热综合| 9视频在线成人网站| 国产AV一区二区三区最新精品 | 久操操| 操久久网| 91超碰人人操| 综合色七七| 婷婷综合九色伊人| 中文字幕五月久久婷婷| 9人人操人人看| 色五月婷婷伊人| 免费看成人747474九号视频在线观看| 国产av基地| 色五月成人| 久热人妻| 五月天婷婷色播在线网| 伊人啪啪网| 99热精品无码| 99色亚洲| 婷婷九九色| 9 1在线视频| 91精品久久久久久久久久久久| 大香蕉五月天婷婷丁香91| 九九久久精品| 色综合日日| 激情婷婷五月社区| 欧美人妻一区二区| 日本eVa一区=区视频| 色综久久久| 97婷婷丁香五月天激情图片| 天天噜天天插| 99热这里只有精品国产首页| www.91久久| 日本99热| 五月婷婷色白丝| 夜夜 操无码| 五月丁香色婷婷婷基地| 精品A√| www99精品| 99精品综合| 99热超碰人| 狠狠五月激情丁香六月| 婷婷色情小说| 激情五月天 婷婷| 国产精产国品一二三在观看| 亚洲不卡| www.狠狠艹| 伊人久久婷婷| 婷婷五月六月丁香| 丁香六月婷婷综合网| 夜夜爽天天爽| 久久婷婷七月丁香| 五月丁香久久| 综合一区二区三区| 色综合久久无码| 婷婷伊人綜合中文字幕| 六月丁香五月婷婷| 丁香五月综合网| 人人操插| 激情五月天婷婷五月天| WwW色婷婷| 丁香婷婷色| www,五月丁,com| 超碰九九热| 狠狠爱成人综合网| 五月丁香亚洲五月| 泰州成人视频| 婷婷射综合| 婷婷色欧美激情| 五月天婷婷丁香| WWW.久久久久久久久久久久久| 99re思思精品视频在线观看| 亚洲激情婷婷| 九色七七| 日韩99视频| 中文字幕操比影片| 天天添天天摸天天天天做| 亚洲色五月| 六月婷婷AV| 五月丁香婷婷综合激情基地| 五月天大香蕉| 五月丁香久久网| 亚洲va成人va成人va在线观看| 婷婷D区| 九九热99re8热免费观看 | 激情六月丁香| 99人人操人人操人人精| 五月天啪啪啪| 婷婷久久精品| 久久婷婷国产| 色久九| 99爱爱网| 大香蕉久久久| 99A级片| Www99热| 熟女激情五月天| 桃色五月婷婷| 欧美激情综合色综合色| 十二区无码| 人人色AV| 久久爱综合| 夜夜爽天操| 99热午夜精品| www激情| 91九色在线观看免费| 26uuu欧美激情另类| 综合色五月亭亭| 99热99精品在线观看| 九九色色| 婷婷五月天第四色| 91fuliwang| 天天操夜夜爽歪歪| 91色逼| 亚洲啪啪视频| 99久久a线观| 激情综合久久| 婷婷伊人久久综合| 狠狠情色| 丁香五月久久| 这里只有精品在线免费视频| 免费成人中文字幕| 99在线精品视频在线观看| 综合天天综合| 91干网站| 香蕉久久国产AV一区二区| 人妻熟妇国产精品| 久久精品国产精品| 狠狠五月天| 色九月婷婷综合| 久久综合五月天| 婷婷亚洲激情在线观看视频| 色约约视频一区二区三区四区五区| 激情www| 色五月婷婷操逼| 色五月丁香五月| 五月天三级| 色噜噜狠狠狠狠色综合久欧美| 五月婷婷丁香五月天| 在线观看的av| 日韩在线观看网址| 中文字幕 码精品视频网站| 成人操呦av| 97碰碰九九视频| 夜夜撸日日操| 中文字幕簧片| 操B五月天| 欧美69久成人做爰视频| 欧美五月丁香在线| 99色在线视频| 五月天,激情四射,婷婷频道| 99re热视频这里只有综合亚洲| 欧亚成人A片一区二区| 丁香六月无码播放| 99热在线免费观看精品| 99a级片| 六月丁香激情网| 色五月色综合| 婷婷五月激情的图片| 超碰99热精品在线| 另类激情中文| 天天综合五月天| 六月色婷婷欧美| 色婷婷激情五月天| www.婷婷com| 婷婷五月天激情四射| 婷婷色色综合| 丁香激情五月| 激情综合网址| 99色色网| 99精品大片| 中文字幕丰满乱孑伦无码专区 | 伊人综合婷婷| www.色色色com| 九月激情网| 欧美日本va| 色五月婷婷五月丁香五月激情五月视频| 久久密臀婷婷| 五月婷婷视频| 五月激情综合网| 99九九视频| 五月丁香激情婷婷综合| 狠狠久久婷五月综合色| 激情深爱五月婷婷| 亚洲网视屏| 婷婷玖玖丁香| 1024亚洲| 婷婷狠狠操| 99精品在| 玖操97| 99re热精品视频国| 金桔一区二区ab地址| 五月丁香婷婷成人版| 91精选国| 变态另类色图| 97偷拍对白视频| 久久婷婷青青草| 丁香激情五月天| 99热这里有精品| 五月天色图| 婷婷五月大香蕉| 亚洲精品99| 欧美综合婷婷网| 国产 亚洲 在线| 91人人超碰在线| 色色丁香五月天社区| 五月天婷婷爱| 亚洲色五月天| 激情五月婷黄版| 人人播| 天天摸天天做天天爱天天爽| 五月天激情综合| 狠狠色五月天| 伊人激情综合网| 激情综合国产| 天天操婷婷| 99精品性爱| 99色色视频| 中文字幕黄色片| 天天操天天插| 久久人妻少妇嫩草AV| 成人综合视频网址| 婷婷五月丁香激情图片| 99丁香五月婷| 久久永久网址| 色丁香婷婷美女视频网站| 色五月天成人在线| 淑女丝袜bi操逼123| 五月丁香婷婷欧美| 亚洲综合激情五月久久| 国产AV一区二区三区最新精品| 无码激情AAAAA片-区区| 久草婷| 婷婷爱五月| 激情婷婷色色| 激情综合激情五月| 深爱婷婷网| 狼人婷婷久久| 国产婷婷色综合AV蜜臀AV| 大香蕉综合视频在线| 91美女啪啪| 婷婷欧美激情综合| 六月婷五月丁香| 久99久热只有精品国产99| 五月天婷婷色播| 5月丁香婷婷| 狠狠干五月丁香综合网| 97人人干人人操| 夜夜穞天天穞狠狠穞AV美女按摩| 亚洲视频在线观看区| 天天综合久久| 777丁香六月青青草婷婷综合久月| 天天色综合综合| 99九九精品视频| 亚洲乱码日产精品BD| 婷婷五月丁香激情图片| 9er热在线精品视频| 夜丁香五月婷婷| 五月丁香久久综合| WWW色色色COM| 九九综合精品| 五月丁香久人妻中文| 香蕉久久国产AV一区二区| 超碰在线网站| 草婷婷在线| 成人五月天丁香婷| 婷婷五月超碰| 99久久思思| 丁香五月手机在线| 九九99偷拍视频| 五月丁了香蕉综合| 色综合丁香婷婷| 激情五月黄色| 韩国情人在线电视剧免费观看高清版全集| 五月婷婷激情网| 99天堂网| 99色.com| 色噜噜婷婷| 99精品视频在线观看| 天天肏天天肏| 亚洲天堂玖玖| 亚洲五月天狠狠| 激情综合五月| 九九干视频| 色婷婷狠狠干芒果TV| www.yw尤物| 超碰93在线观看| 99色视频免费在线规看| 大色鬼综合| 色五月涩涩婷婷蜜桃| 丁香伊人网| 色婷婷无吗| 9久热这里只有精品| 狠狠干婷婷| 操逼毛片国语对白| 亚洲性爱电影| 久久九九@| 丁香六月婷婷综合欧美| www.99操| www.com五月天| 思思久久久婷婷| 亚洲开心激情网| 丁香在线视频| 日韩色色小视频| 九九综合| 久久大香蕉| 五月丁香啪啪综合| 91玖玖| 丁香五婷婷| 玖玖色资源| 五月丁香婷婷免费视频| 五月婷婷日本| 天天日夜夜| 亚洲性视频| 久久99成人性爱高清视频| 国产欧美日韩综合精品一区二区| 婷婷久久久| 久久综合五月天| 色婷婷五月综合在线| 日韩精品一品二区三区的使用体验| 99久久終合| 婷婷五月伦理网站| 色九综合| 色婷| 深爱五月激情综合| 99年操人人爽| 五月婷婷第四色| 丁香五月久久社区| 欧洲亚洲免费视频9| 久久婷婷激情| 日韩精品AV一区二区三区| 狠狠色官网| 欧美情色电影一区二区| 夜夜夜夜夜骑撸| www.久久久久久| 色婷婷九月| 人妻性爱| 丁香操逼| 激情九月综合| 色婷婷五月天激情综合 | 九九色视频| 美女久久婷婷| 久久九精品| 日本色频| 久久99精品久| AV九九| 日本三级日本黄色| 日本色99| 婷婷五月精品在线| 99色五月| 字幕网AV中文字幕| 伊人久久大香蕉网| 欧美日韩大黄| 精品99在线观看| 色色亚洲五月天| 99精品无码网站| 性热视频99精品| 欧美激情综合色综合啪啪五月| 久久婷婷一级片| 久热91精品| 粉嫩AV久久一区二区三区| 五月天天爽| 婷婷五月丁香五月| 伊人婷婷福利网| 夜夜夜夜夜骑撸| 六月婷婷综合激情| 怎么样可以看免费的一级av| 一本色道久久综合狠狠躁小说| 夜色综合网| 欧美色综合天天久久综合精品| 五月欧美丁香在线观看| 婷婷区日本| 91精品国产日韩91久久久久久国模| 97色碰| 991精品在线视频| 天天综合天天玩夜夜玩天天玩夜夜玩| 婷婷九月综合| 亚洲av成人一区二区电影在线| 亚洲第一第二网站| 夜夜爽天天爽| 99久久久国产精品免费蜜乳tv| 婷婷天堂综合| 五月天另类图片区99| 亚洲无AV在线中文字幕| 99视频在线精品免费观看2| 深爱1激情网| 激情婷婷五月亚洲| 97碰超级人人看| 奇米影视在线视频| 久热一区| 国产精品人成A片一区二区| 久久久ww| 免费观看大片视频 丁香婷婷 六月欧美| 色天天综合色| 五月丁香婷成人网| 丁香五月色情| 人人操日| 国产精典视频在线观看| 4438国产免费看| 1024欧美看片| 97色射| 爱爱网址9| 91久久婷婷| 亚洲色网络| 免费国产视频| 国精产品久久| 99惹| 免費亭亭成人| 欧美色播综合在线观看| ri电影在线| 丁香综合婷婷开心激情网| 久久婷五月综合| 999久久久国产精品| 99色免费在线观看| 国产亚洲色婷婷久久99精品91 www.riverspirits.org www.hnnun.com www.changh | 色九网| 五月丁香久久网| 9l视频自拍9l视频自拍九色学生| 亚州操逼网| 婷婷性爱视频在线| 婷婷的色色五月天| 91丨九色丨熟女|老版| 色五月婷婷自拍| 天堂爱啪啪| 激情综合99| AV在线观看网站| 亚洲av综合网| 色五月丁香五月五月婷婷| 五月激情婷婷图片基地| 五月天婷婷开心| 久色中文| 天天婷婷综合亚洲亚洲| 中文成人在线| 色婷婷亚洲精品天天综| 最近中文字幕在线中文视频| 色www久视频| 91碰人人| 五月天操逼网| 婷婷五月成人有| 久久A热| 五月开心啪啪| 丁香九月婷婷色| 久久成人天| 色婷婷国色天香综合| 天天色天天舔天天爱天天爽| 亚洲美女网Va| 日日操日日撸| 精品日本视频444| 精品爆操| 色色色视频免费无码 | 五月婷视频| 五月天丁香婷婷久久九| www激情网站| 区区久久妻| 五月婷婷免费视频| 亚洲第一综合| 五月丁香婷婷综合网| 婷婷五月综合性爱| 色婷婷丁香综合中文字幕| 密黄站| 99热在线观看免费| 色综合久久888| 噼里啪啦完整版中文在线观看 | 午夜天堂一区人妻| 大香蕉丁香| 激情性爱五月| 99区视频| 五月天激情国产综合婷婷| 91九色熟女| 99精彩视频| www色哟哟| 丁香六月开心| 色五月天综合网| 我爱大香蕉| 色婷婷色| 热99只有精品| 天天色综网| 国产女生爱爱AA| 激情婷婷五月亚洲| 天天天在线观看| 粉嫩AV久久一区二区三区| 婷婷99狠狠躁天天躁中文| 五月婷婷综合色啪| 自拍偷窥99热| www.91AV.com| 色综合性视频| 婷婷成人五月天| 久久婷中文字幕| 九九热这里只有精品12| 免费AV在线| 婷婷综合久久| 黄色AV日韩| 久久这里有精品| 91色呦哟| 热久久77777| 成人短视频在线| 婷婷五月欧美AA片免费| 成人网站免费sxj| 婷婷六月色开| 五夜丁香| 第五色婷婷| 亚洲一区二区色图-亚洲精品国产精品乱码-成人AV | 五月婷婷性爱| 婷婷精品免费久久| 五月婷婷六月丁香| 五月天色欧美| 激情网婷婷婷| 五月丁香婷婷五月色| 成人天天爽| 91丨九色丨国产打屁股| 婷婷狠狠18禁久久| 婷婷五月天天爽| 操操操91| 日本狠狠网| 成片免费观看大全| 激情综合色播| 在线亚洲综合网| 伊人网色婷婷五月天| 97五月天| 亚洲天堂爱爱| 九九热黄色| 色色爽爽天天| 丁香六月婷婷开心| 婷婷香蕉| 九九在线精品| 国产色丁香| 五月婷久久| Av性爱网| 99在线精品免费视频| 视频这里只有精品16| 免费看欧美成人A片无码| 久热这里只有精品在线观看| 五月婷婷六月丁香| 97涩涩丁香五月天| 人妻第九页| www.狠狠狠.com| 亚洲12p| 丁香婷婷久久老熟女综合网| 大香蕉福利导航| 亚洲色在线观看| 丁香五月激情欧美| 大香蕉中文| 五月婷婷免费在线| 色婷婷成人做爰A片免费看网站| 五月久久噜噜| 久久看九九90| 色五婷婷在线视频| 99久在线精品| 色婷婷电影网| 开心五月综合| 丁香六月婷婷综合啪啪| 五月丁香婷婷啪啪| 日本久久精品| 亚洲在线操| 激情五婷精品网在线观看网址| 最近中文字幕大全免费版在线 | 五月久久丁香| 91日日日| 天天射影院| 天天综合亚洲| 91ncom.色| 少妇人妻丰满做爰XXX| 婷婷开心久久| 国产67194| 欧美日韩成卜| 天天综合精品| 五月婷婷狠天天色综合| 99热一本| 久久艹99| 性爱AV天堂| 在线观看日韩12345区| 九月综合| 99视频精品8 | 久久色六月| 五月婷婷导航| 五月色婷婷综合丁香精品无遮挡| 欧美日韩中国| 色情综合网| 亚洲男女激情| 亚州欧美国产久精国产99综合视频| 久久99人人| 久热9| 无码色色| 99亚洲综合| 丁香五月激情综合婷综| 国外亚洲成AV人片在线观看 | 婷婷五月电影院| 丁香五月婷婷欧美成人色图| 91丨九色丨大屁股| 波多野结衣成人作品在线| 九九伊人网| 99无码黄色视频| 深爱激情网五月| 五月天丁香欧美激情| www.色99| 激情五月天婷婷五月天| 国产精品噜噜在线视频| 色噜噜夜夜夜综合网| 色色五月婷婷网| 色五月网址| 天天摸天天舔天天天天爽| 人人爱天天摸摸天天爱| 婷婷午夜激情| 日韩xx在线| 婷婷五月花| 五月丁香六月欧美综合网站| 色色色热| 激情色视频| 2025最新亚洲激情在线| 影音先锋色婷婷| 蜜桃婷婷狠狠久久综合| 婷色影院| 欧美日韩欧美| 开心五月婷婷| 色色综合网站| 欧美色九| 偷拍五月丁香| 激情五月婷婷色| 五月丁香六月婷精品视频| 99免费综合网| 99久久精品色老| 九色综合网| 色色99| 99ri在线视频| 天天操天天曰| 开心五月婷婷激情| www.婷婷亚洲基地| 五月天丁香婷| 日韩在线观看亚洲| 99精品网| 婷婷五月天色播| 久机视频这只有精品| 亚洲狠狠操| 丁香五月深爱五月婷婷| 成人久久天天x资源站| 狠狠干综合网| 国产熟女大叫受不了| 亚洲免费视频网站| 69热91天堂| 热久综合| 丁香五月激情啪啪啪| 日日操夜夜操中国无码| 亚洲亚洲人成综合网络| 成人无码精品1区2区3区免费看| 91九色网| 在线理论片| 91919191919久久成人视频| 九九99久久精品| 国产成人综合电影| 婷婷五月精品| 国产99久9在线| 大香蕉婷婷丁香| 色域五月婷婷丁香| 天天日天天做天天舔| 六月99天天婷婷激情综合| 九月综合| 亚洲色五月| 操人妻90p| 六月天六月婷| 深爱激情婷| 成人AV中文字幕| 色婷婷久久综合| 五月婷婷激情综合| 精品香蕉99久久久久网站| 久久五月天影院| 毛v一区二区视频| 丁香蜜臀黄色婷婷五月天| 色五月婷婷综合在线| 色婷婷久久综合| 日本天天综合| 婷婷五亚洲| 五月丁香久久| 天天天天干| 亚洲午夜成人av电影网| 五月开心啪啪| 四虎成人精品永久免费AV九九| 久热视频A.| 狠狠色狠狠色综合日日91| 婷婷色正月| 色色色色色网| 99视频只有精品| 七月婷婷色香综合网| 日韩三及成人AV片| 9.1综合网| AAA亚洲AV| 99在线视频播放| 最近中文字幕在线中文视频| 久久久九九九 99| 激情久久肏屄视频| 色青五月天| 丁香激情五月天| 日韩中文字幕| 99精品在线| 综合激情深爱| 人人爱操| 五月丁香趴趴| www夜夜操comwww| 99.N在线视频| 思思精品视频| 激情丁香五月激情婷婷| 97偷拍对白视频| 婷婷大乡焦噜噜| 操人无码| 91色色五月天| 亚洲操B| 国产韩日亚洲美州欧亚综合在线| 久久九九免费视频| 五月四色婷婷| 激情九月天天天天婷婷| 亚洲中文字幕网| 色婷婷五月天小说| www.91九色| 99精品偷自拍| 成人丁香五月| 99热国品免费| 五月丁香亭亭A片| 久久久性爱视频| 噜噜噜噜婷婷五月天| www婷婷色| 欧美大香蕉视频| 婷婷丁香一月| 色婷婷五月天成人网| 五月婷婷无码| 99热这里全都是精品| 五月天婷婷综合久久| 91丨九色丨国产打屁股网站| 婷婷五月综合激情| 婷婷五月天直播| 丁香五月激情综合婷综| 亚洲中文字幕在线观看| 天天色噜| 色五月 激情婷婷 综合五月天| 正宗黄色毛片| 少妇高潮A片无套内谢麻豆传| 亚洲久久激情| 99这里只有精品视频免费| 操逼综合激情网| 五月婷婷六月丁香玖玖玫瑰91| 亚洲综合丁香婷婷六月天| 国产精品视频| 超碰成人公开| 91婷婷丁香| 色婷婷色五月天| 色婷婷免费视频| 狠狠噪| 激情五月天电影| 99热这里只有精品66| 秋霞三级影视资源| 蜜桃婷婷狠狠久久综合| 欧美槡BBBB槡BBB少妇| 婷婷九月亚洲| 国产精品久久99| 五月天伊人久久久久| aV直接看| AAA久久| 日韩色五月| 五月激情偷拍婷婷| 99热9| 色在线99| 变态另类色图 | 婷婷94s| 八戒青柠影视剧在线观看| 日韩综合久久| 久久偷拍综合五月天| 爱草视频在线| a色色色色色| 熟女网站久久| 色99www.| www.婷婷激情网.com| 婷婷五月无码| 天天婷婷色六月| 婷婷丁香亚洲五月天| 大香蕉综合| 97欧美在线| 婷婷激情四射五月天| 五月婷婷色综图片| 思思 热 99| 五月天天丁香婷婷在线中| 色综合久久88色综合天天99| 国产午夜精品一区二区| 免费观看日韩成人av| 大香伊人久色| 久热在线中文字幕色999舞| 超碰色综合| 亭亭五月丁香五月天激情| 思思精品热在线| 久色网五月| er99免费视频在线| 天天色五月| 婷婷六月婷婷| 丁香六月亚洲| 9久久久久| 久久久久久久五月| 亚洲成人无码片| 五月色丁香婷婷综合| 久久人妻乱| 天天日,天天插| www.久久av.com| 啪到高潮激情丁香五月| 思思国产99| 六月丁香婷婷色69| 婷婷五月天亚洲精品| 色色色色色色97| 五月丁香婷婷中文网| 婷婷五月综合啪| 人人人操B超碰| 丁香五月五婷| 婷婷五月天性| 亚洲九九免费| 综合网激情五月天| 手机激情网| 99性感视频| 五月丁香在线婷婷美女| Www.激情| 99热这里只有的精品视| 午夜色丁香| 婷婷六月天激情| 色色色五月婷| 欧美久久婷婷| 婷婷五月天开心网| 丰满老熟妇BBBBB搡BBB| 久久精品99国产精品日本| 五月婷婷综合在线亚洲视频| 亚洲综合视频八| 美腿丝袜AV天堂网| 大香蕉99热| 婷婷中文字幕| www.色窝| 婷婷亚洲五月丁香综合在线| 婷婷久久欧美| 五月婷丁香久久久| 婷婷开心久久| xx久久| 色五月av| 蜜臀久久99精品久久久久久酒店| 日本色超碰| 涩玖玖免费视频| 亚洲天堂啪啪| 综合欧美五月婷婷| 五月婷婷亚洲天堂激情在线| 极品 少妇 内射| 久播影院免费观看电视剧大全最新网| 丁香五月六月婷婷综合激情| 国产精品婷婷午夜在线观看| 激情五月丁香亭亭| 这里只有精品视频在线看| 能看的AV| 一点色成人网| 自拍视频99| 婷婷五月天在线看| www.ppypp| 天天做天天爱| 欧美操人| 99热全是精品| 99热精品在线播放观看| 99热这里只有精品2| 激情五月婷婷网| 亚州欧美黄色电影| www.91.com黄| 中文字幕性爱丰满| 婷婷导航| ztEJj| 亚洲永久四色| 伊人婷婷五月天av| 99激情| 韩国真做片在线观看| 久久九九一區| 婷婷五月综合色中文字幕| 激情婷婷啪啪| 天天插综合网| 亚洲国产色婷婷| 美女va| 色五月中文网| 性无码专区无码| 色色综合热| 综合亚洲五月天| 九九热在线精品| 日日干日日s| 六月婷婷综合激情| 色五月,com| 久操大香蕉| 五月情婷婷| 丁香六月婷婷综合| 狠狠色狠狠爱| 激情婷婷另类| 五月丁香婷婷色色| 偷拍99在线视频观看| 天天摸天天舔在线视频| 狠狠穞A片一區二區三區| 亚洲亚洲人成综合网络| 色播激情婷婷| www.久久久久| 激情文学五月丁香六月婷婷| 久久99热这里只频精品6学生| 超爽内射| 色播五月丁香婷婷| 丁香六月久久| 91超级碰人人操| 色青青视频| 激情五月天视频| 91疯狂操操操操| 亚洲人人操BD| 天天日天天插| 婷婷久久五月| 久久色9| 东北熟女视频99| 狠狠干2007| 热久国产| 色婷婷丁香女女| 青青草a在线| 日本综合色图| 狠狠爱婷婷丁香| 丁香五月婷婷色偷偷| 中国女人做爰A片| 日本色频| 五月丁香精品| 丁香五月天天| 九九性视频| 久久看九九90| 啪啪干伊人婷婷| 丁香六月婷婷久久综合| 久久婷婷综合色丁香| 婷婷五月丁香六月天亚洲综合| 亚洲精品无码一区二区| 这里只有精彩小视频视频网站| 99热综合在线| 99啪啪网| 天天综合网站| 久草视频大香蕉99| 狠狠狠狠青草| 国产真实乱了老女人视频| 丁香五月婷婷综合91| 色婷五月| 99热这里有精品| 99色在线视频| 啪啪一区| 97中文在线| 婷婷五月亚洲综合| 大香蕉啪啪| 亚洲色五月婷婷| 亚洲国产网站| 这里只有精品免费视频| 国产特黄色精品一区二区三区精品无广告| 思思热在线视频99| 亚洲性爱AV在线| 伊人婷婷激情| 岛国AAAV| 五月丁香在线婷婷美女| 五月婷久久综合| 99精品在线观看视频| 久草五月婷| 这里只有精品视频在线| 伊人久久大香线蕉av一区| 九九久久综合| bbwcuckold精品熟妇| 99精品视频在线观看| 日批在线看| 国产欧美大香蕉一区| 丁香婷婷五月天在线视频| 玖玖婷婷婷丁香五月| 日本99视频| 开心四月婷婷在线色播播| 色综色网| 99热这里只有精品18| 六月丁香停| 性色五月天| 婷婷五月丁香成人| 91高潮喷水久久久久久久久| site:pnnrt.com| 婷婷月五天在线在线看| 亚洲亚洲人成综合网络| 婷婷伊在线| 国产干逼片| 操逼视频一区| 五月丁香婷婷综合在线| 97久久婷婷色| 成功精品影院| 思思色播| 久久久91精品| 色综合九九色综合88| 香蕉久久国产AV一区二区| 国产成人片| 丁香桃色网| 狠狠综合| av一级棒av| 人人九色| 五月丁香六月婷婷免费| WWW.久久99| 夜夜操夜夜操| 五月婷婷色情| 色婷婷丁香综合中文字幕| 亚洲妇女熟BBW| 99精品视频网| 亚洲精品va| 91jiuseshunv| 99热免费| 这里只有精品视频免费在线观看| 亚洲国产色婷婷| 激情五月婷婷丁香综合网|