免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

C++靜態(tài)成員變量線程安全:從數(shù)據(jù)競(jìng)爭(zhēng)到鎖、原子變量與安全單例實(shí)戰(zhàn)解析

C++靜態(tài)成員變量線程安全:從數(shù)據(jù)競(jìng)爭(zhēng)到鎖、原子變量與安全單例實(shí)戰(zhàn)解析 我先說一個(gè)前提如果你寫過多線程 C你遲早會(huì)遇到這么一種崩潰——日志上沒有任何明顯異常報(bào)錯(cuò)位置每次都不一樣甚至同一個(gè)版本跑了幾天才出現(xiàn)一次。某個(gè)項(xiàng)目組曾經(jīng)有個(gè)采集模塊十幾個(gè)工作線程會(huì)同時(shí)更新一個(gè)保存統(tǒng)計(jì)結(jié)果的靜態(tài)成員變量代碼量不大邏輯也不復(fù)雜但壓測(cè)跑到兩千萬(wàn)請(qǐng)求量的時(shí)候進(jìn)程開始偶發(fā)異常退出。查了幾天最后定位到根因我才真正意識(shí)到一個(gè)很多人沒當(dāng)回事的事實(shí)靜態(tài)成員變量的線程安全問題從來(lái)不只是“結(jié)果不對(duì)”那么簡(jiǎn)單。從一個(gè)普通類成員開始靜態(tài)成員變量和普通成員變量在內(nèi)存與生命周期上的差異決定了它天然就是多線程程序的雷區(qū)。這篇內(nèi)容適合正在寫或維護(hù)多線程 C 服務(wù)的開發(fā)者也適合把 C11 之后新特性當(dāng)黑盒在用的朋友。我會(huì)先講清楚為什么靜態(tài)成員變量容易出問題再給出鎖、原子變量、線程局部存儲(chǔ)和單例場(chǎng)景的正確做法最后用 ThreadSanitizer 演示一次真實(shí)的競(jìng)態(tài)定位過程。整個(gè)過程盡量少堆標(biāo)準(zhǔn)條文多給能直接落地的結(jié)論。1. 靜態(tài)成員變量與普通成員變量的本質(zhì)區(qū)別——線程不安全的根源1.1 它根本不在對(duì)象里內(nèi)存與生命周期先講一個(gè)經(jīng)常被忽視的事實(shí)靜態(tài)成員變量并不存在任何對(duì)象實(shí)例里。類里面的非靜態(tài)數(shù)據(jù)成員每個(gè)對(duì)象都有一份整體存放在對(duì)象的內(nèi)存布局中靜態(tài)成員變量則完全不同它在程序的數(shù)據(jù)段或 BSS 段分配空間生命周期從程序加載開始一直持續(xù)到進(jìn)程退出。用一個(gè)不嚴(yán)謹(jǐn)?shù)芎糜浀念惐绕胀ǔ蓡T變量是每個(gè)對(duì)象自己的私人物品靜態(tài)成員變量是類名下的公共倉(cāng)庫(kù)所有對(duì)象共用同一扇門、同一份庫(kù)存。這個(gè)差異直接帶來(lái)兩個(gè)結(jié)果。第一sizeof(對(duì)象)完全不包含靜態(tài)成員你把實(shí)例創(chuàng)建、銷毀多少次它都紋絲不動(dòng)進(jìn)程不結(jié)束它就不釋放。第二任何線程都能通過類名訪問這同一個(gè)實(shí)體不需要先拿到對(duì)象指針也不需要經(jīng)過實(shí)例方法。從多線程的角度看它和一個(gè)用 extern 聲明的全局變量沒有任何區(qū)別區(qū)別只在于名字前面多了一個(gè)類的作用域前綴。所以當(dāng)你想“把它當(dāng)作類的一部分因此天然受到類設(shè)計(jì)的保護(hù)”時(shí)這種保護(hù)并不存在。它不是對(duì)象成員它是全局狀態(tài)。全局狀態(tài)一旦允許寫就必須在所有寫者和讀者之間建立同步否則就是在走鋼絲。1.2 共享帶來(lái)的一觸即發(fā)一個(gè)副本和 N 個(gè)線程共享帶來(lái)的問題用一個(gè)最樸素的場(chǎng)景就能說明。假設(shè)你寫了這樣一個(gè)類class Metrics { public: static long total; }; long Metrics::total 0;然后八個(gè)線程各自執(zhí)行Metrics::total;跑十萬(wàn)次按直覺總該是八十萬(wàn)了吧實(shí)測(cè)大概率不是數(shù)值可能小于八十萬(wàn)而且每次都不一樣。之所以這樣是因?yàn)閠otal在底層并不是一步操作。它要先從內(nèi)存把total讀到寄存器加一再寫回內(nèi)存。兩個(gè)線程可能同時(shí)讀到同一個(gè)舊值然后各自加一寫回兩次加一只有一次生效。這就是數(shù)據(jù)競(jìng)爭(zhēng)的最小雛形。如果你覺得這只是數(shù)值誤差那還不夠嚴(yán)重。C 標(biāo)準(zhǔn)把這種并發(fā)訪問定義為未定義行為意味著編譯器可以做任何它認(rèn)為合理的優(yōu)化結(jié)果甚至不一定是“數(shù)值偏小”。這一點(diǎn)放到第二章細(xì)講。1.3 早就該破除的誤區(qū)volatile 不解決線程安全這里必須先破除一個(gè)流傳很久的誤解加個(gè) volatile 就能解決。volatile 告訴編譯器“這個(gè)變量可能在別處被修改不要把它優(yōu)化到寄存器里”它確實(shí)能讓一些極端場(chǎng)景下更容易觀察到正確值但它既不能保證操作的原子性也不能提供多線程之間的順序約束。在 C 的內(nèi)存模型里volatile 和線程同步機(jī)制是兩個(gè)維度。想達(dá)到線程安全要么用原子操作要么用互斥量要么在線程內(nèi)部私有一份數(shù)據(jù)。volatile 幫不上忙反而可能給你一種“我已經(jīng)處理過了”的錯(cuò)覺讓隱患繼續(xù)潛伏。2. 數(shù)據(jù)競(jìng)爭(zhēng)是未定義行為不是“結(jié)果不對(duì)”2.1count在匯編層面到底做了什么我們前面看到了total不是一步這里把它看成三條指令會(huì)更清楚讀、改、寫。CPU 執(zhí)行時(shí)會(huì)加載load修改modify存儲(chǔ)store。無(wú)論是編譯器還是 CPU都不會(huì)因?yàn)槟銓懥恕耙痪浯a”就保證三者之間沒有別人插進(jìn)來(lái)。更麻煩的是編譯器在優(yōu)化時(shí)可以把不相關(guān)的代碼重排可以在滿足“單線程可觀察語(yǔ)義”的前提下自由安排讀寫順序多線程環(huán)境下的觀察結(jié)果就和源代碼順序沒什么必然關(guān)系了。所以兩個(gè)線程分別執(zhí)行total可能出現(xiàn)兩個(gè)線程都讀到 0、都寫回 1最終total是 1 而不是 2。這個(gè)結(jié)果在單線程世界里不可能出現(xiàn)但在并發(fā)世界里是完全合法的未定義行為。不要把這種錯(cuò)誤歸類為“精度損失”它不屬于任何數(shù)值誤差范疇。2.2 CPU 緩存、指令重排與 happened-before即使沒有編譯器重排CPU 這一層也有自己的脾氣?,F(xiàn)代多核處理器每個(gè)核都有獨(dú)立的 L1/L2 緩存一個(gè)核寫入total后新的值可能還在自己的緩存行里還沒有同步到共享內(nèi)存另一個(gè)核在另一個(gè)時(shí)刻讀到的仍舊是舊值。硬件會(huì)通過緩存一致性協(xié)議最終保持一致但“最終”是多長(zhǎng)時(shí)間、什么順序程序如果不使用同步原語(yǔ)觀察不到確定的邊界。C 內(nèi)存模型引入了一個(gè)核心概念happens-before。你只有在兩個(gè)線程之間建立某種同步關(guān)系讓一個(gè)線程的寫操作在另一個(gè)線程的讀操作之前發(fā)生數(shù)據(jù)競(jìng)爭(zhēng)才被排除。能夠建立這種關(guān)系的機(jī)制只有少數(shù)幾種互斥鎖的加鎖與解鎖、std::atomic 的讀寫以及相應(yīng)的內(nèi)存序、線程的 join 等。普通的賦值和讀取無(wú)法建立這種關(guān)系。這也就是說判斷一段代碼是否線程安全不能靠“我運(yùn)行了好幾次都沒出事”。你只是沒有撞上那個(gè)時(shí)機(jī)并不代表它沒有發(fā)生數(shù)據(jù)競(jìng)爭(zhēng)。2.3 “崩潰在很遠(yuǎn)的地方”是怎么發(fā)生的數(shù)據(jù)競(jìng)爭(zhēng)最坑的地方在于問題不一定出現(xiàn)在肇事代碼附近。線程 A 先寫了共享靜態(tài)對(duì)象線程 B 在另一個(gè)函數(shù)里讀它中間隔著大量調(diào)用。編譯器發(fā)現(xiàn)某個(gè)字段只在個(gè)別路徑被寫而其他路徑讀出來(lái)可能是個(gè)未初始化或部分更新的值于是大膽把看起來(lái)很冗余的代碼刪掉或者把分支重排。最終表現(xiàn)是某個(gè)不相關(guān)的邏輯點(diǎn)開始出錯(cuò)離源頭十萬(wàn)八千里。我開頭說的那個(gè)服務(wù)崩潰堆棧在日志模塊和對(duì)象析構(gòu)里真正原因卻是另一個(gè)線程在改緩存。這就是為什么這類問題特別難查。你盯著崩潰堆棧找原因找三天也可能找不到因?yàn)橐蚬湕l已經(jīng)被編譯器和緩存切碎了。3. 靜態(tài)成員初始化階段的線程安全魔法靜態(tài)與隱藏的坑3.1 C11 之后的局部靜態(tài)變量魔法靜態(tài)先說一個(gè)好消息C11 之后的函數(shù)局部靜態(tài)變量其初始化是線程安全的。標(biāo)準(zhǔn)要求當(dāng)控制流并發(fā)進(jìn)入某個(gè)局部靜態(tài)變量的聲明時(shí)初始化必須只發(fā)生一次其他線程要等待這次初始化完成。編譯器通常會(huì)在變量旁邊生成一個(gè) guard 標(biāo)志第一次進(jìn)入時(shí)加鎖并判斷狀態(tài)后續(xù)進(jìn)入直接跳過初始化。你對(duì)這個(gè)機(jī)制最常見的感知就是所謂“魔法靜態(tài)”。來(lái)看最典型的寫法class Logger { public: static Logger get() { static Logger instance; return instance; } private: Logger() { /* ... */ } };多個(gè)線程第一次同時(shí)調(diào)用get()會(huì)有一個(gè)線程真正構(gòu)造instance其余線程阻塞等待。構(gòu)造完成之后后續(xù)調(diào)用不再有任何加鎖開銷。這個(gè)特性后來(lái)成為安全單例的基石第五章會(huì)再提到。這里值得注意的是線程安全保障僅限于“初始化那一次”。如果你之后還在多線程里修改instance的內(nèi)部狀態(tài)那依然是數(shù)據(jù)競(jìng)爭(zhēng)。魔法靜態(tài)只負(fù)責(zé)把對(duì)象造出來(lái)不負(fù)責(zé)你后續(xù)怎么用。3.2 類靜態(tài)數(shù)據(jù)成員初始化時(shí)機(jī)與靜態(tài)初始化順序問題那類里直接定義的靜態(tài)成員變量呢比如static Metrics metrics;這種非常量表達(dá)式初始化通常發(fā)生在程序啟動(dòng)的動(dòng)態(tài)初始化階段。絕大多數(shù)程序在這個(gè)階段還沒有創(chuàng)建業(yè)務(wù)線程所以并發(fā)初始化的問題不突出但另一個(gè)問題隨之而來(lái)不同編譯單元的靜態(tài)對(duì)象初始化順序在 C 標(biāo)準(zhǔn)里是不確定的。假如Metrics的構(gòu)造函數(shù)依賴另一個(gè)全局配置對(duì)象的初始化結(jié)果而那個(gè)對(duì)象恰好在你這個(gè)編譯單元之后才初始化就會(huì)出現(xiàn)“構(gòu)造時(shí)訪問未初始化對(duì)象”的經(jīng)典故障通常叫靜態(tài)初始化順序問題。解決思路有兩個(gè)方向。一是把非平凡的初始化延遲到第一次使用時(shí)函數(shù)局部靜態(tài)是現(xiàn)成的工具二是消除依賴構(gòu)造時(shí)不依賴其他全局狀態(tài)。如果項(xiàng)目里有多個(gè) .cpp 都定義了帶有動(dòng)態(tài)初始化的靜態(tài)成員并且它們之間存在依賴不要指望鏈接順序救你標(biāo)準(zhǔn)層面就不可靠。3.3 類模板里的靜態(tài)成員延遲實(shí)例化的特殊場(chǎng)景類模板的靜態(tài)成員還有一處容易被忽略多數(shù)情況下模板靜態(tài)成員的定義是在頭文件里實(shí)例化發(fā)生在第一次使用某個(gè)具體模板參數(shù)時(shí)。也就是說它可能不是在程序啟動(dòng)階段初始化的而是在運(yùn)行中某個(gè)線程第一次觸發(fā)實(shí)例化時(shí)才進(jìn)行動(dòng)態(tài)初始化。如果你在頭文件里寫了這樣的東西template typename T struct Registry { static std::mapT, int table; }; template typename T std::mapT, int RegistryT::table;那么Registryint::table這個(gè)對(duì)象到底在哪個(gè)線程第一次被實(shí)例化取決于哪段代碼先被調(diào)用。多個(gè)線程同時(shí)首次觸碰不同實(shí)例時(shí)編譯器需要保證靜態(tài)成員初始化線程安全但實(shí)現(xiàn)細(xì)節(jié)可能比局部靜態(tài)更微妙。我的建議是別讓模板靜態(tài)成員承載非平凡的動(dòng)態(tài)初始化需要時(shí)就放在一個(gè)函數(shù)局部靜態(tài)對(duì)象后面讓那個(gè)標(biāo)準(zhǔn)保證的守衛(wèi)機(jī)制來(lái)兜底template typename T struct Registry { static std::mapT, int table() { static std::mapT, int table; return table; } };這樣得到的仍然是你想要的進(jìn)程級(jí)唯一實(shí)例但初始化時(shí)機(jī)由函數(shù)局部靜態(tài)統(tǒng)一接管行為更可控。4. 鎖、原子變量、線程局部存儲(chǔ)——三類做法怎么選4.1 互斥鎖最簡(jiǎn)單也最容易被用錯(cuò)的方案如果共享靜態(tài)成員是一段需要保持多個(gè)字段一致的復(fù)雜數(shù)據(jù)直接用互斥鎖是最穩(wěn)的方案。原則很樸素凡是可能發(fā)生讀寫的入口全部經(jīng)過同一個(gè)鎖。寫要鎖讀也要鎖。很多人只給寫加鎖讀不加鎖認(rèn)為“讀一下問題不大”實(shí)際上讀線程和寫線程之間沒有任何同步關(guān)系讀線程完全可能讀到寫了一半的數(shù)據(jù)這依然是數(shù)據(jù)競(jìng)爭(zhēng)。一個(gè)常見的類是這樣class Metrics { public: static void Add(long v) { std::lock_guardstd::mutex lock(mu_); total_ v; count_ 1; } static long Snapshot() { std::lock_guardstd::mutex lock(mu_); return total_ / count_; } private: static std::mutex mu_; static long total_; static int count_; }; std::mutex Metrics::mu_; long Metrics::total_ 0; int Metrics::count_ 0;這里Add和Snapshot都走mu_保證讀的時(shí)候看到的是完整快照。優(yōu)點(diǎn)是簡(jiǎn)單正確容易給不熟悉內(nèi)存模型的同事看懂缺點(diǎn)是每次調(diào)用都要經(jīng)過鎖如果這是熱點(diǎn)路徑可能成為性能瓶頸。補(bǔ)充一個(gè)工程經(jīng)驗(yàn)鎖的粒度要盡量小。把鎖放在單個(gè)函數(shù)內(nèi)部只保護(hù)真正共享的字段操作不要在外部“幫別人加鎖”。例如有些人喜歡讓調(diào)用方自己 lock這個(gè)約定很容易被后來(lái)的人漏掉代碼腐化速度極快。不如把共享字段設(shè)為私有只暴露已經(jīng)加好鎖的靜態(tài)方法。4.2 原子變量讓簡(jiǎn)單的計(jì)數(shù)和標(biāo)志位不再需要鎖如果共享靜態(tài)成員只是一個(gè)計(jì)數(shù)器、一個(gè)標(biāo)志位或一個(gè)可以單獨(dú)讀寫的數(shù)值優(yōu)先用std::atomic。它用底層的原子指令把讀改寫打包成一個(gè)不可分割的操作從語(yǔ)言層面規(guī)定了對(duì)該變量的并發(fā)訪問是良定義的不需要再額外加鎖。例如剛才的累計(jì)計(jì)數(shù)可以寫成這樣class Metrics { public: static void Add(long v) { total_.fetch_add(v, std::memory_order_relaxed); } static long Get() { return total_.load(std::memory_order_relaxed); } private: static std::atomiclong total_; }; std::atomiclong Metrics::total_{0};fetch_add是原子操作不會(huì)出現(xiàn)兩個(gè)線程同時(shí)讀到舊值的情況最終結(jié)果必然等于所有線程成功執(zhí)行的累加之合。代碼里用了 relaxed 內(nèi)存序很多教材會(huì)告訴你這是性能最高的寫法但請(qǐng)一定確認(rèn)你真的不需要跨線程順序約束。如果你只關(guān)心“總數(shù)是多少”不在乎它和其他事件的先后關(guān)系relaxed 沒問題如果某個(gè)線程要先更新完一批數(shù)據(jù)再讓另一個(gè)線程通過這個(gè)原子變量看到“數(shù)據(jù)已經(jīng)準(zhǔn)備好了”那么需要 release/acquire 或更強(qiáng)的 seq_cst。新手階段統(tǒng)一用默認(rèn)的 seq_cst正確性優(yōu)先性能瓶頸出現(xiàn)后再回頭摳這些細(xì)節(jié)。還有一個(gè)坑std::atomic并不等于“把一個(gè)結(jié)構(gòu)體塞進(jìn)去就完事”。只有那些在目標(biāo)平臺(tái)上有原子指令支持的寬度才免鎖超過機(jī)器字長(zhǎng)的結(jié)構(gòu)體std::atomic內(nèi)部會(huì)退化到鎖而且不同平臺(tái)的鎖實(shí)現(xiàn)不可見。這種場(chǎng)景直接用專門的互斥鎖反而更清楚。4.3 線程局部存儲(chǔ)能不分就不分并不是所有共享數(shù)據(jù)都必須被所有線程共享。如果每個(gè)線程都只需要自己的那份副本事后各自統(tǒng)計(jì)或合并那最干凈的做法是用thread_local靜態(tài)成員。語(yǔ)法上就是static thread_local或者類外定義class Worker { public: static void AppendLog(const std::string s) { log_buffer_ s; } private: static thread_local std::string log_buffer_; }; thread_local std::string Worker::log_buffer_;初看可能覺得奇怪它和static不矛盾嗎一點(diǎn)都不矛盾。thread_local決定的是線程維度每個(gè)線程都有一份獨(dú)立拷貝static決定的是生命周期這份拷貝不對(duì)應(yīng)任何對(duì)象實(shí)例只對(duì)應(yīng)線程和類名。也就是說不同線程修改的都是自己的log_buffer_彼此天然隔離不需要鎖?,F(xiàn)實(shí)項(xiàng)目里線程局部存儲(chǔ)非常適合日志緩沖、臨時(shí)緩存、線程池上的會(huì)話數(shù)據(jù)處理這類場(chǎng)景。不過有兩個(gè)注意點(diǎn)。第一線程退出時(shí)thread_local 對(duì)象會(huì)析構(gòu)不要在析構(gòu)函數(shù)里依賴另一個(gè)線程的 thread_local 數(shù)據(jù)。第二線程池中的線程任務(wù)邊界不明顯線程局部緩存在任務(wù)結(jié)束后如果不清理容易把上一個(gè)任務(wù)的數(shù)據(jù)帶到下一個(gè)任務(wù)里必須在任務(wù)入口或出口顯式重置。4.4 選型的底層原則總結(jié)一下常見場(chǎng)景下我一般按這個(gè)表選型場(chǎng)景推薦方案原因復(fù)雜對(duì)象多個(gè)字段需要保持一致mutex / scoped_lock鎖定一段邏輯操作整體狀態(tài)計(jì)數(shù)器、標(biāo)志、單一數(shù)值std::atomic免鎖吞吐高語(yǔ)義清晰讀多寫少的高頻查詢std::shared_mutex多讀者并發(fā)寫者互斥每個(gè)線程獨(dú)立處理數(shù)據(jù)static thread_local物理上不再共享免同步初始化后不再修改constexpr / 只讀不可變靜態(tài)成員沒有寫操作天然安全選型之外還有一條更底層的心法能減少共享就不要增加鎖。鎖不是免費(fèi)的就算無(wú)鎖的原子變量也會(huì)增加指令數(shù)和緩存一致性壓力。如果一段數(shù)據(jù)其實(shí)沒必要被所有線程共享優(yōu)先通過任務(wù)拆分、線程私有副本或不可變數(shù)據(jù)把它變成“不需要同步”的結(jié)構(gòu)這比任何同步原語(yǔ)都高效。我自己在評(píng)審代碼時(shí)看到有人往共享靜態(tài)成員上加鎖第一反應(yīng)不是夸他會(huì)加鎖而是先問這一步真的需要共享嗎5. 單例模式的經(jīng)典重災(zāi)區(qū)雙重檢查鎖與安全的單例實(shí)現(xiàn)5.1 為什么靜態(tài)成員變量是單例的最常見載體靜態(tài)成員變量最常見的用途之一就是單例。單例的本質(zhì)是進(jìn)程內(nèi)只有一個(gè)實(shí)例這個(gè)事實(shí)和靜態(tài)存儲(chǔ)區(qū)天然契合用靜態(tài)成員指針或引用持有那個(gè)唯一的對(duì)象是幾乎所有實(shí)現(xiàn)的第一步。也正因?yàn)槿绱藛卫龑?shí)現(xiàn)里線程安全的坑特別密集。尤其是“雙重檢查鎖”它幾乎是 C 社區(qū)反復(fù)踩了十幾年的經(jīng)典雷區(qū)。我先解釋它為什么吸引人再解釋它為什么沒那么好用。5.2 看看這段“老江湖”代碼為什么錯(cuò)雙重檢查鎖的出發(fā)點(diǎn)是單例創(chuàng)建一次之后每次讀取都是熱點(diǎn)路徑如果每次都加鎖開銷太大能不能先無(wú)鎖判斷指針是否為空為空才加鎖創(chuàng)建于是出現(xiàn)類似下面的代碼static Singleton* inst nullptr; static std::mutex mu; Singleton* GetInstance() { if (inst nullptr) { // 第一次無(wú)鎖讀 std::lock_guardstd::mutex lock(mu); if (inst nullptr) { // 第二次判斷 inst new Singleton(); // 創(chuàng)建 } } return inst; }問題在于inst的第一次無(wú)鎖讀和另一個(gè)線程里的new Singleton()之間沒有任何同步關(guān)系。new 表達(dá)式本來(lái)就是三步分配內(nèi)存、在內(nèi)存上構(gòu)造對(duì)象、把地址寫入inst。編譯器或 CPU 可能把“寫入 inst”提前到構(gòu)造完成之前也可能把它推遲線程 B 在第 1 行看到inst不為空時(shí)線程 A 可能還沒完成構(gòu)造。于是 B 返回了一個(gè)半成品指針調(diào)用成員函數(shù)時(shí)讀取的是未初始化的字段。在某些編譯器上它可能“看起來(lái)能用”但跨平臺(tái)、跨優(yōu)化等級(jí)之后就會(huì)在運(yùn)行期炸掉。而如果第 1 行看到的inst仍為空多個(gè)線程會(huì)依次進(jìn)入并重復(fù)創(chuàng)建對(duì)象單例退化成多例內(nèi)存泄漏都算輕的。很多人覺得加 volatile 就能解決。volatile 不能提供原子性和內(nèi)存順序前面說過這里同樣不成立。甚至static volatile Singleton* inst;也不能保證構(gòu)造完成的 happens-before它只是讓編譯器不緩存這個(gè)指針變量而已。真正的解法要么讓標(biāo)準(zhǔn)機(jī)制直接保證初始化要么使用原子量配合 memory_order。5.3 三套可靠實(shí)現(xiàn)函數(shù)局部靜態(tài)、call_once、只讀單例最省事的寫法C11 以后的函數(shù)局部靜態(tài)變量已經(jīng)幫你把初始化競(jìng)態(tài)解決了class Singleton { public: static Singleton Get() { static Singleton instance; return instance; } private: Singleton() default; Singleton(const Singleton) delete; Singleton operator(const Singleton) delete; };多線程第一次調(diào)用Get()時(shí)初始化由編譯器生成的 guard 保證只執(zhí)行一次后續(xù)訪問無(wú)鎖。這個(gè)模式因?yàn)楹?jiǎn)潔到幾乎不可能寫錯(cuò)強(qiáng)烈優(yōu)先推薦。唯一限制單例對(duì)象的構(gòu)造函數(shù)不能依賴另一處同樣需要復(fù)雜初始化的全局狀態(tài)否則你不過是從線程安全問題換到了初始化順序問題。如果需要給單例傳參數(shù)或者初始化邏輯比較復(fù)雜可以用std::call_onceclass Singleton { public: static Singleton Get(int input 0) { std::call_once(once_, [] { inst_ new Singleton(input); }); return *inst_; } private: explicit Singleton(int v) { /* ... */ } static std::once_flag once_; static Singleton* inst_; }; std::once_flag Singleton::once_; Singleton* Singleton::inst_ nullptr;call_once的承諾是即使多個(gè)線程同時(shí)調(diào)用初始化回調(diào)也只會(huì)執(zhí)行一次其他線程會(huì)阻塞等待這次回調(diào)完成。注意回調(diào)里不能提前返回once_flag 一旦執(zhí)行成功后續(xù)所有線程看到的都是已初始化的狀態(tài)。如果你非要在回調(diào)里拋異常異常會(huì)傳播給當(dāng)前線程once_flag 會(huì)重置下一次調(diào)用會(huì)重試這是標(biāo)準(zhǔn)行為寫代碼時(shí)要考慮清楚。還有一類更極端的場(chǎng)景單例對(duì)象沒有任何可變狀態(tài)或者所有字段都是編譯期常量。這種時(shí)候直接用constexpr靜態(tài)成員或函數(shù)內(nèi)static constexpr對(duì)象就行沒有運(yùn)行時(shí)初始化也就不存在初始化競(jìng)態(tài)。很多人一聽到單例就條件反射寫鎖實(shí)際上一個(gè)全 constexpr 的消息格式描述符完全不需要任何同步設(shè)施。5.4 關(guān)于析構(gòu)順序的提醒函數(shù)局部靜態(tài)對(duì)象在程序退出時(shí)會(huì)自動(dòng)析構(gòu)析構(gòu)順序與構(gòu)造順序相反。如果單例在析構(gòu)時(shí)還依賴另一個(gè)局部靜態(tài)對(duì)象而對(duì)方已經(jīng)析構(gòu)就可能踩到空指針或未初始化數(shù)據(jù)。我的建議是單例析構(gòu)函數(shù)保持簡(jiǎn)單不要訪問其他可能先析構(gòu)的全局狀態(tài)如果主線程之外還有工作線程在運(yùn)行必須在 main 里先 join 所有線程再退出而不是讓進(jìn)程在還有線程運(yùn)行時(shí)走到靜態(tài)析構(gòu)階段。還有一類懲罰是我見過不少團(tuán)隊(duì)踩過的為了嚴(yán)格“禁止拷貝”把單例基類寫成宏或者一大堆代碼反倒是構(gòu)造函數(shù)忘記私有化了。其實(shí) C11 之后delete 拷貝構(gòu)造和賦值就夠了Singleton(const Singleton) delete; Singleton operator(const Singleton) delete;別為這種小事發(fā)明新框架。6. 跑一遍才踏實(shí)ThreadSanitizer 實(shí)測(cè)與排查心得6.1 一個(gè)能穩(wěn)定暴露競(jìng)態(tài)的測(cè)試用例理論講再多不如讓工具在眼前把競(jìng)態(tài)抓出來(lái)。我常用的做法是先寫一個(gè)很小的復(fù)現(xiàn)程序規(guī)模不大但循環(huán)次數(shù)足夠多保證競(jìng)爭(zhēng)窗口能被撞上。比如前面那個(gè)計(jì)數(shù)器例子的完整版#include thread #include iostream struct Stats { static long counter; }; long Stats::counter 0; int main() { std::thread threads[8]; for (int i 0; i 8; i) { threads[i] std::thread([] { for (int j 0; j 1000000; j) { Stats::counter; } }); } for (auto t : threads) t.join(); std::cout Stats::counter \n; return 0; }按正常邏輯輸出應(yīng)該是 8000000直接編譯運(yùn)行你大概率會(huì)得到一個(gè)更小的數(shù)甚至偶爾看起來(lái)像 8000000因?yàn)楦?jìng)爭(zhēng)窗口不是每次循環(huán)都能命中。所以靠數(shù)值猜“是不是競(jìng)態(tài)”很不靠譜數(shù)值對(duì)也不能證明線程安全。想要穩(wěn)定暴露問題得用專門工具。6.2 編譯并運(yùn)行 TSan看它怎樣報(bào)告ThreadSanitizer簡(jiǎn)稱 TSan是 GCC 和 Clang 都內(nèi)置的競(jìng)態(tài)檢測(cè)工具思路是在編譯時(shí)做插樁運(yùn)行時(shí)記錄每次內(nèi)存訪問再判斷是否存在兩個(gè)線程對(duì)同一地址的無(wú)同步訪問。編譯命令很簡(jiǎn)單g -stdc17 -fsanitizethread -g -O1 -pthread race.cpp -o race_tsan注意這里務(wù)必加上-g否則報(bào)告里的棧信息沒有行號(hào)-O1是 TSan 官方推薦的優(yōu)化等級(jí)既能暴露多數(shù)問題又不會(huì)像-O0那樣把代碼拍得太平。跑起來(lái)之后如果存在數(shù)據(jù)競(jìng)爭(zhēng)程序會(huì)在控制臺(tái)打出類似這樣的信息WARNING: ThreadSanitizer: data race Read of size 8 at 0x... by thread T2 #0 main::$_0::operator() ... Previous write of size 8 at 0x... by thread T1 #1 main::$_0::operator() ... Location is global Stats::counter它會(huì)準(zhǔn)確標(biāo)出參與競(jìng)態(tài)的兩個(gè)訪問、各自的線程棧以及出問題的變量名Stats::counter??吹竭@份報(bào)告已經(jīng)不需要我們?cè)偃シ瓍R編猜“會(huì)不會(huì)真是這里”。修復(fù)之后再編譯運(yùn)行直到 TSan 零告警我才敢說這個(gè)復(fù)現(xiàn)用例的事情結(jié)束了。TSan 在使用上有兩個(gè)小坑值得提前說。一是它和 ASanAddressSanitizer不能混用加了-fsanitizeaddress再同時(shí)開sanitizethread行為不可預(yù)期可能直接鏈接失敗。二是 TSan 對(duì)運(yùn)行時(shí)環(huán)境有額外要求在部分老內(nèi)核或容器里需要額外配置如果直接跑報(bào)“FATAL: ThreadSanitizer: unexpected memory mapping”通常和環(huán)境不支持有關(guān)換個(gè)常規(guī)環(huán)境或者更新工具鏈一般就能解決。這屬于檢測(cè)工具本身的環(huán)境問題不要因?yàn)樗鼒?bào)錯(cuò)就懷疑自己的代碼。6.3 真實(shí)項(xiàng)目里的排查思路和預(yù)防措施真實(shí)項(xiàng)目里的靜態(tài)成員變量不會(huì)像復(fù)現(xiàn)程序這么干凈。我的排查習(xí)慣是先把所有帶 static 且可寫的成員列出來(lái)按“是否在多于一個(gè)線程里出現(xiàn)”分類只讀的定義為安全寫者只有啟動(dòng)階段的可以重點(diǎn)檢查初始化順序運(yùn)行期有多個(gè)寫者的直接進(jìn)觀察名單。第二步找出所有訪問入口看看讀和寫是否有共同的同步對(duì)象。讀加鎖、寫加鎖但用的是兩把不同的鎖等于沒鎖。第三步上 TSan 跑一輪覆蓋主要業(yè)務(wù)路徑的壓測(cè)通常十分鐘就能抓到第一塊視野盲區(qū)。修復(fù)時(shí)也要小心修復(fù)動(dòng)作本身引入新問題。很多人第一反應(yīng)是在每個(gè)方法入口加鎖但忘了靜態(tài)成員變量可能被外部通過返回值獲得引用然后繞過方法直接改。正確做法是讓靜態(tài)成員盡可能私有對(duì)外只暴露加好鎖的靜態(tài)方法如果實(shí)在需要返回引用必須返回一個(gè)同樣受鎖保護(hù)的代理或者直接返回副本。我現(xiàn)在設(shè)計(jì)任何類時(shí)遇到靜態(tài)成員變量的第一個(gè)問題都是這個(gè)變量是只讀的嗎如果不是只讀下一個(gè)問題就是什么時(shí)候?qū)懩男┚€程讀用什么同步如果回答不上來(lái)我就不讓它作為裸的靜態(tài)成員存在。寧可多寫一層函數(shù)局部靜態(tài)的間接層把初始化和訪問都收口到一個(gè)地方。見過太多因?yàn)殪o態(tài)成員線程安全翻車的案例之后我的體會(huì)是數(shù)據(jù)競(jìng)爭(zhēng)很少是“運(yùn)氣不好”它是共享、可變、缺少同步三個(gè)條件同時(shí)成立的必然結(jié)果。把這三者拆掉任何一個(gè)問題就能從根上消失。診斷時(shí)可以靠工具防御時(shí)還是得靠設(shè)計(jì)習(xí)慣。希望你下次看到static關(guān)鍵字時(shí)能多停留兩秒。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月婷丁香在线视频在线| 丁香婷婷久久 | 色五月综合在线| 网色99| 99熟女视频| 婷婷在线播放| 99在线资源| 91操人视频| 激情又色又爽又黄的A片| 丁香五月av在线| 色色色9 9 9| 亚洲国产精品VA在线看黑人| 成功精品影院| 丁香五月激情性色郤| 毛v一区二区视频| 五月婷婷影| 丁香婷婷综合激情五月色,开心五月丁香花综合网,激情综合五月亚洲婷婷,五月天 | 婷婷 色 丁香 夜| 日韩黄色电影| 狠狠干狠狠操狠狠爱| 成人电影AV在线观看| -91九色大屁股| 少妇人妻偷人精品无码视频新浪| 色婷婷网| 激情爱爱网站超大免费| 天天射天天射一道本日本社区 | 国产3p露脸普通话对白| 伊人91| 亚洲精品国产精品乱码不99| 色热久| 久久激丁香| 精品色| tingtingjiqingwuyue| 69综合在线| 国产真实乱了老女人视频| 五月丁香六月婷婷激情网| www.五月激情.com| 999热在线视频| 久久九九激情五月天 | 九九婷婷五月天影视| 99伊人婷婷在线| 国产69久久久欧美黑人A片| 任你搞网站| 久久欧洲综合网| eeuss人妻| 9精品久久999| 久久久99精品免费观看| 日本啪啪视频HD| 久久99综合| 九九在线精品| 久99综合婷婷| 五月丁香激情综合网| 婷婷久久免费看| 男女99免费视频| 激情五月天综合网| 九九碰九九爱97超碰| 激情综合在线播放| 久综合色| 亚洲视频a| 婷婷精品综合| 99re这里只有精品99| 亚洲成人无码网站| 天天狠狠婷婷在线| 思思久久96热在精品国产,| 婷婷爱在线观看| 久九色| 亚洲中文字幕av| www.狠狠| 五月天伊人手机在线播放AV| 97色色色| 六月激情网| 激情综合五月婷婷| 99∨VTV| 天天操比比| 第四色首页| 日韩视频99| 激情婷婷色五月| av五月天婷婷丁香| 亚洲欧美成人在线| 狠狠色噜噜狠| 97极品在线| 无码yw| 九月av| 99操碰| 色五月成人婷婷| 日日夜夜青青草| 天天舔天天| A久网| 五月花在线观看视频| 婷婷射丁香| 五月婷婷,狠狠操| www久久艹| 五月婷婷激情性爱| 黄色视频网站在线播放| 久久婷婷网| Www.狠狠| 爱草视频在线| 天天肏在线观看| 激情五月综合亚洲另类| 久久婷婷丁香五月宗合| 天天爽天天日人人爱 | 久操婷婷| 丁香五月色色婷| 五月丁香啪啪综合网| 色色综合色视频| 99精品网站| 久久人妻视频| 久久综合66| 久久丁香婷婷五月| 色五月天激情| 激情五月天视频| 婷婷中文字幕网站| 这里只有精品,日韩视频| 婷婷久久六月天| 久久人妻视步| 国外亚洲成AV人片在线观看| 影音先锋四区| 天天干天天干天天操| 97天堂| 97人碰人操| 亚州激情九月| 呦呦AV| 九九99免费视频| 超碰只有精品在线| 99热这里只有精品10| 五月丁香亭亭天天舔| 超碰在线视屏| 天天久| 五月丁香六月激情在线| 五月天婷婷情色| 影音先锋 91工厂| 欧美激情综合色综合啪啪五月| 双性美人被调教到喷水A片| 思思99久久| 狠狠插狠狠| 五月丁香六月色| 99干日日干| 久久99婷婷| 婷婷五月天黄色小说| 色久天| wwww.色婷婷| 久久九九爽| sewuyuejiqingwang| 婷婷射丁香| 五月婷婷综合精品| 超碰操日| av五月天婷婷丁香| 69久久久| 色五月婷婷在线观看| 疯狂做受XXXX高潮A片动画| 五月色婷婷中文字幕| 成人丁香婷婷五月天| 91超级碰| 亚洲丁香五月天在线视频| 美女网黄| 日日骑夜夜撸| 图片区 小说区 区 亚洲五月 | 五月色亭丁香| 五夜婷婷| 99热精品在线播放观看| 成人国产网站在线免费看| www.婷婷五月| 久久丁香婷婷五月天| 色五月欧美| 成人AV网站在线| 激情六月一二| 超碰人人99| 激情五月天小说网| 九九九九国产| 国产精品涩涩涩视频网站| 99在线爽| 影音先锋五月天婷婷丁香在线观看| 六月丁香婷婷色69| 97操在线资源| 99热91| 亚洲欧美成人在线| 韩国真做片在线观看| 丁香婷婷色五月| 亚洲成人网在线观看| 婷婷五月天AV在线| 婷婷伊人綜合中文字幕| 狠狠狠狠狠操| 97碰人人操| 丁香五月激情网| 狠狠色丁香婷婷久久综合| 九色自拍| 亚洲V国产V欧美V久久久久久| 亚洲激情丁香五月基地| 99久久亚洲国产| 超碰高清在线| 亚洲AV免费在线| 99久视频| 九九热视频这里只有精品| 激情五月丁香六月综合AVXXXX| 五月丁香婷婷婷激情爱爱| 色V狠狠的干| 日本久久网| 日韩av在线免费观看| 久久精品99久久久久久| 九月婷婷丁香| 亚洲啪啪网| 可以直接看的AV| 另类色视频| 亚洲色99综合天堂| 激情伊人五月天| 五月天婷婷色色网| 一二线视频 另类| 欧美这里只有精品| 婷婷五日b| 伊人久久大香线蕉AV最新午夜| 亚洲综合五月天婷婷丁香| 99 热| 1级欧美日韩| 99精品热视频| 五月丁香婷婷成人综合网| 六月婷婷综合激情| 操逼亚洲天堂| 搡BBBB搡BBB搡18| 亚洲综合视频网| 精品人妻伦| 婷婷六月丁香五月图区| 五月天社区| 久久性爱网站| 天天曰夜夜爽| 久碰久操| 美欧成人视频| 97碰碰九九视频| 亚洲精品99| 欧美成人精品老美女噜噜噜| 99这里只有精品8| 日本一区二区三区精品视频| 少妇高潮呻吟A片免费看软件| 天天操婷婷| 玖玖资源部在线播放| 操逼国产91| 操操操B| 色婷婷视频在线| 99热这里只有精品16| 天天色综和网| 最新久久网址| 99久精品视频| 成人免费视频一区| 五月色婷婷夜色| 天天综合精品| 99色在线| 婷婷成人五月天| 激情网五月| 狠狠干 狠狠操| 午夜成人AV在线| 五月丁香婷婷欧美色图视频五月丁香777电影| 思思热精品在线| 六月丁香视频网站| 99精品视频免费在线播放| 七月丁香婷婷 色色| 婷婷爱五月| 色色五月天丁香婷婷| 亚城区在线| 天天干天天日天天插| 东京热免费视频| 97色97干| 一起草av| 狠狠狠狠免费| 这里只有精品99www| 欧美va亚洲va| 五月天激情中文字幕| 国产成人AV人人爽人人澡Va| 九九婷婷五月天影视| 天天爽天天爽天天爽天天爽天天爽天天爽天天 | 99视频啪啪| 亚洲第一成人无码A片| 丁香五月天堂网| 婷婷97| 色婷婷操逼| 久久久精品人妻录| 噜噜狠狠色综无码久久合欧美| 综合激情深爱| 婷婷丁香五月综合| 色五月天综合网| 亚洲无码播放| 日本精品久久久久中文字幕| 激情6月| 丁香婷婷五月激情四射网| 亚州成人综合在线| www.日韩国产| 日韩高清成人| 五月婷婷色播视频| 91chinese 在线| 婷婷网影院| 色六月婷婷| 91久久婷婷| 欧美噜噜免费观看| 丁香色情五月综合网站| 99在线免费视频| 亚洲欧美成人在线| 免费视频WWW在线观看网站| 天天干天天爽| 综合婷| 97操碰碰无码视频| 日韩激情婷婷五月天| 亚洲五月综合色播| 国产.亚洲.欧洲视频在线| 亚洲永久免费| www99精品日韩| 人人看人人97| 秋霞午夜理论| 男人天堂 久久| 这里只有精品视频一区| 91一起艹| 欧美大肥婆大肥BBBBB| 99色播| 丁香五月婷久久| 日韩淑女人妻luan伦激情精品一区二| 六月婷婷亚洲| 爽天天天天天天天| 香蕉久久国产AV一区二区| 婷婷五月丁香综合| 精品无码久久久久久久久| 大香蕉久久青青| 超碰日韩人妻在线| 亚洲愉拍99热成人精品| 秋霞影音91人妻久久| 五月天激情网图片| 丁香五月大香蕉在线99| 99热超碰在线| 99久久6| 女人天堂AV| 殴美97色| 丁香五月冃欧美| 婷婷色九月| 亚洲情综合五月天| 天天色天天搡| 久久五月天色| 国产av一区二区三区| 成人版视频在线观看| 狠狠狠狠狠狠狠狠草| 九九99热久久精品66中文字幕| 99综合| 丰满少妇猛烈A片免费看观看| 91色干| 婷婷久久六月天| 久久久性爱视频| 日本色啪| 久久这里99| 婷婷五月色播放| 色吊丝99| 色五月丁香五月婷婷五月成人网| 国精产品一区一区三区免费视频| 婷婷精品免费久久| 伊人婷婷大香蕉| 精品自拍99| 伊人婷婷激情| 国产精品99久久久久久久女警| 色播六月| 五月婷婷av| 婷婷基地成人五月天| 午夜丁香婷婷| 五月天婷婷激情四射综合| 日日色五月天| 欧美交换配乱吟粗大25P| 性爱七区| 丁香五月六月综合欧美| 亚洲成人无码片| www.99热. com这里只有精品| 无码99| 久久五月综合| 亚洲精品视频在线播放| 婷婷五月天激情网址| 99视频内射三四| 久99久视频精选| 99热的无码| 99久久精品免费精品国产_国产精品久久久久久_国产在线|日韩_久久国产精品电影 | 国产AV国片偷人妻麻豆| 天天噜天天爱| 五月天婷a在线| 五月天小说激情| 日韩成人电影AV| 操碰97| 激情五月综合婷婷| 六月婷伊人| 国外亚洲成AV人片在线观看| 亚洲AAA| 免费看欧美成人A片无码| 五月婷婷亚洲综合网| 国产JK精品白丝AV在线观看| 六月婷婷影院| 亚洲无码猫咪| 96精品久久久久久久久| 成人天天爽| 人妻丰满精品一区二区A片| 玖玖在线资源视频| 亲子乱AV-区二区三区| 久久99性爱| 日本nghangse中文字幕| 99热在线观看精品| 久久色五月| 999久久久国产精品| 97人人看| 激情99热| 日韩五月婷婷久久| 97人人操| 夜夜操夜夜姧| 无码色综合| 性生活视频98791| 天天艹天天综合网| 久久桃花网色婷婷| 色情五月婷| 9er热在线精品视频| 丰满少妇猛烈A片免费看观看| 色色cOm| 久久婷婷五月天激情四射| 九九99免费视频| 天天在线久久综合| 九九热精品99| 成人中文网| 五月天婷婷7米| 热99国产精品| 丁香五夜激情四射夜夜夜| 久9精品视频| 久久久久久久久久久久久久人妻视频| www.丁香黄色五月天人与| 五月天激情AAAA| 操九色| 九九热精品| 婷婷操婷婷干婷婷射| 九九五月天| www.色五月| 色色色网站| 成人婷婷桔色| 99re热在线视频| 天海翼中文字幕高| 噜噜视频| 99亚洲视频| 五月色婷婷综合丁香精品无遮挡| 亚洲婷婷婷| 国产乱子轮XXX农村| 狠狠操狠狠| 婷婷五月免费在线| 99re这里只有精品国产99| 51精品国内探花| 99激情视频| 免费不卡狠操美女视频网 | 精品视频二级九九| 大香蕉啪啪啪| 六月天婷婷| 天干天天干天天天天天| 久久久久9| 午夜天堂一区人妻| 婷婷激情五月| 99精品性爱| 九九在线精品| 五月色综合网| 日日爱激情| 色小说婷婷五月天天天| 五月婷婷干干干| 2013AV天堂| 六月丁花香啪啪激情欧美| 色五月婷婷亚洲| 亚洲综合五月天| 视色综合| www.思思99热| 密乳视频| 精品怡红九九九| 夜夜操夜夜爽| www.sd-xiangsu.cpm| 影音先锋色婷婷| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 丁香婷婷精品视频| 淫荡家庭AV| 欧美在线看| 日韩精品一品二区三区的使用体验| 色婷婷综合久久| 亚州美女| 丁香五月激情图片婷婷| 五月停性愛| 国产精品18久久久| av国产精品| 五月天婷婷影院| 欧美成人精品A片免费一区99| 91色综合| 六月色婷婷| 丁香五月激情五月| 无码激情AAAAA片-区区| 久热99中文字幕| 超碰熟女农村在线69| 欧美情色一区| 国产精品久久久久久久久久久久| 天堂伊人干| 婷婷在线中文字幕| 影音先锋综合网| 99热全是精品| 我爱大香蕉| 五月婷婷啪啪| 99re热视频这里只有综合亚洲| 天天日日天天| 噜噜噜精品欧美成人在线观看| 五月亭亭综合五码| 五月丁香六月激情在线| 久久作爱| 国产FREESEXVIDEOS性中国| 亚洲国产精品二二三三区| 九九热在线视频| 五月婷婷啪啪啪啪| 综合网狠狠| 婷婷爱爱蜜臀天天操| 九九色99| 九九婷婷五月天影视| Av性爱网站| 日日懆天天懆| 综合网视频| 91碰在线| 色婷婷网| 热99视频精品在线| 99日逼视频| 91狠狠综合久久| 亚洲婷婷月丁香五月| 婷婷五月婷婷五月| 久久综合影院| 五月天婷婷色| 国产99久| 丁香五月情| 亚洲一色色色色色色色色| 五月丁香六月激情啪| 欧美精产国品一二三区| 成人做爰A片免费看网站找不到了 国产露脸150部国语对白 | 激情综合网五月丁香| 99久久国产宗和精品1上映| WWW.色婷婷.COM| 婷婷五月丁香欧洲| 激情文学综合婷婷五月天丁香花| 久久婷婷五月综合成人d啪| 99啪啪视频| 99性感视频| 99riAV国产精品视频| 99在线精品免费视频| 69精品人人人人人人| 日本片日本片祼观看网站在线看中文版网页在线看| 四色女婷婷| 91九色国产| 成人精品免费在线观看| 黄色99视频| 九九热这里| av大香蕉| 久久婷婷亚洲无码一起| 婷婷综合五月色播| 色婷五月天| 色五月偷偷| 久久五月婷婷开心网| 日本啪啪天堂| 日91高清无玛| 亚洲第一精品网站| 不卡在线视频| 婷婷在线五月天观看| 色哟哟www| 五月激情综合婷婷| 噜噜噜噜在线| 国自产拍偷拍精品啪啪一区二区| 五月丁香六月在线欧美| 成人网站免费在线播放| 99草视频在线观看| 婷婷五月色情天| 国产毛片精品一区二区色欲黄A片| 色婷婷19| 啪啪婷婷五月天激情| yirenjiqingshiping| 婷婷综合亚洲| 婷婷五月天色播| 4399无码视频二区| 婷婷五月开心中文字幕在线| 丁香五月AV| 99色综合网| 欧美精品999| 午夜AV网| 天天干天天操天天干天天操天天干天天操| 久久激情综合| 99色| 六月婷婷综合| 91人人操人人看| 激情欧美丁香五月| 亚洲AV无码成人精品电影| 99热这里只有精品2| 婷婷色五月91啪啪| 天天情色综合网| 精品国产AV色一区二区深夜久久| 色五月婷色彩免播放器| 丁香五月激情啪啪| 婷婷色5月天在线。| 天天插天天插| 激情五月天免费视频| 五月丁香婷婷色啪| 激情五月综合网最新| 人人操9| 五月天深爱激情网| 婷婷色六月| 中文在线成人| 欧美内射AA| 九九aV| 婷婷5月天激情综合| 无码AV免费精品一区二区三区| 26uuu淫色| 麻豆AV一区二区三区| 思思精品久久艹| 97色色网| 日逼免费视频| 97五月综合网| 中文av网站| 欧洲综合视频在线观看。欧洲,亚洲综合食品在线观看。 | 久艹大香蕉| 欧美日韩91| 五月婷婷五月丁香综合| 日本三级99人妇网站| 激情欧美五月丁香| 黄色AV日韩| 免费看欧美成人A片无码| 国产一级婬片毛片| 三级毛片7979| 97精品人人A片免费看| 五月六月激情| 中文字幕精品推荐免费在线观| 97亚洲婷婷| 好吊操这里只有精品| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 欧美搡BBBBB摔BBBBB| 五月婷婷狠狠干| 色欲影香| 丁香五月天堂婷婷| 五月色婷婷影院| 婷婷激情综合色五月久久,色婷婷丁香花,丁香婷婷五月情天,久久婷婷五月综合色 | 中文字幕色色| 国产婷婷色五月| 三男玩一女三A片| 色噜噜狠狠一区二区三区| 中文字幕永久免费| 91女人18毛片水多国产| 五月丁香六月婷婷久久| 亚洲色情网站| 全网最新网黄大秀直播高清,主播国产录屏在线| 色呦呦在线| 天干夜夜操| 五月激情婷婷女| 久/久精品99看9| 色婷婷小视频| 丁香五月天堂| 一级性爱视频| 国产裸舞福利资源在线视频| 五夜丁香| 色婷婷亚洲综合av| 99视频| 天天噜日日噜综合无码| 99这里只有免费的小视频在线观看| 婷婷激情啪啪| 丁香性爱在线视频| 在线观看欧美| 激情亚洲网| 色小说婷婷五月天天天| 99碰超| 婷婷色六月| 九色综合网| 久久久中文| 亚洲视频二区| 色婷婷五月天| 激情开心五月天婷婷基地丁香社区| 五月婷婷激情久久| 伊人久久大香天蕉亚洲特级| 久久婷婷九月国产精品| 天天爽天天爽| 天天色天天| 97操在线视频| 思思热AV| 天天干狠狠操| 99热碰碰| 激情亭亭五月| 一区二区三区XXXXXX| 亚洲欧洲另类| 五月丁香婷婷色| 日本一级一级一级一级| 九九五月天| 丁香五月开心亚洲| 五月丁香六月婷婷久久肏| 丁香六月婷婷综合欧美| 婷婷五月成人系列| 婷婷丁香五月亚洲免费| 久久久久久久久久人妻| 综合综合网| 国产精品久久久久久五月天加勒比| 秋霞学生妹一二级| 五月婷婷六月丁香综合视频在线| 久这里只有精品| 婷香五月网在线| 激情综合网丁香| a网站免费观看| 色婷视频| 日日操夜夜操狠狠操| 五月婷婷开心亚洲无| 久久这里只精品66| 五月婷高清视频| 婷婷五月永远18免费久久久| 久热这里只有精品66| 激情五月天小说视频| 开心五月激情五月丁香五月婷婷| 亚洲色色图片| 一區四區歐美日韓| 激情网五月婷婷| 日本色视| se99视频| 最近中文字幕2019视频1| 成人AV在线中文版| 亚洲激情六月| 欧美大香蕉视频| 丁香六月综合激情| 日韩av干| 日韩啊啊啊| 久久久久久综合88| 中字幕视频在线永久在线观看免费| 免费黄色视频网址| 五月天激情国产综合婷婷婷| 亚洲在线免费成人| 香蕉伊人综合| 婷婷激情五月吧| 天天天天天天天操| 婷婷色五月天在线观看| 丁香五月天堂| j五月香在线| 婷婷五月天久久综合88| 性爱动图国产麻豆一区二区三区| 五月丁香在线婷婷蜜桃| 色色色色色网| www.zbzhongsen.com| 97夫妻超碰| 四月婷婷五月丁香| 久久小视频免费| 日日夜夜狠狠婷婷色| 欧美天天干天天草| 五月婷婷五月| 噼里啪啦在线观看免费完整版视频| 99五丁香月| 丁香六月激情综合| 激情综合色播| 丁香五月天啪啪| 超碰在线观看成人视| 色欲Av五月天| 丁香五月开心亚洲| 婷婷99视频在线| 99免费热视频在线| 激情深爱综合| 另类 在线| 色色色色综合网| 久久五月情| 亚州综合色| 丁香六月婷婷一区| 播五月开心婷婷欧美综合| 99精品成人无码A片观看金桔| 久操人| 久久五月天合网| 五月丁香综合| 熟女少妇内射日韩亚洲| 天天拍天天操| 色色色色色色色色色色色色色97| 婷婷丁香色五月天久久88| 人人操五月天| 99在线视频观看| 五月婷婷六月丁香激情深爱| 这里有精品| 色域五月丁香| 五月天久久久| 日韩欧美成人片| 97超碰99热99| 四色女婷婷| www.婷婷| 果冻传媒A片一二三区| 亚卅毛片| 五月婷婷丁香| 久久99久久久久久久噜噜| 亚洲综合色丁香婷婷六月| 色色色综合色| 色欲婷婷五月天| 天天爽夜夜爽天天爽夜夜爽| 国产人妻777人伦精品HD| 九九热99re8热免费观看| 激情人妻综合| 丁香五月天.com| 噜噜噜噜综合在线| 成人视频免费观看高清完整版在线观看| 超碰精品国产首页| 99精品在线观看视频| ztEJj| 激情五月视频| 97色五月婷婷在线| 亚洲五月天伊人| www.五月天| 欧美综合丁香网| 精国产品一区二区三区A片| 婷婷五月成年人| 超碰三级片| 激情九月天天天天婷婷| 毛片新网地| 狼人狠狠操| 国产va视频| 五月天停停日日| 五月激情在线| 91精品国产99久久久久久天美| 婷婷丁香五月网| 丁香六月| 丁香五月激情啪啪| 99色啊| 97caop| 影音先锋 婷婷| 香蕉曰比| 人人操AV| 久久的爱大香蕉| 色丁香六月| 超碰在线综合| 色五月丁香婷婷久草| 久热99热| 久久激情五月| 天天橾日日橾夜夜橾17| AV大片在线观看| 成人AV中文字幕| 日本色色图| 少妇熟女视频一区二区三区| 亚洲色综合性| 亚洲视频国产一区| 97干视频在线| www.91操| 国产XXXX搡XXXXX搡麻豆| 中文网av| 色娸娸综合网| 激情六月天| 丁香六月激情综合啪啪| 日本色久| 激情综合色| 天天操电影院色狼性av| 丁香六月啪啪啪| 五月激情影院| 婷婷五月色情天| 婷婷色色欧美| 高清无码网址| 五月激情小说网| 五月丁香激情综合网| 国产又色又爽又黄又免费| 五月天婷婷爱| 欧美日本VA| 26uuu成人网| 综合久久综合| 丁香六月婷婷色XXXX| 丁香激情五月| 少妇大叫太大太粗太爽了A片| 日韩色色色色色| 综合五月婷婷| 欧美激情综合色综合啪啪五月| 思思99热热热99| 丁香六月亚洲| www五月| 停停五月色宗合| 求可以看的AV网址| 色婷婷精品视频在线播放| 色五月婷婷亚洲| 色色色免费视频| 亚洲成人免费电影| 中文网婷婷字幕婷| 亚洲热视频| 久久爱婷婷| 五月天六月天| 亚韩在线视频| 五月婷婷丁香综合,亚洲天堂| 日日干日日| 色婷婷丁香五月| 天天激情视频| 中文字幕av久久爽一区| 五月婷中文娱乐综合| 精品婷婷| 天天日夜夜操五月| 久久婷婷网| 99热久久日本| 激情玖玖综合网| 桃色成人网| 狠狠色97| 五月天久久婷婷| 思思热久久婷婷五月天| 99热日韩这里只有精品| 五月婷亚洲精品AV天堂| 狠狠婷婷综合| 91九九| 99精品热视频| 99性爱视频| 毛片色五月| www.minyis.com【JT】国内CDN落地页保证转化QQ2101460746 | 亚洲精品视频在线| 91婷婷在线| 国产亚洲精品久久一区二区三区| 都市激情五月婷婷综合| 14色综合婷婷| 4399无码视频二区| 亚洲精品久久久久久久久久飞鱼| 九九色色| 无码99| 久久色区| 超碰av在线| 国产91视频| 9色视频在线| 色热久| 99精品热视频| 26uuu精品一区二区| 另类图片天天影视在线观看| 国产成人综合在线| 久久网日本| 人人操插| 五月丁香| 久久99视频| 99无码| 亚洲国产精品二二三三区| 男女啪啪做爰高潮无遮挡| 亚洲五月天激情| 婷婷五月天AV| 久久精品一区二区三区四区| 国产,欧美,学生妹,视频| 影音先锋91网站在线观看| 日韩欧美不卡| www.婷婷五月天,com| 亚洲另类AV| 婷婷大乡焦噜噜| 亚洲综合久| 婷婷 久综合| 婷婷五月天xxx| 爱草视频在线| 婷婷五月深爱五月| 色七七色九九| 99在线精品视频| 丁香五月婷久久| 五月天伊人| 婷婷五月天综合亚洲| 一本狠婷婷综合| 在线观看亚洲视频影院| 伊人91| 五月丁激情| 99久在线精品99re8热| 综合网啪| 五月激情小说| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 超碰无码318604| 五月天婷综合| 五月天国产成人| 操丝袜视频影院导航| 激情五月天综合| 五月丁香啪啪网| 99在线精品免费视频| 亚洲无码猫咪| 99九九久久| 久久这里99| 天天色粽合合合合合合合| 青青草成人网| 91碰人人| 色五月大| 婷婷六月丁香久| 精品人妻久久久久久| 另类图片五月天| 久久综合9| 99热r| 深爱五月网| 色婷婷小说| 99色人| 999婷婷综合| Jh7Uf088VHafNm| 久久久五月五丁香| 免费无码毛片一区二区A片| 免费成人网在线观看| 99热思思久| 五月激情婷婷在线| 99热超碰在线| 亚洲色图81p| 99热日| 色色色色综合网| 伊人玖玖综合| 婷婷六月中文字幕| 天天射综合网站| 99久久久精品| 九九热这里有精品23| 色婷婷精品视频| 五月丁香婷婷伊人| 婷婷99| 一个色的综合| www.色婷婷| 亚洲久艹| 天天天天天操| 激情综合网五月激情| 激情婷婷综合网| 噜噜噜噜在线| 婷婷色婷婷| 99九九热在线观看| 五月婷婷综合在线视频小说| 五月婷婷开心网| 无码人妻电影| 五月天婷婷久久| 97碰碰久久| 99热这里只有精品国产免费| 日韩 中文 欧美| YW无码| 操嫩逼电影| 五月丁香综合啪啪| 日韩精品999| 天天激情欧美美女| 97超碰婷婷五月天| 怕怕av| 色婷婷狠狠| 色原狠狠综合| 深爱激情网五月天| 狠狠爱深色婷婷综合| 在线成人网站| 色婷婷狠| 丁香激情四射| 五月婷婷综合在线| 五月婷婷色色网址| 激情深爱五月| 国产jd1024基地手机看国产| 五月婷婷影视| 99热| 亚洲精品乱码久久久久久综合| 久久综合丁香激情五月| 久月婷婷| 色婷婷九月| 99操逼视频| 香蕉综合在线| 大香蕉婷婷五月天| 色婷婷九月| 99精品热| 人妻人人操| 99久久黄色顶级视频| 操碰99| 五月天激情国产综合婷婷婷就去爱| 婷婷五月激情综合| 成人精品在线| 伊人久久艹| 久久99热这里只有精品23| 依人大香蕉| 激情纯色婷婷五月天在线不卡视频| 色色色999| 丁香丁香激情网| 777精品久无码人妻蜜桃| 五月丁香好婷婷姑娘综合网| 日韩中文字幕| 婷婷五月色综合| 婷婷综合网伊人| 666555。COm毛片| 日日舔夜夜操| 99热九九九九| 色五月激情五月| 91色逼| 在线播放成人网站| 337p午夜影院| 国产高清视频91九九九久久久| 丁香五月五月婷婷| 五月婷婷之综合激情在线| 亚洲精品久久久久久久久久吃药| 九九艹女| 久久视频婷婷| 久久婷婷五月| 校花娇喘呻吟校长陈若雪视频| 久久深爱激情网| 伊人九九综合| 女人被男人吃奶到高潮| 精品一二三区视频立| 久久婷婷午夜| 日韩在线一级| 综合五月天亚洲婷婷| 五月丁香婷婷欧美色图视频五月丁香777电影| 久热网在线视频| 日韩啪| 深爱综合网| 不卡影院午夜理论片| 色综合视频| 久久激情网| 欧美一级操逼视频| 热九九精品| 玖玖婷婷五月天毛片| www.色婷婷| 停停五月天激情网| 亚洲区视频| 五月天丁香啪啪网| 91无码视频| 婷婷五月激情欧美大胆视频| 七七色综合| 丁香五月在线播放| 五月婷婷无码| 激情深爱五月婷婷| 九九视频在线观看视频在线播放69| 91人人操人人| 视色综合| 久激情网| 色婷婷AV久久| 天天综合色| 丁香五婷婷| 操操综合网婷婷| 在线超碰免费| 国产免费AV网站| 天天成人丁香美女AV| 26UUU欧美激情一区二区| 爱爱网址9| 色欲天天综合网| 大狠狠在线| 五月婷婷成人| 99久操视频| 九九激情| 97色操| 久久成人天| 开心婷婷五月天综合| 五月婷婷狠狠久久| 五月天激情图片| 99成人在线观看| 99久久思思| 热九九在线| 婷婷综合亚洲| 久久人视频| www.91av.com| 97久久视频| 婷婷丁香宗合888| 丁香涩涩爱| 很操日本7| 丁香六月婷婷综情欧美| 99热费观看| Av在线资源| 狠狠色噜噜狠| 五月天色影院| 91玖玖| 97碰碰视频| 99精品热| 天天色,天天日,天天做| 久久久婷丁香五月| 五月玖玖| 日韩综合网络男女香蕉a片| WWW久| 色婷婷五月综合色婷婷| 五月天天丁香婷婷| 大战熟女丰满人妻AV| 五月天激情影院| 婷婷五月成人| 亚洲人人操BD| 精品国产va久久久| 六月色丁香中文字幕| 日逼免费视频| 性色五月天| 五月婷婷精品无在线| 深爱激情网噜噜色| 婷婷六月插屄激情| 永久无码色| 六月亚洲婷婷6月中文字幕| 综合激情五月丁香| 丁香六月婷婷开心| 久月婷婷| 青青.com| 思恩热国产视频右线观看| 免费观看亚洲AV片| 久久综合五月天| 天天看A片| 人妻操逼视频。| 在线五月婷婷小电影| 色亚洲无码| 激情综合网之激情五月| 狠狠操天天日| 婷婷五月天婷婷| 天堂草在线看www| 婷婷激情六月| www.五月婷婷.com| 九久9精品| 五月婷婷六月天| 国产精品大香蕉| 狠狠操天天干| 国精产品一区一区三区免费视频| 伊人综合网站| 婷婷五月丁香第四色超碰在线| 依人大香蕉在钱1| 婷婷五月网图片区| 久9久9久9久9久9久9| 丝袜大香蕉| 五月婷伊人| 天天综合网亚洲综合网| 日婷婷久久开心| 婷婷亚洲色| 99国产精品白浆在线观看免费| 深夜婷婷 丁香| 久久九九一區| 无码人妻电影| 五月丁香六月激情综合| 色婷婷丁香五月天在线视频| 六月丁香五月激情婷婷| 精品久久久人妻| 久久久久久激情| 九九AV| 9色天堂| 五月开心婷婷中文字幕| 思思w99| 亚洲综合五月天婷婷丁香| 99综合视频一体| 乱乱av| 亚洲秘 无码一区二区三区妃光/1| 日本一道久久| 九月婷婷丁香| 婷婷中文字幕网| 天天爱天天操| 丁香婷婷成年| 婷婷五月丁香综合| 超碰AAAAAAV| 停停五月色宗合| 色色色综合网| 久久婷中文字幕| 天天天天天操| 五月婷激情影院| 无码人妻少妇色欲AV一区二区| 91日综合欧美| .操區COm| 综合久久五月天| 五月婷婷激情综合| 精品视频网| 五月天色婷婷激情综合| 六月婷婷中文字幕| 99久久综合网| 色99无码| 婷婷深爱五月亚洲综合| 丁香五月激情综合| 九九热123| 五月天开心激情网色欲无码| 99久热这里只有精品| 婷婷五月天激情四射| 色五月婷婷伊人| 五月亭亭激情综合| 亚洲国产99| 五月丁久久| 91操人| 涩婷婷五月天在线精品视频| 在线观看免费人成视频无码| 99玖玖精品| 六月色狠狠色| 五月婷在线| 色五月婷婷青娱乐| 婷婷五月天亚洲图片| 超碰99在线| 欧美婷婷日本| 欧美色性色好| 久久5 9视频免费观看| 五月天久久www| 激情丁香五月婷婷| 亚洲AV成人在线观看| 丁香五月婷婷性爱| 色播婷婷五月天| 日本偷拍九九九| 亚洲综合干| 来吧亚洲综合网| 人人操97| 婷婷综合网站| 五月伊人91| 爱草视频在线观看| 六月婷婷色综合| 五月丁香久久综合| 成人AV免费观看| 91免费看片| 五月婷婷激情综合av| 五月婷狠狠| 成人色五月天| 性做久久久久久久免费看| 五月天丁香六月综合| 大香蕉五月丁香| 欧洲亚洲午夜| 久操热线| 噜噜噜狠狠色综| 色婷婷操逼| 超碰人人超碰| 色婷婷亚洲婷婷| 日本色噜|