免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

智慧景區(qū)邊緣計(jì)算落地實(shí)踐:架構(gòu)設(shè)計(jì)、算力選型與多業(yè)態(tài)數(shù)據(jù)融合

智慧景區(qū)邊緣計(jì)算落地實(shí)踐:架構(gòu)設(shè)計(jì)、算力選型與多業(yè)態(tài)數(shù)據(jù)融合 去年年中我接手了一個(gè)智慧景區(qū)項(xiàng)目主題就是“邊緣計(jì)算與多業(yè)態(tài)融合”。一開始我覺得這名字有點(diǎn)大——景區(qū)嘛無非就是閘機(jī)、廣播、監(jiān)控、停車攏共也就那么幾個(gè)系統(tǒng)??烧娴确桨冈u審和現(xiàn)場部署跑下來我才意識到智慧景區(qū)真正難的不是某一個(gè)系統(tǒng)怎么建而是散落在各個(gè)業(yè)態(tài)里的數(shù)據(jù)怎么在邊緣側(cè)被處理、被打通、被復(fù)用。這篇文章就把這個(gè)項(xiàng)目從設(shè)計(jì)、選型、部署到踩坑的完整過程拆開講全是實(shí)操層面的東西希望能給正在做或者準(zhǔn)備做類似項(xiàng)目的朋友一些參考。適合看這篇內(nèi)容的人我覺得有三類一是負(fù)責(zé)景區(qū)、園區(qū)、校園這類多系統(tǒng)場景的甲方信息化人員需要理清楚邊緣計(jì)算的落地邊界二是做系統(tǒng)集成的項(xiàng)目經(jīng)理或技術(shù)負(fù)責(zé)人看看別人是怎么處理算力分配、網(wǎng)絡(luò)規(guī)劃和多業(yè)態(tài)數(shù)據(jù)聯(lián)動的三是剛接觸邊緣計(jì)算、想找一個(gè)真實(shí)業(yè)務(wù)場景入門的開發(fā)者。文章里不會堆概念而是把當(dāng)時(shí)我們?yōu)槭裁催@么選、實(shí)測數(shù)據(jù)怎么樣、哪些坑必須躲開都一條條講清楚。1. 整體設(shè)計(jì)與思路拆解為什么智慧景區(qū)必須引入邊緣計(jì)算1.1 智慧景區(qū)到底在“智慧”什么很多人一提智慧景區(qū)第一反應(yīng)就是“裝攝像頭、搞人臉識別、上大屏指揮中心”。這個(gè)理解沒有錯(cuò)但是太淺了。真正從運(yùn)營角度看景區(qū)要解決的“智慧”問題其實(shí)非常具體游客還沒到景區(qū)門口停車場還剩多少位子能不能在手機(jī)上提前看到某個(gè)熱門打卡點(diǎn)人開始聚集了要不要啟動限流廣播和導(dǎo)視牌怎么聯(lián)動餐飲、零售、二銷這些業(yè)態(tài)怎么根據(jù)實(shí)時(shí)客流做備貨和人力調(diào)度游客從進(jìn)門到出門在哪個(gè)區(qū)域停留最久、對什么項(xiàng)目興趣最大這些數(shù)據(jù)能不能反哺運(yùn)營。這些問題背后都有一個(gè)共同的痛點(diǎn)數(shù)據(jù)孤島。停車系統(tǒng)管停車票務(wù)系統(tǒng)管票務(wù)安防系統(tǒng)管監(jiān)控商業(yè)系統(tǒng)管收銀各自為政數(shù)據(jù)格式不統(tǒng)一實(shí)時(shí)性也參差不齊。如果要把這些數(shù)據(jù)全部匯到一個(gè)中心平臺再分析不僅鏈路長網(wǎng)絡(luò)帶寬壓力也大而且很多場景根本等不起那個(gè)延遲。所以這個(gè)項(xiàng)目從一開始就定了一個(gè)基調(diào)不做“大而全”的純中心化平臺而是把一部分計(jì)算能力下沉到景區(qū)現(xiàn)場在靠近數(shù)據(jù)產(chǎn)生的地方先做處理再和云端做協(xié)同。這就是邊緣計(jì)算在這個(gè)場景里最核心的存在意義。1.2 三個(gè)繞不開的現(xiàn)實(shí)問題在方案調(diào)研階段我們列了幾次現(xiàn)場走訪把景區(qū)實(shí)際運(yùn)營里遇到的硬問題整理了出來發(fā)現(xiàn)有三個(gè)問題是繞不開的第一是實(shí)時(shí)性。停車場的余位信息、熱門景點(diǎn)的擁擠度、游客的異常行為比如翻越護(hù)欄、靠近危險(xiǎn)水域這些都需要在秒級甚至毫秒級做出反應(yīng)。如果所有數(shù)據(jù)都傳到幾十公里外的云機(jī)房哪怕網(wǎng)絡(luò)狀況再好一個(gè)來回也要幾十毫秒再加上云端排隊(duì)處理整體的鏈路延遲很難保證。第二是帶寬成本。一個(gè)中型景區(qū)光視頻監(jiān)控點(diǎn)位就有幾十上百路按1080P、4Mbps碼率來算100路并發(fā)就是400Mbps的持續(xù)帶寬。如果所有視頻都是原始碼流直傳云端先不說能不能扛得住光是專線費(fèi)用就是每年幾十萬甚至上百萬級別這在中型景區(qū)項(xiàng)目上完全不現(xiàn)實(shí)。第三是可靠性。景區(qū)節(jié)假日大客流時(shí)現(xiàn)場網(wǎng)絡(luò)經(jīng)常不穩(wěn)定而且一旦中心機(jī)房或?qū)>€出問題如果所有智能化設(shè)備都變成“離線狀態(tài)”連最基本的閘機(jī)通行、車輛識別、客流統(tǒng)計(jì)都做不了那運(yùn)營就完全癱瘓了。系統(tǒng)必須在斷網(wǎng)或者網(wǎng)絡(luò)抖動的極端情況下依然能保持核心功能可用。這三個(gè)問題指向同一個(gè)技術(shù)方向把算力放到離現(xiàn)場最近的地方。也就是說在景區(qū)機(jī)房、弱電間、甚至攝像頭旁邊部署邊緣計(jì)算節(jié)點(diǎn)讓視頻解析、結(jié)構(gòu)化數(shù)據(jù)提取、事件判斷這些工作在邊緣完成云端只負(fù)責(zé)模型訓(xùn)練、全局調(diào)度和跨業(yè)態(tài)的數(shù)據(jù)分析。1.3 為什么不是“全上云”而是“邊云協(xié)同”可能有人會問“那干脆所有東西都放本地不就行了還要云端干嘛”這里需要解釋清楚邊緣計(jì)算和云計(jì)算的邊界。我的理解是邊緣計(jì)算擅長的是“快、輕、本地”的任務(wù)。比如車輛車牌識別、人臉比對、客流統(tǒng)計(jì)、設(shè)備狀態(tài)采集這些任務(wù)模型相對固定、對實(shí)時(shí)性要求高、數(shù)據(jù)量又大適合放在邊緣節(jié)點(diǎn)上持續(xù)跑。而云計(jì)算擅長的是“慢、重、全局”的任務(wù)。比如模型訓(xùn)練、跨業(yè)態(tài)的數(shù)據(jù)挖掘、游客畫像分析、財(cái)務(wù)報(bào)表生成這些任務(wù)需要大量歷史數(shù)據(jù)和全局視角放云端更合適。所以正確的架構(gòu)不是二選一而是分層協(xié)作。邊緣側(cè)做推理云端做訓(xùn)練和長周期分析邊緣側(cè)負(fù)責(zé)實(shí)時(shí)響應(yīng)云端負(fù)責(zé)策略下發(fā)和模型更新。用一個(gè)生活化的比喻邊緣計(jì)算像是門店的店長能現(xiàn)場處理突發(fā)情況、安排員工、快速決策云端像是總部負(fù)責(zé)制定統(tǒng)一的運(yùn)營策略、分析整體經(jīng)營數(shù)據(jù)、定期給店長做培訓(xùn)。店長不能事事等總部指令總部也不需要盯著每個(gè)門店的每一個(gè)動作。2. 核心細(xì)節(jié)解析與實(shí)操要點(diǎn)邊緣計(jì)算節(jié)點(diǎn)怎么選、怎么部署2.1 算力選型從“能跑算法”到“能跑多少路算法”邊緣計(jì)算節(jié)點(diǎn)是整個(gè)系統(tǒng)的基礎(chǔ)設(shè)施選型上我們踩過不少彎路。一開始我們想省錢準(zhǔn)備用普通X86工控機(jī)加CPU跑推理結(jié)果一測YOLOv5s模型在1080P分辨率下CPU推理一幀要300到500毫秒一路視頻都跑得費(fèi)勁更別提并發(fā)處理多路。后來換了一臺帶GPU的服務(wù)器推理速度確實(shí)上來了但成本也上來了而且體積大、功耗高景區(qū)現(xiàn)場的弱電間不一定放得下。最后我們走的路線是“混合部署”核心邊緣節(jié)點(diǎn)用專業(yè)AI邊緣計(jì)算設(shè)備比如NVIDIA Jetson系列的Orin NX或者Orin Nano在算力和功耗之間取了一個(gè)平衡點(diǎn)對于只需要做數(shù)據(jù)匯聚和協(xié)議轉(zhuǎn)換的場景用普通的X86迷你主機(jī)或者ARM開發(fā)板就夠。這樣既保證了關(guān)鍵視頻分析任務(wù)的性能又不會在非核心節(jié)點(diǎn)上浪費(fèi)成本。關(guān)鍵是要明確一個(gè)指標(biāo)單節(jié)點(diǎn)能跑多少路視頻流。這直接決定了節(jié)點(diǎn)數(shù)量和預(yù)算。以我們用的Orin NX 16GB版本為例實(shí)測跑YOLOv5s模型、輸入分辨率1920×1080、幀率控制在10到15FPS景區(qū)客流統(tǒng)計(jì)不需要25FPS滿幀率單節(jié)點(diǎn)大約能穩(wěn)定處理8到12路視頻流同時(shí)跑一個(gè)輕量級的人臉檢測模型和車牌識別模型。這個(gè)數(shù)據(jù)在項(xiàng)目初期心里一定要有數(shù)否則規(guī)劃節(jié)點(diǎn)數(shù)量時(shí)很容易拍腦袋后期加設(shè)備又得改網(wǎng)絡(luò)拓?fù)洹_x型時(shí)還要注意算力冗余。邊緣節(jié)點(diǎn)不僅要跑當(dāng)前業(yè)務(wù)還要考慮后續(xù)算法模型的迭代新模型往往更復(fù)雜、更吃顯存。我們的經(jīng)驗(yàn)是預(yù)留30%到50%的算力余量否則模型一升級整條鏈路的推理速度都會被拖垮。2.2 三層組網(wǎng)與硬件部署細(xì)節(jié)邊緣計(jì)算節(jié)點(diǎn)在景區(qū)不是單點(diǎn)存在的而是要形成一張有層次的計(jì)算網(wǎng)絡(luò)。我們項(xiàng)目最終采用的是“中心機(jī)房—匯聚節(jié)點(diǎn)—邊緣盒子”三層組網(wǎng)架構(gòu)中心機(jī)房層放核心的邊緣計(jì)算服務(wù)器和存儲設(shè)備負(fù)責(zé)全局的視頻解析任務(wù)調(diào)度、模型版本管理、數(shù)據(jù)匯聚以及和云端平臺的對接。這里相當(dāng)于邊緣計(jì)算網(wǎng)絡(luò)的“大腦”匯聚節(jié)點(diǎn)層在景區(qū)幾個(gè)主要區(qū)域比如游客中心、核心景點(diǎn)片區(qū)、停車場部署匯聚節(jié)點(diǎn)負(fù)責(zé)本區(qū)域多個(gè)邊緣盒子的數(shù)據(jù)匯總、協(xié)議轉(zhuǎn)換和本地緩存同時(shí)跑一些區(qū)域級的聯(lián)動規(guī)則邊緣盒子層就近部署在攝像頭附近或弱電間里直接接入幾路攝像頭的視頻流做本地推理把結(jié)構(gòu)化結(jié)果比如“檢測到1個(gè)人、耗時(shí)32毫秒”上報(bào)給匯聚節(jié)點(diǎn)。這樣分層的好處是單個(gè)邊緣盒子掛了只影響局部幾路視頻匯聚節(jié)點(diǎn)掛了邊緣盒子依然能獨(dú)立工作把數(shù)據(jù)緩存在本地網(wǎng)絡(luò)恢復(fù)后再補(bǔ)傳。整個(gè)系統(tǒng)的容錯(cuò)能力比“所有設(shè)備直連中心”強(qiáng)很多。部署時(shí)有個(gè)容易被忽視的細(xì)節(jié)供電和散熱。景區(qū)現(xiàn)場的弱電間往往條件比較差沒有空調(diào)夏天溫度能到40度以上。Jetson設(shè)備在高負(fù)載下發(fā)熱量很大如果散熱不好芯片會主動降頻推理速度直接掉一半。我們后來在關(guān)鍵節(jié)點(diǎn)加裝了工業(yè)級的主動散熱風(fēng)扇同時(shí)把設(shè)備放在通風(fēng)位置問題才得到解決。另外所有邊緣節(jié)點(diǎn)必須接UPS或者帶電池的電源模塊防止瞬時(shí)斷電導(dǎo)致系統(tǒng)文件和模型損壞。2.3 帶寬與存儲容量測算實(shí)例這部分我拿實(shí)際數(shù)據(jù)來算一筆賬大家以后做方案可以直接套用。假設(shè)景區(qū)有100路1080P攝像頭編碼格式H.264單路碼率4Mbps。全量上云時(shí)中心帶寬需求 100路 × 4Mbps 400Mbps。這還沒算峰值的網(wǎng)絡(luò)抖動和冗余在運(yùn)營商那邊至少要申請500M以上的專線成本非??捎^。邊緣處理后每路攝像頭不再傳原始視頻流而是傳結(jié)構(gòu)化數(shù)據(jù)。比如每秒鐘上報(bào)一次檢測結(jié)果一條JSON數(shù)據(jù)大約2KB100路就是200KB/s換算成帶寬只有1.6Mbps。再加上偶爾回傳的事件短視頻片段比如10秒的報(bào)警錄像總體帶寬需求也就在30到50Mbps左右。降了一個(gè)數(shù)量級。存儲方面差別更大。如果100路攝像頭7×24小時(shí)全量錄像按4Mbps碼率算 單日存儲量 100路 × 4Mbps × 86400秒 ÷ 8 ÷ 1024 ≈ 4.1TB 7天存儲量 ≈ 28.8TB。這個(gè)數(shù)據(jù)量對本地機(jī)房來說不是不能做但長期存儲成本很高。而采用邊緣事件驅(qū)動存儲后只保存“有事件”的片段。比如一臺設(shè)備每天平均觸發(fā)150次事件每次存10秒視頻單路一天產(chǎn)生的存儲量約為 150 × 10秒 × 4Mbps ÷ 8 ≈ 750MB100路一天約75GB7天約525GB。壓縮到原來的不到2%。這些片段還可以只保留7到30天配合云端存儲做更長時(shí)間的歷史追溯。這就是邊緣計(jì)算在成本賬上最直接的體現(xiàn)。實(shí)時(shí)性提升是“質(zhì)”的變化但帶寬和存儲的節(jié)省是“量”的變化甲方看方案時(shí)對這種量化對比非常買賬。3. 實(shí)操過程與核心環(huán)節(jié)實(shí)現(xiàn)多業(yè)態(tài)融合的數(shù)據(jù)架構(gòu)和場景落地3.1 從“各業(yè)態(tài)自掃門前雪”到“One ID一張網(wǎng)”多業(yè)態(tài)融合是整個(gè)項(xiàng)目里最考驗(yàn)數(shù)據(jù)能力的部分。第一個(gè)要解決的問題是怎么讓不同業(yè)態(tài)的數(shù)據(jù)能“對上號”。景區(qū)里的游客在停車場系統(tǒng)里是一個(gè)車牌號在票務(wù)系統(tǒng)里是一張門票編碼在餐飲消費(fèi)時(shí)是一筆訂單在酒店入住時(shí)是一條入住記錄。這些ID本來是割裂的無法知道“這個(gè)正在餐廳消費(fèi)的人是不是那個(gè)早上九點(diǎn)停好車進(jìn)園的人”。要實(shí)現(xiàn)多業(yè)態(tài)融合必須先做統(tǒng)一ID。我們最終采用了“One ID”體系以游客入園時(shí)的人臉特征或手機(jī)號為核心標(biāo)識在入園那一刻生成一個(gè)全局唯一的游客ID。這個(gè)ID貫穿停車、門票、消費(fèi)、住宿、互動體驗(yàn)等所有環(huán)節(jié)。具體做法是在票務(wù)閘機(jī)上做人臉綁定在停車場出入口做車牌和場內(nèi)支付的綁定在餐飲零售端通過小程序掃碼將訂單關(guān)聯(lián)到游客ID。邊緣計(jì)算節(jié)點(diǎn)在這里承擔(dān)了關(guān)鍵的實(shí)時(shí)關(guān)聯(lián)工作閘機(jī)識別到人臉后邊緣節(jié)點(diǎn)立刻把這個(gè)人臉特征和游客ID映射關(guān)系同步到其他業(yè)態(tài)的邊緣節(jié)點(diǎn)后續(xù)消費(fèi)行為就能被實(shí)時(shí)歸集到同一個(gè)ID下。這套體系的建設(shè)難度不在技術(shù)而在業(yè)務(wù)協(xié)同。因?yàn)橥\?、餐飲、票?wù)往往是不同供應(yīng)商提供的系統(tǒng)有的甚至有獨(dú)立的數(shù)據(jù)庫。我們花了很多時(shí)間做接口聯(lián)調(diào)推動各方開放數(shù)據(jù)字段統(tǒng)一時(shí)間格式、設(shè)備編碼規(guī)則、事件類型定義。現(xiàn)在回頭看這個(gè)“數(shù)據(jù)標(biāo)準(zhǔn)化”工作比任何技術(shù)選型都重要它是后面所有融合場景的基礎(chǔ)。3.2 一條典型數(shù)據(jù)鏈路的完整拆解拿景區(qū)里最普通的“客流統(tǒng)計(jì)與擁堵預(yù)警”場景來拆解大家能更清楚邊緣計(jì)算在整條鏈路里扮演什么角色。第一步攝像頭采集視頻流通過RTSP協(xié)議推給邊緣盒子。邊緣盒子里的視頻解碼模塊把視頻幀解碼成YUV數(shù)據(jù)送入AI推理引擎。第二步推理引擎運(yùn)行人形檢測模型在每一幀畫面中識別出人體的位置框。這里有個(gè)細(xì)節(jié)不是每幀都做檢測而是按一定幀率采樣比如每秒處理5到10幀。這樣做既能保證統(tǒng)計(jì)精度又能大幅降低算力消耗。第三步邊緣節(jié)點(diǎn)的跟蹤模塊對不同幀之間的同一目標(biāo)做關(guān)聯(lián)也就是目標(biāo)跟蹤算法判斷這個(gè)人是從哪個(gè)方向走過來的、在這片區(qū)域停留了多久。這個(gè)數(shù)據(jù)比單純的人頭計(jì)數(shù)更有價(jià)值可以直接用于分析高峰時(shí)段的客流走向。第四步結(jié)構(gòu)化結(jié)果通過MQTT協(xié)議上報(bào)給匯聚節(jié)點(diǎn)匯聚節(jié)點(diǎn)匯總本區(qū)域多路視頻的統(tǒng)計(jì)結(jié)果實(shí)時(shí)計(jì)算出區(qū)域人數(shù)、密度、增長趨勢并和預(yù)設(shè)的閾值做對比。一旦超過閾值自動觸發(fā)預(yù)警廣播系統(tǒng)播放疏導(dǎo)提示導(dǎo)視大屏顯示擁堵信息同時(shí)后臺推送消息給現(xiàn)場運(yùn)營人員。第五步每天結(jié)束后邊緣節(jié)點(diǎn)把當(dāng)日客流摘要、分時(shí)段駐留數(shù)據(jù)等同步到云端云端再結(jié)合餐飲、零售的銷售數(shù)據(jù)生成“客流轉(zhuǎn)化率”之類的經(jīng)營分析報(bào)表。這條鏈路里最關(guān)鍵的設(shè)計(jì)原則是能下沉的處理盡量下沉云端做不了實(shí)時(shí)決策邊緣側(cè)也絕不做長周期分析。分工明確各司其職整條鏈路跑起來才穩(wěn)。3.3 三個(gè)典型融合場景復(fù)盤場景一節(jié)假日大客流的“停車—入園—餐飲”聯(lián)動。以前節(jié)假日停車場滿了門衛(wèi)只能拿著對講機(jī)喊“別放車進(jìn)來了”?,F(xiàn)在停車場入口的邊緣節(jié)點(diǎn)實(shí)時(shí)統(tǒng)計(jì)剩余車位數(shù)據(jù)同步到票務(wù)系統(tǒng)當(dāng)剩余車位低于15%時(shí)自動觸發(fā)限流策略線上購票頁面顯示“車位緊張”提示引導(dǎo)游客錯(cuò)峰出行。同時(shí)餐飲業(yè)態(tài)會收到大客流預(yù)警中央廚房根據(jù)預(yù)測入園人數(shù)提前備餐。這套聯(lián)動上線后的第一個(gè)黃金周停車場排隊(duì)時(shí)長縮短了將近40%餐飲浪費(fèi)率也明顯下降。場景二園區(qū)“一碼游”跨業(yè)態(tài)閉環(huán)。游客通過小程序掃碼入園后這個(gè)碼就綁定到了One ID。在景區(qū)內(nèi)騎共享代步車、買小吃、玩漂流項(xiàng)目都可以直接掃碼消費(fèi)記錄實(shí)時(shí)同步到邊緣節(jié)點(diǎn)再由邊緣節(jié)點(diǎn)匯總到云端的經(jīng)營分析平臺。這樣做的好處是游客不需要在不同系統(tǒng)中分別注冊和支付體驗(yàn)順暢景區(qū)也能拿到完整的消費(fèi)路徑分析哪些項(xiàng)目是“引流”的、哪些是“賺錢”的。場景三游客動線優(yōu)化。我們在景區(qū)各個(gè)岔路口和熱門點(diǎn)位部署了邊緣盒子用視覺算法計(jì)算每個(gè)方向的人流量。經(jīng)過一周的數(shù)據(jù)積累發(fā)現(xiàn)某個(gè)網(wǎng)紅打卡點(diǎn)下午2點(diǎn)到4點(diǎn)嚴(yán)重?fù)頂D但旁邊的文化展館卻非常冷清。于是運(yùn)營方臨時(shí)調(diào)整了導(dǎo)視系統(tǒng)在擁擠時(shí)間點(diǎn)引導(dǎo)部分游客先去展館同時(shí)展館門口增加了一個(gè)快閃活動。數(shù)據(jù)顯示展館的客流提升了66%網(wǎng)紅點(diǎn)的擁擠指數(shù)下降了約35%。這種實(shí)時(shí)引導(dǎo)和動態(tài)調(diào)整只有在數(shù)據(jù)能夠快速流轉(zhuǎn)、及時(shí)反饋的情況下才能實(shí)現(xiàn)。4. 常見問題與排查技巧實(shí)錄4.1 視頻流反復(fù)斷連故障排查全過程這個(gè)坑我們花了一整天才定位出來非常有代表性?,F(xiàn)象是某個(gè)邊緣盒子上有幾路視頻分析任務(wù)總是運(yùn)行一兩個(gè)小時(shí)就退出重啟后又能正常運(yùn)行一段時(shí)間然后再次退出。一開始以為是程序崩潰查看日志發(fā)現(xiàn)是拉流模塊報(bào)錯(cuò)提示RTSP連接超時(shí)。我們就去查攝像頭網(wǎng)絡(luò)發(fā)現(xiàn)攝像頭和邊緣盒子之間的交換機(jī)端口有丟包現(xiàn)象。更換了網(wǎng)線、光模塊之后丟包問題解決了但任務(wù)還是會偶爾退出。后來把問題范圍縮小到“并發(fā)連接數(shù)”。原來那批攝像頭是某廠商的入門級型號每路攝像頭最多只允許2路RTSP并發(fā)連接。邊緣盒子的拉流模塊重連時(shí)舊連接沒有完全釋放新連接又建立起來超過了攝像頭的并發(fā)限制導(dǎo)致后續(xù)連接全部失敗。找準(zhǔn)原因后我們把拉流模塊改成了單連接復(fù)用——用一路RTSP連接同時(shí)獲取視頻幀和時(shí)間戳并加上斷線重連的退避算法第一次重連等5秒第二次10秒逐步遞增到60秒上限問題才徹底不再出現(xiàn)。這次排查給我的教訓(xùn)是邊緣計(jì)算項(xiàng)目里鏈路中任何一個(gè)“犄角旮旯”的小設(shè)備都可能成為瓶頸選型時(shí)不能只看中心設(shè)備攝像頭、交換機(jī)這些末端設(shè)備同樣要納入測試范圍。4.2 常見問題速查表與避坑建議問題現(xiàn)象可能原因處理建議邊緣盒子推理速度越來越慢散熱不良導(dǎo)致芯片降頻檢查風(fēng)扇和通風(fēng)環(huán)境必要時(shí)加裝主動散熱視頻分析任務(wù)頻繁退出RTSP并發(fā)連接數(shù)超限做單連接復(fù)用加斷線重連退避策略多個(gè)模型同時(shí)運(yùn)行顯存不足模型加載占用過多顯存用TensorRT優(yōu)化模型減少輸入分辨率按優(yōu)先級卸載不常用模型邊緣節(jié)點(diǎn)上報(bào)數(shù)據(jù)時(shí)間混亂設(shè)備未同步NTP時(shí)間在匯聚節(jié)點(diǎn)統(tǒng)一配置NTP服務(wù)器所有設(shè)備統(tǒng)一時(shí)間源邊緣設(shè)備離線但業(yè)務(wù)正常網(wǎng)絡(luò)抖動或設(shè)備重啟在邊緣盒子本地做數(shù)據(jù)緩存恢復(fù)后自動補(bǔ)傳模型識別準(zhǔn)確率下降場景光線變化或模型過時(shí)定期采集真實(shí)場景數(shù)據(jù)更新訓(xùn)練集并熱更新模型避坑建議方面有幾條是花真金白銀買來的經(jīng)驗(yàn)。第一不要把AI識別做成全鏈路串行。有些團(tuán)隊(duì)圖省事把“檢測—跟蹤—屬性識別—事件判斷”全寫在一個(gè)流程里一個(gè)環(huán)節(jié)慢了整條鏈路都被拖住。正確做法是解耦每一路視頻一個(gè)獨(dú)立進(jìn)程各模塊之間用消息隊(duì)列傳遞數(shù)據(jù)出問題只影響單路不會“一粒老鼠屎壞了一鍋湯”。第二不要上來就想搞“全業(yè)態(tài)大中臺”。數(shù)據(jù)打通是漸進(jìn)的過程先選兩三個(gè)業(yè)務(wù)關(guān)聯(lián)度最高、收益最明顯的場景跑通比如停車加票務(wù)、票務(wù)加餐飲跑順了再往更多業(yè)態(tài)復(fù)制。我們項(xiàng)目里最先只做了停車和票務(wù)的聯(lián)動穩(wěn)定運(yùn)行了一個(gè)月后才逐步擴(kuò)展這樣風(fēng)險(xiǎn)最小。第三邊緣節(jié)點(diǎn)一定要做可觀測性。給每個(gè)節(jié)點(diǎn)加統(tǒng)一的狀態(tài)上報(bào)機(jī)制包括CPU占用、內(nèi)存占用、GPU利用率、推理耗時(shí)、任務(wù)狀態(tài)、網(wǎng)絡(luò)連接數(shù)等指標(biāo)。沒有這些數(shù)據(jù)出了問題只能一臺臺設(shè)備去登服務(wù)器查效率極低而且很可能等你趕到現(xiàn)場問題已經(jīng)過去了。5. 從智慧景區(qū)延伸出去邊緣計(jì)算在校園物聯(lián)網(wǎng)場景的實(shí)踐參考做完景區(qū)項(xiàng)目后我又參與了一個(gè)校園物聯(lián)網(wǎng)設(shè)備數(shù)據(jù)上云的項(xiàng)目發(fā)現(xiàn)很多經(jīng)驗(yàn)是可以直接平移過去的。校園場景和景區(qū)有很強(qiáng)的相似性設(shè)備種類多門禁、監(jiān)控、水電表、照明、多媒體教室設(shè)備數(shù)據(jù)產(chǎn)生分散實(shí)時(shí)性要求高而且中心帶寬有限。比如校園宿舍的用電監(jiān)測如果所有電表的數(shù)據(jù)都直接傳云平臺一方面海量高頻采集數(shù)據(jù)會占用大量帶寬另一方面對異常用電比如違規(guī)使用大功率電器的檢測如果依賴云端延遲會很不可控。按照景區(qū)項(xiàng)目的思路我們在一棟宿舍樓部署了一個(gè)邊緣計(jì)算節(jié)點(diǎn)電表數(shù)據(jù)先匯聚到節(jié)點(diǎn)上節(jié)點(diǎn)用規(guī)則引擎加輕量級算法做本地判斷只有異常事件和每天一次的匯總數(shù)據(jù)才上云。這樣既保證了用電安全預(yù)警的實(shí)時(shí)性又把中心平臺的存儲和計(jì)算壓力降了下來。再比如校園里的攝像頭資源。很多高校有幾千路攝像頭學(xué)校保衛(wèi)處最關(guān)心的不是普通場景的錄像存儲而是異常事件如打架、闖入、物品遺留的實(shí)時(shí)發(fā)現(xiàn)。邊緣節(jié)點(diǎn)直接在源頭做視頻結(jié)構(gòu)化把“有異?!钡姆昼娂壠瓮扑偷奖Pl(wèi)處大屏傳統(tǒng)的“大海撈針”式回放就變成了“實(shí)時(shí)精準(zhǔn)”式響應(yīng)。這個(gè)思路和景區(qū)項(xiàng)目里的事件驅(qū)動存儲如出一轍。從技術(shù)架構(gòu)上看景區(qū)和校園邊緣計(jì)算項(xiàng)目的核心邏輯是一致的感知設(shè)備在末端產(chǎn)生數(shù)據(jù)邊緣節(jié)點(diǎn)做實(shí)時(shí)處理和本地決策云平臺做模型訓(xùn)練和全局管理。區(qū)別只在于業(yè)務(wù)場景的適配——景區(qū)關(guān)注客流和消費(fèi)校園關(guān)注安全和管理。這也說明邊緣計(jì)算作為一種技術(shù)底座它的價(jià)值不在于技術(shù)本身有多前沿而在于能不能在真實(shí)場景里解決具體問題。5.2 跨項(xiàng)目沉淀下來的幾條工程經(jīng)驗(yàn)做完這兩個(gè)項(xiàng)目我最大的體會是邊緣計(jì)算項(xiàng)目拼的不是算法的多先進(jìn)而是工程化的耐心和細(xì)節(jié)。第一數(shù)據(jù)標(biāo)準(zhǔn)一定要先定后面才能少返工。景區(qū)項(xiàng)目的One ID體系之所以能在一個(gè)月內(nèi)搭建完成得益于一開始就統(tǒng)一了設(shè)備編碼、人員編碼、事件類型的規(guī)范。校園項(xiàng)目里我們同樣先定義了“設(shè)備—點(diǎn)位—房間”的三級關(guān)聯(lián)模型和各子系統(tǒng)對接時(shí)大家都遵循這個(gè)標(biāo)準(zhǔn)接口聯(lián)調(diào)順暢了很多。第二先跑“最小閉環(huán)”再橫向擴(kuò)展這是避免項(xiàng)目失控的鐵律。邊緣計(jì)算涉及設(shè)備、算力、網(wǎng)絡(luò)、云端、業(yè)務(wù)系統(tǒng)鏈路長、環(huán)節(jié)多如果一開始就想一步到位把所有場景全做出來排錯(cuò)成本會非常高。我們的做法是先挑一個(gè)場景比如景區(qū)項(xiàng)目先做停車余位識別從攝像頭接入到云端展示全打通所有技術(shù)風(fēng)險(xiǎn)在最小范圍內(nèi)暴露并解決然后才大規(guī)模復(fù)制到其他場景。第三邊緣側(cè)的業(yè)務(wù)規(guī)則要能“熱更新”?,F(xiàn)場運(yùn)營需求經(jīng)常變化比如“客流預(yù)警閾值從80人調(diào)整到60人”、“檢測到游客靠近水域就立即報(bào)警”這些規(guī)則如果寫死在代碼里每改一次就得重新發(fā)版運(yùn)維成本太高。我們的方案是把規(guī)則配置從代碼中抽離出來存成JSON或YAML配置由匯聚節(jié)點(diǎn)統(tǒng)一下發(fā)邊緣盒子收到后動態(tài)加載不需要重啟服務(wù)。這個(gè)設(shè)計(jì)在后期響應(yīng)運(yùn)營需求變化時(shí)幫了大忙。最后再分享一個(gè)小技巧無論景區(qū)還是校園邊緣節(jié)點(diǎn)的統(tǒng)一運(yùn)維通道都要提前規(guī)劃。現(xiàn)場幾十上百臺設(shè)備如果每一臺都需要單獨(dú)登進(jìn)去布版本、改配置運(yùn)維人員會瘋掉。我們最終搭了一套輕量級的設(shè)備管理平臺支持遠(yuǎn)程下發(fā)模型文件、更新規(guī)則配置、批量執(zhí)行命令設(shè)備離線時(shí)自動告警。這套平臺本身開發(fā)量不大但帶來的運(yùn)維效率提升是十幾倍的。做邊緣計(jì)算和多業(yè)態(tài)融合項(xiàng)目很多時(shí)候是“七分業(yè)務(wù)梳理三分技術(shù)實(shí)現(xiàn)”。技術(shù)方案再漂亮如果現(xiàn)場業(yè)務(wù)關(guān)系沒理順、數(shù)據(jù)標(biāo)準(zhǔn)沒統(tǒng)一系統(tǒng)終究跑不起來。反過來只要把數(shù)據(jù)鏈路和邊界理清楚了邊緣計(jì)算帶來的實(shí)時(shí)性、成本和可靠性收益是甲方能直接感受到的。希望這篇文章里的實(shí)操細(xì)節(jié)能幫你少走一些彎路。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
亚洲无码色色| 九九久久精品| 天天操夜夜玩!| 99资源人人| 狠狠色97| 99er热精品视频| av在线中文| www.五月天性.com| 99精品人人| 亚洲深喉aV| 色五月涩涩婷婷| 操笔无码| 五月噜噜噜色综合| 91无码视频| 青草视频在线观看视频| 99性视频| 99爱视频| 五月婷婷六月激情| 婷婷久久五月| 婷婷综合网| 天天做天天爱天天爽综合网| 五月激情六月婷婷| 狠狠干思思热| 中文字幕性爱丰满| 五月天婷婷丁香六月| 丁香婷婷六月激情文学| 婷婷五月天最新综合你懂的| 丁香五月激情宗合| 狠狠做六月爱婷婷综合aⅴ| 一级性感毛片| 91无码高清| 六月婷婷激情小说网| 91人人爽狠狠狠| 操操操91| 色婷婷五月天成人网| www.久操| 久久婷婷综合国产| 午夜天堂啪啪| 激情五月激情综合俺也去婷婷小说| 91 久热| 大香蕉五月天婷婷| 狠狠狠狠狠| 超碰在线成人| 99色综合| 五月天社区婷婷| 五月天社区| 丁香五月香蕉| 国产免费一区二区在线A片视频| 色情综合| 午夜天堂一区人妻| 91九色白丝| 亚洲无AV在线中文字幕| 久操乱| 国产资源91在线| 婷婷丁香五月激情综合站_久久五月丁香激情综合_开心五月综合激情综合五月_婷 | 丁香六月天婷婷开心综合| 久久婷婷五月天激情新地址| 99综合婷婷五月| 99re这里只有精品国产99| 久久综合丁香五月| 欧洲高清免费久久| 五月丁香亭亭| 色综合久久久久| 婷婷成人五月天成人文学| 九色视频91| 99热这里只有精品首页| 大香蕉在九| 亚洲黄色操逼| 66精品国产成人| 99rewww| www.天天干.com| 热的国产,热的综合,热的有码 | 最新热中文字幕| 中文字幕日韩成人| 婷婷综合成人五月天| 97色色色色色色色色色色色色色| 伊人五月天在线| 婷婷亚洲综合| 亚洲精品色| 中文字幕有多少字| 激情五月综合久久| 精品综合久久久久久五月天| 激情丁香五月婷婷| 婷婷五月天激情四射| 精品一二三区久久AAA片| 天天做天天爱天天爽| 91聚色综合网| www.婷婷| 色欲一二三| 婷婷五月丁香91| 青青草五月天| 久久婷婷东京热大香樵| 国产亚洲成AV人片在线观黄桃| 日本少妇裸体做爰高潮片| 婷婷情色五月| 亚洲精品操一操、噜一噜、摸一摸、爽 | 狠狠做深爱婷婷久久综合一区| 99这里| 亚州操操| 人妻在线网站| 久久这里只有精品视频26| 丁香五月天资源网| 五月激情四射网站| 色五月之第四色| 五月激情网络| 国产真人做爰视频免费| 五月天色色网站| 爱婷婷久久视频| 久婷久婷| 五月婷婷国产| 九九热在线视频,| 91精品综合久久婷婷九色| www.99在线| 亚洲激情Av| 桃色五月天| 欧美A片在线视频免费观看| 色色免费网站| 日本色天堂| 亚洲免费综合一区| 激情综合激情五月| 久热99| 9福利性视频欧美| 亚洲爱爱无码婷婷色五月| 五月天婷婷色| 五月丁香偷拍| 思思热AV| 男人天堂 久久| 91艹人| 99操免费视频| 五月天色综合| www.91在线观看| 欧美成人在线观看| 色狠狠图片| 婷婷精品免费久久| 五月丁香六月香香蕉| 色色cOm| 九色视频这里只有精品| 激情又色又爽又黄的A片| 九九99九九99| 超碰成人电影| 就是色婷婷五月亚洲色| 五月婷婷天| 日本精品九九九| 色丁香影院| 成人.在线日韩| 日本不卡高字幕在线2019| 色综合99| 五月天伊人日日噜影片AV| 五月天色丁香| 五月丁香好婷婷姑娘综合网| 最新无毒无码AV| 色五月丁香激情视频| 五月天婷婷色| 成人久久天天x资源站| 香蕉综合网| 色停停香蕉视频| 97极品在线| 综合激情五月婷婷| 色婷婷97| 久久天天| 第四色婷婷色五月| 久久婷婷五月综合一| 韩国三级五月天婷婷。| 五月婷婷成人| 五月婷婷激情网| 激情 五月 婷婷 丁香| 五月天婷婷av| 日 日干 日日做| 亚洲爆乳无码精品AAA片蜜桃| WWW色综合| 亚洲无码99| 婷婷五月 丁香六月| 99热亚洲| 国产无套精品一区二区| 婷婷五月天激情综合| 色99网| 天天做天天爱天天爽夜夜揉| 99热这里只有精品搜| 9999热在线| 五月草影视| 91人人爽人人操| 色99在线视频| 丁香五月天激情网址| 99性爱| 天天操天天操综合| 久久久久久97| 91久久久久久久久久18| 一月婷婷色色| 三十路磁力链接| 操b视频在线观看一区二区| 婷婷五月天六月丁香| 五月丁香久人妻中文| 婷婷五月丁香五月| 五月婷婷丁香综合| 六月亚洲婷婷6月中文字幕| 99色综合| 另类 在线| 色热久资源| 色青青电影色五月| 婷婷综合| 天天操人人干| 能看的AV网站| 中文字幕丰满乱孑伦无码专区| 无码日本精品XXXXXXXXX | 亭亭玉月丁香| 亚洲V国产V欧美V久久久久久| 五月天另类小说| 天天爽人人综合免费7799| 日韩av变天就操逼不卡区| 久久久噜噜噜久久人妻| 五月天久久成人| 91碰碰视频| 欧美精品在线观看| 99色色网| 五月丁香久久网| 深爱婷婷色| 67194中文字幕| 成人片黄网站色大片免费毛片| 99综合| 99热精品10| 国精产品一区二区三区| 丁香五月狠狠在线观看| 欧美日本免费一道免费视频| 久热这里| 99热网站| 欧美色色色| 精品久久人妻| 五月丁香六月婷婷综合网站| 99热精地址| 色综合色综合婷婷热| 丁香花婷婷五月天| 丁香伊人五月色婷婷五十路| 日韩国产在线精品| 亚洲精品白浆高清久久久久久| 六月丁香激情| 夜夜骑天天操| 色色色色色色色色色色色色色色,网站| 99色在线视频观看| 五月丁香综合啪啪| 91操操| 色婷婷香蕉丁丁网| 大香蕉啪啪啪啪啪啪| 成人做爰高潮A片免费视频 | 丁香五月婷婷欧美成人色图| 欧美色色色| 夜夜操夜夜爽| 岛国资源网| 六月亚洲婷婷6月中文字幕| 丁香 久久| 九月色婷婷综合亚洲| 国产成人AV不卡| 丁香六月天| 婷婷天天色| 五月婷婷天堂| 五月丁香婷婷啪啪| av色色国产| 在线不卡视频| 丁香五月六月| 98国产精品综合一区二区三区| 热99这就是精品视频| 玖玖午夜视频| 久久99网| 熟女人妻一区二区三区免费看| 一区二区三区视频| 色色综合网www| 色日本颜射| 国产美女无遮挡裸体毛片A片| 国产精品涩涩涩视频网站| 婷婷综合激情| 婷婷在线网| 成人草榴视频| 色婷婷情片| 久久婷婷五月综合啪| 六月婷婷九月丁香| 丁香六月婷婷一区| 久久婷婷五月综合色丁香| 天天情色综合网| 丁香五月婷婷色播艳门照| 婷婷五月天在线观看第二页| 日韩久热| 久久全意婷婷| 成人婷婷| 丁香五月综合图片在线观看| 五月丁六月香| 99热这里只有精品16| 婷婷网五月天| 男女av免费看| 欧美天天草人人草| 欧美婷婷色五月| 夜丁香综合| 国产精品久久久海的味道| 99性爱| 五月天色色网站| 丁香六月婷婷久久综合| 丁香五月婷婷总啪啪| 日韩综合久| 成片免费播放| 五月婷婷影| 欧美色图天堂网| 99热精品在线观看| 久久看婷婷| 亚洲国产色婷婷| 99国产小视频| 五月天婷婷综合| 91夫妻视频| 五月婷婷亚洲色图| 五月婷婷六月爱| 5月婷婷6月六月丁香| 99久.| 日韩ww| www.99久久久| 五月丁香六月婷婷欧美综合| AA片在线观看视频在线播放| 五月丁香六月色婷| 色婷久久| 热99玖玖99玖玖99九九| 婷五月天天| 激情六月天婷婷| 色狠狠色| 欧美影院婷婷| 天天做天天爽| 1024欧美看片| 六月婷伊人| 六月丁香中文字幕| 青青草网武则天| Av性爱网| 天天狠狠夜夜狠狠2023| 任你日热视频| 深情五月天| 99色综合| 婷婷五月色播网| 色婷婷精品| 狠狠干,狠狠操| 九九性爱网| 久久这里有精品视频| 五月天婷婷久久| 久久午夜丁香| www激情婷婷com| 青柠影视免费高清电视剧| 日本3级片一区2区| 久久99热在线观看| 91性人人| www.久热| 久久久久久久久久久97| AVDV久久| 999久久久国产精品| 色五月丁香婷婷综合| 色五月综合激情| 婷婷色色丁香| 99视频精品全部观看10| 久久女人九九| 色欲一区二区三区精品A片| 欧美成人AAA片一区国产精品| 久久丝丝热| 色丁香婷婷| 综合五月丁香六月婷婷| 亚洲综合色网| 久久总和99| 色五月综合资源推荐| 日韩AV在线免费| 99亚洲色| www.99久久久久99| 中文AV在线观看| 激情久久久久久久久久| 大香蕉五月天| 人人玩人人橾| 欧美三级巜人妻互换| 亚洲第一色色色色| 丁香伍月婷电影全集| 六月天六月婷| 色综合久久88色综合天天| www.av骚货| 久9热插入| 国产色五月| 色欲色香,www,com| 操碰99| 午夜成人AV在线| av狠狠操| 久久在线人妻| 欧美日韩成人在线网站| 97色色网| 婷婷六月激情在线视频| 综合色网站| 我爱大香蕉| 99啪啪视频| 丁香网站| 色综合九九| 天天射综合网夜夜操| 97狠狠碰| 色五月婷婷五月天| 久久人妻视步| 亚洲色综合| 极品少妇高潮啪啪AV无码| 丁香五月综合在线播放| 日本免费91| 五月婷婷基地| 婷婷五月天美女视频| 婷婷五月天在婷| 久久一品区| 99日韩| 色婷婷五月天天天做| 黄色av网站在线免费播放| 亚洲顶级VA在线观看-高清完整版在线影院观看-S022AV | 香蕉久日夜| 丁香五月六月综合欧美| 九九sese| 亚洲熟女乱色综合亚洲网站| 国产精品a无线| 丁香五月天论坛| 色婷五月| 丁香综合久久| 农村熟妇高潮精品A片| 天天夜夜爽| 婷婷色色五月天| 黄急一级视频| 26uuu欧美日本| 婷婷五月天在婷| 九热视频在线精品15| 五月综合在线婷婷图片| 亚洲成人九九九| 99热这里只有精品9| 五月婷婷丁香综合| 色婷婷国色天香综合| 亚洲成Av人片乱码色第1集| 婷婷五月天堂| 亚洲综合无码| 五月婷综合| 色婷婷五月天中文字幕| 97欧美在线| 男人操女人高潮91视频| 这里只有精品免费| 99碰网站| 99热这里只有精品9| 婷婷免费成人视频| 婷婷成人综合| 久久资源网五月婷| 91网站黄| 亚洲超级碰| 色色综合网www| 九九激情网| 丁香婷婷91在线观看视频| 五月噜噜| 极品人妻videosss人妻| 丁香婷婷六月激情| 日操| 精品色情一区二区三区四区| 狠狠舔| 亚洲av无码精品色午夜| 色色色色色综合| 不卡在线视频| 色婷婷狠狠禁18久久| 天天色视频| 九热视频在线精品15| 午夜婷婷五月天| 激情丁香五月激情婷婷| 天天色,天天操,天天射| 亚洲视频色色| 激情婷婷五月天伊人在线观看| 99热精品在线| 狠狠干五月天婷婷网| 91精品婷婷国产综合| 成人视频免费观看高清完整版在线观看| 五月婷丁香| 996er热| 另类在线| 五月天婷婷成人网| 六月色婷婷| 五月激情综合网| 五月激情六月宗合| 99久久九九| 久久久久人妻| 婷婷色情 | 无遮挡国产高潮视频免费观看| 中文字幕成人| 狠狠插.com| 97日本在线播放| 1024欧美看片| 九九99在线| 日韩无码系列| 99热偷拍| 开心日韩丁香婷婷五月| 手机免费福利视频| 91人操| 激情久久久| 天天拍天天操| 4399无码视频二区| 少妇婷婷五月天| 亚洲在线资源| 丁香伊人综合| 97精品自拍视频| 影音先锋色婷婷| 五月婷婷在线免费观看| 99九九精品视频推荐| 五月婷婷综合性爱噜噜| 五月丁香六月婷婷啪啪综合 | 色婷激情网| 亚洲综合热| 婷婷情色五月天| 一起草av| 亚洲精品另类| 激情综合网丁香| 天天操天天操| www.91在线观看| 色5月婷婷| 97操女视频| 激情六月丁香| 五月丁香黄色| 六月激情婷婷| 久久99久久99www| 嫩模aV在线| 五月丁香六月色情网欧美| 久久机热探花| 六月丁香啪| 亭亭五月色男人| 99综合| 九九热9| 9久久久久久久久久久| 色播播之激情五月婷婷| 久久人人九| 99性爱| 97五月综合网| 丁香五月网在线观看| 97色在线观看视频| 99在线免费视频播放| 丁香五月激情宗合网| 五月婷婷婷婷网| 激情五月天影院| 我想看国产大学生口爆吞精的视频| 九九精品网站| 色五月五月婷婷| WwW色婷婷| AV中文在线| 激情综合激情五月一起草| 99精品久久久久久久婷婷| 色色网站毛片| 色色综合网站| 玖玖热视频| 日本二级毛片二级毛片| 久久xxxx| 久久五月丁香| 伊人大蕉香| 天天婷婷天天| 色婷婷影视| 色停停香蕉视频| 亚洲激情五月天| 日韩成人电影av| 99热这里只有精品10| 99久.| 抽插特写| 亚洲丁香五月深爱五月| 婷婷五月天电影网| 六月丁香停| www.色五月天.com| 七月丁香婷婷 色色| 五月婷婷综合网| 激情深爱综合网| 色99综合色88| 人妻在线中文字幕久久| 99热| 五月天丁香啪啪综合| 夜夜操狠狠操| 日韩 中文 欧美| 九九热免费| 一本色道久久88加勒比| 日逼免费视频| seav天堂| 婷婷五月天成人网站| 精品一二三区久久AAA片| 操久久网| 欧美日综合| 婷婷五月激情综合| 丁香九月婷婷| 亚洲性图一区二区三区| 婷婷五月成人| 超碰在线免费9| 天天插天天插| 亚洲综合另类| 五月丁香黄色视频| 天天干,天天舔| www.五月婷婷| 婷婷丁香五| 9+1视频网址| 天天日天天插| 天天爽天天爽天天爽天天爽天天爽| 久久久久婷婷| 六月综和久久| 黄色录像网点| 五月激情久久| 婷婷人人操| 亚洲综合视频在线| 婷婷丁香五月天欧美| 欧美黑人巨大性生话| 欧美综合激情五月丁香| 黄色短视频在线观看| 五月婷婷在线综合| 玖玖精品婷婷| 97色婷| 色色色综合视频| www.91热久久| 日亚二欧美| 大香蕉综合| 亚洲乱码日产精品BD| 九九一综合精品| 精品一二三区久久AAA片| 婷婷五月AV| 一区二区你懂的| 9久国产精品| 99免费视频久久| 国产XXXX搡XXXXX搡麻豆| 在线1青婷| 日本精品干| 欧美韩国日本| 天天搞天天爽| 婷婷6月综合网| 影音先锋五月天婷婷丁香在线观看| 婷婷五月天精品| 极品九九九九九九| 国产精品久久久久久久久久| 婷婷六月丁香五月| av婷婷丁香 六月| 亚洲182在线观看| 玖玖午夜视频| 丁香五月亚洲天堂| 九九操操| 一起草aV| 国产精品99久久久久久久女警| 久久色这里只有精品| 成人av免费观看| 五月婷婷激清网| www。五月天激情| 99A片| 97操在线视频| 丁香五月婷久久| www.粉嫩av.com| 大香蕉人人人| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 欧美日韩成人高清在线| caobi四区| 久久婷婷五月综合伊人| 久热A片| 99ri在线视频| 操九色| 久久网思思| 大香蕉婷婷| 中文字幕欧美精品久久| 国产小精品| 91视频一起草| 人人干人人看| 99热只有精| 婷婷丁香五月av| 婷婷五月丁香色播| 在线成人国产| 懂色av粉嫩av蜜臀av| 婷婷综合在线| 激情色色| 丁香 久久| 日本五月婷婷| 五月丁香激情六月| 五月天在线视频尤物视频在线看| 丁香六月综合| 久9热在线视频| 中文字幕成人影视| 色香欲综合| 夜夜操天天爽| 襙逼网| 97色色色色色色色| 丁香六月婷婷开心| 99啪啪| 色色五月天婷婷| 丁香五月婷婷激情四射| AV成人在线播放| 亚洲 成人 电影av在线观看| 日本色啪| 激情五月天情色| 婷婷五月色播天| 五月婷三级片| 秋霞少妇AV网站| 中文字幕丰满孑伦无码专区| 日韩久久成人| 人与禽A片啪啪| 婷婷五月,综合伊人| 少妇2做爰HD韩国电影| 丁香在线视频| 国产精品久久久久久妇女6080| 五月丁香六月激情综合| 大学生高潮无套内谢视频| 五月天色区| 五月丁香亭亭操逼| 久9视频| 天天色粽合合合合合合合| 婷婷五月天成人网| 粉嫩AV久久一区二区三区| 日韩少妇内射免费播放| 婷婷色丁香六月| 五月丁香狠狠| 91视频五月丁香| 色域五月婷婷丁香| 超碰在线看| 国产成人精品一区二三区熟女在线| 另类在线免费视频| 五月丁香综合网| 人妖色AV色综合| 免费观看亚洲AV片| 99视频色在线观看| 五月色丁香国产在线视频| 色五月视频无码播放| 亚洲第79页| 五月天婷婷综合网| 五月婷婷无码| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 思思热在线观看| 九九色精品| 97久久久久久久久久久| 激情五月婷婷色色| 五月天激情综合网俺也去| 干亚洲天堂| 99热这里只有精品国产首页| 激情丁香九九五月综合网| 超碰99热精品| 操操操97| 99啪99| 丁香五月深爱五月婷婷| 婷婷亚洲五月| 免费做A爰片77777| 欧洲区自拍| 五月天国产成人| 五月刺激丁香月综合| 天天综合网色欲香| 国产亚洲精品人人| 26UUU欧美| 丁香五月影院| 日韩av网站在线观看| 99热6这里之有精品| 天天做天天摸| 国产免费一区二区在线A片视频| 欧美性生交XXXXX无码小说| 五月丁香婷婷色播无码| 婷婷五月天激情综合婷婷五月天激情综合| 久久综合激情婷婷激情| 色五月综合网| 婷婷性爱视频在线| 五月精品免费XXX| 久久婷婷伊人| 99人人爽| 婷婷欧美偷拍综合| 欧美这里只有精品| 超碰人人摸AV| www.av视频xx999.com| 操逼巨乳91| 97在线观看| 天搞天天天天天| 激情色色色| 91聚色综合网| 色色亚洲无码| 激情床戏| 色婷婷情片| 久久有码| 欧美色综合天天久久综合精品| 欧美日本黄色| 99热免费观看| 久热精品免费视频4| 色五月婷婷久久爱| 特黄三级片| 色五月婷婷综合在线| 婷婷五月天成人综合网| www.五月婷婷.com| 午夜丁香六月婷| 蜜桃婷婷丁香| 97久久久久久久久久久| 亚洲激情免费久久| www久| 丝袜人妻| 天天草狠狠擦| 久久丁香五月天| 97福利视频| 五月婷婷丁香啪啪| 婷婷久综合| 天天干、天天日日| 性爱视频久久| 亚洲激情视频网| 婷婷五月天成人网| 亚洲精品欧洲精品| 综合五月天| 安息电影在线观看完整版| 丁香六月婷婷色XXXXX| 九九热AV| av狠狠操| 色婷婷丁香五月天在线视频| 婷婷色综合| 2023天天日夜夜爽| 国产日产亚洲系列最新| 99在线播放视频| 婷婷五月天开心网| 婷婷五月大| 国产精品99久久久久久久女警| 久热只有这里有精品| 91久久久久久久久18| 人人草公开操| 青草青草视频2免费观看| 婷婷六月插屄激情| 日韩小视频在线99| xx人人xx| 九月婷婷综合| 久久99视频| 亚洲另类久久| 色吊操色妞| 97极品在线| www.99久| 亚洲乱码日产精品BD| 色色色.com| 五月天激情图片网| 玖玖爱伊人| 欧美日韩大黄| 91婷婷视频| 操逼巨乳91| 色啪综合| 综合色色五月| 狠狠色狠狠操| 婷婷五月激情热播| 九九综合影音先锋| 亚洲人成色A777777在线观看| 久久大香蕉同僚| 国产精品a无线| 色偷偷狠狠| 久久婷婷国产| 无码AV久久久久久久久| 久热只有精品| 天天玩夜夜操天天爽| 开心色色五月天综合| 综合网视频| 欧美欧盟性爱网| 七月丁香婷婷 色色| 亚洲无码成人| 五月婷庭丁香在线| 第四色五月婷婷| 欧美激情综合色综合啪啪五月| 丁香 婷婷 亚洲 熟女| 99re在线视频| 色色9 9| 99热国产精品| 久久狠狠色| 婷婷娌伦网| 激情四射网| 天天色激情| 日韩一级网站| 亚洲欧州色情在线观看| 任你日热视频| 日本三级99人妇网站| 97干欧美| 亚洲另类日本| 高清无码 一区 二区 三区| 91丁香五月| 国产69久久久欧美黑人A片| 色九亚洲| 狠狠狠五月婷婷六月丁香| 日本久久网| 99热亚洲综合| 婷婷碰碰| 九九香蕉网| 婷婷五月天av| 婷婷五月天亚洲综合网| 亚洲夜五月| 成人资源在线| 殴美97色| 日本久热| 亚洲婷婷久久综合| 色婷婷成人五月| 色五月av伊人| 天堂AV三级| 久久大香蕉视频| 成人一区在线观看| 一本色道久久88加勒比| 99色在线| 九色婷婷| 另类激情五月| 99看片| 激情婷婷五月社区| 日韩AAA| 国产 A片 自拍| 9久精品视频| 日本在线视频播放91| 夜色.cnm| 天色色综合网| 熟惀91九色在线| 超碰v| 久热无码| 九九热超碰| 99热精品无码| 婷婷五月激情丁香| 伊人五月婷婷| 99黄色性生活| 97操碰视频| 另类激情五月| 任你操精品免费| 99在线视频精品| 久久婷婷五月天| 丁香色成人| 日亚二欧美| 九九色综合网| 丁香五月激情啪| 久久激情视频| 日本一毛片| 成人电影AV在线观看| 亚洲五月天婷婷| 日本欧美国产| 亚洲五月花| 婷婷五月天开心网| 欧美交换配乱吟粗大25P| 开心激情站| 性做爰A片免费视频A片直播| 粉嫩AV久久一区二区三区| 牛色色碰| 9|人妻人人操| 午夜丁香六月婷| 99日精品视频| 五月丁香久人妻中文| 91精品国产99久久久久久天美| 欧美va视频| 久久激情综合| 天天拍久久| 激情五月婷婷丁香| 婷婷色五月开心五月| 色五月在线观看| 九九激情网| 羞羞嫩草视频| 玖玖五月丁香| 丁香五月激情宗合网| 五月丁香va| 骚。com| 色天堂A| 97人人草| 色五月激情五月| 久久久久九九九九视屏小说88| 色婷婷亚洲婷婷| 国产在这里只有精品| 怎么样可以看免费的一级av| 九一九九黄色| 中文字幕黄色片| 99热国产在| 色五月综合在线| 丁香九月综合| 人妻丰满精品一区二区A片| www超碰com| 精品久热| 六月丁香社区| 在线色色| 久草婷| 欧美大香蕉视频| 天天干-天天日| 开心激情网五月天| 久久婷婷色| 啪啪五月婷婷| 婷婷激情五月天网站| 五月天激情无码专区| 欧美色婷婷| 91久久九| 噜噜噜噜婷婷五月天| 操操操AV| 激情第四色| 久久九九囯产| 一个色的综合| 天天做天天爱天天玩| 欧美成人精品A片免费一区99| 色开心五月婷婷丁香HD| 操人妻90p| 久热免费| 九月丁香婷婷基地| 99亚色色色| 人人射人人高潮| 做爰丰满少妇1313| 99热精品99| 天天色综合网1| 欧美黄色AA片哗啦啦啦| 大香AV| 天天干天天干天天干天天干天天干天天| 五月丁香激情四射| 99热一本久道| 五月激情婷婷色| 激情五月影院| 噜噜狠狠色综合久| 国产精品五月天婷婷| 性爱久久| 日本熟妇精品99| 午夜丁香综合婷婷| 五月丁香六月婷婷激情视频在线观看免费| 99精品久久| 99自拍视频网站| 天天久| 逼特逼在线免费播放| 综合综合色色| 可以看的av| 久久9热| 丁香婷婷视频| 综合色色五月| 婷婷丁香久久五月综合| 另类A片| 欧美啪啪9| 激情综合色婷婷啪啪六月天| 色香蕉婷婷| 婷婷之六月丁香| 亚洲天堂热| 26uuu青青| 色碰碰| 久久久久久久久99精品| 91热视频色网站| 欧美在线视频9| 色五月激情五月天| 久久婷婷一级片| 久久婷婷五月综合色播| 五月天激情婷婷| 久热这里只有精品在线观看| 五月丁香久久| 婷婷五月天免费小说| 亚洲中文乱字字幕在线永久| 青青草色在线视频观看| 97人人操人人| 办公室少妇激情呻吟A片在线观看| 袁子仪视频观看| 精品夜夜澡人妻无码AV| 欧美激情五月综合| 婷婷六月天| 日本女天天爽| 午夜不卡久久精品无码免费| 婷婷亚洲在线| 99在线视频。| 五月六月丁香激情| 亚洲天堂青草| 天天日天天爽| 色狠狠综合| 婷婷久久综合久| 再綫Av免费視品| 少妇人妻偷人精品无码视频新浪| 婷婷色色播五月天| 激情综合五月婷婷| 99惹精品视频| 天天色综| 婷婷五月综合社区| 婷婷丁香五月激情综合站_久久五月丁香激情综合_开心五月综合激情综合五月_婷 | 五月天婷婷色| 婷婷丁香久久五月综合| 久久久久9久无码视频| 天天更新天天亚洲| 九九99偷拍视频| 日韩99视频| 丁香婷婷啪啪| 51精品国自产在线| www.操逼comm| 丁香五月婷婷色偷偷| 97久久超碰| 五月丁香激情片| 琪琪色网在线| 69色色视频| 九九婷婷综合| 国产婷婷色综合AV蜜臀AV| 99爱免费在线视频| 九热久| 国产一区二区三区影院| 五月婷六月天| 91狠狠综合网| 公的粗大挺进了我的密道| 深爱1激情网| 九月丁香婷婷综合| 欧美美女视频| 九九综合| 狠狠狠婷婷五月综合| 强奸幻女毛片| 色偷偷综合| 99热777| 日本3级片偷拍网站| 日韩999| 成人电影丁香六月天| 色综合激情| 精品亚洲国产成AV人片传媒| 综合99视频| 婷婷五月天性| 91九色熟女| 影音先锋AV资源男人站| 婷婷九月亚洲| 中文字幕色色色| 色色色五月婷婷| 天天日色情| 天天日天天舔| 丁香九月综合激情| 五月婷婷,六月激情| 丁香婷婷色| 亚洲性爱AV在线| 日韩无码色色| 99热这里只有精| 情婷婷五月天在线| 色婷婷丁香| 亚洲成人av在线播放| 六月丁香网| 久久婷婷综| 人人视频色| 色宗合,宗合网| 色色色色色色色色五月先| 久久99最新地址| 亚洲九九夜夜| 久久久18| 五月成人网站| 武汉美女啪啪视频免费一级片| 99热99在线| AV成人在线播放| www.玖玖婷婷在线| 国自产拍偷拍精品啪啪一区二区| av网址在线| 久久婷婷人人| 五月开行婷婷色五月| 天天插轮理| 夜夜骑操AV| 99九九热在线观看| 色色五月天婷婷丁香| 另类亚洲电影| 天天射天天插天天干| 丁香六月婷婷| 五月色婷婷综合| 久久免费婷婷视频| 五月天夜夜爱夜夜操| 六月亚洲婷婷6月中文字幕| 婷婷五月丁香综合| 五月丁香 啪啪| 大香蕉七区| 9超碰在线| 99九九热视频免费| 西西4r午夜剧场| 色九四色| 影音先锋男人av资源站| 国产肥白大熟妇BBBB视频| 蜜桃人妻无码AV天堂三区| 九九这里只有精品| 天天骑天天操| 天天干天天干天天干| 久9视频| 99爱这里只有精品免费视频| 99re思思热久久| 泰州成人视频| 激情五月婷婷网| 99无码| 伊人五月婷婷| 99精品在线观看| 婷婷久久综合| 婷婷99狠狠| 欧美成人精品三区综合A片| 99精品视频在线观看| 久久精品99国产精品日本| 国产精品日本一区二区在线播放| 51精品国自产在线| 北条麻妃九九九国产精品视频| 性爱网五月婷婷| 变天就操逼婷婷五月| 日本色色色| 95精品区一区二| 综合AV网| 亚洲啪啪精品| 久久WW| 97热精品| 丁香九月综合| 天天日,夜夜爽| 欧美色色色| 五月婷婷之综合激情| 婷婷狠狠操| 日本婷久久| 97香蕉碰碰人妻国产欧美| 亚洲欧美日韩VIP| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 影音先锋噜一噜| 五月天婷婷基地| 精品色色网| 色婷婷久久| 色啪综合| 99ree6| 免费人人操| 久热大香蕉| 婷婷丁香成人网址| 99这里只有精品| 丁香五月婷婷影院| 色婷婷网大全在线| 久9热视频| 久操b网| 人人爱人人添| 操碰97| 搡BBBB搡BBB搡18 | 日韩av网站在线观看| 开心久久xxx色| 激情丁香五月婷| 久久只有18视频| 欧美婷婷综合| 青青久久91| 色婷婷AAA| 99视频热| av人人干| 亚洲九九99精品视频在线播放| 国产成人高清| 俺去也在线官网| 国产性爱一级| 中文字幕丰满孑伦无码专区| 色色色在线观看| 亚洲第一色色色| 五月婷婷九| 99ER热精品视频| 九热视频精品| 天天摸夜夜爽天天做| 激情久久肏屄视频| 91狼友视频网页更新| 大香蕉婷婷丁香视频在线| 久久九九在线视频| 五月婷婷丁香五月| 色婷婷第四色| 婷婷五月天少妇| 成人在线网址| 好叼操在线观看| 亚洲成人色五月婷婷综合| 五月花婷婷| 亚洲av电影网站| 久久精彩免费视频精彩免费视频| 79精品视频| 国产成人AV| 婷婷的久久网站| 人人播| 91精品刘玥| 五月婷婷激情综合在线| 色婷婷综合影院| 国产高清视频91九九九久久久| 婷婷成人综合免费视频| 五月丁香六月激情综合| 色情终和网| 深夜婷婷五月丁香| 国産精品| 啪精品| 激情丁香五月天图片| WwW色婷婷| 丁香五月天欧美成人| 婷香五月| 五月停停999| 天天日,天天射,天天舔| av网址在线播放| 无码中文一区二区三区| 色情综合| 五月天久久婷婷| 婷婷99综合| xx久久| 日本A片一区| 色色网站免费观看| JAPANRCEP老熟妇乱子伦视频| 欧美性爱一区| 欧美性爱五月天| 亚洲五月天色色| 婷婷五月av| 伊人香大香蕉视频| 影音先锋 婷婷| 久久久国产精品黄毛片| 亚州操操| 最新色色五月天| -91九色大屁股| 99热人人| 五月天婷婷操逼视频| 久久婷婷丁香| 91干视频| 婷婷激情四射| 激情久久五月天| 97干在线| 成久综合视频| 九九99精品视频在线观看| www.粉嫩av.com| 风流少妇A片一区二区蜜桃| 婷婷综合网伊人|