免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線(xiàn)實(shí)戰(zhàn)洞察。

物聯(lián)網(wǎng)標(biāo)準(zhǔn)實(shí)戰(zhàn):從設(shè)備接入、數(shù)據(jù)模型到OTA的安全升級(jí)

物聯(lián)網(wǎng)標(biāo)準(zhǔn)實(shí)戰(zhàn):從設(shè)備接入、數(shù)據(jù)模型到OTA的安全升級(jí) 聊到IoT標(biāo)準(zhǔn)很多人第一反應(yīng)就是MQTT和CoAP之爭(zhēng)或者是Matter發(fā)布時(shí)的那陣熱鬧。但真正在一線(xiàn)做過(guò)大規(guī)模物聯(lián)網(wǎng)項(xiàng)目的人都清楚標(biāo)準(zhǔn)這個(gè)話(huà)題不像協(xié)議文檔里寫(xiě)得那么干凈它往往是從一次P0級(jí)事故開(kāi)始的——設(shè)備接入突然全量失敗、影子數(shù)據(jù)錯(cuò)亂、OTA升級(jí)包推下去把一批設(shè)備搞到離線(xiàn)事后復(fù)盤(pán)才發(fā)現(xiàn)根子都出在“標(biāo)準(zhǔn)”上。這篇文章不打算跟你背一遍IEEE、ISO、IETF的體系結(jié)構(gòu)而是想站在做項(xiàng)目的角度聊聊標(biāo)準(zhǔn)在IoT里到底是怎么影響我們每天的工作。我們會(huì)從設(shè)備接入、數(shù)據(jù)模型、OTA、安全策略這些實(shí)際場(chǎng)景出發(fā)看看標(biāo)準(zhǔn)碎片化帶來(lái)了哪些坑以及未來(lái)幾年IoT標(biāo)準(zhǔn)會(huì)往哪個(gè)方向走。不管你是做硬件、做嵌入式、做平臺(tái)開(kāi)發(fā)還是做解決方案架構(gòu)這篇文章應(yīng)該都能給你一些值得帶進(jìn)項(xiàng)目里的參考。1. IoT標(biāo)準(zhǔn)為什么總是“老生常談”卻又“繞不開(kāi)”1.1 標(biāo)準(zhǔn)碎片化的真實(shí)代價(jià)先說(shuō)一個(gè)我印象特別深的場(chǎng)景。某個(gè)智慧工廠(chǎng)項(xiàng)目里一條產(chǎn)線(xiàn)上同時(shí)有PLC走M(jìn)odbus RTU傳感器通過(guò)MQTT上報(bào)視覺(jué)檢測(cè)設(shè)備用OPC UA對(duì)外輸出邊緣網(wǎng)關(guān)把這些數(shù)據(jù)匯總后統(tǒng)一推到云端。設(shè)備全部接完后光是把溫度、濕度、振動(dòng)、檢測(cè)結(jié)果這些字段對(duì)齊就花掉了整整三天。問(wèn)題出在哪每一家設(shè)備都有自己的數(shù)據(jù)命名習(xí)慣。有的溫度字段叫temperature有的叫temp還有的叫Temp_C有的單位是攝氏度有的直接給華氏度時(shí)間戳更是五花八門(mén)有的用本地時(shí)間有的用UTC但沒(méi)標(biāo)時(shí)區(qū)還有的年份只有兩位。到了平臺(tái)側(cè)這些數(shù)據(jù)全混在一起大屏上顯示的溫度曲線(xiàn)跳來(lái)跳去數(shù)據(jù)分析任務(wù)跑出來(lái)的結(jié)果根本沒(méi)法看。這種“能連上、但數(shù)據(jù)沒(méi)法用”的狀態(tài)就是IoT標(biāo)準(zhǔn)碎片化的最典型代價(jià)。網(wǎng)上有個(gè)說(shuō)法物聯(lián)網(wǎng)項(xiàng)目里超過(guò)一半的數(shù)據(jù)是“臟數(shù)據(jù)”很多就是因?yàn)樵O(shè)備接入階段沒(méi)有做標(biāo)準(zhǔn)約束。你設(shè)備連得再多協(xié)議適配做再全數(shù)據(jù)模型不統(tǒng)一后面的大數(shù)據(jù)、AI、數(shù)字孿生全都是在垃圾數(shù)據(jù)上蓋樓。再說(shuō)一個(gè)更嚴(yán)重的例子。有一次生產(chǎn)環(huán)境在凌晨出現(xiàn)告警風(fēng)暴幾百臺(tái)設(shè)備上報(bào)的數(shù)據(jù)時(shí)間戳比真實(shí)時(shí)間晚了8個(gè)小時(shí)。排查到天亮才發(fā)現(xiàn)是某廠(chǎng)商的固件更新后把時(shí)間戳從UTC改成了北京時(shí)間但平臺(tái)側(cè)的解析邏輯還按UTC處理。如果當(dāng)時(shí)設(shè)備側(cè)和平臺(tái)側(cè)對(duì)時(shí)間戳格式有一個(gè)明確的標(biāo)準(zhǔn)約定這種P0事故根本不可能發(fā)生。所以聊IoT標(biāo)準(zhǔn)不是聊技術(shù)選型而是聊一套從物理世界到業(yè)務(wù)系統(tǒng)之間的“翻譯約束”。物理世界本身什么標(biāo)準(zhǔn)都沒(méi)有溫度就是溫度壓力就是壓力設(shè)備不會(huì)自己說(shuō)“我是攝氏度”全靠接入層來(lái)定義。這個(gè)定義如果不統(tǒng)一后面每一步都會(huì)走樣。1.2 標(biāo)準(zhǔn)的三層結(jié)構(gòu)終端、連接、平臺(tái)聊標(biāo)準(zhǔn)之前先把IoT的技術(shù)棧拆開(kāi)。一個(gè)典型的物聯(lián)網(wǎng)系統(tǒng)大致可以分成三層。終端層是設(shè)備本身包括傳感器、控制器、芯片、固件。這一層的標(biāo)準(zhǔn)決定了設(shè)備怎么描述自己、怎么上報(bào)數(shù)據(jù)、怎么響應(yīng)命令。最典型的例子是Matter它定義了智能家居設(shè)備的各種集群Cluster和屬性Attribute設(shè)備說(shuō)“我是燈”平臺(tái)一看就知道它有什么能力、能執(zhí)行哪些操作。連接層是數(shù)據(jù)傳輸管道解決“怎么把數(shù)據(jù)送出去”的問(wèn)題。Wi-Fi、藍(lán)牙、Zigbee、LoRaWAN、蜂窩網(wǎng)絡(luò)這些屬于物理連接標(biāo)準(zhǔn)MQTT、CoAP、HTTP這些屬于應(yīng)用層協(xié)議標(biāo)準(zhǔn)。這一層最大的特點(diǎn)是百花齊放因?yàn)椴煌瑘?chǎng)景對(duì)功耗、帶寬、延遲的要求差異實(shí)在太大很難用一個(gè)協(xié)議通吃所有場(chǎng)景。平臺(tái)層是數(shù)據(jù)匯聚、處理和業(yè)務(wù)應(yīng)用的地方包括設(shè)備管理、規(guī)則引擎、數(shù)據(jù)存儲(chǔ)、API接口。這一層主要涉及數(shù)據(jù)格式、接口規(guī)范、安全策略的標(biāo)準(zhǔn)比如設(shè)備上報(bào)的JSON結(jié)構(gòu)、RESTful API的設(shè)計(jì)規(guī)范、設(shè)備證書(shū)的管理流程。理解了這個(gè)三層結(jié)構(gòu)就明白了為什么IoT標(biāo)準(zhǔn)這么難統(tǒng)一。它不是某一個(gè)組織發(fā)一個(gè)標(biāo)準(zhǔn)然后大家照做就完了而是每一層都有各自的玩家每一層都有各自的利益和存量生態(tài)。連接層已經(jīng)有幾十種協(xié)議在跑終端層的芯片方案幾百上千種平臺(tái)層更是各家都有自己的產(chǎn)品和數(shù)據(jù)格式想讓它們?nèi)繉?duì)齊幾乎是不可能的事情。但換個(gè)角度想標(biāo)準(zhǔn)化的目標(biāo)并不是“讓所有層都統(tǒng)一”而是“層與層之間的接口要清晰”。就像USB標(biāo)準(zhǔn)只管接口的形狀和協(xié)議不管里面是U盤(pán)、鍵盤(pán)還是散熱風(fēng)扇。IoT真正需要的是終端、連接、平臺(tái)三層之間各自的“USB接口”——設(shè)備描述有規(guī)范消息格式有規(guī)范API有規(guī)范。這樣不同層內(nèi)部無(wú)論怎么演進(jìn)相互之間都能對(duì)接。2. 實(shí)戰(zhàn)視角設(shè)備接入時(shí)“標(biāo)準(zhǔn)”到底卡在哪2.1 協(xié)議選型不是選“最好”而是選“最不差”每個(gè)做IoT平臺(tái)的人都會(huì)被問(wèn)到同一個(gè)問(wèn)題什么協(xié)議最高標(biāo)準(zhǔn)、最好用說(shuō)實(shí)話(huà)這個(gè)問(wèn)題本身就不太對(duì)。協(xié)議選型首先要看場(chǎng)景而且絕大多數(shù)時(shí)候我們要在功耗、帶寬、延遲、實(shí)時(shí)性、開(kāi)發(fā)成本之間做取舍選一個(gè)“當(dāng)前場(chǎng)景下最不差”的方案。我自己的經(jīng)驗(yàn)可以參考下面這個(gè)對(duì)比協(xié)議典型場(chǎng)景優(yōu)勢(shì)劣勢(shì)MQTT海量傳感數(shù)據(jù)上報(bào)、遠(yuǎn)程控制輕量、支持QoS、發(fā)布訂閱模型、生態(tài)成熟實(shí)時(shí)性一般不適合硬實(shí)時(shí)控制CoAP資源受限的低功耗節(jié)點(diǎn)基于UDP、開(kāi)銷(xiāo)小、適合NB-IoT可靠傳輸需要額外機(jī)制生態(tài)相對(duì)小HTTP/HTTPS設(shè)備管理、平臺(tái)間API、非實(shí)時(shí)接入通用性強(qiáng)、調(diào)試方便頭部開(kāi)銷(xiāo)大長(zhǎng)連接場(chǎng)景不友好DDS機(jī)器人、自動(dòng)駕駛、工業(yè)實(shí)時(shí)控制實(shí)時(shí)性高、去中心化、QoS可配置學(xué)習(xí)成本高資源占用大OPC UA工業(yè)制造、PLC、SCADA語(yǔ)義建模強(qiáng)、安全性好、工業(yè)認(rèn)可度高較重邊緣網(wǎng)關(guān)性能要求高M(jìn)odbus工業(yè)現(xiàn)場(chǎng)設(shè)備采集簡(jiǎn)單可靠、存量設(shè)備極多功能有限、安全性弱、字段語(yǔ)義靠人工定義從這個(gè)表能看出來(lái)沒(méi)有任何一個(gè)協(xié)議能包打天下。MQTT在海量上報(bào)場(chǎng)景很好用但你要拿它做毫秒級(jí)的電機(jī)控制那基本是找罪受。DDS在機(jī)器人領(lǐng)域很強(qiáng)但讓一個(gè)低功耗溫濕度傳感器跑DDS光協(xié)議棧就吃掉大半內(nèi)存。所以標(biāo)準(zhǔn)化的重點(diǎn)是“協(xié)議適配層”而不是“協(xié)議統(tǒng)一層”。平臺(tái)側(cè)應(yīng)該預(yù)先抽象出標(biāo)準(zhǔn)的消息模型和設(shè)備模型然后在邊緣網(wǎng)關(guān)或接入層做協(xié)議轉(zhuǎn)換讓所有設(shè)備無(wú)論用什么協(xié)議上來(lái)最終都轉(zhuǎn)換成一個(gè)統(tǒng)一的內(nèi)部標(biāo)準(zhǔn)。這個(gè)思路比硬性要求所有設(shè)備必須用MQTT或者必須用OPC UA要實(shí)際得多。2.2 數(shù)據(jù)模型不統(tǒng)一上云就是噩夢(mèng)如果說(shuō)協(xié)議是“怎么傳”那數(shù)據(jù)模型就是“傳什么”。這個(gè)卡點(diǎn)比協(xié)議選型更容易被忽略但對(duì)項(xiàng)目的影響反而更大。之前我們有個(gè)樓宇自控項(xiàng)目接了一批不同品牌的傳感器。A家的溫濕度計(jì)上報(bào)的是{temp:25.3,humi:60}B家的上報(bào)的是{temperature:26.1,humidity:58}C家的更離譜上報(bào)的是{t:25.8,h:59,unit:C}。接入層如果不做映射數(shù)據(jù)存進(jìn)去之后同一個(gè)測(cè)溫點(diǎn)在數(shù)據(jù)庫(kù)里有三套字段查詢(xún)的時(shí)候要么寫(xiě)一堆條件分支要么干脆就只能對(duì)某一家的數(shù)據(jù)做分析。后來(lái)我們把規(guī)則定死了設(shè)備端上報(bào)什么格式不管但網(wǎng)關(guān)和接入層必須把數(shù)據(jù)轉(zhuǎn)換成統(tǒng)一的模型再入庫(kù)。統(tǒng)一模型的字段名、單位、類(lèi)型、取值范圍、時(shí)間戳格式全部有Schema定義字段名規(guī)范用下劃線(xiàn)風(fēng)格比如temperature、humidity、device_id、report_time時(shí)間戳統(tǒng)一為UTC毫秒單位統(tǒng)一為國(guó)際單位制。這里有個(gè)很容易被忽視的細(xì)節(jié)數(shù)值類(lèi)型。很多設(shè)備上報(bào)溫度時(shí)默認(rèn)是浮點(diǎn)數(shù)但有些PLC會(huì)把溫度放大10倍存成整數(shù)到了平臺(tái)顯示65而不是26這就是字段定義不嚴(yán)謹(jǐn)造成的。所以標(biāo)準(zhǔn)模型里必須明確數(shù)值類(lèi)型、分辨率、量綱、上下限。海量數(shù)據(jù)采集場(chǎng)景下很多團(tuán)隊(duì)把精力都放在了接入并發(fā)、消息隊(duì)列吞吐這些性能問(wèn)題上結(jié)果數(shù)據(jù)存進(jìn)去了業(yè)務(wù)方一看分析結(jié)果說(shuō)“你這數(shù)據(jù)不對(duì)”。原因就是沒(méi)有在源頭做數(shù)據(jù)標(biāo)準(zhǔn)化。給的數(shù)據(jù)再快再全字段亂、單位亂、含義不清那也就是海量垃圾治理成本遠(yuǎn)超你的想象。2.3 安全與OTA標(biāo)準(zhǔn)里最容易被忽略的硬指標(biāo)設(shè)備接入還有一個(gè)繞不開(kāi)的環(huán)節(jié)是安全和OTA這兩塊恰恰是最容易被“能跑就行”思維帶過(guò)去的。先說(shuō)證書(shū)。很多平臺(tái)都支持設(shè)備證書(shū)認(rèn)證比如AWS IoT里的X.509證書(shū)機(jī)制。設(shè)備在工廠(chǎng)上線(xiàn)前會(huì)燒錄證書(shū)連云端時(shí)通過(guò)TLS雙向認(rèn)證完成身份校驗(yàn)。這個(gè)機(jī)制本身很完善但是項(xiàng)目里經(jīng)常出現(xiàn)的問(wèn)題是什么證書(shū)有效期到了沒(méi)人管設(shè)備全部掉線(xiàn)或者一個(gè)產(chǎn)品線(xiàn)幾千臺(tái)設(shè)備共用一個(gè)證書(shū)云端想踢掉某一臺(tái)設(shè)備都做不到。更隱蔽的問(wèn)題是權(quán)限策略。AWS IoT里設(shè)備權(quán)限通過(guò)Policy控制你定了iot:Connect、iot:Publish、iot:Subscribe這些操作但到底允許設(shè)備發(fā)布到哪個(gè)Topic、訂閱哪個(gè)Topic策略里要寫(xiě)清楚。很多項(xiàng)目圖省事直接給設(shè)備配一個(gè)通配符權(quán)限所有的Topic都能收發(fā)結(jié)果一個(gè)設(shè)備被入侵之后整個(gè)項(xiàng)目的數(shù)據(jù)都被拖走。這就是“最小權(quán)限”標(biāo)準(zhǔn)沒(méi)有落地。OTA這塊標(biāo)準(zhǔn)化的價(jià)值更明顯。做過(guò)大規(guī)模OTA的人都知道推送固件最怕的不是網(wǎng)絡(luò)慢而是設(shè)備升級(jí)后起不來(lái)一批接一批地變磚。所以O(shè)TA任務(wù)一定不能是簡(jiǎn)單粗暴地全量推送至少要有灰度分批、版本校驗(yàn)、失敗回滾這幾個(gè)環(huán)節(jié)。具體到策略上我通常建議這么排先推1%的設(shè)備做小批量驗(yàn)證觀(guān)察24小時(shí)一切正常再擴(kuò)大到10%最后全量。同時(shí)設(shè)備端要內(nèi)置雙分區(qū)機(jī)制固件包下載完先寫(xiě)到備用分區(qū)校驗(yàn)簽名和哈希通過(guò)后再切換啟動(dòng)分區(qū)。如果新固件啟動(dòng)失敗自動(dòng)回滾到舊分區(qū)避免設(shè)備變磚。這些機(jī)制看起來(lái)像是產(chǎn)品功能設(shè)計(jì)但本質(zhì)上就是OTA安全標(biāo)準(zhǔn)化的落地。3. 實(shí)操過(guò)程搭一個(gè)“標(biāo)準(zhǔn)意識(shí)”的接入框架3.1 設(shè)備影子與統(tǒng)一狀態(tài)模型光講理念不夠下面用一個(gè)實(shí)際項(xiàng)目的接入框架來(lái)說(shuō)明“標(biāo)準(zhǔn)意識(shí)”怎么落地。我拿一個(gè)典型的智能設(shè)備接入云端場(chǎng)景為例。很多平臺(tái)都引入了“設(shè)備影子”Device Shadow的概念云端保存設(shè)備最近一次上報(bào)的狀態(tài)即使設(shè)備離線(xiàn)業(yè)務(wù)側(cè)也能通過(guò)API讀取到設(shè)備的最新?tīng)顟B(tài)設(shè)備重新上線(xiàn)后可以主動(dòng)拉取影子實(shí)現(xiàn)狀態(tài)同步。我們?cè)谧鲞@個(gè)設(shè)計(jì)時(shí)第一件事就是定義“統(tǒng)一狀態(tài)模型”。所有設(shè)備不管類(lèi)型是什么上報(bào)數(shù)據(jù)都必須包含以下基礎(chǔ)字段{ message_type: property_post, device_id: sn_20250101_0001, product_key: pk_standard_demo, timestamp: 1735718400000, seq: 1001, payload: { properties: { temperature: 26.5, humidity: 58.2, switch_status: on } } }上面這個(gè)模型有幾個(gè)關(guān)鍵約定device_id是設(shè)備唯一標(biāo)識(shí)對(duì)應(yīng)我們內(nèi)部的設(shè)備三元組不能跟產(chǎn)品型號(hào)混在一起。timestamp統(tǒng)一為UTC毫秒時(shí)間戳每臺(tái)設(shè)備上線(xiàn)前必須校準(zhǔn)時(shí)鐘歷史遺留設(shè)備也要在網(wǎng)關(guān)上做時(shí)間戳轉(zhuǎn)換。seq是設(shè)備側(cè)自增的消息序號(hào)平臺(tái)側(cè)可以用它做冪等判斷防止網(wǎng)絡(luò)重傳導(dǎo)致數(shù)據(jù)重復(fù)。payload.properties里的字段名和單位必須遵循設(shè)備模型規(guī)范網(wǎng)關(guān)在接入時(shí)負(fù)責(zé)把廠(chǎng)商私有格式映射成規(guī)范格式。項(xiàng)目里我見(jiàn)過(guò)太多團(tuán)隊(duì)直接讓設(shè)備上報(bào)什么就存什么結(jié)果到了做告警規(guī)則時(shí)才發(fā)現(xiàn)有的設(shè)備上報(bào)的開(kāi)關(guān)狀態(tài)是on/off有的是1/0有的是true/false規(guī)則引擎寫(xiě)起來(lái)非常痛苦。定義了這個(gè)統(tǒng)一模型之后告警引擎、數(shù)據(jù)清洗、大屏展示都只需要對(duì)著這一套模型做適配。3.2 報(bào)文模板與解析層的雙向約束有了統(tǒng)一模型還需要一套機(jī)制保證設(shè)備側(cè)和平臺(tái)側(cè)都在按這個(gè)模型工作這就需要一個(gè)“解析層”來(lái)做雙向約束。先說(shuō)Topic規(guī)范。MQTT場(chǎng)景下Topic設(shè)計(jì)不能隨手起名我們內(nèi)部約定了一套標(biāo)準(zhǔn)格式/{product_key}/{device_name}/properties/post /{product_key}/{device_name}/properties/get /{product_key}/{device_name}/command/reply為什么用這種層級(jí)結(jié)構(gòu)主要有三個(gè)好處產(chǎn)品維度隔離在云端做Policy授權(quán)時(shí)可以直接按product_key過(guò)濾不同產(chǎn)品之間天然隔離。設(shè)備維度可以精確控制想給某臺(tái)設(shè)備單獨(dú)授權(quán)時(shí)直接指向device_name即可。訂閱關(guān)系清晰業(yè)務(wù)側(cè)用通配符訂閱時(shí)不會(huì)誤收到其他設(shè)備的消息。解析層做的第二件事是Schema校驗(yàn)。設(shè)備上報(bào)的消息進(jìn)入平臺(tái)后會(huì)先經(jīng)過(guò)一個(gè)校驗(yàn)器檢查必填字段是否齊全、字段類(lèi)型是否正確、數(shù)值是否在合法范圍內(nèi)。比如溫度傳感器的合理范圍是-40到85如果上報(bào)一個(gè)500直接判為非法數(shù)據(jù)走異常流程。我當(dāng)時(shí)寫(xiě)過(guò)一個(gè)簡(jiǎn)單的Python演示用于模擬設(shè)備上報(bào)和校驗(yàn)的過(guò)程import json import time import uuid def build_telemetry_payload(device_id, product_key, properties): payload { message_id: str(uuid.uuid4()), device_id: device_id, product_key: product_key, timestamp: int(time.time() * 1000), message_type: property_post, payload: { properties: properties } } return json.dumps(payload, ensure_asciiFalse) def validate_schema(message): required_fields [message_id, device_id, product_key, timestamp, message_type, payload] for field in required_fields: if field not in message: return False, fmissing field: {field} if not isinstance(message.get(timestamp), int): return False, timestamp must be int ms if properties not in message.get(payload, {}): return False, missing payload.properties return True, ok # 模擬一個(gè)溫濕度傳感器 msg build_telemetry_payload(sn_20250101_0001, pk_standard_demo, { temperature: 26.5, humidity: 58.2 }) print(msg) print(validate_schema(json.loads(msg)))這段代碼雖然簡(jiǎn)單但它體現(xiàn)了一個(gè)很重要的思路解析層不只是“把MQTT消息讀出來(lái)”還要承擔(dān)字段校驗(yàn)、格式校驗(yàn)的職責(zé)。這樣數(shù)據(jù)到了存儲(chǔ)和業(yè)務(wù)層永遠(yuǎn)都是干凈、統(tǒng)一、符合預(yù)期的。類(lèi)似的思路可以推廣到設(shè)備模型定義用JSON Schema或ProtoBuf來(lái)描述設(shè)備屬性后面開(kāi)發(fā)文檔自動(dòng)生成、調(diào)試工具模擬、規(guī)則引擎配置都可以基于這份模型來(lái)做。3.3 OTA升級(jí)任務(wù)的策略設(shè)計(jì)再接上OTA這個(gè)話(huà)題因?yàn)闊嵩~里提到了AWS IoT OTA我們也用過(guò)這個(gè)服務(wù)確實(shí)能幫你省掉不少重復(fù)造輪子的工作。但就算平臺(tái)幫你管了很多東西方案本身還是要設(shè)計(jì)好。一個(gè)標(biāo)準(zhǔn)的OTA任務(wù)至少包含幾個(gè)關(guān)鍵階段版本發(fā)布準(zhǔn)備固件包上傳到云端記錄版本號(hào)、校驗(yàn)哈希、發(fā)布范圍。版本號(hào)建議用三段式例如2.1.02.1是功能版本0是補(bǔ)丁號(hào)方便管理增量更新。灰度發(fā)布策略先選一個(gè)小批次設(shè)備比如設(shè)備總量的1%這個(gè)批次要覆蓋不同硬件版本和網(wǎng)絡(luò)環(huán)境不能只挑信號(hào)好的設(shè)備。觀(guān)察指標(biāo)包括在線(xiàn)率、上報(bào)頻率、錯(cuò)誤日志、設(shè)備崩潰率。任務(wù)監(jiān)控云端標(biāo)記每臺(tái)設(shè)備的升級(jí)狀態(tài)等待中、下載中、升級(jí)中、成功、失敗。這個(gè)過(guò)程中要特別關(guān)注“失敗后重試”的次數(shù)防止設(shè)備陷入“下載-失敗-重啟-再下載”的死循環(huán)。回滾機(jī)制設(shè)備側(cè)在啟動(dòng)新固件后要有一個(gè)自檢邏輯如果在規(guī)定時(shí)間內(nèi)無(wú)法完成初始化或者上報(bào)心跳自動(dòng)回滾到舊版本。我當(dāng)時(shí)最深刻的教訓(xùn)是OTA不僅是“推包”還要管好一批設(shè)備同時(shí)在線(xiàn)下載帶來(lái)的帶寬沖擊。有一次我們給一批4G設(shè)備推一個(gè)有30MB的升級(jí)包沒(méi)做并發(fā)限制結(jié)果一下子幾百臺(tái)設(shè)備同時(shí)下載邊緣站點(diǎn)的帶寬被打滿(mǎn)正常業(yè)務(wù)數(shù)據(jù)全被堵住了。后來(lái)學(xué)乖了每次OTA任務(wù)都設(shè)置最大并發(fā)下載數(shù)比如一個(gè)站點(diǎn)同一時(shí)間最多20臺(tái)設(shè)備在下其他設(shè)備排隊(duì)等待。除了這些AWS IoT的OTA還涉及用戶(hù)策略配置。Job執(zhí)行階段的權(quán)限要單獨(dú)配比如iot:StartNextPendingJobExecution、iot:DescribeJobExecution、iot:GetPendingJobExecutions這些權(quán)限少配一個(gè)設(shè)備都可能收不到升級(jí)指令。這類(lèi)問(wèn)題是典型的“看起來(lái)連上了但什么都沒(méi)發(fā)生”的坑排查起來(lái)很費(fèi)時(shí)間。4. 常見(jiàn)問(wèn)題與排查技巧實(shí)錄4.1 多協(xié)議網(wǎng)關(guān)導(dǎo)致字段丟失有一個(gè)項(xiàng)目邊緣網(wǎng)關(guān)同時(shí)接了Modbus設(shè)備和新款MQTT傳感器我發(fā)現(xiàn)上位機(jī)讀到的溫度偶爾會(huì)跳變比如從26.4突然跳到6.4然后又恢復(fù)正常。查了很久最后定位到問(wèn)題是Modbus寄存器默認(rèn)按16位讀取而設(shè)備側(cè)實(shí)際上是把溫度按32位浮點(diǎn)數(shù)存儲(chǔ)的網(wǎng)關(guān)在做協(xié)議轉(zhuǎn)換時(shí)只讀了低16位導(dǎo)致數(shù)據(jù)被截?cái)?。后面我讓網(wǎng)關(guān)層把Modbus寄存器配置改成了“32位浮點(diǎn)、按兩個(gè)寄存器組合讀取”跳變消失。這事的教訓(xùn)是多協(xié)議轉(zhuǎn)換場(chǎng)景下千萬(wàn)不要默認(rèn)所有廠(chǎng)家的寄存器配置都一樣。對(duì)接Modbus設(shè)備時(shí)寄存器地址、長(zhǎng)度、數(shù)據(jù)類(lèi)型、字節(jié)序、縮放因子這些必須逐項(xiàng)核對(duì)并記錄成一份映射表后續(xù)排查才好對(duì)照。4.2 時(shí)間不同步引發(fā)數(shù)據(jù)錯(cuò)亂前面提到過(guò)時(shí)間戳問(wèn)題我再展開(kāi)講講。有一次項(xiàng)目上線(xiàn)后數(shù)據(jù)分析團(tuán)隊(duì)反饋某條產(chǎn)線(xiàn)的溫度曲線(xiàn)和壓力曲線(xiàn)對(duì)不上看起來(lái)像是兩套數(shù)據(jù)有時(shí)間偏移。查了設(shè)備端發(fā)現(xiàn)PLC時(shí)間是通過(guò)NTP從工廠(chǎng)內(nèi)網(wǎng)同步的但傳感器用的還是出廠(chǎng)時(shí)間而且傳感器的產(chǎn)品固件對(duì)時(shí)區(qū)處理得很糙直接用了本地時(shí)間。解決方案分三步所有設(shè)備統(tǒng)一使用NTP或平臺(tái)下發(fā)的校時(shí)指令確保設(shè)備本地時(shí)間偏移控制在秒級(jí)以?xún)?nèi)。網(wǎng)關(guān)側(cè)對(duì)設(shè)備上報(bào)的時(shí)間戳做合法性校驗(yàn)如果與網(wǎng)關(guān)當(dāng)前時(shí)間偏差超過(guò)5分鐘打上異常標(biāo)記并告警。平臺(tái)側(cè)在處理數(shù)據(jù)時(shí)統(tǒng)一轉(zhuǎn)成UTC時(shí)間存儲(chǔ)展示層再按業(yè)務(wù)時(shí)區(qū)轉(zhuǎn)換。時(shí)間戳這個(gè)問(wèn)題看起來(lái)小但在數(shù)據(jù)分析、告警編排、審計(jì)追蹤里都是底層依賴(lài)。時(shí)間不一致后面所有環(huán)節(jié)都會(huì)跟著亂。4.3 批量OTA失敗如何快速定位還有一次我們對(duì)一批設(shè)備推送新固件發(fā)布后當(dāng)天夜里就有運(yùn)維反饋說(shuō)設(shè)備在批量掉線(xiàn)。一開(kāi)始懷疑是網(wǎng)絡(luò)問(wèn)題檢查了云端流日志發(fā)現(xiàn)設(shè)備是在OTA任務(wù)啟動(dòng)后才斷開(kāi)的而且斷開(kāi)前有大量固件包下載請(qǐng)求。進(jìn)一步排查發(fā)現(xiàn)這批設(shè)備的硬件版本是V1.2但固件包里包含了V1.3才支持的配置項(xiàng)設(shè)備解析配置時(shí)直接報(bào)錯(cuò)退出進(jìn)入重啟循環(huán)。因?yàn)樯弦话婀碳](méi)有做好版本兼容所以問(wèn)題一直被藏到OTA發(fā)布時(shí)才集中爆發(fā)。那之后我們強(qiáng)制要求OTA灰度范圍除了按設(shè)備ID或批次篩選還必須按硬件版本、當(dāng)前固件版本、地域、網(wǎng)絡(luò)類(lèi)型做組合篩選。每次發(fā)布前要在測(cè)試環(huán)境跑一遍版本清單校驗(yàn)確保目標(biāo)設(shè)備的硬件和當(dāng)前版本都符合升級(jí)條件。4.4 證書(shū)過(guò)期和權(quán)限策略問(wèn)題AWS IoT里設(shè)備突然大批量離線(xiàn)查下來(lái)發(fā)現(xiàn)根因是設(shè)備證書(shū)過(guò)期。更麻煩的是有些設(shè)備沒(méi)有內(nèi)置證書(shū)輪換流程只能靠人工重新燒錄現(xiàn)場(chǎng)幾百臺(tái)設(shè)備一臺(tái)臺(tái)處理非常痛苦。后來(lái)我們做了三件事證書(shū)有效期統(tǒng)一設(shè)為3年并在證書(shū)到期前90天啟動(dòng)自動(dòng)續(xù)期流程設(shè)備端實(shí)現(xiàn)證書(shū)自動(dòng)下載和更換。平臺(tái)側(cè)做證書(shū)到期檢測(cè)提前一個(gè)季度輸出到期設(shè)備清單而不是等設(shè)備掉了再救火。權(quán)限策略全部從“寬泛授權(quán)”改成“最小授權(quán)”每個(gè)產(chǎn)品線(xiàn)一套專(zhuān)用策略模板不隨便給設(shè)備開(kāi)通配符權(quán)限。權(quán)限策略還有一個(gè)隱蔽問(wèn)題設(shè)備明明在線(xiàn)但OTA任務(wù)一直不執(zhí)行。一查策略少了iot:StartNextPendingJobExecution權(quán)限。這種問(wèn)題用AWS的Policy模擬器可以快速定位模擬設(shè)備身份執(zhí)行指定操作它會(huì)直接告訴你哪個(gè)Action被Denied了。5. 未來(lái)幾年IoT標(biāo)準(zhǔn)演進(jìn)值得關(guān)注的方向5.1 Matter不是終點(diǎn)而是“互聯(lián)范式”的開(kāi)始前兩年Matter發(fā)布時(shí)很多人以為智能家居的標(biāo)準(zhǔn)之爭(zhēng)到此終結(jié)。實(shí)際用下來(lái)Matter確實(shí)在設(shè)備描述、協(xié)議轉(zhuǎn)換、本地互聯(lián)上做了大量工作但它真正有價(jià)值的不是那一套規(guī)范本身而是確立了“基于IP、本地通信、多生態(tài)兼容”的互聯(lián)范式。這個(gè)范式可能會(huì)延伸到更多領(lǐng)域。未來(lái)的設(shè)備出廠(chǎng)時(shí)自帶一套標(biāo)準(zhǔn)描述文件網(wǎng)關(guān)或者平臺(tái)接入后自動(dòng)發(fā)現(xiàn)設(shè)備能力自動(dòng)生成控制界面不再需要人工在后臺(tái)一件一件配置設(shè)備類(lèi)型和屬性映射。也就是說(shuō)標(biāo)準(zhǔn)化會(huì)從“協(xié)議能接通”升級(jí)為“語(yǔ)義能看懂”。具體到落地企業(yè)現(xiàn)在就可以開(kāi)始做一件事把設(shè)備描述文件、通信協(xié)議、數(shù)據(jù)模型抽象成獨(dú)立于業(yè)務(wù)代碼的資產(chǎn)。以后每接一個(gè)新設(shè)備先看它能不能映射到已有的標(biāo)準(zhǔn)模型實(shí)在對(duì)不上再擴(kuò)展模型而不是每次新設(shè)備進(jìn)來(lái)都臨時(shí)造一套新字段。5.2 大模型讓“協(xié)議自動(dòng)翻譯”成為可能這兩年大模型火熱它對(duì)IoT標(biāo)準(zhǔn)的影響也開(kāi)始顯現(xiàn)。最直接的一個(gè)應(yīng)用方向就是“協(xié)議文檔解析和映射生成”。以前我們接一個(gè)私有協(xié)議要把廠(chǎng)家提供的幾百頁(yè)協(xié)議文檔翻完然后手動(dòng)寫(xiě)解析規(guī)則和字段映射一個(gè)設(shè)備類(lèi)型少說(shuō)也要一周。有了大模型以后可以把協(xié)議文檔導(dǎo)入讓它生成JSON Schema、解析模板、字段映射初稿工程師再做人工審核修正效率能提高不少。但這里一定要提醒AI生成的東西只能當(dāng)草稿不能直接進(jìn)生產(chǎn)。關(guān)鍵設(shè)備尤其如此一個(gè)字段解析錯(cuò)誤輕則數(shù)據(jù)不對(duì)重則控制指令發(fā)錯(cuò)出事就是生產(chǎn)事故。所以我的建議是讓大模型做“翻譯草稿”人做“最終裁判”把人工審核流程做成標(biāo)準(zhǔn)環(huán)節(jié)目前階段這是最穩(wěn)妥的做法。5.3 標(biāo)準(zhǔn)將更多與合規(guī)綁定接下來(lái)幾年IoT標(biāo)準(zhǔn)不再只是技術(shù)團(tuán)隊(duì)內(nèi)部的事它會(huì)越來(lái)越頻繁地與安全合規(guī)綁定在一起。你出口的設(shè)備、上線(xiàn)的平臺(tái)需要滿(mǎn)足越來(lái)越多的安全基線(xiàn)要求比如設(shè)備必須具備安全啟動(dòng)、數(shù)據(jù)加密傳輸、固件簽名校驗(yàn)、可追溯日志等能力。這些正在從“用戶(hù)要求”變成“準(zhǔn)入門(mén)檻”。對(duì)企業(yè)來(lái)說(shuō)現(xiàn)在就要把自己的產(chǎn)品線(xiàn)按“標(biāo)準(zhǔn)合規(guī)框架”重新過(guò)一遍看看哪些設(shè)備還不支持安全啟動(dòng)哪些設(shè)備的數(shù)據(jù)鏈路還是明文傳輸哪些設(shè)備的固件沒(méi)有簽名校驗(yàn)。這些事越早做后面的整改成本越低。我個(gè)人的看法是標(biāo)準(zhǔn)會(huì)從過(guò)去的“建議參考”變成“事實(shí)準(zhǔn)入門(mén)檻”。技術(shù)團(tuán)隊(duì)如果能在項(xiàng)目層面提前把標(biāo)準(zhǔn)能力沉淀為平臺(tái)能力后續(xù)就不會(huì)被合規(guī)問(wèn)題拖住交付節(jié)奏。做過(guò)越多的IoT項(xiàng)目我越覺(jué)得標(biāo)準(zhǔn)不是一個(gè)純技術(shù)概念而是工程問(wèn)題。它要求你在設(shè)備接入的第一天就想清楚數(shù)據(jù)模型是什么字段怎么命名時(shí)間戳用什么格式升級(jí)策略怎么定安全最小權(quán)限怎么配這些看起來(lái)瑣碎的約定決定了系統(tǒng)跑起來(lái)之后是健康還是每天救火。如果現(xiàn)在有人問(wèn)我面對(duì)碎片化的IoT標(biāo)準(zhǔn)最先該做什么我的建議是先定一個(gè)“最小標(biāo)準(zhǔn)集”。不用一開(kāi)始就追求包羅萬(wàn)象的國(guó)際標(biāo)準(zhǔn)先把設(shè)備ID、消息格式、時(shí)間戳、單位、錯(cuò)誤碼這五件事定死然后讓所有接入流程都遵守這套約束。這套最小約束會(huì)隨著項(xiàng)目迭代慢慢完善但它能保證你從第一天起數(shù)據(jù)就是干凈的接入就是有序的。標(biāo)準(zhǔn)永遠(yuǎn)在演進(jìn)但工程上“先立規(guī)矩再干活”這個(gè)原則不會(huì)變。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
丰满少妇乱A片无码| 婷婷五月天日逼| 婷婷狠狠干| 操一区| 夜夜爱网站| 大香蕉伊然在亚洲90| 丁香六月激情国产| 久久性爱视频| 亚洲av成人一区二区电影在线| 久久在线大香蕉| 99精品视频偷拍| 人妻综合网| 五月丁香手机在线| 伊人99久久| 97丁香五月| 国产婷婷久久| 可以免费观看的AV| 五月丁香亭亭| 天天日天天摸天天| 五月综合丁香婷婷| 国产一区二区av免费| 日韩无码人妻一区二区三区综合| 五月天基地| 天天肏视频| 高清无码中文字幕aVDV| 日本 欧美在线| 大香蕉五月天| 97色色色| 五月丁香六月婷婷不卡免费无码| 婷婷五月天激情五月天网站| 中文字幕不卡+婷婷五月| 99免费在线| 99热思思在线观看| 久久久99视频| 日本A片一区| 99噜噜噜在线播放| 五月丁香大香蕉| 国产欧美日韩一区二区三区| 婷婷久热| 99自拍视频在线观看| 日本在线观看91| 中文字幕成人| 五月天激情小说网| 免费啪啪亚州视频| 五月第四色| 亚洲成人高清在线| 六月婷婷久久| 狠狠综合久久综合| 五月色视频| 99久久超级| 色色色99| 精品少妇人妻AV无码专区偷人| 岛国AV网站| 美女婷婷六月色| 五月丁香| 久99视频| 五月激情综合婷婷| 四色女婷婷| 九九综舍久久| 人人操人人看97干| 69久久久| 亚洲岛国电影| 色五天综合| 色色色网站| 99精品福利视频| 国产va在线视频| 大香蕉久久| 丁香色婷婷| 99啪视频在线观看| 亚洲国产成人综合| 爱射综合| 久久婷婷青青草| 99精品在线播放| 99热这里都是精品| 三级三久久线久久99久目本WW| 79色色| 五月天涩涩| 青青草成人网| 开心五月激情网| 天天日天天色| 性爱激情小说AV五月丁香花| 在线观看五月婷婷网| 五月色婷婷综合色| 伊人国产婷婷五月天 | 欧美99视频| 婷婷五月色丁香在线看| 99热99热不卡| 色99热| 国产精品色色| 六月丁丁香| 狠狠爱成人综合网| 久色88| 亚洲啪啪精品| 天天色天天操天天射| PORNY九色9l自拍视频成人| 五月婷婷基地| 久久婷婷精品| 欧美超级视频97| 狠狠色中色| 天天揷综合网| 色色无码日韩| 婷婷涩五月| 色综合色| 99re66热这里只有精品| 99精品在线下载| 色婷婷色人人射| WWW五月婷婷| 思思热99在线| 五月丁香六月激情综合| 五月丁香婷婷综合久久| 精品乱码久久久久| 免费精品99| 色综合激情图区| 婷婷的99视频网站| 日本婷婷在线| 色99婷婷五月天| 欧美亚洲999| 五月婷婷激清网| 色色免费网站| 久久精品熟女亚洲AV麻豆| 婷婷五月色综合| 天天做天天视天天谢| 精品福利911| 久久综合影院| avh片在线观看| 一级精品999WWW| 色五月成人网| 2018夜夜草| 97香蕉碰碰人妻国产欧美| 五月天婷婷青青草| 久久ri精品| 五月婷婷xxx| 四月丁香五月婷婷久久| 99热九九在线| 久久婷网| 婷婷五月电影| 碰碰女| 欧美精品999| 亚洲黄3级片网站欧美| 欧美性二区| 久久66成人网站| 996热| 99热碰碰热| 夜夜夜夜撸夜夜操| 激情丁香五月天图片| 亚洲人成网亚洲欧洲无码久久| 婷婷99狠狠躁| 久Se视频在线观看| 996热| 黄网免费观看| 天天日天天爽| 天天干天天干天天干天天干天天干天天干天天 | AV电影在线播放| 五月天狠狠色| 成人短视频在线观看| 丁香九月综合激情| 五月婷婷婷| 九九九AAA热视频| 婷婷丁香五月激情图片| 国产亚洲99久久精品熟| 无码色| 超碰人人99| 少妇人妻凹凸视频| 色色五月丁香婷婷综合| 最新久久网址| 99re这里只有精品视频6| 久热这里| 操逼棍操逼| 视频一区二区在线| www.色综合.com| 精品牛仔裤超碰| 9久久久久久久久久久| 伊久久婷婷| 久久新地址| 丁香成人五月天| 色色色综合网| 丁香五月婷婷在线观看| 丁香五月激情啪啪| 丁香五月天AV在线| 成人电影在线免费试看| 婷婷五月天Av| caop视频| 丁香五月精品| 日本人妻A片成人免费看片| 五月丁香六月婷| 丁香五月宝贝激情网| 九九精品9| 天天噜噜| 欧美S码亚洲码精品M码| 婷婷激情五月天小说校园| 99在线精品免费视频| 激情婷婷五月色| 香蕉久久av一区二区三区| 五月婷婷另类| 激情文学 综合 九月| 五月丁香婷婷深深爱| 伊人婷婷五月天| 天天插天天射| 五月开心网| 九九热视频精品2| 丁香五月之久操视频| 91久久色| 99精品大片| 大香蕉精品视频| 亚洲 在线 另类| 免费亚洲婷婷| 狠狠色色| 激情五月丁香色色去久久| 综合网色| 久久草中文日韩欧美| 狠狠香婷婷五月| 一本色道久久88加勒比| 九九综合| 99热综合| 日本色久| 97热这里只有精品| 丁香五月桃花在线激情综合| 97在线观视频免费观看| 青草五月天| 99操逼| 婷婷四月 成人 狠狠干| 欧美日本国产欧美日本韩国99| 国产又黄又爽又色的免费| caopeng97日韩| 99热天堂| 狼人婷婷综合| 六月丁香天堂| 一起草日本| 91视频综合网| 丁香五月播播| 婷婷丁香五月综合网上| www狠狠| 久久综合丁香五月| www九九| 丁香五月天社区婷婷| 内射人妻视频国内| 裸体做A爰片毛片A片免费| 可以免费观看的AV| 思思热在线视频99| 九九九成人在线视频| 色色吧综合| 99久在线视频| 第四色五月婷婷| 婷婷色爱| 停停色综合伊人| 天天爱天天秀天天做| 色婷婷狠狠18yy| 九九在线这里只有精品视频 | 婷婷丁香六月| 五月丁香在线| 日本二级毛片二级毛片| 伊人久久丁香五月91| 高清无码网址| 激情网 久久| 丁香五月激情综合| 中文字幕丰满孑伦无码专区 | 天天在线天天综合网色| 日日色五月天| 开心五月色婷婷综合开心网| 丁香婷婷婷五月| 日日日影院| 婷婷六月色情| 夜夜干夜夜操| 97色伦另类图片小说视频| 九九热最新地址| 久色五月婷婷综合| 成人五月天视频播放| 开心五月色婷婷综合开心网| 泰州成人视频| 91色色色| www.99久| 五月天婷婷综合| 99ri精品| 色情婷婷久久五月天| 久久婷婷五月天激情四射| 性综合网| 99热免费| 色播激情| 日本在线视频播放91| 九月激情网| 一起草无码视频| 婷婷五月 丁香六月| 亚洲成人电影aaaa| 天天操天天插| 婷婷99| 色色哒五月婷婷六月丁香| 婷婷.com| 婷婷六月激情| 久久区区一二三av| 国产99美少妇| 五月丁香啪啪网| 99在线精品观看99| 就去色色五月丁香婷婷久久久| 婷婷五月丁香综合瑟瑟| 久久黄A片| 99色热视频| 久久免片| 国产精品美女久久久久AV超清| 猫咪伊人AV| 九九色院| 噜噜噜色噜噜| 五月天成人综合| 国产亚洲精品久久久久久郑州 | 色五天综合| 色婷婷综合丁香五月天| 五月丁香直播| 免费亚洲婷婷中文字幕| 99在线看视频| 色婷婷五月基地在线| 亚洲第一第二网站| 国产婷婷色综合AV蜜臀AV| 久草网大香视频| 五月欧美色播| 婷婷五月天久久| 婷婷五月花.97| 激情婷婷色色| 天天舔天天摸| 1024欧美看片| 激情图片婷婷| 五月开心网| 大香蕉人人网| 99成人免费热视频| 久草热8精品视频在线观看 | 五月婷婷丁香瑟瑟视频| 五月丁香综合网| 九九99香蕉在线视频播放| 99热香港| 99色色| 另类视屏| 婷婷综合在线| 1024日韩| 色综合综合色| 六月婷婷色色色| 狠狠婷婷色| 久草婷婷| 丁香桃色网| 在线观看亚洲AV| 狠狠色激情综合| 色五月综合网| aaaaaa片| 色婷婷免费观看| 热婷婷在线视频| Jh7Uf088VHafNm| 狠狠操狠狠操| 97久人人| 色婷婷久久综合| 99热www| 天天射夜夜骑| 成人小说色图婷婷五月| 都市激情五月婷婷亚洲| 9l久久久视频| 亚洲最大激情无码| 国内一级精品| 超碰在线人妻| 久热只有这里有精品| 99热国产| 香蕉综合网| 精品婷婷五| 婷婷六月综合激情| 狠狠操天天操天天操| 99热在线观看| 99热这里只有精品69| 五月激情综合网| 丁香五月情色| 粉嫩AV久久一区二区三区| 五月丁欧美| 综合五月婷婷| 婷婷色香六月综合激情| 九色亚洲| 九九热在线精品| 99热国产婷婷| 91超级碰碰| 99热91| 五月丁香啪啪啪| 99久久国产成人精品| 丁香五月AV| 人妻videos人妻高清| 超碰免费人| 丁香五月五婷| 色婷婷欧美| 久草热在线视频| 青青草a在线| 免费视频WWW在线观看网站| 五月开心啪啪| 婷婷九月狠狠色| 国产综合色婷婷精品久久| 丁香婷婷基地| 久久九九激情五月天| 无码人妻一区| 深爱五月月天| 黄色av高清| 亚洲天堂aaaa| 色色色精品无码区| 色噜久| 9精品在线| 婷婷五月天中文字幕.| 99ER热精品视频| WWW.99热| 色色色激情| 色五月婷婷在线观看第一页舔| 成人免费va| 五月天婷婷av| 日本在线观看99| 五月婷婷丁香啪啪| 伊人婷婷色激情丁香| 免费在线a| 丁香六月婷婷| 成人丁香| 五月婷婷乱| a九九热www| 色狠狠色噜噜AV天堂五区| 安息电影在线观看完整版| 99在线资源视频| 丁香九九九九| 天天日天天爱天天噪| 大香蕉综合在线| 91操黄| 啪啪啪大香蕉| 五月激情天| 97色色色色色色色色色色色色色| 国产99热| 99超级碰碰| 中文字幕 中文字幕明步 | 91精品国产日韩91久久久久久国模| A久久| 丁香婷婷成人网站| 亚洲色vA| 久婷婷久草| 影音先锋毛片网站| 国产精品岛国片在线观看免费| 九九热99re8热免费观看| 91操黄| 国产精品一区在线观看你懂的| 国产婷婷综合| 丁香六月成人| 26uuuuuuuu国产| 亚洲艹网| 成人在线日韩| 九九热在线观看6| 五月丁香久久综合色| 亚洲天天操| 一丁香五月天月AV| 天天日综合| 性爱电影科技贸易有限公司| 99亚洲综合| 人伦30P| 婷婷五月无码| 91久久色| 五月丁香激| 亚洲操B视频| 92久久久| 高清a片基地| 被强行糟蹋的女人A片| 婷婷深爱五月| 色色网站在线| 天天插综合网| 99视频内射三四| 五月婷婷婷婷| 五月丁香综合| 色99视频| 这里有精品| 超碰免费在线| 五月天婷婷小说| 狠狠做深爱婷婷久久综合一区| 激情小说之五月| 日本熟妇人妻在线| 五月开心深爱激情网| 天天色综合网1| 色综合色综合色综合| 激情五月天免费视频| 五月天婷婷导航| 伊人狠狠干| 激情六月一二| 欧美性爱一区| 思思热精品在线| 99色色视频| 欧美交换配乱吟粗大25P| 国产精品色色| 成人国产网| 五月色婷丁香| 色五月婷婷操逼| 亚洲成人免费在线| 激情五月丁香在线观看直播| 日撸夜撸日操| 五月天丁香婷婷社区| 亚洲第一黄网| 精品欧美一区二区三区久久久| 天天综合天综合久久网| 伊人玖玖网| 欧美色99| 激情五月婷婷综合视频| 日本五月天网站| 丁香色色网| 人人操av| 日韩av网站在线观看| 超碰chaompinm| 噜噜噜噜噜日本视频| 丁香六月亚洲综合| 激情伊人| 色九四色| 久久色情| 深爱五月日韩| 综合五月婷婷| 欧美日韩色色| 色色五月丁香| 国产综合A片| 超碰在线免费| 99小视频网站| 九九色热| www.AV在线| 日本女天天爽| 天天弄天天操| 日本人妻伦在线中文字幕| 中文字幕精品推荐免费在线观| 久久久99免费视频| 99精品无码网站| 大天天伊人| 国产AV一区二区三区最新精品| 综合九九久久| 操逼123网| 久久性操| 九九色黄色| 国产乱码久久| 婷婷操超碰| 野战J办公桌椅H| 91无码视频| 思思久热| 中文字幕免费高清电视剧| 五月丁香成年黄色| 丁香五月23111| 狠狠操狠狠操| 久久性操| 五月亭亭狠狠| 波多野结衣不卡AV| 色色网站在线免费观看视频| 五月婷精品| 色天使久久综合| 婷婷丁香五月天色播网站| 日韩综合久| Y11111111111少妇电影院| 色五月综合婷婷久久综合婷婷久久综合婷婷久久综合婷婷久久 | 一逼色综合| 天天干com| 五月激情综合网| 色狠狠999综合| 女人天堂 AV| 少妇人妻偷人精品无码视频新浪| 九九视频免费| 丁香五月婷婷影院| 超碰成人电影| 五月婷婷黄色| 天天肏在线观看| 五月婷婷啪啪| 99资源在线| 日本操逼九九九九58日本操逼| 欧美电影在线观看| 色五月天综合| www免费在线视频| 亚洲性爱干干| 日韩精品AV一区二区三区| 日韩色色网| 婷婷久久五月天| 午夜成人天堂久久无码日韩久久| 婷婷永久在线| 激情婷婷| 九九热在线视频| 五月婷六月综合在线观看| 五月丁香免费看| 久久婷婷啪啪视频| 五月婷婷激情五月| 日韩抽插操逼| 97一区二区| 狠狠操在线视频| 97爱艹婷婷开心丁香激情综合| www 五月天 com| 国产黄色在线观看| 五月婷婷网站| 视频1区2区| 综合性爱网| 五月天天天天天天天天天天天天天天天婷婷婷| 日本三级毛片| 丁香六月啪| 精品色情一区二区三区四区| 免费视频WWW在线观看网站| 久久五月丁香综合17C| 婷婷情色开心五月天99| 激情5月婷婷| 99色在线观看视频| 深爱激情综合| 伊人午夜综合色啪| 婷婷色在线播放| 日本激情91| 色10月婷婷视频| WWW.桔色成人.COM| 激情五月六月婷婷| 狠狠香蕉| 九九九激情网| 性爱网五月天| 久久九九99字幕| 碰人人97| 五月丁香六月婷婷久久| 夜夜操夜夜姧| 9久久久| www.zbzhongsen.com| WWW.五月天9999| 大香伊人久色| A1片久久久| 激情六月丁香综合| 五月丁香婷婷成人综合网| 五月婷婷六月丁香玖玖玫瑰91| 99热国产这里只有精品| 综合五月天婷婷色| 五月丁香婷中文| 99精品视频在线观看| 丁香五月精品| 五月丁香久久精品在线观看| 9热在线| 五月激情婷婷综合| 精品无码视频| 去干网av| 欧美一线视频| 在线理论片| www.色婷婷.com| 黄色大片又大粗又爽| 1024在线视频| 免费精品99| 丁香综合婷婷五月天| 色就是色婷婷五月亚洲激情| 婷婷五月丁香激情图片 | 另类小说五月天| 色播五月| 五月丁香六月婷婷手机无线| 婷婷色婷婷亚洲成人| 丰滿爆乳一区二区三区| 色香蕉影院| 狠狠色大香蕉| 婷婷五月天香蕉| 久久丁香婷婷五月天| 色婷婷AⅤ| 六月成人网| 丁香婷婷六月天| 久久精彩视频99| 亚洲色网址| 丁香五月天狠狠| 亚洲婷婷五月天激情综合| 超碰成人在线观看| 五月婷婷,狠狠操| 色色999三级片| 超碰v| 日韩成人精品中文字幕| 欧洲综合视频| 亚洲激情婷婷| 高清无码网址| 久久久精品人妻| 六月色丁香中文字幕| 99久久久国产大片| 99热超碰| 五月婷婷综合激情| 婷婷色导航| 六月婷久久| 久草网大香视频| 日本A片一区| 久久丁香婷| 成人亚洲精品久久久久| 香蕉AV777XXX色综合一区| 国产在这里只有精品| 91精品久久久久久77777| 亚洲成人网站在线播放| 婷婷97碰碰| 99热这里都是精品| 欧美久久网| 久久五月激情综合| 色色婷婷五月天| 欧美精品999| 九月丁香婷婷基地| 色久五月天| 六月天丁婷婷| 婷婷99狠狠躁| 色天五月天在线观看视频| AV操操操| www.五月婷婷.com| 精品乱码久久久久| 国产这里只有精品| 深爱五月网| 五月婷婷片| 99这里有精品视频| 99热网站| 国产精品久久久久久久久久免费| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 开心六月丁香五月婷婷| 婷婷狠狠久久| 热99精品视频| 综合伊人久久| 色色色热热热| 青青草视频免费观看| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 亚洲中文字幕网| 亚洲精品白浆高清久久久久久| 黄桃AV无码免费一区二区三区| 五月天sesese| 99啪啪网| av操逼网| 婷婷深爱五月丁香网| 综合久久99| 搡BBBB搡BBB搡五十| 男人大jjc女人免费视频| 婷婷黄色五月| 永久的网站AAAA | 大地9中文在线观看免费高清| 琪琪色网在线| 六月丁香综合| 色插综合网| 79精品视频在线观看,| 激情性爱五月天| 精品夜夜澡人妻无码AV| 久久日韩婷婷五月| 麻豆科斗777| 天天婷婷色六月| 久久婷婷五月天懂色| 久久激情五月网| 日日干日日| 欧美成人AAA片一区国产精品 | 亚洲一级AV在线免费播放| 亚洲精品网站色视频| 婷婷精品性性性性性性性| 久久婷婷啪啪视频| 亚洲182在线观看| 婷婷四色五月| 欧美丁香五月| 北京熟妇搡BBBB搡BBBB| 色色色区| 天天摸夜夜夜| 专区无日本视频高清8| 丁香五月网| 东北婷婷五月天| 大香网伊人久久综合| 五六月婷婷久久| 狠狠色婷婷7| 五月天社区婷婷丁香社区| 五月婷婷操操| 婷五月丁香俺| www.91婷婷| 97超碰色| 亚洲五月丁| 99综合视频| 五月婷婷影| 这里精品| 色婷婷综合久久| 丁香五月六月久久综合 | 五月丁香 啪啪| 激情婷婷五月社区| 丁香六月天婷婷色| 99re思思热久久| 天天综合91入口| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇 | 深爱五月激情网| 九月激情综合| 欧美激情伊人| 日本色狠狠| www.91av.com| 3p日韩网站视频| 狠狠干无码| 91精品国产99久久久久久天美| 亚洲色模骚货| 五月婷婷性爱网| 丁香涩涩五月天| 欧美私人家庭影院| 色婷婷六月性| 丁香色婷婷| 色噜噜狠狠色综合伊人| 99热精品中文字幕| 大香蕉综合在线| 丁香六月婷婷综合激情欧美| 97性视频| 色婷婷在线播放| 色欲天天综合| 色婷婷五月综合| 久久婷婷影院| 伊人五月天| 婷婷五月丁香六月伊人网| 综合网五月| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 精品欧美性爱超级爽| 77799热| 丁香五月天激情综合| 这里都是精品99| 开心五月激情网| 婷婷色五月天第7色| 天天弄天天操| 能看的av片| www五月婷婷88导航| 五月花婷婷丁香| 97久久超视频| 国产精品成人AV在线| 久久人人超| 九九热最新视频| 欧美日韩大黄| 婷婷五月成人社区| 色五月综合| 婷婷情色五月天| 色色色色热| 99色丁香婷婷综合网| 中文AV网站| 婷婷激情图片| 九九热九九| 丁香五月电影| AV天堂婷婷五月天| 大香蕉人人网| 婷婷五月综激情| 五月丁香综合啪啪啪啪啪| 色伦专区97中文字幕| 99视频这里有精品免费观看| 久久婷婷五月天激情| 丁香五月激情啪啪| 2025最新亚洲激情在线| 九九美女视频| 色情婷婷五月天| 久久成人天| 日韩精品一品二区三区的使用体验| 五月天社区| 99er在线观看| www.久久爱.com| 国产亚洲精品久久久久久豆腐| 天天干com| 久操人妻| 色9999综合久久| 五月婷婷av| 五月婷婷中文网| 久久久久久久久久久44| 操碰97| 久8色色| 丝袜激情网| 久久婷婷精品| 天天爽天天爽| 激情狠狠丁香月| 欧日韩成人| WWW嗯嗯啊啊啊啊| 久久久久9| 五月婷婷之美女图片| 激情九月婷婷| 亚洲一二三网| 老司机日日夜夜青草| 五月天激情视频网站| 色综合九九| 久久丁香综合精品综合| 日日操夜夜爽| 久久九九国产精品怡红院| 99精品这里只有免费视频| 丁香六月激情综合网| 熟女少妇内射日韩亚洲| 婷婷的99视频网站| 99热地址| 激情九九这里只有精品| 久久66er久久| 婷婷久久99| 人妻六月天| 成人超碰网| 五月天开心网| 久久久久久激情| 能直接看的av网站| www.思思99热| 免费的日逼视频| 久久综合干| www.激情五月天.con| 国产婷婷婷| 五月综合久久| 开心五月深爱五月| 噜噜噜狠狠色综| 婷婷五月天在线视频网站| 色欲五月婷婷| 天天狠狠色噜噜| 九九热10| 丁香丁香激情网| 欧美婷婷| 久热伊人| 丁香五月激情啪啪| 亚洲中文字幕AV| 生活片五区| 狠狠爱婷婷丁香| 99热999| 激情五月最新网址| 久久XX日本综合| 亚洲中文字幕AV在线| 九九热精品视频在线观看| 激情综合五月| 婷婷五月天成人网| 99色综合| 丁香六月婷婷久久综合| 狠狠色丁香| 五月丁香| 国产精品久久久久久久久久 | 97精品欧美91久久久久久久| 一本久道综合99| 久久九九@| 日本系列_4页_777FP| 伊人综合色干| 久热 91| 91人妻PORNY九色大屁股| 亚洲操操| 天天看片日日夜夜| 色青青五月| 六月丁香婷婷天堂| 人妻精品久久久久久| 亚洲色色香蕉| 99热这里只有精品9| 久婷五月| 色色丁香| 国自产拍偷拍精品啪啪一区二区| 成人无码髙潮喷水A片| 丁香六月成人| 毛片蕉地一二| 日本久久人人| 亚洲丁香婷婷五月天综合色| 五月丁香在线精品| 婷婷色av| 婷婷大乡焦噜噜| av大香蕉| 三十熟女| 激情五月天99色| 99ri国产| 停停色综合伊人| 综合五月丁香六月婷婷| 色综合五月| 久久国产色| 亚洲国产精品VA在线看黑人| 久久ri精品视频| 色色激情网| 丁香六月av| 日本色色色| www.色综合| 国产肥白大熟妇BBBB视频| 九一九九黄色| 久激情网| 好激情在线综合网| 日本激情91| 成人做爰A片免费看网站找不到了 噼里啪啦在线观看免费完整版视频 | 色婷婷手机在线| 亚州日本欧州韩美高青高潮一| www.99热这里只有精品| 色婷婷电影| 伊人香大香蕉视频| 国产精品操| 六月婷五月丁香| 丁香五月色| 成人精品在线观看| 五月天基地| 噜噜噜噜噜日本视频| 天天做天天爱天天爽综合网| 久久五月天婷婷| 日韩有码一区| 色五月成人婷婷| 五月天激情图片| 九九香蕉网| 久久大香蕉伊人| 亚洲视频色色| 亚洲精品色| 国产精品久久久久久久久久久久| 啪啪东京热| 天天粽合合合合| 91视频一起草| 一本到不卡高清DVD| 91狠狠综合久久久| 无码人妻一区| 精品国产一区二区三区四区阿崩| 久久婷婷人人| 五月天婷婷青青草| 中文字幕 中文字幕明步| 热久久婷婷| 青草视频在线蜜臀| 99精品久久| 99久精品| 色爱终和网| 国产精产国品一二三在观看| 激情图片婷婷| 婷婷五月天在线观看第二页| av大香蕉| 久热9| 中文字幕丰满人妻无码专区| 婷婷色资源| 五月色无码| 五月亭亭六月天| 国产性爱一级| 天天色色天天| 久久91久久精品久久| 色六月天天激情综合网| 色欲婷婷五月天| 99热精品10| 五月婷婷激情久久| 射满了还射免费在线观看 -午夜版全集-新视觉影院 | 亚洲精品字幕在线观看| 综合色播| 久久久WWW| 婷婷99丁香| 精品久久66| 色综合99无码| 思思热在线精品视频网站| 国产99久久久国产精品免费看| 开心五月婷婷激情| 國語久久婷| 五月丁香激| 99九九视频| 国产精品色婷婷久久久精品| 综合激情站| 九月婷婷在线观看| 日日夜夜爽| 婷色综合| 色色综合网络| 九热av| 久久99美女精彩视频| 久久视9精| 久久这里只有欧美| www久久久久久久| 五月丁香婷婷三级| 亚洲天堂AV综合网| 九九精品视频在线观看| 99九九99九九九视频精品| 五月天激情AV| 综合精品99| 免费视频无码| 丁香五月婷婷AV| 日韩性视频| 久久之人妻| 国产人妻777人伦精品HD| 色。 婷婷婷| 欧美特大片黄| 色婷婷裸体色性在线| 超碰啪啪网| 激情五月天色播| 色九月婷婷综合| 婷婷免费视频| 欧美va亚洲va| 国产精品成人AV在线观看春天| 奸逼视频| AV中文字幕夜夜操b天天摸bb | 99热日本| 高清av在线国产| 亚洲婷婷五月| 色10月婷婷视频| 国产亚洲精品AAAAAAA片| 狠狠色综合网站| 丁香五月综合久久| 亭亭色色五月天| www.精品99| 久久玖玖99| www.色9| 安息电影在线观看完整版| 九九婷婷热| 六月丁香色色| 色婷婷成人丁香| 丁香五月婷婷图片综合| 深爱激情综合| 激情婷婷五月久久| 国产看真人毛片爱做A片| 久久久久久人妻久久久久久久久久人妻久久久 | 四色五月视频| www.夜夜操| www,五月天激情| 99男人的天堂| 大伊香蕉精品视频在线| 五月亭亭网成人在线视频| 婷婷丁香人妻天久久| 丁香五月婷婷激情97| 影音先锋天天日| 丰满少妇乱A片无码| 99操逼| 日韩啪啪网| 一二线视频 另类| 免费视频无码| 管管補管管紱| 99人人操人人操人人精| 色丁香五月婷婷| 涩五月婷婷| 婷婷爱综合| 大香蕉狠狠爱主页| 无码AV免费精品一区二区三区| 亚洲激情五月天| 思思99精品视频在线观看| 九月丁香八月婷婷久久综合久97| 色人久久| 丁香五月社区| 婷婷激情五月天亚洲综合| 六月丁香婷婷综合狠狠爱夜夜爱| 欧美精品在线观看| 婷婷五月天综合网| 99热中国| 伊人五月婷婷| 七七九色| 久久久久久久久久久jjjj| 久久久久婷婷| www.99热在线| 夜夜做夜夜愛| 激情丁香久久| 99久扒热| 午夜福利8055| 又大又粗九一在线| 99热在线看| 99精品一二三四视频| 五月婷婷说| 婷婷久久六月天| 亚洲午夜精品久久久久久人妖| 99免费青青蜜臀| 五月丁香色停停啪啪啪| 天天干天天干天天干| www.jiujiujiu| 99热精品中文字幕| 色五月色五天色情网| 99惹| 丁香五月天在线观看视频| 67194中文字幕| 欧美123区免| 爱iii做iiii日日| 99热在线观看| 国产精品99久久久久久久女警| 亚洲中文字幕网| WWW99热| 欧美性猛交99久久久99| 六月丁香VA| 色五月首页| 婷婷五月天激情五月天网站| 激情婷婷亚洲五月| 99精品色色| 丁香香五月激情免费视频| 亚洲天堂久久| 色婷| 五月色网| 亚洲精品无码久久| 久热欧美| 超碰免费人人| 色婷婷狠狠| 五月婷婷干干干| 日韩九九视频| 婷婷香香五月| 天天日天天狠狠操| 日日操夜夜爽白洁| 久久亚洲婷婷综合色五月| 夜夜骑操AV| 人人爱天天摸摸天天爱| 五月丁香婷婷激情在线视频| 婷婷久久国产视频| 99热精品一区| 天天夜夜操| 99在线精品视频免费观看20| 婷婷五月在线播放| 另类激情综合| 五月天社区| 亚洲精品影视| 久久婷婷成人综合色怡春院| 久久婷婷视频| 裸睡玩奶头(高H)| 五月综合激情久久| 日本在线观看aaa 99| 9久9久| 欧美婷婷丁香五月社区| 欧美性二区| www.日日日.com| 天堂草在线观| 婷婷五月丁香在线视频| www.婷婷| 天天日,天天干,天天操| 少妇性按摩无码中文A片| 超碰成人黄色网| 免费观看日韩成人av| 91好好热日本在线| www.五月婷婷| 亚洲五月婷婷在线| 五月深爱激情网| 97欧美在线| 欧美久热| 日本A片一区| 97精品欧美91久久久久久久| 狠狠操天天操| 思思热久久久久思思热| 另类激情中文| 色婷婷视频在线| 秋霞少妇AV网站| 4399在线观看免费毛片| 五月色婷婷在线观看| 狠狠插狠狠| 殴美激情综合网| 少妇性BBB搡BBB爽爽爽视頻| 午夜福利成人AV91| 少妇激情基地| 激情宗合网激情五月天| 97干综合网| www.色五月| 亚洲国产网站| WWW,激情五月天,COM| 婷婷免费无视频| 任你爽精品免费视频6| 五月天成人综合| 日本在线观看91| 激情五月综合色| 五月丁香AV在线| 99在线小视频| 97人人草| 99九九精品视频推荐| 丝袜人妻| 天天精品视频在线观看视频| 亚洲综合五月天婷婷丁香| AA片在线观看视频在线播放| 国产AV不卡福利| 99热久久最新地址| 97se视频在线| 日韩在线观看网址| 69久久99精品久久久久婷婷| 婷婷五月丁香伊人网| 91九色首页| 超级97碰碰| 天天草天天爱| 丁香五月网址| 9999热免费视频视频| 丁香五月 综合| 天天草天天爽| www.金莲av| 丁香婷婷精品视频| 天天做天天爱天天玩| 婷色天堂| 亚洲va日| 99九九综合久久九九| 五月婷婷性爱网| 久久久久亚洲A∨成人乱码电影| h在线看免费版在线看| 91大操| 色婷婷狠狠干| 91在线日| 久久影视婷婷五月| 六月五月婷婷| 久久99国产综合精品免费| 亚洲综合五月天婷婷丁香| 婷婷五月天小说网| av操逼网| 五月婷婷 六月丁香| 五月婷婷综合视频| 九九综合伊人| 91九色在线视频| 成人短视频免费| 六月色丁香中文字幕| 国产欧美精品AAAAAA片| 五月丁香六月色婷婷综合五月天| 日本久久人| 亭亭玉月丁香| www激情| 丁香久久激情俄| 五月丁香龟婷婷| 五月婷婷久久大片| 97色伦另类图片小说视频 | 欧美va视频| AV成人在线播放| 大香AV| 亚洲婷婷欧美婷婷| www.99免费视频| 色婷婷亚洲五月天| ady狠狠入| 夜夜操,天天撸| 久久男人网婷婷| 婷婷五月天在线观看第二页| 90色免费视频| 久久性爰视频这里只有精品| 涩丁香| 2025天天操| 香蕉五月婷婷| www激情| 国产激情在线| 免费婷婷| 另类小说五月天| 91精品久久久久久77777|