日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

物聯(lián)網(wǎng)云監(jiān)控平臺(tái)開發(fā)實(shí)戰(zhàn):基于MQTT的設(shè)備管理系統(tǒng)設(shè)計(jì)

物聯(lián)網(wǎng)云監(jiān)控平臺(tái)開發(fā)實(shí)戰(zhàn):基于MQTT的設(shè)備管理系統(tǒng)設(shè)計(jì) 簡(jiǎn)介一套面向物聯(lián)網(wǎng)開發(fā)者的WEB設(shè)備管理與云監(jiān)控源碼項(xiàng)目適用于智能家居、工業(yè)自動(dòng)化等場(chǎng)景解決設(shè)備遠(yuǎn)程接入、狀態(tài)監(jiān)測(cè)、數(shù)據(jù)管理與可視化的實(shí)際問(wèn)題。壓縮包共1915個(gè)文件約27.24MB以PHP后端邏輯、HTML/JS前端頁(yè)面、CSS樣式、PNG圖片素材為主同時(shí)包含MySQL數(shù)據(jù)庫(kù)腳本、配置文件及說(shuō)明文檔便于本地搭建和二次開發(fā)。已有836人學(xué)習(xí)瀏覽。源碼涵蓋設(shè)備注冊(cè)、數(shù)據(jù)上報(bào)、API接口、規(guī)則引擎、可視化界面等完整模塊并提供MQTT通信示例與C語(yǔ)言組件開發(fā)者可據(jù)此掌握從設(shè)備接入到前端展示的完整鏈路還可結(jié)合Excel數(shù)據(jù)表格和Markdown筆記理解項(xiàng)目結(jié)構(gòu)適合希望系統(tǒng)學(xué)習(xí)IoT開發(fā)和云監(jiān)控實(shí)踐的初中級(jí)工程師。1. 項(xiàng)目背景與整體設(shè)計(jì)思路1.1 為什么需要一套物聯(lián)網(wǎng)云監(jiān)控平臺(tái)我做過(guò)不少設(shè)備管理類項(xiàng)目但真正把設(shè)備接入、實(shí)時(shí)監(jiān)控、遠(yuǎn)程運(yùn)維、告警通知串成一條完整閉環(huán)的還是這套物聯(lián)網(wǎng)云監(jiān)控WEB設(shè)備管理系統(tǒng)。以前很多工廠或集成商的設(shè)備管理方式說(shuō)句不好聽的靠的就是一張Excel表和老師傅的經(jīng)驗(yàn)。設(shè)備掛沒(méi)掛、數(shù)據(jù)對(duì)不對(duì)、耗了多少電全憑人工去現(xiàn)場(chǎng)看效率低不說(shuō)出了問(wèn)題往往已經(jīng)是幾個(gè)小時(shí)之后了。這套項(xiàng)目的核心價(jià)值就是給傳統(tǒng)設(shè)備裝上物聯(lián)網(wǎng)這雙眼睛。通過(guò)傳感器和智能網(wǎng)關(guān)把設(shè)備狀態(tài)、環(huán)境參數(shù)、能耗數(shù)據(jù)實(shí)時(shí)采集上來(lái)再在WEB端用圖表、儀表盤、地圖等形式直觀展示。運(yùn)維人員不用再頻繁跑現(xiàn)場(chǎng)坐在電腦前甚至用手機(jī)瀏覽器就能看到設(shè)備的實(shí)時(shí)狀態(tài)。平臺(tái)內(nèi)置的告警規(guī)則還能在設(shè)備異常時(shí)第一時(shí)間推送通知把故障響應(yīng)時(shí)間從小時(shí)級(jí)壓縮到分鐘級(jí)這背后省下的人力成本和產(chǎn)能損失做過(guò)工業(yè)項(xiàng)目的人心里都有數(shù)。1.2 技術(shù)選型背后的真實(shí)考量做物聯(lián)網(wǎng)平臺(tái)技術(shù)棧的選擇直接決定后續(xù)的開發(fā)效率和運(yùn)維成本。這套源碼的技術(shù)路線比較主流后端采用Java Spring Boot框架前端使用Vue.js Element UI數(shù)據(jù)庫(kù)選用MySQL存儲(chǔ)業(yè)務(wù)數(shù)據(jù)消息通信層用的是EMQX或Mosquitto這類MQTT Broker。為什么這么選Spring Boot的生態(tài)成熟集成MyBatis、Redis、定時(shí)任務(wù)都非常順手Vue.js配合Element UI做后臺(tái)管理界面效率極高畢竟設(shè)備管理頁(yè)面的形態(tài)大家都熟悉——表格、表單、彈窗、樹形結(jié)構(gòu)這套組合閉著眼睛都能寫MQTT協(xié)議則是物聯(lián)網(wǎng)場(chǎng)景的事實(shí)標(biāo)準(zhǔn)帶寬占用低、QoS機(jī)制可靠非常適合大量設(shè)備的長(zhǎng)連接場(chǎng)景。不少同學(xué)會(huì)糾結(jié)要不要上微服務(wù)或者直接用Netty自己寫通信層。我的建議是如果不是千萬(wàn)級(jí)設(shè)備接入體量單體應(yīng)用加MQTT Broker的方案完全夠用開發(fā)成本低、排查問(wèn)題方便后期真到了瓶頸階段再按模塊拆分也不遲。做物聯(lián)網(wǎng)平臺(tái)跑通業(yè)務(wù)閉環(huán)永遠(yuǎn)是第一優(yōu)先級(jí)過(guò)度設(shè)計(jì)是新手最容易犯的毛病。2. 系統(tǒng)架構(gòu)與核心模塊拆解2.1 三層架構(gòu)設(shè)備端、平臺(tái)端、WEB端整個(gè)平臺(tái)在大體上分為三層設(shè)備接入層、平臺(tái)服務(wù)層、WEB展示層。設(shè)備接入層負(fù)責(zé)各類傳感器、控制器、智能網(wǎng)關(guān)的數(shù)據(jù)采集和指令下發(fā)通過(guò)MQTT協(xié)議與平臺(tái)保持長(zhǎng)連接平臺(tái)服務(wù)層是核心大腦負(fù)責(zé)設(shè)備認(rèn)證、數(shù)據(jù)解析、存儲(chǔ)、規(guī)則引擎、告警計(jì)算等WEB展示層面向運(yùn)維人員和管理員提供設(shè)備管理、實(shí)時(shí)監(jiān)控、數(shù)據(jù)報(bào)表、系統(tǒng)配置等界面。這三層之間通過(guò)HTTP和MQTT兩類協(xié)議交互。HTTP用于前后端業(yè)務(wù)接口比如登錄、設(shè)備增刪改查、歷史數(shù)據(jù)查詢MQTT用于實(shí)時(shí)數(shù)據(jù)上行和指令下行。為什么要用兩種協(xié)議因?yàn)闃I(yè)務(wù)操作和實(shí)時(shí)通信的訴求不一樣HTTP請(qǐng)求響應(yīng)模式適合低頻、可控的操作而設(shè)備數(shù)據(jù)是持續(xù)產(chǎn)生、需要主動(dòng)推送的輪詢HTTP不僅浪費(fèi)帶寬延遲也不可控。這種混合架構(gòu)是當(dāng)前物聯(lián)網(wǎng)平臺(tái)的主流做法既保證交互體驗(yàn)又兼顧實(shí)時(shí)性能。2.2 數(shù)據(jù)存儲(chǔ)時(shí)序數(shù)據(jù)與業(yè)務(wù)數(shù)據(jù)分離設(shè)備產(chǎn)生的數(shù)據(jù)有一個(gè)顯著特點(diǎn)寫入頻繁、更新極少、帶有時(shí)間戳。如果和業(yè)務(wù)數(shù)據(jù)混在一起存隨著時(shí)間推移表會(huì)變得非常大查詢效率也越來(lái)越差。這套項(xiàng)目里的做法是將兩類數(shù)據(jù)分開存儲(chǔ)設(shè)備基本信息、用戶信息、組織架構(gòu)、告警規(guī)則等存在MySQL業(yè)務(wù)庫(kù)溫濕度、電壓、電流這類遙測(cè)數(shù)據(jù)按天或按月分表也可以選擇存入InfluxDB、TDengine等時(shí)序數(shù)據(jù)庫(kù)。這里有個(gè)設(shè)計(jì)細(xì)節(jié)值得拓展一下很多設(shè)備數(shù)據(jù)本身對(duì)實(shí)時(shí)性要求高但對(duì)歷史精度要求沒(méi)那么苛刻所以在存儲(chǔ)策略上可以做降采樣。比如原始數(shù)據(jù)每5秒一條存3個(gè)月后可以聚合為每分鐘一條存1年后再降為每10分鐘一條。這樣既保證近期數(shù)據(jù)的高精度又能控制長(zhǎng)期存儲(chǔ)的成本。代碼里通常用一個(gè)定時(shí)任務(wù)來(lái)完成數(shù)據(jù)清理和聚合調(diào)用時(shí)序庫(kù)的連續(xù)查詢功能就能實(shí)現(xiàn)。這套方案對(duì)于預(yù)算有限的團(tuán)隊(duì)特別實(shí)用因?yàn)榉?wù)器磁盤沒(méi)那么容易被打滿。2.3 平臺(tái)的核心能力邊界這套源碼作為中小型物聯(lián)網(wǎng)平臺(tái)覆蓋的能力包括設(shè)備管理、實(shí)時(shí)監(jiān)控、遠(yuǎn)程控制、告警中心、數(shù)據(jù)統(tǒng)計(jì)、用戶權(quán)限、操作日志等。設(shè)備管理支持批量導(dǎo)入導(dǎo)出方便初始化或者遷移遠(yuǎn)程控制支持下發(fā)指令并反饋執(zhí)行結(jié)果告警中心支持按設(shè)備分組、按規(guī)則模板批量配置閾值告警數(shù)據(jù)統(tǒng)計(jì)提供曲線圖和報(bào)表導(dǎo)出用于分析運(yùn)行趨勢(shì)。在實(shí)際落地中平臺(tái)還有幾個(gè)隱藏價(jià)值點(diǎn)容易被忽略一是操作日志完備誰(shuí)在什么時(shí)間操作了哪臺(tái)設(shè)備全程留痕這在工廠審計(jì)中很關(guān)鍵二是開放API接口方便與第三方系統(tǒng)如ERP、MES對(duì)接三是數(shù)據(jù)看板支持大屏展示會(huì)議室墻上的大屏接上這個(gè)頁(yè)面整個(gè)產(chǎn)線狀態(tài)一目了然很適合做成果匯報(bào)。這套源碼的邊界和應(yīng)用場(chǎng)景基本覆蓋了中小型項(xiàng)目的絕大多數(shù)需求。3. 設(shè)備接入與上下行數(shù)據(jù)鏈路3.1 MQTT接入流程與設(shè)備認(rèn)證設(shè)備接入的第一步是認(rèn)證。每個(gè)設(shè)備在平臺(tái)注冊(cè)后會(huì)生成唯一的設(shè)備標(biāo)識(shí)如產(chǎn)品Key和設(shè)備序列號(hào)設(shè)備端連接MQTT Broker時(shí)使用設(shè)備證書或Token進(jìn)行認(rèn)證。最常用的做法是采用一機(jī)一密的機(jī)制平臺(tái)為每一臺(tái)設(shè)備生成專屬的ClientId和密碼設(shè)備連接時(shí)攜帶這些信息Broker通過(guò)認(rèn)證插件校驗(yàn)合法性非法設(shè)備直接拒絕連接。從實(shí)操層面看設(shè)備接入流程可以拆成四步第一步在WEB端添加產(chǎn)品定義產(chǎn)品的數(shù)據(jù)模型包括屬性、事件、服務(wù)三類能力第二步為具體設(shè)備實(shí)例填寫序列號(hào)等信息獲取連接憑證第三步設(shè)備端使用MQTT客戶端庫(kù)如Eclipse Paho、MQTT.fx連接Broker訂閱指令主題第四步設(shè)備上報(bào)數(shù)據(jù)后平臺(tái)驗(yàn)證數(shù)據(jù)格式、寫入數(shù)據(jù)庫(kù)并更新設(shè)備在線狀態(tài)。這套流程走順了后面接新設(shè)備就是純粹的配置工作不用改代碼。3.2 數(shù)據(jù)上行從JSON到結(jié)構(gòu)化存儲(chǔ)設(shè)備上報(bào)的數(shù)據(jù)格式通常有兩種一種是非標(biāo)的JSON字符串另一種是物模型定義的標(biāo)準(zhǔn)數(shù)據(jù)格式。推薦使用物模型的方式因?yàn)檫@樣平臺(tái)可以通過(guò)JSON Schema校驗(yàn)數(shù)據(jù)合法性新設(shè)備接入也不用為每種設(shè)備寫一套解析代碼。例如一個(gè)溫濕度傳感器上報(bào)的JSON內(nèi)容大致為{temperature:25.6,humidity:60.3,deviceId:SN001}平臺(tái)收到后先做格式校驗(yàn)再映射到內(nèi)部數(shù)據(jù)結(jié)構(gòu)最終寫入MySQL或時(shí)序數(shù)據(jù)庫(kù)。這個(gè)過(guò)程有幾個(gè)坑需要特別注意第一字段名的統(tǒng)一設(shè)備端上報(bào)temperature數(shù)據(jù)庫(kù)字段也叫temperature代碼里不會(huì)出歧義第二數(shù)據(jù)截?cái)鄦?wèn)題浮點(diǎn)數(shù)精度在傳輸過(guò)程中可能丟失建議后端用BigDecimal或Decimal類型存儲(chǔ)避免后續(xù)統(tǒng)計(jì)對(duì)不上第三時(shí)間戳規(guī)范化設(shè)備上報(bào)的時(shí)間可能是本地時(shí)間也可能是UTC時(shí)間必須統(tǒng)一轉(zhuǎn)換為服務(wù)器時(shí)區(qū)的DateTime否則報(bào)表的時(shí)間線會(huì)亂套。這些細(xì)節(jié)看似零碎但直接影響數(shù)據(jù)質(zhì)量而數(shù)據(jù)質(zhì)量就是物聯(lián)網(wǎng)平臺(tái)的命根子。3.3 指令下發(fā)同步確認(rèn)還是異步通知遠(yuǎn)程控制是物聯(lián)網(wǎng)平臺(tái)的一個(gè)重要面。指令下發(fā)的流程是WEB端點(diǎn)擊控制按鈕后端服務(wù)收到請(qǐng)求后將控制指令發(fā)布到該設(shè)備對(duì)應(yīng)的MQTT主題設(shè)備端訂閱該主題并執(zhí)行動(dòng)作執(zhí)行完畢后將結(jié)果上報(bào)。這里需要區(qū)分平臺(tái)命令送達(dá)和設(shè)備執(zhí)行成功兩個(gè)概念前者只表示消息到達(dá)Broker后者需要設(shè)備端回復(fù)確認(rèn)指令。在項(xiàng)目實(shí)踐中我習(xí)慣把所有下發(fā)的指令記錄到指令表并維護(hù)一個(gè)狀態(tài)字段取值是待下發(fā)、已送達(dá)、執(zhí)行中、成功、失敗、超時(shí)。后端下發(fā)消息后通過(guò)定時(shí)任務(wù)輪詢指令狀態(tài)如果超過(guò)設(shè)定閾值仍未收到設(shè)備回復(fù)就自動(dòng)標(biāo)記超時(shí)。這種機(jī)制能讓W(xué)EB端界面向用戶展示準(zhǔn)確的指令執(zhí)行狀態(tài)而不是發(fā)出去就黑盒狀態(tài)排查離線場(chǎng)景下的假死指令非常好用。3.4 設(shè)備在線狀態(tài)與心跳機(jī)制設(shè)備在線狀態(tài)判斷是物聯(lián)網(wǎng)平臺(tái)基礎(chǔ)卻容易出問(wèn)題的一環(huán)。純TCP長(zhǎng)連接可以直接通過(guò)斷開事件判定掉線但MQTT的心跳包機(jī)制需要單獨(dú)處理。設(shè)備端按設(shè)定間隔發(fā)送心跳例如每60秒一次Broker如果在1.5倍的心跳時(shí)間內(nèi)沒(méi)有收到任何報(bào)文就判定連接斷開。平臺(tái)側(cè)通過(guò)訂閱在線狀態(tài)主題或查詢Broker的客戶端列表來(lái)感知這些變化。這里要說(shuō)明一個(gè)實(shí)際經(jīng)驗(yàn)單純依賴Broker連接狀態(tài)還是不夠的因?yàn)橛行┰O(shè)備斷電前來(lái)不及發(fā)送遺囑消息主機(jī)已經(jīng)掉了Broker雖然能感知但展示層如果做了本地緩存狀態(tài)就會(huì)不一致。我建議平臺(tái)在設(shè)備狀態(tài)判斷時(shí)采用雙保險(xiǎn)Broker連接狀態(tài)為主要依據(jù)服務(wù)端再做一層最后活躍時(shí)間校驗(yàn)超過(guò)設(shè)定時(shí)間強(qiáng)制標(biāo)記為離線。這樣即使在Broker異常或數(shù)據(jù)推送延遲的場(chǎng)景下界面展示的在線狀態(tài)也不會(huì)失真太久。4. 云監(jiān)控核心功能實(shí)現(xiàn)4.1 實(shí)時(shí)數(shù)據(jù)大屏與監(jiān)控看板實(shí)時(shí)監(jiān)控功能是這套平臺(tái)的門面。它包含設(shè)備狀態(tài)總覽、實(shí)時(shí)數(shù)據(jù)儀表盤、地圖分布展示、告警滾動(dòng)播報(bào)等模塊。WEB端通過(guò)WebSocket與后端保持長(zhǎng)連接當(dāng)設(shè)備上報(bào)數(shù)據(jù)后后端服務(wù)將最新的點(diǎn)播數(shù)據(jù)推送到前端前端自動(dòng)更新表格或圖表達(dá)到秒級(jí)看到現(xiàn)場(chǎng)變化的效果。大屏看板的實(shí)現(xiàn)需要從設(shè)計(jì)上區(qū)分實(shí)時(shí)數(shù)據(jù)和歷史數(shù)據(jù)兩種數(shù)據(jù)流。實(shí)時(shí)數(shù)據(jù)走WebSocket即時(shí)推送直接用當(dāng)前最新值刷新看板上的儀表盤指針和數(shù)字實(shí)時(shí)變化歷史趨勢(shì)曲線則通過(guò)HTTP調(diào)用查詢接口獲取按時(shí)間范圍返回聚合后的數(shù)據(jù)點(diǎn)。尤其需要注意的是數(shù)據(jù)頻率的適配如果設(shè)備每5秒上報(bào)一次數(shù)據(jù)而看板只需要30秒級(jí)別的刷新那就不應(yīng)該讓W(xué)ebSocket每條都推送再重繪圖表中間加一層數(shù)據(jù)緩沖和節(jié)流可以大幅降低前端開銷。這套系統(tǒng)在監(jiān)控大屏場(chǎng)景下的加載速度和流暢度都比我之前用輪詢方案做的第一版不知道強(qiáng)了多少。4.2 告警規(guī)則引擎與通知渠道告警是物聯(lián)網(wǎng)監(jiān)控的核心痛點(diǎn)需求。沒(méi)有告警光屏上看到數(shù)據(jù)異常等人工反應(yīng)過(guò)來(lái)?yè)p失已經(jīng)造大了。平臺(tái)內(nèi)置了一套規(guī)則引擎支持為每個(gè)物理量配置多個(gè)告警規(guī)則比如溫度高于80度觸發(fā)緊急告警持續(xù)5分鐘仍然高于75度觸發(fā)高溫預(yù)警。規(guī)則引擎的核心就是對(duì)流式數(shù)據(jù)進(jìn)行持續(xù)計(jì)算每條新數(shù)據(jù)進(jìn)來(lái)都要做閾值判斷同時(shí)還要處理持續(xù)時(shí)長(zhǎng)、恢復(fù)判斷、告警去重等問(wèn)題。告警消息的觸達(dá)方式也是物聯(lián)網(wǎng)平臺(tái)比較看重的一塊。除了在WEB端彈出通知和告警列表之外往往還要支持郵件、短信、企業(yè)微信/釘釘機(jī)器人等渠道。在項(xiàng)目里我實(shí)現(xiàn)了一個(gè)簡(jiǎn)單的策略模式定義一個(gè)告警通知接口不同渠道各自實(shí)現(xiàn)一個(gè)發(fā)送方法告警觸發(fā)時(shí)按照規(guī)則配置的路由策略決定發(fā)哪個(gè)渠道。短信適合值班人員接收的緊急告警郵件適合常規(guī)日?qǐng)?bào)企業(yè)微信群機(jī)器人適合運(yùn)維協(xié)同?;ㄥX買短信的人都知道渠道收斂很重要不然一分鐘能給你發(fā)一兩百條告警短信誤報(bào)和重復(fù)告警能煩死人。4.3 歷史數(shù)據(jù)查詢與報(bào)表統(tǒng)計(jì)歷史數(shù)據(jù)是設(shè)備優(yōu)化和故障分析的原始依據(jù)。平臺(tái)提供兩種查詢方式原始數(shù)據(jù)明細(xì)查詢和聚合統(tǒng)計(jì)。明細(xì)查詢用于定位某個(gè)時(shí)間點(diǎn)的具體數(shù)據(jù)聚合統(tǒng)計(jì)用于分析趨勢(shì)、均值、峰值等。比如查詢某臺(tái)設(shè)備一周內(nèi)的溫度最大值、平均值用于判斷設(shè)備運(yùn)行環(huán)境是否穩(wěn)定。報(bào)表模塊可以導(dǎo)出Excel或生成PDF方便運(yùn)維會(huì)議匯報(bào)。在實(shí)現(xiàn)上有幾個(gè)效率點(diǎn)值得注意。第一查詢條件必須帶時(shí)間范圍索引否則后期數(shù)據(jù)量大了會(huì)慢到?jīng)]法用第二聚合統(tǒng)計(jì)盡量在數(shù)據(jù)庫(kù)層面完成SQL里用GROUP BY配合時(shí)間窗口函數(shù)不要把所有數(shù)據(jù)撈到Java內(nèi)存里再聚合第三緩存熱數(shù)據(jù)最近一小時(shí)的實(shí)時(shí)數(shù)據(jù)可以放在Redis里查詢時(shí)優(yōu)先走緩存緩存未命中再落庫(kù)。這些優(yōu)化做完大數(shù)據(jù)量下的報(bào)表打開速度能快一個(gè)數(shù)量級(jí)用戶體感完全不同。4.4 視頻監(jiān)控與告警聯(lián)動(dòng)很多物聯(lián)網(wǎng)平臺(tái)還有接入攝像頭視頻流的場(chǎng)景。源碼里通過(guò)GB28181協(xié)議或RTSP拉流方式接入網(wǎng)絡(luò)攝像頭WEB端通過(guò)Flv.js或WebRTC播放實(shí)時(shí)視頻流。更實(shí)用的是告警聯(lián)動(dòng)功能當(dāng)某個(gè)報(bào)警觸發(fā)后系統(tǒng)自動(dòng)調(diào)取關(guān)聯(lián)攝像頭的錄像或截圖保存到告警記錄中方便事后回溯現(xiàn)場(chǎng)。這在養(yǎng)殖場(chǎng)、倉(cāng)庫(kù)、配電房等場(chǎng)景中極其有用光看數(shù)據(jù)很難判斷現(xiàn)場(chǎng)是什么狀況但視頻畫面一看就明白了。不過(guò)說(shuō)實(shí)話視頻監(jiān)控模塊在中小型項(xiàng)目里不宜做太深涉及視頻轉(zhuǎn)碼、存儲(chǔ)、回放的話工程量會(huì)成倍上漲。建議初期只用云臺(tái)控制、實(shí)時(shí)預(yù)覽、截圖三種基礎(chǔ)能力后續(xù)再按需擴(kuò)展錄像回放、智能識(shí)別人員闖入、煙火檢測(cè)等功能。畢竟項(xiàng)目核心是云監(jiān)控的云端管理能力視頻是輔助增強(qiáng)不是主菜。5. WEB端設(shè)備管理與權(quán)限設(shè)計(jì)5.1 設(shè)備全生命周期管理WEB端的設(shè)備管理模塊要做到從設(shè)備注冊(cè)到注銷的全生命周期管理。設(shè)備狀態(tài)分為未激活、在線、離線、禁用、注銷五種。設(shè)備新增后處于未激活狀態(tài)第一次成功上報(bào)數(shù)據(jù)后自動(dòng)激活并上線管理員可以手動(dòng)禁用某臺(tái)設(shè)備禁用后平臺(tái)忽略該設(shè)備的采集數(shù)據(jù)和指令請(qǐng)求注銷則是徹底移除設(shè)備并保留歷史記錄供追溯。設(shè)備詳情頁(yè)我建議至少包含四個(gè)區(qū)塊基本信息產(chǎn)品名稱、序列號(hào)、安裝位置、經(jīng)緯度等、運(yùn)行狀態(tài)當(dāng)前在線狀態(tài)、最后在線時(shí)間、連接IP、實(shí)時(shí)數(shù)據(jù)當(dāng)前最新的各屬性值、歷史操作指令下發(fā)記錄、告警記錄。很多運(yùn)維問(wèn)題都是從這臺(tái)設(shè)備最后在線是什么時(shí)候這種基礎(chǔ)查詢開始的信息越全排查越省力。設(shè)備導(dǎo)入導(dǎo)出功能也建議在初期就做。工廠一次性接入幾百臺(tái)設(shè)備如果手工逐個(gè)添加半天時(shí)間就耗在這了。Excel模板批量導(dǎo)入 二維碼批量生成是部署階段最高效的手段。設(shè)備安裝時(shí)現(xiàn)場(chǎng)人員掃碼就能在手機(jī)上看到設(shè)備信息并綁定工單安裝效率明顯提升。5.2 組織架構(gòu)與多租戶權(quán)限模型企業(yè)使用物聯(lián)網(wǎng)平臺(tái)時(shí)往往涉及總部和多個(gè)分部或車間的組織結(jié)構(gòu)。WEB端需要支持按組織架構(gòu)管理設(shè)備也就是設(shè)備的歸屬不只是一個(gè)部門而是層層嵌套的樹形結(jié)構(gòu)??偛抗芾韱T能看到所有設(shè)備數(shù)據(jù)車間管理員只能看到自己車間內(nèi)的設(shè)備。這種基于RBAC模型的權(quán)限管理比較簡(jiǎn)單用戶、角色、權(quán)限點(diǎn)、數(shù)據(jù)范圍四個(gè)維度就夠了。數(shù)據(jù)權(quán)限的控制是很多項(xiàng)目容易做糙的地方。簡(jiǎn)單粗暴的做法是查詢時(shí)只做名稱過(guò)濾但真正的數(shù)據(jù)權(quán)限需要在SQL層面按組織ID進(jìn)行攔截??蚣苌峡梢酝ㄟ^(guò)MyBatis的攔截器自動(dòng)拼接數(shù)據(jù)權(quán)限條件凡是查詢?cè)O(shè)備、數(shù)據(jù)、告警等核心表的地方都自動(dòng)帶上當(dāng)前用戶的可視范圍條件。這樣即使開發(fā)人員中途忘了寫權(quán)限判斷也不會(huì)出現(xiàn)越權(quán)訪問(wèn)的低級(jí)漏洞。5.3 前端交互與性能體驗(yàn)WEB管理端畢竟是給管理員天天用的交互體驗(yàn)直接決定平臺(tái)被接受的程度。項(xiàng)目使用Vue.js Element UI表格支持分頁(yè)、排序、列顯隱、批量選擇操作頁(yè)面操作步驟盡量控制在2跳以內(nèi)。設(shè)備列表和實(shí)時(shí)監(jiān)控頁(yè)在數(shù)據(jù)量大時(shí)要有分頁(yè)和懶加載機(jī)制否則每3秒鐘WebSocket推一次數(shù)據(jù)前端頁(yè)面卡成幻燈片那就沒(méi)法用了。我實(shí)際測(cè)試下來(lái)前端在這幾個(gè)點(diǎn)上下對(duì)功夫體驗(yàn)提升最明顯一是表格的虛擬滾動(dòng)渲染幾千行不卡二是圖表的動(dòng)畫開關(guān)實(shí)時(shí)數(shù)據(jù)刷新時(shí)關(guān)閉動(dòng)畫流暢很多三是全局異常提示和加載狀態(tài)的一致性避免用戶重復(fù)點(diǎn)擊提交。整體的前端架構(gòu)建議采用Vuex存儲(chǔ)用戶信息、權(quán)限點(diǎn)、設(shè)備樹緩存避免每次切換頁(yè)面都要重新拉取設(shè)備列表。6. 部署上線與常見問(wèn)題排查6.1 Docker Compose一鍵編排部署部署這套平臺(tái)推薦使用Docker Compose。數(shù)據(jù)庫(kù)、Redis、MQTT Broker、后端服務(wù)、前端Nginx五個(gè)容器通過(guò)一個(gè)compose文件編排起來(lái)非常省心。特別是現(xiàn)場(chǎng)實(shí)施的時(shí)候目標(biāo)機(jī)器上環(huán)境可能千奇百怪Docker可以把服務(wù)和依賴打包在一起部署一臺(tái)新服務(wù)器大概就是十分鐘的事情。部署時(shí)要注意幾個(gè)配置項(xiàng)MySQL的volume掛載路徑要持久化不然容器重建數(shù)據(jù)就丟了EMQX要開放18083端口用于Dashboard管理1883端口用于設(shè)備連接Nginx配置HTTP長(zhǎng)連接和WebSocket升級(jí)頭否則前端實(shí)時(shí)推送連不上。生產(chǎn)環(huán)境務(wù)必開啟防火墻只放行必要端口設(shè)備接入端口、Web端口、SSH端口三個(gè)就好其他端口全關(guān)。6.2 后端服務(wù)層面常見問(wèn)題與優(yōu)化在實(shí)際運(yùn)行中后端服務(wù)最常碰到的問(wèn)題基本集中在三塊數(shù)據(jù)庫(kù)連接池耗盡、Netty線程阻塞、內(nèi)存溢出。連接池耗盡多半是因?yàn)槁齋QL太多排查可以打開MySQL的慢查詢?nèi)罩景褕?zhí)行時(shí)間超過(guò)1秒的SQL抓出來(lái)做索引優(yōu)化線程阻塞常見于設(shè)備大量涌入時(shí)的任務(wù)隊(duì)列擠壓建議拆分線程池設(shè)備消息處理和數(shù)據(jù)落庫(kù)分開內(nèi)存溢出則需要調(diào)整JVM參數(shù)同時(shí)關(guān)注是否有集合類沒(méi)有清理導(dǎo)致對(duì)象無(wú)法回收。還有一個(gè)容易忽略的服務(wù)端優(yōu)化點(diǎn)是消息并發(fā)處理。全量設(shè)備長(zhǎng)時(shí)間在線、數(shù)據(jù)流量大時(shí)單機(jī)處理能力會(huì)到瓶頸。如果單機(jī)資源還不夠必然要上集群。這一步建議后置先把單機(jī)壓到極致再做集群擴(kuò)展避免在項(xiàng)目初期就背上一堆分布式復(fù)雜度。6.3 設(shè)備端接入的典型異常排查這里整理了一張?jiān)O(shè)備接入時(shí)的排查速查表我在多個(gè)現(xiàn)場(chǎng)項(xiàng)目實(shí)施中用過(guò)可以減少大量溝通成本現(xiàn)象可能原因快速排查思路設(shè)備連不上MQTT認(rèn)證失敗核對(duì)ClientId和密碼檢查是否一機(jī)一密機(jī)制設(shè)備連上了但數(shù)據(jù)沒(méi)入庫(kù)主題訂閱錯(cuò)誤檢查設(shè)備發(fā)布主題與平臺(tái)訂閱主題是否匹配數(shù)據(jù)入庫(kù)但沒(méi)有顯示物模型字段映射錯(cuò)誤檢查數(shù)據(jù)庫(kù)字段名與上報(bào)JSON字段名是否一致設(shè)備狀態(tài)一直離線心跳間隔配置過(guò)大查看平臺(tái)日志中的最后活躍時(shí)間調(diào)整心跳策略指令下發(fā)設(shè)備無(wú)響應(yīng)設(shè)備處于透?jìng)髂J酱_認(rèn)設(shè)備是否訂閱了指令主題查看指令狀態(tài)機(jī)每次在現(xiàn)場(chǎng)排查問(wèn)題我第一步永遠(yuǎn)是看設(shè)備端日志和平臺(tái)端日志的時(shí)間戳對(duì)齊沒(méi)有。設(shè)備上報(bào)時(shí)間、平臺(tái)接收時(shí)間、入庫(kù)時(shí)間三個(gè)時(shí)間一對(duì)比鏈路瓶頸在哪個(gè)環(huán)節(jié)基本就清楚了。6.4 實(shí)戰(zhàn)心得從源碼部署到二次開發(fā)拿到這套源碼之后我建議先不急著改代碼按以下步驟走一遍第一步部署起基礎(chǔ)環(huán)境跑通設(shè)備模擬器上報(bào)數(shù)據(jù) - WEB端看到實(shí)時(shí)數(shù)據(jù) - 修改設(shè)備閾值觸發(fā)告警這條主鏈路第二步仔細(xì)閱讀數(shù)據(jù)庫(kù)設(shè)計(jì)文檔和核心代碼重點(diǎn)理解數(shù)據(jù)表之間的關(guān)系第三步針對(duì)自己的業(yè)務(wù)場(chǎng)景做二次開發(fā)優(yōu)先從增加一種產(chǎn)品類型這種小需求入手逐步熟悉代碼風(fēng)格第四步再進(jìn)行頁(yè)面定制化改造。二次開發(fā)時(shí)注意保持原有分層結(jié)構(gòu)不要在Controller里寫復(fù)雜業(yè)務(wù)邏輯所有數(shù)據(jù)處理都放到Service層。自定義告警規(guī)則時(shí)盡量復(fù)用原來(lái)的規(guī)則引擎接口而不是在原有代碼里加特定判斷邏輯。這樣后續(xù)升級(jí)官方源碼時(shí)改動(dòng)沖突會(huì)小很多。還有一點(diǎn)就是在改數(shù)據(jù)庫(kù)表字段時(shí)及時(shí)同步更新前后端的數(shù)據(jù)模型代碼報(bào)錯(cuò)說(shuō)找不到字段的問(wèn)題在二次開發(fā)階段我?guī)缀趺看味紩?huì)遇到。7. 寫在最后一次完整的物聯(lián)網(wǎng)閉環(huán)實(shí)踐做這套物聯(lián)網(wǎng)云監(jiān)控平臺(tái)帶給我最大的體會(huì)是物聯(lián)網(wǎng)系統(tǒng)真正的復(fù)雜度不在通信協(xié)議也不在某個(gè)炫酷的前端圖表而是把設(shè)備接入、數(shù)據(jù)流轉(zhuǎn)、告警處理、業(yè)務(wù)展示這條鏈路完整地串起來(lái)每一環(huán)都可靠運(yùn)轉(zhuǎn)。設(shè)備端斷線重連、平臺(tái)側(cè)數(shù)據(jù)清洗、WEB端信息展示任何一個(gè)環(huán)節(jié)出紕漏整套系統(tǒng)的可信度就會(huì)打折扣。在實(shí)際落地過(guò)程中我還有一個(gè)很深的經(jīng)驗(yàn)項(xiàng)目驗(yàn)收階段展示給客戶看的永遠(yuǎn)不是代碼寫得多漂亮而是業(yè)務(wù)的完整閉環(huán)。從設(shè)備添加開始到數(shù)據(jù)上傳到異常告警到遠(yuǎn)程控制再到報(bào)表導(dǎo)出每一步都能走得通、看得見、解釋得清這個(gè)項(xiàng)目就成功了九成。這套源碼的價(jià)值正在于它把上述細(xì)節(jié)都做了相對(duì)規(guī)范的實(shí)現(xiàn)給二次開發(fā)提供了一套可以起步的骨架。最后再分享一下個(gè)人部署體驗(yàn)如果條件允許建議在同一臺(tái)性能還行的服務(wù)器上完整部署一遍用MQTT.fx模擬10臺(tái)設(shè)備做壓力測(cè)試觀察CPU和內(nèi)存指標(biāo)調(diào)整數(shù)據(jù)庫(kù)連接數(shù)和JVM參數(shù)。這個(gè)過(guò)程走完你對(duì)這套系統(tǒng)的理解深度比單純看源碼要扎實(shí)得多。做物聯(lián)網(wǎng)這行動(dòng)手永遠(yuǎn)是學(xué)習(xí)效率最高的方式。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
日欧美色| 九九英色视频| 婷婷五月天色网| 啊视频在线| 亚洲清纯综合| 屌逼麻豆| 人妻精品一区二区| 岛国人妻少妇av在线观看| 波多野结衣先锋影音| 欧美中文狠| www.久久超碰| 日韩一级特黄av毛片| 天天插天天操天天摸天天射天天看| 亚洲成人福利电影免费| 天堂69亚洲精品中文字| 久久久无码精品人妻二区| 青青欧美在线| 色色色色综合网| 私人尤物在线精品不卡| 欧美少妇高潮视频| 欧美性色综合网| 国语国产操逼伊人AV网| 国产综合色精品在线观看| 福利大香蕉| 精品一区二区三区最新| 牛牛aV| 免费精品无码一级毛片牛牛影视| 色阁阁AV综合网| 欧美色棕合| 中国一区二区亚洲人妻| 精品亚洲一区在线观看| 84YTCOM性无码| 精品九区| 欧美淫乱视频| 夜精品久无码| 欧美精品91| 偷拍欧美综合| 国产精品一区人妻精品阁在线| 无码国产Av| 99久久无码| 国产美女高潮视频| 亚洲图片小说欧洲| 97 国产精品| 白丝jkav| 国产性感骚丝袜在线| 六月婷婷综合| 激情小说五月天| 亚洲日韩国产欧美综合v| 精品久久久久久中文字幕三区| 一起草高清无码| 白嫩白嫩的午夜九久久久久久久久久久久成人剧场| …中文字幕亚洲乱,97人妻无码费视… | 日本伦理一区二区| 99青草| 久久久久国产亚洲一区欧美色图日韩 | 久久久亚洲高清不打码| 黄片色区软件| 久久东京伊人一本到鬼色| 亚洲色综合| 97超碰超碰| 青娱乐休闲视频在线观看| 好吊色综合| 国产视频人人网| 思思久热在线精品66| 国产真乱mangent| 国产三级在线现体验区| 超碰国产精品无码| 免费又黄又裸乳的视频| 黄色毛片A片| 亚洲AV永久无码一区仙野| 国产一在线观看| 天天艹天天日| 久久男女激情视频网站| 啊啊啊不要好疼视频| 夜夜肏2021| 蜜色网色哟哟| 日韩三级一区| 九九九九九九九九九五码| 国产麻豆一区二三区| 久久精品国产精品| 久久超碰天天| 人人做天天爱| 欧美性天天影视| 一二三啪啪专区| 极品后入免费视频| 校园春色 亚洲| 97资源久久| 人人摸.人人色| 中文字幕黄色片| 青青草自拍视频在线播放| 天天看片天天爽| 欧美日日夜夜| 国产97色在线| 国产51色综合久久免费| 国产av白丝| 天天综合影院91| 亚洲。天堂。日本在线观看| 玖草在线视频| 久久毛卡| 欧美日韩人人精品| 无码人妻一区二区三区免费九色| 亚洲 国产 精品一区| 久久久久13| 粉嫩久久久久| 九九视频黄色片| 岛国视频免费在线观看| 一区二区三区蜜桃成人撸久久东京热| 情色图区| 日韩一级片在线看| 色哟哟1区2区| 草莓精品视频在线免费观看| 午夜性| 巨乳特殊服务按摩| 国产亚洲色婷婷久久99精品91| 亚洲五月丁香花狠狠干一区二区三区 | 91日韩国产欧美亚洲另类精盘州至城都| 热无码中文亚洲H一道本一区二区| 波多野结衣之双飞调教在线播放| 亚洲天堂色图| 欧美99999| 丁香六月综合激情| 丝袜视频网国产90| 欧美综合区| www.91欧美| 中日韩免费看男女操逼大全| 九九Av| 99re99视频在线免费观看| 韩国嫰模上门援交视频| 干日本人少妇午夜寂寞影院| 国产亚洲欧洲在线观看| 国产强奸无码乱伦| AV在线资源| 精品国产av一区二区三区四区入口| 午夜精品视频777| 亚洲和欧美裸体美女双飞视频| 超碰97欧美| 婷婷五月影院| 国产成人在线观看网址| 97干在线视频| 伊人操| 女人爽到高潮潮喷18禁网站| 91精品国产长腿丝袜美女| AV不卡在线| 亚欧美综合网。| 久久久国产av美女私房| 超碰人妻中文在线| 免费啪啪一级视频| 久草综合网| 国内三级自拍小视频在线观看| 日日夜夜国产综合| 留下AⅤ黄色片| 人人九九精| 约操熟妇| 淫穴高潮色图| 亚洲精品一二三四区| 亚洲综合电影| 丝袜美腿操av| 熟女性视频| 丝袜美腿丝袜| 日韩操人| 亚洲图片色图欧美另类| 美女丝袜激情小说| 99操| AV一起草在线| 婷婷人妻激情| 精品人妻夜夜草| 国产9 9在线 | 亚洲| 欧美色道啊| 亚洲成人在线播放| 久草网站免费在线观看| 欧美色网| 熟女熟妇一区二区三区视频| 97精品一二区| 9999免费精彩视频| 国产在线观看一区二区三区| 超碰久久网| 欧美婷婷| 18禁中文字幕| 91精品人妻一区二区三区蜜臀| 免费亚洲黄色视频在线观看| 青青草大香蕉视频| 国产成人天堂| 日韩一级二级在线| 久热久| 澳门黄片一香蕉视频| 无码久| 天天影视综合网欧美精品| 色色色网站| 久久婷婷成人综合色怡春院| 青青草色插素人| www.久久爱| 国产精品网址| 青草成人免费视频一COm| 久久超碰、| 开心五月深爱五月| 九九色色| 岛国网址国产| 国产精品盗摄 偷窥盗摄| 91情色在线| 国产熟女二区| 麻豆福利视频导航| 性爱Av免费| 国产综合久| 91激情网| 欧美韩国你懂得在线 | 亚洲视频二区| 黑丝日韩av丝袜av| 欧美日不卡| 91丨九色丨国产打屁股| 强奸乱伦大香蕉| 国产真实子伦对白| 人妻性爱一区二区| 欧美人人曰人人操人人射射| 亚洲天堂精品日韩电影| 欧美91网| 国产丝袜啪啪| 超碰在线免费一区二区三区| 一二区在线观看视频| 色综合超碰超| 精品九九九九九九九九九| 91肏屄网| 伊人97色天使| 日产国产精品中文久久婷婷| 国产欧美伊人| 日韩午夜精品一区二区三区电影| 欧美一级A一级a爱片久久| 久久久久久十| 黑人性欧美| 久操免费视频| 国产精品日本无码A片| 欧美后入式| 亚洲清纯综合| 97干在线视频| 亚州五月| 99在线精品视频| 天堂亚洲精品| 97超碰超| 天天色欧美| 人妻久久一区二区三区 | 色欲日韩欧美在线一区| 日韩性爱小视频| 操婷婷逼| 亚洲国产ⅴ高清在线观看| 日韩中文字幕国产| 天天肏夜夜肏| 亚洲人成网www| 久久黄黄| 欧美97视频| 久久人人妻| 国产婷婷一区| 久久视频,这里只有精品| 诱惑人妻欧美一区在线播放| 亚洲综合一| 中文有码9| 精品人妻一区二区三区不卡断| 免费人成在线观看网站品爱网| 长久操视频| 欧美国产成人在线| 国产av色网| 欧美日韩人妻婷婷一区| 久久久青青草| 欧美丰满少妇xx高潮| 天堂种子在线www网资源| 男人的天堂2018东京热啪啪啪| av婷婷色网| 成人日本精品九区| 六九九九| 美女丝袜激情小说| 2017av无码免费无线播| av凤凰久久久| 嫩草 人人网精品| 日本中文字幕一区| 呦呦一区| 免费伦费视频在线观看| 亚洲日本韩国极品一区二区| 91国产伊人大香蕉| 久久国产在线一区二区| 天天影视激情欧美| 欧美美逼| 奇米四色网| 97五月天| 91狠狠狠| 在线精品福利免费播放| 综合色久| 国产精品视频播放| 欧美成人免费在线观看| 五月婷婷丁香| 99热99re6国产在线播放| 亚洲成人av色网| 九九自拍伦理| 另类图片欧美激情综合| 中文字幕日本久久| 欧美一级美片在线观看免费| 久久久久久久九九九九| 亚洲,日韩,欧美,成人播放| 色丁香五月婷婷| 天天澡天天爽日日av| 超碰在线一区二区三区| 国产精品久久久三级无码| 亚洲少妇诱惑| 色综合一本| 狠狠操狠狠| 亚洲天天自拍| 成人av免费观看| 国产SV一线| 精品九九九九| 人妻一区二区三区| 亚洲日韩人妻中文字幕一区| 天天操天天射青青草| 91岛国动作片| 五月丁香| 97超碰久| 日本操逼无码| 97精品视频免费| 亚洲色图8| 国产传媒午夜理伦精品| 伊人久久大香蕉线AV五月天| 免费无码婬片AAAA片直播色戒| 超碰人人色| 婷婷五月天色网| 美女被艹尤物视频| 欧美夜夜骑视频| 国产福利一区二| 成人在线日韩| 亚洲欧美日韩偷拍色图| 欧美久久久| 乱伦图一区| 日韩人妻少妇 一区二区三区| 国产日产欧产美韩系列麻豆免费| 欧美十八禁在线看| 后入式免费视频| 五月天丁香欧洲日韩| 夜夜综合| 美女自卫慰黄网站免费| 九七超碰人人乐| 亚洲精品国产专区在线观看| 精彩久久中文| 久青草影院| 欧美自拍网| 久久日韩毛| 97爱综合| 蜜桃久久久久久久久久久久| 欧美精品一区二区少妇免费A片 | 激情图片伦理国产一区二区日韩| 男女性无套 免费九一| 久久久久密臀一区二区| 亚洲一区中文字幕一区| 熟女人妻精品一区二区视频| 国产黄色动态精品| 99色色网| 秋霞操逼片| 999久久久久久久久| 亚洲综合小说另类图欧美视频激情小说色五月天| 少妇久久久久久久久| 黄色不卡视频| 91无人区卡一卡二卡三乱码入口最新版:能让用户有更多选择的选择-经典说说-爱 | 国产自啪精品视频网站黑丝| 黄色av一区二区在线| 91福利网在线观看| 亚洲欧美校园| 国产精品久久久久久久久久久久久久久| 户外裸露刺激视频第一区| 亚洲毛片基地专区| 老鸭窝成人| 日韩情色AV| 无码自拍SM| 久久午夜色播影院免费高清| 国产精品69久久久久孕妇欧美 | 色情乱伦AV| 日本中文字幕不卡视频| 欧美九九九九九| 日本久久999| 国产精品亚洲美女久久久久| 欧美在线天堂| 男人的天堂Va| 久一区久久蜜桃| 啊啊啊啊啊舒服| 国产精品视频电影| 狠狠久久亚洲欧美专区| 国产美女高潮叫床视频| 制度丝袜99| 伊人丁香五月婷婷| 欧美 色 亚洲| 久久精品区| 四虎免费视频| 天天影视综合色| 超碰无码五月97| 91丨九色丨大屁股| 青娱乐日韩无码| 久久美女国产| 1禁看欧美黄片免费看| 色噜噜国产精品视频一区二区| 亚洲情色无码一区二区三区| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 淫荡熟女乱伦网| 九九九九精品九九九九| 热热色中文无码| 蜜臀99久久精品| 欧美老熟另类| 大香网伊人久久综合| 久久欲| 操逼视频色| 亚洲欧美日韩制服另类| 中国国产精品一区视频| 99热只有这里有精品| 亚洲 欧美综合| 久久三区四区| 97超碰超碰| 尤物网站91| 久久色网| 天天激情综合站| 亚洲色图尤物视频| 黑人精品成人一区二区三区 | 亚洲成人AB| 久9爱精品| 粉嫩av一区二区三区天美传媒| 一二三四区电影| 97视频免费在线| 一区二区三区高清 | 免费啪啪av| 亚洲影院成人| 蜜乳AV一区| 人人贴人人摸| 欧美视频边做饭边橾| 国产呦精品一区二区三区下载| 蜜桃视频成a人v在线| 在线性黄高清免费视频| 97玖玖人妻| 韩国三级三级BD在线| 啪啪视频mP4| 日韩无码AB| 97久久超碰亚洲| 国产精品熟女一区二区三区| 国产精品亚洲一级av第二区| 狠狠操狠狠爱| 蜜臀久久久国产| 夜夜夜夜久久久久| 啪啪啪东京| 亚洲字幕一区二区| 亚州色交| 欧美人妖内射| 欧美性爱免费短视频| 日本福利二区视频| 久久神马影院| 91人人| 国产精品久久久久亚洲av | 丁香五月影院| 亚洲日韩XXX| 啊啊啊啊操死我| 亚洲学生妹高清av| 久草大| 日本在线播放不卡一区| 四虎精品一区| 无码伊人久久大杳蕉中文无码| 中文字幕黄色片| 屌妞视频久久久久久久| 久久久久99精品成人片蜜臀| 色色香蕉| 96爱综合| 啊啊啊水好多| 精品一区二区综合熟妇| 国产AV天美| 国产精品噜噜噜日日日| 99热只有这里有精品| 无码一区二区三区四区五区六区七区八区九区十区视频 | 秋霞欧美性爰视频| 中文字幕AV片| 日韩人妻一区二区| 丁香五月激情五月| 国产不卡的视频| 天天草夜夜草高潮片| 婷婷五月天av| 香蕉大久久久| 78精品在线| 操逼视频免费日韩无码| 国产妇女精品视频青青草| 国产操逼网站亚洲一级黄色| 亚洲AV无码天美传媒一区| 综合少妇网| 婷婷AV一区二区三区| 天天操综合网| 上床啊啊啊| 秋霞视频一区二区 | 97日视频| 伊人一级免费黄片| 亚洲网自拍| 97超碰色中文字幕| 操操操日本的逼| 丁香婷婷激情五月天无毒不卡| 国产操逼网站亚洲一级黄色| 九九九九久久久| 日本媚薬中文字幕在线| 另类天堂| 91精品人妻一品二品三品| 日韩欧美亚洲一区二区三区影院| 中日韩久久久免费看| 国产a级午夜毛片| 91少妇高潮| 留下AⅤ黄色片| 97色欧洲| 大香蕉在线视频15| 日逼逼免费看| 99蜜桃臀亚洲成人在线观看| 懂色av色欲av蜜臀av| 中文字幕一区二区三区人妻不卡| 久久久久久AⅤ无码免费肉站| 欧美图片校园春色| 中文字幕精品一区二区精| 人妻五十路在线| 破苞ⅩXXX性无码动漫无码| 久久熟女嫩草成人片免费 | 久久人妻一区二区三区高清| 激情小说亚洲| 久久精9| 欧美色一二三| 日韩欧美大力操| 69丨亚洲丨精品丨入口免费播放| 99精品网| 免费观看网黄| 黑人性暴力毛片| 99热97| 日本熟女中文字幕一区| 97综合久第一页| 一色网男人的天堂| 777琪琪午夜免费A片| 高清不卡 中文 人妻| 一道本久久棕合爱| 午夜福利精品| 区自美91| 在线视频五十市| 四色永久成人网站| 黄色香蕉视频网站一区| 欧美激情 亚洲色图| 九九伊人网| 久久久青青草| 97最新在线播放视频| 一起草三级AV电影在线观看| 极品出轨视频网站| 色超碰综合| 九九热精品免费视频| 大香蕉伊人在线成人AV在线观看| 九九国产| www.97在线| 嫖老熟女A片一二三区| 狠狠操使劲操| 后入福利视频| 欧美日韩青操| 欧美 亚洲 偷拍自拍| 欧美 亚洲精品首页| 蜜臀AV成人精品蜜臀| 亚洲色 国产 欧美 日韩| 一区二区三区国产在线播放| 久久成人东京热人妻| 欧美 综合 亚洲| 在线黄页看毛片| 国产精品久久久久久久AV大片| 一区久久久二区| 伊人婷婷五月天| 人妻 欧美亚洲| 蜜臀99999| 国产av又色又爽又黄| 日本不卡中文| 美女上床网站| 97伦乱| 第二页中文字幕| 午夜人妻精品综合在线| 色婷婷久久| 手机在线视频国内精品| 影音先锋视频在线| 精品无码不卡视频| 日逼视频日本| 亚洲欧美日韩中文播放| yazhououmeizongya| 超碰视97中文| 国产丝袜高跟美女av免费观看| 亚洲AV不卡在线观看尤物| 亚洲丝袜色图| 亚洲av热热色| 久久久噜噜噜久久久| 96精品在线| 91N欧美| 日韩欧美麻豆大片| 欧美亚洲国内自拍| 色婷婷亚洲婷婷| 久久久久久久亚洲Av无码| 久久精品高清无码一区| 久久久九九| 老熟女中文字幕高清| 欧美在线 亚洲| 97中文超碰| 精品国产一区二区三区久久久蜜臀| 亚洲日产专区| 婷婷六月天| 日韩精品区二区三区不卡| 久久欧美1卡2卡3| 色诱avtt| 欧美96交| 无码人妻精品酒店| 日本精品五区| 久久久999国产| 91精品网站| 日韩精品人妻| 亚洲成a人在线观看久| 国产成人精品亚洲日本| 久久熟女人| 性爱AV天堂| 2017大香蕉国产精品久久| 久草久日| 国产999精品久久久| 久久天堂| 国产91精品福利在线| 最新日产中文在线麻豆| 欧美黑人猛交春色影视大全| 激情综合网激情五月天| 干婷婷综合网| 歐美一級亂黃99在綫精品| 久久久久久久91| 午夜福利无毒不卡| 亚洲一本大道中文字幕无码在线| 性爱av在线免费观看| 最近2019中文字幕国语免费版| 毛片电影一区二区三区| 97中文字幕色| 欧美—性—交—色| 国产极品精品美女视频| 亚洲精品一区中文字幕乱码| 伊人 俄罗斯 a v| 91老熟女91老女人| 久久无码一区二区二三区性色 | 国产精品视频精品一二| 亚洲精品欧美专业| 怡红院成人视频| 欧美强奸乱能| 亚洲国男人的天堂| 第二页中文字幕| 九久久精| aaaa少妇高潮大片| 啊啊啊好舒服好爽啊啊啊视频| 呻吟 欧美 日本 中出| 国产精品久久久久久亚洲色欲| 欧美偷拍区| www.操| 91综合网在线| 日韩乱伦影音先锋| 天天享受天天看| 免费操逼91| 婷婷操逼| 亚洲中文sv| 操逼日批| 亚洲精品久久久久久久蜜桃臀| 日韩女优在线| 欧美亚洲手机在线| 午夜福利1区2区3区| 亚洲成?V人片在线观看福利| 白丝少妇一区二区| 亚洲 小说 欧美 激情 另类| 国产一区二区三区中文字幕| 亚洲高清欧美总合| 色婷婷99| 熟妇激情| 午夜男女爽爽大片免费观看| 91蜜臀在线久久久久| 91网站18禁| www黄片免费看com| 蜜桃精品一区二区三区ww | 边做饭边操逼逼| 国产大片精久久久久久| 香港澳门日本三级网站| 中文精品一区二去| 熟女高潮合集-永久久久-成人AV| 天天躁日日躁成人字幕aⅴ| 亚洲黄日韩无码专区| 亚洲欧美国产中文视频| 九九视品黄色| 婷婷操视频| 欧美国产有色电影| 国产成人亚洲精品无码最新在线| 久热伊人99re| 操一操摸一摸| 男人的天堂在线2| 色狠狠一区二区三区香蕉| 色色色综合网| 欧美组图日韩亚洲中文字幕| 97硬碰| 高清无码 国产精品| 超碰在线综合97| 婷婷综合五月天| 有码专区最新中文字幕有码| 欧美黄色大香蕉一区二区| 亚洲无码一区成人免费午夜| 欧美v亚洲v日韩v最新在线二区| 亚洲综合色图欧美| 性色乱AV一区二区| 亚洲欧美日韩免费电影| 99re这里只有精品3| av在线不卡一区二区三区| 97精品视频在线播放| 日本色婷婷| 大香蕉乱级| 91在线一起| 欧洲天天在线| 性色av网站| 欧美日韩电影成人在线| 熟妇女人妻呻吟久久AV| 亚洲一区二区三区中文字幕| 99精品丰满人妻| 中文字幕国产| 午夜αv| 秋霞男人网| 欧美日本成人一区二区| 色哟哟的毛片| 亚欧日韩成人| 色吧 综合| 99re69| 六月丁香久久| 超碰日韩人妻| 亚洲性少妇| 国内精品久久国产,www香蕉久久五月丁香,亚洲欧美日韩精品永久在线,日本精品一 | 日韩亚洲中文字幕在线| 欧美日韩系列| 国产欧美美女免费观看视频| 中文字幕交换人妻| 九t超碰| 久久9精品视频| 乱伦av麻豆| 9l视频自拍9l九色成人| 眼镜人妻101.com| 色97干| 91精品国产麻豆国产自产在| 91九色丰满高潮| 91 刺激在线| 美女午夜福利免费视频| 九九免费影片| 精品无吗久久| 91xingse| 精品-91人妻子系列| 内射小黄片| 色老牛| 国产小u女在线观看| JULIA人妻风俗店中出电影| 超碰色97| 在线 欧美 亚洲| 欧美巨大性舒爽顶到了| 99国产精品在线观看| 久久草大香蕉| 熟女五十路一区二区三| 超碰美国| 成人性交免费视屏| 欧美不在线| 97在线欧洲| 日本午夜福利视频| 综合网欧| 日韩pv中文| 91精品人妻一区二区三区蜜臀| 久久av无码| 少妇久久久久久| 人人操人人摸超碰| 蜜臀AV午夜精品久| 久久久女人| 国产九九九九九九| 欧美高清在线| 亚洲se电影| 97在线欧| 亚洲性猛| 97 国产一区| 久久久久久九九九九-美女久久久久久久-成人AV| 成人婷婷丁香| 人人操人人爽人人操人人| 成人毛片免费| 亚洲一区二区三区麻豆传媒| 9久9久| 成人小电影网站tex| 99re在线视频国产| 欧美在线大香999| 91丨人妻丨国产丨丝袜| 精品久久久久久中文| 麻豆这里只有精品| 全免费a敌肛交毛片免费| 色色色色日本| 天天色综亚洲91污| 家庭乱伦网站国产| 91性高朝久久久久久久久| 人人射人人操人人摸| 黄色性爱网网| 人妻少妇色综合| 天美传媒av 在线| 久久精品欧美一区蜜桃| 97欧美精品综合| 操91| 91殴美| 久久伊人最新网址视频| yellow网站免费观看日韩高清无码| 国产女乱淫真高清免费视频| 99操视频| 国产精品色哟哟| 精品少妇高潮久久| 国产在线视频午夜精华在| 操日韩第| 99精品视频在线观看| 懂色AV中文| 五月天AV资源| 国产无吗在线播放| 一级性爱aaaa| 成人av在线播放| 99精品丰满人妻无| 东京热激情视频一二三区| 久久超碰97中文字幕| www亚洲欧美| 国模精品娜娜一二三区| 超碰综合97在线| 婷婷伊人綜合中文字幕| 日本综合色图| 男人天堂毛片| 试看60秒 爽| 亚洲午夜福利在线影院| 天美麻花大全视频| 96爱综合| 欧美宗合色| 成人性爱视频在线看| 91视频国品一二三区| 人妻丝袜肏逼| 成年无码动漫av片无尽在线| 超碰在线成人| laoshunv91| 色欲久久99精品久久| 91在线秘 男同| 性爱视频久久| 91爆操视频| 九九九九免费高| 毛片一区二区| 久久熟妇五十路一区| 肏逼视频日本| 欧美综合传媒| 极品粉嫩一区二区| 视频分类 国内精品| 人妻精品综合中文字幕在线 | 美国久久一二三四| 人人摸人人干人人拍97| 青草影院内射高潮| 五月天婷婷在线看| 国产成人精品日本视频| 97超碰jingpin| 99re超碰| 天堂av2019| 亚洲av无码成电影在线播放| 岛国不卡超碰护士AV在线播放| 欧美性爱视频免费一区一A| 久久久91福利姬| 天天干人妻| 激情终合网| 97干97色| 艹我哪美一区无码| 啊啊啊好大好深| av在线播放国产一区| 中文一区二区婷婷视频| 99精品综合久久久久五月天| 亚洲欧美在线观看无码| 蜜桃视频一区二区三区在线观看| 人人操人人色网| 综合自拍| 久久久月天| 大香蕉人妻| 久久久久婷婷精品av电影| 手机在线人成免费视频| 死我十八禁| 免费黄色片子| WWW.加勒比人妻一区不卡.com| 日日夜夜噜| 色天堂综合| 9超碰免费| 久久不卡一区二区| 国产免费永久精品无码| 一,爱啪啪,在线免费视频| www.91理论| 久久艹逼视频| 区一在线观看| 久久久久久69国产一区二区 | 免费的黄片有限公司| 另类 综合 日韩 欧美 亚洲| 老熟妇一区二区三区…| 婷婷九月国产| 操香逼| 国产精品精品系列在线观看| 欧美亚洲第1页| 强奸乱伦大香蕉| 国产AB视频| 熟女乱伦A| 青青伊人久久| 免费成人自拍视频在线| 国语人妻精彩刺激| 日产操逼| 玖玖爱伊人玖玖爱| 午夜免费视频1000| 国产强奸乱伦xd| 国产AV天美传媒一区二区三区 | 亚洲污一污二| 男人的天堂一区三区| 欧美三级偷拍| 爽爽淫人网| 久热最新在线杭州| 午夜精品99久久久久传媒| 人妻美腿丝袜日韩| 荡小穴在线观看| 99综合| 国产精品丝袜久久亚洲不卡| 日逼97| 囯产操逼片| 亚洲日韩av一区二区三区百合| 日本二区不卡| 日韩性爱毛片操骚逼| 97av,com| 一牛影视久久久一区二区三区| 黑人娇小av在线播放| 久9爱经典视频| 亚洲精品色| 中文自拍欧美影视| yw尤物av无码点击进入麻豆| 黑人精品欧美一区二区蜜桃| 欧美性猛交美女自慰91| 成 人片 黄色大片| 国产精品第一页国产大屁股视频免费区| 自拍盗摄一区| 天天射,天天操,天天爽-国内精品一区二区三区-成人AV | 日韩黄色小说| 丝袜综合| 懂色AV一区二区三区| 黄色片大香蕉| 亚洲国产尤物yw在线观看| 超碰78| 欧美性高潮| 蜜臀久久久国产| 嗯嗯嗯嗯啊啊啊好紧好大| 中日高清无码操逼视频| 欧美色狠| 好吊色青靑草| 亚洲精品丝袜| 十八禁成人网站在线观看| 欧美资源| 九九久久首页| 特级毛片特黄久久免费看 | 国产高清吃奶免费视频网站| 99亚洲人人| A级片日韩欧美国产欧美视频精选观看 | 9久在线视频只有精品| 老司机午夜精品福利视频一区二区| 三级片大波波| 欧亚洲精品有视频| 在线观看中文av字幕| 日本一区视频在线观看| 丰满搜索结果 -第18页- 久久高清无码 | 7月婷婷综合| 性一交一乱一交A片久久四色| 亚洲乱色视频一区、二区在线| 亚洲激情久久久伊人综合| 久久女人一区二区三区| 亚洲欧美另类图片| 欧美日韩国产电影| 99热18| 久久 久久国内精品亚洲| 99色网| 亚洲精品欧美专业| 99re6国产精品99re在线| 国产日韩无码一区二区三区久久区| 一区二区三区精品视频| 日本三级中国三级99人妇网站| 久久最新视频免费观看| 啊啊啊啊网站| 欧美激情亚洲色图| 操我无码| 国产理论视频在线播放| 插插综合网天天影视网| 九九亚洲精品| 激情文学 国产一二三aV| 啪啪综合网| 日韩国产中文字幕| 亚洲欧美国产精品久久久久久久| 婷婷九月国产| 国产在线激情| 午夜精品久久99蜜桃的功能章节| 久久少妇| 欧美加勒比| 欧美不卡在线一区二区| 国产中文精品一区二区在线观看| 婷婷超| 九九AV| 中文字幕国产| 国产欧美精选自拍一区| 图片区小说区| 亚洲 欧美 91| 自拍第一页| 伊人超碰97| 天天综合-91入口| 日本操逼视频不卡直接放| 日本1区2区不卡视频| 极品美女福利在线观看| 伊人色综合网| 久久偷拍人| 欧美一区二区成人一卡| 欧美综合综合| 久草成人| av无码精品久久久久| 大香蕉男女超碰精品在线| 中文久久爆乳| 密臀在线免费观看| 女人的天堂大香蕉网| 综合色区偷拍| 欧美日韩另类在线播放| 青青草日韩无码| 国产污视频麻豆传媒一区二区| 亚洲欧美啪啪| 国产亚洲日韩欧| 婷婷色五月激情| 330Dv国产女人终合视频极品人与兽| 久久人妻四季| 激情文学小说一区二区| 亚洲精品一区二区精华| 99色天堂| 亚洲人91| 无码国产精品96久久久久孕妇| 超碰在线香蕉| yazhousetuoumei| 五月天欧美色图| 久久啊啊啊| 亚洲综合另类小说色区亚洲成av人片在www | 久久久爆乳翘臀一线天伦理视频| 久久久99999久网站| 青青草大香蕉视频| 久久久久久久亚洲Av无码| 91老熟女逼| 日韩干B| 亚洲天堂AV在线播放| 日韩内射视频| 欧美日韩传媒| 337p大胆噜噜噜噜噜91Av| 青草视频人妻在线观看| 国产精品久久久无码aV去| 偷拍欧美综合| 青草地一本线一区二区三区| 久久高清欧美国产| 桃色人妻在线视频| 肏逼福利网站| 国产亚洲禁久一区二区| 久九干| 亚欧操逼片在线观看| 亚洲天堂人妻熟妇视频| 久热69九色熟妇97| 久久久91| 久久久久久欧美精品se一二三四| 少妇人妻激情四射| 草草影院最新网址| 黄色网址久久精品欧美喷水| 亚洲情色 自拍| 久久伊人大香蕉| 亚洲精品国产拍免费91在线| 日本午夜久久电影| 91天堂丝袜美腿| 国产亚洲精品自在线亚洲情侣| 中文一区二区| 国产亚州精品美女久久久免费| 麻豆一区在线| 亚洲精品国产日韩无码AV永久免 | 台湾肥佬网一区二区三区| 欧美在线综合| 日日夜夜精品视频| 亚洲美女精品| 在线观看亚洲成人精品| A啊啊在线观看| 国产99999久久精品| 欧美五十路熟| 国产视频第2页| 免费A片三p视频| 一本正道久久熟女| 中文字幕精品免费一区二区| 美女的肌被草喷水视频| 国产一级特黄大片处女| 九九热精品在线| 久久男人天堂| 亚洲 图片 综合91| 国产精品分类在线观看| 精品一二三区女同| 精品久久无码午夜福利| 久久精品国产久精国产| 麻豆国产96在线| 亚洲熟妇综合久久久久久| 熟女视频久久| 97操| 亚精品无码毛片一区二区三区| 久久五月综合| 91社区伊人| 欧美色图自拍| 亚洲综合影片| 亚洲AV无码乱码| 三级日本一区二区三区| 精品偷拍13p欧美dodk视频| 成年人网站在线免费观看| 久操com| 啊啊啊水好多| 亚洲熟女少妇免费视频| 成年人黄色视频免费| 秋霞鲁丝午夜无码一区二区三| 91视频综合| www.av在线视频| 97精品熟女少妇一区| 久久久亚洲Av| 91美女丝袜诱惑视频| 99久久精品无码一区二区| 国产成人无码啪| 新版天堂中文资源8在线| 中文字幕视频2区| 色悠久久久av| 日本裸体久久色噜噜| 天天操人人操骚逼网站| 97色在线视频| 999国产精品999| 色五月激情AV在线| 丰满熟女一区二区三区在线播放| 亚洲春色欧美激情自拍| 色99色| 99www.bibizy香蕉资源国产一区二区三区高清| 超碰97极品9| 91人人看| TS人妖另类精品视频系列| 熟女乱3伦999| 丁香五月影院| 天天综合网~91| 亚洲美女自拍偷拍视频| 欧美一区二区在线资源| 蜜臀久久99精品久久久久久婷婷 | 国产亚洲精品美女久久久m| 97一区二区三区视频| 亚洲 国产 精品一区| 国产1727欧美| 欧美特大黄一级片片免费| 久久熟女嫩草成人片免费| 一级性爱aaaa| 蜜臀久久久99久久久久| 中文久久一区| 天天艹天天日| 96超碰网| 九九热这里只有在线精品视 伊人草 成人菠萝蜜视频在线观看 | 亚洲色人妻综合| 欧美Aⅴ| AV男人天堂网| 精品视频日日夜夜| 亚洲精品尤物yw在线影院| 很很操在线| 精品人妻av在线播放| 五月天加勒比啪| 日韩素人无码一区二区三区三州| 激情婷婷丁香网| 久久只有精品一区二区三区| 色色色欧美| 国产精品熟女一区二区三区| 亚洲综合骚逼| 97色论| 狠狠色婷婷7777久| 日韩一区二区高清在线观看的| 中国人高清www色视频免费| 啊啊啊啊啊好大好舒服想要| 25国产精品免费观看|