免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網運營的一線實戰(zhàn)洞察。

嵌入式視角下的MQTT協(xié)議實戰(zhàn):機制、落地與避坑指南

嵌入式視角下的MQTT協(xié)議實戰(zhàn):機制、落地與避坑指南 做了這么多年嵌入式我越來越覺得物聯(lián)網項目里真正決定體驗的往往不是傳感器精度多高、MCU主頻多快而是設備跟云端之間那根“看不見的線”夠不夠穩(wěn)。而MQTT就是這根線上最常見的載體。今天想跟你好好聊聊這個協(xié)議——不是泛泛地講概念而是從嵌入式工程師的實際視角把它拆開揉碎看看里面的機制到底怎么工作、在真實項目里怎么落地、又有哪些坑是文檔里不會寫但現(xiàn)場一定會踩的。這篇文章適合正在做或準備做物聯(lián)網設備端開發(fā)的朋友無論是用ESP32快速原型驗證還是在STM32、RTOS環(huán)境下做產品級固件甚至是在Linux板卡上做網關都應該能從中找到可以直接參考的東西。我會盡量把協(xié)議機制、代碼實現(xiàn)和排障經驗串在一起講力求讓你讀完能對MQTT有一個立體、可落地的認識。1. 為什么物聯(lián)網設備端幾乎繞不開MQTT先說一個我從多個項目里總結出來的判斷物聯(lián)網通信方案選型本質上是帶寬、功耗、實時性、可靠性、實現(xiàn)復雜度這五個維度的平衡而MQTT在絕大多數(shù)場景下都能站在一個非常舒服的位置。1.1 從一份需求說起假設你現(xiàn)在接手一個環(huán)境監(jiān)測項目十幾個節(jié)點分布在廠區(qū)不同角落每個節(jié)點用STM32采集溫濕度、PM2.5和噪聲數(shù)據(jù)通過4G模塊上云云端要能實時展示曲線也要能遠程下發(fā)控制指令比如打開排風扇。最初你可能會想用HTTP——每個節(jié)點定時POST JSON數(shù)據(jù)到服務器簡單直接。但用一段時間就會發(fā)現(xiàn)幾個問題節(jié)點多了以后服務器要維護大量短連接壓力很大設備端的網絡狀態(tài)不穩(wěn)定HTTP請求經常超時數(shù)據(jù)就丟了而且服務器想主動給設備下發(fā)指令特別別扭要么設備輪詢要么就得搞長連接或WebSocket工程復雜度一下子就上去了。換用MQTT之后這些問題會變得順滑很多。設備只需要和服務器維持一個TCP長連接數(shù)據(jù)通過發(fā)布消息上報指令通過訂閱主題下發(fā)服務器不需要知道設備IP、不需要維護復雜路由設備也不需要公網地址純粹通過主題來解耦。1.2 MQTT的核心設計哲學MQTT全稱是MQ Telemetry Transport最早是1999年由IBM的Andy Stanford-Clark和Arcom的Arlen Nipper為石油管道衛(wèi)星通信場景設計的。這個背景很重要因為石油管道那種環(huán)境帶寬極其有限、鏈路極不可靠、設備節(jié)點又多所以協(xié)議從誕生那天起就帶著三個基因極簡報文、容忍斷線、發(fā)布訂閱。所謂發(fā)布訂閱簡單說就是把消息的發(fā)送方和接收方徹底解耦。設備A往主題factory/zone1/sensor發(fā)布消息任何訂閱了這個主題的客戶端不管是云端服務、手機App還是另一臺設備都能收到這條消息。發(fā)布者不需要知道誰在收訂閱者不需要知道誰在發(fā)Broker代理服務器在中間做轉發(fā)。這種模式對設備端極其友好因為設備端只關心兩件事連上Broker把消息丟給Broker。剩下的分發(fā)、路由、權限控制全是Broker的事。1.3 和常見協(xié)議的對比對比維度MQTTHTTP/HTTPSCoAPTCP私有協(xié)議傳輸層TCPTCPUDPTCP/UDP報文開銷最小可到2字節(jié)頭請求頭往往幾百字節(jié)4字節(jié)頭由開發(fā)者定義實時下發(fā)支持服務端可推送不友好需輪詢支持觀察模式支持消息可靠性支持QoS分級依賴HTTP狀態(tài)碼確認報文需自己設計實現(xiàn)復雜度低低中高典型場景物聯(lián)網設備上報/下發(fā)接口調用、網頁資源受限的傳感網定制化強但開發(fā)量大拿HTTP做類比你會更容易理解MQTT的輕量一個HTTP GET請求光是頭部就可能有幾百字節(jié)而MQTT一個完整的PUBLISH報文固定頭加主題加負載幾十個字節(jié)就能搞定而且QoS 0場景下連應答都不需要。對于NB-IoT、2G這種按流量計費、帶寬極窄的無線網絡這個差距是真實可見的成本差異。1.4 MQTT在嵌入式學習路線中的位置如果你是剛入門嵌入式、正糾結先學什么我的建議是MCU外設和RTOS是基本功但通信協(xié)議一定要盡早涉及而MQTT是一個特別好的切入點。原因很實在它不需要你懂太多底層網絡知識只要有TCP/IP協(xié)議棧比如lwIP、Wiznet硬協(xié)議棧就能在上面跑起來它也不挑硬件一個ESP8266、一塊STM32加個串口WiFi模塊幾十行代碼就能把數(shù)據(jù)送到云端更關鍵的是它的調試工具鏈非常成熟你可以用MQTTX、mosquitto_sub這種現(xiàn)成工具在PC上模擬全部行為這對理解“設備-服務器-客戶端”三方交互非常有幫助。2. MQTT協(xié)議核心機制逐層拆解很多初學者看MQTT覺得頭大是因為一上來就扎進報文格式和回調函數(shù)里缺少一個整體框架。我建議你按“連接生命周期”這個思路去理解怎么建立連接、怎么保證連接活著、怎么傳輸數(shù)據(jù)、怎么保證數(shù)據(jù)不丟、怎么優(yōu)雅地告知別人自己掛了。把這個鏈條走通協(xié)議就算吃透了一半。2.1 連接建立CONNECT與CONNACK的細節(jié)客戶端和Broker建立MQTT會話第一步是發(fā)送CONNECT報文。這個報文里包含幾個關鍵字段ClientID、Clean Session標志、Keep Alive心跳周期、Username/Password以及可選的Will遺囑信息。其中ClientID特別值得注意。Broker要求同一時刻同一ClientID只能有一個連接存在如果兩個客戶端用了相同ClientID后連接的會把先連接的踢掉這在很多項目里是“設備頻繁掉線”的隱形元兇。設備重啟后如果固件里生成ClientID的邏輯不穩(wěn)定比如用了隨機數(shù)每次重連ClientID都變那么Broker上舊的會話就永遠得不到清理長期運行會堆積大量殘留會話消耗服務器內存。建議產品化設備固件里用芯片唯一ID或MAC地址作為ClientID的一部分比如esp32_a1b2c3d4e5f6。Clean Session標志決定了連接是持久會話還是臨時會話。置1表示連接斷開后Broker立即清除該客戶端的會話狀態(tài)置0表示Broker會保存客戶端的訂閱關系和離線期間QoS 1/2的消息等下次同ClientID上線時再補推。這個機制用好了能極大提升設備斷線重連后的數(shù)據(jù)連續(xù)性但代價是Broker內存消耗增加所以要在產品設計階段就決定好會話策略。2.2 Topic的結構設計與通配符規(guī)則Topic是MQTT消息路由的路徑結構上用斜杠分層比如devices/device01/telemetry/temperature。設計Topic時最忌諱的是把設備唯一標識放在層級深處這會讓權限配置和通配符訂閱變得非常痛苦。MQTT提供了兩種通配符單層和多層#。比如訂閱devices//telemetry/temperature就能收到所有設備上報的溫度消息不管中間的設備ID是什么訂閱devices/#則能收到devices下面所有層級的消息。上一級$SYS開頭的是Broker的系統(tǒng)主題用于發(fā)布Broker自身的運行狀態(tài)比如客戶端連接數(shù)、消息吞吐量這在運維監(jiān)控時很有用。關于Topic命名和規(guī)劃幾個實操經驗分享給你層級不要超過五層否則主題長度會白白消耗帶寬而且管理起來容易亂把設備類型放前面devices/{device_id}/telemetry/xxx把具體數(shù)據(jù)類型放后面方便用通配符做批量訂閱發(fā)布權限和訂閱權限要分開規(guī)劃設備端只允許往自己的Topic發(fā)布不允許訂閱別的設備消息這個在Broker的ACL里一定要限制住不然后果不堪設想云端可以訂閱通配符設備端不要用#去訂閱一堆和自己無關的消息白白耗流量燒電。2.3 QoS語義及其實現(xiàn)原理QoSQuality of Service是MQTT里最容易被誤解的部分。它分三個等級QoS 0最多一次。消息發(fā)出去了就不管了不管Broker有沒有收到不管接收方有沒有處理。適合傳感器周期上報這類允許丟數(shù)據(jù)的場景在嵌入式設備上也是最常用的等級。QoS 1至少一次。發(fā)送方發(fā)出消息后必須等到Broker返回PUBACK才認為發(fā)送完成否則重發(fā)。好處是保證Broker肯定能收到壞處是可能重復投遞接收方要做冪等處理。QoS 2恰好一次。通過兩輪四次握手PUBLISH-PUBREC-PUBREL-PUBCOMP保證消息既不丟也不重復代價是鏈路交互次數(shù)翻倍實時性和吞吐都會受影響。實際項目中除非是交易類、控制類指令一般很少用QoS 2。這里要糾正一個常見誤區(qū)QoS不是端到端的而是分段保證的。發(fā)布端與Broker之間是一段Broker與訂閱端之間是另一段。發(fā)布方用QoS 1發(fā)消息Broker可能以QoS 0轉給訂閱方這個在連接配置里是可以分別指定的。所以如果你需要消息到達最終接收方都有保證兩端的QoS都要配置成相應等級。2.4 Retain、遺囑與Keep Alive三個“小而美”的設計Retain標志可能是很多嵌入式工程師最容易忽略的一項。當發(fā)布者往主題發(fā)消息時如果置了RetainBroker會把這個消息存為“保留消息”這樣以后任何客戶端訂閱這個主題都會立刻收到這條保留消息。這個特性做狀態(tài)同步特別有用設備上線后往device/status發(fā)一條Retain消息表示“在線”云端或App后續(xù)訂閱這個主題不需要等設備再上報就知道當前狀態(tài)。要注意的是Retain消息會一直存在如果設備狀態(tài)變了要用新的Retain消息覆蓋設備離線要發(fā)一條空負載的Retain消息把它清掉否則云端讀到的永遠是過期狀態(tài)。遺囑消息Last Will and Testament則是一個“善后”設計。設備在建立連接時帶上一條遺囑指定遺囑主題和遺囑消息內容如果之后Broker檢測到設備異常斷開比如TCP連接超時、心跳超時、網絡無故中斷Broker就會代替設備把遺囑消息發(fā)布出去。這樣云端就能立刻感知設備異常下線而不是等超時。我在實際項目里經常用device/{id}/status這個主題配合遺囑設備正常上線發(fā)布Retain消息“online”異常掉線Broker自動發(fā)遺囑“offline”形成一個非常干凈的生命周期管理閉環(huán)。Keep Alive心跳機制則是維持連接的“體溫計”。客戶端在CONNECT時聲明一個心跳間隔通常30到120秒之后每隔這段時間就發(fā)一個PINGREQ報文給BrokerBroker回PINGRESP。如果Broker在約1.5倍間隔時間內沒收到任何報文就認為連接已死斷開連接并觸發(fā)遺囑消息。這個機制對嵌入式設備尤其重要因為很多嵌入式設備走的無線網絡運營商NAT超時一般只有幾分鐘如果沒有心跳保活連接會被網絡設備悄悄斷開設備端還以為連接還活著直到下次發(fā)數(shù)據(jù)才傻眼。3. 嵌入式端實戰(zhàn)從ESP32到STM32的落地經驗理解協(xié)議是第一步真正把它跑在受限的嵌入式環(huán)境里會有一堆工程問題等著你。這一節(jié)我以ESP32和STM32兩個平臺為例把從零到能跑通全鏈路的經驗和代碼片段整理出來。3.1 基于ESP-IDF的MQTT客戶端實現(xiàn)ESP-IDF自帶的esp-mqtt組件是基于ESP32的lwIP協(xié)議棧封裝的高層API底層用的是mqtt_client.c使用起來非常簡單。但簡單歸簡單有幾個配置項如果沒搞清楚實際項目里會很被動。先看一個最小可用的初始化流程#include mqtt_client.h static void mqtt_event_handler(void *handler_args, esp_event_base_t base, int32_t event_id, void *event_data) { esp_mqtt_event_handle_t event event_data; switch ((esp_mqtt_event_id_t)event_id) { case MQTT_EVENT_CONNECTED: ESP_LOGI(MQTT, Connected to broker); // 連接成功后訂閱指令主題 esp_mqtt_client_subscribe(event-client, devices/esp32/cmd, 1); // 發(fā)布一條上線消息 esp_mqtt_client_publish(event-client, devices/esp32/status, online, 0, 1, 0); break; case MQTT_EVENT_DATA: ESP_LOGI(MQTT, Received: %.*s, event-data_len, event-data); // 解析并執(zhí)行云端下發(fā)的指令 break; case MQTT_EVENT_DISCONNECTED: ESP_LOGW(MQTT, Disconnected from broker); // 斷線后esp-mqtt內部會自動重連這里主要做業(yè)務上的處理 break; default: break; } } void app_main(void) { esp_mqtt_client_config_t mqtt_cfg { .broker.address.uri mqtt://192.168.1.100:1883, .session.keepalive 60, .credentials.client_id esp32_a1b2c3d4e5f6, .credentials.username device01, .credentials.authentication.password passwd, .session.disable_clean_session true, .network.reconnect_timeout_ms 5000, }; esp_mqtt_client_handle_t client esp_mqtt_client_init(mqtt_cfg); esp_mqtt_client_register_event(client, ESP_EVENT_ANY_ID, mqtt_event_handler, NULL); esp_mqtt_client_start(client); }注意幾個坑esp_mqtt_client_publish的參數(shù)順序是(client, topic, data, len, qos, retain)len傳0表示自動用strlen計算但如果你發(fā)的數(shù)據(jù)是二進制流里面可能帶\0一定要顯式傳長度否則消息會被截斷.session.disable_clean_session true對應Clean Session置0也就是持久會話。開啟后設備重連Broker會記住它的訂閱設備端就不需要每次重連都重新訂閱一遍但Broker側會話內存會增加這個要根據(jù)實際設備量權衡事件回調里不要做耗時操作比如不要直接在里面解析大JSON、跑算法或者寫Flash。標準做法是把數(shù)據(jù)拷貝到隊列或任務通知交給其他任務處理。因為esp-mqtt的事件是跑在它自己的task上下文里的如果阻塞太久TCP接收緩沖會溢出導致連接質量問題。3.2 數(shù)據(jù)序列化JSON與二進制怎么選很多新手喜歡把傳感器的所有數(shù)據(jù)拼成一個很長的JSON字符串一次性發(fā)上云比如{t:25.6,h:58.2,pm25:35.4,noise:62.1,battery:78,rssi:-65}這樣做的好處是云端解析方便各種云平臺、Node-RED都能直接消費。但在嵌入式設備端要注意幾個問題第一浮點數(shù)轉字符串再打包成JSONMCU上做這個操作比較吃力尤其是Cortex-M0這種小核跑起來會有明顯延遲第二JSON字符串越長空中傳輸時間越長掉線窗口越大功耗也越高。我常用的策略是“雙軌制”日常周期上報用緊湊二進制格式按固定字段順序打包成字節(jié)流云端先根據(jù)設備類型和協(xié)議版本解析這種格式十幾二十個字節(jié)就能塞下全部數(shù)據(jù)調試模式或做產品演示時才發(fā)JSON方便抓包看內容。如果你覺得自研二進制格式維護成本高也可以考慮用CBOR或Protobuf它們在MCU上有現(xiàn)成庫解析效率和JSON完全不是一個量級。還有一點很關鍵無論用哪種格式都建議在消息里帶一個單調遞增的序列號或時間戳云端消費側做去重和亂序處理都靠它。我之前遇到過一個詭異問題設備上報的數(shù)據(jù)在云端經常出現(xiàn)舊值覆蓋新值的現(xiàn)象查到最后就是網關轉發(fā)消息亂序丟了一個序號字段導致下游沒法判序。3.3 STM32 lwIP/串口WiFi模塊的MQTT移植思路如果你用的是STM32且需要通過以太網接入常見的路徑有兩種一是跑帶lwIP的以太網方案比如W5500硬協(xié)議?;騍TM32PHYFreeRTOSlwIP二是用串口WiFi模塊比如ESP8266或Air724MCU通過AT指令驅動。兩種路徑移植MQTT的思路差別很大。先說帶lwIP的情況嵌入式MQTT庫最主流的是Eclipse Paho MQTT Embedded-C它有MQTTClient這個平臺無關的封裝只需要你實現(xiàn)網絡層的connect、read、write、disconnect這幾個函數(shù)就能跑起來。底層可以基于lwIP的socket也可以基于Netconn API。這里提醒一下lwIP默認的MEM_SIZE和TCP_SND_BUF/TCP_WND比較保守如果頻繁發(fā)大數(shù)據(jù)包要適當調大這些參數(shù)否則MQTT的send會被阻塞或返回錯誤表現(xiàn)為連接正常但消息發(fā)不出去。再說串口WiFi模塊的方案MCU只把MQTT報文當普通數(shù)據(jù)交給WiFi模塊透傳嗎不能直接這么干因為AT模塊的串口透傳模式通常只是裸TCP透傳MQTT報文本身需要MCU自己構造也就是你需要在MCU端實現(xiàn)MQTT協(xié)議的封包和解包。好在MQTT協(xié)議本身不復雜一個狀態(tài)機加上CRC校驗其實MQTT沒有CRC靠TCP保證就能搞定。如果想省事可以選那種內置MQTT協(xié)議的AT固件比如ESP-AT官方固件就支持ATMQTTCONN等命令MCU發(fā)幾條AT指令就能完成連接和發(fā)布代價是靈活性差一些而且如果固件有bug很難繞過。3.4 斷線重連與低功耗策略物聯(lián)網設備最大的敵人是“死了還在假裝活著”。設備端斷線重連不能簡單地“斷了我重連”要有策略。推薦指數(shù)退避方案第一次重連等3秒第二次等6秒第三次12秒最多拉到5分鐘封頂同時記錄連續(xù)失敗次數(shù)超過一定閾值要主動上報本地錯誤狀態(tài)或者進入低功耗深睡過一段時間再起來嘗試而不是無限空轉。在ESP-IDF里esp-mqtt自帶reconnect_timeout_ms但對于需要精細控制退避策略的場景更適合自己監(jiān)聽MQTT_EVENT_DISCONNECTED在事件里做業(yè)務決策比如“連續(xù)掉線N次就重啟WiFi”很多時候比單純靠協(xié)議層重連有效得多。低功耗場景下MQTT最大的矛盾在于長連接需要高頻心跳而高頻心跳會頻繁喚醒射頻非常耗電。如果設備電池只能支撐幾個月卻要保持“實時在線”這是個無解的矛盾除非接受一個折中設備平時處于deep sleep上報數(shù)據(jù)時醒來臨時連接發(fā)完就斷線睡覺。這種模式不走Keep Alive長連接而是“按時醒來發(fā)完走人”功耗能壓到極低代價是云端看到設備的狀態(tài)是“時隱時現(xiàn)”不適合需要持續(xù)在線控制的設備。如果是需要“在線但省電”的場景可以考慮用NB-IoT那種PSM模式或者把心跳周期拉長到幾分鐘同時配合遺囑消息功耗和實時性取一個中間值。4. 服務端搭建與調試工具鏈協(xié)議是雙方的事光有設備端還不行Broker選型、服務器部署、調試工具的使用這些環(huán)節(jié)直接決定開發(fā)效率和生產穩(wěn)定性。4.1 Broker選型Mosquitto還是EMQX輕量測試階段我個人很推薦Mosquitto。它是Eclipse社區(qū)的老牌開源Broker單機部署只要一條命令資源占用極小樹莓派上都能跑非常適合開發(fā)環(huán)境快速驗證協(xié)議邏輯。但Mosquitto的功能相對基礎集群、規(guī)則引擎、插件擴展這些企業(yè)級能力比較弱生產環(huán)境設備量一旦上千單節(jié)點很容易成為瓶頸。EMQX在這幾年是很多物聯(lián)網團隊的選擇它基于Erlang/OTP天生適合高并發(fā)連接幾萬甚至幾十萬連接在一個節(jié)點上都扛得住而且自帶Web管理控制臺、規(guī)則引擎、數(shù)據(jù)橋接能直接把消息流轉到MySQL、Kafka、InfluxDB這些存儲系統(tǒng)。還有Kepserver這種工業(yè)領域常用的OPC網關近幾個版本也提供了MQTT IoT Gateway能把PLC的OPC數(shù)據(jù)直接映射成MQTT主題在工業(yè)物聯(lián)網項目里很常見。選型建議很簡單做原型驗證或者設備量在百級以內用Mosquitto產品化、設備量千級以上、需要可視化監(jiān)控和規(guī)則鏈用EMQX省去后續(xù)遷移的痛苦。4.2 Docker快速搭建MQTT服務器不管選哪種Broker用Docker部署都會省去很多環(huán)境相關的麻煩。以EMQX為例docker run -d --name emqx \ -p 1883:1883 \ -p 8083:8083 \ -p 8084:8084 \ -p 18083:18083 \ emqx/emqx:5.8.0端口說明一下1883是MQTT標準端口8083是WebSocket端口瀏覽器里的MQTT客戶端一般都走這個8084是WebSocketSSL18083是EMQX自帶管理控制臺的端口。啟動后訪問http://服務器IP:18083默認賬號admin/public就能看到連接數(shù)、消息流入流出速率這些實時指標。Mosquitto更簡單不過要注意Docker跑Mosquitto需要掛載配置文件否則默認配置不允許遠程匿名連接docker run -d --name mosquitto \ -p 1883:1883 \ -v /path/to/mosquitto.conf:/mosquitto/config/mosquitto.conf \ eclipse-mosquitto:2一個能跑起來的最小配置長這樣listener 1883 0.0.0.0 allow_anonymous true persistence true persistence_location /mosquitto/data/生產環(huán)境務必關閉allow_anonymous改成賬號密碼認證再疊加啟用TLS否則你的Broker就是一臺公共廣播站。4.3 MQTT調試利器MQTTX與命令行工具調試MQTT最常見也最好用的桌面工具是MQTTX支持Windows/Mac/Linux界面清爽可以同時建多個客戶端連接手動指定Topic、QoS、Retain這些標志位也可以腳本化自動測試。它還能直接模擬遺囑消息這對驗證設備離線通知邏輯特別有用。比如你想測試“設備異常斷開后云端的遺囑監(jiān)聽邏輯是否正確”直接在MQTTX里建一個帶遺囑的連接然后強殺這個連接看Broker是否發(fā)布了遺囑。命令行場景下Mosquitto自帶的客戶端工具也是神器# 訂閱主題加 -v 選項會打印消息主題 mosquitto_sub -h localhost -t devices/# -v # 發(fā)布一條消息到指定主題 mosquitto_pub -h localhost -t devices/esp32/cmd -m {action:reboot} # 用 -q 指定QoS用 -r 開啟Retain mosquitto_pub -h localhost -t devices/esp32/status -m online -q 1 -r這套工具鏈的最大價值在于它讓你能把“設備端-云端”和“測試客戶端”分開來查問題。設備端數(shù)據(jù)上報不上來先用MQTTX訂閱設備主題看Broker到底有沒有收到消息如果Broker收到了但云端沒顯示那問題就在云端消費側不要一上來就懷疑設備固件。4.4 與云平臺對接一機一密與Topic權限除了自建Broker很多項目會直接選用阿里云IoT、華為云IoT或騰訊云IoT平臺。這些平臺的MQTT接入地址、端口、認證方式都有差異但大致流程一致在云端創(chuàng)建產品和設備拿到設備三元組ProductKey、DeviceName、DeviceSecret設備端用三元組計算簽名拼進MQTT的Username和Password字段就能連上。連接時注意這些云平臺對ClientID格式有嚴格約定通常是DeviceName_安全級別_時間戳這種后綴拼錯了連不上拼對了但大小寫出錯也連不上細節(jié)一定要對著文檔核對。云平臺的Topic體系也頗有講究通常分為物模型Topic如/sys/{ProductKey}/{DeviceName}/thing/event/property/post、自定義Topic和數(shù)據(jù)流轉Topic。設備端只能往云端規(guī)定的Topic發(fā)布或訂閱權限在平臺側控制。這些Topic往往比自建Broker的Topic長得多在設計設備固件時要把Topic存儲的內存預留好我用ESP32時因為Topic太長導致發(fā)送緩沖區(qū)不夠出現(xiàn)過發(fā)布接口返回錯誤的問題后來把緩沖區(qū)從默認的1024調到2048才解決。5. 常見問題與排障經驗實錄最后這部分把我的實際排障經驗和高頻問題整理成速查表每一個都是踩過坑換來的。5.1 高頻故障速查表現(xiàn)象可能原因排查思路與解法設備連不上Broker端口不通、防火墻攔截、Broker地址配錯先本機用MQTTX測試再在設備端ping服務器IP確認網絡層通不通1883被運營商封鎖也很常見嘗試改走8883端口TLS能連接但一訂閱就斷開ClientID重復或被Broker判定為非法訂閱檢查是否有兩個客戶端用了相同ClientID檢查ACL權限設備端沒權限訂閱某些主題會被斷開設備頻繁掉線重連NAT超時、心跳間隔太長、WiFi信號差縮短Keep Alive到30秒確認設備端啟用了心跳排查周圍WiFi信道干擾順便看RSSI變化趨勢消息偶爾丟失QoS 0場景下網絡抖動Broker端內存溢出對關鍵數(shù)據(jù)升到QoS 1設備端記錄發(fā)送日志檢查Broker日志看是否有連接被強制斷開消息重復收到使用了QoS 1且接收端沒做冪等消費端按消息里的序列號去重升級到QoS 2但確認你的場景能接受額外網絡開銷遺囑消息沒觸發(fā)設備是“優(yōu)雅斷開”而不是異常斷開只有異常斷線才觸發(fā)遺囑如果設備主動調用disconnectBroker不會發(fā)遺囑確認遺囑主題和QoS配置正確Broker內存持續(xù)上漲大量持久的會話堆積檢查是否大量ClientID變了但Clean Session為0定時清理殘留會話限制離線消息大小5.2 一個典型的“幽靈掉線”排查案例有一次在客戶現(xiàn)場設備上報數(shù)據(jù)總是每隔一兩分鐘斷一次然后又重新連上看云端日志全是CONNACK成功和DISCONNECT交替。一開始懷疑是設備端代碼問題用支持抓包的調試器盯了好久也沒發(fā)現(xiàn)異常。后來我用MQTTX掛在同一個Broker上觀察全局連接發(fā)現(xiàn)設備連接斷開的時間點很有規(guī)律——幾乎精確地落在每兩分鐘整。這個規(guī)律立刻讓我想到運營商NAT超時很多4G模塊默認的心跳是120秒而運營商NAT的空閑超時通常也是2到5分鐘。設備端發(fā)了心跳Broker回了PINGRESP但NAT映射已經被回收了下一次心跳就丟了。Broker端一直沒收到后續(xù)報文就按Keep Alive超時把連接斷開觸發(fā)重連。而問題更隱蔽的地方在于設備端的lwIP認為TCP連接還是活的因為沒收到RST所以不會主動重連直到應用層超時才能感知。解決辦法是雙管齊下把Keep Alive從120秒縮短到30秒同時在設備端加了TCP層的心跳檢測和異常重連機制。從那以后掉線頻率幾乎降到零。這個案例也側面說明MQTT的Keep Alive不能簡單照抄配置要結合自己所處網絡環(huán)境來定尤其是蜂窩網絡和跨運營商通信心跳間隔寧可小一點。5.3 設備端資源受限的優(yōu)化心得MCU的Flash和RAM都很珍貴跑MQTT庫之前一定要算清楚開銷。以Paho Embedded-C為例默認緩沖區(qū)分配是連接緩沖區(qū)加發(fā)送緩沖區(qū)最大包大小直接決定RAM占用。如果你只需要發(fā)幾十字節(jié)的傳感器數(shù)據(jù)把緩沖區(qū)調小到256字節(jié)內存占用可以省下一大截。但要注意如果Topic本身很長加上固定頭、可變頭、消息體總包大小一旦超過緩沖區(qū)接口就會返回MQTT_BUFFER_TOO_SMALL錯誤。正確的做法是事先估算最壞情況下的報文大小。我在一個STM32L4項目里就遇到這個問題。固件里規(guī)劃了一塊1KB的MQTT發(fā)送緩沖區(qū)結果設備端訂閱的主題長度達到150字節(jié)加上負載將近300字節(jié)勉強沒問題。但后來在固件里加了OTA升級包URL上報功能URL里塞了帶簽名的長連接整條消息奔著1.2KB去了發(fā)布直接失敗。后來我把消息拆分URL拆成多條內容塊分批發(fā)才繞過了物理限制。這個經驗告訴我做MQTT設備端開發(fā)時報文最大長度是一個要提前確定的架構級參數(shù)后續(xù)所有功能設計都得為它讓路別等到上線了才發(fā)現(xiàn)頂不住。5.4 安全相關的底線建議如果你做的設備要過等保、過安全測試或者連接的是公網Broker下面幾條是基礎底線不做到位很容易被攻破生產環(huán)境禁用匿名連接每個設備分配獨立賬號密碼用一機一密方式動態(tài)生成不要所有設備用同一個密碼優(yōu)先使用8883端口TLS加密通信哪怕證書是自簽的也比裸用1883強得多如果MCU性能不夠跑完整TLS握手至少要做設備端到Broker端的鑒權并考慮使用更輕量的XAUTH、PSK等方案設備端不要硬編碼Broker密碼在固件里最好通過產線工具注入到獨立存儲區(qū)域防止固件逆向后密碼泄露導致整個Broker被刷Topic劃分時收和發(fā)的權限要嚴格隔離。一個常規(guī)的權限配置是設備能往device/{id}/pub/#發(fā)布只能訂閱device/{id}/sub/#跨設備訂閱一律拒絕。這些習慣看似繁瑣但真到出事的時候就知道了多一道閘就多一份安全。6. 最后分享幾個個人習慣根據(jù)自己的實際經驗最后羅列幾條我平時做MQTT項目時一定會遵守的習慣算是給新入坑的朋友一些參考第一每個Topic的消息結構一定要寫文檔哪怕不寫正式文檔也要在代碼倉庫里維護一份Markdown記錄字段類型、單位、取值范圍、版本變更。MQTT項目后期最痛苦的永遠是消息格式的兼容問題設備固件不能像App一樣強制升級格式一旦定了再改是牽一發(fā)動全身。第二設備端固件里把連接狀態(tài)、最后心跳時間、最后消息收發(fā)時間記錄下來出了問題先看這個日志能省大量摸底時間。我見過太多設備掛在墻角問現(xiàn)場的人說“剛才還好好的”拿日志一看重連機制早就失效了。第三新項目上線前做一個簡單的拔線測試把設備正常跑起來然后直接插拔網線或者斷電WiFi觀察設備重連、緩存、消息補償、遺囑觸發(fā)這些行為是否符合預期。這個測試聽著簡單但很多看起來很高端的物聯(lián)網項目連這一步都做不好。MQTT作為一個已經存在二十多年的協(xié)議其設計簡練而實用但它終究只是個傳輸管道真正值錢的是圍繞它建立的一整套端到端系統(tǒng)設計能力。希望這篇文章能幫你把這條管道的每個閥門都看清楚下次做物聯(lián)網項目時能少走一些彎路。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
第四色色色色色丁香五月天| 激情五月六月丁香| 丁香五月婷婷激情尤物| 激情五月综合网最新| 夫妇交换刺激做爰| 国产五月天欧美色| 久久综合九九| 婷婷综合性爱网| www夜夜操wwwcon| 色婷婷综合久久| 激情宗合网激情五月天| 四色永久成人网站| 色综合中文综合网| 精品国产一区二区三区四区阿崩| 久久久久这里只有精品| 丁香五月天偷拍| 亚洲经典三级| 棕合影院色色| 激情婷婷五月社区| 狠狠激情五月天| 色色丁香五月天社区| 五月天婷综合| 婷婷激情五月天亚洲综合| 五月丁香婷婷啪啪综合| 精品一二三区久久AAA片| 色屌丝中文字幕| 五月丁香婷婷色色| 久久久九九视频精品18| 亚洲综合在线视频| 激情久久久久| 久久久久久人妻| 丁香六月婷婷综合激情欧美 | 天天干天天爽天天操| 亚洲岛国电影| 色播丁香| 久久精品99国产精品日本| 丁香婷婷激情网站| 久久66成人网站| 丁香五月天导航| 婷婷丁香五月天综合在线日韩| 久热婷婷| 成人国产综合| 天天综合久久| 99热老司机| www.夜夜操.com| 丁香六月 婷婷六月| 殴美97色| 九色成人AV在线| 色色五月婷婷| 五月丁香精品| 激情六月天| www.色窝| 色青青视频| 91精产一区三区免费观看| 色99色| 色丁香久久久| 五月婷婷丁香| 色九九综合| WWW,五月| 啪啪综合网| 一级黄色影片| 亚洲99热| 日本激情91| www.婷婷五月天,com| 丁香五月婷婷网| 五月丁香六月婷婷姐| 婷婷中文字暮| 天堂色婷婷| 97久久精品| 天天综合天综合| 五月天伊人手机在线播放AV| 91久久电影| 欧美 日韩 成人在线| 日韩在线视频中文字幕| 91九色最新视频| 九九在线视频| 激情综合亚洲| 97精品综合久久内射| 182tv992tv人之初午夜免费观看| 影音先锋男士资源网一区| AV六月丁香| 一级性感黄色内射视频| 伊人干综合| 丁香五月激情网| 丁香五月天堂| 九九婷婷网五月天| 五月丁香成人网| 成人免费120分钟啪啪| 亚洲愉拍99热成人精品| av色婷婷| 26uuu欧美日本| 久机视频这只有精品| 丁香五月无码| 思思热在线观看| 日木WWW视频| 天堂中文国产| 六月丁香婷婷天堂| 五月丁香六月婷婷色日| 中文毛片无遮挡高潮免费| 99热99| 五月婷婷亚洲色图| 天天干,噜噜色,狠狠色| 婷婷久热| 婷婷成人av| 久婷婷五月综合欧美| 五月天丁香综合久久国产| WWW,色五月| 99在线视频免费| 婷婷六月网| 丁香五月天激情视频| 欧美性爱五月天| 精品香蕉99久久久久网站| 99人妻碰碰久久久禁片| 色婷婷WWW| 夜夜夜叫天天天做| 久久性爱视频| 人妻性爱av网站| 99久在线精品99re8热| 亚洲黄色影视| 婷婷五月丁香基地在线视频官网| 色域五月婷婷丁香| 九九热在线99| 五月天天综合| 天天色凹凸| 99免费成人网| 激情综合网址| 久久久性爱网| 人妻精品在线| 精品久久9| ss视频xx91| 久久伊人大香蕉| 香蕉婷婷色五月| 婷婷.com| 综合久久综合综合| 久热最新视频| 嫩草AV久久伊人妇女超级A| 十区AV| 激情亚洲色图片丁香综合| 婷婷精品在线| 五月开心婷婷网| 97碰碰视频在线观看| AV六月丁香| 五月开心深爱激情网| 97人人干人人操| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | AV在线不卡网站| 99热日本| 国产女18毛片多18精品| 天天干 夜夜爽| 99热香港| 色色热| 91亚洲免费片| 亚洲无码播放| 深爱五月激情网| 天天操天天操天天操天天操天天操天天操| 欧美性猛交AAAA片黑人 | 婷色五月| 99热首页| 久久婷婷六月| 在线看片h站| 99色激| 99综合在线| 精品成人久久久久久久_一二三四视| 性爱久久| 日韩成人电影AV| 99精品偷拍视频| 天天五月天综合网址| 91色综合久久| 中文字幕视频在线播放| 三区激情四射av| 亚洲精品色| 婷婷综合网在线| 俺也去综合| 大香蕉五月婷婷丁香| 天天日婷婷| 香蕉曰比| 久久五月天婷婷| 很很操96| 色婷婷亚洲综合网站| 成人丁香婷婷| 丁香六月婷婷综合激情欧美 | 六月婷婷激情小说网| 五月停停大香蕉| 丁香五月婷婷香| 激情婷婷丁香五月天| 99在线精品观看99| 五月婷婷色情| www.99.色| 激情综合网五月| 丁香五月激情婷婷| 大香伊人婷婷影院| 色五月五月婷婷| 婷婷五月天受日本法律保护| 婷婷中文综合网| 国产精品电影网| 亚洲五月天色| www,色综合| 婷婷操逼| 婷婷爱婷婷| 第四色色六月色综合| 熟女激情五月天| 性韩日色婷婷五月天激情啪啪XXX| 乱精品一区字幕二区| 国产精品在线视频| 狠狠第四色| 无码人妻丰满熟妇奶水区码| 五月激情综合网| 丁香六月婷婷激情综合| 亚洲AV无码影院| 五月天社区| 五月天婷婷丁香| 激情综合亚洲| 久久天堂| 99在线免费视频| 婷婷色香六月综合激情| 五月婷婷久久久| 人妻操逼视频| 婷婷五月天激情五月天深爱五月天| 人妻激情综合| 97伊人综合婷婷| 777精品久无码人妻蜜桃| 精品久久这里热66| 99热这里只有精品86| 天天搽天天射| aⅤ79成人片| 中文字幕性爱视频| 久久九九热re6这里有精品| 日本综合色色| 五月久久婷婷天堂视频| 五月色色激情网| 色狠狠综合网| 婷婷五月综合中文字幕| 精品亚洲国产成AV人片传媒| 天天爽天天操| 伊人无码高清| 777精品久无码人妻蜜桃| 五月丁香婷婷婷激情爱爱| 激情亚洲婷婷六月| 全国最新疫情| 色婷婷激情五月天在线观看| 战争与艾拉电影免费观看| 亚洲欧洲美女在线观| 婷婷综合五月| 无码任你操| www.天天干.com| 97色片| 96精品成人无码A片观看金桔| AV在线观看网站| 开心激情网五月天| 夜夜操狠狠操| 激情五月婷黄版| 欧美肉大捧一进一出免费视频| 欧美综合五月丁香六月婷| 这里只有精品在线视频在线观看| 婷婷五月天激情诱惑| 久久这里只有欧美| 丁香五月中文字幕久色| 色五月婷婷影院| Www.狠狠| 99日本黄站| 天天综合精品| AV在线大香蕉| 99综合视频一体| 婷婷六月综合激情| 日本欧美成人片AAAA| 天天日天天插| 丁香五月天AV在线 | 九九成人电影婷婷| 99热999| 伊人成综合五月婷婷| 色.五月综合网| 久久久久久五月天| 色欲影香| 色婷丁香五月| 逼里香不卡| 久久精品视频在这里有| 婷婷涩五月| www.91色| 伊人网色婷婷五月天| 久久综合婷婷激情| 久久视频婷婷| 欧美色色色色色色色色色色影视| 日韩成人中文字幕| 欧美五月丁香在线观看| 亚洲色网络| 超碰色色综合| 97亚洲视频在线| 91狼友视频网页更新| 综合九九久久| 深爱婷婷基地| 丁香婷婷成人网| 欧美大道不卡| 免费无码毛片一区二区A片| 亚州欧美黄色电影| 九九99久久| 色色丁香五月婷婷| 久久婷婷色色| 国产99久9在线+|+传媒| 97操| 日日干综合| 婷婷五月天亚洲天堂| 久久五月综合| 婷婷97狠狠成人网站| 五月婷婷综合在线视频| 9er热在线精品视频| 婷婷激情丁五月| 五月婷婷官网色| 人人操AV| 色一情一乱一乱91Av| 五月天激情综合网俺也去| 激情综合色| 999热在线视频| 日本视频不卡123区| AVV黄| 九九热只有这里是精品| 婷婷中文在线| 99综合熟女| 天天插夜夜爽| 国产67194| 日本九九九九九九| 丁香六月无码| 午夜天堂一区人妻| 色一区高清| 操骚货在线| 专区无日本视频高清8| 丁香五月婷婷激情中文| 五月天堂在线| 国产在线aaa片一区二区99| 99.N在线视频| 精a品a| 国产精品人人做人人爽人人添| 毛v一区二区视频| 亚洲女婷婷五月基地综合久久久| 婷婷九月色| 色色五月天网站| 深爱五月婷婷开心中文字幕| 五月丁香婷婷久久| 五月婷中文字幕| 五月六月婷| 欧美成人AAA片一区国产精品| 婷婷射丁香| 五月婷婷丁香五月 | 中国女人做爰A片| 婷婷激情综合网| 很很干天天干| 色婷婷色五月综合| 99精品无码| 丁香五月婷婷综合激情哟哟哟| 色五月天综合| 色青青电影色五月| 五月婷婷开心丁香| 五月婷婷久久爱| 婷婷深爱色五月| 九九伊人网| 最新日本A片| 玖玖色综合| 国产ava| 天堂久久婷婷| 久热超碰| 激情五月综合| 日韩AAA| 国产日产亚系列精品版优势 | 99视频精品在线| 亚洲视频五区| 播播网色播播| 99视频精品视频| 色人久久| 婷婷色Av| 9久久AV| 色婷婷五月在线| 1024婷婷综合久久五月天| 一起草无码| 国产精品成人AV在线| 激情六月天| 久久婷婷五月丁香网| 丁香五月综合婷婷| 开心五月婷婷六月丁香| 丁香影院五月综合| 成人av在线电影| 久操大香蕉| 天天干天天爽| 国产精品成人av在线观看春天| 婷婷伊人综合| 欧日韩成人| 亚洲成人在线播放| 级人人91| 五月天色色网站| 5月婷婷综合| 久久99国产综合精品免费| 538久久| 91免费啪视频| 欧美日韩99| 79亚洲精品少妇| 99re6在线视频精品免费| 婷婷五月中文字幕国产| 久久精品五月天| 热99在线| 婷婷开心久久| 激情久久久| 91日在线视频| 五月丁香六月婷婷综合网站| 日韩成人电影AV| AV片一区在线观看| 激情综合网五月激情网| 欧美日本综合网| 99热伊人综合| 婷婷五月色天| 深爱激情五月婷婷| 99热免费精品热久久66| 精品九九婷婷| 亚洲免费看片| 五月天开心激情综合网| www.91.com处女在线直播| 色婷婷丁香花五月天| 98永久精品| 色国产五月| 久热婷婷在线视频| 亚洲V国产V欧美V久久久久久| 亚洲色视频| 天天色天天色天天色天天色天天色天天色| 成人片在线免费看| 极品人妻VIDEOSSS人妻| 天天摸天天肏| 99在线观看精品视频| 狠狠香婷婷五月| 欧美日韩国产日本精品四虎网网站物 | 嫩草AV久久伊人妇女超级A| 婷婷六月综合激情| 97色婷婷五月天| 亚洲综合在线视频| 91色九| 任你搞免费视频观看| av九九| www.五月丁香| 99综合色| 国产乱妇乱子伦| 丁香婷婷综合精品六月初| 激情五月天色色色| 性爱激情综合网| 久久五月天婷婷| 五月丁香六月婷婷无码| 色婷婷丁香五月天激情综合网| 久久曰曰| 99热福利| 五月丁香综合激情| 色色激情网| 久热伊人在91| 超碰97色| 婷五月天丁香婷五月| 无码少妇高潮喷水A片免费| 综合色五月| 夜夜躁婷婷AV| 六月婷婷视频| 天天操夜夜操| 99操无码视频观看| 亚洲美女高潮久久久久久69| 丁香六月狠狠干| 五月综合激情| 99啪| 伊人五月综合网| 97久久人人操| 日韩1区2区| 丁香九月婷婷| 国产激情久久久| 五月丁香久久| 国产精产国品一二三在观看| 91色性感五月婷婷丁香| 97操碰在线97| 91综合在线观看| 青青色com久久| 婷婷94s| 99ri视频在线观看| 大香蕉伊人99| 亚洲婷婷五月天在线激情综合网| 丁香五月天色| 亚洲九九在线| 亚洲精品婷婷| 五月香婷婷| 超碰精品在线| 久久99人人| 五月综合激情图片| 婷婷五月综合久久中文字幕| 99免费热在线精品| 久久久久人妻中文| 久久久久激情网| 玖玖综合色| 激情五月天影院| 熟女人妻一区二区三区免费看| 图片区 小说区 区 亚洲五月 | 91VIP在线观看| 黄色五月婷| 色婷婷综合网站| 精品人妻伦| 综合五月天婷婷色| 超碰免费人妻| 久久久国产精品黄毛片| 狠狠色婷婷色| 久久最新色色色| 熟女五月天久久综合| 国产精品热搜丁香五月婷婷| 色墦五月丁香| 超碰妻人人| 香蕉婷婷色五月| 婷婷五月天堂网| 五月婷六月丁| 日韩999| 国产XXXX搡XXXXX搡麻豆| 97ai婷婷| 五月天激情小说电影| 五月婷婷综合网| 色色婷婷综合网| 丁香五月激情网| 欧美性猛交 XXXX 乱大交| 婷婷婷五月香蕉| 色婷婷五月影视| 26uuu欧美宗合| 中文字幕在线日亚州9| 婷婷丁香熟女| 亚洲国产精品五月天| 五月婷婷丁香综合网| 欧美一级色| 99热爆在线| 九九久久精品| 五月婷婷开心网| 色婷婷小说| 9福利性视频欧美| 亚洲综合婷婷| 激情五月天网站| 91视频人人做97| 色高清无码视频| 1024国产| 啪啪操操| 无码任你操| 中国丰满熟女A片免费观| 性爱五月丁香| 五月婷婷亚洲色视频| 久久精品国产AV一区二区三区 | www.lingjunshare.com| 亚洲欧美成人在线| 色五月91| 99玖玖在线视频| 操逼电影免费看| 欧美成人热| 在线另类| 丁香六月啪啪| 亚洲色网络| 97在线/亚洲| 免费不卡狠操美女视频网| 少妇人妻偷人精品无码视频新浪| 五月丁香六月婷婷精品| 91久热| 婷婷六月视频| 播播网色播播| 久久婷婷亚洲无码一起| 丁香五月天中文字幕| 婷婷婷婷午夜| 思思久久青草热| 激情都市另类| 婷婷六月天激情影院| 午夜不卡久久精品无码免费| 婷婷亚洲激情在线观看视频| 欧美成人精品A片免费一区99| AAA久久| 欧日韩成人| 婷婷色五月激情强奸四射| 丁香五月婷婷天堂大香蕉| 天天骑日日爽| 色婷婷婷婷| 99精品在线播放| www.99热视频| 影音先锋色色色资源色资源色| 婷婷综合五月| 激情五婷精品网在线观看网址| 国产精品久久久久久白浆色欲| 一区二区免费看| 超碰97免费在线| 色婷婷AV在线| 婷婷五月天激情网| 久久成人性爱| 婷婷五月激情欧美大胆视频| 国精产品久久| 光棍影院日韩精品| 91九色精品女同系列| 色五月色图| 天堂A∨在线| 六月婷婷成人| 亚洲六月色| 色五月影视| 婷婷婷久久久| 亚洲激情另类| 丁香五月婷婷成人网| 欧美一级毛卡片无码| 99久久五月婷婷| 五月婷婷三级| 裸睡玩奶头(高H)| 天天爽天天透天天爱| 天堂网亚洲色图| 婷婷月综合| 色情成人五月天| 很很干天天干| 激情深爱综合| 丁J香六月首页| 激情图片婷婷丁香五月| 天天舔天天摸天天射| 九九爱精品网站| 久久与婷婷| 激情合网婷婷| 欧美色色色色色色色色色色| 色噜噜狠狠色综无码久久合欧美| www夜夜操com| 97亚洲色 torrent magnet| 666555。COm毛片| 另类图片五月天| 欧日美女Va| 永久天堂日本| 亚洲激情四射| 五月天综合| 99热日韩这里只有精品| 97婷婷在线视频| 五月综合色| 夜夜爽天天爽| 激情婷婷五月黑人| 婷婷五月亚洲综合| 操碰99在线视频观看| 夜夜夜夜夜操| 婷婷狠狠操| 亚洲激情高潮| 成人看片网站| 综合久久久婷| 丁香五月天大香蕉啪啪| 婷婷激情小说| 9月色婷婷| 婷婷五月婷婷五月| 欧美激情丁香五月天久久婷婷一区| 99热99思午夜精品| 超碰亚洲欧美| 六月丁香五月婷婷| 婷婷五月天影院| 色中色综合| 六月色色婷婷| 电影蜘蛛女| 人人操97| 丁香六月婷婷综合啪啪| 亚洲视频在线网| 大学生高潮无套内谢视频| 国产免费一区二区三区三州老师F1F1.CC| 亚洲五月天伊人| 精品久色| 五月婷婷综合网| 亚洲天99| 国产精品成人AV在线| 成人 九九九九| 婷婷五月天淫荡| 欧美黑人巨大性生话| 色欲色香综合网| 日韩在线视频中文字幕| 七七九色| 亚洲熟女色| 色五月大| 婷婷色五月开心五月| 五月丁香中文字幕| 成人丁香五月天| 韩国三级五月天婷婷。| 久久aaaa片一区二区| 亚洲综合网激情五月天| 婷婷大美在线| 五月丁香在线国产| 丁香婷婷六月激情综合| 九九久久五月天综合伊人| 激情综合色五月六月婷婷| 婷婷五月欧美综合| 婷婷在线午夜| 婷婷色成人| 五月丁香淫淫婷婷婷| 五月天激情无码专区| 天天干天天射色综合| 国语精品探花| 五月天婷婷久久视频| 丁香五月激情婷婷婷婷在线观看| 激情丁香五月天| 另类视频五月天| 色玖玖综合| 欧洲亚洲免费视频9| 六月婷婷色综合| 亚洲综合五月天| 综合色99| 丁香五月影| 九九精品丁香花| 色婷久| 婷色五月天| 丁香六月婷婷综合激情欧美| 九九草热在线观看| 这里只有精品在线视频在线观看| 9久热在线视频精品| 99热99色| 亚洲精品无码99热| 色婷婷色综合激情91| 激情综合九月| 婷婷区日本| 色婷婷丁香五月天| 99精品在线观看视频| 天天干一干| 高清a片基地| 激情爱爱网站| 婷婷五月天777| 天天撸天天干天天插| 色五月激情综合| www久久久| 婷婷五月综合免费在线| 五月丁香啪啪网| 99热这里只有精品69| 五月天婷婷7米| 超碰精品在线| 丁香五月天婷婷91| 99色啊| 日本人人xxx| 亚洲久热| 丁香五月婷婷综合激情啪啪啪啪啪啪啪 | 久色88| 激情丁香久久| 天天综合网在线| 久久久com| 久久99jiu9| 五月丁香六月婷婷啪啪综合| 国产偷人妻精品一区| 欧美在线干| 青青草网武则天| 日日干日日色| www999日韩精品| 色婷婷伊人激情在线观看| 五月久久婷婷丁香| 日本va欧美va欧美va| 色五月天电影| 91九色欧美| 狠狠色无码| 久热九九| 午夜成人在线免费视频| 色色网站免费观看| 99热欧美| 亚洲色碰| h在线看免费版在线看| 国产精品扒开腿做爽爽爽A片唱戏| 98永久精品| 深爱五月日韩| 少妇大叫太大太粗太爽了A片| 婷婷久久丁香五月| AV五月婷婷露脸| 99视频在线观看地址| 精品久久99| xx久久| 97婷婷五月激情六月丁香伊人| 深爱激情五月天色婷婷| 久久99热这里只频精品6学生| 激情五月天的婷婷| 99久在线精品99re8| 99热99艹在线观看| 最新激情五月天| 五月天婷婷久久视频| 婷婷综合视频| 久久人人九| 久草丁香婷婷五月天婷| 丁香六月成人| 超碰A V在线| 免费观看欧美成人AA片爱我多深| 色香蕉精品五夜婷| 五月色欧洲| 中字幕视频在线永久在线观看免费| 99久久久久| 国产激情视频在线观看| 9有码中文| 欧美日韩成人一区二区| 国产AV不卡福利| 五月婷婷之婷婷| 五月天婷婷色色首页| 丁香五月无码| 热99热久| 99这里只有精品视频| 五月天伊人久久| 色五月人妻| 婷婷激情四射网| 曰曰久久| 青草网在线观看| 热久久这里只有精品| site:hcxsz888.com| 五月天激情网站| 丁香五月成人论坛| 成人无码免费一区二区中文| 5月丁香六月婷婷| 玖玖综合色区在线观看| 色色色色热| 热五月婷婷| 激情亚洲网| 性色播| 久久人妻少妇嫩草AV| 秋霞影音91人妻久久| 婷婷丁香精品视频在线观看| 婷婷深爱五月| 色热久| 啪啪啪综合网| 国产色五月婷婷| 99碰在线视频| 直接看的AV| 天天综合干| 特黄三级又爽又粗又大| 猫咪伊人久久| 都市激情蜜桃婷婷五月天| 风流少妇A片一区二区蜜桃| 色欲五月婷婷| 超碰在线中文字幕| 久久精品99| 婷婷五亚洲| 五月丁香综合在线| 色99色| 99re热视频这里只精品| 国产成人AV在线| 在线观看国产高清视频免费网站 | 色婷五月天| 五月丁香婷婷网网网网| 丁香激情综合| 久婷婷婷| 99精品7| 免费啪啪亚州视频| 日本视频久久| 色色激情网| 天天干天天操天天上| 99热碰碰| 强壮的公次次弄得我高潮A片日本 | 日本va欧美va欧美va| 狠狠色婷婷777| 三日本无码| 色色五月天婷婷| 深爱激情网综合| 99re这里只有精品99| 久久激情四射| 九九综合| 五月天社区婷婷丁香社区| 丁香五月AV在线| 操操熟女| 精品一二三区久久AAA片| 国产精品爽爽久久久久久| 婷婷六月丁香久| 久久综合丁香| 91久久18| 免费看欧美成人A片无码| 五月丁香激| 99惹精品视频| 丁香六月色香蕉视频| 激情久久婷婷| 婷婷五月天99综合网站| 色婷婷视频在线| 婷婷九月丁香| 。久久久久久久久久久久久久人妻| 色五月婷婷婷婷婷婷婷婷婷婷| 操比激情五月| 九九九激情综合| 狠狠色狠狠操| 淫视馆AV在线| 婷婷丁香18| 五月天俺去也| 色五月婷婷大| 美女五月激情| 99色激| 久久婷婷综合基地| 色综合香蕉视频| 91制片厂久久久国产电影| www.夜夜| 97婷婷色| 狠狠操狠狠操AV| 日本啪啪网| 五月天婷婷色| 天天色视频| 丁香五月在线观看完整版| 丁香婷婷免费| 婷婷五月天激情偷拍| 丁香五月天堂网| 婷婷五月亚洲综合| 婷婷99中文字幕| 五月丁香激情怕怕| 欧美丁香五月| 色噜久| www.久久婷婷| 射久久丁香五月| 在线伦子99热| 亚洲成人网站在线| 超碰精品国产首页| 综合九九中文字幕| 婷婷玖玖丁香| 五月激情射| 五月婷婷久久大香蕉| 91互操| av国产精品偷| 欧美在线操| 五月丁香六月婷综合成人综合| 猫咪伊人久久| 天天肏夜夜肏| 中文字幕丰满乱孑伦无码专区| 五月丁香婷婷福利| 亚洲色五月天在线| 丁香五月天无码| 激情小说之五月| 久久色五月天综合网| 九九精品网| 丁五月激情视频免费| 色婷婷六月天| 大香蕉啪啪啪| 婷婷丁香六月| 伊久大香蕉| 国产探花一片区| 成人色图情色成人网 www.5b5b5bcom 五月天| 色色色色色色色色色色色色色五月天| 婷婷色偷拍| 婷婷伊人综合中文字幕| 五月天无码| 婷婷六月天精品| 欧美激情综合色综合| 精品无吗va视频免费观看| 成人AV中文字幕| 深爱激情综合网| 全部老头和老太XXXXX| 色色色色丁香| AVV黄| WWW,五月天| 婷婷五月天日日日干干干| 婷婷综合精品视频97| 亚洲婷婷五月| 日韩九区| 色丁香五月婷婷综合久久| 琪琪色五月天| 青草视频在线蜜臀| 五月丁香六月情| 九九Av| 五月天久久婷| 1024婷婷综合久久五月天| 丁香六月婷婷综合激情欧美| 久色五月| www久| 丁香,开心成人,久久| 日本精品干| 久久99激情| 99热这里只有精品4| 第四色五月天| 草榴视频黄色网| 色婷久久| 另类五月激情| www.狠狠| 久久精品五月| 亚洲 激情 中文| 五月婷婷啪啪综合网| 超碰在线91| 成人在线观看一区| 天天做天天爱天天爽在| 99这里只有精品视频| 99色热| 天天综合网~91| 狠狠狠狠狠狠狠狠草| 五月天丁香成人| 婷婷中文字幕网站| 秋霞黄色一级久久| 色噜噜狠噜噜视频| 97caop| www久久99| 婷婷免费视频| 色婷婷8| 日韩色色小视频| 六月丁香五月婷婷| 五月天婷婷婷| 凹凸7777操操操| 99A级片| HD久久精品视频| 婷婷激情蜜桃玖玖丁香| 婷婷六月激情| caopeng97人人| 婷婷五月天亚洲精品| 日本色婷婷| 日韩超碰在线| 五月丁香六月婷婷在线观看| 国产露脸150部国语对白| 特黄三级片| 婷婷婷婷婷婷婷婷| 99色综合久久| 色综合五月在线| 中文字幕黄色片| 色人久久| 婷婷色网站| 99久久.www| 五月色综合网| 99久久偷拍视频| 初夜av| 极品人妻VIDEOSSS人妻| 丁香五月精品视频| 丁香五月天网站| 亚洲乱码w在线观看| 五月婷婷av| 婷婷六月丁综合| 99热成人在线观看| 丁香六月天婷婷色| 久久五月婷婷开心网| 亚洲精品V天堂中文字幕| 国产乱码久久| 婷婷五月天影院| 丁香五月婷婷啪| 思思99热| 色情性爱视频网址| 五月丁香六月婷婷网| 亚洲操操| 五月婷婷综合在线| 熟女激情网| 色婷婷五月天| 五月婷婷香蕉| 色吧婷婷五月亚洲| 色久激情在线| 色yeye欧美| 丁香五月综合AV在线| 九九九AAA热视频| 综合久久五月天| 国产亚洲色婷婷久久99精品91 www.riverspirits.org www.hnnun.com www.changh | 99热在线看| 五月婷婷在线视频| 伊人九九热| 激情丁香九九五月综合网| 亚洲综合在线播放| 1024日韩| 好好日激情五月天| 激情婷婷五月丁香啪啪啪| 思思热国产在线| 婷婷五月综合色中文字幕| 超碰99资源站| 99色婷婷| 国产亚洲精品久久久久苍井松| 天天干天天干天天干天天干天天干天天干天天 | 99免费视频网| 欧美婷婷精品激| 久激情网| 五月丁香好婷婷姑娘综合网| 婷婷五月天VI| 玖玖婷婷五月天| 狠狠综合久久| 激情第四色| www.激情五月天| 91人碰| 天天爽天天爽| www夜夜操wwwcon| 草榴视频网| 婷婷色婷婷| 色婷婷a三区麻| www.97干视频| 五月天综合在线| 综合激情深爱| 99在线精品视频| 99色色| 婷婷五月六| 日韩成人精品中文字幕| 久久人妻少妇嫩草AV| 五月婷婷五月色| 婷婷 久综合| 31色区视频免费看| 91啪啪视频| 狠狠狠狠狠操| 五月丁香婷中文| 丁香五月婷中字在线| 午夜成人网站在线观看| 先锋资源996| 超碰在线99热| 国精产品一区一区三区免费视频 | 五月婷婷六月丁香综合在线| 久色五月| 丁香五月综合高清在线| 超碰色热| 综合网亚洲| 五月天综合在线观看| 色之综合网| 激情丁香五月AV| 国产特级毛片AAAAAAA高清| 婷婷五月天久久| 狠狠色激情在线| 丁香婷婷色情| 影音先锋五月婷婷| 人妻久久久久久久 | 久久色情| 免费在线a| 丰满少妇猛烈A片免费看观看| 欧美视频五区| 韩国三级五月天婷婷。| 久久婷婷丁香五月一二三| 99九九中文字幕视频| 99热在线观看| 在线日韩视频| 精品99在线观看| 91久久综合| 激情小说色五月| 99热99色| 五月色色网| 九九这里都是精品| 色婷婷五月天成人网| 日本99热| 五月丁香六月色| 久久爱综合| 4438亚洲欧美| 超碰在线99| 九九热99热| 九九99九九99| 久草热在线视频| 五月天 另类图片| www.十八禁不禁AV.com| 丁香丁香激情网| 色色五月婷婷| 人人97碰| 三级毛片7979| 午夜日日| 日本欧美999久久久三级片| 五月天综合在线网| 一本大道嫩草AV无码专区| 天天爽天天| 五月丁香综合在线| 在线不卡视频| 久久98| 激情五月开心五月丁香五月| 久久996re热这里只有精品无码| 天天做综合| 九九青草热| 另类小说激情五月天| 九九婷婷五月天影视| 亚洲激情图文小说| 五月丁香激情片| 在线视频你懂得| 久久婷婷丁香五月宗合| 99久久五月丁香野外| 色情五月| 大香蕉狠狠爱主页| 99草视频在线观看| 九色在线观看91av| www一起操| 99热久草| 色啪网| 如何安全看伊人婷婷| 人妻操逼视频。| 亚洲午夜精品久久久久久人妖| 久久中文人妻系列| 国内裸舞二区| 婷婷五月天影视| 亚洲免费99| 天天干 夜夜爽| 波多野结衣AV无码Porn| 69久久99精品久久久久婷婷| www.99热视频| 亚洲第一综合| 91丨九色丨国产打屁股| 成熟妇人A片免费看网站| 激情文学综合婷婷五月天丁香花| 狠狠色噜噜狠| 综合色视频| 中文AV在线观看| www狠狠| 色情丁香五月天| 丁香5月婷婷| 五月丁香亭亭| 深爱激情六月天| 久久精品99国产精品日本| 20253AV| 六月丁香狠狠爱| 成人在线日韩| 激情综合激情五月| 直接看的AV| 久久99网站| 亚洲国产精品二二三三区| 在线中文字幕免费视频| 色色色在线观看| 99国产er热视频| 天天精品视频在线观看视频| 丁香五月婷婷六月丁香| 99啪啪| 五月丁香婷婷伊人| 色九九七七| 五月婷婷六月丁| 五月婷婷 激情五月| 九九九九国产| 国产一级视频a| 五月丁香综合成人社区| 开心五月婷婷激情| 九九热在线观看视频网站| 99色视频| 亚洲视频在线观看| 99久久新视频| 色在线五月天免费| 天天舔天天爽| 国产成人片| 丁香密臀AV激情网| 夜夜天天久久婷婷| 婷婷色五天| 丰满少妇猛烈A片免费看观看| 牛牛色av| 99热这是里只有精品| 婷婷婷婷婷婷婷婷| 亚洲无AV在线中文字幕| 免费看成人747474九号视频在线观看| 日日干日日色| www.日本91| 丁香婷婷老熟女综合网| 久久久久9| 天天做好综合色| 国产看真人毛片爱做A片| 手机在线日韩视频中文字幕| 五月婷婷成人w| 成人片在线播放| 在线不卡的视频| 思思网站| 激情床戏| 婷婷丁香五月基地| 综合逼五月激情婷婷| 激情久久肏屄视频| 久久月天堂| 91艹人| 九九99免费视频| 综合99在线| 丁香婷停五月激情综合深爱| 91热久久| 最新日韩久热免费视频看看| 99er在线观看| 五月丁香网站| 超碰免费人妻| 狠狠干在线| 任你搞免费视频观看| 99re这里只有精品免费| 九九热欧美| 伊人九九热| 婷婷开心五月| 碰超亚洲| 亚洲综合五月天综合| 噜噜在线| 67194成I人在线观看线路1| 婷婷天天色| 日本久久久97| 这里只有国产精品在线| 99这里有精品视频| 丁香婷婷五月激情| 五月天久久网站| www综合久久| 这里只有精品免费视频| 五月婷婷影视| 中文aV网| 国产精品天天狠天天看| 99无码免费视频| 五月婷婷六月丁香| 色色丁香| 激情五月六月婷婷| 久99久视频| 国产成人av在线播放| 99九九玖玖| 超级碰碰91| 日韩 中文 欧美| 久青操| 任你爽精品免费视频6| 丁香婷婷九月| 五月天婷婷情色| 色综合天堂| AV操逼网| 狠狠爱综合网| 思思热久久阴99| 99色在线视频| 丁香五月天在线直播观看| 免费视频WWW在线观看网站| 久久奄也去色色网站| 4399啪啪视频| 看久久性爱视频| 五月亭亭色| 久久多色|