免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

從NTP到Chrony:現(xiàn)代Linux服務(wù)器時間同步配置與排障指南

從NTP到Chrony:現(xiàn)代Linux服務(wù)器時間同步配置與排障指南 1. 為什么你的服務(wù)器時間總是不準(zhǔn)從NTP到Chrony的演進(jìn)你有沒有遇到過這樣的場景服務(wù)器上部署的應(yīng)用日志時間戳對不上排查問題時發(fā)現(xiàn)兩臺機(jī)器的時間差了十幾秒數(shù)據(jù)庫主從同步報(bào)錯一查是主庫和從庫的系統(tǒng)時間不一致甚至在做分布式事務(wù)或者依賴時間戳的加密認(rèn)證時因?yàn)楹撩爰壍钠顚?dǎo)致整個流程失敗。這些問題根源往往都指向一個看似不起眼的基礎(chǔ)服務(wù)——系統(tǒng)時間同步。在Linux世界里提到時間同步老司機(jī)們第一時間會想到ntpdNetwork Time Protocol daemon。它確實(shí)是過去幾十年的行業(yè)標(biāo)準(zhǔn)像一位德高望重的老教授嚴(yán)謹(jǐn)、穩(wěn)定但配置起來也略顯繁瑣對網(wǎng)絡(luò)波動和系統(tǒng)負(fù)載的適應(yīng)性在今天看來有些“遲緩”。而chrony則可以看作是這位老教授培養(yǎng)出的“高徒”它繼承了NTP協(xié)議的精髓但在算法和實(shí)現(xiàn)上做了大量現(xiàn)代化改進(jìn)。它更快、更精準(zhǔn)尤其在虛擬化、云計(jì)算和移動網(wǎng)絡(luò)環(huán)境下表現(xiàn)突出?,F(xiàn)在包括RHEL/CentOS 8、Fedora、Ubuntu等主流發(fā)行版都已經(jīng)將chrony作為默認(rèn)的時間同步服務(wù)。如果你還在用ntpd是時候了解一下這位“后起之秀”了。簡單來說chrony是一個更現(xiàn)代化的NTP協(xié)議實(shí)現(xiàn)它由兩個核心組件構(gòu)成chronyd守護(hù)進(jìn)程和chronyc命令行客戶端。chronyd在后臺運(yùn)行負(fù)責(zé)與時間服務(wù)器通信、計(jì)算時間偏差并逐步調(diào)整系統(tǒng)時鐘chronyc則讓你可以隨時查詢同步狀態(tài)、手動調(diào)整或檢查時間源。它的設(shè)計(jì)目標(biāo)很明確在保持高精度的同時更快地收斂到正確時間并且對間歇性網(wǎng)絡(luò)連接比如筆記本電腦合蓋休眠后喚醒和虛擬機(jī)的時鐘漂移有更好的處理能力。2. Chrony 核心工作機(jī)制它憑什么比NTPD更“聰明”要理解chrony的配置必須先搞懂它是怎么工作的。這不僅僅是改幾個配置文件參數(shù)那么簡單知其所以然才能在出問題時快速定位。2.1 時鐘的“性格”漂移與偏移每個計(jì)算機(jī)的硬件時鐘Real Time Clock, RTC也就是CMOS時鐘和由內(nèi)核維護(hù)的系統(tǒng)時鐘都不是絕對準(zhǔn)確的。它們受溫度、電壓、主板晶體振蕩器精度等因素影響會以一個相對穩(wěn)定的速率變快或變慢這個速率就是時鐘漂移率clock drift。比如你的服務(wù)器時鐘可能每天會慢2秒。而時鐘偏移clock offset指的是當(dāng)前系統(tǒng)時間與真實(shí)時間之間的瞬時差值。ntpd和chronyd的核心任務(wù)就是通過持續(xù)測量偏移量并估算出漂移率來“馴服”這臺不守時的機(jī)器。chrony的算法更激進(jìn)一些。它采用了一種更復(fù)雜的濾波和選擇算法能夠更快地識別并丟棄不可靠的時間源樣本同時更積極地計(jì)算漂移率。這意味著在系統(tǒng)啟動后或者時間發(fā)生較大偏差時chrony能比ntpd更快地將系統(tǒng)時間調(diào)整到正確范圍。2.2 時間源的“選舉”與“信任”chronyd會同時向多個配置的NTP服務(wù)器時間源發(fā)送請求。它并不簡單地取平均值而是進(jìn)行一場精密的“選舉”測量與篩選chronyd會持續(xù)測量到每個時間源的往返延遲delay和時間偏移offset。它會根據(jù)這些測量的穩(wěn)定性和一致性為每個時間源計(jì)算一個“誤差范圍”和“權(quán)重”。層級與距離NTP服務(wù)器本身是分層的Stratum。Stratum 0是原子鐘、GPS時鐘等絕對時間源Stratum 1是直接連接Stratum 0的服務(wù)器Stratum 2從Stratum 1同步以此類推。chrony會優(yōu)先選擇層級低數(shù)字小且網(wǎng)絡(luò)延遲小的服務(wù)器。真假源檢測這是chrony的一個強(qiáng)項(xiàng)。它通過交叉比對多個時間源能夠有效檢測并拒絕那些提供錯誤時間的“假”服務(wù)器可能是配置錯誤或惡意服務(wù)器。ntpd在這方面相對脆弱。組合時間最終chronyd會綜合所有“可信”時間源的信息計(jì)算出一個最優(yōu)的“組合時間combined time”并以此為目標(biāo)來調(diào)整本地時鐘。這個過程的細(xì)節(jié)都記錄在chronyd的內(nèi)存狀態(tài)中我們可以通過chronyc命令來窺探。理解了這個過程你就會明白為什么配置文件里pool、server指令后面可以跟minpoll、maxpoll、iburst這些參數(shù)它們直接影響了測量行為的頻率和積極性。2.3 調(diào)整方式 “猛藥”還是“溫補(bǔ)”當(dāng)發(fā)現(xiàn)時間偏差時有兩種調(diào)整方式步進(jìn)調(diào)整Step如果時間偏差超過一個閾值默認(rèn)是1000秒chronyd會直接“跳變”時鐘。這就像發(fā)現(xiàn)手表慢了半小時直接擰到正確時間。在生產(chǎn)環(huán)境中巨大的時間跳變可能導(dǎo)致依賴連續(xù)時間的應(yīng)用如數(shù)據(jù)庫事務(wù)日志出錯所以這個閾值需要謹(jǐn)慎設(shè)置。漸進(jìn)調(diào)整Slew如果偏差在閾值之內(nèi)chronyd會通過加快或減慢系統(tǒng)時鐘的“滴答”頻率讓時間逐漸“滑”到正確位置。這是默認(rèn)且推薦的方式對應(yīng)用無感。chrony的漸進(jìn)調(diào)整算法更平滑允許在短時間內(nèi)補(bǔ)償更大的偏移量這也是它收斂速度快的原因之一。3. 從零開始一份詳盡的Chrony配置指南理論說再多不如動手配一遍。我們假設(shè)你正在配置一臺新的CentOS 8或Rocky Linux 8服務(wù)器其默認(rèn)已安裝chrony。3.1 安裝與基礎(chǔ)狀態(tài)檢查首先確認(rèn)chrony是否已安裝并運(yùn)行# 檢查安裝包 rpm -q chrony # 或使用dnf/yum dnf list installed chrony # 檢查服務(wù)狀態(tài) systemctl status chronyd # 如果未安裝則安裝 dnf install -y chrony啟動并設(shè)置開機(jī)自啟systemctl enable --now chronyd現(xiàn)在用chronyc看看初始狀態(tài)chronyc sources -v這個命令會列出所有配置的時間源。初始狀態(tài)下它可能使用的是發(fā)行版預(yù)置的pool.ntp.org池地址。-v參數(shù)會顯示詳細(xì)信息包括狀態(tài)^*表示當(dāng)前選中的同步源^表示可用的候選源^?表示未連接或狀態(tài)未知、層數(shù)、精度等。3.2 解剖配置文件/etc/chrony.conf主配置文件/etc/chrony.conf的每一行都至關(guān)重要。我們分段解讀。第一部分時間源配置這是核心告訴chronyd向誰同步。# 使用pool指令指向一個NTP服務(wù)器池。系統(tǒng)會從池中自動選擇多個服務(wù)器。 pool 2.rocky.pool.ntp.org iburst # 或者使用server指令指定具體的服務(wù)器??梢灾付ǘ鄠€。 server ntp1.aliyun.com iburst server ntp2.aliyun.com iburst server time.cloudflare.com iburst # 如果在內(nèi)網(wǎng)有自建的、更精確的NTP服務(wù)器如連接GPS的硬件時鐘優(yōu)先使用。 server 192.168.1.100 iburst preferpoolvsserver:pool指向一個域名該域名背后是多個服務(wù)器地址可以實(shí)現(xiàn)負(fù)載均衡和自動故障轉(zhuǎn)移是推薦做法。server用于指定確定的單個服務(wù)器。iburst一個非常重要的選項(xiàng)。當(dāng)服務(wù)啟動或服務(wù)器不可達(dá)后首次恢復(fù)時chronyd會發(fā)送一連串通常是4-8個數(shù)據(jù)包來快速完成初始測量極大加速初始同步過程。建議始終為每個server或pool條目加上iburst。prefer標(biāo)記為“首選”服務(wù)器。chronyd會給予這個源更高的權(quán)重但最終選擇仍基于算法。通常用于內(nèi)網(wǎng)中更穩(wěn)定、延遲更低的時間源。minpoll和maxpoll定義輪詢間隔的最小和最大值以2的冪秒為單位。默認(rèn)是minpoll 664秒和maxpoll 101024秒約17分鐘。在網(wǎng)絡(luò)穩(wěn)定、追求高精度的內(nèi)網(wǎng)環(huán)境中可以適當(dāng)減小maxpoll例如maxpoll 8256秒。注意過于頻繁的查詢可能會被公共NTP服務(wù)器視為濫用請尊重上游服務(wù)器策略。第二部分時間調(diào)整策略# 允許系統(tǒng)時鐘在前1000秒的偏差內(nèi)進(jìn)行漸進(jìn)調(diào)整超過則步進(jìn)調(diào)整。 makestep 1000 3 # 啟用RTC硬件時鐘的內(nèi)核同步。 rtcsyncmakestep 1000 3這是時間校正策略。1000是閾值秒3是前3次更新的限制。意思是在前3次時鐘更新中如果偏差超過1000秒就步進(jìn)調(diào)整之后無論偏差多大都只用漸進(jìn)調(diào)整。生產(chǎn)環(huán)境建議如果你的服務(wù)器可能因長時間關(guān)機(jī)產(chǎn)生巨大偏差但又擔(dān)心步進(jìn)調(diào)整影響應(yīng)用可以將閾值調(diào)小如makestep 1.0 -1。-1意味著永遠(yuǎn)允許步進(jìn)調(diào)整但1.0秒的閾值使得只有非常大的偏差才會觸發(fā)步進(jìn)通常應(yīng)用能容忍1秒的跳變。更保守的做法是makestep 0.1 -1只允許0.1秒以上的偏差進(jìn)行步進(jìn)但這要求服務(wù)器時間基本保持在線。rtcsync這個指令讓chronyd定期每11分鐘將系統(tǒng)時間同步到硬件時鐘RTC。這非常重要可以確保服務(wù)器重啟后系統(tǒng)時間從一個相對準(zhǔn)確的值開始。務(wù)必啟用。第三部分訪問控制與網(wǎng)絡(luò)# 允許哪些網(wǎng)絡(luò)查詢本機(jī)時間如果本機(jī)想作為NTP服務(wù)器 # allow 192.168.1.0/24 # 監(jiān)聽網(wǎng)絡(luò)端口作為服務(wù)器時 # bindcmdaddress 0.0.0.0 # local stratum 10默認(rèn)情況下chronyd只監(jiān)聽本地回環(huán)地址127.0.0.1。如果你需要讓這臺服務(wù)器為內(nèi)網(wǎng)其他機(jī)器提供時間服務(wù)需要取消注釋并修改allow和bindcmdaddress。local stratum 10當(dāng)所有配置的外部時間源都不可用時chronyd可以將自己聲明為一個層數(shù)為10的本地時間源。這樣內(nèi)網(wǎng)中其他配置了此服務(wù)器為源的客戶端在外部網(wǎng)絡(luò)中斷時仍然能在一個小的局域網(wǎng)內(nèi)保持時間同步雖然可能逐漸漂移。這在隔離網(wǎng)絡(luò)中有用。第四部分其他關(guān)鍵指令# 指定存儲漂移率記錄的文件。chronyd通過它來記住你的時鐘“通常跑多快/多慢”。 driftfile /var/lib/chrony/drift # 啟用內(nèi)核的硬件時間戳支持可以大幅提高局域網(wǎng)內(nèi)時間同步的精度達(dá)到亞微秒級。 # 需要網(wǎng)卡和驅(qū)動支持。 hwtimestamp * # 記錄客戶端訪問日志如果作為服務(wù)器 # logdir /var/log/chronydriftfile這個文件記錄了系統(tǒng)計(jì)算出的時鐘漂移率。不要刪除或隨意修改這個文件。chronyd依靠它來在重啟后快速應(yīng)用已知的漂移率加速收斂。hwtimestamp對于金融交易、高性能計(jì)算等對時間精度要求極高的場景這是“神器”。它利用網(wǎng)卡硬件為網(wǎng)絡(luò)數(shù)據(jù)包打上精確的時間戳繞過了操作系統(tǒng)協(xié)議棧的延遲。啟用前需確認(rèn)網(wǎng)卡支持。3.3 配置實(shí)戰(zhàn)針對典型場景的配置模板場景一標(biāo)準(zhǔn)公有云服務(wù)器目標(biāo)快速、穩(wěn)定同步使用國內(nèi)優(yōu)質(zhì)公共NTP源。# /etc/chrony.conf server ntp.aliyun.com iburst server ntp1.tencent.com iburst server cn.pool.ntp.org iburst server time.apple.com iburst # 作為備用質(zhì)量通常很好 driftfile /var/lib/chrony/drift makestep 1.0 -1 rtcsync keyfile /etc/chrony.keys leapsectz right/UTC logdir /var/log/chrony修改后務(wù)必重啟服務(wù)systemctl restart chronyd場景二內(nèi)網(wǎng)時間服務(wù)器母鐘假設(shè)你有一臺能訪問外網(wǎng)的服務(wù)器192.168.1.10要為整個內(nèi)網(wǎng)192.168.1.0/24提供時間服務(wù)。 在這臺服務(wù)器上配置# /etc/chrony.conf # 上游源 server ntp.aliyun.com iburst server time.cloudflare.com iburst # 允許內(nèi)網(wǎng)訪問并聲明自己為第3層服務(wù)器如果上游是第2層 allow 192.168.1.0/24 local stratum 3 # 監(jiān)聽所有網(wǎng)絡(luò)接口 bindcmdaddress 0.0.0.0 driftfile /var/lib/chrony/drift makestep 1.0 -1 rtcsync在內(nèi)網(wǎng)其他客戶端服務(wù)器上配置# /etc/chrony.conf server 192.168.1.10 iburst prefer # 指向內(nèi)網(wǎng)時間服務(wù)器并標(biāo)記為首選 # 可選增加一個外部源作為備份防止母鐘完全失效 server ntp.aliyun.com iburst driftfile /var/lib/chrony/drift makestep 1.0 -1 rtcsync4. 運(yùn)維與排障用chronyc命令洞察一切配置好了不是結(jié)束日常運(yùn)維和問題排查才是關(guān)鍵。chronyc是你的瑞士軍刀。4.1 監(jiān)控同步狀態(tài)你必須知道的幾個命令chronyc tracking查看時間同步的核心指標(biāo)。chronyc tracking輸出類似Reference ID : C0A8010A (192.168.1.10) # 當(dāng)前同步的源ID Stratum : 3 # 層數(shù)越小越好1最佳 Ref time (UTC) : Thu Apr 10 08:00:00 2024 # 源報(bào)告的UTC時間 System time : 0.000123456 seconds fast of NTP time # 系統(tǒng)時間偏移量 Last offset : 0.000123456 seconds # 最后一次測量的偏移 RMS offset : 0.000012345 seconds # 偏移量的長期平均值均方根 Frequency : 16.234 ppm slow # 時鐘漂移率正數(shù)表示慢 Residual freq : 0.001 ppm # 剩余頻率誤差 Skew : 0.123 ppm # 頻率誤差的估計(jì)界限 Root delay : 0.012345 seconds # 到根時間源的總延遲 Root dispersion : 0.001234 seconds # 到根時間源的累積誤差 Update interval : 64.0 seconds # 最后兩次更新的間隔 Leap status : Normal # 閏秒狀態(tài)重點(diǎn)關(guān)注Stratum應(yīng)在合理范圍如1-5System time和Last offset絕對值應(yīng)非常小理想情況在毫秒甚至微秒級Frequency顯示你的硬件時鐘天生跑得快還是慢。chronyc sources -v查看所有時間源的詳細(xì)狀態(tài)。這是最常用的診斷命令。chronyc sources -v .-- Source mode ^ server, peer, # local clock. / .- Source state * current synced, combined , - not combined, | / ? unreachable, x time may be in error, ~ time too variable. || .- xxxx [ yyyy ] /- zzzz || Reachability register (octal) -. | xxxx adjusted offset, || Log2(Polling interval) --. | | yyyy measured offset, || \ | | zzzz estimated error. || | | \ MS Name/IP address Stratum Poll Reach LastRx Last sample ^* 192.168.1.10 3 6 377 45 -123us[-456us] /- 12ms ^ time.cloudflare.com 2 6 377 46 456us[789us] /- 9ms ^- ntp.aliyun.com 1 6 377 47 -987us[-321us] /- 15ms第一列符號^*是當(dāng)前同步源^是好的備用源^-是候選源但未被選中^?表示源不可達(dá)或狀態(tài)未知。Reachability register (octal)一個8進(jìn)制的數(shù)表示最近8次查詢的成功/失敗歷史成功為1失敗為0。377二進(jìn)制11 111 111表示最近8次全部成功連接非常健康。0或很小的值表示連接有問題。Last sample-123us[-456us] /- 12ms。第一個數(shù)字-123us是調(diào)整后的偏移量第二個方括號內(nèi)的數(shù)字-456us是原始測量偏移量/- 12ms是估計(jì)誤差。偏移量在毫秒ms甚至微秒us級別是正常的。chronyc sourcestats -v查看時間源的統(tǒng)計(jì)信息如偏移、延遲的標(biāo)準(zhǔn)差幫助你判斷源的穩(wěn)定性。chronyc activity查看有多少時間源在線、離線等概要信息。4.2 手動干預(yù)與調(diào)試命令手動立即同步chronyc makestep。有時你想立刻糾正時間可以運(yùn)行此命令。但注意如果偏差超過makestep閾值這會導(dǎo)致步進(jìn)調(diào)整。手動添加/刪除時間源臨時生效重啟服務(wù)后失效chronyc add server ntp.newserver.com iburst chronyc delete server ntp.badserver.com檢查NTP服務(wù)器是否可達(dá)chronyc ntpdata server-ip可以顯示從該服務(wù)器獲取的原始NTP數(shù)據(jù)包信息用于深度調(diào)試。4.3 常見問題與排障思路問題1chronyc sources顯示所有源都是^?不可達(dá)。檢查網(wǎng)絡(luò)ping ntp.aliyun.com是否通防火墻是否放行了UDP 123端口出站對于客戶端出站規(guī)則需要允許udp/123。檢查DNS如果使用域名檢查dig ntp.aliyun.com是否能解析。檢查服務(wù)狀態(tài)systemctl status chronyd確認(rèn)服務(wù)正在運(yùn)行。問題2時間同步了但偏移量offset始終很大幾十到幾百毫秒。網(wǎng)絡(luò)延遲高檢查chronyc tracking中的Root delay。如果超過100ms可能是網(wǎng)絡(luò)路徑不佳。嘗試更換延遲更低的時間源。系統(tǒng)負(fù)載高在系統(tǒng)負(fù)載極高時chronyd進(jìn)程可能無法獲得足夠的CPU時間來進(jìn)行精確測量。檢查系統(tǒng)負(fù)載uptime和chronyd進(jìn)程的CPU使用率。虛擬機(jī)時鐘問題虛擬機(jī)特別是KVM、VMware的虛擬時鐘可能不穩(wěn)定。確保安裝了VMware Tools或VirtualBox Guest Additions并啟用時間同步功能。對于KVM可以考慮在宿主機(jī)和客戶機(jī)都使用chrony并配置/etc/chrony.conf中的rtcsync和更積極的makestep參數(shù)。有時在虛擬機(jī)中需要禁用ntpd或timesyncd避免多個時間服務(wù)沖突。問題3chronyc tracking顯示Stratum很大比如16。所有時間源都丟失這意味著chronyd無法與任何配置的上游服務(wù)器通信并且local stratum指令也未啟用或生效。它會將自己標(biāo)記為未同步的層16時鐘。檢查網(wǎng)絡(luò)和源配置。local stratum未生效如果你希望在沒有外部源時作為本地源確保配置了local stratum 10或其他數(shù)字非16并且allow了客戶端網(wǎng)段。問題4時間同步服務(wù)與其他服務(wù)沖突。與systemd-timesyncd沖突一些較新的發(fā)行版如Ubuntu 16.04默認(rèn)使用systemd-timesyncd進(jìn)行輕量級時間同步。如果安裝了chrony務(wù)必禁用systemd-timesyncdsystemctl stop systemd-timesyncd systemctl disable systemd-timesyncd。與ntpd沖突兩者不能同時運(yùn)行。使用systemctl stop ntpd systemctl disable ntpd禁用ntpd。5. 進(jìn)階話題與生產(chǎn)環(huán)境實(shí)踐5.1 虛擬化環(huán)境下的時間同步挑戰(zhàn)在VMware、KVM、Hyper-V等虛擬化環(huán)境中虛擬機(jī)的時鐘是個“老大難”問題。虛擬機(jī)的時鐘依賴于宿主機(jī)的時鐘和CPU的計(jì)時器如TSC在虛擬機(jī)被調(diào)度休眠或宿主負(fù)載高時虛擬時鐘容易發(fā)生“漂移”甚至“跳變”。最佳實(shí)踐組合拳宿主機(jī)層面確保宿主機(jī)自身的時間同步是精準(zhǔn)和穩(wěn)定的。在宿主機(jī)上配置chrony使用可靠的外部源并啟用hwtimestamp如果硬件支持。虛擬機(jī)工具務(wù)必安裝并運(yùn)行VMware Tools、VirtualBox Guest Additions或KVM的virtio驅(qū)動。這些工具提供了與宿主機(jī)時鐘同步的“準(zhǔn)虛擬化”接口比純粹模擬的硬件時鐘穩(wěn)定得多??蛻魴C(jī)配置在虛擬機(jī)內(nèi)chrony配置需要更“激進(jìn)”。減小maxpoll增加同步頻率例如maxpoll 664秒。調(diào)整makestep使用makestep 0.1 -1允許對超過0.1秒的偏差進(jìn)行步進(jìn)調(diào)整。對于虛擬機(jī)小的步進(jìn)調(diào)整亞秒級通常比大的漸進(jìn)漂移對應(yīng)用影響更小。禁用其他同步源確保虛擬機(jī)內(nèi)只運(yùn)行chronyd并禁用任何由虛擬化平臺注入的舊式時間同步如VMware的tp服務(wù)??紤]使用chrony的smoothtime功能實(shí)驗(yàn)性它可以嘗試平滑處理來自虛擬化工具的時間更新減少跳變感。5.2 容器與Kubernetes中的時間容器共享宿主機(jī)的內(nèi)核因此也共享系統(tǒng)時鐘。容器內(nèi)部無法運(yùn)行chronyd來獨(dú)立調(diào)整時間。這意味著宿主機(jī)時間必須準(zhǔn)確所有運(yùn)行容器的宿主機(jī)節(jié)點(diǎn)其時間必須通過chrony或其他方式保持高度同步。在K8s集群中這是節(jié)點(diǎn)準(zhǔn)備的基本要求。容器內(nèi)應(yīng)用的處理如果你的容器化應(yīng)用對時間極其敏感需要考慮在應(yīng)用層面使用NTP客戶端庫如ntplib直接查詢外部NTP服務(wù)器但這會增加復(fù)雜性和網(wǎng)絡(luò)依賴。更常見的做法是確保宿主機(jī)時間可靠并信任它。5.3 閏秒處理閏秒是偶爾被添加到協(xié)調(diào)世界時UTC中的一秒以補(bǔ)償?shù)厍蜃赞D(zhuǎn)的微小變化。chrony默認(rèn)知道如何處理閏秒。chronyc tracking輸出中的Leap status字段會顯示狀態(tài)Normal、Leap second等。chrony支持兩種處理方式在閏秒時刻通過step跳秒或slew在更長時間內(nèi)微調(diào)時鐘頻率來消化這一秒?,F(xiàn)代Linux內(nèi)核和chrony的默認(rèn)配合通常是平滑處理。對于金融交易等極端場景需要關(guān)注閏秒公告并進(jìn)行測試??梢酝ㄟ^chronyc leapsectz查看配置的時區(qū)閏秒信息。5.4 安全考慮認(rèn)證chrony支持使用對稱密鑰keyfile進(jìn)行NTP消息認(rèn)證防止中間人攻擊或惡意NTP服務(wù)器。這在嚴(yán)格的內(nèi)網(wǎng)安全要求中可能需要配置。服務(wù)暴露除非必要不要將chronyd綁定到公網(wǎng)IPbindcmdaddress 0.0.0.0。如果作為內(nèi)網(wǎng)時間服務(wù)器使用防火墻嚴(yán)格限制訪問源IPallow指令是第一道防線但結(jié)合主機(jī)防火墻如firewalld或iptables是更佳實(shí)踐。6. 從理論到實(shí)踐一次完整的時間偏差排查實(shí)錄最后分享一個我最近遇到的實(shí)際案例。監(jiān)控報(bào)警顯示某臺運(yùn)行Java應(yīng)用的服務(wù)器其日志時間與日志收集中心的時間存在約5秒的固定偏差。第一步快速確認(rèn)問題登錄服務(wù)器先用date命令查看系統(tǒng)時間同時用curl訪問一個提供精確時間的API如http://worldtimeapi.org/api/timezone/Etc/UTC進(jìn)行對比確認(rèn)偏差確實(shí)存在。第二步檢查chrony狀態(tài)chronyc tracking發(fā)現(xiàn)System time顯示5.123456 seconds fast。說明chronyd已經(jīng)意識到了這5秒的偏差。第三步分析時間源chronyc sources -v發(fā)現(xiàn)當(dāng)前同步源^*的Reach值是177二進(jìn)制01 111 111表示最近8次中有7次成功有一次失敗。Last sample的誤差/-值較大達(dá)到/- 100ms。而另一個備用源^的Reach是377全成功誤差只有/- 10ms。這說明當(dāng)前選中的源質(zhì)量不穩(wěn)定。第四步深入探查與干預(yù)為什么chronyd不切換到更好的源運(yùn)行chronyc sourcestats查看歷史統(tǒng)計(jì)發(fā)現(xiàn)當(dāng)前源雖然最近有一次失敗但其歷史測量的偏移標(biāo)準(zhǔn)差Std dev很小而備用源雖然當(dāng)前延遲低但過去一段時間偏移波動較大。chrony的算法更傾向于長期穩(wěn)定的源這是合理的但也導(dǎo)致了當(dāng)前偏差無法快速糾正。第五步手動干預(yù)與驗(yàn)證由于業(yè)務(wù)對時間敏感我決定手動干預(yù)。首先嘗試讓chronyd立即重新評估并同步chronyc makestep。但偏差5秒超過了默認(rèn)的makestep 1000 3閾值所以它執(zhí)行了步進(jìn)調(diào)整。應(yīng)用日志出現(xiàn)了1條關(guān)于時間跳變的警告但之后恢復(fù)正常。步進(jìn)調(diào)整后再次檢查chronyc tracking偏移量變?yōu)槲⒚爰墶榱祟A(yù)防未來再次因源質(zhì)量導(dǎo)致偏差累積我修改了/etc/chrony.conf將不穩(wěn)定的那個時間源注釋掉。增加了兩個新的、知名的低延遲公共NTP源。將makestep策略改為makestep 0.5 3允許在啟動初期對超過0.5秒的偏差進(jìn)行步進(jìn)調(diào)整以期更快收斂。重啟chronydsystemctl restart chronyd。觀察幾分鐘后運(yùn)行chronyc sources -v確認(rèn)新的源被選中且狀態(tài)健康Reach值為377。經(jīng)驗(yàn)點(diǎn)chrony的“智能”算法大多數(shù)時候是優(yōu)點(diǎn)但在時間源質(zhì)量發(fā)生微妙變化時它可能“戀舊”。作為運(yùn)維人員不能完全放任自流需要定期比如通過監(jiān)控chronyc tracking的偏移量檢查同步狀態(tài)。對于關(guān)鍵業(yè)務(wù)服務(wù)器配置多個高質(zhì)量、低延遲、來自不同運(yùn)營商的時間源是性價比最高的穩(wěn)定性提升手段。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
99在线观看免费精品视频| 5月色亭亭视频| 综合激情婷婷| 很很干天天干| 天天透天天摸天天舔| 蜜桃婷婷狠狠久久| 久xxxx| 天天干天天干天天干| 亚洲另类久久| 欧美激情五月天在线观看| 91人人人人人人人| 色啪久| 久久久com| 欧美婷| 婷婷色五月丁香六月欧美啪| 亚洲无码AV片| 久久久久97| 色五月婷婷久久| 99无吗| 26uuu欧美日韩| 色色色色色日韩午夜激情 | www.夜夜操| 丁香成人视频| 亚洲天堂aaa| 开心五月天私房婷婷| 五月天婷婷激情在线色图| 国产精品一区在线观看你懂的| 综合婷婷五月天| 五月婷婷六月爱| 久久99视频| 一级无码作爱片| 蜜臀AV在线观看| 99九九久久| 天天干夜晚夜操| 激情宗合网激情五月天| 这里只有精品9| 亚洲综合激情五月天婷婷| 婷婷精品综合| 91久久久久久| 日本色婷婷综合| 99re这里只有精品99| 六月婷基地| 毛片九九九九九九九九18| 少妇大叫太大太粗太爽了A片| 亚洲第一综合| 91 欧美| 一本色道久久88综合日韩精品| 狠狠丁香| 五月开心网| 丁香五月天堂网| 色九月| 天天射影院| 激情五月视频在线婷婷| 九九色欲网| 色五月激情网| 天天干天天操天天爽| 夜夜 操无码| 99视频网址| 天天色视频| 婷婷丁香五月婷婷| 99激情视频| 99色视频在线| av在线免费播放观看| 日日操夜夜操不卡| 天天综合网91| 婷婷丁香视频| AV成人在线播放| 99综合一区| 伊人啪啪网| 五月丁香啪啪| av人人操| 开心六月婷| 五月色情婷婷| 天天天天天久久久久久| 午夜色婷婷| 五月丁香啪啪| www.九九婷婷| ay2区| 六月综和久久| 丁香激情五月天| 婷婷94s| 婷婷五月综合基地| 久久婷婷色情7777网站| 狠狠干五月丁香| 五月天色婷婷基地| 色色婷婷五月天| 激情开心五月天| 97久久久久久久久久久| 激情综合99| 五月丁香六月婷婷精品| 天天色天天操天天射| 国产精品久久..4399| 丁香五月婷婷在线| 99久久视频| 国产亚洲精品人人| 69久久99精品久久久久婷婷| 色五月亚洲| 狠狠色狠狠爱| 五月天婷婷伊人| 五月色综合| 99热8| 婷婷影院A成人| 97在线干| 性生活久久人妻| 色婷婷五月天成人网| 五月婷在线| 亚洲图片 丁香婷婷| 日韩成人电影AV| 我要色综合五月婷婷| 99热只有精品在线| 婷婷五月俺要去| 狠狠色成人影片| 五月丁香激情综合| 另类视频综合| 亚洲人人操| 性一交一乱一交A片久| 五月丁香人妻| 26uuu成人网| 色五月激情网| 婷婷丁香五月天综合网| 色色色欧美| 婷婷色五月大香蕉在线观看| 色婷婷综合影院| 亚洲A片成人无码久久精品青桔 | 五月婷六月| 精品夜夜澡人妻无码AV| 六月婷婷之青青草| 99热这里只有精品99| 成人AV中文字幕| 26UUU亚洲欧美| 丁香九月婷婷| 丁香六月狠狠| 操操啪| 久久婷婷亚洲| 97av在线视频| 99热在线观看免费中文| 超碰91在线| 久久婷婷精品| 五月天成人综合| 99精品久久久久久久| 丁香五月色欲| 色婷婷88| 九九精品热| 2020日日干| 来吧亚洲综合网| 精品AV无码超碰| 日韩精品无码99| 久久艹 五月天| 激情深爱婷婷网| 激情五月婷婷综合| 天天爱天天做天天舔| 99色婷婷| 丁香五月av在线| 538在线精品| 婷婷五月成人有| 五月天婷婷在线AN| 狠狠88综合久久久久噜噜噜| 成人网在线观看视频| 99在线免费观看| 婷婷综合网站| 男女啪啪做爰高潮无遮挡| 67194国产| 丁香六月久久| jiujiu无码五区| 性无码专区无码| 色五月激情五月丁香五月婷婷啪啪综合 | 91se在线视频| 337p大胆噜噜噜噜噜91Av| 精品思思久久| 超碰婷婷五月| 激情婷婷五月| 色色婷五月天| 丁香五月婷婷婷桃花影院| 思思热在线视频精品| 丁香婷婷超碰 | 五月欧美丁香在线观看| 色婷婷狠狠爱| WwW色婷婷| 五月天色婷婷网| 欧美日韩中国| 丁香五月电影| 五月婷婷婷| 99啪啪网| 综合AV网| 99色网站| 淫五月停停| \\五月天婷婷激情| 婷婷丁香综合| 99热91| 五月天四色房丁香| 变态另类9| 午夜成人片400| 激情综合色播| 五月天婷婷色播综合在线| av在线播放网站| 激情婷婷五月天在线观看| 亚洲激情在线| 99热这是里只有精品| 狠狠精品干练久久久无码中文字幕| 五月丁香婷婷人体| 成人在线不卡| 91av视频| 六月婷婷中文字幕| 99热这里只有精品免费观看| 久久婷婷五月综合97色一本| 欧美日本高清视频99| 久久网日本| 天天操天天爽天天爱| 伊人大蕉香| 婷婷五月天久久久| 久久色9| 五月花婷婷| 五月天成人综合| 色五月情| 婷婷五月成人| 美欧成人视频| 99在线观看视频| 婷婷亚洲天堂| 五月停停色色丁香| 天堂网色色| 激情丁香五月| 99热| 色色网站| 欧美婷婷五月丁香| 在线观看中文字幕亚洲| 五月天婷婷激情| 天天久久综合| 婷婷久久六月天| 亚洲六月婷婷| AV在线免费播放| 在线播放成人| 丁香五月婷婷激情蜜桃| 天天干天天av天天射| 日本99热| 日日做A爰片久久毛片A片英语| a久久| 五月婷综合性中心| 日本WwW色偷偷丁香花久久久京东热| 在线视频激情网站| 久久这里只有精品热在99| 五月丁香少妇A| 色噜噜综合网| 开心五月六月婷婷| 狠狠色五月激情| 五月丁香久久呀| 午夜免费高清AV片| 91pornav在线| 99色网站| 精品人妻久久久| 婷婷五月天性爱视频| 另类小说五月天| 5五月综合网亚洲| 亚洲狠狠狠| 激情综合网亚洲色图| 激情五月图| 91玖玖| 色婷婷AV在线| 婷婷伊人网| 99玖玖免费视频| 日本精品干| 六月丁香狠狠爱| 成人丁香五月婷| 九九伦子片| 婷婷成人av| 激情五月婷婷综合网| 少妇熟女视频一区二区三区| 草榴视频黄色网| 婷婷五月丁香成人网| 99五丁香月| 五月丁香A片| 996黄色片| 五月色婷丁香| 五月丁香激情四射综合| 狠狠色激情在线| 丁香五月天无码| 国产另类综合| 久久思思热| 99干视频| 久草热8精品视频在线观看 | 少妇被下春药玩弄A片| 亚洲激情综合| 97超级碰| 色五月天激情| 韩国婷婷丁香五月| 精品人妻伦一二三区久| 丁香五月偷拍| 丁香婷婷婷婷十二月在线观看视频| 97在线日本| WWW.久久久久久久| 五月丁香婷中文| 色婷五月天激情| 久草狼人| 色五月色综合| 激情丁香婷婷| 激情婷婷网| 五月婷婷,狠狠操| 丁香婷婷影院| jiuse91在线| 无码se| 五月天婷婷丁香视频| 五月婷婷六月丁香激情| 国产99久久久国产精品免费看| 99精品综合在线| 国产亚洲色婷婷久久99精品91| 天天色五月| 成人va视频| www.夜夜操| 亚洲精品一二三| 国产av影片| 婷婷久久免费看| 五月丁香婷婷免费视频| 狠狠一日| 亚洲色五月天是什么| 无码 色| 97色在线| 色爽九九| 丁香婷婷五月基地| 成人无码精品1区2区3区免费看| 伊人久久大香线蕉AV最新午夜| 丁香六月激| 99亚洲精品视频| 国外亚洲成AV人片在线观看| 99黄色性生活| 九九精品热播| 色婷婷色五月综合| 天天摸色吧天天摸色吧| 七月婷婷色香综合网| 色婷婷a v| 五月婷婷激情综合拍| 91人操| 激情五月最新网址| 激情综合婷婷| 国产精品人成A片一区二区| 97热九九| 夜夜爽天天爽| 婷婷色一二三区波多野结衣| 99爱免费视频| 亚洲av电影在线| 丁香婷婷五月天亚洲| 91人操人人人操人| www久久久久久| 亚洲激情区| 久久久久久人妻| 91成人电影| 五月天天天色| 东京热人妻一区二区三区在线| 美女100%露全身无挡网站| 99ri国产| 五月丁香婷婷啪啪| 大香蕉九九| 任你日热视频| 人妻aV在线| 九九精品re免费视频| 丁香五月激情综合| 五月天婷婷午夜丁香| 五月天激情婷婷| 日本9区视频| 26uuuuuuuu国产| 超碰国产在线播放| 久久这里只| 国产性av| www.婷婷.com| 99热高清在线| 丁香久久综合| 色久播播| 日本色色影片| 亚洲视频伍月婷婷| 日韩色色一区| 超碰人人色| 7777激情基地| 色情综合网| www.精品99| 亚洲超碰在线| 思思热再线视频| 成人丁香婷婷| 日日操天天操| 丁香五月激情六月欧亚激情综合导航 | 婷婷丁香五月天在线视频| 婷婷五月丁香五月| 色九九中文字幕| 另类激情五月| 在线看黄色| 日本在线视频www色| 99热r| 婷婷久草| 激情五月,色播五月| 丁香五月激情月| 丁香激情网| 欧美成性色| 欧美午夜乱妇午夜福利| 99热这里只有精品免费| 伊人青草成人| 日本情色一区二区| 日本狠狠干| 日本激情五月天‘| www色五月| 国产乱妇无乱码大黄AA片| site:publishdd.com| 999九九九久久久99HD| 91婷婷搞| 五月丁香激情欧洲啪啪| 婷婷色丁香五月| 激情第四色| 香蕉AV777XXX色综合一区| www.综合久久.com| 色爆五月| 婷婷色五月天在线观看| www,婷婷| 婷婷免费成人视频| 色女人久久| 96丁香六月婷婷蜜桃综合久久| 亚洲五月天婷婷在线| 欧美影院婷婷| 丁香五月ⅤA久久久| 欧美日韩aaa| 久久久久久久久人妻| 婷婷在线视频| 欧美精品A片一区在线观看| 天天色亚洲| 日日夜夜爽| 激情五月丁香五月| 超碰人人91| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 欧美韩日AAA网站| 99日精品视频| 色综合久久无码| 97自拍视频在线| 婷婷欧美| 久久人妻www| 99在线观看视频精品| 大香蕉七区| 日韩成人中文| 亚洲成av人影院| 热99免费在线| www.狠狠艹| 99re久热只有精品6在线直播| 婷婷综合色网| 9999热在线观看| 亚洲网综合在线| 久久九九热视频| 夜夜干天天干| 天天操屄网| 五月情丁香色| 婷婷五月综合婷婷| 色5在线| 色九月婷婷丁香| 婷婷五月开心中文字幕在线| 激情播丁香| 婷婷丁香五月天综合AV| 色婷婷狠狠爱| 另类视频一区| 久久精彩综合视频| 色综久久AV| www.五月婷婷| 开心六月婷| 超碰在线精品| 99久久久| 婷婷丁香视频在线观看免费 | 婷婷五月天精品| 色婷婷五月天堂资源| 另类色视频| 丁香 婷婷 激情 综合 五月| 99这里只有精品国产| 99re在线视频精品,这里只有精品18,| 337p大胆噜噜噜噜噜91Av| 日韩精品999| 99热最新精品| 日本激情ⅩXX免费视频| 五月天激情在线视频| 九九视频这里只有精品在线播放 | 天天爽天天爽视频| 99亚洲精品| a久久| 婷婷五月天天爽| 久久婷婷五月综合| www.五月婷婷久久.com| 色色色激情| 五月天天丁香婷婷在线中| 日日爱678| 五月综合亚洲色| 99惹| 5月婷婷激情网| 婷婷丁香小说| 久草大| 99热在线只有精品| 少妇高潮呻吟A片免费看软件| 国产日产亚洲系列最新| 98色丁香五月婷婷综合网| 五月丁香五月丁香五月丁香五月丁香91| 色婷婷影音| 丁香久久综合| 人人干天天操五月丁香| 天天天综合网| 五月丁香婷婷综合网| 99网| 97人人爱人人操| 99在线视频播放| 久久中文人妻系列| 深爱激情五月婷婷| 色色色综合网| 91男人操女人视频| 五月天丁香综合久久国产| 色吧综合网| 五月婷丁香在线视频在线| 六月丁AV| 色色激情| 超热久碰.com| 亚洲婷婷开心五月| 国产日韩欧美性爱| 欧美性生交XXXXX无码小说| 97色视频网| 婷婷五月小说色综合| 五月婷婷丁香六月在线| 99精品视频网站| 天天干天天av天天射| 欧美激情综合色综合啪啪五月| 5月色亭亭视频| 99看片| 五月天婷婷久久| 久久ri精品| 五月天社区| 天天日,天天射,天天舔| 日本狠狠色| 精品无码片| 天天弄天天爽| 婷婷射丁香| 日日操夜夜操不卡| 99热这只有| 久超超碰| 伊人大香蕉综合在线| 99精品这里只有免费视频| 综合激情站| 五月丁香六月激情综合| 久99久视频| 久久久久这里只有精品| 婷婷五月丁香青青草在线| 五月天大香蕉| 大香蕉天堂| 久久婷婷网址| 亚洲五月综合色播| 99精品免费| 婷婷午夜精品久久久| 婷婷丁香激情综合色情| 国产精品日本一区二区在线播放| 久久九九怡红院| 五月天婷综合| 婷婷刺激综合| 99爱视频免费| 操婷婷久久| 五月综合六月婷婷| 久久久宗合视频88| 亚洲五月综合色播| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 六月激情婷婷色| 丁香五月性| 久久伦乱| 亚洲无线视频| 成人网在线视频| 婷婷丁香五月天激情| 日本三级第一页| 99色热综合| 婷婷成人基地| 国产热精品| 99精品偷自拍| 天天开心AV色综合婷婷五月天| 亚洲人妻av| 五月色婷婷亚洲| 99热思思| 开心久久爱五月天| 色五月情| 五月婷综合网| 9热在线视频精品| 婷婷精品性视频| 久久久噜噜噜操操操| 色狠久| 日韩有码久久| 啪啪99| 九九色人| 亚洲成人免费在线| 夜夜操夜夜姧| 婷婷丁香婷婷97| 婷婷丁香18| 亚洲一区国产传媒| 99热综合| 天天色官网| Caoub青青超碰 | 人人摸人人摸| 婷婷黄色五月天在线视频| 一本道在线电影| 婷婷五月天激情五月天| 综合网啪| 26uuu最新地址| 久久久精品99亚洲综合| 国产精品久久久爽爽爽麻豆色哟哟| 亚洲99视频| 九九美女视频| 亚洲成人在线播放| 激情综合网激情五月欧美| 婷婷综合玖玖五月| 色婷婷伊人| 99热大全在线观看| 色欲AVV| 午夜婷婷久久| 99rewww| 五月丁香婷久久| 亚洲性视频| 色婷婷XXXXX| 精品一二三区久久AAA片| 丁香色婷婷| 久久丁香五月婷婷| 碰超亚洲| 激情久久久| 狠狠干狠狠干狠狠干狠狠干| 色色色97| 日本不卡高字幕在线2019| 99综合色| 五月丁香怕啪啪| www.九月婷婷丁香.com| 日本99久久| 亚洲激情婷婷| 午夜美女人啪最红院| 一起肏在线视频| 五月天婷婷基地| 五月婷婷综合丁香视频| 丁香六月激情综合网| 操碰久| 99在线精品免费视频| 亚洲无码99| 婷婷色无码| 99热网址| 日韩成人影片在线观看| 婷婷色综合| 99热精品在线在线| 狠狠狠五月婷婷六月丁香| 婷婷五月天黄色| 丁香五月婷婷国产在线| h在线看免费版在线看| 久热亚洲| 婷婷五月花西瓜| 婷婷五月色播网| 亚洲免费视频网站| av中文字幕免费观看| 99这里只有精品|v| 久久伊人9| 丁香六月激情综合啪啪| 五月天婷婷六月| 激情综合五月丁香| 九九热精品99| 九九精品99久久久| 美女视频图片久久91| 农村熟妇高潮精品A片| 丁香六月啪| 99热这里只有精品8| 五月天夜夜爱夜夜操| 丁香六月亚洲| 中文字幕丰满乱孑伦无码专区| 99色网站| 色色色婷婷五月| 9 1大香蕉| 九九丁香社区欧美激情| 三十熟女| av中文网| 婷婷五月欧美综合| 久久精品A片777777| 99热超碰在线| 免费观看18视频网站| 婷婷丁香成人| 亚洲午夜AV| 五月天激情小说网| 色色婷婷五月| 国外亚洲成AV人片在线观看| 成人精品视频99在线观看免费| 久久久激情| 99热精品在线在线| 精品人妻伦九区久久AAA片| 午夜色婷婷| www九九热| 婷婷六月天| 九九热精品| 免费看欧美成人A片无码| 五月综合视频| 2025神马午夜福利| 9久热在线视频| 综合激情九月婷婷,激情综合婷婷中文字 | 99久久99久久综合| 天天操天天插| 色99色| 免费看欧美成人A片无码| www.色婷婷| 成人在线二区| 婷婷丁香综合色AV| 91精品综合久久婷婷九色| 婷婷操超碰| 五月天色色色| 五月丁香五月激情综合色综合| 第四色婷婷色五月| 亚洲视频伍月婷婷| 99乱视频| 色五月婷婷五月天| 91色综合网站在线| 日本丁香久在线| 精品久久99| 婷婷深爱五月亚洲综合| 99免费视频网| 综合久| 粉嫩AV久久一区二区三区| 狠狠插.com| 久久视频婷婷| 色婷婷内射| 欧美婷婷色五月| 久99视频在线观看| 99精品偷自拍| 天堂色色色| 人妻久久做| 69色色视频| 亚洲成人影视在线观看| 丁香五月五月婷婷欧美大香蕉| 婷婷新网址| 成人日韩欧美| 久热这里只有精品视频免费观看| 色婷婷基地| 久久综合66| 色色五月丁香婷婷| A网在线欧洲| AAA久久| 欧美性色五月天| 五月天淫乱视频| 97人人草| 黄色激情久久| 丁香五月六月欧美| 色中色综合| 东京热人妻一区二区三区在线| a网站免费观看| 五月天婷婷在线AN| 嫩草AV久久伊人妇女超级A| 丁香五月黄色| 这里只有免费的精品| 色综合色五月| 九九九九中文字幕| 丁香五月婷婷姐| 日韩在线99| 色婷婷av综合网| 色黑鬼导航| 国产成人高清| 久色大香蕉| 日本五月婷| 婷婷五月天日日日干干干| 天天日天天操心| 97夫妻超碰| 9.1综合网| 天天综合久久| 在线色婷婷| 综合狠狠五月婷婷| 狠狠五月天| 五月天久久www| 色婷婷成人五月| 激情五月丁香五月色| xxxx五月激情| 亚洲成人五月天| 久久性刺激| av性爱网站| 六月婷综合| 婷婷五六日| 日韩成人电影AV| 丁香九月激情| 在线中文av| 欧美人久久| 婷婷久久综合| www.maotanji.com| 99a级片| 热热99爱爱| 色五月综合在线| 综合在线观看99| 五月丁香色狠狠干大屄| 99精彩视频网站在线| 欧美丁香六月在线观看视频| av大香蕉| 丁香无五月网| 亚洲XX日本| 五月婷婷开心综合| 亚洲AV无码电影| 五月婷婷之美女图片| 久久久91精品| 在线1青婷| 91综合在线观看首页| 丁婷婷五月天在线播放| ...婷婷五月综合不卡,国产在线手机 | 丁香婷婷五月| 色婷婷成人久久| 丁香五月天啪啪a日本| 色玖玖网| 丁香五月情| 色欲丁香| 国产毛片精品一区二区色欲黄A片| 狠狠草天天草| 日本色色影片| 日韩爱操视频| 六月婷婷久久| 国产精品色| 丁香婷停五月激情综合深爱| 色噜噜狠狠狠狠色综合久欧美| 五月丁香亚洲婷婷| 色婷婷色九月| 丁香五月婷婷在线| 精品九九视频| 啪啪东京热| 色播婷婷大香蕉| 99er这里只有精品视频| 性生生活大片又黄又| 日日日天天干| 操操国产| 91精品熟女| 国产真实乱对白精彩| 99久久精品视频女神1| 五月天久久激情| www99热| 久久久婷丁香五月| 九九久久久综合| 日韩精品一品二区三区的使用体验| 狠狠爱综合| 逼特逼在线免费播放| 六月婷婷中文字幕| www.粉嫩av.com| 操操操B| 九九色播五月丁香| 婷丁五月| 五月婷中文娱乐综合| 青青草原亚洲天堂| 激情五月综合六月丁香婷婷狠狠干| 91国产精品视频播放| 碰碰女| 精品99爱免费视频在线观看| 激情五月份婷婷| 亚洲色久| 婷婷五月丁香五月| 婷婷丁香六月影视| 国产一区18| 国产真实乱了老女人视频| 激情六月丁| 婷婷丁香五| 999久久久国产精品| 青青青在线视频国产| 色婷婷色99国产综合精品| 天天日综合网射| 婷婷色五月天色| 影音先锋女人AA鲁色资源| 激情五月天com| 99热无码精品| 98色花堂98t.R| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 日韩淑女人妻luan伦激情精品一区二 | 婷婷五月天日日日干干干| 丁香蜜臀黄色婷婷五月天| 中日韩美欧成人一区二区精品在线| 99久在线观看| 天天做天天爱天天要| 99丁香五月婷| 六月婷婷综合激情| 丁香婷婷久| 成人无码精品1区2区3区免费看| 8区视频在线| av色色国产| xfplayav在线| 无码一区二区三区四区五区| 1024国产| 五月久久婷婷天堂视频| 大香蕉综合网| 婷婷视频网| 夜夜AVV| 午夜69成人做爰视频| 日良久久| 五月天久久网站| 99热在线成人网站| 操日本人妻视频| 久去色色| 99热人人| 色婷婷久久综合久色综| 婷婷伊人綜合| 182tv992tv人之初午夜免费观看| 风流少妇A片一区二区蜜桃 | 超碰在线国产| 国产精品美女| 激情五月婷婷| 五月丁香网站| 日日夜夜狠狠| 人妻少妇色综合| 精品无吗va视频免费观看| 欧美色色色色色色色| 久久久久人无码人妻| 亚洲99视频| 国产一区男女| 亚洲国产成人裸舞| 婷婷丁香激情| 丁香五月天啪啪激情综合网| 丁香五月丁香伊人| 欧美97p| 色婷婷色五月综合| 色色网站免费观看| 五月天色在线| 夜夜爽天天日| 99热这里只有精品2| 激情小说五月欧美亚洲丁香| 79色色色色| 婷婷五月天激情免费在线观看| 噜噜噜久久亚洲精品国产品91| 亚美欧色影院| 婷婷日欧美在线观看| 激情四射婷婷| 五月天激情丁香| 五月丁香啪啪| 91男人操女人视频| 久久33视频| www热久久yy9| 婷婷丁香五月综合| 99热国产国产| 另类综合国产| 亚洲激情婷婷| 色五月首页| 五月婷婷六月丁香| 97luluse| 99这里有精品| 婷婷丁香花五月天| 色婷婷五月天偷拍| 日日操夜夜擼| 成人免费视频一区| 狠狠久久婷五月| 99这里有精品免费| 337午夜福利| 色婷婷亚洲婷婷| 天天精品视频免费观看| 99热热热99精品丁香| 一级性爱大片| 丁香五月激情婷婷视频| 欧美毛片www| 五月天婷婷乱论小说| 尔尔AV一区| 淫视馆av三区| 久久9视频欧美| 五月天色官网| 久久丁香五月| 婷婷午夜| av最新在线| 天天摸.天天mo| 5月婷婷五月天| 色婷五月天| 亚洲综合色婷| 国产操碰| 婷婷亚洲色| 久热无码| 欧美激情 日韩无码 婷婷 五月天| 免费婷婷| 五月婷婷激情中心| 亚洲色啪| 丁香婷婷五月天成人| 五月天激情黄色小说在线观看| 欧美激情凹凸丁香网| 国产激情久久久| 99视频综合网| 欧美激情五月天婷婷| 天天爱天天做天天操| 日韩成人精品中文字幕| 综合色吧| 亚洲性图一区二区| 九九Av| 丁香五月ⅤA久久久| 翔田千里aV中文字幕| 九九无码| 日韩中出视频| 五月香蕉综合| 日本在线视频www色| 99热伊人综合| 天天肏天天插| 深爱五月激情| www91精品| 丁香五月婷婷俺也要去| 91色色色| 庭庭久久内射| 婷婷丁香色无五月| 国产成人精品一区二三区熟女在线| 五月丁香六月婷婷啪啪| 激情五月丁香五月| 五婷婷综合网| 狠狠操天天操天天操| 超碰免费在线| 日本99在线| 人人摸人人搞| 黄色高清无码| 天天操,天天插| 色婷婷成人做爰A片免费看网站| 九九操操| av在线观看网站| 日韩无码系列| 婷婷激情五月色综合| 五月婷婷啪啪啪啪| 狠狠干五月丁香| 色噜噜婷婷| 伊人网欧美在线男人天堂五月丁香| 91九色熟女| 婷婷丁香五月天影院| 草五月| 丁香婷婷午夜| 天天色综网| 91狼友视频网页更新| www.五月激情红色| 天堂伊人干| 激情五月丁香在线观看直播| 亚洲久热| 色天天狠狠干| www.色五月| 久草五月天电影网| 中文成人在线| 五月婷婷香蕉| 亚洲成人无码专区| 严洲天天插| 中文AV网站| 天天摸天天日天天舔| 日本玖玖在线| 五月丁香六月婷婷无码| 日本情色一区二区| 五月天婷婷AV| 9有码中文| 久久婷色| 日日夜夜狠狠婷婷色| 久久伊人五月天| 天天搞夜夜六| 日比网免费国产| 涩婷婷五月天| 71在线精品视频一区| 免费啪啪亚州视频| 日韩成人电影AV| 色色色欧美| 九九热这里只有国产精品| 五月丁香 狠狠爱| 草综合14| 午夜成人天堂久久无码日韩久久| 国产成人99久久亚洲综合精品| 激情丁香婷婷六月天| 三男玩一女三A片| 99热久草| 久久婷婷人人| 这里只有精品视频免费在线观看| 久久丁香婷婷五月天| 99热久久这里只有精品| 久久视频在线| 日韩av在线电影| 99久久九九| 狠狠五月综合在线| 97热精品| 狠狠狠狠狠狠| www,26uuu,c0m,色情| 婷婷五月天Av| 最近中文字幕大全免费版在线 | 九九热精品| 天天五月情| 97热久久五月婷婷| 国产毛片精品一区二区色欲黄A片| 天天插轮理| 9久久久| 97人人操人人干| 涩涩涩.com| 色碰碰视频| 日韩成人中文| 五月婷婷人人人操| 五月丁香综合精品| 亚洲超级碰| 成人无码髙潮喷水A片| 久久六月综合| 色五月婷婷五月丁香五月激情五月视频 | www.玖玖九| 高清不卡一区| 久久99成人性爱高清视频| 9久热免费视频99| 69超碰在线| 婷婷五月激情图片| 甈你aaaaa| 97在线精品| 99热色综合| 久久久人妻| 99热亚洲| α久久| 中美日韩成人在线| 蒲京久久无码视频| 激情深爱五月天| 无人精品在线视频| 激情五月天之六月婷婷| 色综合久久88色综合天天看| http://www.com久久久精品一区| 色婷五月天| 天天久综合| 五月天色婷婷小说| 婷婷丁香久久| 777久久久| www.91av.com| 日韩1区2区| 99国产精品久久久久久久久久久 | 91综合网| 一二线视频 另类| 天天日夜夜拍| 大天天伊人| 丁香婷婷在线| 就爱操www com| 久er免费视频| 丁香婷婷九月| www.综合久久| 日韩一级| 强辱丰满人妻HD中文字幕| 久久婷婷五月综合| 激情五月天婷婷五月天| 夜夜夜叫天天天做| 亚洲日韩人妻操逼| 色婷婷五月天中文字幕| 婷婷97碰碰| 综合精品99| 五月丁香久久激情综合| 极品人妻VIDEOSSS人妻| 99热最新| 天天操天天曰| 丁香六月色婷婷| 婷婷五月色惰| 99精品视频免费观看| 九九免费精品| 人人摸人人干人人做| site:ornaments52.com| 亚洲天堂AAA| 婷婷五月天激情综合婷婷五月天激情综合| 日韩999| www.五月婷婷久久.com| WWW.久久久久久久| 日韩av网站在线观看| 丁香五月天天| 一区二区三区XXXXXX| 99玖玖精品| 青青操丝袜美腿| www.久9| 丁香五月大香蕉AV| 2022人人操人人看| 久re热视频| 在线观看996精品| 97色图片中文字幕视频在线观看 | 色情终和网| 九九婷婷激情综合网| 99网址在线观看| 爱iii做iiii日日| 91操女| 美女伊人久久| 色五月欧美| 99色网站| 五月丁香久人妻中文| 欧日美女Va| 激情婷婷人妻| 激情小说之五月| 婷婷五月视频| 欧洲色色| 99精品在线| 99在线观看| 日韩无码AV电影网站| 五月天另类小说久久小说网| 99热免| 婷婷激情在线| 天天干夜夜谢| 少妇性BBB搡BBB爽爽爽电影| 校园春色亚洲色| 99热九九在线| 亚洲欧洲另类| 婷婷在线操| 狠狠色噜噜| 五月狠狠| 五月婷婷开心网| AA片在线观看视频在线播放| 九九综合九色欧美狠狠| 非洲一级AV| 无码一区二区日韩| 玖久精品视频9| 国产亚洲精品久久一区二区三区| 色婷婷av在线观看| 欧洲电影在线观看免费版英语版| 激情文学 综合 九月| 九九九日本熟女| 亚洲色情一区二区三区四区| 永久精品| 色五月亚洲| 91 久热| 天天看A片| 五月天婷婷青青草| 91人人网| 四季8848精品成人免费网站| WWW·色色色·COM| 69堂午夜视频最新地址| 99综合色| 99久久综合网| 欲求不满的人妻| 亚洲小视频免费播放| 婷婷五月天激情五月天| 9久精品视频| 一本婷婷丁香久久| 激情综合无码| 欧美VA在线观看| 亚洲第一第二网站| 色色图五月天| 夜夜骑操AV| 九九在线视频| 成人无码免费一区二区中文| 超碰91av| 五月丁香在线综合| 99色色网| 射久久丁香五月| 久久狠狠色| 丁香婷婷九月| 91丁香色五月| 免费99情趣网视频| 久久婷婷丁香| 91在线精品一区二区| 久久这里只有国产| 五月综合视频| 五月天婷婷色播综合在线| 久久综合婷婷| 五月丁香婷婷综合| 人人色人人弄人人操| 亚洲AV免费在线| 五月天丁香| 欧美日韩99| 久久久99免费视频| 婷婷色情五月| 欧美大片| 日本综合久| 男人的天堂五月丁香| 亚洲精品第一国产综合亚AV| 天天搽天天射| 99综合在线| 久婷首页| 五月婷婷色激情| 在线观看国产高清视频免费网站| 97干免费视频| 人妻少妇色综合| 色五月婷婷丁香凹凸| 色五月激情五月丁香五月婷婷啪啪综合 | 亚洲熟妇AV乱码在线观看 | 婷婷五月丁香狠狠| 成人av免费观看| enecarbon-materials.comWu染请涟系Bao护@wip1688 | 亚洲乱码日产精品BD| 婷婷色色网| 五月丁香啪啪激情| 天天综合色丁香| 五月婷婷在线视频观看| 中文字幕综合色| 婷婷射图五月天| 久久黄色片| 婷婷丁香一月| 成人做爰高潮A片免费视频 | 丁香五月婷婷综合精品素人| 91n啪啪| 婷婷五月天亚洲丁香| 婷婷五月丁香图片人人操| 操逼在线视频| 影音先锋男人女人| 久久五月婷婷开心网| 牛色色碰| 国产精品色一哟哟| 激情内射人妻1区2区3区| 久一这里有精品国产| 亚洲天堂热| 国产婷婷五月中文字幕高清| 国产成人精品一区二三区熟女在线 | 婷婷丁香五月天激情| 丁香五月婷婷激情小说|