免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

政務(wù)云平臺(tái)搭建與業(yè)務(wù)遷移實(shí)戰(zhàn):從資源整合到分權(quán)分域

政務(wù)云平臺(tái)搭建與業(yè)務(wù)遷移實(shí)戰(zhàn):從資源整合到分權(quán)分域 簡(jiǎn)介這是北京市政務(wù)云平臺(tái)互聯(lián)網(wǎng)云項(xiàng)目的完整方案文檔面向電子政務(wù)規(guī)劃者、云架構(gòu)師及數(shù)據(jù)中心運(yùn)維人員重點(diǎn)闡述如何通過(guò)IaaS平臺(tái)整合分散政務(wù)系統(tǒng)、提升資源利用率并保障安全。文檔包含1個(gè)PDF文件大小約117KB已有189人學(xué)習(xí)。內(nèi)容完整呈現(xiàn)華為IaaS平臺(tái)總體架構(gòu)與硬件組成涵蓋P2V、V2V、數(shù)據(jù)庫(kù)遷移等業(yè)務(wù)平滑遷移工具以及近三十個(gè)小數(shù)據(jù)中心資源整合、統(tǒng)一互聯(lián)網(wǎng)出口的安全設(shè)計(jì)。方案同時(shí)提供了運(yùn)維管理優(yōu)化路徑與國(guó)產(chǎn)化自主知識(shí)產(chǎn)權(quán)說(shuō)明并附有真實(shí)客戶價(jià)值數(shù)據(jù)三個(gè)月內(nèi)完成計(jì)生、社保、醫(yī)保等民生業(yè)務(wù)遷移上線資源利用率由不足16%提升至55%安全威脅降至原來(lái)的5%運(yùn)維人力由70人減至5人。這些量化指標(biāo)與實(shí)踐過(guò)程能為政務(wù)云規(guī)劃、遷移實(shí)施和成本效益評(píng)估提供具體參考。1. 政務(wù)云不是“買臺(tái)服務(wù)器”那么簡(jiǎn)單從三十個(gè)孤島到一個(gè)平臺(tái)北京政務(wù)云這個(gè)案例最反直覺(jué)的一點(diǎn)是它把近三十個(gè)委辦局的小數(shù)據(jù)中心全砍了統(tǒng)一收編到一個(gè)云平臺(tái)上。這套由華為交付的互聯(lián)網(wǎng)云方案本質(zhì)上是給北京市電子政務(wù)外網(wǎng)建了一個(gè)從服務(wù)器、存儲(chǔ)、安全設(shè)備到云平臺(tái)和運(yùn)維的完整 IaaS 底座承載的是計(jì)生、社保、醫(yī)保、視頻北京這類直接面向市民的民生業(yè)務(wù)。結(jié)果也很直接計(jì)算資源利用率從不到 16% 拉到 55%互聯(lián)網(wǎng)出口統(tǒng)一后安全威脅降到原來(lái)的 5%運(yùn)維人員從七十多人壓到 5 人。如果你正在做政務(wù)云、國(guó)企私有云或者多云整合的項(xiàng)目這份方案的參考價(jià)值不光是技術(shù)選型更是“遷移怎么組織、邊界怎么劃分、坑在哪里”的完整樣本。2. IaaS 平臺(tái)怎么搭從硬件選型到云平臺(tái)層的關(guān)鍵參數(shù)2.1 資源池設(shè)計(jì)先把“集中化”這件事想清楚政務(wù)云和商業(yè)云最大的不同是它要先回答一個(gè)問(wèn)題哪些業(yè)務(wù)能上云、哪些暫時(shí)不能。北京政務(wù)云的思路是“統(tǒng)一承載、分權(quán)分域”把原來(lái)分散在各委辦局小數(shù)據(jù)中心的計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)資源收編為一個(gè)邏輯資源池再按委辦局的業(yè)務(wù)屬性切成不同的資源分區(qū)。這個(gè)設(shè)計(jì)看起來(lái)簡(jiǎn)單真正落地時(shí)最考驗(yàn)人的是容量規(guī)劃——你不能簡(jiǎn)單地把三十個(gè)數(shù)據(jù)中心的峰值需求加起來(lái)當(dāng)總?cè)萘恳驗(yàn)椴煌k局的業(yè)務(wù)峰值時(shí)段不同資源共享后總?cè)萘渴切∮诜逯弹B加的。我當(dāng)時(shí)拆這個(gè)案例時(shí)做了一張粗略的資源估算表思路可以復(fù)用資源項(xiàng)傳統(tǒng)模式按委辦局峰值求和云模式按共享池規(guī)劃備注CPU 總量各局峰值之和 × 1.5 冗余各局平均負(fù)載之和 × 1.2 冗余共享池靠錯(cuò)峰省冗余內(nèi)存同左通常按物理機(jī)配置按虛擬機(jī)規(guī)格累加后 × 1.3預(yù)留內(nèi)存超分空間存儲(chǔ)容量各局實(shí)際占用 × 2各局實(shí)際占用 × 1.5去重和快照減少冗余互聯(lián)網(wǎng)帶寬三十個(gè)出口之和統(tǒng)一出口的 60%70%安全設(shè)備并聯(lián)處理這套估算方法不是我發(fā)明的是政務(wù)云項(xiàng)目里比較通用的規(guī)劃邏輯。核心思路是先摸清每個(gè)委辦局業(yè)務(wù)的真實(shí)負(fù)載曲線再做總量削峰填谷而不是拍腦袋定規(guī)格。如果各局業(yè)務(wù)高峰期恰好重疊那共享池的優(yōu)勢(shì)會(huì)被削弱這一步做扎實(shí)了后面資源利用率提升才有基礎(chǔ)。2.2 硬件選型國(guó)產(chǎn)化約束下的服務(wù)器、存儲(chǔ)與網(wǎng)絡(luò)方案里明確寫(xiě)了“華為唯一提供全套自主知識(shí)產(chǎn)權(quán)產(chǎn)品”這在政務(wù)項(xiàng)目里不是簡(jiǎn)單的一句宣傳而是直接影響硬件選型的硬約束。服務(wù)器層面用的是華為自研的 Taishan 系列和 FusionServer 混搭關(guān)鍵業(yè)務(wù)跑在虛擬化集群上非關(guān)鍵業(yè)務(wù)跑在容器節(jié)點(diǎn)上。存儲(chǔ)層面采用 FusionStorage 分布式存儲(chǔ)三副本策略保證數(shù)據(jù)安全同時(shí)支持在線擴(kuò)容。網(wǎng)絡(luò)層面值得多說(shuō)一句。政務(wù)云的網(wǎng)絡(luò)分區(qū)一般至少分為政務(wù)外網(wǎng)接入?yún)^(qū)、核心業(yè)務(wù)區(qū)、DMZ 區(qū)、管理區(qū)和存儲(chǔ)區(qū)。每個(gè)區(qū)之間通過(guò)安全設(shè)備或防火墻做訪問(wèn)控制各區(qū)之間的流量走向要提前畫(huà)清楚。我當(dāng)時(shí)梳理這套網(wǎng)絡(luò)分區(qū)時(shí)的一個(gè)經(jīng)驗(yàn)是管理區(qū)和業(yè)務(wù)區(qū)必須物理分離或強(qiáng)邏輯隔離否則運(yùn)維誤操作導(dǎo)致業(yè)務(wù)中斷是早晚的事。華為那套方案里強(qiáng)調(diào)安全設(shè)備、防火墻的部署本質(zhì)上解決的就是這個(gè)隔離問(wèn)題。2.3 云平臺(tái)層OpenStack 架構(gòu)與多租戶管理政務(wù)云平臺(tái)的底座一般基于 OpenStack 架構(gòu)來(lái)搭北京政務(wù)云也是走的這個(gè)路線。OpenStack 在這里承擔(dān)的是計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)資源的統(tǒng)一調(diào)度上層再封裝一層政務(wù)云運(yùn)營(yíng)管理平臺(tái)對(duì)外提供租戶管理、配額管理、工單流程、計(jì)費(fèi)內(nèi)部核算等功能。多租戶管理是政務(wù)云區(qū)別于企業(yè)私有云的核心點(diǎn)。每個(gè)委辦局是一個(gè)租戶租戶之間網(wǎng)絡(luò)隔離、資源配額隔離、操作審計(jì)隔離。華為云的實(shí)現(xiàn)方式是底層用 OpenStack 的 project租戶隔離網(wǎng)絡(luò)用 VPC 或 VLAN 隔離安全組規(guī)則按租戶獨(dú)立配置。如果你要自己搭一套類似的平臺(tái)硬件資源池之上至少要明確這幾個(gè)參數(shù)配置項(xiàng)參考值說(shuō)明計(jì)算節(jié)點(diǎn) CPU 超分比4:18:1取決于業(yè)務(wù)類型數(shù)據(jù)庫(kù)類不超分存儲(chǔ)副本策略三副本政務(wù)數(shù)據(jù)不能丟兩副本風(fēng)險(xiǎn)大租戶配額默認(rèn)值16 vCPU / 32GB 內(nèi)存 / 500GB 存儲(chǔ)可按需申請(qǐng)調(diào)整虛擬機(jī)快照保留數(shù)35 份太多占存儲(chǔ)太少不好回溯心跳網(wǎng)絡(luò)與業(yè)務(wù)網(wǎng)絡(luò)必須分離避免管理網(wǎng)擁塞影響業(yè)務(wù)我拆這份方案文檔時(shí)最大的感觸是技術(shù)棧本身不神秘OpenStack 早已不是新鮮詞但政務(wù)場(chǎng)景對(duì)穩(wěn)定性、合規(guī)性、國(guó)產(chǎn)化的要求把很多在互聯(lián)網(wǎng)公司習(xí)以為常的做法給否決掉了——比如操作系統(tǒng)不能用社區(qū)版 CentOS 直接上生產(chǎn)得用有服務(wù)保障的商用發(fā)行版或國(guó)產(chǎn)化操作系統(tǒng)虛擬化底層要有國(guó)產(chǎn)生態(tài)適配光這一步就要做大量兼容性測(cè)試。3. 業(yè)務(wù)云化遷移P2V、V2V 不是跑個(gè)工具那么簡(jiǎn)單3.1 分階段遷移流程從現(xiàn)狀評(píng)估到業(yè)務(wù)上線政務(wù)業(yè)務(wù)遷移跟普通企業(yè)應(yīng)用遷移最大的區(qū)別在兩點(diǎn)一是不能長(zhǎng)時(shí)間中斷服務(wù)二是數(shù)據(jù)敏感不能被泄露。華為方案里把遷移分成五個(gè)階段——現(xiàn)狀評(píng)估、規(guī)劃設(shè)計(jì)、實(shí)施驗(yàn)證、試運(yùn)行、業(yè)務(wù)上線。這個(gè)流程不是走過(guò)場(chǎng)每一階段都有明確的產(chǎn)出物和驗(yàn)收標(biāo)準(zhǔn)。我做遷移時(shí)一般這樣拆解現(xiàn)狀評(píng)估盤(pán)點(diǎn)每臺(tái)物理機(jī)的配置、操作系統(tǒng)版本、中間件版本、數(shù)據(jù)庫(kù)版本、業(yè)務(wù)依賴關(guān)系、數(shù)據(jù)量、峰值帶寬。政務(wù)系統(tǒng)里最常翻車的不是應(yīng)用本身而是老舊系統(tǒng)的中間件和數(shù)據(jù)庫(kù)版本太老虛擬化平臺(tái)不支持。規(guī)劃設(shè)計(jì)確定每個(gè)業(yè)務(wù)系統(tǒng)的遷移順序先邊緣后核心、遷移窗口一般選凌晨業(yè)務(wù)低峰、回退方案。實(shí)施驗(yàn)證先在云平臺(tái)上做鏡像模擬驗(yàn)證系統(tǒng)能正常啟動(dòng)、數(shù)據(jù)能正常讀寫(xiě)、網(wǎng)絡(luò)策略正確。試運(yùn)行灰度切流量觀察 12 周確認(rèn)穩(wěn)定后正式割接。業(yè)務(wù)上線被遷移業(yè)務(wù)在新平臺(tái)正式對(duì)外服務(wù)同時(shí)持續(xù)監(jiān)控資源使用情況。按我的經(jīng)驗(yàn)整個(gè)流程里最耗時(shí)的是第一步和第三步。現(xiàn)狀評(píng)估往往要花掉整個(gè)遷移計(jì)劃三分之一的時(shí)間因?yàn)槔吓f政務(wù)系統(tǒng)的文檔往往不全很多業(yè)務(wù)邏輯只有運(yùn)維老人才知道。實(shí)施驗(yàn)證階段虛擬機(jī)模板的定制化、操作系統(tǒng)內(nèi)核參數(shù)的調(diào)優(yōu)、數(shù)據(jù)庫(kù)驅(qū)動(dòng)的兼容性每一步都可能在深夜加班時(shí)突然炸出個(gè)新問(wèn)題。3.2 P2V 與 V2V 遷移命令示例與常見(jiàn)配置P2V物理機(jī)到虛擬機(jī)和 V2V虛擬機(jī)到虛擬機(jī)是遷移工作里最常用的兩類工具。華為在這里提供了自動(dòng)化遷移工具鏈但從操作角度你完全可以先用開(kāi)源的方案打通流程。一個(gè)典型的 P2V 遷移過(guò)程可以用以下思路實(shí)現(xiàn)# 1. 在源物理機(jī)上收集系統(tǒng)信息以 Linux 為例 uname -a cat /etc/os-release df -hT fdisk -l lspci | grep -i raid # 2. 檢查源系統(tǒng)是否有特殊驅(qū)動(dòng)或硬件依賴 lsmod | grep -E raid|scsi|nvme ethtool -i eth0 # 3. 使用 virt-v2v 做離線轉(zhuǎn)換常見(jiàn)做法 virt-v2v -i disk -r -o local -os /data/vm-images \ --network bridge:br0 \ --machine-readable \ /dev/sda # 4. 轉(zhuǎn)換完成后在云平臺(tái)上創(chuàng)建虛擬機(jī)并掛載磁盤(pán)調(diào)整啟動(dòng)順序 # 5. 啟動(dòng)前先做一次文件系統(tǒng)檢查 fsck -y /dev/vda這段命令里的核心參數(shù)在幾個(gè)地方-i disk -r表示輸入是物理磁盤(pán)且自動(dòng)識(shí)別磁盤(pán)順序-o local -os /data/vm-images指定轉(zhuǎn)換后鏡像的輸出路徑--network bridge:br0把虛擬機(jī)的網(wǎng)卡橋接到目標(biāo)云平臺(tái)的業(yè)務(wù)網(wǎng)絡(luò)上。這里有個(gè)容易被忽略的點(diǎn)virt-v2v轉(zhuǎn)換出來(lái)的鏡像默認(rèn)磁盤(pán)控制器可能是 virtio如果源系統(tǒng)的內(nèi)核不帶 virtio 驅(qū)動(dòng)轉(zhuǎn)換出來(lái)的虛擬機(jī)根本起不來(lái)。所以在轉(zhuǎn)換前一定要確認(rèn)源內(nèi)核支持 virtio_blk或者用-o rhv這類目標(biāo)平臺(tái)模板自動(dòng)注入驅(qū)動(dòng)。V2V 遷移更常見(jiàn)的是跨虛擬化平臺(tái)遷移比如從 VMware 遷到 OpenStack。做法有兩種一種是導(dǎo)出 OVF 再導(dǎo)入一種是通過(guò)工具直接轉(zhuǎn)換。命令行工具層面常用qemu-img轉(zhuǎn)換格式# VMware vmdk 轉(zhuǎn) qcow2 qemu-img convert -f vmdk -O qcow2 vmware-disk.vmdk cloud-disk.qcow2 # 轉(zhuǎn)換完成后檢查鏡像信息 qemu-img info cloud-disk.qcow2 # 如需調(diào)整磁盤(pán)大小只能擴(kuò)大不能縮小 qemu-img resize cloud-disk.qcow2 50G幾乎每個(gè)在政務(wù)云項(xiàng)目里做過(guò)遷移的人都經(jīng)歷過(guò)這樣的場(chǎng)景V2V 轉(zhuǎn)換完虛擬機(jī)進(jìn)去一看網(wǎng)卡起不來(lái)因?yàn)?VMware 的 vmxnet3 驅(qū)動(dòng)在 OpenStack 的 virtio 網(wǎng)絡(luò)下沒(méi)有被加載。這種問(wèn)題的解決思路一般是在源虛擬機(jī)里先把 virtio 網(wǎng)卡驅(qū)動(dòng)裝上、把 network 腳本寫(xiě)好再做轉(zhuǎn)換而不是轉(zhuǎn)換完再去補(bǔ)救。3.3 數(shù)據(jù)庫(kù)遷移最容易翻車的環(huán)節(jié)P2V、V2V 遷移的是操作系統(tǒng)和應(yīng)用數(shù)據(jù)庫(kù)遷移是另一個(gè)層級(jí)的問(wèn)題。政務(wù)系統(tǒng)后臺(tái)的數(shù)據(jù)庫(kù)大多是 Oracle、人大金倉(cāng)數(shù)據(jù)庫(kù)或開(kāi)源 MySQL、PostgreSQL不同數(shù)據(jù)庫(kù)之間還有遷移的工具選擇問(wèn)題。常見(jiàn)的做法是先做結(jié)構(gòu)遷移再做數(shù)據(jù)遷移最后做增量同步驗(yàn)證。結(jié)構(gòu)遷移相對(duì)簡(jiǎn)單數(shù)據(jù)遷移才是真正考驗(yàn)?zāi)托牡沫h(huán)節(jié)# MySQL 邏輯備份再導(dǎo)入常見(jiàn)做法 mysqldump -u admin -p --single-transaction --routines --triggers \ --databases gov_service gov_service_full.sql # 導(dǎo)入目標(biāo)庫(kù) mysql -u admin -p -h 10.0.8.10 gov_service gov_service_full.sql # 如果要更快的大表遷移用物理備份 xtrabackup --backup --target-dir/data/backup/mysql/ \ --useradmin --password*** xtrabackup --prepare --target-dir/data/backup/mysql/ # 把備份目錄同步到新庫(kù)對(duì)應(yīng)的 data 目錄后再調(diào)整權(quán)限和配置這里最容易被忽略的是--single-transaction這個(gè)參數(shù)不加它備份過(guò)程中如果有寫(xiě)操作備份數(shù)據(jù)會(huì)不一致。政務(wù)系統(tǒng)白天都在對(duì)外服務(wù)必須保證備份的一致性。另一個(gè)經(jīng)驗(yàn)是大表數(shù)據(jù)量超過(guò) 50GB 就別用邏輯備份了物理備份加增量同步效率高得多但物理備份對(duì)版本的兼容性要求高M(jìn)ySQL 小版本不一致直接恢復(fù)會(huì)報(bào)錯(cuò)。數(shù)據(jù)庫(kù)遷移時(shí)我會(huì)額外注意三點(diǎn)一是數(shù)據(jù)庫(kù)字符集政務(wù)老系統(tǒng)最常見(jiàn)的是 GBK新云平臺(tái)默認(rèn) UTF8字符集不一致會(huì)出現(xiàn)亂碼二是自增主鍵沖突多庫(kù)合并到一個(gè)庫(kù)時(shí)容易出現(xiàn)三是視圖、存儲(chǔ)過(guò)程、觸發(fā)器這些對(duì)象備份時(shí)容易遺漏光有表數(shù)據(jù)沒(méi)有觸發(fā)器業(yè)務(wù)邏輯就悄悄丟了。4. 資源整合與統(tǒng)一管控從“信息孤島”到分權(quán)分域4.1 網(wǎng)絡(luò)出口統(tǒng)一安全策略的收斂與配置要點(diǎn)北京政務(wù)云把近三十個(gè)互聯(lián)網(wǎng)出口收成一個(gè)出口這不僅是物理拓?fù)涞淖兓且淮伟踩呗缘拇笫諗?。原?lái)每個(gè)委辦局自己管出口安全水平參差不齊有的局連基礎(chǔ)的入侵檢測(cè)都沒(méi)有統(tǒng)一出口后安全能力可以集中建設(shè)。出口收斂后的架構(gòu)一般是統(tǒng)一互聯(lián)網(wǎng)出口 → 防火墻集群 → 入侵檢測(cè)/防御系統(tǒng) → 負(fù)載均衡 → 政務(wù)外網(wǎng)核心交換區(qū)。訪問(wèn)控制策略不再針對(duì)各局的獨(dú)立 IP 段分別放行而是通過(guò)虛擬化防火墻按租戶隔離。具體到配置層面常見(jiàn)的做法是防火墻雙機(jī)熱備加策略分組# 防火墻策略分組邏輯示例非具體廠商命令 zone: untrust (internet) zone: dmz (web-server) zone: trust (internal) # 每條業(yè)務(wù)訪問(wèn)路徑對(duì)應(yīng)一條策略 # 社保系統(tǒng)互聯(lián)網(wǎng)用戶 - untrust - dmz(web) - trust(app) - trust(db) policy 1: 允許 https 從 untrust 到 dmz 的 10.0.10.0/24 policy 2: 允許 http 從 dmz 到 app 區(qū) 10.0.20.0/24 policy 3: 僅允許 3306 端口從 app 區(qū)到 db 區(qū) 10.0.30.0/24配置策略時(shí)最大的坑是順序防火墻策略從上到下匹配如果前面有一條寬的 deny 策略后面再精細(xì)的 allow 也不會(huì)生效。政務(wù)場(chǎng)景里經(jīng)常出現(xiàn)為了臨時(shí)解決問(wèn)題加一條寬策略事后忘了收緊——半年后做安全審計(jì)時(shí)才發(fā)現(xiàn)一堆失效但未刪除的策略。我的習(xí)慣是每條策略都帶生命周期字段定期清理。4.2 分權(quán)分域運(yùn)維配額、權(quán)限與審計(jì)的落地運(yùn)維從各委辦局獨(dú)立運(yùn)維收編到統(tǒng)一政務(wù)云運(yùn)維中心不是簡(jiǎn)單地一個(gè)團(tuán)隊(duì)接管所有機(jī)器而是通過(guò)分權(quán)分域讓各局在自己的權(quán)限范圍內(nèi)自助運(yùn)維。華為方案里提到的“可視化運(yùn)維系統(tǒng)”落地時(shí)大概對(duì)應(yīng)這四塊能力運(yùn)維能力實(shí)現(xiàn)方式關(guān)鍵參數(shù)租戶資源配額每個(gè)委辦局一個(gè)租戶資源配額可彈性調(diào)整CPU/內(nèi)存/存儲(chǔ)配額按需設(shè)置操作權(quán)限分級(jí)超管、租戶管理員、業(yè)務(wù)操作員三級(jí)RBAC 模型最小權(quán)限原則監(jiān)控告警物理層、虛擬化層、業(yè)務(wù)層層層覆蓋CPU 超 80%、磁盤(pán)余量小于 20% 告警操作審計(jì)所有運(yùn)維操作留痕定期導(dǎo)出至少保留 6 個(gè)月以上配額管理是政務(wù)云日常運(yùn)維里最常被挑戰(zhàn)的一環(huán)。各局總是覺(jué)得自己的配額不夠用但實(shí)際資源利用率往往很低。我的處理辦法是先給各局一個(gè)基礎(chǔ)配額運(yùn)行一個(gè)月后看真實(shí)使用率曲線再按“使用率超過(guò) 70% 才擴(kuò)容”的原則調(diào)整。這樣既避免一開(kāi)始資源被占著不用也給了各局一個(gè)明確的擴(kuò)容預(yù)期。運(yùn)維審計(jì)這塊政務(wù)項(xiàng)目有硬性要求登錄堡壘機(jī)、操作記錄、命令行輸入輸出都要留存。實(shí)踐中不光要留操作日志還要定期做回放審計(jì)防止“有權(quán)限的人做了不該做的事”。5. 華為方案的避坑指南政務(wù)云落地最容易踩的五個(gè)坑5.1 坑一老系統(tǒng)在虛擬化平臺(tái)啟動(dòng)失敗現(xiàn)象P2V 遷移完成后虛擬機(jī)無(wú)法正常啟動(dòng)卡在引導(dǎo)階段或者啟動(dòng)后黑屏。原因源物理機(jī)的磁盤(pán)控制器驅(qū)動(dòng)與虛擬化平臺(tái)不兼容常見(jiàn)于老的 Windows Server 2003 或 CentOS 5/6 系統(tǒng)其自帶的 IDE 或老 RAID 驅(qū)動(dòng)無(wú)法驅(qū)動(dòng) virtio 磁盤(pán)。解決在遷移前先給源系統(tǒng)打入 virtio 驅(qū)動(dòng)或者在目標(biāo)云平臺(tái)創(chuàng)建虛擬機(jī)時(shí)把磁盤(pán)總線類型調(diào)整為 IDE 或 SATA先把系統(tǒng)拉起再裝 virtio 驅(qū)動(dòng)最后切回 virtio 總線。這個(gè)坑在政務(wù)老系統(tǒng)里出現(xiàn)頻率極高幾乎每次遷移都會(huì)遇到至少一兩臺(tái)這樣的機(jī)器。5.2 坑二數(shù)據(jù)庫(kù)字符集不一致導(dǎo)致亂碼現(xiàn)象業(yè)務(wù)系統(tǒng)遷移到新云平臺(tái)后頁(yè)面顯示的問(wèn)號(hào)、亂碼、個(gè)別漢字變成“口”字。原因源庫(kù)使用 GBK/GB2312 字符集新庫(kù)默認(rèn)為 UTF8數(shù)據(jù)在邏輯導(dǎo)入導(dǎo)出時(shí)沒(méi)有做字符集轉(zhuǎn)換或轉(zhuǎn)換映射失敗。解決在遷移規(guī)劃階段就要確認(rèn)源庫(kù)和目標(biāo)庫(kù)的字符集用SELECT character_set_name FROM information_schema.columns WHERE table_schemaxxx檢查所有表的字符集。如果涉及轉(zhuǎn)換用ALTER TABLE ... CONVERT TO CHARACTER SET utf8mb4在源庫(kù)先把數(shù)據(jù)轉(zhuǎn)到 UTF8再導(dǎo)出導(dǎo)入而不是導(dǎo)出后再轉(zhuǎn)。5.3 坑三網(wǎng)絡(luò)策略順序錯(cuò)誤導(dǎo)致業(yè)務(wù)間無(wú)法互訪現(xiàn)象遷移后的業(yè)務(wù)系統(tǒng)在測(cè)試時(shí)一切正常正式上線后某些模塊無(wú)法訪問(wèn)報(bào)連接超時(shí)或連接被重置。原因云平臺(tái)安全組或物理防火墻策略順序問(wèn)題——寬泛的 deny 規(guī)則被排在精細(xì)的 allow 規(guī)則前面或者只關(guān)注了東西向流量忽略了南北向流量的策略配置。解決做網(wǎng)絡(luò)策略時(shí)按“最小化開(kāi)放”逐條梳理每加一條策略都做連通性驗(yàn)證同時(shí)定期導(dǎo)出策略清單做人工審查清理長(zhǎng)期無(wú)命中流量的僵尸策略。5.4 坑四業(yè)務(wù)高峰期遷移導(dǎo)致上線窗口失控現(xiàn)象遷移選在業(yè)務(wù)高峰期窗口強(qiáng)行割接導(dǎo)致部分業(yè)務(wù)超時(shí)中斷不得不回退。原因政務(wù)業(yè)務(wù)也有高峰比如社保申報(bào)月初、醫(yī)保結(jié)算月底、公積金提取集中在月末如果遷移窗口沒(méi)有避開(kāi)這些周期一次性割接大概率出問(wèn)題。解決遷移窗口選在月初首周之后的周二至周四凌晨避開(kāi)業(yè)務(wù)結(jié)算周期大業(yè)務(wù)系統(tǒng)先做灰度放量比如先切 5% 流量驗(yàn)證 24 小時(shí)再全量切換。政務(wù)業(yè)務(wù)回退方案必須有而且要提前演練。5.5 坑五國(guó)產(chǎn)化硬件兼容性驗(yàn)證不充分現(xiàn)象新采購(gòu)的國(guó)產(chǎn)化服務(wù)器或存儲(chǔ)設(shè)備在資源池上線后虛擬機(jī)性能不穩(wěn)定存儲(chǔ) IO 延遲抖動(dòng)。原因國(guó)產(chǎn)化硬件與虛擬化軟件之間的兼容性列表更新滯后部分驅(qū)動(dòng)沒(méi)有經(jīng)過(guò)充分驗(yàn)證。解決在設(shè)備采購(gòu)前就與云平臺(tái)廠商確認(rèn)兼容性列表在采購(gòu)入庫(kù)后先建一個(gè)小規(guī)模驗(yàn)證環(huán)境做壓測(cè)和長(zhǎng)穩(wěn)測(cè)試至少連續(xù)運(yùn)行 72 小時(shí)以上驗(yàn)證通過(guò)后再并入生產(chǎn)資源池。不要看廠商官網(wǎng)寫(xiě)了兼容就直接上生產(chǎn)。6. 驗(yàn)證一份政務(wù)云方案是否靠譜三個(gè)必須復(fù)盤(pán)的數(shù)據(jù)拆這份方案時(shí)我給自己定了個(gè)規(guī)矩所有遷移完成或方案評(píng)審后必須復(fù)盤(pán)三個(gè)數(shù)據(jù)——資源利用率提升是不是實(shí)打?qū)?、安全威脅下降是怎么統(tǒng)計(jì)的、運(yùn)維人力下降有沒(méi)有水分。資源利用率這塊不要只看最終數(shù)字。方案說(shuō)從 16% 提到 55%我會(huì)反過(guò)來(lái)問(wèn)這個(gè) 55% 是 CPU 利用率還是整體資源利用率統(tǒng)計(jì)周期是峰值還是均值有沒(méi)有把存儲(chǔ)容量當(dāng)作計(jì)算依據(jù)只有搞清楚口徑這個(gè)數(shù)字才有參考意義。安全威脅降為原來(lái)的 5%要看統(tǒng)一出口之前是不是本來(lái)就把掃描日志分到了不同的系統(tǒng)統(tǒng)一后集中統(tǒng)計(jì)數(shù)據(jù)才更完整——這存在口徑變化導(dǎo)致數(shù)字大幅變化的可能不算造假但需要明辨。運(yùn)維人力從 70 人降到 5 人要確認(rèn)這 5 人里是否包含了各局保留的自運(yùn)維人員以及外包團(tuán)隊(duì)是否計(jì)入。驗(yàn)證時(shí)我常用的方法很樸素找兩份監(jiān)控報(bào)表遷移前和遷移后的同口徑對(duì)比找三個(gè)典型業(yè)務(wù)系統(tǒng)分別問(wèn)他們的真實(shí)體驗(yàn)——啟動(dòng)時(shí)間有沒(méi)有變慢、查詢有沒(méi)有超時(shí)、夜間批量作業(yè)有沒(méi)有被虛擬機(jī)搶占 CPU。技術(shù)指標(biāo)再漂亮最后都要落到使用單位的一句“比原來(lái)快多了”或者“還不如原來(lái)穩(wěn)定”上。還有一個(gè)我摸出來(lái)的小技巧拿到任何政務(wù)云方案先看它怎么處理“數(shù)據(jù)遷移失敗的回退路徑”和“老舊系統(tǒng)的兼容性測(cè)試方案”。這兩點(diǎn)寫(xiě)清楚了方案大概率靠譜這兩點(diǎn)含糊其辭后面交接和上線大概率要出幺蛾子。從那以后我每次評(píng)審云平臺(tái)方案都強(qiáng)制走一遍這個(gè)邏輯資源利用率怎么算的、安全數(shù)據(jù)口徑是什么、運(yùn)維人力怎么定義、回退方案有沒(méi)有演練過(guò)。這套功課做完心里基本就有底了。希望幫到你。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
色日本颜射| 一本久道综合99| 久久五月综合| 99热欧美在线观看| 伊人婷婷五月天av| 久久丁香综合香蕉| 97人人干| 亚洲欧美成人在线| 天天日日夜夜爽。| 天天干天天日日| 欧美大道不卡| 丁香婷婷激情四射五月| 五月天激情综合网| 97干在线视频| 六月丁香停| 天天干天天拍| 啪啪啪大香蕉| 色五月婷婷91| 色色亚洲五月天| 天天舔天天摸天天射| 丁香五月婷婷天堂大香蕉| 亚洲国产无线乱码在线观看| A久久| 亚洲成色综合网站免费观看| 久热这里只精品| 色婷婷在线视频观看| 激情五月四色| 亚洲激情av| 婷婷五月在线| 亚洲黄色操逼| 荫道BBWBBB高潮潮喷| 熟女网站久久| 噜噜噜久久| 五月开心婷婷| 亚洲五月天狠狠| 91操人| 婷婷伊人75| 色欲色香综合网| 色欧洲| 丁香五月综合在线播放| 国产精品-91JQ就要激情网91JQ6.91JQ27.CASA:16888 | 性生活视频98791| 开心婷婷五月综合| www,setingting| 五月天激情国产综合婷婷婷| 九九99精品| 九九精品综合| 久婷| 亚洲第一第二网站| 人妻久久久久久| 国产成人网址| 高清无码网址| 无码少妇高潮喷水A片免费| 超碰超碰在线| 久久激情五月| 9热网站| 午夜少妇在线观看视频| 国产又色又爽又黄又免费| 久久视频这里有精品99| 天天草天天爽| 婷婷丁香五月激情图片| 天天舔天天| 99成人精品六| 婷婷五月天激情视频| 新99思思视频| 亚洲婷婷乱乱丁香| 五月天最新网| 99热综合网| 成人在线视频一区| 久久九九色| 视频色色色色色色| 五月天婷婷激情在线色图| 狠狠色狠狠鲁| 国产精品色婷婷AV综合色色| 婷婷五月深深爱| av中文网站| 日本色色色| 色婷婷丁香五月天在线观看| 欧美久久婷婷| 无码AV免费精品一区二区三区 | 丁香五月区| 99热丁香| 99视频在线| 国产欧美第五十五页| 五月丁香婷婷啪啪| 人妻丰满精品一区二区A片| 能看的AV| 婷婷国产五月天17c| 91oumei| 婷婷五月天成人视频| 超碰在线观看三级片| 天天插天天日| 一本狠婷婷综合| 97丁香五月| 在线免费观看激情视频| 精品久久99码| 79色色色色| 色视五月天婷婷| 日本激情五月| 狠狠综合| 日韩中出视频| 99,色| 婷婷久久五月天亚洲欧美国产日韩在线观看 | 九九精品自拍| 欧美成人AAA片一区国产精品| 琪琪布丁香社区激情五月天| 91操片| 日韩在线观看亚洲| 最新精品视频99| 丁香五月激情在线| 狠狠狠狠狠| 五月丁香综合色婷婷| 日日操夜夜操无码免费| 婷婷五月俺要去| 五月丁香六月婷婷网| 人妻AV在线观看| 狠狠草在线观看| 国产无遮挡又黄又爽免费网站| 婷婷丁香婷婷97| 任你日视频| 欧美天天干五月丁香| 婷婷开心久久| 2018国产大陆天天弄| 好大好粗嗯啊-一级黄色大片免费观看-成人AV| 成久综合视频| 99热99美国在线观看| 色五月91| 69精品人妻不卡视频| 五月玖玖| 色色性爱视频| 久久综合99综合| 91天堂网综合| 久久这里只有精品16| 日本色色网站| 丁香五月欧美婷婷| www.思思99热| www.色婷婷.com| 丁香五月天天| 思思热在线免费视频| 九九婷婷网五月天| 婷婷五月综合色拍| 五月丁香婷婷AV| 日日操天天操| 99色区| 精品人妻在线| 亚洲黄色av网站| 五月丁香啪啪啪免费看| 99在线观看| 狠狠插狠狠操| 9九九久久精品无码专区| 色情综合| 亚洲综合1024| 超碰猛烈的性猛交| 99精品热| 久久九九亚洲| 色色色国产| 少妇AB又爽又紧无码网站| 久久伦乱| 狼人婷婷综合| 五月天婷婷免费| 怡红院一二三| 综合精品99| 五月婷婷六月奇米网丁香| 久久综合丁香激情五月| 久久婷婷亚洲| 99久热这里只有精品| 伊人网啪啪| 丁香五月婷婷色播艳门照| 99天堂网| 欧亚洲在线高清视频| 色婷婷AV在线| 色噜噜狠狠色综合成人99| 欧美成人色婷婷| 五月婷婷很很色| 妻久久久久| 久久久久9999| 26uuu欧美日韩| 五月婷中文字幕| 婷婷性爱五月天丁香网| 日本 @ va 免费| 一二线视频 另类| 久热这里有精品视频| 另类专区在线| 噜噜色天天开心| 久久曰曰| 安息电影在线观看完整版| 色色国产| 久久精品小视频| 亚洲视频在线观看| 狠狠色噜噜狠狠| 五月天sesese| 五月丁香婷婷综合网| 大香伊人婷婷影院| 99热免费精品| 久婷婷五月综合欧美| 成人网在线视频| 丁香五月综合久久| 色婷婷五月在线| 9色在线| 99久久性爱| 久热久| 国产成人网站在线观看| 婷婷开心综合人妻小说网址| 激情国产综合| 99在线精品视频在线观看| 五月6香色婷婷视频| 99精彩视频| 婷婷狠狠久久| 丁香五月婷婷久久久| 五月色综合网| 综合网色| 99超碰欧美| 国产午夜精品久久久观看| 超碰精品国产首页| 另类小说五月天| 色五月天网| 色在线免费观看| 日本久久人| 金品在线视频99| 无码 色| 欧美色碰| 亚洲国产精品二二三三区| 我要射综合| 国内一级片| 日本无va视频| 久久婷婷丁香视频网| 操操人人| 欧美Va在线| 久久综合婷婷激情| 97碰碰在线观看视频| 五月丁香| 伊人久久大香线蕉AV最新午夜| 成人av中文字幕| 色必久悠悠影院| av网站免费在线| 久久婷婷五月天激情四射| 一级片sese片.COM| 操人精品| 天天狠狠夜夜狠狠2023| 99这里只有精品99| 操国产人妻| 成人无码精品1区2区3区免费看| 十月丁香九月婷婷综合| 亚洲婷婷丁香五月在线| 亚洲成人av在线播放| 操骚货在线| 激情网综合| 五月天婷婷香蕉狠狠超碰综合| 九九久久综合| 综合性爱网| 丁香伊人激情| 久久9视频欧美| 香蕉97碰碰碰欧美| 久久久免费精彩视频| 色小说婷婷五月天天天| 久草视频一,二三四| 国产精品A成V人在线播放| 五月天天视频| 天天色五月婷婷91久久久久久久| 激情综合五月婷婷| 九九色欲网| 狠狠久综合| 九九碰九九爱97超| 婷婷久久在线| 丝袜熟女一区二区三区| 久久久久久久11111111111| 99色综合网| 日日夜夜青青草| 五月丁香 啪啪| 九九艹女| 91性交在线播放| 97人人做| pom538精品视频| 婷婷性爱| 久久婷婷网| 手机在线视频观看9| 爱射综合| 黄桃AV无码免费一区二区三区| 色婷婷五月综合在线| 五月丁香婷婷激情澎湃四射| 精品无码人妻一区| 五月天狠狠网站| 激情久久综合网| 久久久全国免费视频| 九九99久久| 日韩精品一品二区三区的使用体验| AV天堂婷婷五月天| 人人操超踫| 婷婷五月丁香五月丁香| 伊人影音无码一区二区三区| 伊人久久婷婷| 狠狠做五月| 久久青草国| 97caop| 99爱在线视频| 亚洲激情综合| 国产精品激情五月天色婷婷| 99精品无码网站| 婷婷成人综合免费视频| 熟女婷婷网站一婷婷五月一丁香婷婷一婷婷激情网 | 国产免费一区二区三州老师F1……| 亚洲综合九九| 无码任你操| 婷婷性爱网| 日本天天操| 狠狠色噜噜狠狠狠888| www.精品99| site:jszngf.com| 色婷婷黄色网络| 99热这里都是精品| 一区二区免费看| 久久人视频| 99精品国产乱码久久久人妻| 在线免费视频caop| 久热久69| 九九久久9 9在线观看| 综合色、色综合| 99操九九网| 嫩草AV久久伊人妇女超级A| 色婷视频| 99干免费视频| 九热电影av| 色综合狠狠色| 午夜大香蕉| 久久视这里只有精品| 欧美天天草人人草| 五月丁香婷婷人体| 五月丁香六月激情在线| 99自拍网| 日本婷婷| 色情婷婷久久五月天| 超碰京东热av男人的天堂| 狠狠爱婷婷丁香| 久久总和99| 激情四射网| 欧美黑人大吊| 久久66精品| 最新精品视频99| 激情五月婷婷网在线观看| 伊人婷婷五月| 婷婷综合视频| 婷婷情色开心五月天99| 五月天操逼激情| 五月天丁香久久综合 | 激情又色又爽又黄的A片| 四川女人毛多水多A片| 婷婷综合久久综合| 色综合99| 色婷婷狠狠干芒果TV| 五月天丁香| 久久婷婷六月综合| 久久久亚洲成人无码A片| 国产午夜精品一区二区| 夜夜做天天爽| 成人电影在线免费试看| 超碰人人摸人人操| 国产成人AV在线| 人人人人人人人人人草| 婷婷午夜天| 五月色丁香| 九月婷婷| 丁香五月婷婷综合91| 国产人人操| 亚洲综合婷婷| 99热免费在线| 一本色道久久88综合日韩精品| 亚洲国产网址| 99re久热只有精品6在线直播| 午夜丁香五月天综合| 婷婷综合色色| 欧美碰碰碰| 97超碰在线免费观看| 国产色色网站网址| 色婷婷激情| 九九无码AV| 99啪视频在线观看| 丁香五月激情视频在线| 婷婷丁香久久| 无码橾| 日日干夜夜撸夜夜骑| 日本久久人| 1024人妻| 久久五月天色婷婷| 热思思| 九九热超碰| 亚洲成人网站在线播放| 手机AVAV天堂看网| 久热9| 在线观看免费狠狠色丁香香综合| 婷婷五月色亚洲| 99亚洲视频| 97日本在线| 操日本人妻视频| 91狠狠色丁香婷婷综合久久精品| 夜夜久久综合网| 人人人va亚洲视频在线| 精品成人无码A片观看香草视频| 天天爽夜夜爽夜夜爽精品| www色婷婷com| 99久热视频在线| 另类色视频| 国产精品日日躁夜夜躁| 婷婷激情四射五月天| www.伊人天堂偷偷婷婷| 综合激情五月丁香| 婷婷日在线观看| 日韩av在线电影| 婷婷久久女人| 九九热99热| 综合久久激情久久| 成人网丁香五月| 九九热在线精品视频| 91狠狠综合久久| 成人色图情色成人网 www.5b5b5bcom 五月天| 色婷婷AV在线观看| 婷婷色正月| 一本到不卡高清DVD| 欧美日韓成人亚洲精品另类| 天天操综合网| 日本在线视频手机播放五月婷| 天天干天天干天天操| 9久热在线视频精品| www.婷婷五月天| 九九九九成人| 激情五月久久| 综合99综合久久久久久久| 久久激情网| 婷婷人妻激情| 99色色| 久婷婷五月综合欧美| www.99热这里精品| 色色五月天丁香婷婷| 99激情| 一起肏在线视频| 天天噜噜| 五月丁香婷婷综合久久| 亭亭玉月丁香| 天天操夜夜玩!| 岛国在线观看91| 狠狠五月激情婷婷直播片| 久久精品熟女亚洲AV麻豆| 免费精品66| 日本久碰| 国产成人AV在线播放| 激情久久久久久久久| www.色婷婷.com| 久久一级片| 狠狠爱五月婷婷| 一区二区成人电影| 亚洲爆乳无码精品AAA片蜜桃| 五月婷久久| 五月天婷a在线| 人人爱人人添| 日韩久久色| 99视频这里有精品| 色丁香久久久| 九九人人精品| 天天插天天插| 久久这里只有国产视频| 丝袜激情网| 丁香色五月 97干| 天天做天天爱天天日| 国产成人精品亚洲线观看| 久久激情五月网| 色婷婷色九月| 五月丁香激情综合| 久久99热在线观看| 婷婷激情小说网| 五月开心播播网| 亚洲综合激情五月| 久久99综合| 色.五月综合网| 丁香激情五月| 色五月天天| 99久久精品亚洲综合| 九九热在线观看视频| 色五月成人在线| 欧美激情中文字幕| 99ree6| 婷婷刺激综合| 只有久久精品免费| 免费婷婷| 伊人激情综合| 99热这里只有精品在线观看| 欧美成人精品老美女噜噜噜| 思思热这里只有精品视频666| 99国产在线精品视频| 亚洲丁香五月天视频| 成人va在线观看视频| 五月丁香久久激情综合| 丁香六月啪啪啪| 婷婷五月丁香六月天亚洲综合| www.99婷婷| 精品亚洲国产成AV人片传媒| 久久综合中文| 丁香五月激情啪啪| 激情婷婷人妻| 91九色在线| 亚洲日本三级片| 婷婷五月综合在线| 日日夜夜狠狠| 这里只有精品69| 他改变了拜占庭| 九九久久高清| 97碰碰叉| 色婷婷丁香女女| 天天色视频| 五月天综合在线观看视频| 五月综亚洲| 日韩成人无码人妻| 久久超级碰视频| 国产熟妇乱子伦hd| 99热免费| 五月丁香黄色视频| 夜夜躁婷婷AV| 五月丁香六月婷婷在线观看| 五月天中文字幕在线婷婷| 色碰干| 亚洲黄色操逼| 草草色情综合网| 色狠狠色| 五月天伊人网| 婷婷无码视频| 网站免费一站二站| 激情五月天婷婷丁香| 大伊久久| 丁香五月天欧美| av 一区三区四区| 欧美 日韩 成人在线| 9月色婷婷| 五月花激情网| 无码九九九九| 丁香五月婷婷欧美成人色图| 波多野结衣不卡AV| 性爱激情五月| 久久六月婷婷| 视频一区二区在线| 五月天婷婷偷拍| 国产特级毛片AAAAAAA高清| 久久婷婷五月| 色99视频| 99自拍视频在线| 综合网天天| 国产67194| 91视频一起草| 色婷丁香| 激情色色色| 99热啪啪| 国产成人网| AV九九| 免费无码毛片一区二区A片 | 五月丁香激情欧洲啪啪| 激情五月深爱婷婷| 激情五月天开心总和网| 丁香五月婷婷在线| 永久免费视频| 五月婷婷激情久久| 天天干,夜夜爽| 久草热久草在线视频| 欧美韩国日本| 97日本在线播放| WWW.五月com| 中文字幕欧美精品久久| 99人人操| 婷婷久热| 五月婷六月天| 九九热最新地址| 丁香五月天激情综合| 日亚二欧美| 8区视频在线| 狠狠综合久久| 成功精品影院| 国产毛片操B| 996re热精品视频| www色婷婷com| 色婷婷小说| wwxx日本| 久久人妻久久| 91精品婷婷国产综合久久| 六月激情综合| 五月婷婷av在线| 九九九九中文字幕| 狠狠综合网| 婷婷丁香六月影视| 99精品小视频| 九九色逼| 日韩AV在线影片| 亚洲四色五月| 色9999日韩国产| 婷婷六月网| 五月天狠狠网| 丁香五月性爱| 99啪视频在线观看| 激情色播| 精品人妻伦| 丁香婷婷深情五月亚洲| 夜夜夜夜夜操| 男人的天堂av俄罗斯热| 色五月大香蕉| 一级二级香港秋霞欧美欧美秋霞| 91色操| 99精品无码| 91丁香色五月| 亚洲人妻av| 亚洲综合狠狠艹| 久9久成人精品视频| 丁香五月天啪啪| 亚洲天堂青草| 九九这里有精品视频| 亚州色色色| 丁香五月色| 色婷丁香91| 激情五月婷婷丁香六月| 啪到高潮激情丁香五月| 亚洲综合五月| 亚洲av成人电影在线观看| 亚洲性受XXXX五月丁香| 五月天亭亭俺也| 超碰久热| 色五月超碰| 常久最新免费的色吊丝| 九九色热| 九九精品综合| 五月天另类小说| 激情五月天小说网| 亚洲无码猫咪| 五月天激情无码高清 | 六月五月丁香五月欧美| 可以免费观看的AV| 久综合九综合99| 国产精品成人在线| 思思 热 99| 中日韩美欧成人一区二区精品在线| 久久精品五月天| 精品无码99| 日本一级一级一级一级| 51XX午夜影福利| 热思思| av国产精品| 玖玖在线视频福利| 99在线视频播放| 久久玖玖99| 久久性爱网站| 人妻无码视频网| 欧美噜噜免费观看| 五月天大香蕉| 性欧美日本| 99热久| 色9999综合久久| 天天草天天爱| 99九九精品| 色噜噜综合网| 婷婷六月天激情| 31色区视频免费看| 丁香五月婷在线观看| 爱久久小说下载网| 激情五月丁香色婷婷| 性综合网| 亚洲小视频免费看| 四色五月婷婷| 亚洲无码成人网| 亚洲色热| 五月婷六月| 五月丁香激情综合啪啪| 六月婷婷综合久久| 婷婷激情在线| 丁香五月日韩| 91色综合| 他改变了拜占庭| 久久九九色| 中文字幕,综合,91| 欧美色色色色色色色色色色| 久久9精品视频| 91丨九色丨白浆| 9191avse| 九九视频在线| 99er免费在线观看| 国产午夜精品一区二区三区四区| 丁香激情六月天婷婷| 国产高清av黄色看片| 99热这里只有是亚洲国产| 婷婷丁香精品视频在线观看| 久久ab| 婷婷五月无码| 大香蕉网站,大香蕉综合| 日韩人妻在线观看| 日韩九九视频| 国精产品一区一区三区免费视频| site:901-07.com| 中文字幕丰满孑伦无码专区| 色天天综合| 伊人热婷婷| 日本三级中国三级99| 五月丁香激情啪啪| 欧美人与性动交CCOO| 日逼免费视频| 五月婷婷丁香六月| 成人网址在线观看| 色婷婷五月影视| 99热在线观看| 丁香五月播播| 婷婷色网站| 色五月综合| 无月播播激情在线观看视频| 五月天婷婷丁香花| 激情五月天影院| 狠狠搞五月天| 婷婷丁香五月天色色| 日本三久久| Av性爱网| 五月婷婷丁香大香蕉| 中文字幕在线资源| xxx日本东京热| 久久五月婷婷视频| 182TV大香蕉| 久久996re热这里只有精品无码| 亚洲精品第一国产综合亚AV| www.五月天色色.com| 九九这里有精品视频| Caoporn公开| 9久热| 亚洲欧州色情在线观看| 五月天丁香婷婷社区| 99无码视频| 激情五月综合网最新| 99热伊人| 九月婷婷激情久久| 99操视频| 91精品久久久久、久五月天| 天天操夜夜啊| 天天综合天综合久久网| www色五月| 五月丁香啪啪伦理电影| 色情五月天小说| 丁香婷婷激情四射五月| 丁香五月天堂| 五月丁香六月在线| 丁香五月婷婷少妇| 九九精品热播| 六月丁香开心婷婷欧美| www.久久久久| 4399人妻无码久久久| 五月丁香色婷| 婷婷丁五月| 色婷婷激情五月天| 色色色色丁香| 久久思思热| 五月丁香精品| 欧美xx激情视频在线观看| 99色精品视频| 99干日本| 岛国资源站| 少妇被下春药玩弄A片| 武则天精品久久| 久久开心五月天激情| 激情综合女人网五月播播| 九草性爱| 欧在线一区| 午夜天堂一区人妻| 99精在线| 啪啪综合| 日日日日日| 26uuu亚洲精品国产| 青青草日本亚洲| tingtingjiqingwuyue| 97精品在线| 精品动漫 无码av| 我淫我色婷婷五月天激情四射| 特级西西4444www无码| 色吧五月婷婷| 狠狠色噜噜狠狠狠888| 玖玖精品婷婷| 婷婷伊人五月丁香天堂网| 婷婷的五月天另类视频| 粉嫩AV久久一区二区三区| www九九| 色婷婷激情四射视频| 99re鈥哸鈥唙| 色婷婷色婷婷五月| 99热精品在线免费观看| 五月天婷婷中文字幕在线播放| 青青草深爱激情网| 九九家庭影院| 婷婷四月 成人 狠狠干| 天天情天天狠天天透| 欧美精品99| 操日视频| 射区导航| 大香蕉五月天婷婷丁香91| www.com.色色| 九九99在线视频| 停停综合色色| 九九视屏| 99久热在线精品99re6热| 99热人人操人人操| 色五月婷婷天堂| 激情色情五月天| 五月天怕怕| 五月丁香婷婷啪啪综合| 永久免费一区二区三区| 超碰人人99| 欧美色九| 日韩999| 婷婷放心五日爱| 精品无码色欲AV| 丁香五月老师| 66精品成人免费网站在线观看| 色人妻五月| 色色色免费视频| 这里只有精彩视频| 99免费视频| 久久丁香五月天| 久久婷五月婷| 五月婷婷色| 中文幕无线码中文字蜜桃| 校花娇喘呻吟校长陈若雪视频| 中字幕视频在线永久在线观看免费| 99国产在线精品视频| 久777| 精品操逼一区二区| 大香蕉免费9| 99re热在线视频| 亚洲视99| 91人妻视频| XX色综合| 99人人干| 色情终和网| 五月婷婷国产| 操人91| 人人人人人人人人人草| 欧美va欧美va差| 久热亚洲| 色五月丁香五月| 99精彩视频在线观看| 射区导航| 99'无码| 丁香五月色欲| 91九色精品女同系列| 婷婷六月色| 九九艹女| 97色婷婷| 婷婷伊人五月| 九九热最新| 激情五月色婷婷| 夜色五月天| 免费超碰在线| 99re思思| 天天狠狠六月婷丁香影院| 久九色| 九九婷婷五月天| 小色小蛇伊人婷婷色香五月| 色五月激情问网站| a久久| 丁香网站| 97亚洲婷婷| 六月伊人婷婷| 97九色视频| 乱精品一区字幕二区| 99综合入口| 九九色中文| 99视频这里有精品免费观看| 婷婷五月天色| 色情成人五月天| 色婷婷影院| 夜夜躁爽日| 人妻丰满精品一区二区A片| WWW.久久久久久久久久久久久| 这里都是精品99| www.99热视频| 亚洲V国产V欧美V久久久久久| 丁香五月777| 99re这里有精品手机在线| 99热九九热| 色综合久网| 天天插轮理| 在线色色| 综合亚洲AV| 丁香五月天激情小说| 丁香婷婷六月| 亚洲成人av在线| 久久婷婷艹| 九月婷婷综合八月丁香在线观看| www.99热精品| 超极99精品| 国产精品久久久99视频| 影音先锋天天日| 西西4r午夜剧场| 26uuu淫色| 噜噜干日本| 国产永久一黄| 99热这里只有精品手机在线观看| www色色com| 五月丁香A片| 婷婷五月天激情亚洲小说| 天天色宗合| 在线你懂的亚洲欧| 婷婷久久色| 婷婷香蕉香| 色五月激情综合| 99精品在线观看| 国产 亚洲 在线| 婷婷五月天av| 男人操女人高潮91视频| 色色无码日韩| 婷婷五月天丁香| 激情av在线| 色婷婷五月天天天天天天天天天| 91欧美| 精品99这里有| 爱射综合| 中文无码婷婷| 超碰色综合| 欧美色色干| 人妻精品一区二区三区| 久在线综合69| 精品51XX| 国产av第一专区| 蜜臀A∨在线水帘洞| 亚洲色综合| 天天插天天狠| 色综合五月| 天天射夜夜爽| 丁香六月激情综合| 成人精品一区二区三区四区五区 | 极骚大香蕉伊人| 久久人人人人妻| JAPANRCEP老熟妇乱子伦视频| 激情美女五月天| 91色久| 成人五月天色天堂| 专区无日本视频高清8| 九九色影视| 免费黄色视频网址| 婷婷六月爽| 国外亚洲成AV人片在线观看| 色五月天综合| 日本视频久久| 96五月丁香熟女| 色玖玖网| 色婷婷六月| 91丁香五月| 久久久18| 色五月丁香激情视频| 95精品区一区二| 丁香色综合| 中文字幕无码成人电影| 亚洲99在线| 丁香六月青青草| 五夜婷婷| 久er7久热| WwW色婷婷| 欧美婷婷五月丁香| 9热在线观看| 色五月av| 99热这里精| 91久久精品视频| 亚洲无线视频| 久这里只有精品99| 色吧网91| 激情五月综合亚洲另类| 婷婷精品免费久久| 伊人91| 一區四區歐美日韓| 成人 九九九九| 婷婷欧美综合| www.25五月婷婷| 综合网精品99| 色五月色图| 激情婷婷内射| 日韩av在线播放综合网| 婷婷成人五月天| 那里有AV网址| 伊人大香久久| 婷婷综合五月| 激情黄色五月天| 很很色丁香久久停停| 色香欲综合| 天天摸色吧天天摸色吧| 99热碰碰热| 成人综合网站| 五月丁香六月婷婷国产视频| www.精品99| 9热在线| 婷婷丁香花五月天| 天天综合天天玩夜夜玩天天玩夜夜玩 | 人与禽A片啪啪| 中文资源在线a| 影音先锋激情网| 五月综合丁| 97人人操人人干| 影音先锋777xfplay色资源网站| 丁香五月精品视频| 就爱日五月天| 99热这里只有精品66| 99久久九九| 亚洲99在线| 久久婷婷五月天丁香| 女同激情久久av久久| yazhouzonghesese| 91要啪| 六月丁丁香| 婷婷中文字幕网| 人人添人人| 丁香 久久| 婷婷五月天VI| 日日夜夜天天| 人人摸人人澡人人| 激情五月婷婷综合网| 天天色丁香| 五月天婷婷丁香成人网| 亚洲色99| 丁香婷婷社区| 韩国婷婷丁香五月| 久久丁香五月婷婷| 97婷婷狠狠久久综合9色| 欧美内射AAAAAAXXXXX| 久久婷婷五月丁香网| 夜夜撸日日骑| 丁香五月婷婷久久久| 丁香五月网| 国产精品色色| 婷婷五月天久久| av操一操| 丁香5月啪啪| 看婷婷五月天网| 国产真实乱对白精彩| 99在线小视频| 99热1| 天天噜噜| 伍月婷丁香花全集| 狠狠色无码| 久久色在线视频| 久久性刺激| 玖玖玖婷婷婷| 丰满老熟妇BBBBB搡BBB| 99在线精品观看99| 五月婷婷色| 激情深爱五月| 丁香六月啪啪| 狠狠综合网| 一区二区免费看| 久久婷婷东京热大香樵| 久久久aaa| 九九成人电影婷婷| 少妇2做爰HD韩国电影| 九九99久久| 另类激情综合| 色婷久久| 操操国产| 大香蕉久热| 五月婷婷在线观看黄| 99精品视频在线观看| 综合五月婷婷| 人人噜天天上| 婷婷五月天男人影院色色网| 五月天婷婷五月| 99这里只有精品在线观看| 五月激情视频网| 久草久青福利| 日本熟妇人妻在线| 伊人天天色| 丁香五月综合图片在线观看| 丁香月五月天婷婷久久| 狠狠干在线视频| 精品国产va久久久久久久| 成人va在线观看视频| 婷婷丁香五月av| www.精品99| 99久99热| 99热这是里只有精品| 丁香五月成人论坛| 啪啪激情网站| 性生活久久朋友人妻| 亚洲色 视频| av中文网站| 香蕉人在线香蕉人在线 | 久久人妻视频| 丁香婷婷色色| 99re免费精品视频| 天天狠狠插| 色欲五月天| 婷婷基地五月色| 五月天俺去也| 久久五月天网| 碰碰女| 丁香五月成人社区| 99婷婷| 超碰只有精品在线| 9色操| 操逼电影免费看| 在线亚洲综合网| 五月停停色| 超碰精品在线| 天天日狠狠| 激情五月天色婷婷综合| 激情五月综合免费| 欧美日韩AAAA| 色七七九九| 国产成人亚洲综合A∨婷婷| 国产无套精品一区二区| 激情婷婷五月在线合集| enecarbon-materials.com污K127封锁请涟系@wip1688 | 天天日,夜夜爽| 激情五月,婷婷五月,丁香五月| 人妻久久久| 综合色99| 五月天激情小说网| 香蕉视频性爱BB做爱| 五月婷婷六月丁香玖玖玫瑰91| 深爱五月月天| 深爱五月天天| 中文久久婷婷| 亚洲成人AV在线播放| 日本少妇裸体做爰高潮片 | 99色综合久久| 久久9热| 《战争与艾拉》完整版| 美女丁香五婷婷| 激情小说五月天| 亚洲色图欧美色图日本视频| 99手机在线精品视频| 99久久久国产大片| 久久九九在线视频| 日韩AV片| 97碰碰叉| 超碰免费成人| 丁香五月人妻熟女| 亚洲成人网在线观看| 中文字幕日本最新乱码视频| 热九九九九| 亚洲日本激情| 五月婷婷日| 最近免费中文字幕大全高清大全1| 亚洲欧美日韩另类| 久久亚洲婷婷综合色五月| 综合久久六月| 色五月播五月| 婷婷酒色网| 五月婷丁香| 五月天婷婷无码视频| 丁香五月电影| 大香婷婷| 色婷婷五月基地在线| 可以免费观看的av| 亚洲成人无码专区| 五月天开心色情网| 丁香五月激情视频在线| 色欲久久久久久综合网综合网| 五月激情影院| 91青娱乐青青草| 熟女五月天久久综合| 久久久久亚洲AV成人无码电影| 久久人妻超碰一区| 99综合在线| 天天日夜夜爽| 五月丁香婷婷成人网| 九月婷婷久久久| 99热这里只| 久久人妻熟女一区二区| 色九月婷婷综合| 丁香桃色网| 97干干干丁香| 五月婷婷在线丁香| 99视频九九热| 婷婷成人av| 色宗合,宗合网| 9l视频自拍九色9l视频自拍九色9l社区 | 4438亚洲欧美| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 亚洲无AV在线中文字幕| 99网址在线看| 99亚州综合精品成人网| 日韩av手机在线观看| 成人五月天在线观看| 中文在线成人| 热久久这里只有三级视频| 婷婷五月天日日日干干干| 五月丁香天堂网| 日韩视频女神99| 九九热短视频在线观看| 亚洲精品va| 日日噜噜夜夜狠狠久久丁香六月| 色婷五月天| 97资源碰碰在线| 国产玖玖资源| 色播五月丁香| 激情爱爱网站超大免费| 五月天婷婷在线AN| 丁香婷婷老熟女综合网| 亚州激情在线视频| 六月丁香综合| 玖玖精品婷婷| 婷婷色正月| 超碰无码老师| 欧美激情Va| 综合激情婷婷| 狠狠色丁香久久久婷| 99久久综合| 丁香大香蕉| 狠狠色大香蕉| 超碰在线免费9| 五月综合色| 婷婷五月中文字幕| 综合一区二区三区| 一起草av在线观看| 色无码| 五月丁香花视频| 操操自拍| 青青色com久久| 激情五月婷| 九九热婷婷| 婷婷丁香五月婷婷| 九色在线观看91av| 91久久五月天| 婷婷伊人中文字幕| 久久女婷| 五月丁香六月综合情在线观看| 丝袜大香蕉| 婷婷亚洲五月丁香综合在线| 国产乱人偷精品人妻A片| 欧美噜一噜| 五月婷婷丁香日韩在线| 五月天婷婷深深爱| 色五月激情综合网站| 久久这里有精品视频| 丁香五夜激情四射夜夜夜| 91视频综合网| 久婷婷婷| 婷婷五月六月丁香| 激情婷婷五月黑人| 丁香六月婷婷色XXXX| 国产婷婷五月中文字幕高清| 97色射| 五月天啪啪啪| 免费黄色视频网址| 亚洲免费看片| 五月丁香网中文字幕| 嘿嘿视频免费看9| 亚洲热热视频| 五月丁香亭亭操逼| 国产精产国品一二三在观看| 亚洲国产精品成人va在线观看| 狠狠色综合网| 亚洲色婷婷视频| 丁香婷婷超碰| 美日韩成人| 狠色狠色综合久久| 99色日本| 婷婷成人五月天| 婷婷五月丁综合| 五月丁香激情综合久久| 婷婷五月天最新综合你懂的| 天天操夜夜操| 欧洲综合视频在线观看。欧洲,亚洲综合食品在线观看。 | 五月婷视频| 色性综合| 欧美一级a | 天天色综合图片| 色婷久| 六月婷婷av| 国产一区男女| 久久新地此| 久草热8精品视频在线观看 | 婷婷丁香九月| 色香欲综合| 久久婷婷六月综合综合色|