免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

塔式、機(jī)架式、刀片服務(wù)器怎么選?運(yùn)維老手講透機(jī)房選型核心邏輯

塔式、機(jī)架式、刀片服務(wù)器怎么選?運(yùn)維老手講透機(jī)房選型核心邏輯 機(jī)房選型這件事表面上是采購(gòu)和技術(shù)方案的問(wèn)題但真正上手之后你會(huì)發(fā)現(xiàn)最后都會(huì)被三個(gè)名詞卡住機(jī)架式服務(wù)器、塔式服務(wù)器、刀片服務(wù)器。尤其是第一次給公司配服務(wù)器、或者剛接手運(yùn)維的兄弟看到這三個(gè)詞很容易懵——明明都叫服務(wù)器憑什么長(zhǎng)得完全不一樣價(jià)格差出好幾倍適用的場(chǎng)景也完全不同。這篇東西我不聊廠商PPT里的漂亮話只從一個(gè)裝過(guò)機(jī)器、扛過(guò)機(jī)柜、踩過(guò)不少坑的運(yùn)維老油條的角度把三類服務(wù)器的區(qū)別、適用場(chǎng)景、選型邏輯和實(shí)際操作中的避坑點(diǎn)一次講透。這篇內(nèi)容適合誰(shuí)看剛?cè)胄械倪\(yùn)維、小公司的兼職網(wǎng)管、準(zhǔn)備給實(shí)驗(yàn)室或辦公室搭服務(wù)器的技術(shù)負(fù)責(zé)人以及所有在機(jī)架、塔式、刀片之間猶豫不決的人??赐曛竽阒辽倌茉诓少?gòu)單上做出一個(gè)不后悔的選擇并且知道機(jī)器到貨之后該怎么規(guī)劃、怎么安裝、怎么避免那些看著小但能折騰死人的坑。1. 先說(shuō)清楚三類服務(wù)器的本質(zhì)區(qū)別在哪里很多人以為這三類服務(wù)器只是“長(zhǎng)相不同”其實(shí)它們的差異本質(zhì)上是設(shè)計(jì)目標(biāo)不同。換句話說(shuō)廠商在設(shè)計(jì)之初就沒想把它們用在同一個(gè)地方。搞清楚這一點(diǎn)后面的選型就順理成章了。1.1 塔式服務(wù)器最早也最親民的形態(tài)塔式服務(wù)器Tower Server長(zhǎng)得跟一個(gè)豎立的臺(tái)式機(jī)主機(jī)箱差不多只是更大、更重、內(nèi)部空間更充裕。這是服務(wù)器最早期的形態(tài)也是很多小公司接觸到的第一臺(tái)“真服務(wù)器”。你可以把它理解成一個(gè)加強(qiáng)版臺(tái)式機(jī)——CPU更多、內(nèi)存插槽更多、硬盤位更多、支持ECC內(nèi)存和RAID陣列卡但整體邏輯還是“一臺(tái)獨(dú)立計(jì)算機(jī)”。它的核心優(yōu)勢(shì)就是簡(jiǎn)單。買回來(lái)拆箱接上電源和網(wǎng)線開機(jī)裝系統(tǒng)完事。不需要機(jī)柜不需要理線甚至連機(jī)房都不用專門準(zhǔn)備放辦公區(qū)角落里就能跑。早期很多公司的ERP系統(tǒng)、進(jìn)銷存、財(cái)務(wù)軟件就是靠一臺(tái)塔式服務(wù)器撐了好幾年。塔式的短板也恰好在“簡(jiǎn)單”的對(duì)立面——空間利用率太低。一臺(tái)塔式服務(wù)器占地面積大概相當(dāng)于一個(gè)落地音響但只提供一顆或兩顆CPU的計(jì)算能力。如果業(yè)務(wù)規(guī)模上來(lái)需要加第二臺(tái)、第三臺(tái)辦公區(qū)很快就會(huì)被這些鐵疙瘩占滿供電和散熱也會(huì)成問(wèn)題。所以塔式更準(zhǔn)確的定位是單機(jī)應(yīng)用場(chǎng)景的入門選擇而不是數(shù)據(jù)中心里的大規(guī)模部署方案。1.2 機(jī)架式服務(wù)器數(shù)據(jù)中心的絕對(duì)主力機(jī)架式服務(wù)器Rack Server是現(xiàn)在數(shù)據(jù)中心里最主流的形態(tài)。它被設(shè)計(jì)成扁平的矩形盒子寬度統(tǒng)一為19英寸——這是國(guó)際標(biāo)準(zhǔn)的機(jī)柜寬度——高度按“U”來(lái)計(jì)算1U約等于44.45毫米。常見的有1U、2U、4U對(duì)應(yīng)的高度分別是約4.45厘米、8.9厘米和17.8厘米。機(jī)架式的設(shè)計(jì)邏輯非常明確在單位空間內(nèi)塞下盡量多的計(jì)算資源并且把所有設(shè)備統(tǒng)一安裝到標(biāo)準(zhǔn)機(jī)柜里集中管理。一臺(tái)標(biāo)準(zhǔn)42U的機(jī)柜理論上可以裝進(jìn)42臺(tái)1U服務(wù)器或者21臺(tái)2U服務(wù)器。這種密度是塔式完全做不到的。正因?yàn)榻y(tǒng)一了尺寸標(biāo)準(zhǔn)機(jī)架式服務(wù)器在機(jī)房里的部署就變得非常有條理機(jī)柜里一層一層碼好電源線從后邊接上PDU電源分配單元網(wǎng)線走理線架前面板留出指示燈和運(yùn)維接口。加上導(dǎo)軌抽拉設(shè)計(jì)運(yùn)維人員不用把整臺(tái)機(jī)器抱出來(lái)拉出導(dǎo)軌就能換內(nèi)存、插硬盤。不過(guò)機(jī)架式也有它的脾氣。首先是厚度限制帶來(lái)擴(kuò)展性妥協(xié)——1U的機(jī)器內(nèi)部空間非常緊湊PCIe擴(kuò)展槽位少、散熱空間小、風(fēng)扇轉(zhuǎn)速高導(dǎo)致噪音大。其次是必須依賴標(biāo)準(zhǔn)機(jī)柜沒有機(jī)柜的話單獨(dú)一臺(tái)機(jī)架式服務(wù)器放在桌面上又扁又長(zhǎng)接線還不方便基本屬于自找麻煩。1.3 刀片式服務(wù)器密度至上的“集成方案”刀片式服務(wù)器Blade Server是三類里最特殊、也最容易被人誤會(huì)的形態(tài)。它不是一個(gè)獨(dú)立的鐵盒子而是一個(gè)系統(tǒng)一個(gè)大型的刀片機(jī)箱也叫底盤/Chassis再加上若干片插在機(jī)箱里的“刀片”計(jì)算模塊。每片刀片就是一臺(tái)完整的服務(wù)器但它不帶電源、不帶散熱風(fēng)扇、不帶網(wǎng)絡(luò)接口這些全部由機(jī)箱統(tǒng)一提供。用過(guò)機(jī)架式的朋友可以把刀片理解成這樣的關(guān)系機(jī)架式是把整臺(tái)服務(wù)器做成一個(gè)“完整的盒子”放進(jìn)機(jī)柜刀片式則相當(dāng)于把服務(wù)器的電源、散熱、網(wǎng)絡(luò)、管理這些公共部分抽出來(lái)集中做成一個(gè)機(jī)箱計(jì)算單元?jiǎng)t瘦身成一片片模塊插上去就能用。刀片的核心優(yōu)勢(shì)就是密度極高、管理極統(tǒng)一。一個(gè)4U或6U的刀片機(jī)箱往往能插入8到16片刀片意味著一個(gè)機(jī)柜就能塞進(jìn)上百個(gè)計(jì)算節(jié)點(diǎn)。配合機(jī)箱自帶的管理模塊所有刀片的開關(guān)機(jī)、固件升級(jí)、狀態(tài)監(jiān)控都能在一個(gè)管理界面里完成。這種特性讓它成為大規(guī)模虛擬化、云計(jì)算集群的理想選擇。刀片的代價(jià)也很直接前期投入大、綁定性強(qiáng)。刀片機(jī)箱本身單價(jià)不低而且必須配上相應(yīng)數(shù)量的刀片模塊才能攤薄成本用得少反而比機(jī)架式更虧。操作系統(tǒng)的驅(qū)動(dòng)兼容性、固件升級(jí)流程也必須跟著廠商的生態(tài)走比機(jī)架式更封閉。更要命的是機(jī)箱是整個(gè)系統(tǒng)的單點(diǎn)——電源模塊、散熱模塊一旦出問(wèn)題整個(gè)機(jī)箱里的所有刀片都會(huì)受影響所以機(jī)房規(guī)范和備件策略都得更嚴(yán)格。2. 三類服務(wù)器逐項(xiàng)硬核對(duì)比不只看外觀要看實(shí)際賬前面說(shuō)的都是形態(tài)和設(shè)計(jì)邏輯但真正決定選型的是這些差異落到空間、功耗、維護(hù)、成本等維度的具體影響。我按實(shí)際運(yùn)維中比較關(guān)心的幾個(gè)維度逐一拉出來(lái)對(duì)比數(shù)字和單位都按真實(shí)機(jī)房里的情況來(lái)說(shuō)。2.1 空間占用與密度對(duì)比算算機(jī)柜里到底能塞多少算力空間這件事放在小公司可能覺得無(wú)所謂放到機(jī)房就是真金白銀。按常見的42U標(biāo)準(zhǔn)機(jī)柜來(lái)計(jì)算塔式服務(wù)器因?yàn)楦叨炔唤y(tǒng)一通常沒法在機(jī)柜里整齊疊放多數(shù)情況是放在機(jī)柜旁邊的地面上一臺(tái)塔式大約占0.5平方米的地板面積機(jī)架式1U服務(wù)器一臺(tái)占1U高度42U機(jī)柜理論上可以放42臺(tái)刀片式取常見配置——比如一臺(tái)10U的刀片箱放進(jìn)16片刀片——那么一個(gè)42U機(jī)柜可以放4個(gè)刀片箱提供64個(gè)計(jì)算節(jié)點(diǎn)。光看數(shù)字還不夠得看這些計(jì)算節(jié)點(diǎn)的密度差距。同樣是10U的空間機(jī)架式大約能放9臺(tái)1U機(jī)器但刀片箱能插進(jìn)16片刀片相當(dāng)于同等機(jī)柜空間里多出了近80%的計(jì)算節(jié)點(diǎn)。這還是按1U來(lái)算如果機(jī)架式用2U機(jī)器差距會(huì)更懸殊。不過(guò)密度高不是白來(lái)的。刀片箱對(duì)供電和散熱的要求要比普通機(jī)架式高好幾個(gè)等級(jí)所以“塞得進(jìn)”和“跑得穩(wěn)”是兩碼事。機(jī)柜的電力容量、空調(diào)的制冷能力跟不上密度再高的刀片也只能降頻運(yùn)行這一塊后面會(huì)專門說(shuō)。2.2 功耗、散熱與供電差異機(jī)房里的“氣”和“電”都得管服務(wù)器是吃電大戶也是產(chǎn)熱大戶。三類機(jī)器在這方面的表現(xiàn)差異非常明顯。塔式服務(wù)器體積大內(nèi)部空間寬敞散熱通??壳爸眠M(jìn)風(fēng)、后置出風(fēng)的大尺寸低轉(zhuǎn)速風(fēng)扇噪音相對(duì)低散熱余量也足。功耗上塔式的范圍很寬從低配單路到高配雙路都有但通常跑不滿很高的功率密度一臺(tái)滿載大概在300W到800W之間。因?yàn)樗揭话悛?dú)立供電電源線直接插墻插或普通PDU就行。機(jī)架式受限于厚度1U的機(jī)器風(fēng)向幾乎是“直線貫穿”前面板進(jìn)風(fēng)后面板出風(fēng)中間經(jīng)過(guò)CPU散熱器和內(nèi)存條。為了讓有限空間里的熱量快速排出機(jī)架式風(fēng)扇通常轉(zhuǎn)速高、噪音大滿載時(shí)的呼呼聲在機(jī)房里非常明顯。功率部分1U雙路服務(wù)器滿載一般在500W到1000W2U機(jī)型可以到1000W以上。注意機(jī)架式因?yàn)槎嗯_(tái)同時(shí)裝在一個(gè)機(jī)柜里機(jī)柜散熱通道是前后貫通的機(jī)柜前后門都要保證通風(fēng)面積空調(diào)送風(fēng)方向也要安排好。刀片式是最極端的。一個(gè)滿配刀片箱的功耗可以輕松超過(guò)3000W甚至5000W相當(dāng)于好幾個(gè)電熱水器同時(shí)在工作。機(jī)箱內(nèi)部風(fēng)扇組幾乎是一開機(jī)就在高轉(zhuǎn)配上空調(diào)的強(qiáng)制冷才能壓住刀片堆積的熱量。刀片機(jī)箱的電源模塊通常是冗余并行供電——比如六個(gè)2600W模塊——需要多路PDU接入對(duì)機(jī)柜供電容量有硬性要求。供電給不到位刀片會(huì)直接拒載。這三類機(jī)器放在一起散熱和供電的投入是逐級(jí)遞增的。塔式是“插上就能用”機(jī)架式是“機(jī)柜和管理要配套”刀片式則是“機(jī)房條件必須達(dá)標(biāo)”。選刀片卻配了一個(gè)普通辦公環(huán)境開機(jī)五分鐘就過(guò)熱報(bào)警這是新手最容易犯的錯(cuò)誤。2.3 擴(kuò)展性與可維護(hù)性加硬件、修故障的時(shí)候差距就出來(lái)了服務(wù)器用兩三年之后基本都會(huì)面臨加內(nèi)存、加硬盤、換網(wǎng)卡之類的需求。這時(shí)候三類機(jī)器的擴(kuò)展性差異就很現(xiàn)實(shí)。塔式服務(wù)器擴(kuò)展性最強(qiáng)。它的機(jī)箱空間充裕PCIe插槽數(shù)量多——中塔機(jī)型通常有6到8個(gè)擴(kuò)展槽位硬盤位也從4盤位到12盤位不等甚至可以再掛陣列柜。加卡、加盤都不需要太多技巧打開側(cè)板就是干。維護(hù)性的優(yōu)勢(shì)也很直接機(jī)器就在你旁邊斷電開箱哪兒壞了換哪兒新手也能操作。機(jī)架式服務(wù)器的擴(kuò)展性就看U高。1U機(jī)型通常只有一到兩個(gè)PCIe擴(kuò)展槽2U機(jī)型有3到5個(gè)和塔式比少了不少但勝在形態(tài)標(biāo)準(zhǔn)和統(tǒng)一。維護(hù)方面機(jī)架式配好導(dǎo)軌之后拉出來(lái)就能打開上蓋操作不用把整臺(tái)機(jī)器從機(jī)柜里抬出來(lái)。要注意的是1U機(jī)器內(nèi)部接線空間非常小插內(nèi)存條、換CPU散熱器時(shí)手大的兄弟會(huì)有點(diǎn)受罪。刀片服務(wù)器的擴(kuò)展邏輯和前面兩類完全不一樣。單片刀片內(nèi)部的PCIe擴(kuò)展基本不用指望——那點(diǎn)空間連半高卡都插不了幾塊刀片通常只留數(shù)量有限的板載網(wǎng)口和磁盤位。擴(kuò)展是整箱級(jí)的性能不夠就再插一片刀片進(jìn)去網(wǎng)絡(luò)不夠就加機(jī)箱里的交換模塊。這種擴(kuò)展方式的優(yōu)勢(shì)是彈性好、管理統(tǒng)一但代價(jià)是單節(jié)點(diǎn)內(nèi)部幾乎沒有折騰空間想在某一片刀片上插一塊專用GPU加速卡很多時(shí)候根本插不上。2.4 成本結(jié)構(gòu)對(duì)比別只看采購(gòu)價(jià)電費(fèi)才是隱藏的大頭采購(gòu)時(shí)的標(biāo)價(jià)最容易迷惑人。我見過(guò)不少公司一看塔式服務(wù)器便宜立馬下單結(jié)果業(yè)務(wù)上量之后發(fā)現(xiàn)性能和擴(kuò)展跟不上又得再來(lái)一輪機(jī)架式采購(gòu)也見過(guò)團(tuán)隊(duì)被刀片的高密度吸引很快上了刀片箱結(jié)果后續(xù)電費(fèi)和維護(hù)成本高得讓財(cái)務(wù)眉頭直皺。實(shí)際上成本要分成四塊看采購(gòu)成本、運(yùn)行成本電費(fèi)制冷、維護(hù)成本、空間成本。塔式服務(wù)器的采購(gòu)單價(jià)在三類里通常最低低配單路機(jī)型幾千元就能拿下。但它占用空間大、單臺(tái)計(jì)算密度低所以空間成本是最高的。你可以算一筆賬數(shù)據(jù)中心機(jī)柜的租用費(fèi)是按U甚至按面積算的一臺(tái)塔式占用的地面面積如果換算成機(jī)架位隱形開銷并不低。維護(hù)成本方面塔式相對(duì)最簡(jiǎn)單硬件故障直接開箱換件就行。機(jī)架式是性價(jià)比最均衡的。1U和2U的采購(gòu)價(jià)格從幾千到幾萬(wàn)跨度很大但整個(gè)生態(tài)非常成熟二手市場(chǎng)活躍、備件好找、兼容方案多??臻g利用率比塔式高出幾個(gè)量級(jí)單機(jī)功耗可預(yù)測(cè)性強(qiáng)電力規(guī)劃和成本測(cè)算很容易做。維護(hù)成本要看環(huán)境——機(jī)柜布局合理的機(jī)房換一臺(tái)機(jī)器基本是拉出、換件、推回、上電十幾分鐘搞定機(jī)柜理線一團(tuán)糟的機(jī)房光是抽出服務(wù)器就要先拆一堆網(wǎng)線時(shí)間成本全耗在這上面。刀片式的采購(gòu)成本在三類里最容易讓人打退堂鼓一個(gè)刀片箱加十幾片刀片報(bào)價(jià)幾十萬(wàn)甚至上百萬(wàn)很正常。但它有一筆隱蔽的“省”管理成本低。不用一臺(tái)臺(tái)單獨(dú)接管理口和電源線所有刀片共用一套管理模塊批量部署、云化調(diào)度都更順手。運(yùn)行成本上刀片雖然總功耗高但分?jǐn)偟絾蔚镀笠驗(yàn)殡娫崔D(zhuǎn)換效率集中化、制冷通道集中化單位負(fù)載的電費(fèi)往往低于一堆散裝機(jī)架式。真正要警惕的是機(jī)箱本身的空載功耗——哪怕只插了2片刀片機(jī)箱的電源、風(fēng)扇、管理模塊全都在轉(zhuǎn)這部分電費(fèi)即使不用也跑不掉。3. 怎么選一套能直接上手的選型思路說(shuō)了這么多對(duì)比落到實(shí)際問(wèn)題就是一句話我到底該買哪一類我給一個(gè)相對(duì)實(shí)用的決策思路不需要你成為硬件專家只要順著四個(gè)問(wèn)題往下走基本就能圈定方向。3.1 先看業(yè)務(wù)規(guī)模和形態(tài)這是第一步也是決定性的一步。如果你只有一套業(yè)務(wù)系統(tǒng)要跑用戶量不大比如一家?guī)资说墓九芤惶譋RP或者一個(gè)門店跑收銀進(jìn)銷存沒有專職運(yùn)維——選塔式。一臺(tái)中高配塔式服務(wù)器足夠撐住這類負(fù)載三到五年。機(jī)房環(huán)境也不用刻意準(zhǔn)備防塵、通風(fēng)、斷電保護(hù)做到位就夠。如果你有多個(gè)業(yè)務(wù)系統(tǒng)、多個(gè)應(yīng)用要跑或者已經(jīng)在規(guī)劃做虛擬化比如用VMware、Proxmox VE、Hyper-V之類把多套系統(tǒng)整合到幾臺(tái)物理機(jī)上——選機(jī)架式。兩臺(tái)2U雙路機(jī)架式服務(wù)器做成虛擬化集群性能和穩(wěn)定性都對(duì)得起價(jià)格。如果你要做大規(guī)模的云計(jì)算平臺(tái)、大數(shù)據(jù)集群或者你已經(jīng)明確知道未來(lái)一年內(nèi)計(jì)算節(jié)點(diǎn)會(huì)超過(guò)幾十臺(tái)并且有一個(gè)像樣的機(jī)房來(lái)支撐——刀片式才是劃算的。低于這個(gè)體量刀片的優(yōu)勢(shì)發(fā)揮不出來(lái)反而背上機(jī)箱空載成本和綁定成本不值得。3.2 再看機(jī)房物理?xiàng)l件電源、空調(diào)、機(jī)柜尺寸業(yè)務(wù)想用刀片但你得先問(wèn)問(wèn)機(jī)房答不答應(yīng)。這里給一張自查表采購(gòu)之前照著核一遍電力容量機(jī)房總供電多少安機(jī)柜分配多少千瓦刀片箱動(dòng)輒3000W以上一個(gè)普通辦公室的16A插座根本帶不動(dòng)。機(jī)架式也要算好一個(gè)42U機(jī)柜塞滿1U雙路設(shè)備總功率可能突破15kW普通機(jī)房設(shè)計(jì)容量未必夠。制冷能力空調(diào)制冷量夠不夠機(jī)房有沒有下送上回或上送下回的規(guī)范氣流組織如果只是開放式辦公區(qū)建議直接放棄刀片。機(jī)柜深度標(biāo)準(zhǔn)機(jī)架式服務(wù)器深度一般600毫米到900毫米刀片機(jī)箱深度更大。買機(jī)柜之前先量機(jī)柜內(nèi)部實(shí)際可用深度尤其是靠墻角、被管道擋住的機(jī)柜很容易出現(xiàn)深度不夠關(guān)不上門的情況。機(jī)房高度和承重這聽起來(lái)夸張但裝滿設(shè)備的機(jī)柜重達(dá)幾百公斤很正常老舊樓板的承重能力要提前確認(rèn)。3.3 算一筆總成本賬TCO采購(gòu)價(jià)只是起步我建議把五年的總持有成本拉出來(lái)比一比。簡(jiǎn)化算法是五年總成本 采購(gòu)價(jià) 五年耗電費(fèi) 五年維護(hù)備件費(fèi) 空間占用費(fèi)。舉個(gè)例子一個(gè)小機(jī)房要部署16個(gè)計(jì)算節(jié)點(diǎn)。方案A16臺(tái)1U機(jī)架式方案B1個(gè)10U刀片箱加16片刀片。假設(shè)單臺(tái)1U機(jī)架式采購(gòu)1.5萬(wàn)元16臺(tái)就是24萬(wàn)刀片箱加16刀片可能報(bào)價(jià)30萬(wàn)到35萬(wàn)。第一眼刀片貴不少但看后邊機(jī)架式16臺(tái)要占用32U到40U空間需要額外的網(wǎng)絡(luò)交換設(shè)備和線纜管理電費(fèi)按每臺(tái)500W跑五年16臺(tái)五年電費(fèi)將近35萬(wàn)元刀片箱整箱功耗算4000W五年電費(fèi)約17萬(wàn)元。再加上空間成本機(jī)架式在機(jī)房里的租金分?jǐn)傔h(yuǎn)高于一個(gè)10U刀片箱。五年算下來(lái)反而是刀片更省。但注意這個(gè)結(jié)論有一個(gè)前提你的負(fù)載真有那么大。如果只需要4個(gè)節(jié)點(diǎn)塔式或機(jī)架式明顯更靈活。刀片的省省在規(guī)模效應(yīng)規(guī)模沒起來(lái)就談不上省。3.4 部署形態(tài)與運(yùn)維習(xí)慣也要考慮最后一條是很多技術(shù)選型容易忽略的你的運(yùn)維團(tuán)隊(duì)習(xí)慣怎么維護(hù)設(shè)備。如果你就一個(gè)人兼著管網(wǎng)絡(luò)、管桌面、管服務(wù)器那你最需要的是“少操心”的設(shè)備。塔式最省心機(jī)架式也可以只要管理口配置好遠(yuǎn)程管理能力足夠。刀片式雖然管理界面統(tǒng)一但機(jī)箱、刀片、交換模塊、固件升級(jí)這些概念學(xué)習(xí)曲線比機(jī)架式陡不少一個(gè)人如果沒接觸過(guò)前期會(huì)很吃力。如果你背后有完整的運(yùn)維團(tuán)隊(duì)甚至有專門的機(jī)房管理規(guī)范那刀片的集中管理優(yōu)勢(shì)就會(huì)被放大幾十臺(tái)刀片固件批量升級(jí)、狀態(tài)批量巡檢、故障節(jié)點(diǎn)快速隔離一套操作比一臺(tái)臺(tái)單獨(dú)SSH進(jìn)服務(wù)器高效得多。這種效率差是刀片最值錢的地方。4. 實(shí)戰(zhàn)中的典型問(wèn)題與避坑經(jīng)驗(yàn)這些坑我是真踩過(guò)型號(hào)和參數(shù)看再多都不如實(shí)際部署中踩出來(lái)的教訓(xùn)來(lái)得深刻。我把這些年積累的幾個(gè)典型問(wèn)題按場(chǎng)景整理出來(lái)每條都是真金白銀換的經(jīng)驗(yàn)。4.1 塔式服務(wù)器放辦公區(qū)的噪聲與散熱陷阱塔式服務(wù)器比臺(tái)式機(jī)安靜但那是相對(duì)機(jī)架式來(lái)說(shuō)的。滿負(fù)載跑起來(lái)塔式的高轉(zhuǎn)速風(fēng)扇依然有明顯噪聲放在開放式辦公區(qū)員工肯定有意見。我見過(guò)一個(gè)公司把塔式服務(wù)器直接塞在工位旁邊的矮柜里夏天CPU溫度一路飆到90多度頻繁降頻業(yè)務(wù)卡成幻燈片。正確的做法是給塔式服務(wù)器預(yù)留獨(dú)立空間至少要保證前后通風(fēng)順暢不要貼墻、不要塞進(jìn)密閉柜子。有條件的話給它單獨(dú)拉一路防雷電源插座避免和空調(diào)、微波爐共用線路。如果辦公室本身就沒有機(jī)房條件那別硬上高配塔式選低功耗的低配機(jī)型會(huì)穩(wěn)妥很多。4.2 機(jī)架式服務(wù)器的“深度陷阱”和理線問(wèn)題機(jī)架式服務(wù)器的寬度是統(tǒng)一標(biāo)準(zhǔn)但深度差異很大。有些低端1U機(jī)深度只有500多毫米有些高性能4U機(jī)深度超過(guò)900毫米。買機(jī)器前不量機(jī)柜實(shí)際深度到貨才發(fā)現(xiàn)推進(jìn)去頂?shù)胶竺婢€槽柜門都關(guān)不上這種事每天都在發(fā)生。理線是另一個(gè)新手重災(zāi)區(qū)。服務(wù)器裝上去電源線、網(wǎng)線、光纖、管理線一通亂接后門鼓成一團(tuán)之后任何一臺(tái)機(jī)器要維護(hù)都得先拆半天線。我的建議是機(jī)柜里必須配理線架網(wǎng)線用成品跳線而不是自己壓線光纖走專用光纖槽。線纜標(biāo)簽從第一天就必須做每根線兩端貼上標(biāo)簽寫明對(duì)端設(shè)備不然后面排查故障的時(shí)候表情只能是崩潰。4.3 管理口配置帶外管理是救命稻草不管選機(jī)架式還是刀片式必須把帶外管理口BMC/IPMI/iDRAC/iLO配置好。這是服務(wù)器上的一個(gè)獨(dú)立管理網(wǎng)口不占業(yè)務(wù)網(wǎng)卡即使系統(tǒng)死機(jī)、網(wǎng)絡(luò)中斷運(yùn)維也能通過(guò)它遠(yuǎn)程查看硬件狀態(tài)、開關(guān)機(jī)、看控制臺(tái)。實(shí)際使用場(chǎng)景很殘酷業(yè)務(wù)凌晨三點(diǎn)掛掉機(jī)房又遠(yuǎn)你沒法立刻趕過(guò)去。這時(shí)候如果帶外管理口配好了你能直接遠(yuǎn)程重啟、看POST界面、甚至掛載ISO重裝系統(tǒng)幾十秒就能定位問(wèn)題。如果沒配好這一晚就別想睡了。新到貨的服務(wù)器第一件事就是進(jìn)管理口設(shè)置界面配好IP、賬號(hào)、密碼測(cè)試遠(yuǎn)程訪問(wèn)正常再上架。這個(gè)動(dòng)作花不了十分鐘但后面能救命無(wú)數(shù)次。4.4 刀片式的單點(diǎn)依賴與固件綁定刀片式最風(fēng)光的時(shí)候是虛擬化大規(guī)模部署但它的風(fēng)險(xiǎn)也在集成度上。一個(gè)刀片箱里的電源模塊、散熱模塊、管理模塊都是共享的任何一環(huán)故障影響面都是整個(gè)機(jī)箱而不是某一片刀片。所以選刀片之前就要把備件策略想清楚冗余模塊當(dāng)然是標(biāo)配但備件庫(kù)里是不是隨時(shí)有替換件廠商的維保響應(yīng)時(shí)效是多少這些要提前談好。固件綁定問(wèn)題更麻煩。刀片箱的固件升級(jí)、交換模塊的配置、刀片之間的兼容矩陣都比機(jī)架式復(fù)雜。我見過(guò)一臺(tái)刀片箱因?yàn)楣碳炝税姹竟芾砟K直接失聯(lián)最后只能走廠商遠(yuǎn)程介入才恢復(fù)。所以刀片環(huán)境的幾條鐵律要記牢禁止在業(yè)務(wù)高峰期升級(jí)固件升級(jí)前必須完整備份配置升級(jí)時(shí)必須按照廠商的兼容矩陣逐級(jí)升不允許跳版本。4.5 “看似劃算”的二手刀片陷阱拆機(jī)市場(chǎng)里刀片機(jī)箱和刀片模塊的二手價(jià)格非常誘人很多人以為淘一套回家能撿大便宜。實(shí)際觀察下來(lái)二手刀片是三類服務(wù)器里最容易踩坑的。因?yàn)榈镀瑱C(jī)箱和模塊高度綁定你買的二手刀片如果和機(jī)箱不是同一個(gè)生態(tài)體系——比如不同代、不同兼容清單——很可能插上去點(diǎn)不亮。再加上刀片模塊內(nèi)部結(jié)構(gòu)緊湊二手貨的風(fēng)扇、電源等部件老化問(wèn)題會(huì)比普通塔式機(jī)架式更隱蔽。真出了問(wèn)題配件還不好找。我的態(tài)度是入門練手可以淘一淘二手機(jī)架式但生產(chǎn)環(huán)境里尤其是刀片這種集成度高的東西別碰二手。省下的采購(gòu)成本很可能在故障處理成本和業(yè)務(wù)停擺成本里加倍還回去。4.6 虛擬化與操作系統(tǒng)的兼容性確認(rèn)前面熱詞里也沒少出現(xiàn)“服務(wù)器虛擬化技術(shù)”相關(guān)的內(nèi)容選型時(shí)一定要提早確認(rèn)硬件和虛擬化平臺(tái)的兼容性。機(jī)架式和塔式還好驅(qū)動(dòng)和兼容性資料都比較開放刀片式就要特別留意有些刀片節(jié)點(diǎn)的網(wǎng)卡、存儲(chǔ)控制器型號(hào)偏冷門虛擬化平臺(tái)或新版本操作系統(tǒng)未必自帶驅(qū)動(dòng)。我的習(xí)慣是采購(gòu)前先到虛擬化平臺(tái)和操作系統(tǒng)的官方兼容性列表里查一遍硬件型號(hào)確認(rèn)能被支持再下單。別信“應(yīng)該沒問(wèn)題”先查表查不到就問(wèn)廠商要支持聲明。為了省這一步我見過(guò)有人機(jī)器到了之后裝不上驅(qū)動(dòng)在兼容性泥潭里折騰了整整一周。最后再分享一點(diǎn)個(gè)人的實(shí)操體會(huì)做運(yùn)維久了我越來(lái)越覺得選服務(wù)器不是選“最好的”而是選“最適合當(dāng)前階段的”。塔式、機(jī)架式、刀片式?jīng)]有哪一類是絕對(duì)王者不同階段的選擇完全可以不同。今天業(yè)務(wù)小一臺(tái)塔式就能穩(wěn)住明年業(yè)務(wù)上量機(jī)房條件跟上了再平滑過(guò)渡到機(jī)架式或刀片式這很正常。我自己的習(xí)慣是無(wú)論選哪類先保證管理口配好、線纜標(biāo)簽做好、關(guān)鍵備件有底。硬件這東西本身出大事的概率不高出事的往往是人手忙腳亂的時(shí)候做出的不規(guī)范操作。把準(zhǔn)備工作做在前頭后面就算半夜被叫起來(lái)處理故障心里也有底。希望這篇對(duì)比能幫你在下次采購(gòu)前少走點(diǎn)彎路真金白銀地省下來(lái)。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
www.99riav99| 婷婷色五月亚洲| 9999三级片| 五月总合激情网| .精品久久久麻豆国产精品| 人人爱国产| 色婷婷六月天| 操比激情五月| 色五月婷婷777| 综激情网| 92久操视频| 色五月六月| 久色网五月| 乱码操操| 亚洲99在线| 人妻少妇色综合| 五月天激情婷婷久久| 99re66热这里只有精品| 狠狠婷婷色综合| 色婷婷88| 激情网婷婷五月天| 五月天婷婷在线播放免费| 五月天色图| 久久9RE热视频精品98| 强壮的公次次弄得我高潮A片日本 | 亚洲这里只有精品| 99在线亚洲| 五月天婷婷基地丁香| 热九九九九| 亚洲国产精品SUV| 激情99热| 大香蕉99热| 婷婷五月天黄色小说| 欧美噜噜久久久XXX| 丁香五月激情欧美| 超碰中文字幕在线| 久久99精品久久久久久三级| 丁香玖玖视频大全| 婷婷五月丁香香蕉| 丁香婷婷五月综合影院| 五月丁香亚洲综合| 色婷婷五月综合| 色五月天综合网| 91视屏在线观看com.wwwvv| 丁香五月综合| 激情五月天婷婷图| 开心五月婷婷五月| 五月天久久婷婷婷| 婷婷五月久久| 新精品99| 久久这里只有精品8| 狠色狠色综合久久| 逼里香不卡| 五月天激情婷婷丁香| 亚洲色婷婷色| caopeng97日韩| 97色碰| 伊人综合色干| 综合大香蕉| 99日精品视频| 99色这里| 人人射av| 婷婷五月天综合久久| 六月丁香激情婷婷| 婷婷五月天色播| 视频久久9| 久久久久久婷| 一区二区免费看| 九九综合图片网| 91男同视频| 99五月香婷婷丁香在线视频| 91色碰| 五月丁香888| 五月丁香婷婷老司机| 婷婷五月丁香四射| 亚洲激情综| 91要啪| 91久久综合亚洲噜噜成人在线| 日本色色网站| 丁香五月婷婷少妇| 99亚洲日韩| 五月婷婷网五月在线| 66精品成人免费网站在线观看| m色激情网| 日本久久爱| 婷婷五月天成人小说| 天天综合色| 丁香婷婷六月天| 91日韩在线| 婷婷五月天丁香花| 日韩 mm 不卡| 婷婷亚洲天堂| 亚洲色婷婷五月| 色小说五月婷婷| 99爱这里只有精品免费视频| AV操操操| 99福利视频导航| 五月丁香趴趴| 五月丁香婷婷无码A∨| 夜夜爽日日躁| 九色91国产| 99九九在线视频| 色五月天丁香| 日本性视频| 国产在线自| www999日韩精品| 色五月丁香六月资源站| 欧美丁香五月| 99re在线播放| 综合99视频| 婷激情五月天视频导航| 看全色黄大色大片| 99在线视频。| 色五月婷婷五月丁香五月激情五月视频| 5月丁香综合网| 激情伊人五月天| 99精品亚洲| 少妇性按摩无码中文A片| 91色碰| 99色区| 丁香激情婷婷网| 九九这里是免费的视频5| 亚洲精品久久久无码| 五月丁香婷婷老司机| AV五月丁香| 婷婷五月精品在线| 亚洲操B| 五月婷婷性爱网| 日本色色图| 色五月色综合| 99色色| 综合色网站| 五月噜噜| 国产精自产拍久久久久久蜜| 亚洲精品成人| 9月色婷婷| 无码少妇高潮喷水A片免费| 婷婷综合久久综合| 色情激情五月| 五月综合激情婷婷六月色窝| 亚洲中文字幕网| 五月天婷婷中文字幕在线播放| 欧美婷婷综合| 五月婷中文字幕| 五月激情综合美女久久| 婷婷丁香六月天| 色欲天天综合网| 色色色.COM| 99热欧美| 久久九九爽| 玖玖精品视频| 丁香五月婷婷影院| 俺去啦综合网| 丁香婷婷五月香蕉91| 色人久久| 久久激情五月婷婷| 日韩人妻无码精品| 26uuu丁香婷婷五月| 五月婷婷综合激情小说| 天天综合色综合| 六月婷婷五月丁香| aaa丁香五月天| 99激情视频| 婷婷六月激情综合| 五月丁六月婷| 亚洲在线网站| 思思国产99| 69精品人人人人| 五月丁香六月在线欧美| 丁香五月Av| 色婷大香蕉| 久久A V无码视频| 狠狠爱深色婷婷综合| 久久er免费视频| 五月丁香婷婷中文| 五月天堂色| 九九色综合网| 狠色综合网| 99超级碰免费视频| 亚洲激情网站无码| 成人国产欧美大片一区| 密桃激情五月天综合网| 六月婷婷日| 婷婷丁香五月天在线| 欧洲电影在线观看免费版英语版| 开心五月丁香啪| 久久久天堂国产精品女人| 成人必爱视| 五月天开心网| 99re26视频| 色吧婷婷五月亚洲| 熟女激情五月天| 久久九九囯产| 日韩在线视频网站| 性爱在线播放av| www.婷婷五月天| 91艹人| 欧美S码亚洲码精品M码| 五月天综合图片| 吾爱AV导航| 婷婷五月激情小说| 怕怕視頻| 婷婷99视频全集高清| 操你av| 91人人人人人人人| 91日本在线观看| 涩综合网| 熟女人妻视频| 色色色婷婷| 国产精品视频网| 国产三级片91| 翔田千里aV中文字幕| 91人久| 五月综合色播播丁香婷婷| 五月婷婷9| 九九热re99re6在线精品| 丁香五月婷婷啪| 伊人综合网站| 久久精品性爱| 激情综合网五月天天| 色婷婷六月| 真实亲子乱子伦高清在线观看| 久久久jd| 欧美槡BBBB槡BBB少妇| 婷婷色五月综合| 97人人操com| caop在线| 婷婷五月天亚洲图片| 色情五月| 亚洲无AV在线中文字幕| 色婷婷综合亚洲| 99热精品在线播放| 五月天久久综合婷婷丁香| 九久热| 国产一级片| 9久热这里只有精品视频| 六月色婷婷综合影视| 日本三级韩三级99久久| 思思久热6| 91干在线| 色婷婷色和| 色欲色香综合网| 五月色婷婷AV| 开心五月婷婷激情| 狠狠综合久久综合| 99热在线观看| 婷婷五月丁香久久| 真实亲子乱子伦高清在线观看| 久久五月天婷婷| 色婷婷色综合久久精品V| 人人操91| 97色色婷婷五月天| 丁香五月玖玖| 中文字幕无码人妻少妇免费视频| AV在线大香蕉| 激情黄色小说五月天| 国产亚洲色婷婷久久99精品91 www.riverspirits.org www.hnnun.com www.changh | 九月大香蕉| 欧美成人va| 91人人爽久久涩噜噜噜| 先锋男人99资源| 骚五月婷婷| 丁香六月天婷婷色| 免费观看18视频网站| 成人免费在线电影| 久久久精品人妻| 丁香伊人激情| 这里只有精品99视频| 婷婷综合日本| 综合久久8| 色综合色| 久草婷婷| 婷婷色五月激情| 人妻激情综合| 丁香五月先锋| 99视频只有精品| 日夜夜久久| 狠狠操天天操天天操| 五月丁香欧美综合| 99啪99| 亞洲自怕| 高清免费在线视频| 婷婷丁香久久网| 99热免费| 中文字幕 中文字幕明步| www久久99| 亚洲 五月 婷婷 成人| 狠狠色五月激情| 五月天丁香成人| 久久99精品久久久| 狠狠se| 超爽内射| 久久色9| 97操碰日本女人| 国产午夜伦鲁鲁| 色婷网| 久久99综合| 色99在线观看| 日本一级一级一级一级| 996热| 日本欧美成人片AAAA| 九九热视频精品| 久久99久久99精品免视看婷| 9色在线| 久久免费精品小视频| 亚洲婷婷久久综合| 久久亚洲婷婷| 欧美久久五月婷婷| 日日肏天天操| 99精品在这里| 五月天六月婷婷| 日日操夜夜骑| 99热综合网| 97碰在线视频| 色激情五月天| 九九爱精品网站| 丁香婷婷激情四射五月| 伊人玖玖网| 五月婷婷九| 可以直接看的av网站| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | 97人人爱人人操| 四射综合网| 狠狠色噜噜色狠狠狠综合色| 色九月婷婷丁香| 久久婷视频| 久久电影4399| 亚洲激情网站无码| 五月丁香青草综合啪啪| 大香蕉中文| 婷婷视频网| 久草视频一,二三四| 成人日韩欧美| 婷婷激情丁五月| 丁香五月激情视频在线| 人人草人人舔| 操人91| 少妇人妻丰满做爰XXX| www,婷婷,com| 日韩人妻在线观看| 99热日| 思思热久热| 婷婷天天日婷婷| 91丨九色丨高潮丰满日本| 久久婷婷网| 99人人干| 亚洲宗合激情| 九色91国产| 天天肏屄夜夜爽| 丁香五月中文字幕久色| 久久精品9| 激情又色又爽又黄的A片| 天天干天天拍| 丁香五月婷婷99| 久久香蕉网| 天天摸天天高潮天天爽| www.99婷婷| 另类激情综合| 久热re在线视频| 久久99精品九九久久久婷婷| 五月天激情网页| 久超超碰| 激情五月婷婷色综合| 91狠狠综合网| 人人草人人爱手机视频看看| 五月天激情国产综合婷婷婷| 69精品人人人人人人| 激情丁香婷婷五月天| 色五月丁香六月欧美综合| 在线婷婷| 久99精品视频| 六月色色婷婷| 26uuu精品一区二区| 大香蕉伊人丁香五月| 国产av影片| 成人欧美Va| 人妻激情综合| 91婷婷五月丁香碰| 9999热精品在线免费播放| 99热这里只有精品3| 五月天开心网| 婷婷色在线| 五月天涩涩| 激情丁香五月| 色婷婷AV在线| 综合久久99| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 六月婷婷五月丁香| 综合久久久| 久久久久久五月天| 色五月婷婷网| 激情五月综合第一页| 亚洲第精品| 五月激情六月宗合| 色五月婷婷综合| 极品五月天| 五月婷伊人| 操99| 狠狠狠狠狠狠色| 六月婷婷激情小说网| 婷婷五月天开心网| www久久99| 五月天婷婷成人网| 中文字幕婷婷在线| 亚洲热视频| AV亚洲在线| 玖玖精品资源| 狠狠婷婷日韩| 婷婷色正月| AV网在线观看| 婷婷久久综合久色| 葵花AV在线| 色综合久久天天综合网| 色色丁香五月天| 99色| 66色在线日韩| wWW九九在线播放| 色色色色色色色色网站| 国产99久久久国产精品免费看| 久久99热只有精品| 五月丁香六月激情| wWW九九在线播放| 99色热视频在线| www色哟哟| 五月天激情小说欧美激情| 伊人影院久久网| 国产亚洲精久久久久| 婷婷97C| 丁香婷婷成人网| 久久精品噜噜噜成人A∨色欲| 夜夜骑夜夜撸| 欧美日韩123| 五月丁香综合啪啪| 五月丁香视频在线观看| 日本成人内射| 伊人五月婷婷| 激情播丁香| 玩熟女五十AV一二三区| 五月天亚洲色| 亚洲操操| 激情文学综合婷婷五月天丁香花| 婷婷六月天激情| 亚洲AV综合网| 国产精品美女久久久久AV超清 | 91丨九色丨白浆秘| 91日韩在线| 丁香婷婷六月天| 久久五月天精品视频| 午夜五月天| WWW.99视频| 九九在线精点品| 久久婷五月综合色| 成人丁香五月婷| 五月丁香婷婷色色色| 丁香六月婷婷久久综合八月| 综合久久五| 伊人玖玖婷婷| 天天爽天天日人人爱| 五月丁香综缴情性爱| 天堂五月婷婷| 五月丁香综合伦理片| 狠狠狠狠狠狠草| 中文字幕综合| 欧美va亚洲va在线播放| 久久刺激网| 99在线精品免费视频| 99爱这里只有精品免费视频| 九九成人精品免费视频| 综合99在线| 亚洲天天| 婷婷五月综合网| 大香蕉av在线| 国产99久9在线| 五月天激情国产综合婷婷婷| 女人被男人吃奶到高潮| 五月婷婷网久久| 97极品在线| 久久小说网| 五月天婷婷基地综合网| 激情综合色| 久久性视频| 丁香九月激情在线视频| www.夜夜操| 亚洲热视频| 99热精在线九九久久保| 插逼综合网| 91se视频| 另类小说色婷婷| 日本五月天激情| xx色综合| 99热在线爱| 色婷婷丁香社综合| 国产一级黄色影片,| 五月亭亭开心网| 九九这里有精品| 天天艹天天色| 九九热免费观看视频| 超碰a女人的天堂| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | av首页在线| 色色色五月婷婷| 色色色综合| 六月婷婷激情小说网| 激情综合网五月在线播放| 久久婷婷五月综合一| 日日做A爰片久久毛片A片英语| 超级碰碰碰97免费| 亚洲五月停停| 色婷五月天激情| 夜夜夜夜做天天天做无码视频| 99久久99久久综合| 成人av中文字幕| aV欲望人妻中文字幕| www婷婷色| 蜜桃人妻无码AV天堂三区| 亚洲综合99| 婷婷五月天小说| 五月婷婷 激情五月| 五月丁香婷婷激情久久| 五月情四婷婷| 99热精品少| 色色色激情| 97久久精品| 综合性爱网| 日韩一级网站| 色噜噜五月天| 琪琪色热色色| 六月丁香六月婷婷欧美| 久久宗合影| 综合九九久久| 一级二级色大片| 丁香视频| 色婷婷88| 五月丁香综合啪啪| 久久婷婷青草五月天| 99操视频| 99丁香五月婷| 婷婷综合网在线| 久久视频这里都是精品| 激情网第四色| 性生活久久朋友人妻| 天天日婷婷| 五月婷婷激情四月| www.99热这里只有精品| 激情五月婷婷在线观看| 激情六月天婷婷| 91ncom.色| AV九九| 六月婷婷中文字幕| 免费看欧美成人A片无码| 色五月激情五月| 免费看欧美成人A片无码| 三十熟女| 狠狠色九月| 色噜噜五月天| 噜噜色五月| 五月天小说激情| 密桃激情五月天综合网| 九九热在线观看视频| 婷婷五月天AV在线| 丁香五月成人| 射满了还射免费在线观看 -午夜版全集-新视觉影院 | 狠狠色狠狠| 五月婷婷综合激情| WWW.开心五月天.COM| 五月婷婷免费看| 激情五月婷婷在线观看| 99九九视频| 日韩黄色中文字幕| 丁乡久久| 婷婷六月综合在线| 99这里只有精品|v| 91丨九色丨大屁股| 色婷婷伊人激情在线观看| 97在线视频 欧美| 日本激情91| 综合激情五月丁香9999久久精| 久久久区区一久久久久久| 色婷婷五月天激情在线观看| 久久久免费精彩视频| 成人无码精品1区2区3区免费看| 伊人天堂婷婷| 丁香婷婷六月激情文学 | 丁香五月AV综合激情| 99久久6| 色婷婷影视| 九七色色六月丁香| www.色五月.com| 国产26uuu视频| 激情五月婷婷五月| 亚洲精品V天堂中文字幕| 大香蕉娱乐| 99热综合在线| 中文av网| 人妻内射一区二区在线视频| 超碰成人av| 六月综和久久| 亚洲免费99| 九九丁香社区欧美激情| 丁香六月婷婷综合| 99爱在线免费视频| 99精品偷自拍| 九九热99视频| 可以直接看的AV| 国产精品电影| 六月婷婷久久| 五月天婷婷人妻| 色色无码| www,色婷婷| 日本欧美国产| 婷婷午夜| 99热这里只有精品1025| 99热最新| 99热在线观看| 天天色综合天天| 五月丁香婷婷免费视频| 五月丁香婷婷欧美色图视频五月丁香777电影| 日本成人综合| 色五月综合在线| 丁香婷婷五月六月天| 国产免费一区二区三区三州老师F1F1.CC| 熟妇人妻中文字幕无码老熟妇| 色噜噜狠狠色综合成人网| 丁香婷婷五月综合影院| 亚洲综合色网| 99精品在线| 国产成人AV在线播放| 青吴乐视频| 亚洲色五月天是什么| 婷婷色九月| 玖色色综合| 五月婷婷久久网| 婷婷丁香熟妇综合网| 爽极品色| 婷婷六月色开| 北条麻妃伊人 | 91九色国产熟女| 五月婷视屏在线观看| 无码少妇高潮喷水A片免费| 亚洲欧洲99| 在线成人网站| 99久在线| √天堂资源在线人妻熟女| 综合九九中文字幕| 五月丁香综合在线| 9 1大香蕉| 久久这里有精品视频在线免费观看| 少妇性按摩无码中文A片| 丁香五月亚洲AV| 91热爆在线| 婷婷九月综合| 亚洲综合99| 久久婷婷五月天蜜桃| 国产免费一区二区三区三州老师F1F1.CC | 极品九九九九九九| 99爱精品| 久久刺激网| av久热| 五月婷亚洲精品AV天堂| 五月天社区| 日韩一级片| 婷婷亚洲色| 婷婷综合网站| 丁香五月天之婷婷影院| 六月丁香视频网站| 极品人妻VIDEOSSS人妻| 天天色天天噜| 99草在线免费观看视频| 日日杆天天| 青青久久大香蕉| 97丁香五月| 9l视频自拍九色9l视频自拍九色9l社区| 综合性爱网| 综合激情婷婷| 国色天香成人网| 亚洲、热| 一起草aV| 五月婷婷久久综合| 五五月丁香花激情综合网| 欧美丰满熟妇BBB久久久| 99免费视频精品| 99精品综合在线| 天天做天天爱| 丁香五月激情六月欧亚激情综合导航 | 99激情视频| 五月激情视频网| 色五月美女| 97操碰在线视频| 97操在线视频| 亚洲妇女熟BBW| 操逼棍操逼| 久久网婷婷| 久久九九网| 激情五月丁香色婷婷| 免費观看aV在线网址| 色五月激情网| 婷丁香久综合| 99在线看片| 啪啪激情综合| 青青草蜜臀| 99无码精品| 天天爽天天爽天天爽天天爽天天爽| 久久9热好| 五月天婷婷免费视频| 天天舔天天插天天爱| 久久无码成人| 五月婷婷av| 美女主播野战视步页| 一起草aV| 极品人妻VIDEOSSS人妻| 熟女激情五月天 | 日韩精品一区二区亚洲AV观看| 色婷婷六月| 五月天俺去也| 99er日韩| 9色在线视频精品观看| 综合网亚洲| a久久免费视频| 9l视频自拍9l九色成人| 色亭亭九月| 久久性爱视频网站| 韩国激情五月天综合网| 天天日综合网射| 成人片在线免费看| 伊人激情AV一区二区三区| 天天拍天天操| 日日肏天天操| 丁香五月天激情网址| 久久久久视剧HD| 久久草大香蕉| 久久丁香五月| 激情六月一二| 噜色精品| 亚洲成人免费电影| 国产色99| Www.sesese丁香| 天天插综合网| 91人操人人人操人| 性生活久久人妻| 六月丁香五月婷婷首页| 欧美日韩成人免费在线| 久久99激情五月天| 精品无码久久久久久久久| 丁香激情网| 婷婷色基地| 深爱激情网婷婷| 婷婷五月播| 婷婷九月亚洲| 99热久97| 日日噜噜久久婷婷五月天| 日韩色色色色| 色情综合网| 丁香五月电影| 婷婷五月香蕉| 色婷婷综合影院| 99这里只有精品99| 婷婷五月中文字幕国产| 天天爽—爽| 丁香五月情色| 激情五月丁香五月| 伊人五月婷婷| 国内一级精品| 超级碰碰碰碰视频| 99精品偷拍视频| 久久五月天精品视频| 欧美久久一级内射wwwwww.| 色婷婷久久| 综合色久| 97色碰| 婷婷五月丁香综合| 九九九热精品| 婷婷五月丁香综合| www婷婷| 99日本在线| 涩综合网| 91婷婷丁香| 激情综合无码| 日韩AV大全| 91啪啪| 99色网站| 97综合在线| 色吧五月| 免费观看欧美成人AA片爱我多深| 欧美黑人巨大性生话| 国产肥白大熟妇BBBB视频| 九九性视频| 另类少妇人与禽zOZZ0性伦| 婷婷五月天激情四射| 色婷婷丁香五月| 欧美内射AAAAAAXXXXX| 亚洲V国产V欧美V久久久久久| 情欲禁地| 日韩av免费版| 天堂久久大香蕉| 成人色图情色成人网 www.5b5b5bcom 五月天| 婷婷五月激情综合啪啪| www,com,五月色色| 91色五月| 天天日天天狠狠操| 国产热精品| 五月婷婷自拍| 岛国av网站| 人人97碰| 国产日比| 五月丁香六月激情| 久久婷婷六月综合综合| 日韩在线99| 中文字幕在线日亚州9| 丁香五月 综合| 五月四色婷婷| 亚洲色频| 婷婷香五月天| 丰满人妻妇伦又伦精品国产| 丝雨一区二区| 五月丁香色婷婷色| 欧美群妇大交乱婬网| 91久女| 久久婷婷大香蕉| 久青操| 丁香五月在线伊人| 日日日影院| 久久婷婷五月天| 日本va欧美va国产激情| 艹B高清无码| 男人天堂AV在线一区二区| 五月婷婷黄色| www.狠狠狠.com| 五月丁香婷婷六月| 能直接看的av网站| 色涩视频久久| 久久狠狠干| 深爱五月天 开心网| 俺去也五月天| 久久激情网| www九月婷婷| 综合久久99| 婷婷五月天六月| 久久婷婷五月综合色奶水99啪| 激情久久久| 九九热99久久99| 思思视频久久| 99热精品中文字幕| 激情五月天婷婷| 日本久久极品| 怡红院99| 五月婷婷|欧美| 人妻熟人中文字幕一区二区| 婷婷综合影院| 六月丁香综合999| 91ncm视频| 国产在线网| 亚洲在线操| 99青青草| 中文字幕成人| 黄色片精品| 丁香五月第四色88| 99无码黄色视频| 97色碰碰公开视频| 久久99激情| 在线观看av网站| 影音先锋秋秋五月婷婷| 99视频精品全部免费看| 思思热精品在线| 国外亚洲成AV人片在线观看| 伊人色综合影院视频| 婷婷五月天免费视频在线观看| 久久婷婷视频| 伊人色综合久久久| 国产精品婷婷午夜在线观看| 另类视频五月天| 六月丁香婷婷色狠狠久久| 激情五月色综合国产精品| 深爱激情六月天| 91色干| 久久激情五月网| 五月激情小说| 91久久久久久久久| 五月婷婷九| 五月色亭丁香| 翔田千里无码| 婷婷丁香久久| 五月色网| 日本一级特黄大片AAAAA级| 啪啪五月婷婷| 久久成人精品视频| 亚洲中文字幕在线观看| 九九AV| av色婷婷| 99婷婷国产最新视频| 天天做好综合色| 91人在线观看| 少妇搡BBBB搡BBB搡毛茸茸 | 日韩不卡123| 色狠狠六月| 99热这里只有精品9| 日本三级日本三级99| 色五月婷婷操逼| 密乳Va| 色五月激情五月开心五月| 高清 码 免费看片短视频| 亚洲国产精品综合色区| 婷婷99狠狠躁天天久久久九九九| 99人这里只有精品| 五月天婷婷基地| 九九精品这里只有| 大香蕉久操| 天天日夜夜B久久| 婷婷亚洲天堂| 在线看九一V图片| 亚洲色域网| 97在线观视频免费观看| 久久精品小视频| 99干日日干| 色色日韩无码| 久久九九Com| 日日夜夜爽| 色情五月天导航| 免费精品99| 婷婷五月大香蕉| 中文字幕在线免费观看视频| 久99久视频| 538在线精品| 99惹| 色婷婷丁香花五月天| 天天精品视频在线观看视频| 伊人天堂婷婷| 五月婷婷开心网| 五月婷婷深深爱| 91Chinese在线| 性爱先锋AV| 免费视频WWW在线观看网站| www.热99热| av一区免费看| 大香蕉欧美在线| 色五月婷婷基地| 五月婷婷啪啪| 伊人狠狠干| 丁香五婷| 五月婷婷婷| 天色综合网站| 亚洲视频另类| 男人天堂99| 九九精品片一| 无码碰碰| 亚州操操| 99热精品网| 九九热内射| 丁香色综合| 久久久久久久久久久久久久人妻视频| 丁香五月天操B| 激情五月天在线免费美女视频| 久久99久久99精品免观看粉| 五月综合视频| 欧美VA在线| 人人操91| 婷婷丁香18| 激情亚洲婷婷| 开心久久爱五月天| 色色综合院| 婷婷五月天成人网| 99视频这里有精品免费观看| 久99综合婷婷| 国产精产国品一二三在观看| 婷婷成人五月天成人文学| 快乐激情五月色婷婷| 五月四色激情| AV在线观看网站| 五月丁香激情综合网官网| CAOBIBI| 人妻中文在线| 婷婷亚洲五月| 99热99日…..| 狠狠干在线| 99在线精品视频| 五月综合激情网| 激情五月六月婷婷综合啪啪| 殴美日韩成人| 免费视频WWW在线观看网站| 五月婷婷开心网| 丁香婷婷久久激情| 香蕉操亚洲| 亚洲第一成人无码A片| www.五月婷婷.com| 蜜桃婷婷丁香| 九九成人精品免费视频| www.久操| 拍真实国产伦偷精品| 久久久久婷 | 噢美99| 99碰网站| 久热精品视频| 熟女婷婷网站一婷婷五月一丁香婷婷一婷婷激情网| 成人丁香婷婷| 亚洲色婷婷五月天| 色五月五月天色婷婷色五月| 熟女乱论网| 99毛片| 99视频啪啪| 婷婷五月天AV| 激情綜合網址| 天天综合影院| 婷婷激情丁香五月天综合| 丁香五月大香蕉AV| 久久婷婷五月丁香蜜桃网| 色婷婷婷婷| 婷婷淫淫狠狠六月| 欧美99| 亚洲精品在线视频| 一本久婷婷综合| 热九九精品| 综合激情在线| 五月丁香色六月激情干大屄| 日日日,com| 色色五月天网站| 欧洲区自拍| 日韩成人无码| 日韩无码专区| 五月天激情四射| 五月婷婷亚洲| 都市激情五月婷婷亚洲| 五月婷婷激情色情网| 久久久久久久久久8888| 久久久jd| 久xxxx| 免費观看aV在线网址| 夫妇交换刺激做爰| 99久久久久| 99人妻碰碰碰久久久久禁片| 国产精品爽爽久久久久久| 日韩av网址大全| 六月亚洲| 狠狠操天天操| 台湾综合丁香五月蜜桃| 天天噜日日噜综合无码| 99re热在线观看| 欧美精品A片一区在线观看| 夜色五月天| 久久婷婷五月综合色欧美| 午夜精品久久久久久久爽| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | 午夜不卡久久精品无码免费| 另类在线| 天天精品视频免费观看| 五月婷婷丁香| 123草逼网| 丁香五月欧美色综合| 99热99美国在线观看| 久久色情综合免费网站| 99精品视频免费| 色色色综合色| 99免费热视频在线| 狠狠插狠狠操| 日韩精品一品二区三区的使用体验| 五月婷婷激情五月| 天天色宗合| 婷婷激情图片| 黄色成人网站在线播放| 五月丁香色婷婷久久| 99九九99九九九视频精彩| 热久久91| 亚洲综合色婷婷| 亚洲无码99| 被强行糟蹋的女人A片| 久热超碰| 91肏肏肏| 3DAV亚洲香蕉久久 一区二区| 九月性爱网| 婷婷色偷拍| 色域五月婷婷丁香| 天天色图| 亚洲视频在线观看99| 精品人妻久久久| 国产精品久久久久久五月天加勒比| 色五月亚洲开心网| 九九热这里只有精品6| 久久与婷婷| 中文字幕在线播放视频| 五月天桃色深爱网| 国产AV一区二区三区最新精品| 黄色中文字目| 久久久久久婷| 欧美啪啪9| 99在线观看视频免费| 久99视频在线观看| 五月色视频| 精久久色| 国产精品色婷婷久久久精品| 99久在线| 色婷婷成人做爰A片免费看网站| 久久ri精品| 六月色 亚洲| 九九综合| 夜夜做天天爽| 色色综合色| 久久性爱视频| 国产偷人爽久久久久久老妇APP| 极品五月天| 182TV亚洲| 人妻内射麻豆视频| www.狠狠艹| www.久久爱.com| 国产成人精品亚洲线观看| 日本大逼91| 久久五月网| www.人人操人人看人人想人人摸 人人人人操,COM | 青青操成人福利| 超碰成人在线观看| 久久五月婷婷开心网| 丁香六月婷| 五月婷婷激情综合| 1024久婷| 六月丁香花婷婷| 丁香欧美| 99热18| 99久久婷婷国产综合精品| 九九热10| 天插天啪天啪天啪| 色色色婷| 日韩成人影片网站| 99超碰人人| 2023天天日夜夜爽| 丁香五月手机在线| 丁香六月色婷婷| 久久婷婷五月综合色区| 丁香六月色婷婷| 99这里只有精彩视频| 婷婷精品在线| 五月丁香激情综合网官网| 操碰97| 狠狠色婷婷六月激情网| 久色网址| www久久久久久久| 狠狠艹狠狠艹| 国产26uuu| 亚洲乱码日产精品BD| 免费啪啪亚州视频| 色综合色色色色色| 婷婷色丁香五月| 大香焦A∨| 丁香综合伊人| 丁香五月婷婷六月丁香| 苗黎美女四级成人版一级二级毛片| 色V狠狠的干| 26uuu精品国产| 狠狠干,狠狠操| 婷婷五月天AV在线| 婷婷五月天综合中文| 欧美激情综合| 综合激情专区| 天天操,夜夜骑| 九九aV| 天堂资源欧日浪女在线播放| 六月婷婷久久大全| 少妇性按摩无码中文A片| 男女99免费视频| 五月婷婷片| 伊人久久丁香狠狠婷婷综合香蕉 | 五月婷婷婷色| 色狠狠六月| 色综合五月天| 成人视屏在线观看| 79色色色色| 91色呦哟| 久久99热这里只有精品23| 色色操| 射琪琪| 99精品视频免费| 激情婷婷五月丁香啪啪啪| 再綫Av免费視品| 色综合色色| 日本系列_4页_777FP| 狠狠搞狠狠操| 色五月综合激情网| 婷婷综合五月激情| 色色色网站| www.婷婷| 国产97色在线| 99热99精品| 91九色欧美| 激情五月婷婷视频一区二区三区| 超碰在线免费观看日韩| 久久久com| 欧美婷婷| 久久久久激情网| 最新日韩久热免费视频看看| 婷婷日日夜夜| 日逼影音先锋男人资源站| 婷婷丁香一月| 少妇性BBB搡BBB爽爽爽视頻| 色婷婷狠狠干| 六月色色| 婷婷五月在线免费| 婷婷激情社区| 婷婷色色五月天| 婷婷色五月丁香六月欧美啪| 999婷婷综合| 色婷| 久操无码| 五月丁香综合在线| 久久五月视频| 九九無妻| 秋霞午夜理论| 成人做爰A片免费看视频| 成人色站,在线视频,看片-SS1AV| 久久香蕉网| 啄木鸟黑丝一区二区| 久久色六月| 婷婷五月开心中文字幕在线| 99视频这里有精品| 99爱精品视频| 99视频只有精品| 停停六月 综合| 五月丁香六月婷| AV在线中文| 五月天婷婷基地| 深爱丁香网| 亚洲妇女熟BBW| 婷婷色网站| 人人叉久| 看全色黄大色大片| 综合色图区| 99无码视频| 丁香婷婷色五月合集| 九月婷婷在线视频| 国产婷婷五月在线视频| 日91高清无玛| 丁香五月婷婷色| 久久99综合网| 五月激情在线| 婷婷色色播五月天| 99精品网址| 高清视频一区| 婷婷五月综合激情| A片试看50分钟做受视频| 夜夜做夜夜愛| 亚洲免费观看高清完整版AV线| 97色片| 婷婷另类开心| 壅壅儕家a| 日本熟妇精品99| 亚洲性天天| 99久久喉9| 久久五月婷婷丁香| 99热只有精品在线播放| 日韩aaaaa| 五月婷婷综合潮喷| 日本九九视频| 亚洲精品字幕在线观看| 激情99在线视频| 大香蕉天堂| 欧美日韩精品人妻狠狠躁免费视频| 国产精品色婷婷AV综合色色| 超碰成人在线观看| 欧美99| 亚洲成人婷婷| 2015好吊操| 青青久久91| 日本久久网| 艹| 五月丁香欧美综合| 99国产精品久久久久久久久久久| 五月天网站亭亭| www.久久爱.c n| 欧美大片| 亚洲婷婷丁香| 亚洲噜色|