免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

同一個(gè)ECC,三種技術(shù)世界:內(nèi)存糾錯(cuò)、SAP年結(jié)與MBIST測(cè)試

同一個(gè)ECC,三種技術(shù)世界:內(nèi)存糾錯(cuò)、SAP年結(jié)與MBIST測(cè)試 先問各位一個(gè)問題你在搜索框里輸入“ECC”三個(gè)字母的時(shí)候腦子里想的是哪個(gè)東西前陣子我同時(shí)被三撥人“轟炸”過。財(cái)務(wù)部的同事甩來一張截圖說公司 SAP 系統(tǒng)年結(jié)跑不下去了問我“是不是服務(wù)器內(nèi)存報(bào) ECC 錯(cuò)誤了”機(jī)房那邊告警面板上掛著一行“UNCORR. ECC 2”沒人敢動(dòng)隔壁做芯片驗(yàn)證的兄弟又跑來找我對(duì)齊 MBIST 里 ECC 測(cè)試的故障注入方案。有意思的是這三撥人說的都是“ECC”但完全是三件事。技術(shù)圈的“縮寫歧義”就是這么坑人。同樣是三個(gè)字母可以是內(nèi)存糾錯(cuò)碼可以是 SAP 的 ERP 核心組件還可以是橢圓曲線密碼學(xué)。你要是拿內(nèi)存糾錯(cuò)的知識(shí)去理解 SAP 年結(jié)或者用密碼學(xué)算法去套服務(wù)器告警大概率會(huì)一頭霧水。這篇文章我打算把這個(gè)縮寫徹底講明白先教你一眼分辨自己遇到的是哪個(gè) ECC然后重點(diǎn)展開硬件圈最常碰到的兩種場(chǎng)景——運(yùn)行時(shí)的 ECC 報(bào)錯(cuò)排查、芯片出廠前的 MBIST ECC 測(cè)試。如果你是為了 SAP ECC 年結(jié)而搜到這里第 5 章專門安排了年結(jié)的核心流程說明可以直接跳過去。1. 同一個(gè) ECC三種完全不同的技術(shù)世界1.1 四條熱搜詞背后的三類人群搜索平臺(tái)給“ECC”這個(gè)關(guān)鍵詞掛了一串關(guān)聯(lián)搜索詞sap ecc 年結(jié)、mbist ecc、uncorr. ecc 顯示2。乍一看毫無規(guī)律但它們精準(zhǔn)地暴露了三類不同的人群。“sap ecc 年結(jié)”來自企業(yè)管理系統(tǒng)里的財(cái)務(wù)或 IT 運(yùn)維人員他們糾結(jié)的是賬務(wù)年度怎么結(jié)、資產(chǎn)怎么結(jié)轉(zhuǎn)“mbist ecc”來自半導(dǎo)體行業(yè)的設(shè)計(jì)驗(yàn)證或測(cè)試工程師他們?cè)谘芯吭趺丛谛酒慨a(chǎn)前把內(nèi)嵌存儲(chǔ)器的糾錯(cuò)邏輯測(cè)干凈“uncorr. ecc 顯示2”則多半來自服務(wù)器運(yùn)維或硬件發(fā)燒友他們面對(duì)的是一臺(tái)試圖告訴他們“有 2 個(gè)錯(cuò)誤我修不了了”的機(jī)器。同一時(shí)刻搜索引擎把這三種人送到同一個(gè)關(guān)鍵詞下面的同一個(gè)結(jié)果頁(yè)——這就是縮寫歧義最典型的體檢現(xiàn)場(chǎng)。1.2 硬件糾錯(cuò)碼 ECCError Correction Code在服務(wù)器、內(nèi)存條、SSD、網(wǎng)絡(luò)控制器這些硬件場(chǎng)景里ECC 是 Error Correction Code 的縮寫翻譯過來是“糾錯(cuò)碼”指一類能夠檢測(cè)數(shù)據(jù)錯(cuò)誤、并且在能力范圍內(nèi)把錯(cuò)誤糾正回來的編碼算法。最廣為人知的應(yīng)用是 ECC 內(nèi)存。普通內(nèi)存條讀到一個(gè) bit 錯(cuò)了它不知道、也不管ECC 內(nèi)存讀到一個(gè) bit 錯(cuò)了控制器能定位到具體是哪一位然后把它翻回正確的值甚至不會(huì)讓上層軟件感知到這次錯(cuò)誤。除了內(nèi)存很多存儲(chǔ)芯片和高速數(shù)據(jù)鏈路也在用 ECC 機(jī)制來抵抗傳輸過程中的干擾。本文第 2 到第 4 章要展開的內(nèi)容全部屬于這個(gè)范疇。1.3 SAP ECC 和橢圓曲線 ECC名字像但八竿子打不著SAP ECC 的全稱是 ERP Central Component是 SAP 公司 ERP 產(chǎn)品線的核心組件承載著企業(yè)財(cái)務(wù)、物料管理、生產(chǎn)計(jì)劃、銷售分銷等業(yè)務(wù)流程。你會(huì)在登錄界面、年度財(cái)務(wù)結(jié)算、模塊配置里看到這個(gè)詞。它跟“糾錯(cuò)”沒有任何關(guān)系唯一的共同點(diǎn)是同樣叫 ECC。橢圓曲線密碼學(xué)Elliptic Curve Cryptography也縮寫成 ECC。它主要用在數(shù)字簽名、密鑰交換和區(qū)塊鏈相關(guān)的算法里和內(nèi)存、企業(yè) ERP 也都完全不搭界。為什么這幾個(gè)完全不相干的領(lǐng)域會(huì)撞名說白了就是電子信息行業(yè)在發(fā)展過程中各自為政誰也沒想到幾十年后同一個(gè)縮寫會(huì)被三個(gè)領(lǐng)域同時(shí)大規(guī)模引用?,F(xiàn)在再去追溯“誰先占用”已經(jīng)沒有意義重要的是在實(shí)際工作中能快速識(shí)別上下文。當(dāng)你看到 ECC 這個(gè)詞先看它出現(xiàn)在哪類文檔或系統(tǒng)里再?zèng)Q定按哪個(gè)領(lǐng)域的知識(shí)去理解。這種多義詞在 IT 領(lǐng)域到處都是USB-C 的 C 和 C 語言的 C 也完全是兩碼事處理方式是一樣的看語境。1.4 一張表幫你定位為了方便你快速對(duì)號(hào)入座我把四個(gè)高頻場(chǎng)景整理成一個(gè)對(duì)照表你身邊的語境ECC 全稱所屬領(lǐng)域本文對(duì)應(yīng)章節(jié)服務(wù)器告警、內(nèi)存條、BMC/IPMI 日志Error Correction Code硬件/服務(wù)器第 2、3 章芯片測(cè)試、SoC 驗(yàn)證、ATE 機(jī)臺(tái)日志Error Correction Code半導(dǎo)體測(cè)試第 4 章SAP 系統(tǒng)、財(cái)務(wù)年結(jié)、ERP 模塊ERP Central Component企業(yè)管理軟件第 5 章數(shù)字簽名、TLS 密鑰協(xié)商、區(qū)塊鏈Elliptic Curve Cryptography信息安全第 1 章說明我的習(xí)慣是跟人溝通時(shí)永遠(yuǎn)不說“ECC”三個(gè)字母而是帶上前綴內(nèi)存 ECC、MBIST ECC、SAP ECC、ECC 算法。一句話里帶上一個(gè)限定詞能避免絕大部分無效溝通。2. 內(nèi)存出錯(cuò)這件事比你想的更頻繁2.1 你的內(nèi)存其實(shí)在悄悄地出錯(cuò)一提到“內(nèi)存出錯(cuò)”很多人第一反應(yīng)是“內(nèi)存條壞了”。但實(shí)際在服務(wù)器上看日志你會(huì)發(fā)現(xiàn)大量?jī)?nèi)存錯(cuò)誤是隨機(jī)、瞬時(shí)、不可復(fù)現(xiàn)的稱為“軟錯(cuò)誤”soft error。DRAM 存儲(chǔ)單元靠電容上的電荷表示 0 和 1而電容有天然漏電特性所以內(nèi)存需要周期性地刷新把快要漏完的電荷補(bǔ)回去。在這個(gè)持續(xù)運(yùn)行的過程中高能粒子可能恰好穿過某個(gè)存儲(chǔ)單元比如宇宙射線中的中子或者芯片封裝材料里微量放射性元素釋放的 α 粒子。粒子命中之后會(huì)讓幾個(gè)存儲(chǔ)單元的電荷狀態(tài)發(fā)生變化原本的 0 變成 1或者反過來。這個(gè)過程完全不依賴硬件是否損壞純粹是概率事件。還有一類“硬錯(cuò)誤”hard error則是存儲(chǔ)單元物理?yè)p壞導(dǎo)致的比如介質(zhì)擊穿、金屬線開路這時(shí)候同一個(gè)地址會(huì)反復(fù)出錯(cuò)。軟錯(cuò)誤和硬錯(cuò)誤后面的處理方式完全不同這也是為什么要認(rèn)真分析日志而不是無腦換內(nèi)存。2.2 奇偶校驗(yàn)只能喊救命不能治病在 ECC 普及之前工程師先發(fā)明了奇偶校驗(yàn)Parity Check。思路極簡(jiǎn)多存一個(gè)比特讓整條數(shù)據(jù)字里 1 的個(gè)數(shù)保持奇數(shù)或偶數(shù)。比如一條 8 位數(shù)據(jù) 10101100 里有 4 個(gè) 1如果約定奇校驗(yàn)校驗(yàn)位就補(bǔ)一個(gè) 1讓整個(gè) 9 位數(shù)據(jù)里 1 的個(gè)數(shù)變成奇數(shù) 5。讀取時(shí)重新數(shù)一遍如果發(fā)現(xiàn)是偶數(shù)個(gè) 1說明數(shù)據(jù)在傳輸或存儲(chǔ)過程中發(fā)生了錯(cuò)誤。奇偶校驗(yàn)的問題有兩個(gè)。第一它只能告訴你“有錯(cuò)”不能告訴你“哪一位錯(cuò)了”所以無法恢復(fù)數(shù)據(jù)。第二如果恰好有偶數(shù)個(gè) bit 同時(shí)出錯(cuò)奇偶校驗(yàn)會(huì)判斷“沒毛病”。這是數(shù)學(xué)決定的——偶數(shù)個(gè)錯(cuò)誤不會(huì)改變 1 的個(gè)數(shù)的奇偶性校驗(yàn)必然漏檢。所以奇偶校驗(yàn)只能當(dāng)“哨兵”不能當(dāng)“醫(yī)生”。2.3 SEC-DED怎么做到糾 1 檢 2真正支棱起來的內(nèi)存糾錯(cuò)算法叫 SEC-DED全稱 Single Error Correction, Double Error Detection即糾正單個(gè)比特錯(cuò)誤、檢測(cè)雙比特錯(cuò)誤。ECC 內(nèi)存幾乎都基于它實(shí)現(xiàn)。它使用的底層數(shù)學(xué)是漢明碼Hamming Code。漢明碼的思路可以總結(jié)成一句大白話讓每一位數(shù)據(jù)比特都參與到多個(gè)不同的校驗(yàn)方程里。當(dāng)一個(gè)比特出錯(cuò)時(shí)不只一個(gè)校驗(yàn)方程會(huì)報(bào)警把“哪些方程報(bào)了警、哪些沒報(bào)”組合起來就可以倒推出到底是哪個(gè)數(shù)據(jù)比特出了問題。既然知道了位置把它取反錯(cuò)誤就修復(fù)了。整個(gè)過程類似“點(diǎn)名時(shí)兩個(gè)值日組同時(shí)報(bào)告少了人你根據(jù)‘缺人的組名’反推出具體是誰沒來”。SEC-DED 在傳統(tǒng)漢明碼的基礎(chǔ)上額外增加了一個(gè)全體校驗(yàn)位。這個(gè)全校驗(yàn)位讓硬件能區(qū)分“錯(cuò)了一個(gè)”和“錯(cuò)了兩個(gè)”錯(cuò)兩個(gè)比特時(shí)校驗(yàn)方程的組合會(huì)被識(shí)別為“不可糾正”于是硬件報(bào)出 UEUncorrected Error而不是盲目按單比特去糾正。這一步特別重要——如果 2 比特錯(cuò)誤被當(dāng)成 1 比特去修會(huì)把本來就是錯(cuò)的數(shù)據(jù)修得更錯(cuò)。2.4 ECC 內(nèi)存和普通內(nèi)存差的不只是價(jià)格從實(shí)物上看ECC 內(nèi)存比普通內(nèi)存多出一顆或幾顆芯片。普通 DDR4 內(nèi)存通常是 8 顆 x8 顆粒提供 64 位數(shù)據(jù)線ECC 內(nèi)存多一顆 x8 顆粒組成 72 位這多出來的 8 位就是校驗(yàn)碼的存儲(chǔ)空間。多出來的硬件直接反映在成本上ECC 內(nèi)存一般比同規(guī)格普通內(nèi)存貴 20% 到 30%。同時(shí)每次讀寫都要額外搬運(yùn) 8 位校驗(yàn)數(shù)據(jù)理論上有一定的總線帶寬開銷。但對(duì)服務(wù)器、數(shù)據(jù)庫(kù)、虛擬化平臺(tái)來說防止“靜默數(shù)據(jù)損壞”的收益遠(yuǎn)遠(yuǎn)大于損失。你希望財(cái)務(wù)系統(tǒng)里的一筆金額在內(nèi)存里悄悄從 1000 變成 1001 嗎顯然不。所以幾乎所有正經(jīng)服務(wù)器和云數(shù)據(jù)中心都會(huì)配 ECC 內(nèi)存。3. 從告警日志到換內(nèi)存條拆解一次真實(shí)的 ECC 排障3.1 告警日志里每個(gè)字段的潛臺(tái)詞實(shí)戰(zhàn)場(chǎng)景來了。假設(shè)某天你打開服務(wù)器帶外管理界面比如常見的 iDRAC、iLO或者翻 Linux 下的 dmesg、EDAC 相關(guān)日志看到這樣一段示意輸出EDAC MC0: 1 CE on DIMM2 (channel:0 slot:2 page:0x123456 offset:0x789) EDAC MC0: 2 UE on DIMM2 (channel:0 slot:2 page:0x654321 offset:0x987)先解釋兩個(gè)核心縮寫CE 表示 Corrected Error意思是“硬件已經(jīng)糾正掉的錯(cuò)誤”屬于警報(bào)到你這兒時(shí)已經(jīng)處理完的事故UE 表示 Uncorrected Error意思是“硬件嘗試糾正但沒能做到”的錯(cuò)誤這個(gè)才是真正需要人介入的?!癠NCORR. ECC 顯示2”里的 2通常就是 UE 的計(jì)數(shù)表示截止當(dāng)前已經(jīng)有 2 個(gè)不可糾正的 ECC 錯(cuò)誤。這兩個(gè)錯(cuò)誤背后大概率藏著同一條物理內(nèi)存條的硬故障。日志里 DIMM2、channel:0、slot:2 這些字段則是定位用的“坐標(biāo)”直接告訴你故障所在的內(nèi)存槽位。后面的 page 和 offset 是具體的物理地址用來判斷錯(cuò)誤是不是集中在同一片區(qū)域。3.2 三步鎖定故障內(nèi)存條第一步把完整日志記下來別只記一個(gè)“2”。page 和 offset 信息如果總是落在同一片地址空間基本可以認(rèn)定是硬錯(cuò)誤也就是那顆內(nèi)存顆粒本身有物理?yè)p傷如果地址一直在隨機(jī)變化那更可能是接觸不良、供電紋波、固件 bug 等問題。第二步給內(nèi)存條做個(gè)“除灰”處理。關(guān)服務(wù)器、斷開電源把告警的 DIMM 拔下來用干凈的橡皮擦輕輕擦拭金手指重新插緊開機(jī)后清空 SEL 日志再觀察。別小看這一步機(jī)房設(shè)備常年運(yùn)行插槽金手指氧化、灰塵覆蓋導(dǎo)致的接觸問題至少能解釋三成以上的內(nèi)存“誤報(bào)”。第三步單獨(dú)做壓力測(cè)試。如果重插之后還在繼續(xù)報(bào) UE把其他內(nèi)存條全部拆掉只留被測(cè)內(nèi)存條用 MemTest86 或 Linux 下的 memtester 跑至少一個(gè)完整輪回。一輪過后仍然出現(xiàn) UE這根內(nèi)存條基本就可以宣判了。3.3 從更換到驗(yàn)證少一步都不行換內(nèi)存條不是“拔舊插新”這么簡(jiǎn)單。我見過不少人在這一步翻車換上全新的內(nèi)存條系統(tǒng)仍然報(bào) UE最后發(fā)現(xiàn)問題出在主板的 DIMM 插槽上。正確的順序是關(guān)機(jī)斷電后等兩分鐘讓主板電容把殘余電荷放干凈插入新內(nèi)存條后先進(jìn) BIOS 確認(rèn)容量、頻率、時(shí)序是否正確識(shí)別再進(jìn)系統(tǒng)查看 CE/UE 計(jì)數(shù)是否還在增長(zhǎng)之后用 memtester 對(duì)新內(nèi)存條跑一輪全內(nèi)存壓力測(cè)試確認(rèn)其本身健康。如果新內(nèi)存條在原來插槽上依然報(bào) UE把這條新的換到相鄰插槽再試一次。這樣做是為了區(qū)分“內(nèi)存條壞”還是“插槽壞”。我在實(shí)踐中遇到過針腳彎了一根、插槽里有異物的情況導(dǎo)致連續(xù)兩根新內(nèi)存條被“誤殺”。提示服務(wù)器內(nèi)存通常支持不同頻率混插但系統(tǒng)會(huì)以最低頻率運(yùn)行。為了保證性能和穩(wěn)定性建議按原機(jī)配置購(gòu)買同頻率、同時(shí)序的內(nèi)存條別只看容量一樣就下單。3.4 什么情況該走 RMA什么情況是誤報(bào)內(nèi)存條作為半導(dǎo)體器件其故障率和批次、工作環(huán)境溫度、濕度、供電質(zhì)量都有關(guān)系。如果剛裝上的新內(nèi)存條立刻出現(xiàn) UE先別急著走售后去主板廠商官網(wǎng)查一下兼容性列表QVL——有些內(nèi)存條本身是好的但在特定主板上就是不兼容。真正需要走 RMA 時(shí)把以下信息準(zhǔn)備好DIMM 槽位、錯(cuò)誤類型CE/UE、錯(cuò)誤計(jì)數(shù)增長(zhǎng)頻率、服務(wù)器型號(hào)、內(nèi)存條序列號(hào)或照片。廠家對(duì)售后憑證的要求各不相同這些材料能讓你少跑一趟。另外還有一類“誤報(bào)”容易被忽略服務(wù)器固件或 BIOS 版本太老EDAC 驅(qū)動(dòng)存在誤判把正常訪問判斷為 UE。排查的一開始就應(yīng)該把 BIOS、帶外管理固件升到官方最新穩(wěn)定版再觀察日志。不要一上來就拆硬件。4. 芯片怎么給自己做“出廠體檢”MBIST 與 ECC 的配合4.1 MBIST 在芯片測(cè)試?yán)锏慕巧ㄎ话褧r(shí)間軸往前撥來到芯片出廠之前?,F(xiàn)代 SoC 內(nèi)部往往集成著幾十上百個(gè) SRAM 實(shí)例分布在 CPU 核、緩存、總線橋接等各個(gè)位置。芯片生產(chǎn)出來之后如果靠外部測(cè)試機(jī)臺(tái)逐個(gè)訪問這些存儲(chǔ)單元測(cè)試時(shí)間和 pin 腳資源都不現(xiàn)實(shí)。于是有了 MBISTMemory Built-In Self-Test存儲(chǔ)器內(nèi)建自測(cè)試技術(shù)。芯片內(nèi)部集成了一個(gè)專門的測(cè)試引擎它能夠自己生成地址、數(shù)據(jù)、讀寫控制信號(hào)快速遍歷全部存儲(chǔ)單元把讀回的數(shù)據(jù)和預(yù)期值做比對(duì)最后輸出 pass/fail。這樣量產(chǎn)測(cè)試時(shí)外部機(jī)臺(tái)只需要啟動(dòng) MBIST 引擎讀一下結(jié)果標(biāo)志就能完成對(duì)整顆芯片內(nèi)嵌存儲(chǔ)器的“體檢”。MBIST 的引入帶來的直接收益是測(cè)試時(shí)間大幅縮短、測(cè)試成本下降并且能定位到具體的失效存儲(chǔ)單元給后續(xù)的失效分析提供依據(jù)。4.2 MBIST 測(cè)的是存儲(chǔ)器不是 ECC 本身這里需要澄清一個(gè)概念MBIST 本身不是 ECC它是個(gè)測(cè)試工具。但很多芯片內(nèi)部的 SRAM 帶 ECC 功能比如 CPU 緩存、SoC 片內(nèi)內(nèi)存控制器數(shù)據(jù)緩沖區(qū)那么 MBIST 除了驗(yàn)證存儲(chǔ)陣列本身還必須驗(yàn)證 ECC 編解碼邏輯是否工作正常。怎么驗(yàn)證 ECC 邏輯靠“故障注入”。MBIST 引擎在數(shù)據(jù)路徑上人為地翻轉(zhuǎn)某個(gè)比特然后觀察 ECC 編碼器和解碼器的反應(yīng)如果注入 1 比特錯(cuò)誤ECC 邏輯能不能把它糾正回來如果注入 2 比特錯(cuò)誤ECC 邏輯能不能正確報(bào)出“不可糾正”。有一點(diǎn)需要特別強(qiáng)調(diào)這里的故障注入不是真的把存儲(chǔ)單元打壞而是通過旁路邏輯在寫入或讀取路徑上把某個(gè) bit 強(qiáng)行取反。這么做的目的是驗(yàn)證“如果數(shù)據(jù)錯(cuò)了編解碼器能不能按設(shè)計(jì)檢測(cè)出來并處理好”而不是驗(yàn)證“芯片本身會(huì)不會(huì)出錯(cuò)”。換句話說MBIST 測(cè)試 ECC 邏輯時(shí)關(guān)心的是糾錯(cuò)電路的反應(yīng)是否符合預(yù)期至于存儲(chǔ)單元本身的可靠性已經(jīng)被前面的數(shù)據(jù)完整性測(cè)試覆蓋了。這兩個(gè)層面要分清楚否則很容易把測(cè)試目標(biāo)搞混。4.3 測(cè)試日志里的 uncorrectable error count 怎么讀在芯片測(cè)試平臺(tái)或驗(yàn)證環(huán)境里你同樣會(huì)看到類似“uncorr. ECC 顯示2”的信息。但這里的解讀邏輯和服務(wù)器運(yùn)行時(shí)完全不同。在服務(wù)器上UE 計(jì)數(shù)是真實(shí)的故障信號(hào)在芯片量產(chǎn)測(cè)試?yán)飖ncorrectable error count 更像一個(gè)“預(yù)期行為檢查點(diǎn)”。預(yù)先設(shè)計(jì)好注入的錯(cuò)誤模型再去對(duì)照實(shí)際輸出注入 1 比特錯(cuò)誤期望 corrected error count 1uncorrectable error count 0注入 2 比特錯(cuò)誤期望 uncorrectable error count 2或者按測(cè)試向量定義的計(jì)數(shù)口徑來對(duì)應(yīng)如果注入 1 比特錯(cuò)誤日志卻報(bào)了 uncorrectable error說明解碼邏輯存在缺陷測(cè)試失敗。所以當(dāng)你看到“顯示2”時(shí)先不要急著判斷“產(chǎn)品壞了”而是要回到測(cè)試向量確認(rèn)這次注入的錯(cuò)誤模型到底是多少比特、預(yù)期計(jì)數(shù)是多少。我見過工程師拿著測(cè)試報(bào)告說 ECC 功能掛了折騰半天發(fā)現(xiàn)是測(cè)試程序把注入錯(cuò)誤數(shù)配錯(cuò)了虛驚一場(chǎng)。4.4 SEC-DED 的能力邊界測(cè)試覆蓋率必須考慮還有一個(gè)很重要的邊界認(rèn)知SEC-DED 不是萬能的。它保證的是“糾正 1 個(gè)比特錯(cuò)誤、檢測(cè) 2 個(gè)比特錯(cuò)誤”但 3 個(gè)及以上比特同時(shí)出錯(cuò)時(shí)存在某些組合會(huì)讓算法誤判為“無錯(cuò)”或“單比特錯(cuò)誤”。這意味著在做 MBIST ECC 測(cè)試時(shí)不能只測(cè)一兩個(gè)固定錯(cuò)誤注入點(diǎn)而要根據(jù)產(chǎn)品的可靠性目標(biāo)合理設(shè)計(jì)錯(cuò)誤注入向量并且在覆蓋率報(bào)告里明確標(biāo)注“SEC-DED 的能力邊界”。對(duì)于車規(guī)、工規(guī)等對(duì)可靠性要求極高的場(chǎng)景往往還會(huì)疊加額外的多比特錯(cuò)誤檢測(cè)機(jī)制或者要求固件周期性做內(nèi)存自檢把漏檢風(fēng)險(xiǎn)壓到可接受范圍內(nèi)。5. SAP ECC 年結(jié)同名縮寫下的另一個(gè)高頻需求5.1 先糾正一個(gè)誤解SAP ECC 和糾錯(cuò)碼沒關(guān)系聊完半導(dǎo)體和服務(wù)器那攤事我們回到企業(yè)管理系統(tǒng)??吹健癝AP ECC 年結(jié)”這個(gè)詞如果你下意識(shí)想到內(nèi)存糾錯(cuò)那說明你還沒被上一個(gè)章節(jié)的上下文“洗腦”成功笑。SAP ECC全稱 ERP Central Component是 SAP ERP 產(chǎn)品的核心組件。它負(fù)責(zé)公司財(cái)務(wù)、物料、生產(chǎn)、銷售這些核心業(yè)務(wù)流程。在 SAP 的世界里ECC 指的是軟件系統(tǒng)不是硬件技術(shù)。所以當(dāng)你所在的團(tuán)隊(duì)提到“ECC 在做年結(jié)”不要去服務(wù)器機(jī)房里找內(nèi)存條那是財(cái)務(wù)系統(tǒng)的事。5.2 年結(jié)的三件核心事SAP 年結(jié)Year-End Closing的核心目標(biāo)是把本財(cái)務(wù)年度的業(yè)務(wù)數(shù)據(jù)干凈地過渡到下一個(gè)會(huì)計(jì)年度。這里有三件大事財(cái)務(wù)同事應(yīng)該很熟。第一余額結(jié)轉(zhuǎn)??傎~科目里資產(chǎn)、負(fù)債、權(quán)益類科目的期末余額會(huì)進(jìn)入新年度作為期初余額損益類科目收入、費(fèi)用則會(huì)結(jié)轉(zhuǎn)到一個(gè)專門的留存收益科目把本年度利潤(rùn)“落袋”。這一步做不對(duì)新年度的報(bào)表基礎(chǔ)就塌了。第二資產(chǎn)會(huì)計(jì)年結(jié)。啟用固定資產(chǎn)模塊的企業(yè)需要先完成折舊計(jì)提、資產(chǎn)報(bào)廢或銷售的過賬然后執(zhí)行資產(chǎn)余額結(jié)轉(zhuǎn)和年度開關(guān)設(shè)置。資產(chǎn)年結(jié)和總賬年結(jié)之間有嚴(yán)格的先后順序順序錯(cuò)了會(huì)出現(xiàn)期末余額對(duì)不上的情況。第三未清項(xiàng)目處理。采購(gòu)訂單、銷售訂單、發(fā)票校驗(yàn)這類跨年可能的未清項(xiàng)需要在年結(jié)前確認(rèn)是結(jié)清還是允許跨年延續(xù)避免把上一個(gè)年度的歷史包袱帶進(jìn)新年度。5.3 年結(jié)前的準(zhǔn)備清單根據(jù)我接觸 SAP 項(xiàng)目時(shí)被財(cái)務(wù)同事拉著一起處理年結(jié)問題的經(jīng)歷年結(jié)前至少要把這幾件事確認(rèn)清楚舊年度所有會(huì)計(jì)憑證都已過賬當(dāng)月和當(dāng)年度月度結(jié)賬全部完成資產(chǎn)模塊的折舊已經(jīng)計(jì)提完畢資產(chǎn)卡片沒有未處理的異常狀態(tài)采購(gòu)、銷售模塊的未清項(xiàng)已梳理明確哪些結(jié)清、哪些跨年生產(chǎn)環(huán)境執(zhí)行前先備份數(shù)據(jù)庫(kù)年結(jié)操作不可逆必須有可回滾的方案有條件的話先在測(cè)試環(huán)境完整跑一遍年結(jié)流程。之所以列這些是因?yàn)槟杲Y(jié)的失敗大多不是“系統(tǒng)壞了”而是前置條件沒滿足。數(shù)據(jù)不齊、憑證沒過賬、資產(chǎn)卡片狀態(tài)異常這些都會(huì)讓年結(jié)程序卡在某個(gè)環(huán)節(jié)。5.4 年結(jié)報(bào)錯(cuò)大概率不是系統(tǒng)問題我觀察到一個(gè)規(guī)律SAP 年結(jié)報(bào)錯(cuò)多數(shù)時(shí)候不是“系統(tǒng)壞了”而是主數(shù)據(jù)或業(yè)務(wù)流程狀態(tài)不滿足條件。比如某張憑證沒有過賬、某個(gè)資產(chǎn)卡片狀態(tài)不對(duì)、某個(gè)未清項(xiàng)金額異常。報(bào)錯(cuò)信息只是把問題暴露出來。所以遇到年結(jié)報(bào)錯(cuò)時(shí)正確做法是去看錯(cuò)誤消息對(duì)應(yīng)的 SAP Note、查業(yè)務(wù)數(shù)據(jù)、核對(duì)流程節(jié)點(diǎn)是否滿足前置條件而不是一遍又一遍地重跑同一個(gè)年結(jié)程序。重跑十次結(jié)果不會(huì)改變。至于具體的菜單路徑、事務(wù)代碼、SAP Note 編號(hào)不同版本ECC 6.0、S/4HANA差異很大執(zhí)行前務(wù)必以你系統(tǒng)版本對(duì)應(yīng)的官方文檔為準(zhǔn)這里不展開羅列。提示如果你在搜索“SAP ECC 年結(jié)”時(shí)被一堆“內(nèi)存糾錯(cuò)”的教程帶偏過現(xiàn)在你應(yīng)該知道這里需要的不是換內(nèi)存條而是去翻 SAP 的實(shí)施文檔和財(cái)務(wù)模塊的結(jié)賬清單。6. 被“ECC”這個(gè)名字坑過幾次之后我的三條經(jīng)驗(yàn)6.1 內(nèi)存排障順序別搞反在內(nèi)存 ECC 排障這件事上我收到的教訓(xùn)是順序決定效率。先看日志再清灰塵然后跑壓力測(cè)試最后才換硬件。很多人上來就換內(nèi)存條結(jié)果新內(nèi)存還報(bào)錯(cuò)才發(fā)現(xiàn)是插槽問題。內(nèi)存條本身屬于失效率相對(duì)低的器件大量 UE 報(bào)警經(jīng)過排查后真正是內(nèi)部顆粒物理?yè)p壞的只是一部分接觸不良、固件 bug、電源質(zhì)量差這些因素更多見。不按順序排查很容易把一個(gè)簡(jiǎn)單的接觸問題升級(jí)成一次高成本的硬件更換。6.2 ECC 測(cè)試?yán)镂也冗^的兩個(gè)坑做 MBIST ECC 測(cè)試驗(yàn)證時(shí)我踩過兩個(gè)實(shí)打?qū)嵉目印5谝粋€(gè)是忘記在功能性測(cè)試模式里關(guān)閉錯(cuò)誤計(jì)數(shù)導(dǎo)致正常的預(yù)期錯(cuò)誤也被累加進(jìn) ECC fail測(cè)試結(jié)論直接不成立。第二個(gè)是故障注入點(diǎn)選在了 ECC 邏輯旁路保護(hù)覆蓋不到的位置測(cè)出來的結(jié)果根本不能說明編解碼器好壞。后來我養(yǎng)成了一個(gè)習(xí)慣在寫測(cè)試向量之前先把“數(shù)據(jù)位-校驗(yàn)位-錯(cuò)誤注入點(diǎn)”的映射關(guān)系表畫出來逐個(gè)核對(duì)注入點(diǎn)是否真正經(jīng)過編解碼路徑。這個(gè)過程雖然枯燥但能避免最蠢的返工。6.3 遇到“同詞不同義”先對(duì)語境再動(dòng)手最后一條經(jīng)驗(yàn)不局限于 ECC適用所有技術(shù)名詞遇到“同詞不同義”先確認(rèn)語境再動(dòng)手。跟硬件同事說“ECC”他默認(rèn)是內(nèi)存糾錯(cuò)跟 SAP 顧問說“ECC”他默認(rèn)是 ERP 系統(tǒng)跟密碼學(xué)工程師說“ECC”他大概率想到橢圓曲線。同一個(gè)縮寫差之毫厘謬以千里。多問一句“你指的是哪個(gè) ECC”在客戶現(xiàn)場(chǎng)能省掉一晚上的無用功。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
江苏少妇性BBB搡BBB爽爽爽 | 99精品久久久久| 天天综合天综合| 色色色区| 久久99激情五月天| 中文毛片无遮挡高潮免费| 综合激情九月婷婷,激情综合婷婷中文字 | 国产精品久久久久久久久久| 久久 婷婷 五月天| 色综合激情| 99热这里都是精品| 色婷婷影视99| j五月香在线| 天堂综合久| 日本激情ⅩXX免费视频| 26.uuu丁香五月婷婷| 97久久超碰| 丁香婷婷基地| 国产4P视频精品五区| 九九色热| 色播播之激情五月婷婷| 五月丁香网视频| 天天色天天操天天射| 色色日本| 色色色色色网站| 婷婷五月在线免费| 日本精品99网站| 国产激情久久| 久久综合五月天| 岛国av网站| 狠狠干在线视频| 热久久91| 黄网网站在线播放| 激情五月婷婷综合| 丰满人妻一区二区三区| 噜噜五月天综合| 色色色色网色色网色色| 99热久草| 欧美丁香婷婷五月天| 欧美A级网站| 欧美激情 日韩无码 婷婷 五月天| 亚洲操逼网| 色婷婷天堂| 天天操电影院色狼性av| 九九色综合九九色| 99色| 五月婷中文字幕| 婷婷深爱五月| 激情小说在线视频| 性生活视频98791| 人人插9| 五月丁香婷婷色啪| 亚洲区在线| 做爰丰满少妇1313| 在线观看日韩12345区| 91久久久久久久| 色欲丁香| 99热色精品| 婷婷色在线观看| 五月婷婷日| 五月婷婷日| 色五婷婷在线视频| 97人人超| 精品夜夜澡人妻无码AV| 97碰碰九九视频| 亚洲第一成人无码A片| 来吧亚洲综合网| 草草视频91| 色色五月婷婷| 乱精品一区字幕二区| www.久久| 人操91在线| 久久婷五月影院| 99热超碰人| cao视频,现在观看| 91精品综合久久久久久五月丁香| 色六月 婷婷| 婷婷丁香五月天激情四射| 国产黄色在线| 日本九九视频| 激情综合婷婷五月| 激情五月天小说| 美国色五月天婷婷资源站| 色色哒五月婷婷六月丁香| 成人婷婷五月天| 激情www.98com| 看久久性爱视频| 丁香五月天在线观看| 六月色婷婷| 久久久精品AV| 狠狠操狠狠色| 91操在线视频| 亚洲国产成人裸舞| 色久女| 开心五月深爱五月| 97碰免费精采视频| 日逼免费视频| 综合色99| 丁香婷婷综合激情五月色| 97视频91| 五月丁香六月激情综合欧美| 996er热| 99热国品| 99视频精品| site:picc-up.com| 久操大香蕉| 人妻中文在线| 丁香五月婷婷亚洲综合精品| 婷婷五月天免费视频| 区美毛片子| 极品人妻VIDEOSSS人妻| 综合色五月天| 四月婷婷五月丁香| 婷婷色五月大香蕉在线| 激情涩涩网| 婷婷五月天播播| 天天操比比| 婷婷五月丁香激情| 久热2025无码| 91久久婷婷| 婷婷丁香六月天| 色五婷婷| 婷婷大乡焦噜噜| 国产在线aaa片一区二区99| 99久免费视频| 婷婷丁香五月综合网上| 影音先锋日本三级资源| 激情开心五月婷婷| 久久香蕉影院| 丁香亭亭久久| 91精品久久久久久综合五月天| 五月婷婷黄网站大全| 天天射天天插天天干| 大香蕉手机视频| 在线播放 精品| 97操视频| 亚洲第一第二网站| 亚洲AV无码成人精品区电影网| 九玖视频这里只有精品| www.99热视频| 色婷婷性爱| 天天干天天 亚洲| 丁香五月天堂| 婷婷综合亚洲| 婷久久| 色婷婷狠狠18yy| 亚洲午夜精品久久久久久人妖| 久久这里只有精品热在99| 日韩在线观看网址| 婷婷五月天激情AV影院| 天天综合区| 伊人国产婷婷五月天| 色色a| 日日噜噜夜夜狠狠久久丁香六月| 99色亚洲| 六月丁香五月婷婷首页| 影音先锋一区| 日韩xx在线| 丁香婷婷视频| 久久精品综合色| 亚洲爱婷婷| 99热九九在线| 九热视频免费观看| 六月丁香av| 亚洲xx网| 天天插综合| 丁香五月久久| 97久久人人人干| 久久久婷丁香五月| 99热欲| 激情婷婷色小说| www婷婷| 狠色综合网| 九九热精品| 6 9式性爱视频在线播放| 五月综合影院| 99久久終合| 内射丰满人妻| 99热九九在线| 色色色.com| 人妻丰满精品一区二区A片| 99亚洲综合| 国产精品成人在线| 色五月婷婷丁香五月| 丁香婷婷激情四射五月| 色婷婷免费视频| 九九九热精品| 97精品人人A片免费看| 思思99re这里只有| 91在线操逼视频| 婷婷在线免费| 丁香五月婷婷啪| 99免费| 色宗合,宗合网| 五月婷婷黄色网址| 国产操碰| 欧美色小说婷婷| 大香蕉久久久久久久久| 伊人91| 丁香五月久久综合| www.99热视频| 91九色中文| 91人人爽狠狠狠| 精品无码久久久久久久久| 高清无码中文字幕aVDV| 99九九久久| 国产亚洲精品久久久久久久久动漫 | 六月激情网| 殴美激情综合网| 色丁香五月天射婷婷爱婷婷| 久久激情婷婷| 久久女婷| 婷婷99中文字幕| 高清无码 一区 二区 三区| 特黄三级又爽又粗又大| AA丁香综合激情| 好好干av| 婷婷色五月激情强奸四射| 丁香色五月 97干| 久久久久er热| 26UUU精品一区二区Com| 久久er免费视频| 热久久这里只有三级视频| 97色婷婷| 99热 这里只有精品 国产 日韩| 成人.在线日韩| 日日干天天| 天天天天天天天干| 色五月色开心开心五月| 涩五月婷婷| 免费无码毛片一区二区A片| 这里只有精品视频看看| 激情 婷婷| 色色五月天婷婷| 俺去也五月| 日本色婷婷综合| 丁香五月婷婷偷拍| 丁香五月综合久久| 激情婷婷黄色五月 | AV国产有码| 色婷婷操逼| 五月成人网天天| 久久五月天婷婷| 色九九中文字幕| 成人免费120分钟啪啪| www.五月婷婷.com| 99热最新精品| 激情综合五月天| 91色情播放| 久久亚洲精品成人无码网站导航| 婷婷丁香社区网| 去色色五月天| 日韩天堂久久| 精品导航在线x不卡| 综合狠久久| 99久久久| 91久久婷婷| 婷婷五月婷婷| 欧洲综合视频| 99爱精品| 无码激情AAAAA片-区区| 五月天天爽| 狠狠五月天婷婷激情网。| 国产六月婷婷| 天天透天天摸天天舔| 超碰91在线| 久久多色| 久久机热这里只有精品免费视频| 男人天堂99| www..999热久| 久久网站免费亚洲| 五月丁香婷婷激情| 天天做天天爱天天要| 99er视频在线| 丁香婷婷噜噜| 六月婷婷综合| WWW.桔色成人.COM| 色五月激情问网站| 亚洲在线操| www久| 日日爱678| 99热九九这里只有精品| 婷婷激情鹿城五月天| 在线五月色播| 日本丁香五月| 99精品在这里| 一级黄在线| 五月久久综合| 久久综合中文字幕| 丁香五月激情天AV无码| 婷婷丁香人妻天天久久| 久久99网站| 99热亚洲精品| 九九无码| 丁香五月天视频| 色婷婷激情Av久久久| 性爱111111| 狠干综合| 91丨九色丨首页| 99情色五月天| 色色激情五月天| 久色视频首页| 五月婷婷综合网| 99热这里是精品| 免费视频WWW在线观看网站| 91久久久久久久久久18| 久久综合影院| www.91久久| 五月视频日本免费观看| 五月丁香婷婷AV| 五月丁香六月婷| 久久小说网| 婷婷成人在线| 青草久久五月婷伊人| 五月丁香亚洲五月| 色九区| av中文网| 九九99在线观看视频| 九九机热| 极品少妇高潮啪啪AV无码| 亚洲六月色| 色你久久| 深夜A片| 超碰成人免费| 欧美日韩国产日本精品四虎网网站物| 伊人狠狠狠综合| 激情五月天啪啪| 成 人片 黄 色 大 片| 亚洲无码黄色| 成人午夜免费电影| 婷婷精品性性性性性性性| 深夜男女福利刺激影院一区完整| 亚洲激情六月丁香| www.夜夜操.con| 婷婷亚洲五月| 思思热99er| 操操操www.com| 色五月涩涩婷婷| 国产精品久久久久久久久久| 婷婷99狠狠躁天天躁中文| 日日操,日日爽| AV在线大香蕉| 国产成人综合在线| 亚洲AV人人操| 黄色一级影片| 高清无码网址| WWW·色色色·COM| 天天爽天天摸天天爱| 99国产精品久久久久久久久久久| 99热91| 色欲影香| 国产成人AV在线播放| 可以免费看AV网站| 丁香啪啪中文字幕| 五月丁香做爱视频| 99精品久久久久久| 久久久五月四色| 99热这里只有精品8| 99热综合网| 另类激情综合| 久色五月天| 91热在线| 久久人人看| 欧美色色色色色色色色色色| 狠狠色噜噜色狠狠狠综合色| 深爱激情网噜噜色| 665566 无码| 色高清无码视频| 丁香五月天堂网| 女性自慰系列第五页| 91精品91久久久中77777| 伊人婷婷色| 五月丁香在线| 婷婷五月天黄色网址| 婷婷狠狠操| 激情丁香五月天图片| 色综合色综合色综合| 日韩av免费版| 99在线精品视频| 婷婷久久五月天中文字幕在线观看| 婷五月天天| 99热精品无码| 亚洲性色XXXXX| 六月丁香VA| 色色综合热| 啪啪激情网站| www.久9| 丁香成人五月天| www狠狠com| 久9免费视频| 丁香五月www| 五月婷婷激情日本| 色VA| 99热免费18| 久热免费| 婷婷色色狠狠| 99热九九九九| 97人人操人人爽| 丁香蜜臀黄色婷婷五月天| 丁香五月激情综合| 五月丁香六月婷婷欧美综合| 大香蕉久久婷婷| 四色99久久| 亚洲综合丁香五月| 五月婷婷婷| 日本啪啪天堂| 99视频这里只有久久精品 | 亚洲黄网在线| 超碰97干| 26UUU在线观看| 丁香五月WWW| 婷色五月| 夜夜操夜夜爽| 9九色首页| 一级性爱视频| 天天综合影院| 亚洲中文字幕网| 97亚洲视频在线| 欧美va在线| 中文激情网| 亚洲操女| 天天爱天天爽| 人人草公开操| .肏屄视频一区二区| 黄网免费看| 三级大香蕉网| 久久五月天精品视频| 99久99久| 国产这里只有精品| 9久久婷婷国产综合精品性色| jiujiu无码五区| 在线视频另类| 99久久玖玖| 激情五月天婷婷免费观看| 4438全国最大视频成人网站在线观看| 婷婷色婷婷| 婷婷五月天国产| 日日操夜夜爽天天天| 久久最新色| 伊人99久久| 色五月在线观看| 五月草视频| 六月色色综合| 欧美va精品va老师va| 色五月在线综合| 天天综合精品| 国产精品美女| 97色干| 亚洲va成人va成人va在线观看| 色久婷婷网| www999日韩精品| 另类婷婷五月天啪帕帕| 人人插操| 欧美内射AAAAAAXXXXX| 欧美色色色| 亚洲综合五月天| 婷婷六月成人| 婷婷色色综合| 国产日产亚系列精品版优势| 激情第四色| www.色综合.com| 丁香五月激情综合在线观看| 成人AV在线网站| 九九人妻福利| 南京搡BBBB搡BBBB| 五月深爱婷婷| 亚洲成人免费电影| 九九综合| 九九久久综合| 99热视| 精品99视频| 色 五月 天 婷婷 丁香 九月| 婷婷字幕在线| 日韩无码系列| 99久超碰| 婷婷中文字暮| 大香婷婷| 91人操| 九九九九综合| 九九热这里有精品视频| 婷婷97狠狠干| 五月婷婷六月激情网| 九九视频精品在线免费 | 欧美激情VA永久在线播放| 思思精品热在线| 天天干天干| 天天爽天天摸天天爱| 国产熟女日日骚五月丁香爱| 夜夜夜夜夜操| 丁香五月综合婷婷| 五月婷婷亚洲| 综合久久影院| 熟女人妻一区二区三区免费看| 少妇高潮呻吟A片免费看软件| 国产特级毛片AAAAAAA高清| 色综合色色| 99热6色| 草AV9999| 婷婷五月天xxx| 六月丁香婷婷尤物| www.婷婷五月天| 亚洲综合婷婷| 国产黄大片在线观看画质优化| 在线观看视频1区| 日日噜噜久久婷婷五月天| 成人片在线免费看| 99re热精品在线视频| 丁香五月婷婷动漫视频| 久久99这里只有精品视频| 九热视频| 九九色热| 婷婷五月天VI| 欧美日韩成人在线观看| 精品无码人妻一区| 9九色首页| 婷婷社区五月天| 字幕网AV中文字幕| 99黄色在线视频精品熟女| 久久永久网址| 婷婷五月天欧美图片在线播放电驴| 婷婷五月在线观看| 九九热精品| 丁香六月综合| 国内裸舞二区| 五月天天综合| 黃色三级三级三级三级 qixing300.shrkbk.com www.jinbozs.com tianmiaosw.com | 任你艹| 伊人大香蕉毛片| 91超碰在线观看| 最新精品视频99| 亚洲色五月天在线| 久久综合影院| 色综色网| 五月婷婷丁香啪啪| 99无码| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 这里只有精品在线视频在线观看| 能看的AV| 国内一级精品| 常久最新免费的色吊丝| 99色色| 9l视频自拍9l视频自拍九色学生| 99热在线99| 五月婷六月婷婷| 九月丁香| 亭亭色色五月天| 中文乱子伦视频| 国产精品人成A片一区二区| 99久久97久久欧美综合网| 色 五月婷婷基地| 久re热视频| 182无码| 亭亭丁香aV| 欧美五月婷婷| 成人在线观看一区| www,婷婷| 欧美天堂婷婷日韩| 午夜色婷婷| 99资源人人| 第四色婷婷日本| 这里只有精品久久| 色约约视频一区二区三区四区五区 | 久婷五月| 欧美色色色色色色| 99视频精品在线| 激情五月天影院| 狠狠爱婷婷爱| 婷婷五月丁香欧洲| 97碰碰视频| 五月天最新网| www.激情com| 婷婷五月激情在线视频| 草久私拍| 亚洲色情在线| 另类丁香综合| 日本高清综合网五月丁香| 国产欧美大香蕉一区| 五月丁香狠狠| 991自拍视频| 婷婷五月天堂一本在线| www久久久久久| 天天干狠狠| 五月婷婷色在线| 激情五月婷婷在线区| 欧美搡BBBBB摔BBBBB| 国产欧美婷婷五月| 五月婷视频| 五月婷综合网| 国色天香成人网| 天堂五月婷婷| ai97re99一本| 国产五月天激情小说| 国产看真人毛片爱做A片| 婷婷丁香一月| 午夜激情四射影院| 五月天激情网开心网| 婷婷丁香综合在线| 丁香五月AV| 97久久视频| 成人日韩欧美| 午夜电影网VA内射| 激情久久综合网| 激情五月天婷婷| 中文字幕在线资源| 久久婷婷五月综合色奶水99啪| www.99热视频| 亚洲乱码日产精品BD| 开心综合激情综合| 久久91久久91色欲精品| 99亚州综合精品成人网| 爱婷婷久久视频| 欧美在线视频9| 五月婷婷激情综合网 | 久久亚洲婷婷| 另类小说激情五月天| 狼友超碰| 大伊香蕉精品视频在线| 很很干天天干| 中文网AV| 婷婷综合另类| 五月天另类视频| 国产成人综合在线| 99燥99日| http://www.sd-xiangsu.com/| 色综合丁香婷婷| AA片在线观看视频在线播放| 五月天婷婷永久免费视频| 98热精品| 六月色婷婷| 可以看的av网站| AV在线免费播放| 26uuu欧美| 九九九九这里只有精品| 久久老码第一| 五月天激情黄色网址| 开心五月天激情网| A久久| 3p久久| 亚洲欧洲中文日韩久久AV乱码| 激情五月天 婷婷| 欧美五月丁香在线| 色五月婷婷五月天激情综合| 99这里只有精品视频| 五月丁香啪啪激情| 国产99热| 韩国19 主播内部福利vip免费播放| 噼里啪啦在线观看免费完整版视频 | 五月丁香AV在线| 色5月婷婷| 久久九九囯产| 风流少妇A片一区二区蜜桃| 亚洲综合色五月| 激情开心五月天| 天天草天天爽| 99热这里只有精品搜| 99无码免费视频| 亚洲AV成人无码电影| 亚洲亚洲人成综合网络| 99免费在线视频| 色久影院| 婷婷五月激情视频在线| 久久婷婷欧美| 色国产五月| 天天色综合天天| 欧美日本黄色| 日本色色网站| 岛国AAAV| 思思热在线| 丁香婷婷网| 另类图片激情五月| 久久色五月天| 久久99激情| 色五月婷婷五月| 五月婷色| 99精品久久| 大香蕉网站,大香蕉综合| 日韩美女羞羞网站在线观看| 婷婷在线中文字幕| 久99| 亚洲无AV在线中文字幕| 狠狠综合| 97在线视频观看| 99综合免费视频| 精久久色| 99热在线观看这里只有精品| 综合伊人狠狠| WWW,五月| 伊人婷婷色激情丁香| 伊人成人宗合网| ji'qing'luan'ren'lun| 激情五月婷婷在线区| 色综合色综合色综合高潮| 五月色丁香综合| 人妻乱码久久久| 人色五月天婷婷| 这里只有精品99www| 丁香五月婷婷88在线| 亚洲激情视频网| 激情五月丁香婷婷夜夜操| 五月丁香婷婷基地| 欧美va视频不用播放器的va视频网| 九九综合精品| 色五月成人在线| 丁香婷婷婷五月| 五月丁香六月综合激情| 婷婷久久五月| 涩涩五月天| 中文字幕在线免费| 激情五月天婷婷| 天堂成人A片永久免费网站 | 26UUU欧美激情一区二区| 五月丁香香蕉| 性色婷婷| 成人国产欧美大片一区| www.玖玖婷婷在线| www.99精品视频| 91精品丝袜久久久久久| 99热只有精品综合| 深爱激情网噜噜色| 9九色首页| 99免费热视频在线| 久久综合五月情| 天天综合网色欲香| 无码色综合| 久久永久网址| 99国产这里只有精品| 丁香五月色色| 五月久久综合| 婷婷色五月丁香六月欧美啪| 综合热无码| 五月婷婷天堂| 天天激情站| 4399在线日本A片| 色婷婷色情| 永久99免费视频网站| 九九九九九九九热| 婷婷五月天在线视频网站| 大香蕉综合在线| 免费啪啪啪网站 | 亚洲九九九九| 婷婷五月天激情基地| 久久9久| 亚洲精品第一国产综合亚AV| 如何安全看伊人婷婷| 婷婷五月视屏| 色婷婷成人做爰A片免费看网站| 岛国资源站| 日日色五月天| 五月婷啪| 久久伊人婷| 五月丁香六月在线欧美| 丁香五月天天高清在线| 日日日日日| 97干综合网| 天天摸人人摸| 色一情一乱一伦一区二区三区| 久久男人网婷婷| 五月丁香日本在线视频观看| 五月丁香在线观看| 六月丁花香啪啪激情欧美| 久久久久妻| 五月丁香激情综合啪啪| 国产在线网址1| 亚洲色图81p| 天天射色五月天| 精品夜夜澡人妻无码AV| 六月99天天婷婷激情综合| 九九这里有精品| 激情综合五月丁香六月婷婷| 人妻AV在线| 色香久久| 97婷婷狠狠久久综合9色| 天天做 天天爱| 成人做爰A片免费看视频| ww亚洲ww在线观看| 婷婷色丁香五月| 婷婷色六月| 色五月av伊人| 亚洲无码99| 久久久久久久五月| 丁香五月亚综合图片| 曰本久久女| 日日夜夜噜噜爽爽| 熟女色色一区二区| 思思热在线精品视频网站| 九九亚洲| 久久婷婷精品| 激情小说视频图片| AV中文在线| www.激情五月| 五月天婷婷六月激情网| 97干在线| 国产又黄又爽又激情不遮挡视频在线观看| 五月天久久久| 五月丁香少妇A| 国产精品扒开腿做爽爽爽A片唱戏| 久久婷婷综合网| 中文字幕在线播放视频| 婷婷五月色花丁香社区| 丁香六月婷婷综合缴| 日韩肏屄网| 九九热99免费视频| 91日本在线观看| 丁香五月电影| 婷婷五月丁香在线观看| 91九色中文字幕女在线观看| 色婷婷19| 五月天婷婷激情| \\五月天婷婷激情| 99精色| 色五月涩涩婷婷蜜桃| 欧洲电影在线观看免费版英语版 | 丁香五月激情综合| 久久色在线视频| 亚洲亚洲人成综合网络| 欧美婷婷五月| 色婷婷亚洲综合av| 夜色综合网| 激情五月天婷婷播播久久综合91| 六月色播| 久久六月婷婷| 五月婷婷激情综合网| 九一牛视频探花| www..999热久| 91热er| 日逼影音先锋AV男人资源站| 久久人人九九| xx色综合| 日hao1区| 欧美狠狠色| 色综天天综合| 97碰在线视频| 天天综合天天玩夜夜玩天天玩夜夜玩 | 日本婷久久| 国产这里只有精品| 五月婷婷激情久久| 午夜丁香| 九九在线视频| 久久久五月四色| 热九九精品| 97精品综合| 99热在线观看免费| 9久热| 婷婷五月另类网站| 丁香六月欧美| 激情五月婷婷在线| 97干在线| 67194线路二在线观看| 婷婷丁香宗合888| 99综合视频| 色婷婷aV四虎| 狠狠五月天| 五月丁香天天| 五月婷啪| 丁香婷婷五月激情四射网| 黄色AAAAA| ,99视频久久| 亚洲欧美综合7777色亭亭| 狠狠丁香| 99热这里只| 五月天丁香综合久久国产| 蜜乳久AV| www.久热| 超碰二区| 国产午夜一区二区三区| 激情伊人六| 1024国产| 日本久草福利| 激情六月天| 亚洲狠狠干| 激情久久 婷婷| 99久久国产宗和精品1上映| 中文字幕av在线| 久热这里只有精品99re| 狠狠干在线视频| 婷婷五月激情在线| 国产婷婷色综合AV蜜臀AV| 婷婷综合网| 婷婷五月色激情欧美激情| 狠狠草综合网| 激情综合网五月在线播放| 高清国产AV| www.韩日视频| 婷婷五月天天| 久久久天堂国产精品女人| 天天在线XXX| 免费99情趣网视频| 丁香五月婷婷香| 无码少妇高潮喷水A片免费| 天天狠天天叉| 婷婷五月电影院| 一区二区乱码视频| 中文久久婷婷| 九九热在线视频| 五月色综合网| 综合五月婷婷| 婷婷99狠狠躁| 久久久精品色| 欧美国产一区二区三区| 97婷婷色| 五月婷亚洲精品AV天堂| 婷婷色影音天| 天天色中文字幕女优AV| 99自拍视频| 狠狠操狠狠爱| 天堂成人A片永久免费网站| 久久99精品视频| 天天射影院| 久草五月婷婷| 丁香五月影院| 五月天激情Av| 激情五婷网| 欧美综合五月丁香六月婷| 丁香五月综合激情啪啪| 在线视频另类| 色99网| 激情五月,色五月| 大香网伊人久久综合| 五月天激情综合在线| 综合欧美五月婷婷| 在线不卡视频| 在线视频色五月| 玖玖爱综合网| 欧美群妇大交乱婬网| 天天草婷婷五月| 这里只有精品视频看看| 色婷婷色五月天| 开心激情综合| 五月天国产| 在线中文字幕av| 这里只有精品无码| 99九九精品视频| 5月婷婷激情在线| 色五月中文网| 激情综合亚洲| 梁铮版蜘蛛女在线观看| 99视频久久免费视频| 婷婷六月偷拍| 五月天天堂久久| 五月丁香色婷婷色| 久久五月天大美女| 五月丁香六月综合激情网| 99视频在线精品免费观看2| 激情五月少妇| 成人 在线 日韩| 亚洲精品久久久久AV无码| 丁香五月婷婷国产在线| 亚洲春色奇米影视| 99人人干人人操| 亚洲国产成人在线| 五月天小说激情| 思思热在线观看| 五月丁香六月婷| 97干在线免费| 色五月天影视| 伊人六月无码视频| 狠狠五月天| 色五月婷婷五月天| 大地9中文在线观看免费高清| 清纯唯美 激情四射| 六月婷欧美| 激情婷婷综合| 97干在线播放| 狠狠爱综合| 国产成人AV| 五月丁香另类网| www狠狠爱com| 久久网站免费亚洲| 99热99干| 亚洲精品婷婷| 日本123区日韩欧美不卡在线看| 天天操夜夜玩!| 99免费视频| 怡红院一二三| 激情六月婷婷| 激情综合另类| 久久久久98| 人妻激情视频| 丁香五月天五码婷婷| 久久色五月天| 99久久综合| 操逼六区| www.激情五月天| 久久久久久人妻| 色播五月综合网| 99热免费精品热久久66| 久久这里有精品| 99热国品| 激情深爱五月婷婷| 日本色色网站| 大香久久综合网| 欧美日韓成人亚洲精品另类| 色热久| 亚州精品成人片| 99精品视频免费在线播放| 日本一道久久| 亚洲无码成人网| 婷婷中文字暮| 深爱激情六月| Av九九| 91人人妻人人操| 色播丁香婷婷五月激情| 国产精产国品一二三在观看| 婷婷色导航| 婷婷色播六月无码| 九热视频| 疯狂做受XXXX高潮A片动画| 青草青草久热这里只有精品| 久久精品系列| 99热久久日本| 婷婷色五月色| 9在线9在线婷婷在线国产| 丁香五月欧美色综合| 国产精产国品一二三在观看| 另类小说五月天| 超碰大香蕉网| 色六月婷婷| 欧美在线97| 9有码中文| 日韩成人AV在线播放| 99九九中文字幕视频| 日本色爽| 婷婷D区| 色婷婷激情视频| 国产成人AV| 欧美综合丁香网| 亚洲V国产V欧美V久久久久久| 色五月婷婷天天干| 91精品久久久久久77777| 思思视频这里是精品| 最近中文字幕2019视频1| 夜夜天天久久婷婷| 亚洲性爱AV在线| 热99热9| 欧美精品久| 99re6久热只有精品6在线直播| 97婷婷在线| 激情六月丁香| 天天日天天舔天天摸| 97av在线视频| 丁香五月婷婷乱| 婷久久高清| 丁香五月天激情综合网| 激情五月婷色| 久99热在线观看| 久热这里只精品| 人妻内射视频| 九九热精品99| 五月丁香色播| 亚洲国产色婷婷| 国产色五月| 91丨九色丨熟女丰满| 亚洲天天操| 婷婷五日b| 乱岳熟女50岁| 九九爱激情| 色噜噜97视频在线观看| 99九九视频| 久久视这里只有精品| 色五月 婷婷, 大香蕉| 人人摸人人搞| 五月婷婷AV| 亚洲乱码日产精品BD| 五月天婷婷基地| 色综合久久综合| 69色婷婷| 激情婷婷丁香色五月| 91精品久久久久久| 五月色丁香婷婷中文字幕| 欧美性猛交99久久久久99按摩| 久久这里只有精品网| 日本三级片片| 日韩aaa| 亚洲成人va| 婷婷月五天在线在线看| 99久久超级| 任你爽免费视频| 婷婷丁香69精华| 天天日日| 色五月婷婷综合| 丁香五月亚洲天堂| 五月丁香亭亭操逼| 亚洲激情四射色| 在线成人网址| 天天肏天天爽夜夜爽| 九九九色综合| 99热 日韩| 丁香五月播播| 99在线小视频| 五月在在观看| 五月激情网站| 久久婷婷丁香花综合网| 欧美成人va| 婷婷成人五月天一区| 日韩AV中文字幕在线| 中国丰满熟女A片免费观| 在线另类视频| 97五月天婷婷| 思思热闹这里只有精品| 99热插| 丁香五月天亚洲综合| 99免费视频| 婷婷丁香97| 五月欧美色色五月| 狼人久草| 九色 在线| 日本成人内射| 96精品成人无码A片观看金桔 | 狠狠操狠狠操| 五月丁香在线国产| 看婷婷五月天网| 色99色| Av免费网站在线| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 91日韩在线| 99视频在线播放大全| 日本色狠狠| 丁香五月婷在线| 5月婷婷6月丁香aV| 69精品人人人人| 九九99热| 综合 蜜月 婷婷| 婷婷久久色五月婷婷久久久| 成人精品视频99在线观看免费| 欧美色五月| 色热久| www色五月| 婷婷操久久| 99色色| 天天做天天爱综合| 五月天狠狠干| 五月噜噜| 九九视频热| 激情五月天免费视频| 五月激情视频网| 五月丁香婷婷无码A∨| 亚洲熟妇AV综合网五月丁香伊人 | 五月婷人妻| 狠狠做六月爱婷婷综合aⅴ| 色色色国产| 99视频啪啪| 色综合五月| 九九成年视频| 99精品网址| 色色色五月天激情资源| 大香蕉久久久久久久久| 狠狠色狠狠操| 久久九九国产精品怡红院| 99热精品在这里| www.色婷婷.com| 五月天社区| 一本色道久久88综合日韩精品| 色婷婷成人做爰A片免费看网站 | 9月色婷婷| 超碰色综合| 亚洲永久四色| 九九热最新视频| 92久久精品一区二区| av在线资源| 日本九九九九| 亚洲色婷婷| 久久XX| 婷婷色色综合| 中字幕视频在线永久在线观看免费 | 丁香婷婷久| 国产超碰人人| 97人妻碰碰碰久| 国产99美少妇| 另类小说五月天综合网| 婷婷丁香五月亚洲免费| 六月丁香激情| 九月激情网| 亚洲AV免费在线| 久久ri精品| 色五月中文字幕| 久久婷婷五月天懂色| 五月综合777| 婷婷播5月| 97狠狠色| 成人网在线观看视频| 激情综合婷婷久久| AV在线大香蕉| 丁香五月婷婷乱| 五月丁香六月激情视频| 激情深爱婷婷网| 色五月丁香A欧美com| 色婷婷综合影院| 丁香五月婷婷亚洲人| α久久| 五月婷婷深深爱| 99色在线| av一区免费看| 99色在线视频观看| www激情网| 99爱在线视频| 5月丁香啪啪啪| 五夜婷婷| 97一区二区| 五月天丁香看婷婷| 久热伊人| 五月丁香六月花| 六月婷婷国产| www.maotanji.com| 精品欧美一区二区三区久久久| 97超碰欧美中文字幕| 婷婷欧美激情综合| 操操操Av| 亚洲综合色网| 青青草原伊人网| 色婷五月天网站| www.99热视频| 91re色综合视频| 五月天国产成人| 天天透天天爱| 亚洲国产精品二二三三区| 丁香久久五月婷综合| 激情都市五月天| 丁香激情网| 婷婷五月天精品| 精品九九视频| 五月天综合| 色播五月天婷婷老师| sewuyuejiqingwang| 99爱视频免费| 99内射视频| 五月婷六月天| 丁香婷婷综合激情五月色| www.sebowuyue| 五月激情六月| 色色五月丁香| 五月丁香趴趴| 91九九| a在线观看| 狠狠色狠狠爱| 色五月婷婷五月丁香五月激情五月视频| 五月天婷婷综合免费| 97很鲁在线视频| 婷婷五月天AV网| 欧美三日本三级少妇三99| 天天肏天天舔AV| 五月天成人在线精品| 日日夜夜婷婷| 久Se视频在线观看| 狠狠干五月丁香综合网| 乱岳熟女50岁| 九九热99免费视频| 开心五月激情五月丁香五月婷婷| 久久92| 丰滿爆乳一区二区三区| 激情五月婷婷| www.99热视频| 国产熟妇乱子伦hd| 婷婷五月天视| 激情五月婷婷| 任你爽精品免费视频6| 婷婷深爱五月| 艹色18p| 九九热在线观看视频| 亚洲天堂玖玖| 五月天激情开心网| av在线免费播放观看| 婷婷久久六月费| 色色婷婷丁香| 狠狠干五月丁香| 99在线精品视频在线观看| 在线五月婷婷小电影|