免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

在線考試答題系統(tǒng)架構(gòu)設(shè)計(jì):一套底層支撐考試、刷題、競(jìng)賽與活動(dòng)

在線考試答題系統(tǒng)架構(gòu)設(shè)計(jì):一套底層支撐考試、刷題、競(jìng)賽與活動(dòng) 簡(jiǎn)介這是一套面向教育機(jī)構(gòu)、培訓(xùn)平臺(tái)及知識(shí)競(jìng)賽組織者的在線考試答題系統(tǒng)源碼適用于考試測(cè)評(píng)、日常刷題、活動(dòng)競(jìng)答與題庫建設(shè)等多場(chǎng)景兼顧教師出題管理與考生作答體驗(yàn)。資源包共2000個(gè)文件主體為10443個(gè)PHP后端邏輯文件含題庫、用戶、考試核心模塊輔以427個(gè)JS交互腳本、73個(gè)CSS樣式文件、194個(gè)HTML前端頁面及88個(gè)WXML/WXSS微信小程序適配文件體現(xiàn)B/S架構(gòu)與跨端兼容設(shè)計(jì)另含SQL數(shù)據(jù)庫腳本、配置文件與日志模板總大小37.93MB。已有153人學(xué)習(xí)下載開發(fā)者可基于完整目錄結(jié)構(gòu)快速掌握系統(tǒng)分層邏輯復(fù)用題庫管理、隨機(jī)組卷、自動(dòng)評(píng)分與防作弊等核心功能模塊并通過源碼定制角色權(quán)限、擴(kuò)展題型或?qū)右苿?dòng)端。 一次偶然的需求碰撞讓我徹底改寫了這類產(chǎn)品的架構(gòu)認(rèn)知。一開始我只是給一家駕校做科目一模擬考試系統(tǒng)上線后不到三個(gè)月同一套底層陸續(xù)被教育機(jī)構(gòu)、銀行工會(huì)、商場(chǎng)活動(dòng)方看中問法幾乎一致“能不能加個(gè)刷題模式”“能不能做團(tuán)隊(duì)知識(shí)競(jìng)賽”“能不能搞一個(gè)答題抽獎(jiǎng)活動(dòng)”我當(dāng)時(shí)的第一反應(yīng)是“要重寫”但真正動(dòng)手拆解之后才發(fā)現(xiàn)所謂在線考試答題系統(tǒng)本質(zhì)就三件事題庫管理、答題引擎、結(jié)果統(tǒng)計(jì)外層所有五花八門的功能只是對(duì)不同場(chǎng)景的規(guī)則包裝。這篇文章把我這些年在這種“考試、答題、刷題、知識(shí)競(jìng)賽、活動(dòng)答題、題庫”多場(chǎng)景需求里沉淀下來的系統(tǒng)設(shè)計(jì)思路、核心表結(jié)構(gòu)、踩坑記錄和上線經(jīng)驗(yàn)完整梳理一遍。適合兩類人看一類是準(zhǔn)備自己開發(fā)答題類產(chǎn)品的技術(shù)同學(xué)另一類是需要做技術(shù)選型或評(píng)估外包方案的培訓(xùn)機(jī)構(gòu)、企業(yè)HR、活動(dòng)運(yùn)營(yíng)負(fù)責(zé)人。文章不準(zhǔn)備只停留在理論層面所有內(nèi)容都是可以被直接落地的。1. 為什么一套系統(tǒng)能同時(shí)扛住考試、刷題、競(jìng)賽和活動(dòng)答題1.1 先看清四種場(chǎng)景的本質(zhì)差異很多人一聽“多場(chǎng)景復(fù)用”就覺得是過度設(shè)計(jì)但實(shí)際上這類系統(tǒng)之所以能復(fù)用是因?yàn)樗袌?chǎng)景都共享同一個(gè)答題閉環(huán)出題、作答、判分、出結(jié)果。區(qū)別只在于四個(gè)維度的規(guī)則不同。我做過一個(gè)對(duì)比表把四個(gè)核心場(chǎng)景拆開看維度考試刷題知識(shí)競(jìng)賽活動(dòng)答題賬號(hào)要求強(qiáng)制登錄實(shí)名關(guān)聯(lián)弱登錄游客可刷必須登錄可能組隊(duì)通常無感登錄或微信授權(quán)答題節(jié)奏嚴(yán)格計(jì)時(shí)到時(shí)自動(dòng)交卷自由節(jié)奏隨時(shí)暫停搶答/限時(shí)/同步開始輕快單題限時(shí)短判分規(guī)則客觀題主觀題混合嚴(yán)謹(jǐn)客觀題為主即時(shí)判定按積分計(jì)時(shí)雙重排名正確給分錯(cuò)誤立即提示結(jié)果訴求成績(jī)單、及格率、歸檔錯(cuò)題本、進(jìn)度、知識(shí)點(diǎn)掌握度榜單、晉級(jí)、獎(jiǎng)品中獎(jiǎng)概率、分享裂變單看這張表你會(huì)發(fā)現(xiàn)如果照著四個(gè)場(chǎng)景獨(dú)立開發(fā)生命周期題目資源會(huì)嚴(yán)重割裂運(yùn)營(yíng)人員要維護(hù)四套題庫、四套用戶體系、四套統(tǒng)計(jì)報(bào)表這是巨大的重復(fù)投入。而如果做一套底層只是在最外層提供不同的場(chǎng)景配置模板那所有題目、用戶、答題記錄、統(tǒng)計(jì)口徑都能打通。所以這套系統(tǒng)的架構(gòu)思路從一開始就是統(tǒng)一題庫、統(tǒng)一答題引擎、隔離場(chǎng)景配置。題庫和引擎是固定的能力底座場(chǎng)景層只是配置文件的不同組合。1.2 從需求反推出一套可復(fù)用的系統(tǒng)架構(gòu)我在項(xiàng)目的第二版本里把系統(tǒng)拆成了四個(gè)中心這個(gè)劃分后續(xù)被驗(yàn)證非??煽款}庫中心負(fù)責(zé)題目的增刪改查、分類、標(biāo)簽、難度、答案解析、知識(shí)點(diǎn)關(guān)聯(lián)以及多租戶數(shù)據(jù)隔離。答題引擎負(fù)責(zé)一場(chǎng)考試/一次刷題會(huì)話的狀態(tài)流轉(zhuǎn)包括開始、暫停、提交、超時(shí)判定、斷點(diǎn)續(xù)答、防重復(fù)提交。場(chǎng)景配置中心把考試限制、刷題策略、競(jìng)賽規(guī)則、活動(dòng)權(quán)益抽象成配置項(xiàng)一個(gè)場(chǎng)景就是一組配置的實(shí)例。數(shù)據(jù)統(tǒng)計(jì)中心統(tǒng)一采集答題行為、判分結(jié)果、時(shí)間消耗輸出成績(jī)單、排行榜、知識(shí)點(diǎn)薄弱項(xiàng)、題目質(zhì)量分析。這四大中心的劃分不是拍腦袋而是從一次真實(shí)事故反推出來的。早期我把一堆功能塞在一個(gè)“考試模塊”里結(jié)果駕校要加刷題模式時(shí)發(fā)現(xiàn)刷題記錄和考試記錄混在了一張表里統(tǒng)計(jì)報(bào)表怎么算都不對(duì)最后只能加班拆表。所以現(xiàn)在我對(duì)這類系統(tǒng)的建議是答題會(huì)話和答題結(jié)果必須拆開建模一場(chǎng)考試、一次刷題練習(xí)、一場(chǎng)競(jìng)賽搶答本質(zhì)都是不同狀態(tài)下的答題會(huì)話統(tǒng)一掛靠在同一個(gè)引擎下業(yè)務(wù)層再根據(jù)場(chǎng)景類型做差異化處理。2. 題庫與組卷模塊所有場(chǎng)景的地基2.1 題型設(shè)計(jì)的邊界別把自己鎖死在單選題上題庫最容易犯的錯(cuò)誤是一開始只設(shè)計(jì)單選和多選等客戶提出填空、判斷、簡(jiǎn)答題的時(shí)候發(fā)現(xiàn)數(shù)據(jù)庫結(jié)構(gòu)完全不支持只能打補(bǔ)丁。我建議的題型模型至少要留出這些擴(kuò)展位客觀題單選、多選、判斷、不定項(xiàng)選擇判分規(guī)則由選項(xiàng)組合決定。主觀題簡(jiǎn)答、論述、案例分析系統(tǒng)只做人工評(píng)分輔助不硬核判分。半自動(dòng)題填空題、匹配題、排序題這類題的判分可以采用寬松匹配規(guī)則比如關(guān)鍵詞命中給分。在數(shù)據(jù)庫設(shè)計(jì)上題目主表和子表是可以縱向擴(kuò)展的。題目主表存放題干、題型、難度、知識(shí)點(diǎn)、解析、所屬題庫ID選擇題子表存放選項(xiàng)列表和正確選項(xiàng)填空題子表存放多個(gè)空位的答案。這樣每次新增題型只需要擴(kuò)展子表不需要改動(dòng)主表結(jié)構(gòu)。我在處理填空題的答案匹配時(shí)吃過一次大虧。題目答案是“TCP/IP”考生填的是“tcp/ip”按精確匹配就判錯(cuò)但實(shí)際按語義兩者是同一個(gè)答案。后來我加了一個(gè)答案匹配規(guī)則配置項(xiàng)允許多個(gè)等價(jià)答案并支持忽略大小寫、忽略首尾空格、忽略全半角。這個(gè)看起來不起眼的小功能在真實(shí)考試中能減少大量的人工申訴。2.2 人工組卷與智能抽題的取舍題庫建設(shè)好之后組卷策略是另一個(gè)關(guān)鍵點(diǎn)。考試類場(chǎng)景通常需要人工組卷保證試卷難度穩(wěn)定而刷題和競(jìng)賽場(chǎng)景尤其是活動(dòng)答題更依賴智能抽題做到每次會(huì)話題目不重復(fù)、難度符合用戶水平。智能抽題的實(shí)現(xiàn)邏輯不算復(fù)雜核心是帶權(quán)重的隨機(jī)選取。我通常按三個(gè)維度做約束知識(shí)點(diǎn)占比、難度分布、題型分布。偽代碼邏輯大概是這樣的function generatePaper(rule): remaining rule.totalCount selected [] for dimension in rule.dimensions: // 知識(shí)點(diǎn)、難度、題型 quota dimension.ratio * rule.totalCount pool queryQuestions(dimension, rule.excludeIds) picked shuffle(pool).take(quota) selected.add(picked) rule.excludeIds.add(picked.id) remaining - picked.size // 剩余名額從全量池中隨機(jī)補(bǔ)齊 selected.add(shuffle(queryAll(rule)).take(remaining)) return shuffle(selected)這里有一個(gè)非常容易被忽略的細(xì)節(jié)抽題必須支持排除已經(jīng)出現(xiàn)在同一場(chǎng)會(huì)話中的題目。如果不做排除用戶刷題時(shí)連續(xù)遇到重復(fù)題目的概率會(huì)很高尤其是題庫量小的時(shí)候體驗(yàn)極差。我一般會(huì)在Redis里維護(hù)一個(gè)“本場(chǎng)已出題ID集合”每次抽完題都寫入超時(shí)后自動(dòng)過期。人工組卷則強(qiáng)調(diào)可控性和穩(wěn)定性我會(huì)給組卷人提供一個(gè)實(shí)時(shí)預(yù)覽面板實(shí)時(shí)顯示當(dāng)前試卷的知識(shí)點(diǎn)分布比例和平均難度預(yù)估幫助組卷人在保存前就調(diào)整到目標(biāo)曲線。這個(gè)功能開發(fā)成本不高但客戶滿意度提升非常明顯。2.3 題庫安全與權(quán)限隔離題庫是這類系統(tǒng)的核心資產(chǎn)尤其是培訓(xùn)機(jī)構(gòu)題庫泄露等于核心競(jìng)爭(zhēng)力流失。我做過三層的安全設(shè)計(jì)數(shù)據(jù)層隔離每個(gè)租戶/機(jī)構(gòu)有獨(dú)立的題庫空間通過庫ID字段隔離查詢鏈路里強(qiáng)制帶上租戶ID防止越權(quán)訪問。接口層權(quán)限題目詳情接口和試卷查看接口做權(quán)限分級(jí)??忌荒芸吹疆?dāng)前答卷中的題目不能通過遍歷題號(hào)獲取全部題目只有出題人和管理員能看到答案與解析。展示層防復(fù)制針對(duì)高價(jià)值題目前端限制右鍵菜單和文本選擇部分客戶會(huì)要求對(duì)題目文本做切片渲染防止直接爬取整題。還有一點(diǎn)是關(guān)于圖片題目的處理。很多實(shí)操類考試的題目是圖片版比如汽車零部件識(shí)別、電路圖判斷。圖片題目最大的風(fēng)險(xiǎn)是容易被批量下載建議默認(rèn)走帶簽名的臨時(shí)URL訪問URL有效期設(shè)為10分鐘而不是直接在頁面里暴露永久資源地址。3. 答題引擎的設(shè)計(jì)一場(chǎng)考試到底要存什么狀態(tài)3.1 一場(chǎng)答題會(huì)話的生命周期管理答題引擎是整個(gè)系統(tǒng)的“心臟”它的核心職責(zé)是把一場(chǎng)考試的狀態(tài)管清楚。我常用的狀態(tài)設(shè)計(jì)是IDLE待開始試卷已分配考生未進(jìn)入。IN_PROGRESS進(jìn)行中考生已進(jìn)入計(jì)時(shí)開始答案實(shí)時(shí)持久化。PAUSED暫停僅用于刷題場(chǎng)景考試類場(chǎng)景一般不允許暫停。SUBMITTED已提交考生主動(dòng)交卷或系統(tǒng)自動(dòng)交卷進(jìn)入判分流程。SCORED已判分判分完成成績(jī)可查詢。ARCHIVED已歸檔結(jié)果鎖定不可修改。我在狀態(tài)設(shè)計(jì)上最主要的經(jīng)驗(yàn)是狀態(tài)流轉(zhuǎn)一定要放在服務(wù)端做不能依賴前端判斷。之前有個(gè)版本把“是否顯示交卷按鈕”放在前端控制結(jié)果有用戶通過瀏覽器調(diào)試把交卷按鈕撈出來未答完就提前交卷了。后來改成所有交卷操作都走后端校驗(yàn)后端判斷當(dāng)前會(huì)話狀態(tài)、剩余時(shí)間、已答題數(shù)才允許交卷。3.2 時(shí)間控制倒計(jì)時(shí)的三個(gè)大坑時(shí)間控制是考試系統(tǒng)里最容易出錯(cuò)的地方我踩過的坑基本可以歸納為三個(gè)第一個(gè)坑前端倒計(jì)時(shí)不可信??忌南到y(tǒng)時(shí)間可能不準(zhǔn)瀏覽器切后臺(tái)后定時(shí)器會(huì)被節(jié)流。所以正確做法是前端只負(fù)責(zé)展示“剩余秒數(shù)”真正的計(jì)時(shí)器由后端維護(hù)后端在會(huì)話開始時(shí)記錄start_time每次交卷請(qǐng)求把當(dāng)前時(shí)間和start_time做差值超過規(guī)定時(shí)長(zhǎng)直接拒絕并標(biāo)記超時(shí)提交。第二個(gè)坑斷網(wǎng)續(xù)答的時(shí)間補(bǔ)償??忌诳荚囍袛嗑W(wǎng)重連重連時(shí)發(fā)現(xiàn)倒計(jì)時(shí)還在走肯定投訴。我的方案是前端在重連成功后上報(bào)斷網(wǎng)時(shí)間戳后端校驗(yàn)斷線時(shí)長(zhǎng)和上次心跳時(shí)間差值不超過閾值就把start_time向后順延。這個(gè)補(bǔ)償邏輯需要和“防作弊”——切后臺(tái)的時(shí)間判定——區(qū)分開否則就會(huì)出現(xiàn)考生故意斷網(wǎng)來暫停考試的漏洞。第三個(gè)坑自動(dòng)交卷的邊界條件。倒計(jì)時(shí)歸零那一刻正在作答但未保存的答案怎么處理我的方案是前端在倒計(jì)時(shí)還剩5秒時(shí)強(qiáng)制保存當(dāng)前答案并在超時(shí)后禁止繼續(xù)作答后端在收到自動(dòng)交卷請(qǐng)求后以最后一次持久化成功的答案為最終答案。這個(gè)機(jī)制要把“保存成功”的口令做成冪等的避免同一份答案重復(fù)提交產(chǎn)生兩條答題記錄。3.3 防作弊從主流程就開始設(shè)計(jì)而不是上線后補(bǔ)救防作弊是所有考試場(chǎng)景的剛需但也不要一開始就上人臉識(shí)別這種重方案性價(jià)比不高的功能反而會(huì)把考生惹毛。我建議按風(fēng)險(xiǎn)等級(jí)分層處理基礎(chǔ)層所有考試都開切換頁面離開考試頁面的次數(shù)記錄超出閾值觸發(fā)警告。進(jìn)階層重要考試開啟禁止切屏、強(qiáng)制全屏、鼠標(biāo)離開考試窗口提醒。嚴(yán)苛層高價(jià)值考試開啟人臉識(shí)別抽拍、AI監(jiān)考、第二攝像頭監(jiān)控可對(duì)接第三方審核服務(wù)。另外一個(gè)低成本但效果很好的措施是題目和選項(xiàng)亂序。給同一份試卷的每個(gè)考生隨機(jī)打亂題目順序和選項(xiàng)順序能極大降低鄰座偷瞄答案的概率。實(shí)現(xiàn)上只需要在會(huì)話生成時(shí)為每個(gè)考生生成一份亂序映射表判分時(shí)根據(jù)映射表還原正確選項(xiàng)。設(shè)備和IP維度也不能完全忽視。我在高價(jià)值考試中會(huì)采集設(shè)備指紋瀏覽器指紋、IP段、MAC地址等如果同一設(shè)備指紋在短時(shí)間內(nèi)關(guān)聯(lián)多個(gè)考生賬號(hào)自動(dòng)標(biāo)記異常記錄提交給人工審核。這個(gè)功能不阻斷流程但確實(shí)在真實(shí)場(chǎng)景里幫用戶抓出過代考行為。4. 多場(chǎng)景適配不同答題模式的差異化實(shí)現(xiàn)4.1 刷題模式先去掉考試那一堆限制刷題模式和考試模式最大的差異在于刷題不需要一次完整會(huì)話而是隨開隨練、隨練隨走。所以刷題模式我建議單獨(dú)實(shí)現(xiàn)一套輕量流程關(guān)鍵詞是“即存即走”。具體表現(xiàn)在三個(gè)方面做題即保存無需提交進(jìn)入刷題模式后每答一題立即保存答案不需要“交卷”動(dòng)作退出即完成。錯(cuò)題本閉環(huán)答錯(cuò)的題自動(dòng)進(jìn)錯(cuò)題本用戶可以從錯(cuò)題本重新刷刷對(duì)了可以移出錯(cuò)題本或標(biāo)記掌握。模式切換提供順序練習(xí)、隨機(jī)練習(xí)、背題模式直接顯示答案和解析不做判分、模擬測(cè)試四種入口。模擬測(cè)試走正式考試引擎其余走刷題引擎。我踩過的一個(gè)坑是刷題模式下用戶反復(fù)在同一道題上作答多次需要保留歷史記錄還是只保留最后一次如果全部保留數(shù)據(jù)暴增如果只保留最后一次錯(cuò)題本容易丟數(shù)據(jù)。后來我采取折中記錄每一次作答的明細(xì)用于統(tǒng)計(jì)掌握度但展示層以最后一次為準(zhǔn)。4.2 知識(shí)競(jìng)賽從單機(jī)答題變成實(shí)時(shí)互動(dòng)知識(shí)競(jìng)賽是“在線考試答題系統(tǒng)”里最有意思的場(chǎng)景因?yàn)樗鼜膯螜C(jī)走向了實(shí)時(shí)互動(dòng)技術(shù)難度會(huì)有一次躍遷。這里分為兩種常見競(jìng)賽形式一種是同步賽所有選手同一時(shí)間開始、同一時(shí)間結(jié)束按正確率和耗時(shí)排名。這種形式依賴后端統(tǒng)一計(jì)時(shí)器開賽時(shí)通過WebSocket批量推送開賽信令結(jié)束后統(tǒng)一回收成績(jī)。同步賽最怕的是網(wǎng)絡(luò)延遲導(dǎo)致大家開始時(shí)間不一致我建議前端在收到開賽信令后回傳本地時(shí)間戳后端校準(zhǔn)出一個(gè)分發(fā)補(bǔ)償值讓所有選手的倒計(jì)時(shí)終點(diǎn)對(duì)齊。另一種是搶答賽系統(tǒng)出一道題所有選手在規(guī)定時(shí)間內(nèi)搶答答對(duì)得分答錯(cuò)扣分。這個(gè)場(chǎng)景的技術(shù)核心是“公平性”誰先提交誰優(yōu)先。搶答提交的判定必須在服務(wù)端完成不能依賴前端時(shí)間戳而且要對(duì)極端情況做保護(hù)同一毫秒內(nèi)有兩個(gè)人提交如何判先我常用的方案是按請(qǐng)求到達(dá)網(wǎng)關(guān)的時(shí)間排序網(wǎng)關(guān)層的NTP同步周期控制在50ms以內(nèi)。競(jìng)賽還有一個(gè)和考試截然不同的設(shè)計(jì)點(diǎn)排行榜需要實(shí)時(shí)滾動(dòng)。這個(gè)功能建議使用Redis的有序集合ZSET維護(hù)分?jǐn)?shù)作為score時(shí)間戳作為附加值參與排序排行榜查詢走Redis不同步寫數(shù)據(jù)庫等競(jìng)賽結(jié)束后再把最終排名落庫。這樣即使榜單接口被高頻刷新數(shù)據(jù)庫也不會(huì)被打爆。4.3 活動(dòng)答題高并發(fā)下的抽題與風(fēng)控活動(dòng)答題是很多企業(yè)運(yùn)營(yíng)拉新的標(biāo)配玩法典型形態(tài)是“答對(duì)5道題參與抽獎(jiǎng)”。這類場(chǎng)景的流量特征和考試完全不同瞬時(shí)并發(fā)可能非常高而且安全需求相反——不是防作弊而是防刷題。我把活動(dòng)答題的技術(shù)方案拆成兩端性能端抽題盡量走緩存。活動(dòng)答題的題庫通常不大幾千道題撐死了。建議啟動(dòng)時(shí)把題目全量加載到Redis緩存抽題時(shí)直接內(nèi)存隨機(jī)而不是每次都查數(shù)據(jù)庫。活動(dòng)答題的接口要單獨(dú)做限流比如單用戶每秒最多1次請(qǐng)求超出直接丟棄。風(fēng)控端判斷“人機(jī)”是關(guān)鍵。活動(dòng)答題如果不做風(fēng)控很快會(huì)被腳本刷爆獎(jiǎng)品被機(jī)器人批量薅走。我建議至少做三層登錄門檻回調(diào)至少在抽獎(jiǎng)環(huán)節(jié)強(qiáng)制微信授權(quán)或手機(jī)號(hào)驗(yàn)證。頻率限制同一設(shè)備/IP/賬號(hào)限制每日答題次數(shù)超出后提示明日再來。行為校驗(yàn)單題作答耗時(shí)小于800毫秒的全部標(biāo)記為異常不參與抽獎(jiǎng)資格。還有一個(gè)運(yùn)營(yíng)向小細(xì)節(jié)活動(dòng)答題通常需要限制“每人只能中獎(jiǎng)一次”這個(gè)校驗(yàn)必須放在發(fā)獎(jiǎng)事務(wù)的最前面而且發(fā)獎(jiǎng)和扣減庫存要在一個(gè)事務(wù)里完成否則并發(fā)下會(huì)出現(xiàn)庫存扣成負(fù)數(shù)、幾個(gè)人同時(shí)領(lǐng)到最后一個(gè)獎(jiǎng)品的情況。5. 成績(jī)計(jì)算與數(shù)據(jù)統(tǒng)計(jì)判分只是開始5.1 判分邏輯的正確寫法很多剛?cè)胄械拈_發(fā)者會(huì)把判分邏輯寫得很簡(jiǎn)單正確答案和考生答案做一次字符串比較。這在只有單選題的小項(xiàng)目里可行但一旦題型變多這種寫法就廢了。我推薦的判分邏輯是按題型分派到不同的判定器每種題型有獨(dú)立的判定規(guī)則單選題考生答案ID與正確選項(xiàng)ID一致判對(duì)。多選題全部選對(duì)得滿分選錯(cuò)或漏選可以配置為0分或部分得分。判斷題布爾值相等即可。填空題字符串標(biāo)準(zhǔn)化去空格、轉(zhuǎn)小寫、全半角歸一化后再比較支持多個(gè)等價(jià)答案。主觀題系統(tǒng)不判分進(jìn)入人工評(píng)分隊(duì)列評(píng)分后支持成績(jī)修訂和申訴。這里我強(qiáng)烈建議一點(diǎn)判分過程要可追溯。每一個(gè)得分點(diǎn)都要記錄判分依據(jù)比如多選部分得分時(shí)得分明細(xì)里要寫明“選對(duì)2個(gè)漏選1個(gè)得50%分”。我在真實(shí)項(xiàng)目里被用戶質(zhì)問過“為什么我這題不是滿分”如果沒有判分依據(jù)根本說不清有了記錄之后申訴處理速度能快好幾倍。部分得分規(guī)則對(duì)考試成績(jī)分布的影響很大。比如多選題漏選給一半分、選錯(cuò)給零分整體通過率會(huì)明顯高于全錯(cuò)全扣。具體選擇哪種規(guī)則一定要讓客戶在配置里自己決定千萬不要寫死在代碼里。5.2 數(shù)據(jù)統(tǒng)計(jì)別把數(shù)據(jù)分析做成一個(gè)平均數(shù)展示列表統(tǒng)計(jì)模塊的價(jià)值高低決定了這套系統(tǒng)是交差用的工具還是真正能幫客戶提升題庫質(zhì)量的服務(wù)。我建議至少包含三個(gè)層次的分析成績(jī)匯總層最高分、最低分、平均分、通過率、不及格率。這些是最基礎(chǔ)的指標(biāo)只能用來做結(jié)果匯報(bào)。試卷質(zhì)量層難度系數(shù)和區(qū)分度。難度系數(shù)計(jì)算公式是P 平均分 / 滿分P值低于0.3說明題目偏難高于0.8說明偏易。區(qū)分度指標(biāo)可以簡(jiǎn)單用“高分組平均分 - 低分組平均分”來評(píng)估區(qū)分度低于0.2的題目說明沒有區(qū)分能力可以考慮淘汰或修改。知識(shí)點(diǎn)掌握層按知識(shí)點(diǎn)聚合答題正確率。這一層價(jià)值最大因?yàn)榕嘤?xùn)機(jī)構(gòu)可以直接看到“三角函數(shù)”章節(jié)學(xué)員普遍弱然后針對(duì)性調(diào)整教學(xué)計(jì)劃。我的實(shí)現(xiàn)方式是在答題記錄落庫時(shí)把題目關(guān)聯(lián)的知識(shí)點(diǎn)ID同樣寫入明細(xì)表統(tǒng)計(jì)時(shí)按知識(shí)點(diǎn)ID做聚合生成學(xué)員個(gè)人畫像和班級(jí)整體畫像。統(tǒng)計(jì)分析有一個(gè)容易忽略的性能問題答題明細(xì)表增長(zhǎng)很快一次五百人的考試就能產(chǎn)生幾萬條明細(xì)記錄直接用明細(xì)表做聚合查詢會(huì)越查越慢。我建議每天凌晨跑定時(shí)任務(wù)把明細(xì)表按天聚合到結(jié)果表報(bào)表查詢只查聚合表明細(xì)表只做鉆取回溯。6. 從零搭建到上線我的踩坑記錄與實(shí)施建議6.1 三個(gè)印象最深的線上事故這些年做答題系統(tǒng)線上問題沒少出講三個(gè)最典型的每個(gè)都值一次加班教訓(xùn)。事故一空格導(dǎo)致大面積錯(cuò)判。有次填空題答案是“CRM系統(tǒng)”考生填“CRM系統(tǒng)”帶了一個(gè)全角空格所有帶空格的填空題全部判錯(cuò)學(xué)員群直接炸了。排查后發(fā)現(xiàn)是字符串標(biāo)準(zhǔn)化環(huán)節(jié)漏了全角轉(zhuǎn)半角的處理。修復(fù)方案就是把標(biāo)準(zhǔn)化函數(shù)抽成公共模塊填空題、簡(jiǎn)答題的關(guān)鍵詞命中全部走同一個(gè)函數(shù)。事故二并發(fā)交卷產(chǎn)生重復(fù)記錄?;顒?dòng)答題上線當(dāng)天大量用戶集中提交數(shù)據(jù)庫在極端并發(fā)下出現(xiàn)了一條答題記錄在同一玩家名下存了兩份的情況導(dǎo)致獎(jiǎng)品發(fā)放邏輯認(rèn)為他答題次數(shù)超額。根因是數(shù)據(jù)庫缺少非唯一索引約束修復(fù)方式是在(session_id, question_id)上加唯一索引并在插入時(shí)使用ON DUPLICATE KEY UPDATE。事故三倒計(jì)時(shí)突然跳變。有考生反饋考試倒計(jì)時(shí)有次從15分鐘直接跳到3分鐘排查后發(fā)現(xiàn)是后端有一個(gè)定時(shí)任務(wù)在刷新會(huì)話時(shí)把start_time錯(cuò)誤地更新成了最新一次心跳時(shí)間。修復(fù)方案是定時(shí)刷新任務(wù)只允許刷新last_heartbeat_time禁止觸碰start_time字段。這個(gè)事故讓我深刻意識(shí)到關(guān)鍵字段的寫入權(quán)限必須收口不能到處都有UPDATE session SET start_time xxx的代碼。6.2 上線前的壓測(cè)清單答題類系統(tǒng)和其他系統(tǒng)比對(duì)實(shí)時(shí)性要求更高壓測(cè)時(shí)不能只測(cè)接口吞吐量還要重點(diǎn)關(guān)注時(shí)間敏感鏈路。我總結(jié)了一份壓測(cè)前的檢查清單并發(fā)交卷測(cè)試模擬500人同時(shí)交卷確認(rèn)不丟單、不重復(fù)、不超時(shí)。倒計(jì)時(shí)精確性測(cè)試比對(duì)服務(wù)端計(jì)時(shí)和真實(shí)時(shí)間誤差在3秒內(nèi)算合格。排行榜刷新測(cè)試競(jìng)賽場(chǎng)景每2秒刷一次排名確認(rèn)Redis集群無雪崩。斷網(wǎng)重連測(cè)試模擬斷網(wǎng)2分鐘再連上確認(rèn)答案恢復(fù)完整時(shí)間補(bǔ)償正確。抽題緩存命中率測(cè)試活動(dòng)答題場(chǎng)景盯緊Redis命中率正常情況下應(yīng)高于99%。壓測(cè)工具我常用JMeter和Locust腳本提前按場(chǎng)景寫好上線前至少跑兩輪完整回歸。6.3 部署形態(tài)與成本控制建議最后給一個(gè)務(wù)實(shí)的技術(shù)選型建議。這套系統(tǒng)的主流部署形態(tài)是這樣的單機(jī)起步一個(gè)Spring Boot或Go服務(wù)加上MySQL和Redis足夠支撐幾百到幾千人的考試場(chǎng)景。上云擴(kuò)展考試高峰時(shí)用云服務(wù)器臨時(shí)擴(kuò)容答題接口無狀態(tài)化通過負(fù)載均衡分發(fā)Redis扛會(huì)話狀態(tài)數(shù)據(jù)庫做主從。這樣一套配置扛幾萬人并發(fā)答題是沒問題的。文件存儲(chǔ)題目中的圖片和音視頻素材建議走對(duì)象存儲(chǔ)加CDN不要打在業(yè)務(wù)服務(wù)器上不然一場(chǎng)考試下來帶寬費(fèi)用就能讓人肉疼。前端移動(dòng)端適配要重點(diǎn)說一句競(jìng)賽和活動(dòng)答題必須優(yōu)先做手機(jī)H5或小程序端答題界面的操作熱區(qū)要大倒計(jì)時(shí)和交卷按鈕要固定在觸手可及的位置。我做過的幾個(gè)項(xiàng)目里70%以上的流量來自手機(jī)端如果前端適配沒做好后面接再多的功能都要打折扣。數(shù)據(jù)庫表設(shè)計(jì)上我見過很多失敗案例都是因?yàn)榘岩坏李}的所有字段塞在一張表里導(dǎo)致后面擴(kuò)展無力。至少要把題目主表、選項(xiàng)表、答案表、知識(shí)點(diǎn)表、試卷表、答題明細(xì)表、會(huì)話表拆分開來字段冗余寧可多幾列也不能把關(guān)系揉在一起。這套系統(tǒng)做完之后我最大的感受是答題類產(chǎn)品真正難的不是某一個(gè)功能而是把不同場(chǎng)景的差異抽象成可配置的規(guī)則。考試要求嚴(yán)謹(jǐn)刷題要求輕快競(jìng)賽要求實(shí)時(shí)活動(dòng)要求抗壓它們共享的底層越穩(wěn)定外層場(chǎng)景的功能就越安全。你越早用抽象思維把這些場(chǎng)景拆開后面的擴(kuò)展就越省力。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
99激情| 97人妻碰碰碰久久香蕉| 狠狠狠狠狠狠狠狠| 蜜臀99精品| 婷婷色五月亚洲| 丁香婷婷婷五月综合色情| A久久| 五月丁香婷婷六月| 婷婷十月丁香| 色色色宗合网| 欧美顶级少妇做爰HD| 成人丁香五月| 九色视频91疯狂| 狠色狠色综合久久| 亚洲色色色色| 99热骚货| 天天日夜夜操五月| 激情五月天婷婷视频| 婷婷五月天最新综合你懂的| 9久久精品| 99碰碰碰| 久久久香港| 婷婷97狠狠成人网站| 婷丁香五月天| 91婷婷色五月| 五月丁香福利| 91狠狠色丁香婷婷综合久久精品| 人妻系列久久久久久久久久久| 五月天天爱| 五月丁香啪啪| 伊人婷婷青青cao| 五月丁香婷婷啪啪综合| 丁香五月www| 天天色情站| 久久久com| 99热资源在线| 丁香九月久久| 天天狠天天叉| 伊人五月天| 五月天婷婷色色| 九九热视频99| 五月丁香久久| 九九热精品| 成人av免费观看| 射区导航| 99这里只有| 日韩啪| ay2区| 久久综合干| 色99热| www.99精品视频| 色婷婷亚洲在线观看| 欧在线一区| 亚洲精品第一国产综合亚AV| 青996青| 无码动漫av| 久久亚洲天堂| 国产视频色色色色色色色| 99色性爰网络| 超碰在线网站9| 少妇出轨做爰高潮A片| 精品亚洲国产成AV人片传媒| 婷婷丁香综合色AV| 超碰91av| 婷婷六月激情啪啪| 婷婷丁香五月激情| 丁香五月天啪啪| 99热这里只是精品| 五月综合无码| 亚洲精品大片| 999热这里只有美国精品| 26uuu色五月| 九月停停| 五月天婷婷影院| 色综合九九| 激情小说五月天社区丁香| 激情AV| 久久综合这里只有精品1| 偷偷狠狠久久婷婷五月天| www.主妇. com| 五月天开心激情网色欲无码| 激情九月婷婷| Www.婷婷五月| 99热这里只有精品1025| 最近中文字幕2019视频1| 97人碰人操| 超碰在线播放免费观看| 婷婷丁香射射| 激情综合网五月天| 操91| 99热天堂| 久久丁香社| 99精品人人| 免费的日逼视频| 五月婷色啪| 色五月大| 天天肏天天舔AV| 黄色一级影片| 99热中文字幕久久| 久久丁香五月天| 欧美性爱丁香五月| 精品乱码视频| 婷婷五月天网| 天天插操| 激情综合4月| 中文字幕久久一区二区三区 | 99热免费在线| 少妇水多A片太爽了| 天天久久婷婷| 日本噜噜色网| 99热这里只有精品在线观看| 婷婷99狠狠躁天天躁中文| 久久视这里只有精品| 懂色AⅤ| 99日本精品视频热| 三级99热| 婷婷五月骚厕所| 色呦呦美女| 国产做爰视频免费播放| 色色无码日韩| 婷婷四色五月| 六月婷婷香蕉| 久色婷婷200| 99操视频| 伊人久久婷婷| 日韩久热| 天天操天天曰天天射| 六月丁香五月亭亭| 九九人人操| 久久婷婷丁香视频网| 五月综合婷婷网| 99久超碰| 亚洲无码yw| xfplayav在线| 国产69久久久欧美黑人A片| 99狠狠色| 久9免费视频| 黃色三级三级三级三级 qixing300.shrkbk.com www.jinbozs.com tianmiaosw.com | 色哟哟www| 五月丁香婷婷成人网| 亚洲乱码在线观看| 99成人| 激情综合五月丁香六月婷婷| 深爱五月天 开心网| 4399成人黄A片| 国内在线99视频| 涩涩网五月天| 99热有精品在线观看| 欧美天天爽| 欧美精品999| 超碰93在线观看| 99热这里只有精品3| 69精品人人人人| 思思热这里只有精品视频666| 99只有这里是精品| 久热久69| 五月天另类小说| 国产美女无遮挡裸体毛片A片| 人人操女人| 久狠日av| 丁香婷婷婷婷十二月在线观看视频| 97干在线| 五月激情综合网| 激情综合啪啪| 99热9| 久久久久妻| 激情婷婷丁香五月天| 任你操精品免费| 婷婷五月天视频亚洲| 99在线看片| 日本欧美国产| 久草网大香视频| 色综合伊人网| 99在线资源| 丁香六月婷| 国产婷婷综合| 久久99网| 99精品网站| 日操夜操天天操不卡| 中文字幕性爱丰满| 啪精品| 天堂综合久| 婷婷欧美激情综合| 国产成人网站在线观看| 精品皮股午夜AV| 国产精品成av人在线视午夜片| 91久久久久久| 五月婷婷爽爽爽| 开心五月色婷| 97欧美在线| 91精品婷婷国产综合久久| 成人欧美日韩| 亚洲精品白浆高清久久久久久| 色综合九九色综合88| WWW.夜夜| 99精品久久久久| 9l视频自拍9l九色成人| 襙逼网| yirenjiqingshiping| 激情五月天影院| 婷婷丁香成人五月天| 无码人妻激情| 这里只有精品久| 91九色在线观看免费| 色偷偷色婷婷| 色婷綜合网| 色九月丁香婷婷蜜桃在线观看| 天天成人五月天| 久久全意婷婷| 91狠狠色丁香婷婷综合久久| 五月丁香欧美在线| 激情另类综合| 久9热视频在线| 婷婷五月天天天| 亚洲天堂99| 亚洲亚洲人成综合网络| 色在线99| 丁香五月成人在线| www.久久爱| AA片在线观看视频在线播放| 日韩 中文 欧美| 深爱激情九九五月天| 九九热青青草| 国产特级毛片AAAAAAA高清| 丁香涩涩爱| 婷婷伊人网| 天天久综合网永久入口18| 天天爽天天操| 操一操插一插| Av性爱网站| 青青草网武则天| 99精品免费| 欧美激情Va| 激情文学久久| 99爱视频在线观看| 色婷五月| 婷婷五月天日本国产| 伊人大蕉香| 丁香五月天激情| 久久九九免费视频| 日逼免费视频| 婷婷的五月天另类视频| 国产韩日亚洲美州欧亚综合在线| 亚洲精品又粗又大又爽A片 | 麻豆精品| 成人龟情网丁香五月| 9色视频在线| 一级片操逼视频| 大香蕉久热| 日本噜噜色网| eeuus五月婷| 婷婷丁香五月天大香蕉| 九九热9| 婷婷五月天电影网| 亚洲精品亚洲人成人网| 精品乱码久久久久| 开心五月深爱五月丁香五月激情五月| 丁香五月激情啪| 婷婷九九色| www.婷婷五月天| 激情av在线| 这里只有精品免费视频在线观看| 97色婷| 在线观看亚洲AV| 综合色色五月| 五月婷婷色欲| 日本黄 色 片| 51精品国自产在线| 一本色道久久88综合日韩精品| 99热这里只有精品16| 久久五月天激情视频| 久热超碰| 五月婷俺去也| 少妇丁香婷婷| 色综合爱综合| 麻豆123区| 婷婷,五月天,丁香,第一| 日韩精品超碰在线观看| 色碰干| 五月婷婷六月综合| 小色小蛇伊人婷婷色香五月| 五月婷婷日| 久久九九囯产| 五月激情综合性爱| 超碰日日操| 久久色9| www.刺激色网站www.| 人操91在线| 婷婷不卡基地| 色婷婷四色| 久艹久| AV在线收看| 久久综合五月婷婷| 99玖玖在线视频| caopeng97人人| 97热久久| 亚洲一个色| 激情婷婷五月天。| 啪啪干伊人婷婷| 五月色导航| 激情亚洲色图片丁香综合| 欧美色骚婷婷五月天| 99惹| 亚洲激情网站| 99玖玖在线视频| 久久综合中文字幕| 97精品综合久久| 99精品免费| 亚洲成av人影院| A片试看120分钟做受视频红杏| 久操操| 日日爽夜夜爽| www.com久久久久久久久久久久久久久久久| 久久激情五月| 99ER热精品视频| 99天堂在线观看免费视频| 婷婷激情六月中文| 久久久大香蕉| 能看的av片| 99爱在线视频观看| 丁香六月狠狠干| 婷婷激情五月综合| 五月天大香蕉av| 国产亚洲成AV人片在线| 丁香五月久久| 99热精品一| 天天日天天爽夜夜爽| 另类视在线| 欧美激情VA永久在线播放| 天天操夜夜操| 久久嘟嘟丁香| 色色影院aaaav| 天天做天天爱综合| 色婷婷www| 99国产精品白浆在线观看免费| 国产亚洲精品久久久久久豆腐| 五月丁香色色网| 五月久久综合| 日本91在线| 婷婷丁香五另类网站| 婷婷五月激情天| 丁香五月六月久久综合| WWW.桔色成人.COM| 99久久久久| 99久久人妻精品无码二区| 啪啪操超碰| 五月天色五月| 五月丁香六月婷婷的女人| 色九九综合| m色激情网| 丁香六月色婷婷| 欧美三级巜人妻互换| 成人免费网站免费看| 久久视网36| 五月丁香花激情综合网| 婷婷久久大香蕉| 69人人操人人爽| 精热在线综合网| 天天谢天天操| 亚洲精品久久久久久久久久吃药| 久久久潮喷-久久久九九-成人AV| 97操碰碰无码视频| Www.狠狠| 中文字幕成人网站| 做爱夜夜干天天操| 大香蕉综合在线| 在线视频九色97| 成人在线日韩| 超碰在线观看9| 玖玖婷婷色欲| 99热www.| 亚洲无码99| 日韩精品电影| 五月天激情子轮| 91婷婷| 99丝袜精品视频网站| 婷婷色五月天第7色| 色婷婷AV在线| av第一二区| 亚洲十月婷婷综合| 五月婷婷丁香| 激情五月图| 97干视频在线| 欧美亚洲成人在线| 婷婷激情六月| 亚州激情九月| 激情五月小说婷婷| 色吊丝av中文字幕| 思思热在线免费视频| 9久久精品| 激情婷婷五月| 久久HD| 久久精品系列| av在线中文| 成人网站高清无码| 日本成人噜噜噜| 亚洲综合视频八| 激情婷婷丁香色五月综合| 欧美日韩99| 无码髙清| 日本色图综合| 久久99婷婷| 中文成人在线| 日本欧美国产| 伊人婷婷五月天| 婷久久| 热99在线精品| 久久9精品| www..999热久| 香蕉久久国产AV一区二区| 影音先锋91| 日本色久| 久久婷婷成人综合色怡春院| 五月丁香久久精品在线观看| 五月婷婷激情网| 亚洲激情淫网| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 91人妻PORNY九色大屁股| 五月丁香婷草| 全亚洲最大的婷婷五月天网站COM 丁香五月婷婷狠狠色 | 日日操夜夜擼| www,av好吊操| av免费在线网站| 狠狠狠狠狠干| 大香蕉婷婷丁香天堂AV| 婷婷激情综合| 艹| 亚洲精品久久久无码| 五月丁香六月色情网欧美| 国产婷婷色综合AV蜜臀AV | 天天综合五月| 天堂亚洲 在线| 丁香五月婷婷AV在线| 色色日本欧美| 思思热视频| 日日日日做夜夜夜夜无码| 丁香五月影院| 五月天久久综合婷婷丁香| 婷婷五月天成人视频| 午夜五月天| 丁香 亚洲 久久| 综合久久高清| 色色婷五月天| 久碰综合| 九九热视频在线观看| 五月婷婷干| 久久9热综合| 99精品在线观看视频| 九九色色| 色婷婷小视频| 中文激情网| www.国产亚洲69ty.久久久久久久久久久久| 婷婷伊人网| 国产色丁香| 激情五月四色| 中文字幕婷婷| 狠狠插狠狠| 第四色五月婷婷| 热九九精品| 性色视频| 六月丁香视频网站| 亚洲精品444久久久久久| 97久久久| 综合一本道| 91Chinese在线| 五月天久久色| 秋霞性爱AV| 婷婷激情欧美| 99热久| 亚洲成人日韩无码精品| 五月天开心网| 五月天综合网| 久久视频九九视频| 丁香五月天啪啪| 婷婷天堂伊人| 亚洲综合婷婷| AV色婷婷| 婷婷五月天激情丁香| 色五月色五天色情网| 精品人妻午夜一区二区三区四区| 久久99热这里只有精品| 五月婷婷香蕉| aⅤ79成人片| 五月激情婷婷四射| 国产肥白大熟妇BBBB视频| 日韩另类在线观看| www.成人婷婷综合| 天天综合干| 亚洲免费99| 亚洲午夜国产成人电影VA国产欧…| 夜夜躁爽日| 99这里有精品免费| 丁香婷婷啪啪| 色九九综合热99| Blackedraw视频一区二区| 色噜噜狠狠色综合成人网| www.五月丁香av| 亚洲色涩视频| 成人短视频在线| 五月天婷婷激情四射综合| 99色视频| 久9视频| 久久久久亚洲AV无码网影音先锋| 嫩草综合网| 男女99免费视频| 夫妻超碰在线| Caoub青青超碰 | 草草视频91| 天天影院色| 九九热这里只有国产精品| 五月丁香综合啪啪| 婷婷五月天激情网| 国产精品人妻欲求不满| 中文字幕97超级碰| 色九九综合热99| 天天日P天天射P| 欧洲MV日韩MV国产| 97干干干丁香| 中文字幕无码人妻少妇免费视频| 亚洲综合视频网| 思思热视频| 激情综合在线播放| 丁香婷婷老司机久操| 中文字幕人成乱码在线观看| 激情五月激情综合网| 色色色国产| 91碰超| 久久最新色| 色色色色色综合| 五月婷婷二月丁香| 婷婷丁香五月在线播放| 色婷婷久综合久久一本国产AV| 色婷婷香蕉| 操碰99| 99爱99操| 色色99| 99色6爱9热| 五月丁香六月激情综合网| 九九色逼| 中文字幕+乱码+中文字幕在线观看| www.久久久久久| 久婷婷五月综合欧美| 4399欧美另类视频| 色五月超碰| 婷婷五月天堂| 精品成人无码A片观看香草视频| 色五月婷婷大香蕉| 亚洲99综合| 99精品视频网站| 日韩aaaaa| 俺去也婷婷| 国产精品久久久爽爽爽麻豆色哟哟 | 婷婷日日夜夜| 精品久久这里热66| 99色免费观看全部| 欧美日本日韩| 欧美日韩精品一区二区三区钱| 亚洲九N| 青青草99re| 久综合九| AV天堂淫乩| 台湾佬天天日丁香婷婷五月天| 性 色 婷婷| 天天做综合网色综合| 五月天婷婷婷| 武则天精品久久| 亚洲第一综合| 亚洲AV无码成人电影| 丁香六月激情毛片| 久久这里只有精彩| 精久久色| 开心五月综合激情网| 久久婷婷精品| 欧美三级视频下载| 五月综合亚洲色| 丁香五月六月婷婷综合激情| 色五月婷婷婷婷婷婷婷婷婷婷| 久久9精品视频| 欧美啪啪五月天| 淫视馆aV二区一区| 丁香婷婷五月基地| 色五月激情婷婷| 五婷婷综合网| 影音先锋一区| 五月婷婷丁香色播网| 4399人妻无码久久久| 国产精品色色| 色色色色区| 综合激情网五月激情 | 一区=区操屄高清大全av| 9精品在线| 激情婷婷五月色| 丁香五月激情综合| 99精品大片| 99re免费精品视频| 丁香婷婷浪潮AV久久综合| 久久色情| 99热这| 亚洲中文字幕网| 五月激情久久| 欧美天天综合网站上去吧| 亚洲欧美丁香五月天亚洲欧美| 天天综合色丁香| 免费视频WWW在线观看网站| 99九九中文字幕视频| 蜜桃婷婷丁香五月天狠狠久久综合| 国产淫熟妇| 五月婷亚洲精品AV天堂| 91久女| 亚洲综合激情五月久久| 五月丁香啪啪网| 亚洲A片成人无码久久精品青桔 | 午夜天堂啪啪| 玖玖99免费视频| 国语精品探花| 人人摸人人干| www.婷婷六月天| 丁香五月婷婷亚洲色图| 亚洲欧美另类在线23p| 天天干夜夜想| 中文色婷婷| 日屌日日操日日色| 五月天开心色色网| 丁香狠狠| 五月天色色色| 久久久人妻久久久| 亚洲欧洲国产精品| 九热视频精品| 婷婷五月天精品| 爱99干99| 天天艹夜夜爽| 午夜性做爰电影| 综合五月婷婷| 99热日本| 超碰人人在线| 五月婷婷色情| 激情久久久久久| 日日干日日| 国产亚洲成AV人片在线| 天天色综网| 丁香六月婷婷基地| 思思re视频在线| 色五月激情五月| 婷婷五月天改成什么了| 能看的av| 婷婷免费成人视频| 婷婷色婷婷| 丁香六月婷婷综合激情欧美| 99精品视频免费观看| 亚洲欧洲国产精品| 九九热九九| 激情四射网| 五月丁香91| 99热这里| 亚洲情欲| 琪琪秋霞| 欧美性猛交XXXX乱大交极品| 手机激情网| j五月香在线| 欧洲亚洲激情五月天在线| 激情综合丁香六| 五月开心婷婷| 久久38视频| 色五月婷婷色五月婷婷色五月婷婷| 精品影院| 热99精品视频| 成人在线高清| 一起草Av| 婷婷五月天激情四射五月天激情| 五月婷婷色影院| 婷婷综合五月天| 色爱亚洲| 天天舔天天| 五月婷婷综合在线视频| 久久精彩免费视频| 超碰在线国产| 无码人妻AV久久久一区二区三区 | 碰碰碰碰碰99| 成人丁香五月天Av| 久久五月婷| 粉嫩AV久久一区二区三区| 色丁香久综合在线久综合在线观看| 亭亭玉月丁香| 在线A色| 五月婷婷色白丝| 综激情网| 丁香五月婷婷成人色区| 91超级碰人人操| 影视av久久久噜噜噜噜噜三级| 婷婷色基地在线看| 91超级碰碰| 南京搡BBBB搡BBBB| 日韩 mm 不卡| 激情婷婷| 五月婷婷精品无在线| 综合色吧| 激情五月婷| 九九热经典视频在线观看| 熟女网站久久| 无人区码一码二码三码医生系列| 九九热这里只有精品9| 97操碰人人| www.夜夜操| 天天做 天天爱| 久操福利| 成人αV视频免费观看| 激情五月色婷婷| 亚洲婷婷丁香五月在线| 中文字幕在线人妻| 99热这里是精品| 婷婷情色激情| 五月丁香猫咪久久婷婷综合视频激情四射网入口 | 成人婷婷五月天| 一级韩国产精品毛| 丁香六月综合| 人人爽天天爽| 成人五月天在线视频在线观看 | 国产乱轮一区二区三区| 丁香六月色婷婷| 色综合色综合色综合| 久久婷综合| 日本在线观看aaa 99| 亚洲天天| 色久天| 六月婷婷无码观看| 婷婷涩五月| avh片在线观看| 六月丁香五月天| 青青草激情网| 日韩激情婷婷五月天| 99精品97| 国产,欧美,学生妹,视频| 最新av在线观看| 色丁香五月婷婷在线| 99综合视频在线| 蜜乳人妻一区二区三区| 大香焦啪啪啪| 综合激情五月天| 午夜成人网站在线观看| 这里只有免费精品| 五月永久激情| 丁香六月婷婷综情欧美| 五月丁香少妇| 9久热在线视频| 精国产品一区二区三区A片| 色哟哟精品| 天天爽天天摸天天爱| 色婷五月丁香久亚洲| 丁香五月婷婷狠狠色| se99热久久一本| AV片在线观看| 久久精品一区二区三区四区| 天天日天天色| 国产成人在线精品| 一月婷婷色色| 99er久久| 深爱激情av| 综合xx网| 色色综合无码| 五月丁香色色网| 五月丁香色婷婷色| 婷婷色吧| 夜色综合网| 99精品网址| 婷婷五月丁香国产| www,黄色在线,con| 亚洲精品无人区| 国产精品18久久久| 天天插天天插| 国产成人+综合亚洲+天堂| 丁香婷婷啪啪| 色婷婷小说| 日本99久久| 91成人视频| 五月婷婷影院| 日日噜狠狠| 91丨九色丨国产打屁股| 91精品久久久久久| 9久久精品| 99久久99九九九99九他书对| 五月婷亚洲精品AV天堂| 久色网址| 99热免费在线| 五月天色色网站| 久久久五月天| 精品久久穴| 国产婷婷婷| 中文不卡av| 久久爱综合| 久久jiuwww| 久久婷五月综合| 九九热99视频| 五月婷婷丁香啪啪| 激情综合网,五月| 久久婷婷在线| 亚洲天天| 黄网免费观看| 五月丁香六月天| 99久久国产宗和精品1上映| 8090在线影视少妇| 丁香五月婷婷影视先锋| 色婷婷性爱| 成年人夜夜喷水| 97色碰| 婷婷五月天日逼| 日日狠夜夜狠| 激情五月天综合| 丁香六月色婷婷| 97av在线视频| 99热在线中出| g00d人体西西| 亚洲精品色色| 欧美性爱5月天天天看| 婷婷五月天六点丁香五月| 91se在线观看| 99热这里| 97操资源婷婷| 久久婷婷色综合| 五月丁香激情综合啪| 米奇影视资源婷婷狠狠色激情欧美五月丁香| 超碰成人在线观看| 蜘蛛女免费观看完整版高清电影 | 婷婷五月天中文字幕| 色五月色图| 激情综合五月天| 99天堂在线观看免费视频| 婷婷五月色情| 欧美又粗又大一区二区在线观看| 婷婷九月色| 久久机只有这里精品| 色五月天在线观看| 五月激情影院| 精品操逼一区二区| 五月天色导航婷婷资源婷婷| 5月丁香六月婷婷| 五月丁香色婷婷色| 99在线精品免费视频| 久久五月情| 99视频这里只有免费精品| 丁香五月婷婷欧美成人色图| 9久精品视频| 大香蕉五月婷婷丁香| 婷婷激情人妻| 激情图片婷婷| 欧美精产国品一二三区| 国产婷婷色综合AV蜜臀AV | 91无码高清| 五月亭亭激情综合| 久99视频在线观看| 丁香五月大香蕉在线99| 久久人人看| 亚洲色A| jiZZdr| 任你干嘛免费视频播放| 五月亚洲激情| 超碰在线观看9| 91狠狠色丁香婷婷综合久久狠丁香综合久久精品 | 五月天偷拍| 色五月中文字幕| xx色综合| 九九黄色网| 综合久久六月| 五月婷婷这里都是精品| 丁香九月婷婷综合| 久久综合综合综合| 五月天色官网| 亚州操人在线视频| 嫩草国产| 五月婷婷视频28| 思思热视频在线| 在线视频99| 五月深爱网| 嫩BBB槡BBBB搡BBBB| 激情六月丁香| XX色综合| a性生活久久无| 99爱这里只有精品| 97资源碰碰| 99内射视频| 五月成人综合| 国产黄大片在线观看画质优化| 夜夜AVV| 深爱激情五月天婷婷网| 免费视频无码| 丁香五月性爱| 色域五月婷婷丁香| 日韩一级网站| AAAA网站| 色婷婷91激情小说| 亚洲综合色丁香五月天| 极品少妇XXXX精品少妇偷拍| 五月天激情黄色小说在线观看| 色小说五月婷婷| 粉嫩AV久久一区二区三区| 日本九九九九| 亚洲成人在线免费| 亚洲小电影在线观看黄999| 激情六月综合| 艹色18p| av人人操| 天天干天天日蜜臀av| 丁香五月亚洲无码| 专区无日本视频高清8| 激情五月伊人婷婷| 日日夜夜干| 99国产er热视频| 狠狠干在线| 五月天婷婷色在线视频免费观看| 六月丁香激情网| 综合久久五月| 九九99视频| 九一九九黄色| 丁香婷婷视频在线| 五月天婷婷激情网| 婷婷五月丁香超碰| A在线观看| 九九99九九99九九99视频网| WWW色色色COm| 午夜丁香| 婷婷亚洲五| 99国产精品白浆在线观看免费| 九热久| 午夜激情综合| 色婷婷电影| 久操操| 五月丁香AV、伊人业余、性色熟妇| 99自拍视频网站| 亚洲综合在线播放| 五月丁香啪啪综合| 天堂AV三级| 天天色情站| 五月天精品综合在线| 久9热在线免费观看| 开心激情五月天网| 超碰色婷婷| 日韩AAAAA| 婷久看人爽| 九九九九热99超碰| 丁香五月六月综合激情| 五月婷婷与六月丁香图片激情| 国产午夜一区二区三区| 人人操人人爽成人AV| 99热国产精品| 五月激情综合激情五月| 久久涩视频| 色婷狠狠| 九九色图| 青草视频在线播放| 天天激情| 色9999日韩国产| 免费无码毛片一区二区A片| 国产精品久久久久久五月天加勒比| 九月婷婷综合| 日日艹思思热| 大香蕉99| 亚洲经典三级| 五月婷婷天天| 亚洲激情亚洲激情| 婷婷五月五月丁香| 亚洲婷婷五月天| 激情无码五月天| 大香蕉婷婷婷| 在线视频你懂得| 五月婷庭丁香在线| 一婬一伦一区二区三区| 激情五月天丁香| 久久婷婷五月丁香| 欧洲S级在线观看| 色婷婷av在线观看| 丁香色婷婷| 日韩九九视频| 97碰 在线视频观看| 久久久ww| 婷婷激情丁五月| 影视av久久久噜噜噜噜噜三级| AV在线大香蕉| 五月花婷婷最新| 操碰久| 婷婷丁香社区| 99热99久久| 激情亚洲色图片丁香综合| 超碰在线99热| 黄色录像网点| 99久久久免费| 婷婷中文字暮| 伍月婷婷免费视频| 97五月综合网| 亚洲视频一区| 色射影院| 亚洲日日操| 夜夜涩涩涩| 日韩精品一品二区三区的使用体验| 综合色五月| 五月天成人在线播放丁香| 9色在线| 无码动漫AV| 亚洲精品久久久久久久久久飞鱼| www.lingjunshare.com| 草综合网| 五月天婷婷AV| 婷婷色色欧美综合网| 午夜丁香婷婷| 婷婷五月激情中文字幕| 色高清无码视频| 亚洲小视频免费播放| 9久久久| 91麻豆国产三级精品福利在线观看| 色深爱五月| 综合五月亭亭9| 超碰免费人妻| 久久人操-久草婷婷-成人AV| www,999日本色| 色无码| 92久久| 这里只有精品视频在线| 丁香五月六月激情| WWW.夜夜操.com| 五月婷婷99热| www.9797国产| 看逼中文字幕| 大香蕉视频婷婷| 最近中文字幕2019视频1| 色播五月| 五月色色网| 六月天婷婷| 激情欧美五月丁香| 九九热这里只有精品31| 色亚洲婷婷| 狠狠干天天内射| www色色com| 狠狠色噜噜狠狠狠狠综合| 亚洲AVDVD| 婷婷五月开心六月AV| 久久全意婷婷| 嫩草AV久久伊人妇女超级A| 久热免费| 久草婷婷| 五月婷av| 99久热这里只有精品| 91九色丨国产丨爆乳| 五月丁香六月天| 激情综合网五月天| 99热这| 狠狠干无码| 五月婷六月| 五月婷婷六月丁香激情| 四色AVwww| 天天摸色吧天天摸色吧| 色婷婷色人人射| 色婷婷激情视频| 色婷婷先锋| 俺去也在线www色官网| 综合色综合| 九九精品在线网| 婷婷五月天激情五月天| 五月婷婷说| 很很干夜夜干| 亭亭玉月丁香| 五月丁香色综合| 色碰碰| 天天草天天爱| 婷婷五月天激情在线观看 | 舔色婷婷| 五月天色导航| 五月天基地| www夜夜操com| 99色视频| 丁香五月天黄色片| 婷婷综合激情| 天天日天天爽| 丁香五月婷婷激情97| 色播激情| 操碰久| 丁香五月色情| 丁香婷婷激情五月色| 九九一综合精品| 91wwmm导航| 偷偷操99| 五月婷婷六月丁香综合在线| 国产毛片精品一区二区色欲黄A片| 亚洲超碰在线| 激情五月天网站| 国产精品色情AAAAA片软件| 久久综合五月情| 午夜婷婷久久 | 国产AV不卡福利| 九九99九九99偷拍视频免费看| 丁香天堂夜| 欧美色久| 99人这里只有精品| 人人操女人| 日本久久精品| 婷婷激情综合色五月久久,色婷婷丁香花,丁香婷婷五月情天,久久婷婷五月综合色 | 双性美人被调教到喷水A片| 婷婷五月欧美综合| 色五月婷婷激情基地| 丁香五月中文字幕| 99在线观看这里都是精品| 这里只有精品在线免费视频| 五月丁香久久| 99热在线播放| 五月丁香婷婷狠狠操| 91网站黄| 五月丁香天堂网婷婷| 婷婷五月六月丁香| 五月天成人小说| 亚洲狠狠爱婷婷| 久久伦乱| 五月丁香婷婷六月天| 五月天成人在线视频网站| 天天色亚洲| 超碰成人影视| 91久久| 五月天激情久色| 亚洲成人AV在线播放| 色五月情| 在线观看亚洲视频影院| 成人色情五月天婷婷丁香| 五月天狠狠| 色情综合网| WWW·色色色·COM| 丁香五月另类小说在线阅读| 五月丁香六月激情在线| 色色操| 激情五月份婷婷| 天天肏天天插| 丁香九九九九| 五月综合人妻| 99热精品在线观看| 激情六月日韩| 色色婷婷五月天| www狠狠com| 丁香五月深爱五月婷婷| 碰97久久| 久久婷婷五月综合色区| 99re在线观看| 五月婷婷五月丁香| 欧美性生交A片免费看| 久久精品五月天| 五月婷导航| 久操婷婷| 五月天激情四射网站| 天天成人综合视频| 亚洲精品婷婷| 特级操b片| 亚洲综合婷婷六月丁香五月| 99爱精品| 激情av在线| 夜夜操,天天撸| 亚洲爆乳无码精品AAA片蜜桃 | 亚洲天堂99| 色婷婷第四色| 丁香五月激情站| 色五月天综合网| 九九av在线| www.ppypp| 国产精品a无线| 九月激情网| AA丁香综合激情| 91re色综合视频| 五月色情婷婷开心五月天| 色热久| 亚洲Av成人在线观看| 性色99| 少妇性按摩无码中文A片 | 婷婷丁香97| 99热精品无码| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 蜜臀av 粉嫩av 懂色av| 丁香香五月激情免费视频| 五月婷婷与六月丁香图片激情| 日韩丰满少妇无码内射| 五月婷婷在线丁香| www.9797国产| 99热久久日本| http://www.sd-xiangsu.com/| 狠狠色综合网| 成人婷婷| 夜色综合网| 啪色综合| 桃色五月天| WWW.久久久久久久久久久久久| 五月丁香色婷婷婷基地| 婷婷香五月天| 大香蕉五月天| 久久婷五月| 妇激情基地| 婷婷丁香久久| www.99在线| 99精品热| 久久久中文| 99色性爰网络| 色婷婷五月天激情| 色五月婷婷开心| 久久99热这里只频精品6学生| 色丁香五月婷婷| 婷婷丁香五月天婷婷| 天天插天天插天天插天天插| 丁香婷婷久久| 丁香婷婷色五月激情综合| 五月丁香手机在线| 激情五月天色色网| 亚色网站小视频| 国产69久久久欧美黑人A片| 五月丁香婷婷AV天堂| 久久97| 六月色婷婷欧美| 国产又爽又猛又粗的视频A片 | 99热这里有精力| 99超级超级超级碰| 婷婷色色婷婷| 91久久综合亚洲噜噜成人在线| 丁香六月视频免费观看| 大香伊人久色| 丁香成人视频| 午夜日日| 99热播放| 六月婷婷成人| 香蕉久久av一区二区三区| 激情五月天婷婷视频| 9999热在线| 久久综合五月天| 91se在线视频| 六月丁香啪啪| 男人的天堂在线婷婷| 色综合色色| 五月婷婷色影院| 久久人妻视频| 天天橾日日橾夜夜橾17| 青青操日本摸摸看看| 亚洲五月丁香六月婷婷| 婷婷色影院| 色五月激情五月| 精品五月天| AV在线大香蕉| 图片区 小说区 区 亚洲五月| 亚洲激情网| 人与禽A片啪啪| 开心五月深爱婷婷| 丁香九月综合激情| 激情五月综合网| 99精品久久久久久久婷婷久久| 亚洲乱码日产精品BD| 99亚洲无码| 伊人激情综合网| 另类图片五月天| 99九九精品| 大香蕉九九| 激情图片亚洲| 99超级碰碰| va中文资源在线观看| 欧美六月婷婷| 五月开心激情| 69色色视频| 亚洲AV网站| 国产精品电| 婷婷射丁香| 五月婷婷免费视频| 丁香五月综合激情性爱| 欧洲色色| 26uuu欧美| 激情五月无码| 亚洲精品视频电影| 国产成人精品123区免费视频 | 激情色播| 99re8在这里只有精品|