日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

金山辦公運(yùn)維開(kāi)發(fā)筆試:腳本/數(shù)據(jù)庫(kù)/緩存/排查/容器全解析

金山辦公運(yùn)維開(kāi)發(fā)筆試:腳本/數(shù)據(jù)庫(kù)/緩存/排查/容器全解析 1. 題目拆解與考察方向分析1.1 這份第二部分到底在考什么先說(shuō)個(gè)整體印象。金山辦公的校招筆試尤其是運(yùn)維開(kāi)發(fā)這個(gè)崗和單純背命令、背配置的傳統(tǒng)運(yùn)維筆試有本質(zhì)區(qū)別。它叫運(yùn)維開(kāi)發(fā)不是系統(tǒng)運(yùn)維不是網(wǎng)絡(luò)運(yùn)維這個(gè)名字本身就是在告訴你你的核心價(jià)值是用開(kāi)發(fā)能力解決運(yùn)維問(wèn)題。我在一線做運(yùn)維開(kāi)發(fā)也有些年頭了帶過(guò)不少新人也幫朋友公司出過(guò)類似的筆試題。我的整體感受是這類第二部分的筆試通常是在第一輪基礎(chǔ)考核Linux命令、網(wǎng)絡(luò)基礎(chǔ)、SQL這類之上做一次篩選式進(jìn)階。什么意思呢就是它不再問(wèn)某條命令怎么用而是問(wèn)在什么場(chǎng)景下你會(huì)選擇哪條命令、為什么給你一個(gè)具體問(wèn)題你如何設(shè)計(jì)一套自動(dòng)化解決方案。前者考記憶后者考工程思維。所以如果你打算裸考或者以為把《鳥(niǎo)哥的Linux私房菜》翻一遍就夠那大概率會(huì)在第二部分翻車(chē)。真正能拉開(kāi)差距的是這幾類題目腳本編程與邏輯設(shè)計(jì)、數(shù)據(jù)庫(kù)與緩存的實(shí)際應(yīng)用、故障排查與性能分析、CI/CD與容器化思路。后面我會(huì)逐個(gè)拆開(kāi)講。1.2 考察重點(diǎn)與崗位需求的對(duì)應(yīng)關(guān)系金山辦公的產(chǎn)品線很重WPS、云文檔、協(xié)同辦公這些業(yè)務(wù)對(duì)服務(wù)的穩(wěn)定性、API的響應(yīng)速度、數(shù)據(jù)的一致性都有很高要求。運(yùn)維開(kāi)發(fā)崗在這樣一家公司里日常要做的事包括但不限于維護(hù)大規(guī)模服務(wù)器的穩(wěn)定運(yùn)行、推動(dòng)發(fā)布流程自動(dòng)化、設(shè)計(jì)監(jiān)控告警體系、處理線上故障、優(yōu)化中間件性能。這就決定了筆試題目會(huì)往這些方向傾斜。我總結(jié)下來(lái)第二部分的題目的核心考察點(diǎn)大概有四塊第一腳本和編程能力。也就是你能否自動(dòng)化地處理文件批量操作、日志分析、文本抽取這種真實(shí)場(chǎng)景。第二數(shù)據(jù)庫(kù)和緩存設(shè)計(jì)。你的MySQL慢查詢優(yōu)化、Redis緩存策略是不是真的有實(shí)際經(jīng)驗(yàn)支撐而不是只背了八股文。第三系統(tǒng)排查和性能分析。給你一臺(tái)高負(fù)載服務(wù)器你如何定位瓶頸、怎么處理。第四運(yùn)維開(kāi)發(fā)工具鏈和CI/CD。你對(duì)Git、Jenkins、Docker、K8s這些工具的理解深度是否停留在用過(guò)層面。整份卷子的邏輯其實(shí)是先考你會(huì)不會(huì)寫(xiě)代碼解決問(wèn)題再考你懂不懂系統(tǒng)底層最后考你有沒(méi)有全局工程化思維。我把這套邏輯反過(guò)來(lái)從應(yīng)試者的角度拆解一下每類題目的準(zhǔn)備方法。2. 腳本編程與自動(dòng)化處理筆試題的重頭戲2.1 Shell與Python的典型考題形式先說(shuō)Shell。凡是考運(yùn)維開(kāi)發(fā)Shell腳本幾乎是必出的而且一般不會(huì)直接問(wèn)你echo是什么意思而是給你一段殘缺的腳本讓你補(bǔ)全或者讓你實(shí)現(xiàn)一個(gè)具體的功能。比如統(tǒng)計(jì)Nginx訪問(wèn)日志中IP出現(xiàn)的次數(shù)并按次數(shù)降序排列。找出某個(gè)目錄下7天前修改過(guò)、大于100MB的日志文件并清理。檢查一組服務(wù)器的端口連通性異常時(shí)輸出報(bào)警信息。這些題目表面上看是在考命令實(shí)際上考的是你懂不懂真實(shí)運(yùn)維場(chǎng)景下的自動(dòng)巡檢思路。執(zhí)行順序、退出碼處理、定時(shí)任務(wù)怎么對(duì)接這些才是題目想看的。再一個(gè)高頻考點(diǎn)是Python。注意這里考的不是語(yǔ)法而是腳本的健壯性。比如讓你寫(xiě)一個(gè)腳本讀取一個(gè)CSV文件過(guò)濾出特定條件的數(shù)據(jù)再寫(xiě)入另一個(gè)文件。這時(shí)候考官在意的點(diǎn)包括你有沒(méi)有處理文件不存在的情況、有沒(méi)有考慮內(nèi)存占用用流式逐行讀而不是一次性readlines、有沒(méi)有處理異常并輸出日志。如果你只是寫(xiě)出能跑的代碼分?jǐn)?shù)可能不會(huì)太高。如果你能多寫(xiě)一個(gè)裝飾器記錄運(yùn)行耗時(shí)或者加上參數(shù)解析支持命令行傳參這就能明顯拉開(kāi)差距。我在實(shí)際工作中寫(xiě)自動(dòng)化腳本的習(xí)慣是能復(fù)用函數(shù)就復(fù)用不寫(xiě)一坨到底的面條代碼所有可能拋異常的地方一定要有捕獲和錯(cuò)誤日志腳本執(zhí)行結(jié)束后必須有明確的輸出提示。這些習(xí)慣可以直接遷移到筆試答題里。2.2 一種更高效的答題思路先設(shè)計(jì)再動(dòng)手很多同學(xué)看到編程題第一反應(yīng)是直接打開(kāi)編輯器想到哪寫(xiě)到哪。這個(gè)習(xí)慣在筆試?yán)锾貏e吃虧因?yàn)楣P試題給的空格有限閱卷人看的是你的邏輯不是你敲代碼的速度。我建議的答題順序是先在草稿紙上把輸入、處理、輸出三個(gè)環(huán)節(jié)列出來(lái)明確每一步可能出現(xiàn)的異常情況再動(dòng)筆寫(xiě)代碼。舉個(gè)例子如果題目要求讀取某個(gè)配置文件解析出所有keyvalue的鍵值對(duì)并檢查有沒(méi)有重復(fù)key你在動(dòng)手前就要想清楚配置文件格式是統(tǒng)一的keyvalue嗎有沒(méi)有可能包含注釋行或者空行重復(fù)key怎么處理是報(bào)錯(cuò)、忽略還是保留最后一個(gè)如果value本身含有符號(hào)呢比如urlhttp://a.com/bc這種情況split()以后要不要限制分割次數(shù)想清楚這三件事你寫(xiě)出來(lái)的代碼結(jié)構(gòu)是完全不同的。第一種寫(xiě)法可能是config_dict {} with open(config.ini) as f: for line in f: key, value line.strip().split() if key in config_dict: raise ValueError(fduplicate key: {key}) config_dict[key] value但如果你考慮到了value中可能含就會(huì)寫(xiě)成config_dict {} with open(config.ini) as f: for line in f: line line.strip() if not line or line.startswith(#): continue key, _, value line.partition() key key.strip() if not key: continue if key in config_dict: raise ValueError(fduplicate key: {key}) config_dict[key] value.strip()兩種寫(xiě)法高下立判。后者我一眼看過(guò)去就知道這人的生產(chǎn)環(huán)境經(jīng)驗(yàn)豐富因?yàn)槲覍?shí)際處理配置文件時(shí)就踩過(guò)value里藏著等號(hào)的坑。你答題時(shí)能讓閱卷人產(chǎn)生這種這人是同行的感覺(jué)分?jǐn)?shù)一定低不了。2.3 文本處理的常用命令組合Shell筆試?yán)镂谋咎幚砣齽蚲rep、sed、awk屬于必考內(nèi)容建議你不光會(huì)用還得會(huì)組合。這里分享幾個(gè)我從實(shí)際工作里總結(jié)出來(lái)的高頻組合公式從日志中統(tǒng)計(jì)某個(gè)關(guān)鍵詞的分布grep ERROR app.log | awk {print $1} | sort | uniq -c | sort -rn按時(shí)間范圍拉取日志片段sed -n /2020-06-01 10:00:00/,/2020-06-01 10:30:00/p app.log替換配置文件的某個(gè)字段要求整行匹配才替換sed -i /^max_connections/c\max_connections2000 /etc/mysql/my.cnf考試時(shí)大概率會(huì)出現(xiàn)類似的組合場(chǎng)景建議你別只背單條命令要理解管道符串聯(lián)之后的每一步作用。面試的時(shí)候考官如果追問(wèn)中間這步輸出什么格式能準(zhǔn)確答上來(lái)的人不到三成。3. 數(shù)據(jù)庫(kù)與緩存從基礎(chǔ)語(yǔ)法到性能思維3.1 MySQL考點(diǎn)索引與慢查詢校招筆試考數(shù)據(jù)庫(kù)幾乎繞不開(kāi)MySQL。但我發(fā)現(xiàn)一個(gè)現(xiàn)象很多同學(xué)對(duì)SQL語(yǔ)法背得滾瓜爛熟什么left join、子查詢、group by都用得很溜但一遇到為什么這個(gè)查詢慢就答不上來(lái)。這說(shuō)明什么說(shuō)明他們?nèi)鄙傩阅芤暯恰a槍?duì)金山這類互聯(lián)網(wǎng)辦公產(chǎn)品數(shù)據(jù)庫(kù)題目大概率會(huì)圍繞如何優(yōu)化一條慢SQL和如何設(shè)計(jì)表結(jié)構(gòu)支撐某業(yè)務(wù)場(chǎng)景來(lái)出。我強(qiáng)烈建議你在復(fù)習(xí)時(shí)每一道SQL題都追問(wèn)自己三個(gè)問(wèn)題這張表的字段長(zhǎng)度合理嗎有沒(méi)有為所有where條件里的字段建立索引這條查詢會(huì)不會(huì)產(chǎn)生全表掃描explain的結(jié)果是什么樣的如果數(shù)據(jù)量到100萬(wàn)、1000萬(wàn)級(jí)這條SQL還能扛住嗎能問(wèn)出這三個(gè)問(wèn)題說(shuō)明你是真的在生產(chǎn)環(huán)境里見(jiàn)過(guò)數(shù)據(jù)量級(jí)而不是只在本地練習(xí)庫(kù)里跑過(guò)幾千行數(shù)據(jù)。舉個(gè)典型的考題例子有一個(gè)訂單表orders字段包括order_id、user_id、status、created_at查詢某用戶最近10筆訂單的SQL請(qǐng)優(yōu)化。最差的答案就是直接select * from orders where user_id 123 order by created_at desc limit 10;因?yàn)楫?dāng)數(shù)據(jù)量大時(shí)MySQL需要先篩出該用戶所有訂單再排序。更好的思路是創(chuàng)建(user_id, created_at)的聯(lián)合索引讓索引直接按用戶和時(shí)間排序避免額外排序操作。加上索引之后這條SQL基本可以走索引覆蓋掃描性能提升往往是幾十倍級(jí)別。這不是憑空說(shuō)的是實(shí)際線上優(yōu)化過(guò)的經(jīng)驗(yàn)。3.2 Redis考點(diǎn)緩存穿透、擊穿與雪崩數(shù)據(jù)庫(kù)之外的第二個(gè)高頻考點(diǎn)就是Redis。字節(jié)也好、金山也好互聯(lián)網(wǎng)公司基本都重度依賴Redis做緩存。校招題里最常見(jiàn)的三種極端情況這里先給你說(shuō)清楚緩存穿透查詢一個(gè)根本不存在的數(shù)據(jù)Redis里沒(méi)有DB里也沒(méi)有惡意請(qǐng)求直接打到DB上。解法一般是布隆過(guò)濾器或者緩存空值并設(shè)置短過(guò)期時(shí)間。緩存擊穿某個(gè)熱點(diǎn)key在過(guò)期瞬間大量請(qǐng)求同時(shí)落到DB上。解法是互斥鎖重建緩存熱點(diǎn)數(shù)據(jù)邏輯上永不過(guò)期后臺(tái)異步續(xù)期。緩存雪崩大量key在同一時(shí)間段集中過(guò)期導(dǎo)致DB壓力驟增。解法是給過(guò)期時(shí)間加一個(gè)隨機(jī)值打散過(guò)期時(shí)間點(diǎn)。我不會(huì)只丟概念下面用一個(gè)題來(lái)演示答題思路。題目可能是某系統(tǒng)使用Redis緩存用戶信息key為user:{id}請(qǐng)?jiān)O(shè)計(jì)一個(gè)方案避免緩存雪崩。常規(guī)答法是過(guò)期時(shí)間設(shè)置為setex user:{id} 3600 value但3600秒就是固定值所有用戶同時(shí)過(guò)期。優(yōu)化方案是過(guò)期時(shí)間設(shè)置為3600 random.randint(0,300)這樣同一秒內(nèi)過(guò)期的key大幅減少。如果再進(jìn)一步可以引入多級(jí)緩存比如本地緩存一層Redis一層徹底兜底。筆試的考察深度通常到方案設(shè)計(jì)這個(gè)層級(jí)就夠了但如果你能多提一嘴熱點(diǎn)key的過(guò)期延時(shí)續(xù)期策略閱卷人印象會(huì)非常深。3.3 數(shù)據(jù)一致性場(chǎng)景題除了直接考語(yǔ)句和緩存策略第二部分還經(jīng)常給一個(gè)業(yè)務(wù)場(chǎng)景來(lái)考數(shù)據(jù)一致性。比如用戶修改頭像后需要展示新頭像但CDN/緩存里還是舊頭像你怎么處理這類題的考察點(diǎn)很明確你有沒(méi)有真正思考過(guò)寫(xiě)更新和緩存失效之間的順序。我個(gè)人推薦的經(jīng)驗(yàn)公式是先更新數(shù)據(jù)庫(kù)再刪緩存。為什么不是先更新緩存因?yàn)椴l(fā)場(chǎng)景下先更新緩存再寫(xiě)庫(kù)一旦寫(xiě)庫(kù)失敗緩存里就是錯(cuò)誤數(shù)據(jù)。而先更新庫(kù)哪怕刪緩存失敗最多是下一次請(qǐng)求打回一個(gè)舊值再過(guò)一次過(guò)期時(shí)間就自愈了。這個(gè)順序問(wèn)題是我在真實(shí)項(xiàng)目中踩過(guò)坑后才徹底明白的。筆試時(shí)把這個(gè)順序邏輯寫(xiě)清楚比堆一堆術(shù)語(yǔ)要強(qiáng)得多。4. 網(wǎng)絡(luò)與系統(tǒng)排查思路比記參數(shù)更重要4.1 高頻網(wǎng)絡(luò)知識(shí)點(diǎn)TCP握手、HTTP狀態(tài)碼、DNS解析金山辦公的筆試中網(wǎng)絡(luò)部分的題目不會(huì)像網(wǎng)絡(luò)工程師那樣考報(bào)文級(jí)細(xì)節(jié)更多是考你能不能在應(yīng)用服務(wù)出問(wèn)題時(shí)順著網(wǎng)絡(luò)去排查鏈路。所以TCP三次握手過(guò)程、四次揮手為什么需要TIME_WAIT、HTTP的常見(jiàn)狀態(tài)碼含義200、301、302、403、404、500、502、503這些一定要滾瓜爛熟。另外我建議你重點(diǎn)準(zhǔn)備一下HTTP和HTTPS的區(qū)別以及Nginx反向代理的工作方式因?yàn)榻鹕竭@種產(chǎn)品線很重的公司線上一定大量使用Nginx做網(wǎng)關(guān)和負(fù)載均衡。常見(jiàn)的前置Nginx返回502的排查思路是先確認(rèn)后端服務(wù)是否存活再看Nginx連接后端的超時(shí)配置最后看后端進(jìn)程的連接數(shù)是否被打滿。這種排查鏈路如果能在筆試?yán)镉眠壿嬊逦奈淖謱?xiě)出來(lái)是很加分的。4.2 系統(tǒng)負(fù)載高你能不能在半小時(shí)內(nèi)定位問(wèn)題服務(wù)器CPU負(fù)載突然飆高你如何排查這幾乎是每年必出的場(chǎng)景題但能把整個(gè)過(guò)程答完整的人很少。我會(huì)用下面這套五步走來(lái)拆解一個(gè)典型的壓力場(chǎng)景也是我做線上問(wèn)題定位時(shí)的習(xí)慣第一先用uptime看Load Average的整體趨勢(shì)判斷負(fù)載是在漲還是已經(jīng)平穩(wěn)。如果Load持續(xù)高于CPU核心數(shù)說(shuō)明可能存在真正的資源爭(zhēng)搶而不是瞬時(shí)抖動(dòng)。第二用top進(jìn)入交互界面按CPU排序找到具體是哪個(gè)進(jìn)程占用了大量CPU。這一步最關(guān)鍵因?yàn)樨?fù)載高只是一個(gè)表象真正的問(wèn)題往往集中在某一個(gè)進(jìn)程。如果這個(gè)進(jìn)程是Java應(yīng)用接著用top -Hp 進(jìn)程號(hào)找到這個(gè)進(jìn)程內(nèi)部的哪些線程占用了CPU再用jstack導(dǎo)線程快照看這些線程在干什么。第三如果不是CPU密集型而是IO等待那么top里的wa指標(biāo)會(huì)明顯偏高此時(shí)需要用iostat看磁盤(pán)吞吐和IOPS看看是不是磁盤(pán)讀寫(xiě)的瓶頸。很多新人只盯著CPU忽略磁盤(pán)IO結(jié)果排查了半天方向全錯(cuò)。第四檢查內(nèi)存用free -h看還有多少可用內(nèi)存用vmstat看swap使用情況。如果你的應(yīng)用在持續(xù)swap那性能一定好不了這往往是內(nèi)存設(shè)置不合理導(dǎo)致的。第五結(jié)合上下文看看是不是流量突增、代碼死循環(huán)、緩存失效回源這三種典型因素。這套思路如果你是第一次接觸建議反復(fù)讀幾遍因?yàn)檫@就是一線運(yùn)維開(kāi)發(fā)工程師處理線上事故的底層邏輯筆試的時(shí)候把一個(gè)完整鏈路答下來(lái)絕對(duì)能讓閱卷老師覺(jué)得你不是紙上談兵。4.3 經(jīng)典的端口不通排查題再給你拆一道高頻基礎(chǔ)題用戶反饋某個(gè)服務(wù)訪問(wèn)不通你怎么排查這道題的經(jīng)典答題框架必須是從底層往上層一層層排除先確認(rèn)服務(wù)進(jìn)程有沒(méi)有在監(jiān)聽(tīng)對(duì)應(yīng)端口ss -lntp | grep 8080。再確認(rèn)本機(jī)防火墻是否放行端口iptables -L -n或firewall-cmd --list-all。然后在客戶端測(cè)試TCP連通性telnet 目標(biāo)IP 8080或nc -vz 目標(biāo)IP 8080。如果TCP通但HTTP不通用curl -v看完整請(qǐng)求輸出重點(diǎn)看返回的狀態(tài)碼和響應(yīng)頭。很多同學(xué)在這個(gè)題上第一反應(yīng)就是重啟服務(wù)或者看日志實(shí)際上第一件該做的事是確認(rèn)到底是客戶端連不上還是服務(wù)端沒(méi)響應(yīng)。把鏈路拆開(kāi)才能定位到具體某一層出了問(wèn)題。做題和干活是一樣的先確認(rèn)故障邊界再深入排查。筆試時(shí)把這個(gè)邏輯寫(xiě)得越清晰得分就越高。5. 容器化與CI/CD從工具使用到鏈路思維5.1 Docker的基礎(chǔ)題鏡像與容器的生命周期金山辦公2020年前后的業(yè)務(wù)容器化已經(jīng)是常態(tài)所以考Docker基礎(chǔ)毫不意外。這里有個(gè)核心概念題你務(wù)必搞清楚鏡像和容器的區(qū)別。鏡像是一個(gè)只讀的模板容器是鏡像運(yùn)行時(shí)的實(shí)例。你可以把平時(shí)docker run、docker build、docker commit、docker exec這些命令都答上來(lái)但我不建議只背命令更重要的是理解容器本質(zhì)上是進(jìn)程級(jí)別的隔離這個(gè)理念。筆試在Docker這塊的常見(jiàn)問(wèn)法有Dockerfile中CMD和ENTRYPOINT的區(qū)別是什么如何減小Docker鏡像體積如何讓容器里的服務(wù)優(yōu)雅退出以最后一個(gè)問(wèn)題為例優(yōu)雅退出的核心是讓主進(jìn)程能夠接收到SIGTERM信號(hào)并完成清理而不是被直接kill。很多同學(xué)壓根不知道Docker stop發(fā)的是SIGTERM而不是SIGKILL也不清楚Java應(yīng)用要配合trap或者Spring Boot的Graceful Shutdown特性才能實(shí)現(xiàn)優(yōu)雅下線。這些細(xì)節(jié)如果能在筆試?yán)飳?xiě)出來(lái)可以證明你真用容器跑過(guò)生產(chǎn)服務(wù)而不僅僅是在本地docker run -it過(guò)。5.2 CI/CD流程設(shè)計(jì)題不只是一個(gè)概念題既然崗位叫運(yùn)維開(kāi)發(fā)CI/CD相關(guān)的問(wèn)題一定會(huì)占一部分比重。我覺(jué)得這部分最??嫉念}型是設(shè)計(jì)題比如請(qǐng)?jiān)O(shè)計(jì)一條從代碼提交到生產(chǎn)環(huán)境發(fā)布的流水線。很多同學(xué)第一反應(yīng)是把GitLab CI、Jenkins、Docker、K8s這些名詞懟上去但我要告訴你的是面試官想看到的不是工具清單而是階段劃分。一條合格的流水線至少包含以下幾個(gè)階段代碼提交觸發(fā)構(gòu)建階段進(jìn)行編譯和單元測(cè)試。構(gòu)建成功后產(chǎn)出制品鏡像或JAR包推送到制品庫(kù)。部署到測(cè)試環(huán)境跑自動(dòng)化接口測(cè)試。審核通過(guò)后部署到預(yù)發(fā)環(huán)境進(jìn)行冒煙驗(yàn)證。最后灰度發(fā)布到生產(chǎn)環(huán)境觀察監(jiān)控指標(biāo)逐步放量。如果筆試題目要求你畫(huà)流程圖或用語(yǔ)言描述流程建議你按上面的層次結(jié)構(gòu)來(lái)答每一步說(shuō)清楚輸入是什么、輸出是什么、誰(shuí)觸發(fā)、出現(xiàn)問(wèn)題怎么回滾。能把這四個(gè)維度講清楚你的工程化思維就已經(jīng)超過(guò)大多數(shù)人。5.3 K8s重點(diǎn)Pod、Deployment、Service的關(guān)系近些年校招筆試題對(duì)Kubernetes的考察越來(lái)越頻繁考的倒不深但會(huì)涉及最核心的抽象模型。舉個(gè)例子Pod和Deployment的區(qū)別是什么Service怎么實(shí)現(xiàn)負(fù)載均衡。很多同學(xué)答Pod是最小調(diào)度單元Deployment是管理副本的控制器這話沒(méi)錯(cuò)但太干了。我提供一個(gè)更貼合實(shí)操的答法Deployment負(fù)責(zé)聲明我要多少個(gè)Pod副本保持運(yùn)行并且當(dāng)Pod掛了的時(shí)候自動(dòng)拉起新的如果業(yè)務(wù)需要升級(jí)版本Deployment會(huì)按照RollingUpdate策略逐個(gè)替換Pod避免服務(wù)中斷。而Service則是給一組Pod提供一個(gè)穩(wěn)定的訪問(wèn)入口實(shí)現(xiàn)負(fù)載均衡和服務(wù)發(fā)現(xiàn)。答題的時(shí)候能把升級(jí)策略副本管理服務(wù)暴露這幾個(gè)行為層面的內(nèi)容帶出來(lái)比單純默寫(xiě)概念好得多。6. 實(shí)戰(zhàn)題型演練把思路落到實(shí)處6.1 場(chǎng)景題一日志關(guān)鍵詞監(jiān)控報(bào)警這種題我強(qiáng)烈建議你認(rèn)真過(guò)一遍因?yàn)樗湫土藥缀趺總€(gè)運(yùn)維開(kāi)發(fā)崗位面試都會(huì)碰到。題目描述通常是線上有多個(gè)應(yīng)用實(shí)例需要監(jiān)控日志中出現(xiàn)OutOfMemory關(guān)鍵詞的實(shí)例并發(fā)送報(bào)警你會(huì)怎么實(shí)現(xiàn)一個(gè)完整的方案分為數(shù)據(jù)采集、實(shí)時(shí)處理、告警通知三個(gè)部分。采集端可以用Filebeat或Logstash采集應(yīng)用日志發(fā)到Kafka實(shí)時(shí)處理端可以用Flink或者Go的grok庫(kù)做關(guān)鍵詞匹配也可以簡(jiǎn)單用Logstash的filter直接過(guò)濾告警端命中關(guān)鍵詞后通過(guò)Webhook調(diào)用企業(yè)微信、釘釘或短信網(wǎng)關(guān)。這樣一套鏈路下來(lái)比寫(xiě)個(gè)腳本crontab每分鐘grep日志要健壯得多不會(huì)漏報(bào)也能做到秒級(jí)響應(yīng)。如果筆試只讓你用一個(gè)腳本一個(gè)定時(shí)任務(wù)這種輕量方案來(lái)解決也不能說(shuō)錯(cuò)但你要意識(shí)到它的缺陷單點(diǎn)問(wèn)題、日志輪轉(zhuǎn)時(shí)的漏讀、多實(shí)例部署困難。答完輕量方案之后如果能主動(dòng)補(bǔ)一句這個(gè)方案適合臨時(shí)應(yīng)急長(zhǎng)期用我會(huì)考慮引入采集鏈路這樣的作答層次會(huì)更飽滿。6.2 場(chǎng)景題二線上發(fā)布后性能下降還有一類高頻場(chǎng)景題新版本發(fā)布后線上調(diào)用響應(yīng)時(shí)間明顯變長(zhǎng)你怎么排查我的第一反應(yīng)永遠(yuǎn)不是回滾而是先確認(rèn)影響范圍和變更內(nèi)容。因?yàn)榛貪L是一種高成本操作且如果是代碼問(wèn)題回滾后可能要重新排查所以除非線上已經(jīng)不可用否則一般建議先定位。第二步是看監(jiān)控曲線。發(fā)布前后對(duì)比CPU、內(nèi)存、QPS、RT、GC情況如果GC次數(shù)和耗時(shí)明顯上升那可能是新代碼中創(chuàng)建了大量對(duì)象或者某個(gè)緩存設(shè)置有問(wèn)題如果QPS沒(méi)變但RT變大那重點(diǎn)檢查有沒(méi)有慢調(diào)用、鎖競(jìng)爭(zhēng)、數(shù)據(jù)庫(kù)連接池是否被打滿。第三步是看日志特別是error日志和慢日志。如果某個(gè)接口的耗時(shí)從200ms變成800ms用tracing工具定位到調(diào)用鏈中具體哪一環(huán)耗時(shí)最長(zhǎng)。如果是外部依賴數(shù)據(jù)庫(kù)、第三方接口變慢那就是下游問(wèn)題如果是自身代碼邏輯導(dǎo)致那就直接看對(duì)應(yīng)代碼段的性能。排查思路比具體命令重要。答出先看監(jiān)控、再分模塊定位、最后看代碼這個(gè)三層遞進(jìn)邏輯基本就穩(wěn)了。6.3 場(chǎng)景題三如何保障系統(tǒng)高可用這個(gè)問(wèn)題范圍很大經(jīng)常作為筆試最后一道論述題或設(shè)計(jì)題出現(xiàn)??疾烀鎻V但沒(méi)有標(biāo)準(zhǔn)答案關(guān)鍵在于你能否覆蓋到多個(gè)層面。我習(xí)慣從入口層、應(yīng)用層、數(shù)據(jù)層、基礎(chǔ)設(shè)施層四個(gè)角度來(lái)答。入口層DNS解析可以配置多線路Nginx做多節(jié)點(diǎn)負(fù)載均衡避免單點(diǎn)入口。應(yīng)用層服務(wù)部署多副本放到不同機(jī)架/可用區(qū)自動(dòng)故障轉(zhuǎn)移無(wú)狀態(tài)服務(wù)用負(fù)載均衡重新分發(fā)流量。數(shù)據(jù)層數(shù)據(jù)庫(kù)做主從復(fù)制Redis用主從加哨兵或者集群定時(shí)備份和日志備份形成災(zāi)備體系?;A(chǔ)設(shè)施層網(wǎng)絡(luò)、電源、存儲(chǔ)都考慮冗余監(jiān)控系統(tǒng)全維度覆蓋出現(xiàn)異常時(shí)能做自動(dòng)化預(yù)案。這類論述題的加分項(xiàng)是成本意識(shí)。如果能在方案里提到核心鏈路重點(diǎn)保障非核心業(yè)務(wù)降級(jí)處理這種策略性設(shè)計(jì)比單純堆一堆高可用組件要高級(jí)得多。因?yàn)槲易龅南到y(tǒng)都知道把三個(gè)9還是五個(gè)9成本不是線性上漲而是指數(shù)級(jí)上漲。能夠結(jié)合業(yè)務(wù)實(shí)際去設(shè)計(jì)高可用方案才是面試官最想看到的能力。7. 備考與答題的獨(dú)家實(shí)操心得7.1 筆試題的常見(jiàn)扣分點(diǎn)早知道早避坑我說(shuō)幾個(gè)閱卷時(shí)最常見(jiàn)的扣分點(diǎn)希望對(duì)你有幫助。第一題目要求寫(xiě)出完整命令或?qū)懗瞿_本結(jié)果只寫(xiě)了核心命令沒(méi)寫(xiě)流程控制。比如讓寫(xiě)一個(gè)腳本檢查多個(gè)服務(wù)的端口是否存活很多人就寫(xiě)nc -zv 127.0.0.1 80不寫(xiě)循環(huán)、不寫(xiě)判斷、不寫(xiě)輸出日志。這在填空題里能得分但在實(shí)現(xiàn)題里只能拿一半分。第二答案里沒(méi)有體現(xiàn)防御性編程。舉個(gè)例子一個(gè)腳本里用了臨時(shí)文件正常運(yùn)行沒(méi)問(wèn)題但如果上次異常退出后臨時(shí)文件沒(méi)有清理再次運(yùn)行就會(huì)報(bào)錯(cuò)。有經(jīng)驗(yàn)的人在腳本開(kāi)頭會(huì)加一句trap rm -f /tmp/xxx.$$ EXIT來(lái)保證退出時(shí)清理。這種細(xì)節(jié)寫(xiě)出來(lái)就是強(qiáng)烈的生產(chǎn)經(jīng)驗(yàn)信號(hào)。第三只寫(xiě)做了什么不寫(xiě)為什么這么做。比如答Redis緩存更新方案只說(shuō)更新數(shù)據(jù)庫(kù)后刪除緩存沒(méi)說(shuō)為什么這個(gè)順序更安全分?jǐn)?shù)就差一截。我建議答題時(shí)養(yǎng)成習(xí)慣結(jié)論理由例外。結(jié)論是一句話理由是把關(guān)鍵邏輯講清楚例外是說(shuō)明什么場(chǎng)景下方案不適用。7.2 短期內(nèi)高效備考的方向建議如果距離筆試只剩一到兩周我建議你把精力集中在以下三個(gè)板塊這是性價(jià)比最高的突擊路徑一是Shell文本處理和Python腳本題這是最高頻的考法占分比最大而且短期刷題效果最明顯。把常見(jiàn)場(chǎng)景題做一遍形成肌肉記憶。二是MySQL和Redis的重點(diǎn)應(yīng)用集中看索引優(yōu)化、explain的使用、緩存三類問(wèn)題穿透、擊穿、雪崩的解法務(wù)必能用文字理通邏輯。三是網(wǎng)絡(luò)和系統(tǒng)排查題重點(diǎn)是TCP握手、HTTP狀態(tài)碼、CPU高負(fù)載排查用先定位再處理的思路來(lái)答題拒絕只堆名詞。至于Docker、K8s、CI/CD這些內(nèi)容如果在筆試中出現(xiàn)大概率是基礎(chǔ)概念加簡(jiǎn)單的設(shè)計(jì)題時(shí)間不夠的話可以先把Dockerfile核心指令、Pod/Deployment/Service區(qū)別、流水線階段劃分這三大塊吃透。7.3 一些我的個(gè)人經(jīng)驗(yàn)總結(jié)我做了這些年運(yùn)維開(kāi)發(fā)最深的感受是這個(gè)崗位筆試不是終點(diǎn)準(zhǔn)確說(shuō)筆試只是一個(gè)篩選信號(hào)。真正決定你能否通過(guò)后面面試的是你對(duì)為什么的理解程度。公司培養(yǎng)一個(gè)運(yùn)維開(kāi)發(fā)新人的成本并不低他們希望招到的是遇到問(wèn)題不慌、能自己找到答案的人。所以備考筆試的時(shí)候不妨多地假如我是這個(gè)系統(tǒng)的運(yùn)維負(fù)責(zé)人我會(huì)怎么做來(lái)思考問(wèn)題。你在草稿紙上反復(fù)推敲過(guò)的每一個(gè)極端場(chǎng)景最后都會(huì)變成你面試時(shí)的底氣。還有一個(gè)小建議。筆試時(shí)如果遇到完全沒(méi)見(jiàn)過(guò)的題千萬(wàn)不要空著不寫(xiě)。你可以先把題目中你已經(jīng)知道的知識(shí)點(diǎn)列出來(lái)再嘗試給出一個(gè)你認(rèn)為合理的方案哪怕不完整也能讓閱卷人看到你分析問(wèn)題的方向是對(duì)的。我在實(shí)際業(yè)務(wù)里遇到未知問(wèn)題也是這個(gè)策略先把已知邊界確認(rèn)掉再把問(wèn)題從大化小一層層拆最后總能找一個(gè)可以落地的解法。這套思路本身其實(shí)比任何標(biāo)準(zhǔn)答案都更能代表運(yùn)維開(kāi)發(fā)工程師的核心能力。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
校园春色综合网| 超碰人人在线| 国产视频三区四区| 人妻内射一区二区在线视频| 欧美情色亚洲| 欧美一区二区日韩三区| 啊啊啊操一区| 精彩久久中文| 中文字幕久久婷婷丁香五月天| 欧美人与动性人交a| 久久AV无码AV| 91色色色| 亚洲色图欧洲| 大香蕉亚洲中文| 97伊人超碰| 秋霞成人做爱| 99青草| 久久久久久少妇| 九九视频黄色片| 欧美精品成人在线播放| 香蕉一区二区三区在线视频| 超碰色老头| 成年人性爱日韩| 麻豆 亚洲 97| 日韩激情啪啪啪| 国产a级精品| A级片日韩欧美国产欧美视频精选观看 | 四虎精品永久在线播放| 熟妇熟女视频一区二区三区| 九九九久久久| 日韩中文字幕熟妇人妻| 免费看黄视频亚洲网站| 超碰1997| 亚州免费啪啪视频| 亚洲诱惑天堂 | 中文无码一二三区| 97久久网| 欧美亚洲高清不卡| 伊人色综合网| 精品人妻av在线播放| 午夜久久一区二区无码中出| 国产一级137片内射麻豆| 欧洲自拍第一页| 五月丁香六月婷| 搡老女人老熟女91| 有码专区最新中文字幕有码| 色五月69夫妻| 亚洲AV永久无码一区仙野| 妇人噜噜| 2010男人的天堂| 韩国黄片aaaa| 强被迫伦姧在线观看无码网站| 亚洲色图 图片| 日韩国语字幕| 秋霞免费AV| 国内一级精品| 色臀aV| 国产黄a三级三级三级av在线看| 国产日韩无码一区二区三区久久区| 大干人妻| 91 综合 色| 开心五月婷婷| 久草视频在线视频在线视频在线观看| 女上位精品在线| 久久精精区一区二区一蜜桃一区二区| 亚洲国产精品有声| 男人午夜天堂| 大象AV在线| 精品国产一区探花在线观看| 中文字幕-区二区三区四区视频中国| 人人天天欧洲| 亚洲制服欧美另类内射| 欧美日韩另类在线| 伊人丁香五月婷婷| 蜜乳中文字幕a在线| 亚洲三级。日韩三级| 亚洲风情综合网| 91老熟女老女人国产老太| 夜夜爽爽夜夜精品视频| 4tube欧美女厕所| 五月天色图| 国产乱码久久久久久| 九九久久首页| 26uuu国产| 婷婷五月天成人| 色欧美天天| 国产午夜无码片在线观看影视 | 色香色欲天天综合网天天来吧 | 天堂俺去俺来也www久久婷婷| 伊人网高清| 麻豆性爱视频在线播放| 无码又爽又硬又激情免费视频| 亚洲超碰97| 国产女大学生AV| HEYZO高无码国产精品227| 狠狠综合| 蜜桃香蕉久草精品在线| 人妻熟女av国产网站| 超碰免费在线| 大香蕉伊人亚洲| 久久r精品| 日韩精品午夜操呦呦不卡影院| 亚洲高清无毛一区二区| 午夜福利成人免费视频| 91人妻人人妻| 国产精品色哟哟| 怡红院成人视频| 性做久久久久久免费观看软件| 96精品在线| 久草精品视频| 亚洲精品性爱片| 伊人久久88国产女| 日韩成人小视频| 性做久久久久久久| 亚洲成?V人片在线观看福利| 色眯眯av| 开心五月婷婷激情| 欧美久久人体| 久久女人一区二区三区| 激情终合网| 色狠狠一区二区三区香蕉| 成人五级久久| 一区中文字幕二区日韩| 亚洲高潮影院| 亚洲激情AV| 色眯眯av| 91站街按摩店老熟女熟女| 噜噜噜噜天天狠狠| 中文字幕少妇色| 日逼国产| 嗯嗯嗯啊啊在线观看| 一级啊性爱在线视频| 极品色综合| 手机不卡视频不卡在线一二三区| caoni国产亚洲av| 国产精品亚洲日韩骚欢乐谷最新地址发布页huanieguty性屋娱乐妖精视频 | 精品一区二区三区蜜桃臀赵总 | 女人的天堂大香蕉网| 黄色大片免费在线| 超碰社区97| 六九九九| 日韩A优精品在线观看| 91模特在线观看| 日本三级中国三级99人妇网站| 淫淫综合网| 五月婷婷六月色| 曰韩人妻中文字幕在线| 97超碰精品图片| 第45页一区二区| 被体育老师抱着c到高潮| 日日不卡av| 亚洲大色堂| 成人av影院在线观看| 日韩av电影网站| 亚洲国产日韩欧美熟妇在线| 51国产午夜精品视频| 人妻黑丝袜电影| 国产高清成人传媒影视| 亚洲日韩天堂| 国产精品久久久久综合| 一区在线精品中文字幕| BBBBB97COM| 裸体美女久久久| 大稥蕉免费视频这里只有精品| 国产一区二区av综合| 久久老熟女| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 韩国三级三级BD在线| 欧美亚洲日本视频久久久 | 超碰97COm中文| 午夜精品久久久久久久| 久草热制服丝袜在线观看| 久久久久久性爱视频| 大香蕉黄色一区| 手机在线中文字幕国产 | 91丝袜| 青青草好吊色| 亚洲色欧| 92性色国产午夜福利在线661| 久久亚州精品成人Av无| 久久精品国产AV一区二区三区| JuliaAnn丝袜熟女系列| 亚洲视频二区| 青草地一本线一区二区三区| 人妻 丝袜美腿 中文字幕| 爱我干综合| 无码99| 少妇 综合| 久久9精品视频| 超碰免费欧美7| 午夜小电影在线插入淫高潮| 狠狠狠狠狠狠| 青草视频人妻在线观看| 欧美精品系列| 免费岛国一级片| av国产无码| 啊啊啊啊啊啊啊好爽不要| 这里只有97精品| 天天操天天干一区二区| 97玖玖人妻| 91久久18禁| 日本在线一二| 国产成人天堂| 99超碰网| 成人午夜小视频手机在线看| 老女人爆菊| 亚洲熟女乱色一区二区三区久久久| 中文字幕色AV| 亚洲国产av中文字幕久久| 色婷婷成人| 久久久天美| 亚洲中文字幕在线视频一区二区| 五月丁香婷婷色| 精品少妇人妻一区二区三区| 欧美丰满熟妇XXXX性ppX人交| 丁香六月激情综合| 超碰色大香蕉| www.色婷婷.com| 天天综合~91| 中文字幕亚韩| 91老熟女91老女人| 八人操人人摸人人看| 国产精品在线一区二区| 九九精品99| 性色高清在线| 国产精品美女在线一区| 亚洲色图欧美色图综合| 国产又粗又长又爽又色| 干少妇视频| 中文97国产| 97超碰欧美| 激情久久av一区av二区av| 97超碰中文字幕| 欧美精品自慰系列寂寞少妇| 久9久9久9久9久9久9| 亚洲AV永久无码一区仙野| 神马午夜久久| 久久中出在线| 人人妻人人操人人乐| 欧美A片中文字幕| 一区二区偷拍拍视频| 亚洲精品一二牛牛| 久久久久网站-538在线视频-欧美永久乱码 | 欧美伊人久久综合网| 91 手机在线播放 绯色| 国产在线视频午夜精华在| AV老汉| 欧美成人A天堂片在线观看| 天天碰久久入| 加勒比日本在线| 婷婷五月天网| 18禁看网站一区| 欧洲亚洲综合| 色在线69堂| 亚洲色堂免费视频| 色综合久| 丁香五月自拍| 日本Xx性爱| 免费?级毛片无码?∨蜜芽试看| 精品人妻视频一区二区在线播放| 一起草精品人妻| 91丝袜在线观看| 99国产女人| 日韩欧美偷拍美女视频| 97在线视频观看网站| 日本淫穴在线| 欧美 青青草| 亚洲激情综合| 色色色欧美| 成人av福利在线观看| 激情小说在线视频| 日韩有码 一区二区三区| 78超碰| 色图综合| 2019精品国产无码成人| 亚洲永久永久永久永久一级一级一级精品| 国产11页| 国产超碰人人爽人人做| 欧美日韩高潮喷水91| 插日本熟女视频| 3d成人精品一区二区| 蜜乳成人AV| 91天天看| 国产一区二区精品久久99| 亚洲无线码欧洲精品区别| 亚洲精品国产无码高清| 韩国三级一线观看久| 国产欧美一级在线观看| 日本91白丝| 午夜福利在线视频1000| 亚洲午夜蜜臀| 欧州一区二区三区四区| 大地资源在线观看中文第二页| 黄色大香焦1级‘′‘| 蜜桃午夜视频一区二区 | 国产精品午夜福利| 综合亚洲欧美精品日韩?v| 无码日韩人妻av一| 蜜桃臀 后入 一区 二区 三区 在线| 蜜臀AV成人精品蜜臀AV久久| 熟女人妻精品一区二区视频 | 超碰超碰超碰超碰的大鸡吧操黑丝袜 | 久久超碰com| 人人操人人爽人人操人人| 国产高清视频无码在线| 亚洲综合伊人| 鸥美插入视频| 99蜜桃臀亚洲成人在线观看| 69AV女优男人的天堂| 国产免费一区在线观看| 国产suv精品一区二区四| 超碰精品人妻狠狠干| 国产精品白领在线观看| 中文字幕免费看大片| 亚瑟国产精品久久无码| 久久国产熟女影院| 青青草乱入乱欲视频在线观看| 色黄污美女啪啪啪免费网站| 97这里只精品| 欧美一级A片在线看视频性色| 欧美日韩小说| 电影69乱码96| 国产91乱伦| 丝袜加勒比| 97日本超碰综合| av最新免费中文字幕| 伊人午夜福利视频| 日韩国产品视频中文字| 国产性爱在线视频一区二区| 亚欧美综合网| 亚洲欧美日韩电影网站一区| 性爱动态120秒| 国产色图乱伦| 亚洲有薄码区久久在线一区| 天天看综合网| 欧美性爱在线无码| 中文字幕国产| 日韩操啪| 在线电影亚洲色图| 操操操操操操| 亚洲最大的黄色电影网站。 | 妇女视频网站| 亚洲激情网一二三四区| 成视频在线观看免费看| 精品亚洲黄色片 国产精品导航一区二区| 国产一区二区在线看| 老女人碰碰在线碰碰视频| 盗摄 精品 另类 一区| 黑人黄片在线免费观看| 9997se| 91精品久久久久久77777| 97色97好| 天天操狠狠日夜夜干超大胆开放com大香蕉视频在线观看 | J?P?NESEHD熟女熟妇伦| 操人妻视频| 青青青草原| 四虎av在线| 懂色影视久久| 中文字幕国产| 日本在线不卡v二区| 亚洲av综合伊人久久| 久久免费少妇| 天天日天天搞天天干| 我要去看2个日本美女.com曹逼| 亚洲天堂电影网99999| 久久成人东京热人妻| 色97国产69香蕉| 99少妇| 黑人猛交| 欧美综合网在线| 欧美成人一级麻豆| 无码最新| 91在线页| 免费亚洲国产精品久久一区| 91综合天天| AAAA级日本片免费视频| 色色福利| ss久久| 97丝袜亚洲在线播放| 941超碰| 中文乱码字幕观看| 在线观看成人性爱免费小视频| 99久久久无码国产精品性啊聊| 黄色片一区二区三区四区五区| 最新日产中文在线麻豆| 亚州色交| 精品大全99999| jazzjazz国产精品麻豆| 国产成人www免费人成看片| 中文字幕91综合| 日韩电影天堂视频二区三区| 另类小说欧美激情校园春色| 综合在线导航一区| 日本不卡码黄色 | 91国产精品在线看| 青青草国产一区二区三区| 男人精品天堂一区| 久久岛国| 欧美色蜜桃97| 18一区二区三区| 91站街按摩店老熟女熟女| 成 人 A V免费视频在线观看| 伊人色综合欧美| 91精品人妻一区二区-全集完整版免费正片国语-B02AV | 成人小说视频在线精品欧美| 哈哈操电影AV| 日韩免费大片一级播放| a片久久久久久久久久久久 | 亚洲精品国产熟女久久久| 国产后入式在线观看| 少妇专区一二三四五| 欧美日韩99精品麻豆传媒| 日本在线999| 亚洲成人碰碰| 日韩在线观看字幕精品| 99久久免费看精品国产一区| 天美传媒av 在线| 国产狂喷潮在线精品| 久久精品视| 日本九九久久99播| 97视频新免费| 亚洲欧美在线综合| 精品欧美日韩在线观看| 免费男人的天堂| 亚洲天堂男人天堂网| 色玖玖| 老熟女综合| 淫色网综合| 天天草夜夜草高潮片| 欧美日韩另类字幕中文| 九九碰九九爱97超碰| 91春色| 日韩精品系列| 性色乱AV一区二区| 午夜理论片在线观看免费| 少妇人妻在线| 色图综合网| 色五月第四色| 国产不卡精品91| 911av网站免费观看| 东京热天堂网| 久久久青青草| 日本免费二区三区| 97精品中文字幕| 精品久久久中文字幕不| 久青草影院| 国产 无码 一区二区| 国产精品人妻无码久久久互動交流 | 久操av在线| 色婷婷综合久久久久中文一区二区| 亚洲黄色a级片| 欧美黄色大片在线观看| 人人人摸人人| 欧差乱伦二三| 国产 日韩 欧美一区| 亚洲 欧美 色图| 夜夜做夜夜爽精品视频| 久插综合| av72网| 精久久久| 男人天堂2030| 亚洲色图欧美| 97人人色| 亚洲国产综合视频| 日韩欧美亚洲自拍偷拍| 日本在线观看网址| 国产一级内射无挡观看| 特级毛片特黄久久免费看 | 免费观看啪视频| 久久久久亚洲三级电影| 久久久久亚洲?V片无码V| 波多野结衣一级视频| 黄色在线网站| 五月天婷婷久久| 亚洲一卡2卡3卡4卡乱码网站 | 精品对白久久不卡| 无码精品久久| 黄色欧美性爱视频| 国产suv精品一区二区四| 91成人在线| 麻豆伊人网| 深喉吞精| 人人插人人摸人人| 精品一区二区三区蜜桃臀赵总 | 黄站在线免费观看| 91在线视频国产网站| 日本东京热加勒比久久| 麻豆2区1区天美| 97一区二区三区视频| 亚洲资源一区| 精品性爱一区二区| 日韩中文字幕视频在线观看| 素人一区二区三区日韩| 亚洲天堂另类| 亚洲国产91精品一区二区久久| 人妻乱仑一区二区三区| 亚洲午夜av| 久久精品72| 91少妇高潮| 精品无码久久久久久国产浪潮| 天天天天天天天天综合| 中文字幕AV片| 国产精品一区午夜福利| 久久华人网| 亚洲棕合电彰| 久久这里只精品99re66图| 91男人综合| 亚洲一区二区 麻豆传媒| 成人婷婷丁香| 国产一级黄色片在线观看| 激情五月天中文字幕色| 欧美日韩美女精品久草一区二区三区| 麻豆人妻少妇在线免费观看| 人妻在线臀日韩| 精品国产网站| 亚洲免费人妻在| 特级特黄一级毛片免费| 国产夫妻性生活视频| 国产乱人妻精品入口| 国产免费一区二区在线A片视频| 九九精品99| 强奸乱伦 亚洲一区| 少妇高潮流水av免费| 综合国产影视三级| 国产AV激情无码久久无码| 人人看人人摸人人色| 欧美中出1| 国产熟女少妇一区| 亚洲综合图色在线| 青青草久久在线| 欧美人妖内射| 色综合天天爱去电影网| 大香蕉伊人网WWWn0n| 上海一级黄片| 色97干| 婷婷情色五月天| 国产嫩草精品A88AV在线| 91熟女熟妇视频网站| 裸模AV女优| 国产精品大屁股999| 国产精品久久久久久久久久久久| 波多野结衣被操50分钟免费视频| 夜夜草网站| 久偷拍| 91日韩国产欧美亚洲另类精盘州至城都| 国产无码精品成人| 深爱五月婷婷| 激情婷婷黑人91| 高凊专区人人操| 日日A∨| 国产肏屁眼视频| 9久精品视频在线观看| 欧美视频第二页| 中国小夫妻勾搭露脸淫荡对白| 国产精品大屁股999| 欧美日韩中文字幕不卡| 欧美大香蕉久| 国产高清MV操逼视频| 激情综合97| 尤物视频网 刘玥| 天天看精品动漫视频一区| 日本人妻中文字幕精品| 大香蕉之青青草原| 欧洲中文字幕| 亚洲性综合11| 嫩草伊人久久精品| 丰满人妻区一区二区三| 夜色综合| 九九九精品| 九九碰九九爱97超| 日本αv| TS人妖另类精品视频系列| 思思久热在线精品66| 午夜性生活av免费在线看| 超碰成人人人爽人人爽| 精品人成视频在线观看| 亚洲无码国产精品久久| 干干干天天| 亚洲操逼视频网站| 亚洲高潮少妇| 久久嫩草国产成人一区| 无码久| 欧美玖玖爱免费玖玖| 日韩专区久久久| 亚洲综合在线91| 麻豆天美一区二区| 人人贴人人摸| 国产亚洲精品自在线亚洲情侣| 99自拍视频在线| 999狠狠综合| 九九九九日本| 欧洲一区二区| 中国AAAAAA黄色片| 强奸乱伦大香蕉网| 97超碰美国| 欧美性生活男人的天堂| 国产亚洲精品农村妇女 | 免费啪啪啪网站18岁| 九九九九九九九精品视频| 亚洲日本男人天堂网| 亚洲欲| 亚洲在线91| 操逼视频色| 色色五月丁香| 国产成人主播| 美女91在线| 超碰在线观看av不卡| 丁香六月婷婷久久综合| 美女裸体麻豆天美蜜桃91| 夜夜操夜夜高潮夜夜爽国产精品区| 欧美97爱| 网页导航五月天免费一二三区| 性欧美另类高清| 国产欧洲精品亚洲午夜拍精品| 囯产精品强| 尤物视频视频官网| 手机在线观看不卡无码av| 日韩精品.久久精品.AV女优.天美传媒| 亚洲综合99999| 天天日夜干| 欧日a| 天天看高清麻豆| 美女诱惑一区| 婷婷五月天色色| 9久精品视频在线观看| 丰满人妻一区二区三区色-百度| 午夜无码精品免费看性色| 色老汉色| 亚洲97综| 日本大片日本一区二区免费高清| 91精品少妇搡搡搡| 人人看欧美性爱| 中文一区二区婷婷视频| 性91| 五月激情综合网| 欧美桃色网| 日韩在线观看字幕精品| 伊人久久亚洲中文字幕不卡| 久9re热视频这里只有精品| 精品超碰中文在线| 伊人AAA| 超碰久久网| 26UUU欧美激情一区二区| 伊人成人情色综合| 亚洲欧美国产va在线播放频| 视频在线观看一二三区| 一区二区三| 91 手机在线播放 绯色| 火箭成精品视频884必出精品| 激情AV| 欧美另类丝袜熟女| 性一交一乱一交A片久久四色| 欧美色图97| 丁香五月综合| 亚洲天堂一二| 综合久久婷婷| 超碰在线一区二区三区| 国产剧情一区在线观看| 午夜αv| 2001天天操| 探花视频免费观看国产专区| 成人夜夜爽| 中文字幕蜜乳av| 福利风月五月天影院| 国产综合在线视频网站| 国产成人精品午夜福利| 8050无码八戒| 粉嫩AV一区二区夜夜| 91在线色综合| 日韩在线欧美精品一区二区| 亚洲 另类 丝袜 自拍 动漫| 天天干夜夜一操| 久久久天美| 男人天堂久久精品| 日本一区二区中文字幕久久| 超碰久久草| 亚洲日韩美女中文字幕乱| 成年在线视频日本亚洲在线视频区精品江靖宇公司 | 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 欧美色性情| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 色婷婷A V一二三四区麻豆综合| 综合色99| 欧美不卡五十路| 欧美影音在线| 丁香五月影院| 情趣丝袜无码操逼视频| 女人天堂网| 国产久久久9999| 成年女人黄网站| 久久香蕉国产线看观看亚洲女人 | 色原狠狠天天天| 中文字幕视频在线观看一区二区| 国产精品久久久久久久AV大片| 超碰这里有精品| 99re9在线| 亚洲精品无码久久AV| 亚洲无码一区成人免费午夜| 亚洲自拍另类丝袜综合| 国产热RE99久久6国产精品首| 国产偷拍网站| 97国产精选| 9超碰免费| 婷婷五月天av| 欧美成人四级在线播放| 天天综合欧美| 91视频女生| 欧洲乱码视频| 欧美后进式| 日本肏逼视频在线观看| 9丨亚洲一区二区在线| 91 丝袜在线播放| 另类图片五月天| 日本东京热大香蕉a片| 艹我哪美一区无码| 少妇滛荡视频| 亚洲97久久精品亚洲| 尤物av网站免费在线播放| 九九九成人| 土豪酒店各种姿势玩弄极品幼稚| 国产福利夜| 婷婷五月天补不补| 影音先锋国产精品| 久久肏大逼| 97爱b| 人妻日日夜夜精品| 开心五月婷婷| 91粉嫩萝控精品福利网站_精品影音先锋国| 亚洲黄色视频在线观看视频| 日本成人在线不卡一区二区三区| 久久久久久久久久久久色网| 后入日本1234| 黄色一区三区| 亚洲黄a三级三级三级看三级| 东北女人的毛片| 亚洲情色婷婷五月天| 久久人妻办公室视频| 丁香五月激情婷婷| 五月婷色| www.激情| 日本有码久久| 日韩成人色图| 久久9亚洲| 美腿色图| 99综合自拍| 欧美性爱一区二区三区四区 | 欧美综合传媒| 亚洲怡春院| 欧美九一精品久久久熟妇| 岛国不卡超碰护士AV在线播放| 激情五月天校园春色网| 中字一区| 精品美女少妇一区二区| 女人久久久| 狠狠婷婷亚洲中文综合久久| 精品久久无码午夜福利| 天天懆天天日| 少妇xx精品| 操逼网站地址| 亚州伊人色综台| 中文字幕一区二区三区人妻少妇在线| 密臀在线免费观看| 偷拍在线观看视频| 熟女91网| 97超碰9| jazzjazz国产精品麻豆| 国产强奸乱伦xd| 人人干人人搞人人摸| 天天综合精品| 久草资源在线视频官方总站日韩丝袜美腿 | 无码操逼网| 天天精品| 亚洲色人妻综合| 国产不卡中文字幕免费avi| 99re6国产精品99re| 插插综合网天天影视网| 日本成人在线不卡一区二区三区| 中文字幕AV乱伦| 国产精选三级在线观看| 精品久久久久久亚洲| 五月天婷婷在线看| 中文字幕日韩电影人妻| 国产AV超爽| 美女在线H91| 天天干1区2区在线| 91成人18| 欧美日韩性爱操大逼| 亚洲欲色9532548967一区| 欧美日韩另类字幕中文| 日韩无码一区二区三区| 国产极品美女高潮无套在线观看| 亚州国产精品乱| 加勒比伊人影院| 夜夜嗨视频| 午夜福利视频在线一区| 九月丁香婷婷| 夜夜春夜夜操| 伊人久久在线视频观看| 96精品在线| 久草老司机| CCYY草草影院地址入口| 久久草大香蕉| 内射卯月麻衣| 成人a v在线播放免费| 国产激情片在线观看| 99re9这里只有精品| 久草看看看| a v网站在线播放| 91色综合激情| 九九九九国产| 婷婷久草| 蜜臀va69| 秋霞免费AV| 素颜老阿姨乱情色| 老熟女乱伦片| 欧美精品成人亚洲| 青青草公开在线免费不卡视频| 女人被男人桶爽视频网站| 久久一区无码| 色欲久久99国产精品久久久久久| 麻豆啪啪啪视频| 亚洲Av噜噜一区二区三区妖精| 中文?日韩?免费?精品| 欧美激情综合色综合啪啪五月| 搡老熟女国产1000部| 国产免a费看黄片在线| 欧州激情视频在线一区二区| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 色综合久久888| 亚洲性图91| 亚洲欧美自拍偷拍| 日韩视频小说在线观看| 影视综合无码少妇| 精品97精品97| 日韩欧美成人午夜福利| 黄网站黄视频网站进入口 | 色五月婷婷麻豆在| 久久老熟女| 欧美国产日韩高清在线| 综合亚洲网| 99操逼| 日本大香蕉综合网| 国产精品一二三免费网站| 日本媚薬中文字幕在线| 久久久久免费少妇| 国产一区在线播放| 性色avv| 亚洲影院365| 九九热超碰97亚洲最新香蕉| 亚洲色图尤物视频| 97超碰免费生活| 精品性爱一区二区| 97国产|免费| 国产九月婷婷| 精品国产Av无码久久久亚洲| av麻豆啪啪| 99久久久久久久久| 中文字幕1区2区| 口爆综合网| 国产精品久久aV| 操死我了嗯嗯嗯| 全球成人中文在线| 香蕉99秘 一区精品蜜桃臀| 欧美精品另类人妖xxxx| 亚洲国产成人精品999| 91久久久老司机| 亚洲欧美中文日韩视频中国语| 在线欧美亚洲| 精品久久在线区一区| 中文字幕乱码人妻二区三区| 欧美极品少妇| 懂色AV一区二区三区| 免费福利视频中文字幕| 91欧洲入口| 97超碰国产精品| 69少妇一区二区| 亚洲天堂一二| 久久久久久久久久久久久久久乱码 | 操逼逼无码| 加勒比综合网| 啊啊啊啊啊啊啊网址在线观看| 99视频内射三四| 国产成人亚洲精品无码最新在线| 青青伊人加勒比海| 91欧美高清| 国产精品无码av| 国产精品久久蜜乳av| 中国小夫妻勾搭露脸淫荡对白| 色色婷婷五月天| 一区二区不卡| www.久久久久| 无码 黑人一区二区三区| 草B在线| 天美精品一区二区三区四区在线观看| 我爱大香蕉| 精品国产91av一区二区三区| 啊啊啊久久| 丁香7月婷婷| 亚洲美女色图| 中文字暮97| 日本 欧美 国产一区| 精品国产91av一区二区三区 | 欧美精品日韩久久久九 | 亚洲色人妻综合| 色色色色网站| 国产 日韩 欧美高清| 九九综合九九综合| 91精品导航| 嗯嗯啊啊的视频| av亚洲天堂资源网站| 亚洲精品视频二区| 亚洲成?V人片在线观看福利| 911av网站免费观看| WWW.操逼.COM| 玖玖久久久| 日韩无码服务区| 欧美亚洲国产日本在线,久久精品国产| 极品丝袜无码| 色99色| 丁香五月激情综合国产| 国产精品成人福利在线| 豆花视频操逼网址| 国产综合色精品在线观看| 欧美性夜| 久久香蕉国产线看观看亚洲女人 | 久久精品人人做人人看| 在线综合网| 资源新线在线天堂| 夜夜高潮夜夜爽夜夜爱爱一区| 国偷自 一区二区| 日本天天干天天搞一区| 欧美中字二区| 在线97在线| 自拍视频大全亚洲专媒视频/一区二区三区| 啊啊啊好爽快点啊啊啊嗯嗯| 天天爱天天操| 欧美男人一区| 国产乱码久久| 亚码激情| 青娱乐 成人娱乐在线| 好湿好紧好爽 视频| 成人AV素股で擦久久| 亚洲成人一二三区| 99九九久久| 美女诱惑在线一区| 青青伊人加勒比海| 亚洲人精品午夜不卡| 97 国产精品| 国产91美女视频| 一本久道久久综合狠狠爱| 免费毛片在线播放| 99视频在线| 亚洲成人av色网| 麻豆天美国美国产| 97人人中文网| 亚洲AV不卡在线观看尤物| 九九九精品一区二区无码| 一本色道久久综合熟妇| 中文字幕一二三av| 国产精品农村妇女| 色综合av综合久久| 色欲久久久久综合网| 久操网视频| 精品性爱无码在线播放| 超碰av人人人| 黄色小说亚洲| 曰韩香蕉97| 中国少妇啪啪视频| 超碰精品日韩欧美国产| 久久久亚洲欧美综合| 欧美在线干| 日韩AV中文字幕电影| 欧美色日| 亚洲精品人体| 国产家庭乱伦性爱视频| 色小视频蜜乳| 人人妻人人操人人乐| 日本九九久久99| 欧美BT 亚洲色图| yw尤物av无码点击进入麻豆| 岛国视频免费在线观看| 男人的天堂网免费| 啊啊啊啊操死我了| 成人青青草原伊人| 国产亚洲性生活视频播放| 一区二区三区精品视频| 91丝袜在线观看视频在线观看| 久久噜| 久久精品国产亚洲AV清纯| 嫩草一区二区在线观看| 久久大香蕉手机高清| 色五月AV在线| 欧美国产精品久久九九| 欧美亚洲日本视频久久久| 蜜桃精品一区二区三区ww| 亚欧操逼片在线观看 | 一区| 日日摸天天爽夜夜欢| 精品久久久久av影院| 亚洲国产欧美日韩精品一区二区三区,国产一区二区三区在线看片,欧美性猛交 XXX | 久久国产免费激情视频| 亚洲天堂,男人| 九九九九免费视频| yaouchengrenav| 五月天婷婷影院| 国产乱码久久久久久| 欧美精品久久96人妻无码| 亚洲色综合| 超碰97在线中文| 桃花色综合影院| 6080yy午夜理论三级一区二区三区无码| 国产黄色影片在线观看| 偷拍伦理视频| 午夜操一视频一区| 国产精品久久久无码AV网站| 97香蕉人人乳| 国产高清成人免费视频| 五月天婷婷基地| 亚洲欲| 中国少妇XXXX做受| 久久av色| 免费人成毛片乱码| 大胆91| 97Ai亚洲| 中文字幕在线日亚州9| 老熟妇一区二区三区| 美国aaaaa一级黄片| 国产精品丝袜久久亚洲不卡| 无码高清操逼网址| 久久综合精品一区二区三区| 夜夜爽夜夜爽| 综合色图区| 欧美激情专区| 嗯啊不要啊在线| 91第一页| 男人的天堂亚洲| 日韩99精品视频综合区| 亚洲www91| 欧美亚洲性爱一区二区| 97香蕉人人乳| 成人午夜高潮av猛片| 久久久久久久九九九九九九| 91青青草| 人人乐大香蕉| av亚欧| 中文字幕乱碼在线| 国产精品免费1区2区视频| 亚洲人在线| 一个色导综合| 九九自拍伦理| 熟女精品va中文字幕| 五十路人妻在线| 黄色高清无码无码破解免费暗网| 人人澡人人澡人人| 人人爱操| 伊人热综合| 久久久久亚洲一区女同性恋中文字幕| 秋霞操逼片| 精品九九九九九九九| 岛国视频一二三区| 韩国嫰模上门援交视频| 激情四射五月天| 在线综合网| 国产噜噜噜噜噜久久久久久久久| 日韩丝袜二区| 中文字幕激情小说| 日本不卡三级网在线播放| 欧美日韩国产三级黄色| 欧美亚洲韩国视频十五区| 99精品视频在线观看| 亚洲成人精品在线一区| 亚洲色图 图片| 超碰久热| 日韩操逼性鲍| 99热在线只有精品| 欧美亚男人的天堂| 久久精品店| 加勒比综合| 五月开心久久AV官网| 婷婷激情五月| 欧美黄色片在线播放| 噜噜噜噜天天狠狠| 欧美狠狠弄| 色91综合网| 少妇久久久久| 欧洲精品一二三在线| 激情第四色| 日韩av不卡在线看| 91色欧美| 中国黑人三级片网站上区| 国产亚洲禁久一区二区| 2020中文字幕| 麻豆综合一区av| 色天使AV天堂| 中文字幕在线观看AV| 国产女人成人精品视频| 国产美女在线精品免费看| 国产精品97超碰| 99爱久久视频频| 国产懂色精品国产av| 岛国1区2区3区在线观看| 久久婷婷一区| 久草男人天堂| 老女人爆菊| 岛国精品视频在线观看| 久久青青草原免费视频| 夜色综合| 欧美性第1页| 男人把坤坤插入女人的下体 | 久久a久久| 天天天天天干夜夜夜夜夜操| 日韩欧美大力操| 久久天堂| 日本Suv精品一区二区| 久久久久久久久久久久九| 怡红院怡春院| 蜜臀国产AV中文字幕| WWW黄片COM| 无码日韩人妻av一| 亚洲AV成人无码一二三久久| 97免费在线观看| 深夜激情 | 中文字幕一区二区三区高清| 色激情综合网站| 亚洲色图A| 88在线一区二区三区| 天天日美女的B| 99色日| 大香蕉99热| 伊人色综合超碰| 中文字幕二区日韩天堂| 色色五月天婷婷| 色狠狠综合| 久久久久久AⅤ无码免费肉站| 双插性欧美一二三区| 免费一级a毛片久久久久久鸭绿欲| 欧美不卡五十路| 国产精品白丝| 丝袜美腿av女优在线| 大香蕉中文在线| 欧美人妻制服| 夜夜欧美 | 夜夜影视四色| 欧美不卡二区| 久久精品国产亚洲AV无码做| 日韩Va亚洲va欧美Ⅴa久久| 免费观看国产不卡av| 欧美精品成人在线播放| A V视频日本| 一本一道vs波多野结衣| 一级特级aaaa毛片免费观看| 少妇干B| 亚洲天堂 视频你懂的| 免費黃色視頻觀看一| 超碰人人在线| 天天色粽合合合合合合合| 95精品在线| 日韩精品人妻中文字幕有码午| 成人综合视频久久| 秋霞午夜视频一区二区|