免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線(xiàn)實(shí)戰(zhàn)洞察。

MySQL Utilities實(shí)戰(zhàn):存量環(huán)境下的高效運(yùn)維工具集

MySQL Utilities實(shí)戰(zhàn):存量環(huán)境下的高效運(yùn)維工具集 1. 為什么這個(gè)過(guò)氣工具集還在我的工作臺(tái)里前幾天幫一家公司排查主從復(fù)制延遲登上去發(fā)現(xiàn)兩個(gè)庫(kù)的表結(jié)構(gòu)因?yàn)殚_(kāi)發(fā)手工執(zhí)行了N次漏腳本的發(fā)布已經(jīng)悄悄長(zhǎng)出了100多處差異。我第一反應(yīng)不是打開(kāi)某個(gè)運(yùn)維平臺(tái)而是打開(kāi)終端敲了條命令mysqldiff --server1admin10.0.0.10:3306 --server2admin10.0.0.11:3306 \ --difftypesql --changes-file/tmp/schema_diff.sql不到半分鐘128處差異被清清楚楚列出來(lái)還生成了可以直接執(zhí)行的變更腳本。這套被我反復(fù)使用的工具就是很多人已經(jīng)不關(guān)注的官方工具集——MySQL Utilities。你可能覺(jué)得奇怪這玩意不是停止開(kāi)發(fā)了網(wǎng)上對(duì)它的評(píng)價(jià)也兩極分化。但我要說(shuō)的是對(duì)于運(yùn)維手里還捏著MySQL 5.7、甚至5.6存量環(huán)境的人來(lái)說(shuō)它依然是效率極高的瑞士軍刀。今天這篇就是我的實(shí)戰(zhàn)手冊(cè)把從安裝、結(jié)構(gòu)比對(duì)、數(shù)據(jù)導(dǎo)出導(dǎo)入到復(fù)制、高可用切換、權(quán)限克隆的高頻用法過(guò)一次最后附上我這些年踩過(guò)的坑。1.1 手工運(yùn)維的重復(fù)勞動(dòng)有多坑先說(shuō)我為什么對(duì)這套工具執(zhí)念這么深。早些年我管理幾十套MySQL實(shí)例每天干的活無(wú)非就是哪兩個(gè)庫(kù)結(jié)構(gòu)不一樣肉眼打開(kāi)兩個(gè)窗口比對(duì)字段新環(huán)境要搭從庫(kù)手寫(xiě)CHANGE MASTER那一套要復(fù)制一個(gè)用戶(hù)權(quán)限一行行SHOW GRANTS再手工回放。聽(tīng)起來(lái)都不難問(wèn)題是量大以后全是重復(fù)勞動(dòng)而且特別容易出錯(cuò)。比如結(jié)構(gòu)比對(duì)你肉眼比對(duì)字段順序、默認(rèn)值、字符集字符串長(zhǎng)一點(diǎn)眼睛直接看花。有一次我把varchar(255)看成varchar(256)上線(xiàn)第一天數(shù)據(jù)就溢出了。數(shù)據(jù)導(dǎo)出如果用mysqldump在多表關(guān)聯(lián)、存儲(chǔ)過(guò)程、觸發(fā)器混合的場(chǎng)景下dump出來(lái)的文件要么順序不對(duì)要么被外鍵約束卡住。權(quán)限復(fù)制就更不用提了一個(gè)賬號(hào)十幾個(gè)庫(kù)的權(quán)限手抄加引號(hào)轉(zhuǎn)義錯(cuò)一個(gè)字符就授權(quán)失敗。MySQL Utilities的設(shè)計(jì)初衷就是把這些高頻操作變成一句命令。你不用再去記那一長(zhǎng)串SQL拼接邏輯也不用擔(dān)心中間某一步漏了。雖然它現(xiàn)在的更新已經(jīng)停滯但核心功能在5.7乃至8.0的兼容模式下依然可以工作而且在很多企業(yè)內(nèi)部存量實(shí)例根本輪不到你用新工具那它就是你最順手的搬磚工具。1.2 工具箱全景你會(huì)用到的組件MySQL Utilities不是一個(gè)單一命令而是一套Python腳本集合入口是mysqluc。裝好以后你可以直接運(yùn)行mysqluc進(jìn)入它的命令行也可以像普通命令一樣直接調(diào)每個(gè)工具。我用得最多的幾個(gè)工具列個(gè)清單給你參考工具名作用我的使用頻率mysqldiff比對(duì)兩個(gè)數(shù)據(jù)庫(kù)/兩段SQL的對(duì)象差異生成變更腳本每周mysqldbexport導(dǎo)出庫(kù)/表數(shù)據(jù)支持SQL和CSV格式每周mysqldbimport導(dǎo)入數(shù)據(jù)能處理依賴(lài)順序每周mysqlserverclone從現(xiàn)有實(shí)例克隆出獨(dú)立新實(shí)例每月mysqlreplicate快速配置主從復(fù)制每月mysqlfailover主庫(kù)故障自動(dòng)切換每季度演練mysqluserclone克隆MySQL用戶(hù)權(quán)限隨時(shí)mysqlindexcheck檢查表中索引的使用情況每季度mysqlauditgrep過(guò)濾解析審計(jì)日志偶爾這些工具的共同點(diǎn)是參數(shù)風(fēng)格統(tǒng)一、有--dry-run預(yù)覽模式、輸出結(jié)果可解析。你在mysqluc里輸入一個(gè)工具名再敲--help基本就能把每個(gè)參數(shù)看明白。別被它的英文文檔勸退實(shí)際用起來(lái)比文檔簡(jiǎn)單得多。1.3 安裝與初始化從下載到mysqluc能用很多人卡在第一步就是因?yàn)檫@個(gè)工具是基于Python 2的。早先版本需要Python 2.6/2.7系統(tǒng)如果已經(jīng)用Python 3直接跑多半會(huì)報(bào)語(yǔ)法錯(cuò)誤。我目前的推薦方案是在專(zhuān)用管理機(jī)上用源碼包安裝不跟業(yè)務(wù)服務(wù)器摻和。以1.6.5版本為例安裝流程大概是這樣的# 下載并解壓源碼包 tar zxf mysql-utilities-1.6.5.tar.gz cd mysql-utilities-1.6.5 # 用python2執(zhí)行安裝管理機(jī)可以保留一個(gè)python2環(huán)境 python2 setup.py install如果你的系統(tǒng)把python指向了3那就要明確調(diào)用python2。裝完以后驗(yàn)證一下:mysqluc --version如果顯示mysqluc 1.6.5這樣的版本信息就說(shuō)明裝好了。還有一個(gè)常見(jiàn)的坑它默認(rèn)依賴(lài)mysql-connector-python。很多人在安裝時(shí)沒(méi)有先裝這個(gè)庫(kù)導(dǎo)致運(yùn)行任何工具都報(bào)ImportError: No module named mysql.connector。解決辦法一樣用Python 2環(huán)境裝對(duì)應(yīng)版本的connector然后確認(rèn)在PYTHONPATH里能找到。另外有些朋友習(xí)慣配合圖形管理工具一起用比如下載安裝dbx數(shù)據(jù)庫(kù)管理工具來(lái)做連接配置和任務(wù)監(jiān)控。我的建議是dbx這類(lèi)工具做可視化操作沒(méi)問(wèn)題安裝包從官方渠道拉連接MySQL時(shí)指定--socket或者TCP端口就行。但命令行場(chǎng)景下MySQL Utilities的本事是dbx沒(méi)法替你完成的尤其是差異比對(duì)和復(fù)制配置。所以?xún)烧吣壳霸谖疫@里是互補(bǔ)狀態(tài)不沖突。2. 結(jié)構(gòu)比對(duì)與數(shù)據(jù)導(dǎo)出導(dǎo)入最穩(wěn)的三件套工具裝好以后先掌握最常用的三件套。這三個(gè)工具能覆蓋日常變更上線(xiàn)前的大部分檢查工作。2.1 mysqldiff操作步驟與輸出解讀mysqldiff是我打開(kāi)率最高的命令。它的核心功能是比較兩個(gè)連接上的對(duì)象定義差異包括表結(jié)構(gòu)、視圖、存儲(chǔ)過(guò)程、函數(shù)、觸發(fā)器等?;久铋L(zhǎng)這樣mysqldiff --server1admin:pass10.0.0.10:3306/db1 \ --server2admin:pass10.0.0.11:3306/db2 \ --difftypesql --changes-file/tmp/db_diff.sql參數(shù)說(shuō)明里面--server1和--server2除了寫(xiě)庫(kù)名以外還支持db1.tab1這種形式用來(lái)比對(duì)單表。--difftype支持sql、unified、differ幾種格式。我強(qiáng)烈建議用sql因?yàn)樗敵龅牟盍靠梢灾苯臃诺缴a(chǎn)庫(kù)執(zhí)行。--changes-file會(huì)把差異SQL寫(xiě)進(jìn)文件方便你在執(zhí)行前人工Review。這里我特別提醒一點(diǎn)默認(rèn)情況下它只比較對(duì)象定義不會(huì)比較索引的可見(jiàn)性、統(tǒng)計(jì)信息這些運(yùn)行時(shí)屬性。如果你要連索引一起比加一個(gè)--show-options參數(shù)??匆淮螌?shí)際輸出# Comparing db1 to db2 [PASS] # Definition: Table db1.orders Reversed遇到[FAIL]的文件后面會(huì)跟具體的差異片段。有一次它告訴我某個(gè)字段的AUTO_INCREMENT屬性不一致我順著它的輸出去查果然發(fā)現(xiàn)從庫(kù)的表是用我三個(gè)月前的老備份恢復(fù)的差了一個(gè)自增計(jì)數(shù)設(shè)置。這種細(xì)節(jié)靠肉眼幾乎查不出來(lái)。還有個(gè)小技巧--changes-file生成的是完整ALTER語(yǔ)句但它不會(huì)幫你處理依賴(lài)順序。所以拿到變更腳本后我習(xí)慣先用dry-run模式跑一遍確認(rèn)沒(méi)語(yǔ)法錯(cuò)誤再執(zhí)行mysqldiff --server1admin:pass10.0.0.10:3306/db1 \ --server2admin:pass10.0.0.11:3306/db2 \ --difftypesql --dry-run2.2 mysqldbexport導(dǎo)出的正確姿勢(shì)如果說(shuō)mysqldump是重武器那mysqldbexport就更像給你精細(xì)控制的手術(shù)刀。它可以按庫(kù)、按表導(dǎo)出也可以只導(dǎo)出某些對(duì)象的數(shù)據(jù)而不導(dǎo)出表結(jié)構(gòu)。我一般這么用mysqldbexport --serveradmin:pass10.0.0.10:3306/db1 \ --formatsql --exportboth --skip-gtid --output-file/tmp/db1_export.sql--formatsql表示輸出SQL文件如果你想拿去做數(shù)據(jù)分析可以改成--formatcsv。--export有多個(gè)值both表示結(jié)構(gòu)加數(shù)據(jù)structure-only是只要結(jié)構(gòu)>mysqldbimport --serveradmin:pass10.0.0.12:3306 \ --formatsql --import-file/tmp/db1_export.sql--formatsql要和導(dǎo)出時(shí)一致。--import-file不指定的話(huà)它默認(rèn)讀stdin所以你可以用管道m(xù)ysqldbexport ... --output-file- | mysqldbimport ... --formatsql這里有個(gè)關(guān)鍵參數(shù)是--force默認(rèn)情況下如果目標(biāo)庫(kù)已有同名的表它不會(huì)覆蓋而是報(bào)錯(cuò)。想要覆蓋導(dǎo)入加--force。但--force使用時(shí)要萬(wàn)分小心它會(huì)直接把目標(biāo)表DROP掉重建。我的習(xí)慣是先備份再導(dǎo)入到臨時(shí)庫(kù)驗(yàn)證一次最后才切正式庫(kù)。權(quán)限陷阱也是老生長(zhǎng)談。目標(biāo)庫(kù)的賬號(hào)如果只有INSERT、SELECT權(quán)限導(dǎo)入時(shí)建表語(yǔ)句就會(huì)被拒絕。所以導(dǎo)入賬號(hào)最少需要CREATE、DROP、INSERT、ALTER權(quán)限。你要是用root導(dǎo)入問(wèn)題不大但生產(chǎn)環(huán)境不建議直接暴露root串在命令行里。可以用--login-path來(lái)管理密碼或者設(shè)置好~/.mylogin.cnf這樣命令里不出現(xiàn)明文密碼日志里也不容易泄露。3. 復(fù)制與高可用mysqlreplicate 和 mysqlfailover 的實(shí)戰(zhàn)經(jīng)驗(yàn)搭建主從復(fù)制過(guò)去要手動(dòng)處理七八個(gè)步驟創(chuàng)建復(fù)制賬號(hào)、拷貝數(shù)據(jù)、記錄binlog位置、配置server-id、啟動(dòng)slave……一步錯(cuò)后面全亂。3.1 用 mysqlreplicate 搭建主從復(fù)制如果你已經(jīng)有了一份全新的從庫(kù)數(shù)據(jù)mysqlreplicate能做的就是把那些手工步驟都省了。命令大概是這樣的mysqlreplicate --masteradmin:pass10.0.0.10:3306 \ --slaveadmin:pass10.0.0.11:3306 \ --rpl-userrepl:secret --start-slave執(zhí)行過(guò)程中它會(huì)在主庫(kù)創(chuàng)建復(fù)制賬號(hào)在從庫(kù)設(shè)置CHANGE MASTER TO并自動(dòng)記錄當(dāng)前的binlog坐標(biāo)。加--start-slave的話(huà)它會(huì)直接啟動(dòng)復(fù)制線(xiàn)程。實(shí)測(cè)下來(lái)只要網(wǎng)絡(luò)連通、server-id不沖突基本一次成功。這里我要強(qiáng)調(diào)一個(gè)隱藏條件它假設(shè)從庫(kù)的數(shù)據(jù)已經(jīng)跟主庫(kù)一致。如果不一致復(fù)制會(huì)在執(zhí)行過(guò)程中報(bào)錯(cuò)。所以我的標(biāo)準(zhǔn)流程是三層檢查用mysqldbexport或者別的備份工具把主庫(kù)數(shù)據(jù)恢復(fù)到從庫(kù)。用mysqldiff核對(duì)關(guān)鍵表結(jié)構(gòu)。最后才跑mysqlreplicate。在執(zhí)行前建議先看一遍--dry-run的輸出它會(huì)列出將要執(zhí)行的SQL確認(rèn)沒(méi)有意外再正式執(zhí)行。如果你要快速搭建從庫(kù)還有一個(gè)小兄弟工具叫mysqlserverclone。它可以在一個(gè)MySQL實(shí)例上克隆出一個(gè)新的獨(dú)立實(shí)例端口、數(shù)據(jù)目錄、server-id都可以指定mysqlserverclone --serveradmin:pass10.0.0.10:3306 \ --new-data/data/mysql3307 --new-port3307 \ --new-id3307 --mysqld-options--gtid_modeON這在日常開(kāi)測(cè)試環(huán)境時(shí)簡(jiǎn)直是救命工具。以前我建一套隔離測(cè)試庫(kù)要先裝了MySQL再手動(dòng)配my.cnf折騰半小時(shí)?,F(xiàn)在一條命令兩分鐘得到一個(gè)端口不同、server-id不同的獨(dú)立實(shí)例。3.2 mysqlfailover 的配置與切換演練再往上一個(gè)層次就是高可用切換。mysqlfailover可以在主庫(kù)故障時(shí)自動(dòng)把某個(gè)從庫(kù)提升為新主庫(kù)。它支持基于GTID或者binlog位置的復(fù)制拓?fù)??;九渲檬窍仍谥鲙?kù)啟動(dòng)一個(gè)持續(xù)監(jiān)控進(jìn)程mysqlfailover --masteradmin:pass10.0.0.10:3306 \ --discover-slaves-loginadmin:pass \ --failover-modeauto --log/var/log/mysqlfailover.log--discover-slaves-login告訴它自動(dòng)發(fā)現(xiàn)從庫(kù)--failover-modeauto表示故障時(shí)自動(dòng)切換。這個(gè)進(jìn)程要一直跑著所以最好用systemd或supervisor守護(hù)。切換策略一般用--candidateslave2來(lái)指定一個(gè)數(shù)據(jù)最新的候選從庫(kù)--ping-interval控制心跳頻率比如--ping-interval3就是每3秒探活一次。如果主庫(kù)5秒內(nèi)沒(méi)有響應(yīng)它就開(kāi)始選舉。選舉標(biāo)準(zhǔn)不是隨機(jī)的它會(huì)比較從庫(kù)的日志位置優(yōu)先選最接近主庫(kù)的那個(gè)。如果配置了--candidate則優(yōu)先選候選沒(méi)有候選選日志最新的從庫(kù)。切換完成后它會(huì)自動(dòng)把其他從庫(kù)重新指向新主庫(kù)。如果擔(dān)心自動(dòng)切換有風(fēng)險(xiǎn)你可以先把--failover-mode改成manual。這樣它只負(fù)責(zé)監(jiān)控和告警需要你手工確認(rèn)后才切換。我第一次在生產(chǎn)環(huán)境用它的安全方式就是manual先觀(guān)察它產(chǎn)生告警是否準(zhǔn)確連續(xù)演練幾次后才敢開(kāi)auto。3.3 高可用切換的邊界與我的避坑提醒我要潑一盆冷水mysqlfailover又不是萬(wàn)能的。首先是腦裂問(wèn)題。這個(gè)工具本身不做防腦裂處理。主庫(kù)網(wǎng)絡(luò)閃斷但它自身還活著新的主庫(kù)已經(jīng)被選舉出來(lái)。如果業(yè)務(wù)流量還往老主庫(kù)寫(xiě)兩個(gè)庫(kù)都會(huì)寫(xiě)入新數(shù)據(jù)后續(xù)數(shù)據(jù)合并就非常麻煩。我的規(guī)避手段是在網(wǎng)絡(luò)層面做隔離比如在發(fā)生切換時(shí)立刻用防火墻規(guī)則把老主庫(kù)的對(duì)外流量禁用或者一切用VIP漂移。VIP配合mysqlfailover切換時(shí)VIP指向新主庫(kù)才能相對(duì)可靠。其次是日志清理和binlog事件。如果從庫(kù)落后主庫(kù)太多日志已經(jīng)被purge那么這個(gè)從庫(kù)就沒(méi)有競(jìng)選資格。所以高可用環(huán)境里binlog的expire_logs_days配置不能太短。我一般設(shè)置7天同時(shí)搭配定時(shí)全備。最后是應(yīng)用側(cè)連接池。就算MySQL層面切換成功應(yīng)用的長(zhǎng)連接還捏著老主庫(kù)的IP。如果你不用VIP應(yīng)用側(cè)必須實(shí)現(xiàn)故障重連。這一點(diǎn)在演練前一定要和開(kāi)發(fā)團(tuán)隊(duì)確認(rèn)清楚不要等到真故障了才想起來(lái)改連接串。4. 日常巡檢、壓測(cè)與權(quán)限治理不止 DBA 能用MySQL Utilities的價(jià)值不只在緊急排障日常巡檢和上線(xiàn)前評(píng)估同樣能幫你省下大把時(shí)間。4.1 mysqlcheck / mysqlindexcheck 的巡檢組合mysqlcheck是MySQL自帶的表維護(hù)工具可以和mysqlindexcheck搭配來(lái)做巡檢。但我要重點(diǎn)說(shuō)mysqlindexcheck因?yàn)樗軝z查冗余索引和未使用索引這屬于很多DBA容易忽略的隱性浪費(fèi)。用法很簡(jiǎn)單mysqlindexcheck --serveradmin:pass10.0.0.10:3306/db1 \ --show-indexes --show-drops它會(huì)列出每個(gè)表的索引詳情并給出建議刪除的重復(fù)索引。比如一個(gè)字段a上既有單列索引又有(a,b)復(fù)合索引它會(huì)把單列索引標(biāo)成冗余。刪掉冗余索引之后寫(xiě)入性能能明顯提升。這個(gè)工具只分析索引定義不會(huì)真的去執(zhí)行DROP INDEX所以你可以放心跑。我一般每季度跑一次把輸出交給開(kāi)發(fā)確認(rèn)后再?zèng)Q定要不要?jiǎng)h。實(shí)測(cè)在我們的訂單庫(kù)中一次巡檢發(fā)現(xiàn)三個(gè)冗余索引刪除后寫(xiě)入響應(yīng)時(shí)間平均降了12%。不過(guò)這個(gè)數(shù)據(jù)因環(huán)境而異但方向是對(duì)的。4.2 壓測(cè)組合mysqlslap 與 mysqladmin 配合很多人不知道m(xù)ysqlslap就是MySQL自帶的一個(gè)壓力測(cè)試工具。它模擬客戶(hù)端負(fù)載幫你快速確認(rèn)一個(gè)庫(kù)能扛住多大的并發(fā)。最簡(jiǎn)單的用法mysqlslap --concurrency50 --iterations3 \ --number-of-queries1000 --create-schematest \ --querySELECT * FROM orders WHERE user_id12345 \ --host10.0.0.10 --useradmin --password***它會(huì)自動(dòng)造一個(gè)測(cè)試表壓測(cè)完后自動(dòng)清理。壓測(cè)的時(shí)候我同時(shí)在另一個(gè)終端跑mysqladmin status和mysqladmin extended-status來(lái)觀(guān)測(cè)線(xiàn)程數(shù)、請(qǐng)求隊(duì)列長(zhǎng)度。比如mysqladmin --host10.0.0.10 --useradmin -p status輸出里的Threads、Questions、Connections是重點(diǎn)指標(biāo)。如果線(xiàn)程數(shù)快速上漲但Questions漲不動(dòng)說(shuō)明有鎖等待。這時(shí)候配合SHOW ENGINE INNODB STATUS\G看鎖信息基本能定位到瓶頸。需要提醒的是mysqlslap的壓測(cè)結(jié)果只能做相對(duì)參考。它產(chǎn)生的負(fù)載和真實(shí)業(yè)務(wù)差得很遠(yuǎn)真實(shí)業(yè)務(wù)有讀寫(xiě)混合、有隨機(jī)分布、有事務(wù)提交頻率所以要拿它來(lái)定容量上限是不嚴(yán)謹(jǐn)?shù)?。我更推薦用它來(lái)做上線(xiàn)前冒煙比如確認(rèn)新索引有沒(méi)有帶來(lái)明顯副作用或者新從庫(kù)能否扛住基礎(chǔ)流量。4.3 mysqluserclone權(quán)限克隆的正確用法最后這個(gè)工具我做強(qiáng)推mysqluserclone。它可以一鍵把一個(gè)用戶(hù)的所有權(quán)限克隆到另一個(gè)新用戶(hù)身上。比如要?jiǎng)?chuàng)建一個(gè)和app_rw權(quán)限完全一樣的賬號(hào)app_rw_backupmysqluserclone --serveradmin:pass10.0.0.10:3306 \ app_rw app_rw_backup它會(huì)把原用戶(hù)的全局權(quán)限、庫(kù)級(jí)權(quán)限、表級(jí)權(quán)限都復(fù)制過(guò)去。相比手工SHOW GRANTS再重放至少節(jié)省了90%的時(shí)間而且不容易漏掉授權(quán)范圍。要注意的一點(diǎn)這個(gè)工具復(fù)制不了密碼本身的功能。它能克隆權(quán)限結(jié)構(gòu)但不會(huì)把原用戶(hù)的密碼hash復(fù)制過(guò)去。你需要為新用戶(hù)單獨(dú)設(shè)置密碼ALTER USER app_rw_backup% IDENTIFIED BY 新密碼;這個(gè)特性反而讓我覺(jué)得安全因?yàn)樾沦~號(hào)密碼必然要經(jīng)過(guò)一個(gè)人工設(shè)置的過(guò)程不會(huì)出現(xiàn)兩個(gè)賬號(hào)用同一套密碼的隱患。還有一個(gè)小場(chǎng)景應(yīng)用從一臺(tái)庫(kù)遷到另一臺(tái)庫(kù)應(yīng)用賬號(hào)也要跟著遷。你可以先用mysqldbexport把整個(gè)權(quán)限相關(guān)的庫(kù)導(dǎo)出再在目標(biāo)端導(dǎo)入。但賬號(hào)密碼的密文在mysql.user表里導(dǎo)出時(shí)有時(shí)候會(huì)變動(dòng)所以我更傾向于直接用mysqluserclone在主庫(kù)克隆再在目標(biāo)端創(chuàng)建相同的賬號(hào)。效率實(shí)測(cè)下來(lái)比導(dǎo)入導(dǎo)出干凈得多。5. 我踩過(guò)的坑和現(xiàn)在的工作流工具再好只講命令不講坑等于沒(méi)講。這部分我把個(gè)人踩坑經(jīng)歷整理出來(lái)希望能給你省下幾晚加班。5.1 常見(jiàn)報(bào)錯(cuò)對(duì)照表下面的表是按我實(shí)際的經(jīng)歷整理出來(lái)的附帶解決思路。報(bào)錯(cuò)/現(xiàn)象原因解決辦法ImportError: No module named mysql.connector缺少mysql-connector-python用Python2環(huán)境安裝connector確認(rèn)PYTHONPATHUnable to retrieve server information連接賬號(hào)權(quán)限不足給賬號(hào)加SELECT、RELOAD等權(quán)限或使用rootERROR 2013 (HY000): Lost connection連接超時(shí)或keepalive斷開(kāi)執(zhí)行前加--connect-timeout120網(wǎng)絡(luò)不穩(wěn)時(shí)重試mysqldiff提示對(duì)象不存在server參數(shù)寫(xiě)錯(cuò)庫(kù)名或者沒(méi)加--pattern檢查--server1db的庫(kù)名表級(jí)別比對(duì)要寫(xiě)db.table導(dǎo)入時(shí)報(bào)外鍵約束錯(cuò)誤表導(dǎo)入順序不對(duì)導(dǎo)入前臨時(shí)SET FOREIGN_KEY_CHECKS0或者按依賴(lài)排序切換后應(yīng)用連不上應(yīng)用長(zhǎng)連接沒(méi)有重連機(jī)制使用VIP或者在應(yīng)用側(cè)啟用連接探活復(fù)制的從庫(kù)掉線(xiàn)無(wú)法自動(dòng)續(xù)傳網(wǎng)絡(luò)閃斷導(dǎo)致IO線(xiàn)程停止START SLAVE;查看Last_IO_Errno修復(fù)網(wǎng)絡(luò)后重新START5.2 我的生產(chǎn)工作流現(xiàn)在我的常規(guī)變更都是這樣走的第一步變更前做結(jié)構(gòu)比對(duì)。只要涉及表結(jié)構(gòu)變更先跑mysqldiff生成變更腳本作為評(píng)審依據(jù)。第二步變更后做數(shù)據(jù)校驗(yàn)。涉及數(shù)據(jù)遷移就用mysqldbexport mysqldbimport并在遷移前后分別做行數(shù)統(tǒng)計(jì)。行數(shù)統(tǒng)計(jì)我直接用SQL幾條簡(jiǎn)單的SELECT COUNT(*)就夠了。第三步重要實(shí)例的復(fù)制變化用mysqlreplicate重新配置。配置后觀(guān)察SHOW SLAVE STATUS確認(rèn)沒(méi)有報(bào)錯(cuò)。第四步每季度固定做一次mysqlindexcheck巡檢和mysqlslap壓測(cè)。這兩個(gè)命令我會(huì)寫(xiě)進(jìn)cronjob輸出保存到文件方便歷史對(duì)比。第五步高可用每周做一次切換演練。不是真的把主庫(kù)停機(jī)而是用--failover-modemanual觸發(fā)一次計(jì)劃內(nèi)切換觀(guān)察日志和VIP漂移情況。這比出問(wèn)題后再臨時(shí)演練可靠得多。5.3 維護(hù)現(xiàn)狀與替代方案我不得不承認(rèn)MySQL Utilities的官方維護(hù)確實(shí)停止了最后的1.6.5版本也是多年前的產(chǎn)物。它和新版MySQL 8.0的部分特性存在兼容性風(fēng)險(xiǎn)尤其是GTID、權(quán)限模型、密碼插件等深度集成的地方。所以如果你管理的全是MySQL 8.0環(huán)境我會(huì)建議用Oracle官方推廣的MySQL Shell和它的AdminAPI來(lái)替代一部分功能特別是復(fù)制和高可用場(chǎng)景。但如果你和我一樣手頭還有相當(dāng)比例的5.7實(shí)例MySQL Utilities依然是成本最低、最省事的方案。它不需要額外裝agent不需要升級(jí)業(yè)務(wù)側(cè)代碼命令行一敲就能用。另外一個(gè)趨勢(shì)是使用MySQL Enterprise Monitor或開(kāi)源的Prometheusmysqld_exporter做監(jiān)控告警工具集則逐漸退居二線(xiàn)變成變更輔助工具。這其實(shí)是個(gè)好分工監(jiān)控交給新體系變更操作繼續(xù)用這些老伙計(jì)。畢竟它們足夠小、足夠快沒(méi)有花里胡哨的依賴(lài)。說(shuō)實(shí)話(huà)這么多年過(guò)去了MySQL Utilities已經(jīng)不是我每天必開(kāi)的工具但每當(dāng)我需要快速做一個(gè)結(jié)構(gòu)比對(duì)或者臨時(shí)搭一個(gè)從庫(kù)測(cè)試環(huán)境第一個(gè)想到的還是它。這也解釋了為什么它還在我的工作臺(tái)里占著一席之地。工具的價(jià)值不在于新不新而在于能不能穩(wěn)定解決你手頭的問(wèn)題。與其追逐每個(gè)新工具不如把手上的這組命令吃透在關(guān)鍵時(shí)刻能頂上去就夠了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
九九re精品视频在线观看| 婷婷色中文字幕| 搡BBBB搡BBB搡五十| 99er这里只有精品视频| 67194国产| 99 r热| 日韩 中文 欧美| 超级黄色片| 五月天四色房丁香亭亭| 91干99| 日韩九九| 97色片| 五月婷婷丁香| 色宗合,宗合网| 97人人干| 久热网在线视频| 欧美月久久| pacopacomama 070722_670 素人奥様初撮りドキュメント 103 大久保純子 | 激情涩涩网| 激情五月天婷婷| 五月天婷五月天综合网在线观| 色噜噜婷婷| 色综合爱综合| 无码动漫AV| 五月丁香综合影院| 99热99思午夜精品| 久久全色| 99热这里只有精品99| 99热日韩这里只有精品| 九九伦子片| 天天操夜夜操| 99视频精品视频| 久久色大香蕉| 色婷婷中文在线| 久久综合99| 国产又爽又猛又粗的视频A片| 噜噜噜精品欧美成人在线观看| 99久热在线精品99re6热| 五月天久久91| 色色色99韩| 丁香九月激情在线视频| 色婷丁香| 天天操天爱综合| 射区导航| 婷婷色色亚洲| 欧美色色色色色| 婷婷五月天.com| 婷婷五月丁香青青草在线| 五月天婷婷丁香| 香蕉久久国产AV一区二区| 国产精品色色| 日本社区五月天激情| 99操无码视频观看| 日本综合99| 殴美日韩成人| 综合在线丁香五月| 丁香五月色色| 九九色网| 黑人糟蹋人妻HD中文字幕| 天天做 天天爱| 婷婷精品在线| 六月丁香啪| 思思热视频| 久久久久久五月天| 五月亭亭六月色| 七七久久婷婷| 色五月丁香五月| 狠狠狠狠狠草| 天天做天天爱天天日| 日韩欧美性爱| 欧美大片| 五月天婷婷在线观看| 五月婷婷五月天亚洲无码| 天天插天天射天天干| 日本天天色| www.夜夜操| 奸逼视频| www.av视频xx999.com| 色亭亭九月| 色色色色网站| 激情六月丁香| 在线只有精品| 第四色首页| 色六月天天激情综合网| 91无码视频| 99久热视频在线| 啪啪操超碰| 婷婷丁香激情五月| 丁香五月天色综合| 激情婷婷五月久久| 丁香伊人网| 99网址在线观看| 久久激情网| 五月天狠狠| 丁香五月综合在线| 99热 在线观看| www.9操| 日本久久高清| 狼人婷婷久久| 丁香婷婷九月| 综合婷婷五月天| 开心综合激情综合| 99热99这里有免费的精品| 五月丁香综合影院| 99热最新国内| 在线中文AV| 99热国产精品| 久久久久9| 这里只有精品免费视频| 99色亚洲| 亚洲第一精品成人999久久精品| 色五月丁香六月资源站| 婷婷第六色| 久青操| 天天透天天干| 激情久久综合网| 依人大香蕉在钱1| 色五月婷婷五月天| 日本精品人妻无码77777| 久久综合婷婷| 99精品免费| 超碰免费在线| 亚洲欧洲另类| 少妇被躁爽到高潮无码文| 夜夜爽天天爽| 超碰碰碰碰| 亚州色色色| 最新色色五月天| 天天爱天天操| 五月六月伦理| 天天操夜夜操| av久热| 伊人网碰碰| 国产毛片精品一区二区色欲黄A片| 999影院成人在线影院| 亚洲日韩26uuu| 综合激情网| 这里只有精品99视频| 99国产er热视频| 日本99视频| 久久综合五月天| 996er热| 欧美婷婷精品激| 五月婷婷亚洲综合在线| 久操干| 日韩精品超碰在线观看| 五月婷婷欧美| 伊人激情| Www.婷婷五月| 日本狠狠干| 久热这里| 色播六月| 无码九九| 婷婷五月天亚洲天堂| 综合激情网| 婷婷丁香五月六月激情| 久久激情五月| 另类 在线| 亚洲另类婷婷综合| 亚洲V国产V欧美V久久久久久| 无码激情AAAAA片-区区| 亚洲成人AV电影网| 色播六月| 深爱五月亚洲| 色吧婷婷| 日产精品久久久久久久蜜臀| 久久精品日| 久青操| 色色五月天婷婷| WWW色综合| 五月丁香亚洲五月| 丁香五月婷婷五月天| 97啪啪| 色婷婷狠狠18禁| 亚洲日韩成人三级av| 天天色2017| 色射7856五月天激情四射| 99热这里是精品| 丁香五月激情综合| 三级99热| 激情精品久久| 激情五月丁香婷婷| 日韩免费视频| 激情宗合 激情宗合| 五月丁香婷婷中文| 丁香五月综合在线观看| 丁香啪啪| 夜色综合网| 狠狠舔| 26uuuavcom| 欧美黄色AA片哗啦啦啦| 日本片日本片祼观看网站在线看中文版网页在线看 | A久久| 天天色2017| 国产亚洲99久久| 久久五月天精品视频| 色五月首页| 丁香九月激情| 亚洲成人av在线观看 | 色亭亭九月| 99干日本| 五月天涩涩| 五月婷婷中文| 91在线看免费 九九九九| 色色色色欧洲| 久久久久久人妻| 日韩啪啪网| 熟美女麻豆| 开心五月激情| 色婷婷中文在线| 国产真实乱了老女人视频| 久久伊人婷| 秋霞午夜理论| 99热网站| 六月婷婷av| 99免费视频在线观看爱| 中文字幕按摩做爰| 五月天大香蕉| 日本美女五月天| 国产古装妇女野外A片| 亚洲性爱电影| 成人va视频| 日本三级成人秘书精品片| 久热91精品| 人人人操B超碰| 五月婷婷激情综合网| 精品无码片| 成人视频九九| 婷婷激情社区| 久久婷婷综| 思思 热 99| 亚洲精品视频在线播放| 国产精品久久..4399| AAA亚洲AV| 久久婷婷热| 丁香五月色网| 五月天成人综合| 亚洲成人AV高清字幕| 日韩黄黄| 婷婷精品在线| 欧美日韩日韩成人| 人人爽亚洲| 色色操| 九九这里是免费的视频5| 亚洲综合婷婷五月天| 九九成人| 久久永久网址| 99综合| 亚洲操逼片| 99精品综合| 另类国产欧美视频| 婷婷.com| 激情骚五月| 五月天婷网| 少妇人妻人伦A片| 天天狠天天狠| 丁香六月婷婷久久综合| 99热精在线九九久久保| 99激情| 无码se| 五月丁香操婷逼| 91一道本| 99无码| 丁香五月 激情文学| 99愛国产| 欧美色色色色色色色色| 99热这里只有精品在线观看| 精品九九网| 丁香六月五月天| 九九九九热99超碰| 激情婷婷另类| 婷婷五月天丁香综合网| 综合激情视频| 久久3p| 99爱视频| 婷婷九月激情| 97色色婷婷| 青青夜夜狠狠夜夜狠狠| 福利视频在线播放| 婷婷五月天狠狠| 9999热在线| 五月停停激情网| 操操操97| 色色网站| 久9视频| 亚洲色在线观看| 97操操操| 欧美搡BBBBB摔BBBBB| 99这里只有免费的小视频在线观看| 337p大胆噜噜噜噜噜91Av| 99综合色色色| 久爱综合| 丁香激情五月天| 99精品视频偷拍| 日本啪啪天堂| 五月婷婷六月激情在线| www.婷婷五月.com| 五月婷中文字幕| 色五月琪琪| 激情综合五月婷婷| 99日韩网站| 色五月婷婷大| 天天拍夜夜撸| 国产成人综合网| 日本不卡中文字幕| 色99自拍| 久久XX| 另类少妇人与禽zOZZ0性伦| 天天婷婷综合| 丁香五月天影院| 99热成人精品网站| www.久久久久| 韩日另类| 五月天丁香成人社| 69热在线| 欧美一级a| 婷婷五月天av| 大香蕉五月婷婷丁香| 综合五月天完整| 五月天停停日日| 婷婷丁香五月综合| 99色在线观看视频| 国产成人网址| 97超碰色| 久热婷婷| 丁香五月婷婷激情网| 亚洲色婷婷五月天| 五月丁香六月婷婷综合在线| 99re热视频这里只精品| 五月天激情啪啪| 99热6这里之有精品| 31色区视频免费看| 99久视频| 99re热在线视频观看| 五月丁香色色综合| 91pornav在线| 精品少妇人妻AV无码专区偷人| 久久婷婷综合五月天| 成人AV在线电影| 河北真实伦对白精彩脏话| www.天天日| 丁香婷婷综合激情五月色,开心五月丁香花综合网,激情综合五月亚洲婷婷,五月天 | 久99久视频精品| 久久 视频这里只有精总| 婷婷五月丁香亚洲| 欧美日韩婷婷五月天| www99热| 婷婷在线操| 在线看片av| 七七久久婷婷| 一级片操逼视频| 伊人91| 思思热在线精品视频| 激情五月天综合图片小说网站| www.色情五月天.com| 激情av| 久草热在线视频| 欧美五月丁香在线观看| 婷婷五月色| 免费超碰在线| 五月婷婷香蕉视频| 精品久热| 91九色在线| 婷婷综合网站| 国产精品国产| 丁香网五月天| 9久热在线视频精品| 99精彩视频| 丁香五月天在线观看| 久久久久久草黄色片AV在线观看| 成人AV免费观看| 91欧美日韩| A片试看50分钟做受视频| 久久婷婷五月综合色丁香| 丁香婷婷久久五月天| 日本片日本片祼观看网站在线看中文版网页在线看 | 蜜桃五月天| 五月丁香色综合| 婷婷成人小说综合| 婷婷色香六月综合激情| 日韩激情婷婷五月天| 久久久婷| 色色日韩| 久9精品| 99区视频| 老司机日日夜夜青草| 激情五月天小说| ss视频xx91| 伊人婷婷五月天av| 99这里是精品| 色婷婷成人| 青草少妇激情| 婷婷色五月婷| 99色中文| 婷婷五月天AV| 色色热| 26uuu日韩| 99热精品在线播放| www久久久| 热九九精品| 五月天另类激情在线| 五月婷激情| 噜噜噜久久| 天天色天天噜| 精品色情一区二区三区四区| 26uuu丁香婷婷五月| 操操熟女| 99精品一二三四视频| 五月天激情啪啪| 99免费热在线精品| 亚洲国产网站| 五月 成人 婷婷| AV在线免费播放| 色欲天天综合| 一夜福利不卡| 亚洲激情综合五月婷婷啪啪| 思思热精品在线视频| 看片视频在线免费日产在线看| 欧美丁香五月夫妻天| 天天做天天爱天天玩| a久久| 青青草原亚洲天堂| 婷婷五月激情网| 超碰猛烈的性猛交| www.99视频| 欧美激情xxxXX| 婷婷 久综合| 内射激情在线| 色 色 色综合com| 五月婷在线| 五月婷婷基地| 成人无码精品1区2区3区免费看| 天天激情站| AV免费在线网站| 婷婷综合视频| 蜜桃婷婷丁香五月天狠狠久久综合| 丁香五月AV综合激情| 婷婷香五月| 开心激情站| 色色五月婷婷| 综合久久婷婷99| 色综合色婷色基地| 玖月婷婷爱丁香| 婷婷丁香综合成人| 婷婷丁香五月麻豆| 丁香婷婷五月份| 香蕉乱插| 国产视频色色色色色色色| www,av好吊操| 狠狠色丁香久久综合婷婷亚洲成人福利 | 蜜臀A∨在线水帘洞| 亚洲va欧美va国产综合久久久| 亚洲最大激情无码| 天天日夜夜爽| 丁香久月| 婷色成人| www.91婷婷| 人妻少妇色综合| 婷婷久久婷婷色五月| 五月丁香婷婷中文| 婷婷亚洲色| 99熟女| 色啦啦视频| www.五月天色色.com| 色人五月婷婷| 超碰在线视屏| 日本97在线观看| 成人短视频在线观看| WWW.夜夜| 丁香五月激情啪啪| 午夜九九九九九九九九九九九九九| 超碰在线成人| 内射人妻视频国内| 黄色一级影片| 操射国产日本| 另类在线| 伊人色综合影院视频| 色狠狠色噜噜噜a天堂一区| 六月婷婷激情| 久热精品在看| 99视频在线啪| www.日韩艹| 色色免费网站| 欧美婷婷综合网| 成人色情五月天婷婷丁香| 神马欧美精| 91 影音先锋| 中文激情网| 99re这里| 九九九九热99超碰| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 内射在线CHINESE| 热久久91| 婷婷丁香五月综合免费视频百花| 六月五月天婷婷涩播在线| 开心五月激情网| 99久久五月婷婷| 丁香情色五月| 婷婷丁香五| 久久色情| 91精品国产99久久久久久天美| 婷婷丁香综合| 江苏少妇性BBB搡BBB爽爽爽| 99re这里只有精品国产99| 久久激情五月天| 玖色色综合| 岛国av电影网站| 婷婷99狠狠| 色婷婷小说| 色色热99| 九九色色| 色五月婷婷网| 超碰九九热| 五月丁香六月婷婷激情网| 三级三久久线久久99久目本WW| 任你干嘛免费视频播放| 五月婷婷之综合激情| 婷婷色情 | 99热 免费| 这里只有精品视频免费在线观看| 亚洲成人AV在线播放| 欧美色性色好| 91打屁股视频网站| 天天色粽合合合合合合合| 婷婷五月开心六月AV| 五月欧美色色五月| 色.五月综合网| 亚洲欧洲自拍图片专区五月天| 色人久久| 2050人人操免费工开爱| 天天插天天插| 伊人干练久| 中文毛片无遮挡高潮免费| 久热只有这里有精品| 久热99| 操精品9| 欧美丰满熟妇BBB久久久| 激情五月天婷婷| 六月色婷婷| 97久久人人操| 成年人丁香五月| 快乐激情五月色婷婷| 久久a热| 99热 这里只有精品 国产 日韩| AV天堂淫乩| http:色情日本com| 激情五月天www| 成人va在线| 色婷婷六月| 超级碰碰碰97免费| 六月婷婷中文字幕| 国产探花AV在线| 在线综合亚洲欧美65| 99视频只有这里精品| 中文字幕天天干| 人妻视频在线| 欧美欧盟性爱网| 成人片黄网站色大片免费毛片 | 亚洲精品第一色色色色色色| 色五XX| 中文人妻主播久久| 婷婷精品性性性性性性性| 亚洲最大视频| 成人免费高清在线播放| 欧美婷婷五月丁香| 国产探花AV在线| 九九99视频精品| 亚洲秘 无码一区二区三区妃光/1| 99精品视频偷拍| 日日日日日| 青青草日本亚洲| 色婷婷五月天无码视频| 婷婷色五月激情| 婷婷大美在线| www.99久久久久99| 狠狠狠狠狠狠| 日日狠狠久久偷偷四色综合免费| 殴美激情综合网| 国产精品18久久久| 狠狠草狠狠草| 91夫妻视频| 五月天综合久久| aaa丁香五月天| 亚洲激情四射色| 天天天天干| AⅤ在线播放网| www.无码com| 丁香五月激情宗合| 六月99天天婷婷激情综合| bbwcuckold精品熟妇| 色婷婷狠狠18yy| 丁香五月综合婷婷| 亚洲色综久久五月| 婷婷五月天久久久| 激情婷婷护士激情| 99热在线观看免费精品| 四色AVwww| 91丨九色丨国产打屁股| 欧美,日韩成人在线| 五月婷亚洲精品AV天堂| dingxiangtingtingliuyue| 99福利导航| 国自产拍偷拍精品啪啪一区二区| 欧美色婷婷| 男人的天堂999| 蜜乳AV成人| 婷婷久久五月| 五月丁香六月婷婷中文版| 一级黄色操B| 开心五月深爱五月| 99热在线播放| 天天干天天日蜜臀av| 久久婷婷五月天丁香| 五月天开心色情网| 色婷婷超碰| 婷婷免费无视频| 91肏| 五月婷婷与六月丁香图片激情| 欧美婷婷五月激情| 丁香婷婷五月综合影院| 五月婷婷综合天天操| 91色色色| 天天色视频| 丁香六月色情| 热久久91| 99热线观看9| 最近免费中文字幕大全高清大全1| 五月天综合激情网| 丁香六月婷婷综合在线| 亚洲国产色婷婷| 国产av影片| 久久九九热re6这里有精品| 天天骑天天操| 色爱综合网| 五月婷婷插一插| 日本熟女视频一区二区| 中文字幕精品在线观看| 五月婷综合| 深爱丁香网| 激情五月狠狠| 伊久大香蕉| 九九99久久| 99精品无码网站| 久久欧洲久久| 五月婷丁香| 国产精品国产| 99热人人操人人操| 91干婷婷| 成人免费120分钟啪啪| 亚洲五月天激情| 久久 婷婷 五月天| 日本色色网站| 综合色色色| 人人色性网| 蜜乳9188| 99成人网一区| 91九色在线| 婷婷网影院| www.久久久久久久久久久| 伊人九九68| 亚洲亚洲人成综合网络| 无码成人AAAAA毛片AI换脸| 九九色综合九九色| 欧美人妻一区二区| 99性视频| 精品国产va久久久久| 四月婷婷五月丁香| 亚洲AV第二区国产精品| 亚洲成人一区| 久色婷婷200| WWW,五月| 五月色综合网| 丁香五月中文字幕久色| 九九热经典视频在线观看| α久久| 久久九精品| 国产精品色色色色| 26uuu欧美激情另类| 伊人丁香花综合影院| 99热这里只有国产精品| 婷婷五月激情在线| 五月天久久综合婷婷丁香| 婷婷五月天欧美图片在线播放电驴| 精品九九视频在线观看| 丁香六月天婷婷开心综合| 激情婷婷狠狠干| 色婷婷五月天综合网| 99精品无码网站| www,五月天激情| 五月丁香淫淫婷婷婷| 九九免费精品| 久久久无码精品成人A片小说| 深爱五月婷婷| 操97| 99九九视屏| www久久久| 九九婷婷五月天影视| 婷婷亚洲影院| 婷婷激情五月综合| www.99热最新视频8| 婷婷五月婷婷五月天| 99re在线这里只有精品视频首页| 色色性爱视频| 伊人久久大香网| 精品久久99| 怡红院AV亚洲一区二区三区H| 亚洲精品无码99热| 婷婷五月天丁香激情| 久久99网址| 天天狠天天狠| 激情小说之五月| 激情综合网五月婷婷| 婷婷情色五月天| 日日撸夜夜操| 深夜婷婷 丁香| 五月天婷婷丁香成人网| 色婷婷丁香九月| 色10月婷婷视频| 婷婷丁香亚洲五月天| 综合久久人妻| 91日韩在线| 97精品人人A片免费看| 色综啪啪啪啪啪啪| 99re6在线视频精品免费| 亚洲婷婷乱乱丁香| 91九色精品熟女内射| 六月婷在线| 色色色五月婷| 久久aaa| 五月天开心婷婷激情网站| 色色吧综合| 欧美色片中文字幕久久久久| 日韩无码人妻一区二区| 婷婷五月成人有| 狠色色狠网| 九九黄色网| 亚洲网站观看视频| 九月色婷婷综合| 麻豆科斗777| 91精品综合久久久久久五月丁香| 色噜噜狠狠一区二区三区| 丁香婷婷老熟女综合网| 97碰碰视频在线观看| 亚洲五月婷天天操| 97精品自拍| 97超碰免费超级在线观看| 五月丁香大相交| 五月色丁香国产在线视频| 香焦网五月天| 超碰9799| 超碰在线9| 五月丁香六月停停| 色狠狠综合| 欧美日韩精品一区二区三区钱| 九九人人操| 丁香五月偷拍| 丁香婷婷婷五月| 激情五月婷婷色播网| 丁香五月婷婷视频| 91中文狠狠综合| 玖玖综合网| 99re思思热久久| 婷婷大香蕉| 永久免费视频| 可以免费看AV网站| 亚洲爆乳无码精品AAA片蜜桃| 国产精品国产| 激情五月深爱五月| 超碰免费人妻| 热久久这里只有三级视频| 五月丁香六月婷婷啪啪综合 | 丁香婷婷激情| 成人丁香五月婷| 午夜婷婷五月天在线| 九九性视频| 国产亚洲99久久| 丁香五月成人在线| 久久婷婷综合基地| 久久久久久久久久久月丁| 丁香六月视频| 丁香色婷婷| 久草五月天| 久久九九在线视频| 久久久国产精品黄毛片| 五月丁香啪啪啪| 91狠狠色色丁香婷婷综合久久| 亚洲日本三级片| 久久99草五月婷婷| 超91热| 综合97五月| 99热1| 天天se在线视频| 九九爱激情| 思思99热在线| 深爱五月天 开心网| 99国产性感视频| 色婷婷狠狠干芒果TV| 这里只有精品免费视频| 丁香婷婷激情六月五月开心| 色噜噜狠狠色综合成人99| 欧美在线视频免费播放| 深爱激情五月婷婷| 久久久五月天| 丁香五月综合网| 十二区无码| 六月丁香婷婷色狠狠久久| 伊人网碰碰| 婷婷免费精品视频| 五月丁香在线精品| 一起草性爱不卡视频| 欧美丁香五月夫妻天| 日本久久综合| 日本三级大片| 涩涩激情五月婷婷| 日韩无码成人电影| 九九精品免费| 日韩大片艹艹| 色噜噜狠噜噜视频| 欧美亚洲成人在线| 婷婷五月天福利| 久久香蕉婷婷| 另类视在线| 国产精品丝| 日日日日日| 婷婷五月中文字幕| 九艹在线| 国产在线黄色| 五月丁香六月激情欧美综合| 成人丁香五月| 99久久网站| 丁香婷婷人妻| 深爱激情五月天| 精品婷婷五月天| 9色91视频| 激情五月视频| 久久日曰| 久草狼人| 五月天丁香婷| 成人精品视频99在线观看免费| 久久久九九九 99| 成人AV在线电影| 影音先锋人妻出差| 91超碰在线观看| 九九亚洲| 丁香五月天激情五月天激情五月天激情网| 9色在线| 日本特黄aaaaa| 665566 无码| 色偷偷狠狠| 久婷| 99热这里只有精品亚洲| 热思思九九| 亚洲天天操| 干一干xxxx| 中文无码精品一区二区三区| 综合五月丁香六月婷婷| 国产精产国品一二三在观看| 九九干视频| 伊人深爱综合| 婷婷五月色天| 亚洲免费av在线| 五月深爱婷婷| 狠狠综合| 东京热免费视频网站| 婷婷五月丁香五月天| 婷婷午夜精品久久久| 九九中文色色| 丁香五月 综合| 玖玖在线视| 琪琪色网址| 天天人人天天爽| 国产在线中文字幕| 手机在线视频观看9| 五月色无码| 精品激情| 六月婷婷香蕉| 五月丁香六月婷婷的女人| 婷婷九月| www色五月| 日本va欧美va国产激情| 亚洲黄网AV| 伍月婷丁香婷| 97视频91| 99精品97| 丁香五月激情婷婷激情| 丁香五月在线观看| 九色视频91| 丁香婷婷激情五月天无毒不卡蜜桃| 天天色中文字幕女优AV| 79精品在线视频| 婷婷五月天精品| 操日本三片99| 天天摸天天舔| 亚洲一二三网| 久久AV电影| 成人做爰A片免费看视频| 欧美色狠婷久| 婷婷五月综合在线| 玖玖综合网| 成人亚洲精品| 婷婷久久性爱| 丁香激情五月| 色五月婷婷激情基地| 久久婷婷成人综合色怡春院| 99se丁香| 人人做天天爱| 色五月亚洲| 97超碰色| 激情婷婷综合| 日韩一级网站| 日本操B视频在线观看| 天天干,天天舔| 任你操精品免费| 国内久久久精品99| 婷婷情色激情| 久久免费9| 国产探花一片区| 色五月激情婷婷| 天天日综合| 欧美综合在线五月天色婷婷| 操碰99| 99玖玖视频| 成人无码髙潮喷水A片| 久久伊人婷婷| 深爱激情婷| 午夜精品777| 成片免费观看视频大全| 4438成人电影| 热99热久| 在线观看国产高清视频免费网站| 狠狠久久婷五月| 天天天天爽爽天干| 九九视频精品在线免费| 九色PORNY9l原创自拍| 停停五月色宗合| 无码字幕中文| 97干干干丁香| 激情五月丁香五月| 欧美精品99| 玖玖资源部在线播放| 99久在线精品99re8热| 激情五月深爱五月观看| 香蕉婷婷| 中文字幕性爱丰满| 午夜婷婷久久 | 丁香五月婷婷免费视频| 亚洲婷婷免费| 天天摸天天肏| 99热这里只有精| 婷婷综合色五月天| 丁香五月天在线直播观看| 激情综合五月激情XXXX| 丁香五月天啪啪| 久久电影4399| 九色无码| 99碰碰中文| 欧亚中文A V| 91久久久久| 欧美婷婷丁香社区在线播放| 五月网站| 中文字幕人成乱码在线观看| 99精品久久| 五月天久久婷婷| 五月色婷婷综合| 欧美久久婷婷| 男女99免费视频| 成人视屏在线观看| 婷婷五月天Av| 人人亚洲| 久久这里只有精品视频1| 久久五月天色婷婷| 国产成人精品一区二三区熟女在线| 狠狠色精品综合| 欧美色宗和激情| 性无码专区无码| 久久怡红院| 色婷婷内射| 狠狠综合区| 五月天激情小说网| 综合网亚洲| 婷婷九月激情| 免费看片操逼| 熟妇人妻中文字幕无码老熟妇 | 亚洲五月丁香综合网| 9l视频自拍九色9l黑人| 狼友视频在线观看18| 热99只有精品| 影音先锋 一区| 大地9中文在线观看免费高清| 天天色天天| 99热在线里有精品| 天天搞天天色综合| www.色五月| 4399在线日本A片| 99色最新在线视频网站| www色婷婷| 色99免费视频中文| AA片在线观看视频在线播放| 六月丁香中文字幕| 五月综合六月婷婷| 成人AV免费观看| WWW.久久99| 嫩草AV久久伊人妇女超级A| 99热日| 丁香六月亚洲综合| 九九这里只有精品在线视频| 超级碰碰碰91| 久久久久久久久久久久久9| www.久久爱| www.五月丁香av| 丁香五月大香蕉| 婷婷九月丁香天堂丁香天堂| 成人国产欧美大片一区| 99这里只有| 337p午夜影院| 99久热这里只有精品视频删减版| 4399在线观看免费高清黄色视频| 色婷婷激情Av久久久| www.99热| 东京热伊人| 五月天激情啪啪| 五月天激情AV| 五月天色婷婷视频| 欧洲永久精品| 激情婷婷五月少妇| 婷婷五月丁香激情图片 | 九九RE视频在线精品| 色九月婷婷丁香| 五月丁香六月婷婷无码| 99爱最新免费视频在线观看| 五月天开心激情网色欲无码| 99超级碰免费视频| 九色无码| 日本色色网站| 久久一伦| 亚洲综合欧美色丁香婷婷888月图片| 玖玖爱伊人网| 五月综合激情婷婷六月色窝| 色色色综合| 婷婷五月在线观看| 亚洲午夜av| 九九操操| 色三级色三级| 九九热av| 狠狠干综合| 九九色人| 久久激情五月| 99热6精品| 久久99精品九九久久久婷婷| www.五月婷婷| 9l视频自拍9l九色9l成人| 久9无码视频| 色婷婷五月综合在线| 丁香五月激情五月| 久9视频免费播放| 超碰不卡在线| xx久久| 67194成I人在线观看线路1| 操九色| 99视频自拍| 婷婷丁香五月激情| 97 A I色色| 久久草大香蕉| 亚洲国产精品二二三三区| 中文字幕按摩做爰| 婷婷婷婷婷婷婷婷婷婷丁香| 国产一级片色色| 欧美A A A A A| 无码九九九九| 天天综合色丁香| 五月婷婷狠狠干| WWW,激情五月天,COM| 五月婷婷综合热| 天天日天天摸天天| 国产在线6| 婷婷五日b| 天天操天天草天天草天天| 热思思| 97操碰在线视频| 99久久久久| 六月激情网| 婷婷大香焦| 伊人9草在线观看| 97色永久免费视频| 色五月丁香总合网| 五月天狠狠干| 天天插,天天射| 91色噜噜狠狠狠狠色综合| 91成人电影| 婷婷社区五月天| 综合色在线| 国产精品视频网| 9久热| 久色中文| 久久精热| 久久这里只有精品99| AA片在线观看视频在线播放| 亞洲自怕| 激情综合色图| 婷婷九月激情| 26uuu亚洲精品国产| 五月丁香啪啪激情| 国产亚洲成AV人片在线观黄桃| 国产精品成人网址| 97人人干人人操| 思思热在线视频99| 色色色热热热| 丁香激情五月| 国产原创视频91九色| www.91在线观看| 色播五月丁香综合| 97好吊操| 五月天丁香网| 91久女| 色玖玖网| 婷婷 久综合| 五月天啪啪| 色五月激情综合| 欧美交换配乱吟粗大25P| 青青草Avb在线| 99免费成人网| 国产激情婷婷| 亚洲乱码精品久久久久..| 98国产精品综合一区二区三区| 视频1区2区| 青青草蜜臀| 天天做天天爽| 日韩黄在免| 91九色国产| 日本性激情色播| 亚洲色五月| 久久色午夜在线导航| AV五月丁香| 久久免费婷婷视频| 成人看片网站| OYIWbGcPu8H| 第四色五月激情网| 亚洲天堂大香蕉| 成人精品视频99在线观看免费| 天天色综| 麻豆五月丁香婷婷| 婷婷五月婷婷| 71在线精品视频一区| 很很干在线视频| 99热这里只| 天综合日日夜综合7799| 婷婷另类开心| 丁香综合网| 31色区视频免费看| 日日干综合| 久久99精品久久只有精品| 国产性爱色| 五月丁香六月婷婷综合伊人| 激情深爱五月天| 婷婷色色欧美| 深爱1激情网| 人妻丰满精品一区二区A片| 国产精典视频在线观看| 日本va欧美va欧美va| 国产精产国品一二三在观看| 五月婷婷色色色| 天天色天天日天天舔| 综合五月激情| 性 色 婷婷| 综合色色色| 婷婷激情综合色五月久久,色婷婷丁香花,丁香婷婷五月情天,久久婷婷五月综合色 | 婷婷五月天综合蜜桃| 五月激情六月宗合| 97ai婷婷| 99热在线精品播放| 日本va欧美va欧美va精品| 1000部毛片A片免费观看| av九九| 狠狠色成人影片| 色五月婷婷7777| 好吊操这里只有精品| 中文av网站| 亚洲99综合| 天天噜| 91日韩美女被插视频| 99热.com| 亚洲传媒在线观看| 色五月婷婷啪啪五月| 青草视频在线观看视频| 色狠狠五月天| 色色色无码| 97啪啪| 色播五月综合网| 免费看片在线观看| 五月天久久网站| 精品视频网| 激情五月天www| 久久性都花花世界成人免费视频| 五月婷丁香亚洲| 成人做爰黄A片免费看直播室男男| caopeng超碰| 日产精品久久久久久久蜜臀| 丁香五月大片| 国产亚洲精品久久久久久郑州 | 99视频只有精品| 色婷婷亚洲综合av| 欧美婷婷成人| 久久婷婷五月天激情| 开心激情五月天网| 精品爆操| 97碰碰人人| 天天搞夜夜爽夜夜爽| 亚洲丁香花色| 婷婷激情五月天天天开心| 亚洲激情综合| 婷婷五月天激情在线观看| 久久99国产综合精品免费| 久久人妻系列| 婷婷久久欧美| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | 丰满人妻一区二区三区| 五月天天天综合| 亚洲爆乳无码精品AAA片蜜桃| 26UUU亚洲欧美| 欧美日韩成人h| 99re8这里只有精品99re8热视频| 91色碰| 色香蕉影院| 婷婷激情丁香五月天综合| 色偷偷AV亚洲男人的天堂| 午夜婷婷六月天| 18久久| 大香蕉五月婷婷| 天天操夜夜啊| 色啪久 | 婷婷丁香五月综合激情视频| 五月婷丁香久久综合| 亚州操操| 五月婷婷基地| 狠狠色丁婷婷日日,伊人激情综合网 | 九九热这里只有精品6| 丁香五月色网| 超碰av在线| 久色五月| 91碰碰视频| 婷婷丁香成人| 五月天社区狠狠| 另类伊人婷婷| 网色99| 丁香色啪综合| 99少妇精品| 丁香五月天激情综合| 五月综合777| 中文字幕网站在线观看| 激情五月天综合网| 天天操天天日天天操| 密乳Va| 亚洲V国产V欧美V久久久久久| 天天日,天天射,天天舔| 97综合在线| 99视频在线观看地址| 亚洲色色色| 天天摸天天舔天天爽| 久久久精品99| 天天干天天日天天操| 欧洲免费视频色| www.色综合| 无码一区二区三区四区五区91c| 九九综合伊人| 国产资源91在线| 色情五月天视频网|