免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

手寫迷你Tomcat:從報錯分層到Web容器原理

手寫迷你Tomcat:從報錯分層到Web容器原理 Tomcat 這玩意兒做 Java Web 的基本繞不開??涩F(xiàn)實里最常見的場景是本地跑得好好的一上服務(wù)器就報Address already in useIDEA 里點啟動控制臺刷出一屏紅字最后一行寫著could not obtain connection to query metadata項目部署上去訪問是 404日志里連個像樣的提示都沒有。多數(shù)人這時候的做法是百度關(guān)鍵詞找到一條差不多的答案復(fù)制粘貼重啟好了——但下次換個環(huán)境又炸因為壓根不知道這個報錯是從哪一層冒出來的。我這篇文章想干兩件事。第一件把 Tomcat 常見的報錯按出問題的層次重新梳理一遍從啟動腳本、端口、類加載、連接池一路到 SSL 配置講清楚每種報錯背后到底發(fā)生了什么為什么這么解。第二件也是我覺得更有意思的——手動寫一個能跑起來的迷你 Tomcat用ServerSocket加線程池自己解析 HTTP 報文、自己映射 Servlet、自己加載WEB-INF下的類。寫完之后你再回頭看那些報錯會發(fā)現(xiàn)它們的位置感一下子就清晰了ClassNotFoundException 是類加載層的事404 是映射層的事端口沖突是網(wǎng)絡(luò)層的事各歸各位。這篇內(nèi)容適合誰看正在被 Tomcat 報錯折磨的運維和后端同學、想搞明白 Web 容器內(nèi)部到底怎么回事的初中級開發(fā)者、以及準備給現(xiàn)有項目做容器替換或者調(diào)優(yōu)的人。代碼部分我會給完整可運行的版本但更重要的是每一步為什么這么設(shè)計——這才是我自己踩坑之后真正記住的東西。1. 先想清楚Tomcat 到底替我們接管了哪些活1.1 一個請求進來經(jīng)過了幾道手很多人對 Tomcat 的認知停留在放 war 包的地方。但你只要自己寫過一次最原始的 Socket 服務(wù)就會立刻明白它省掉了多少事。一個 HTTP 請求從瀏覽器發(fā)出到你的doGet方法被執(zhí)行中間至少經(jīng)歷了這些環(huán)節(jié)內(nèi)核把 TCP 連接交給監(jiān)聽端口的進程Tomcat 的 Acceptor 線程接住這個連接交給 Worker 線程Worker 從 socket 上讀字節(jié)流按 HTTP 協(xié)議切分出請求行、請求頭、請求體根據(jù)請求行里的 URI找到對應(yīng)的 Host、Context也就是你的應(yīng)用、Wrapper也就是那個具體的 Servlet構(gòu)造HttpServletRequest和HttpServletResponse兩個包裝對象調(diào)用Servlet.service()最后把響應(yīng)對象里的狀態(tài)行、響應(yīng)頭、響應(yīng)體按協(xié)議格式寫回 socket 并關(guān)閉連接。這里面每一環(huán)都可能出錯而且報錯信息分布在完全不同的地方。端口被占用是內(nèi)核層直接就拒絕了URI 找不到對應(yīng) Context 是映射層的問題Servlet 類加載不出來是類加載器的問題。你把這條鏈路在腦子里畫出來排查速度至少快一倍。1.2 為什么手寫一遍是最快的理解方式我在帶新人的時候有個固定動作讓對方用ServerSocket寫一個只返回 hello 的服務(wù)。寫完之后再問一句如果我要支持兩個不同的路徑返回不同內(nèi)容呢他就自然開始想路由表再問如果我要讓用戶自己寫類來處理請求呢他就自然想到接口和反射再問如果用戶把類打包成 jar 放在某個目錄下呢他就自然碰到類加載器。這就是手寫迷你 Tomcat 的價值——它把你平時當成黑盒的那一層拆成了幾個你能一手寫完的小模塊。而且這個過程不白費功夫Tomcat 本身的架構(gòu)也是這么分層的Server→Service→ConnectorEngine→Host→Context→Wrapper。你手寫的版本就是它的一根簡化骨架。1.3 報錯分類的底層邏輯我把常見報錯歸成五大類后面第 5 章會逐條展開報錯層次典型現(xiàn)象排查入口啟動腳本 / 環(huán)境雙擊閃退、JAVA_HOME not foundcatalina.bat、setclasspath.bat輸出網(wǎng)絡(luò) / 端口Address already in usenetstat、lsof、ps -ef部署 / 映射404、歡迎頁不對、應(yīng)用未加載logs/catalina.out、conf/server.xml類加載 / 依賴ClassNotFoundException、NoClassDefFoundErrorWEB-INF/lib、WEB-INF/classes資源 / 配置連接池拿不到連接、SSL 握手失敗、亂碼數(shù)據(jù)源配置、keystore、Connector編碼這張表你貼在工位上遇到紅字先定位它在哪一行比漫無目的地搜關(guān)鍵詞高效得多。2. 手動實現(xiàn)迷你 Tomcat 的整體設(shè)計2.1 拆成三層網(wǎng)絡(luò)層、協(xié)議層、容器層我在設(shè)計這個迷你容器的時候刻意做了嚴格分層因為分層本身就是為了讓報錯有歸屬。網(wǎng)絡(luò)層只干一件事綁定端口accept()阻塞等待連接把Socket丟給線程池。它完全不懂 HTTP也不懂你的業(yè)務(wù)。協(xié)議層負責把InputStream里的字節(jié)翻譯成結(jié)構(gòu)化的請求對象再把結(jié)構(gòu)化的響應(yīng)對象序列化回字節(jié)。容器層則負責路由、Servlet 生命周期、類加載。為什么非要這么分因為分完之后你要換實現(xiàn)的時候成本極低。比如網(wǎng)絡(luò)層從 BIO 換成 NIO容器層一行都不用改協(xié)議層要支持 HTTP/1.1 的chunked傳輸也只需要改動解析和寫出這兩個方法。Tomcat 的Connector和Container分離就是這個道理只不過它做得更極致。2.2 網(wǎng)絡(luò)模型為什么從 BIO 起步有人會說都什么年代了還寫 BIO。但對一個用來理解原理的迷你實現(xiàn)BIO 加線程池是最優(yōu)解原因有三點。第一代碼路徑清晰。一個請求一個線程你打斷點的時候能完整看到從accept到service的調(diào)用棧不會在 Selector 的事件循環(huán)里迷失。第二它足夠支撐中等規(guī)模場景。Tomcat 直到 8.5 才默認啟用 NIO此前長期使用的 APR 和 BIO 組合在生產(chǎn)環(huán)境跑了十幾年說明 BIO 加合理線程池并不是不能用。第三也是關(guān)鍵的一點——它讓你直觀感受到maxThreads這個參數(shù)到底限制的是什么。當你看到線程池滿了之后新連接全部堵在accept隊列里你就永遠不會再隨便把maxThreads調(diào)到 5000。提示迷你實現(xiàn)用 BIO 是為了理解生產(chǎn)上 Tomcat 8.5 以后默認就是 NIO 模式IO 多路復(fù)用在連接數(shù)上萬時優(yōu)勢明顯這一點不要混淆。2.3 目錄結(jié)構(gòu)與職責劃分我最終落地的結(jié)構(gòu)是這樣的mini-tomcat/ ├── src/main/java/com/example/mt/ │ ├── MiniTomcat.java // 啟動入口網(wǎng)絡(luò)層 │ ├── http/ │ │ ├── MiniRequest.java // 請求對象協(xié)議層 │ │ ├── MiniResponse.java // 響應(yīng)對象協(xié)議層 │ │ └── HttpParser.java // 報文解析 │ ├── container/ │ │ ├── MiniServlet.java // Servlet 接口 │ │ ├── ServletMapping.java // 路由表 │ │ └── WebXmlParser.java // 配置解析 │ └── loader/ │ └── WebappClassLoader.java └── webapps/ └── demo/ ├── WEB-INF/web.xml ├── WEB-INF/classes/ └── index.html每個包的邊界和前面說的三層嚴格對應(yīng)。MiniTomcat里的代碼不會出現(xiàn)Servlet字樣container包里的代碼不會出現(xiàn)Socket字樣。這個約束看起來很教條但你寫下去就會發(fā)現(xiàn)它逼著你在正確的層次上解決問題。比如 URL 解碼把%E4%B8%AD還原成中文它天然屬于協(xié)議層就該放在HttpParser里而不是散落在路由查找的代碼中。3. 核心細節(jié)拆解報文解析、路由映射與類加載3.1 HTTP 請求解析里最容易踩的三個坑第一個坑BufferedReader和請求體的沖突。新手最常見的寫法是new BufferedReader(new InputStreamReader(socket.getInputStream()))然后readLine()讀第一行得到請求行。這在純 GET 請求下沒問題因為 GET 沒有請求體。但一旦是 POST你再用同一個 reader 去讀 body就會讀到空——因為BufferedReader內(nèi)部做了緩沖已經(jīng)把一部分 body 吃進它自己的緩沖區(qū)了而你從InputStream直接再讀讀到的是緩沖區(qū)之后的內(nèi)容。正確做法是解析完請求頭和請求行之后根據(jù)Content-Length頭從原始的InputStream上精確讀取對應(yīng)字節(jié)數(shù)。這也是為什么 Tomcat 內(nèi)部對ServletInputStream有嚴格的狀態(tài)機管理——一旦你調(diào)用了getReader()再調(diào)getInputStream()就會拋IllegalStateException。它就是在防這種讀串了的情況。第二個坑請求頭的行結(jié)束符。HTTP 協(xié)議規(guī)定是\r\n但有些客戶端或者手寫的測試工具會只發(fā)\n。readLine()恰好能容忍這兩種所以手工解析時用它反而安全。但如果你自己用read()逐字節(jié)找\r\n就得考慮兼容。第三個坑URI 的編碼。請求行里的 URI 是經(jīng)過百分號編碼的中文參數(shù)、空格、特殊符號都會變成%XX形式。加上號在表單提交里代表空格這兩套規(guī)則混在一起很容易解析錯。我的處理順序是先按?切出 path 和 query再對 query 按切分、按切分最后對 key 和 value 分別做URLDecoder.decode(value, UTF-8)。注意URLDecoder會把也解成空格這在 query 場景下是符合規(guī)范的。3.2 響應(yīng)格式與狀態(tài)碼的封裝響應(yīng)寫出去的時候最容易忽略的是頭部順序和Content-Length。HTTP 響應(yīng)格式是HTTP/1.1 200 OK\r\n Content-Type: text/html;charsetUTF-8\r\n Content-Length: 128\r\n \r\n body我見過有人把Content-Length算錯結(jié)果是瀏覽器一直轉(zhuǎn)圈等數(shù)據(jù)直到超時。原因通常是用了Writer寫字符但在計算長度的時候算的是字符數(shù)而實際發(fā)出的是字節(jié)數(shù)。中文一個字符 UTF-8 下占三個字節(jié)這個差值會讓Content-Length偏小瀏覽器收到少于聲明長度的數(shù)據(jù)就會一直等。所以在迷你實現(xiàn)里我統(tǒng)一用ByteArrayOutputStream先在內(nèi)存里把響應(yīng)體字節(jié)攢好拿到真實的字節(jié)長度之后再寫Content-Length最后一次性刷出去。這個先攢后發(fā)的思路和 Tomcat 里OutputBuffer的設(shè)計是一致的。3.3 路由映射從 URI 到 Servlet 實例路由的本質(zhì)是一個查找表。我在實現(xiàn)時用了最簡單的方式MapString, MiniServletkey 是url-patternvalue 是單例的 Servlet 實例。這是為了簡化真實 Tomcat 里每個請求都會拿一個StandardWrapper它管理著 Servlet 實例的單例和生命周期。匹配規(guī)則上我先實現(xiàn)了精確匹配然后補了兩條匹配類型寫法例子精確匹配/user/list請求路徑完全相同才命中前綴匹配/user/*以/user/開頭都命中擴展名匹配*.do以.do結(jié)尾都命中默認匹配/兜底通常指向靜態(tài)資源處理優(yōu)先級是精確 前綴 擴展名 默認這一點必須和 Servlet 規(guī)范保持一致否則同一個項目從真正 Tomcat 遷移到你的迷你容器上行為就不一樣了。順便說一句這個優(yōu)先級順序是很多人配置DispatcherServlet時踩坑的來源——/*會覆蓋掉*.jsp的映射導(dǎo)致 JSP 直接變成下載文件。3.4 類加載器隔離Tomcat 最容易被誤解的一層WEB-INF/classes和WEB-INF/lib/*.jar是應(yīng)用私有的父加載器看不到它們這就是所謂的類加載隔離。為什么要隔離因為同一個 Tomcat 上可能跑十個應(yīng)用它們依賴的spring-core版本可能完全不同。如果不隔離第一個加載的版本就會覆蓋后面所有的應(yīng)用。Tomcat 的類加載順序和標準雙親委派是反的它先嘗試用WebappClassLoader自己加載加載不到才交給父加載器。這個打破雙親委派的行為正是很多ClassNotFoundException和LinkageError的根源。我在迷你實現(xiàn)里用URLClassLoader簡化了這件事public class WebappClassLoader extends URLClassLoader { public WebappClassLoader(File webappDir, ClassLoader parent) throws Exception { super(buildUrls(webappDir), parent); } private static URL[] buildUrls(File webappDir) throws Exception { ListURL urls new ArrayList(); File classes new File(webappDir, WEB-INF/classes); if (classes.exists()) { urls.add(classes.toURI().toURL()); } File lib new File(webappDir, WEB-INF/lib); File[] jars lib.listFiles((d, n) - n.endsWith(.jar)); if (jars ! null) { for (File jar : jars) { urls.add(jar.toURI().toURL()); } } return urls.toArray(new URL[0]); } }有了它你在 Servlet 里寫Class.forName(com.example.MyService)就能找到應(yīng)用私有的類而不會跑到系統(tǒng)的 classpath 里去找。理解了這幾十行代碼你再看 Tomcat 那些NoClassDefFoundError思路會清楚很多要么是 jar 沒進WEB-INF/lib要么是同一個類被兩個加載器加載了導(dǎo)致類型轉(zhuǎn)換失敗。4. 完整實操寫一個能跑靜態(tài)資源和 Servlet 的迷你容器4.1 環(huán)境準備與工程搭建我用的是 JDK 17 加 Maven 的極簡配置。為什么選 17 而不是 8因為URLClassLoader在 9 以后的模塊化環(huán)境下有一些限制但用于加載普通 jar 依然沒問題而且 17 的Socket和字符串處理 API 更順手。如果你所在的項目必須用 JDK 8代碼也能原樣跑只是readAllBytes這類方法要換成循環(huán)讀取。pom.xml里只有一個 JUnit其余全靠 JDK 自帶。這一點很重要——我刻意不引第三方 HTTP 庫就是為了讓你看清協(xié)議本身的處理過程。用 Netty 或者 Undertow 能更快跑起來但那就失去意義了。4.2 啟動類網(wǎng)絡(luò)層的核心二十行public class MiniTomcat { private final int port; private final ExecutorService pool Executors.newFixedThreadPool(50); private final ServletMapping mapping new ServletMapping(); public MiniTomcat(int port) { this.port port; } public void start() throws Exception { mapping.load(new File(webapps/demo)); try (ServerSocket server new ServerSocket(port)) { System.out.println(MiniTomcat started on port port); while (true) { Socket socket server.accept(); pool.execute(() - handle(socket)); } } } private void handle(Socket socket) { try (socket; InputStream in socket.getInputStream(); OutputStream out socket.getOutputStream()) { MiniRequest req HttpParser.parse(in); MiniResponse resp new MiniResponse(out); if (req null) { return; } if (!mapping.dispatch(req, resp)) { StaticResourceHandler.handle(req, resp); } resp.flush(); } catch (Exception e) { e.printStackTrace(); } } }這里有個細節(jié)值得說try (socket; in; out)這種寫法會在代碼塊結(jié)束時自動關(guān)閉所有資源。很多人手寫 HTTP 服務(wù)時忘了關(guān) Socket跑壓測的時候幾百個連接瞬間把文件句柄耗盡報Too many open files。生產(chǎn)上的 Tomcat 有連接池和空閑回收手寫版本就必須靠try-with-resources兜底。線程池固定 50 個線程也是一種取舍。真實場景應(yīng)該做成可配置并且要意識到accept到線程池之后如果池子滿了任務(wù)會進無界隊列連接會一直堆著不處理。生產(chǎn)上更穩(wěn)妥的做法是給隊列設(shè)個上限滿了就快速返回 503這也是 Tomcat 的acceptCount在干的事。4.3 請求與響應(yīng)對象的實現(xiàn)要點public class MiniRequest { private String method; private String uri; private String path; private String protocol; private final MapString, String headers new HashMap(); private final MapString, String params new HashMap(); private byte[] body; public String getParameter(String name) { return params.get(name); } public String getHeader(String name) { return headers.get(name.toLowerCase()); } public String getMethod() { return method; } public String getPath() { return path; } // 省略 setter }MiniResponse我給了它三個核心方法setStatus、setHeader、write。write把字節(jié)寫進內(nèi)存緩沖flush負責拼裝成完整報文寫出去。這里再強調(diào)一遍前面提過的順序問題一定要在flush里現(xiàn)算Content-Length不要提前寫死。public void flush() throws IOException { byte[] data buffer.toByteArray(); StringBuilder head new StringBuilder(); head.append(HTTP/1.1 ).append(status).append(\r\n); if (!headers.containsKey(content-type)) { headers.put(Content-Type, text/html;charsetUTF-8); } headers.put(Content-Length, String.valueOf(data.length)); headers.forEach((k, v) - head.append(k).append(: ).append(v).append(\r\n)); head.append(\r\n); out.write(head.toString().getBytes(StandardCharsets.ISO_8859_1)); out.write(data); out.flush(); }注意響應(yīng)頭我用ISO_8859_1編碼寫出去。這不是筆誤HTTP 頭部按規(guī)范只允許 ASCII 字符用ISO_8859_1保證每個字節(jié)原樣傳輸。如果用 UTF-8 編碼頭部遇到非 ASCII 字符會變成多字節(jié)客戶端解析頭部就會錯位。4.4 靜態(tài)資源處理與 404 兜底靜態(tài)資源處理的價值在于它讓整個容器看起來像個真東西你可以在webapps/demo下丟一個index.html瀏覽器訪問就能看到頁面。public class StaticResourceHandler { public static void handle(MiniRequest req, MiniResponse resp) throws IOException { String path req.getPath(); if (/.equals(path)) { path /index.html; } File file new File(webapps/demo, path); if (!file.exists() || file.isDirectory()) { resp.setStatus(404); resp.write(h1404 Not Found/h1.getBytes(StandardCharsets.UTF_8)); return; } String name file.getName().toLowerCase(); resp.setHeader(Content-Type, MimeTypes.of(name)); resp.write(Files.readAllBytes(file.toPath())); } }有一個安全問題必須在手寫版本里就養(yǎng)成習慣路徑穿越。如果用戶請求/../../etc/passwd直接拼接路徑就會讀到系統(tǒng)文件。真實 Tomcat 通過canonicalPath校驗來解決。我在迷你版里加了一句規(guī)范化檢查這對理解 Tomcat 的安全加固很有幫助。順便說 JSP。我最初也想在迷你版里跑 JSP但真正的 JSP 需要先編譯成 Servlet 再加載執(zhí)行工作量翻倍。我選擇的做法是把 JSP 的編譯產(chǎn)物手動放到WEB-INF/classes下當成普通 Servlet 來跑。這也順帶解釋了熱詞里那個操作——web 項目配置 tomcat 后查看 jsp 編譯后的 java 類你在 Tomcat 的work/Catalina/localhost/應(yīng)用名/org/apache/jsp/目錄下就能看到這些中間產(chǎn)物。項目莫名其妙報 JSP 相關(guān)錯誤的時候去那個目錄看生成的 Java 文件比盯著 JSP 源碼猜快得多。4.5 啟動驗證與目錄約定把MiniTomcat跑起來控制臺輸出MiniTomcat started on port 8080然后瀏覽器訪問localhost:8080/index.html看到頁面訪問localhost:8080/hello看到 Servlet 返回的內(nèi)容整個鏈路就通了。驗證順序我建議這樣走先靜態(tài)資源再精確匹配的 Servlet再帶參數(shù)的 POST最后中文參數(shù)。每一步都通過再往下走出問題的時候定位范圍就很小。我當初第一次寫的時候POST 中文參數(shù)一路亂碼最后發(fā)現(xiàn)是Content-Length用的是字符數(shù)而不是解碼后的字節(jié)數(shù)導(dǎo)致 body 讀少了一半UTF-8 多字節(jié)字符被截斷。這類問題在真正的 Tomcat 里之所以不常見就是因為它的OutputBuffer和編碼器已經(jīng)處理好了這些邊界。5. Tomcat 常見報錯逐條排查實錄5.1 啟動類報錯端口、環(huán)境變量與腳本問題java.net.BindException: Address already in use是出現(xiàn)頻率最高的一條。它的意思非常字面端口已經(jīng)被別的進程占了。Linux 下排查用lsof -i:8080或者netstat -tunlp | grep 8080Windows 下用netstat -ano | findstr 8080拿到 PID再去任務(wù)管理器或者taskkill /PID xxx /F處理。有時候你確認沒有 Java 進程占著那就要考慮是不是之前的 Tomcat 沒殺干凈用ps -ef | grep tomcat過一遍再用kill -9清理。還有一種隱蔽情況TIME_WAIT狀態(tài)的連接還在占用端口這時候要么等一會兒要么在Connector上配SO_REUSEADDR。Neither the JAVA_HOME nor the JRE_HOME environment variable is defined這條出現(xiàn)在 Windows 下雙擊startup.bat閃退的場景。原因是setclasspath.bat在啟動時找不到 JDK 路徑。解決方式是設(shè)好JAVA_HOME環(huán)境變量指向 JDK 根目錄而不是bin目錄。如果你機器上有多個 JDK想讓 Tomcat 用指定的那個比如 JDK 17 而系統(tǒng)默認是 8可以在setclasspath.bat開頭顯式加一行set JAVA_HOMED:\jdk-17這樣只影響這個 Tomcat 實例不動全局環(huán)境變量多個 Tomcat 并存時特別有用。注意JAVA_HOME指的是 JDK 安裝目錄含bin/java的那一層不是 JRE 目錄也不是bin目錄本身。這一條看著簡單但我見過太多人在這里多寫一層或者少寫一層。5.2 部署與映射類報錯404 與歡迎頁404 的成因太多我一般按這個順序排查先看logs/catalina.out里有沒有應(yīng)用的啟動日志如果連 Deployment of web application archive 這種字樣的日志都沒有說明 war 包根本沒被掃描到檢查webapps目錄權(quán)限和conf/server.xml里的appBase配置如果有啟動日志但訪問還是 404那大概率是 context path 對不上你在server.xml里配了Context path/myapp瀏覽器就得訪問/myapp/xxx少一段多一段都不行。歡迎頁配置也是個高頻坑。web.xml里的welcome-file-list決定了訪問目錄路徑時默認返回哪個文件。如果列表里配了index.html但目錄下只有index.jspTomcat 不會自動幫你找直接 404。而且歡迎頁的查找是順序匹配的列表越靠前的優(yōu)先級越高把index.html放在index.jsp前面會導(dǎo)致 JSP 永遠不生效——明明文件在就是不顯示。打包方式也影響結(jié)果。war 包放進去 Tomcat 會自動解壓但如果你同時保留了舊的解壓目錄Tomcat 可能用的是舊目錄里的內(nèi)容。我踩過的坑是更新 war 包忘了刪對應(yīng)的解壓目錄改了半天代碼發(fā)現(xiàn)沒生效最后發(fā)現(xiàn)跑的是老目錄。穩(wěn)妥做法是停掉服務(wù)、刪掉 war 包和解壓目錄、再放新包。5.3 類加載與依賴類報錯java.lang.ClassNotFoundException和NoClassDefFoundError看著像含義不同。前者是主動加載時沒找到通常是Class.forName或者容器掃描時拋的后者是編譯期存在、運行期找不到常常意味著類在加載過程中失敗了比如靜態(tài)代碼塊拋了異常或者類被兩個不同的加載器加載了。排查的第一個動作是確認 jar 的位置。項目依賴必須是WEB-INF/lib下的 jar或者WEB-INF/classes下的 class 文件放在 Tomcat 的lib目錄里雖然也能用但那是容器級別的類加載器多個應(yīng)用會互相干擾強烈不建議。第二個動作是看有沒有版本沖突。兩個不同版本的同一個包同時出現(xiàn)在WEB-INF/lib里Tomcat 按文件名排序加載先加載的生效行為就變得不可預(yù)期。我整理過一個快速判斷表現(xiàn)象大概率原因處理方式啟動時立刻報 CNFEjar 缺失或路徑不對檢查WEB-INF/lib運行到某個功能才報反射加載的類名拼寫錯誤核對全限定類名報 NoClassDefFoundError 且?guī)?Cause靜態(tài)初始化失敗看異常鏈最底層類型轉(zhuǎn)換失敗 ClassCastException同類被雙加載器加載統(tǒng)一依賴來源5.4 資源與連接類報錯連接池拿不到連接熱詞里那條could not obtain connection to query metadata : cannot create我特別想展開講因為它太典型了。這個報錯通常出現(xiàn)在應(yīng)用啟動階段連接池Druid、HikariCP、DBCP 都可能嘗試建立第一條物理連接時失敗了。報錯信息本身只說了拿不到連接真正的原因藏在異常鏈里往往是下面幾種之一。其一是 JDBC 驅(qū)動和數(shù)據(jù)庫版本不匹配。比如數(shù)據(jù)庫是較新的版本驅(qū)動還是老版本握手階段就會失敗現(xiàn)象是cannot create后面跟著一個具體的握手異常。解決方式很直接換成匹配版本的驅(qū)動并且確認驅(qū)動 jar 在WEB-INF/lib下而不是只在你本地 IDEA 的庫路徑里。其二是應(yīng)用啟動時數(shù)據(jù)庫還沒準備好。容器編排場景下這很常見數(shù)據(jù)庫容器起來比應(yīng)用慢幾秒。連接池初始化就失敗整個應(yīng)用啟動中斷。我的做法是把initialSize設(shè)成 0 或者很小的值讓它懶加載同時配好connectionTimeout和失敗重試別讓啟動階段的一次失敗把應(yīng)用整個拖死。其三是賬號權(quán)限或者網(wǎng)絡(luò)不通這類用telnet或者數(shù)據(jù)庫客戶端從 Tomcat 所在機器上連一次就能確認。配好之后建議加一條validationQuery讓連接池在借出連接前做一次探活。這一步帶來的開銷很小但能擋住大量連接已被服務(wù)端關(guān)閉的詭異報錯。# Druid 參考配置 initialSize0 minIdle1 maxActive20 validationQuerySELECT 1 testWhileIdletrue connectionTimeout3000提示maxActive不要拍腦袋設(shè)大。數(shù)據(jù)庫端有最大連接數(shù)限制應(yīng)用側(cè)配得再大超過數(shù)據(jù)庫限制照樣連不上而且會掩蓋真正的慢 SQL 問題。5.5 編碼、SSL 與安全加固相關(guān)報錯中文亂碼分三種位置處理方式完全不同。請求參數(shù)亂碼看Connector上的URIEncodingTomcat 8 以后默認就是 UTF-8如果被顯式改成了ISO-8859-1中文參數(shù)就會亂同時確認conf/server.xml里 Connector 的useBodyEncodingForURI設(shè)置它決定 POST body 的編碼是否也應(yīng)用到 URI 上。響應(yīng)亂碼看Content-Type里的charset或者response.setCharacterEncoding??刂婆_和日志亂碼看 JVM 啟動參數(shù)里的-Dfile.encodingUTF-8以及conf/logging.properties的編碼設(shè)置。三處都對上中文才不會到處出問題。SSL 相關(guān)的報錯集中在握手階段。java.io.IOException: keystore password was incorrect是最直白的——密碼錯了。更隱蔽的是unable to find valid certification path to requested target這出現(xiàn)在雙向認證場景服務(wù)端要求客戶端提供證書而客戶端沒有或者證書鏈不完整。雙向認證需要服務(wù)端配keystoreFile和keystorePass同時配truststoreFile和truststorePass來校驗客戶端證書還要把clientAuth設(shè)成true。少配任何一個握手都會失敗而且不同配置錯誤對應(yīng)的報錯信息差別很大建議一項一項對照著配。如果項目對加密算法有特定合規(guī)要求通常需要引入對應(yīng)的加密套件實現(xiàn)并調(diào)整 Connector 的協(xié)議配置這部分建議照著中間件廠商的官方文檔逐項核對不要憑經(jīng)驗猜。關(guān)于安全加固有三件事值得每年做一次把 Tomcat 升到當前維護的最新穩(wěn)定版刪掉webapps下所有用不到的默認應(yīng)用尤其是管理端把管理端口的訪問來源限制在可信網(wǎng)段。這些動作成本極低但能擋掉絕大多數(shù)自動化掃描。6. 調(diào)優(yōu)要點與容器替換的取舍6.1 Connector 與 JVM 的關(guān)鍵參數(shù)Connector上真正需要關(guān)注的參數(shù)不多我列幾個最常動的參數(shù)作用參考值maxThreads處理請求的最大線程數(shù)200 起步按壓測調(diào)acceptCount隊列滿后的等待隊列長度100maxConnections允許的最大連接數(shù)10000connectionTimeout連接超時毫秒20000compression是否壓縮響應(yīng)on僅對小文本有效調(diào)maxThreads的正確方式是壓測不是抄別人的數(shù)字。線程數(shù)加大的收益是有上限的因為下游的數(shù)據(jù)庫連接池、外部接口都有承載極限。我見過把maxThreads調(diào)到 2000 結(jié)果數(shù)據(jù)庫連接池只有 50最后瓶口全卡在數(shù)據(jù)庫上線程全在等連接內(nèi)存反而被線程棧撐爆。JVM 層面堆大小建議-Xms和-Xmx設(shè)成一樣避免運行期擴容帶來的停頓。元空間設(shè)個上限-XX:MetaspaceSize256m -XX:MaxMetaspaceSize512m防止動態(tài)生成類太多把內(nèi)存吃光。垃圾回收器在 JDK 8 上可以用 G1JDK 17 上直接用默認的就行沒必要折騰。部署時在setenv.shLinux或者setenv.batWindows里配置這些參數(shù)這樣升級 Tomcat 的時候參數(shù)不會丟。6.2 內(nèi)嵌容器的替換思路現(xiàn)在越來越多項目用 Spring Boot 內(nèi)嵌容器不再單獨部署 war。內(nèi)嵌場景下?lián)Q容器比傳統(tǒng)部署簡單得多本質(zhì)上就是換一個 starter 依賴。比如要換成 Undertow先在 web starter 里排掉 Tomcat再引 Undertowdependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-web/artifactId exclusions exclusion groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-tomcat/artifactId /exclusion /exclusions /dependency dependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-undertow/artifactId /dependency換 Jetty 也是同樣的套路把 artifactId 換成spring-boot-starter-jetty即可。需要注意的坑有兩個一是有些代碼直接依賴了 Tomcat 特有的類比如org.apache.catalina.*下的工具類換容器后編譯不過得先清理掉二是配置屬性的前綴會變從server.tomcat.*變成server.undertow.*參數(shù)名也不一樣遷移時要逐項對應(yīng)。如果項目有使用其他中間件產(chǎn)品的需求替換思路類似——多數(shù)商業(yè)中間件都會提供適配 Spring Boot 的 starter 或者遷移文檔關(guān)鍵是先確認它對 Servlet 規(guī)范的兼容程度以及是否有用到的 Tomcat 私有 API。這類替換我建議先在測試環(huán)境完整跑一遍回歸不要上來就改生產(chǎn)因為容器差異往往體現(xiàn)在一些邊緣行為上比如 Cookie 的默認屬性、URL 編碼的處理細節(jié)、靜態(tài)資源的緩存頭這些平時不顯眼的地方最容易出事。6.3 我踩過的幾個坑第一個是 IDEA 里配置 Tomcat 運行配置。不同版本的菜單路徑會變但核心永遠是三件事指定 JDK、指定服務(wù)器安裝目錄、在 Deployment 里添加 Artifact。如果啟動后報 404八成是 Artifact 的上下文路徑配的是/還是/項目名沒對上去看運行配置里的 Application context 那一欄。另外新版 IDEA 里有些配置項挪到了Settings的Build Tools下找不到的時候直接在設(shè)置里搜 Tomcat 比翻菜單快。第二個是熱部署的錯覺。改了 Java 代碼點重新部署有時候改動沒生效原因是 classes 沒有重新編譯或者輸出目錄指向了舊的路徑。最穩(wěn)的做法是 Build 之后再 Run不要依賴 IDE 的自動編譯。第三個是日志級別。排查問題時把conf/logging.properties里的級別從INFO調(diào)到FINE能看到大量內(nèi)部狀態(tài)信息比如類加載過程、URL 匹配過程。問題解決后記得調(diào)回來否則日志文件會迅速膨脹磁盤被寫滿又是另一個故障。我個人在實際操作中的體會是Tomcat 的問題十有八九不是 Tomcat 本身的問題而是環(huán)境、依賴、配置這三者之間的錯位。所以排查時別急著改配置先把報錯鏈條完整讀一遍找到它落在哪一層再動手。手寫一遍迷你容器之后我對這條鏈路的感知明顯變強了——現(xiàn)在看到報錯第一反應(yīng)不再是搜關(guān)鍵詞而是先問自己這是網(wǎng)絡(luò)層、協(xié)議層還是容器層的事
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
高清不卡一区| 亚洲无码11| www.minyis.com【JT】币址百万U预算可预付QQ2101460746 | 色色色激情网| 丁香五月成人社区| 久久久久婷婷| 《》【无码】想被搞到爽AV应募而来的超M素人 西纯子 10musume-011723-01 | 99热日本精品| 激情五月丁香五月| 婷婷五月激情欧美大胆视频| 伊人五月婷婷| 99热99网| 激情丁香五月| 91操黄| 久久精品婷婷| 色五月综合在线| 色色色免费视频| 中文字幕性爱视频| 五月婷中文娱乐综合| 五月成人网站| 天天天天天天操| 久久ER视频com| 日韩AV片| 欧美色宗和激情| 色五月综合| sewuyuejiqingwang| 大香蕉AV在线| 色色综合日韩| 26uuu国产精品| 九九熱最新視頻| 性热视频99精品| 91狠狠综合久久久久久| 深爱激情五月婷婷| 激情小说五月天| 91精品综合久久久久久五月丁香 | 婷婷激情伍月网| 性色综合网| 碰碰碰97国产| 亚洲视频在线观看区| 激情网婷婷五月天| 天天婷婷色六月| 色婷婷五月婷婷五月婷婷五月| 丁香五月 无码| 丁香五月婷婷色情综合| 99热这里只有精品免费| 五月婷婷激情| h在线看免费版在线看| 六月丁香基地| 96五月丁香熟女| 五月婷婷黄色视频| 婷婷五月天久久| 青青草原福利在线| 婷婷激情五月综合在线视频| 久久99精品久久只有精品| 五月婷婷在线视频免费观看| 成人小说 五月天 婷婷| 色丁香婷婷| 久久在线人妻| 九九热精品99| 精品人妻伦九区久久AAA片| 婷婷五月天在线观看第二页| 狼人婷婷综合| 丁香五月婷婷色| 激情婷婷丁香| 高清无码网址| 99色视| 免费无码毛片一区二区A片| 无码激情| www婷婷| 另类激情五月在线视频欧美| 99综合视频一体| 日本成人噜噜| 99九九精品| 丁香 婷婷 激情 综合 五月 | 五月色网| 久久色六月| 成片免费播放| 综合久| 大香蕉AV在线| 欧美成人精品A片免费一区99| www.主妇. com| 小色小蛇伊人婷婷色香五月| 99rewww| 丁香六月婷婷综合网| 97色色色视屏| 天天干天天操天天上| 九九这里有精品视频| 婷婷在线播放av| 激情五月婷婷啪啪| 99综合自拍| 亚洲综合另类| 成人中文网| 人妻丰满精品一区二区A片| 激情www| wwwss在线观看| 婷婷色婷婷| 国产精产国品一二三在观看| 婷婷五月丁香成人网| a性生活久久无| 亚洲色图五月丁香| 五月开心婷婷中文字幕| 五月天久久www| 第五色色色婷婷| 人人操99| 亚洲丁香五冃97色| 热九九在线| 就去涩涩丁香五月天| 第一区久久网站| 97久久精品| 国产成人精品亚洲线观看| 9热久久在线| 国产探花一片区| 激情啪啪五月天| 骚五月婷婷| 超碰超碰在线| 这里只有九九精品| 国产99热| 午夜日日| 伊人AV五月婷| 99热精品中文字幕| 99精品综合在线| 99久久精品国产色欲| 色播五月丁香综合| 天天拍天天操| 99热在线网站| 日韩操| 色色亚洲| 欧美性猛交AAAA片黑人 | 九九婷婷激情综合网| 亚洲欧美综合7777色婷婷| 综合五月天亚洲婷婷| 99无码黄色视频| 97碰超级人人看| 奇米色大香蕉| 精品一区二区三区木瓜| 国产做A爰片毛片A片美国| 91黄址| 狠狠草在线观看| 99久热| www,com,五月色色| 婷婷五月天日本无码| 伊人www22综合色| 五月婷婷激情综合| 五月天久久综合| 丁香五月激情月| 国产三级片91| 精品操逼一区二区| 五月丁香 啪啪啪| 黄色三级日本| 中文字幕五月久久婷| 激情五月综合网最新| 丁香婷婷综合激情五月色| 青青热视频| 日韩99视频| 91嫩草久久| 5月丁香综合网| 激情五月色婷婷| 人人性久久| 亭亭五月丁香五月天激情| 五月天婷婷激情| 欧美色色干| 九九在线精点品| 国产精产国品一二三在观看| 一本伊人色婷| 91紱請| 狠狠狠激情网| 狠狠色婷婷综合开心影视| 婷婷爱婷婷| 色99网| 色噜噜伊人| 99热综合| 永久的网站AAAA | 激情色色色| 99在线观看| 色婷婷久久9.com| 丁香五月天欧美| 99精品在线观看| 香蕉婷婷色五月| 六月丁香五月激情网| 五月天婷婷无码| 婷婷久久婷婷| 另类激情五月天| 色九四色| 五月婷婷六月丁香综合| 婷婷色影音天| 99免费热视频在线| Caoub青青超碰 | 综合久久五| 91丨九色熟女丨首页| 99思思| 色色色热| 激情五月图| 1024日韩| 无码一区二区日韩| 人碰人人人玩91| 永久的网站AAAA| 婷婷玖玖五月天| 丁香六月成人| 99视频超级精品| 在线色色| 亚洲激情综合网| 五月丁香六月天| 91n啪啪| 天天干狠狠| 99人人精品| 色综合久久88色综合天天看| 亚洲色激婷| 欧美三级巜人妻互换| 天堂婷婷五月在线| 欧美熟妇一区二区三区| 天天摸天天做天天爱天天爽| 狠狠爱五月婷婷| 香蕉曰比| 99热最新| 五月天播播综合| 国产精品美女久久久久AV超清| 久久婷婷五月综合啪| 欧类av怡春院| 婷婷激情九月| 欧美激情丁香五月| 中文字幕日产A片在线看| 狠狠干思思热| 久久狠婷婷| 久久99网站| 啪啪干伊人婷婷| 奇米影视777在线_在线观看午夜_h小视频在线观看_岛国大片 | www.五月婷婷久久.com| 男男野外做爰全过程69| 播五月开心婷婷欧美综合| 超碰A V在线| 玖玖99免费视频| 综合色影| 色站9/| 99热精品在线| 99热最新地址在线| 久久精品99国产精品日本| 另类五月激情| 日韩 中文 欧美| 伊人激情AV一区二区三区| 五月丁香婷婷久久| 欲求不满的人妻| 成人五月天丁香| 亚洲av网站| 五月婷在线| 五月天激情综合网俺也去| 激情都市另类| 丁香五月婷婷骚视屏| 免费AV在线网址| 小视频久久久aaa| 影音先锋综合网| 日日操夜夜撸| 五月丁香亭亭操逼| 色播丁香| 精品一二三区久久AAA片| 噜噜色噜噜网| 久久五月天网| 九久久婷婷| 99爱在线观看视频| 91九色欧美| 狠狠色婷婷7777久| 激情噜噜噜| 丁香六月激情综合| 色欲AVV| 五月丁香啪啪网| 婷婷五月丁香久久| 蜜臀av粉嫩av懂色av| 丁香综合| 青柠影视免费高清电视剧| 激情五月色婷婷| 99成人网一区| 91色在线/日韩| 伊人激情| 国产无人区大片| 开心五月婷婷在线| 激情五月第四色| 久婷婷色| 色五月婷婷丁香五月| 开心激情播播五月天| 99re热99| 欲求不满的人妻| 婷婷五月色| 久热久| 五月丁香六月婷婷亚洲| 婷婷亚洲影院| 99婷婷五月天激情| 五月丁香婷婷啪啪网| 亚洲AV在线免费看| 五月婷婷丁香六月| 开心激情婷婷| 久色五月| 五月婷婷丁香在线| 五月婷婷综合潮喷| 婷婷干五月综合在线播放| 亚洲十月婷婷综合| 新99色色色色色色| 玖玖爱资源站| 五月情涩综合婷婷| 五月婷婷导航| 大香蕉99| AV成人在线播放| 久艹久| 国产欧美精品AAAAAA片| 国产露脸150部国语对白| 成人网站免费在线播放| 99热这里只有精品16| 激情深爱综合| 九久热| 婷婷中文字幕网站| 国产精品国产成人国产三级| 成人网在线观看视频| 韩国真做片在线观看| 五月丁香成人网| 久久精彩免费视频| 婷婷六月色| 开心激情站| 666555。COm毛片| 五月四色激情| 婷婷丁香18| 色啪久 | 操人久久| 婷婷五月天AV网| 国内久久亭亭| 九九热99久久99| 五月婷丁香久久综合| 久久国产高潮白浆免费观看99| 欧美电影在线观看| 99在线精品免费视频| 97久久人人人干| 国产超碰在线| 日本啪啪天堂| 五月天色图| 亚洲色图五月丁香| 激情五月婷婷| 亚洲A片成人无码久久精品青桔 | 亚洲超级碰| av在线资源| www.五月天色色色| 狠狠爱深色婷婷综合| 日日操日日撸| 婷婷操无码| 五月天社区婷婷| 九九色网专区| 亚洲啪啪啪啪| 26uuu欧美日韩| 久久久久9999| 五月天婷婷色紫薇阁| 密黄站| 日韩小视频在线99| 九九热思思| 五月天激情美女久久| 久久性爱视频这里只有精品| 色色五月婷婷| 校花娇喘呻吟校长陈若雪视频| 成人小说色图婷婷五月| 天天干,天天舔| 丁香五月 六月婷婷首页| 激情九九这里只有精品| 天天碰夜夜爽| 99精品无码| 久碰视频| 99超级超级超级碰| 九九精品综合| 色激情五月| 久久婷婷五月天| 97超碰免费超级在线观看| 欧美日韩国产一二区| 亚洲啪啪精品| 内射丰满人妻| 日韩人妻无码专区| 日韩另类在线观看| 色色色综合视频| 婷婷丁香18| 九九香蕉网| 亚洲情综合五月天| 99色免费在线观看| 丁香六月婷婷综合麻豆| 色色五月丁香| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 色久在| 激情九九这里只有精品| 九九aV| 五月丁香六月停停停| 老妇操B| 99热r| 色综合开心五月深爱五月| 婷婷丁香五月亚洲综合网在线视频观看| 色色色色色色色色色色色色色色,网站| 国产亚洲色婷婷久久99精品91| 日噜噜色| 色色综合色视频| 思思精品久久艹| 99热.com| www.一起草av| 久久 视频这里只有精总| 成人五月天丁香婷| 婷婷伊人綜合| 五月婷婷啪啪网| 色五月五月婷婷| 成人婷婷色综合| 六月丁香婷婷综合狠狠爱夜夜爱| 五月丁香色五月| 色99网| 91九色超碰正在播放| 高潮毛片遮挡费高一百度| 色偷偷色婷婷| 日日操夜夜操中国无码| 天天五月情| 综合色五月| 激情五月婷婷老师| 天天日天天做天天舔| 俺也去综合| 日本欧美成人片AAAA| 久久草大香蕉| 97人人射| 超碰在线综合| 欧美日韩aaaa| 91大神在线免费看视频全集男男一起操| 婷婷五月天国产精品| 亚洲另类视频| 色综合女人99| 五月婷婷欲色| 丁香婷婷五月综合欧美另类| 久播影院免费观看电视剧大全最新网| 久热精彩视频98| 久久这里有精品在线观看| 久久小说网| 色综合久久久久久久久五月| 狠狠色综合无线观看| 天天爽爽日日做做| 国产精品扒开腿做爽爽爽A片唱戏 亚洲爆乳无码精品AAA片蜜桃 | 激情精品久久| 婷婷五月天小说| av网站免费在线| Av狠狠色丁香婷| 碰97久久| 色欲婷婷五月天丁香| 九九热在线观看视频网站| 国产毛片欧美毛片久久久| 美妞av| 超碰在线看| 大香蕉婷婷五月| 婷婷丁香97| 九九色影院| 色色色色色网| 在线婷婷| 亚洲欧美婷婷五月色综合| 久久色婷婷| 九月丁香亭亭| 67194成I人在线观看线路1| caop在线视频| 五月丁香啪啪啪综合网| 99视频内射三四| 丁香五月人妻熟女| 婷婷五月天AV在| 人妻精品一区二区三区| 国产a视频| 日韩精品二三区| 日本人妻操| 99热精品中文字幕| www.激情| 亚洲综合激情五月久久| 安息电影在线观看完整版| 男人先锋久久| 91无码视频| 五月丁香色婷婷色| 久久综合爱| 狠狠色官网| 婷婷久久爱| 99er热精品视频| 91丨九色丨老农村| 久久九九综合| 五月天婷婷激情| 色播五月丁香| 免费视频WWW在线观看网站| 丁香五月激情啪啪| 综合AV在线| 九色亚洲| 深爱综合网| 美女美女美女三级色天天天天天| 激情五月狠狠喔| 丁香成人五月天| 丁香 亚洲 久久| 99成人| 天天操天天操综合| 99网址在线看| 内射 无码 伊人| 婷婷五月电影院| 五月天玖玖狠狠色色| 色欲五月丁香| 五月婷婷六月丁香| 丁香五月激情啪啪| 婷婷五月天成人动漫| 中文字幕按摩做爰| 丁香五月婷婷在线观看| 五月色情婷婷开心五月色情| 五月丁香婷婷综合视频| 久久色大香蕉| 99九九精品| 热的国产,热的综合,热的有码 | 五月丁香婷爱在线| 九色91视频| 91se视频| 香蕉AV777XXX色综合一区| 亭亭五月天黑人2014| 99ri国产精品| 日韩AAAAA| 日日操夜夜爽| 六月激情婷婷色| 91亚洲视频| 五月天激情图片| 久久与婷婷| 五月婷婷色白丝| 无人区码一码二码三码医生系列| 久久综合婷婷| 五月丁香啪啪综合| 99色热视频| 99久久综合| 99视频精品| 在线伦子99热| 日本不卡一区二区三区| www.日韩国产| 99爱免费视频| 丁香婷婷啪啪啪| 9久热免费视频99| 欧美日韩精品人妻狠狠躁免费视频| 天天草天天摸| 色婷婷五月中文字幕在线dvd| 日本色频| a网站免费观看| 中文字幕人妻一区二区| 亚洲成人AV电影在线| 久久性视频| 中文字幕在线免费观看视频| 99久视频| 99热偷拍| 欧美婷婷五月丁香| 婷婷六月激情| 噜噜在线| 丰满少妇猛烈A片免费看观看| 人人操97| 精品五月天| 欧美精品熟女一区二区| 五月丁香婷婷AV天堂| 色婷五月婷婷| 99热青青草| 热热99爱爱| 一操久久| 日韩av在线电影| 亚洲日比视频| 人人草碰| 99re资源在线视频导航| 狠狠色婷婷7777久综合| 精品9l九九九九九77777| 婷婷伊人| 天天操比比| 综合网亚洲| 夜夜久久综合网| 国产成人亚洲综合A∨婷婷| 99色精品| 欧美97色| 久久网日本| 久久激情综合| 91狠狠综合久久久| 一本大道熟女人妻中文字幕在线 | www.五月天婷婷| 综激情网| 欧美日韩123| 婷婷的99视频网站| 亚洲婷婷五月天| 五月婷在线| 婷婷视频在线| 丁香五月激情综合| 丁香婷婷性爱| 九色自拍| 欧美顶级少妇做爰HD| 色婷婷很很丝袜| 99热久久这里只有精品| 9 1在线视频| .comwww在线观看免费操| 亚洲春色奇米影视| 亚洲视频综合网| 成熟妇人A片免费看网站| 99热精品免费| 久草婷婷网 | 99色在线免费观看视频| 激情九九九九| www.97干视频| 激情五月丁香综合蜜桃| 久久久区区一久久久久久| 久久在线大香蕉| 国产婷婷综合| 日韩操人| 久久综合66| www.婷婷.com| 色五月xxx| 99热久只有| 亚洲综合热| 操骚货在线| 欧美色频| 美国少妇性做爰| 色黄啪啪| 九色91视频| 操操啪| 五月天免费色| 天天做天天爱天天玩夜夜爽| 久久婷婷五月综合| 精品一二三区久久AAA片| 丁香五月天亚洲综合| www.99视频| 久久婷婷五月天综合| 色婷婷亚洲在线| 九九99一区| 狠狠色成人影片| 女人高潮内射99精品| 婷婷激情五月视频| 亚洲无码另类| 五月婷高清视频| 99国产小视频| 久久婷婷五月| 99在线看片| 国产亚洲网站在线| 夜夜骑操AV| 在线中文av| 欧美大肥婆大肥BBBBB| 久久99精品日本| 婷婷丁香69精华| 99这里只有精品在线观看| caop在线| 九九爱精品网站| 五月天激情综合网| 男人天堂AV在线一区二区| 五月丁香天天| 五月丁香婷婷综合网| 婷婷色综合网日韩国产| 翔田千里 50岁 无码| www夜夜操com| 婷婷六月综合激情| 91久久精品视频| 激情五月六月丁香| 婷婷D区| 99碰| 99热这里只有精品9| 五月天激情小说网| www.五月婷婷| 99小视频网站| 六月婷婷毛片| 国精产品久久| 九九激情| 伊九九三级区| 色五月婷婷在线观看| 另类激情中文| 亚州婷婷五月激情综合| 综合狠狠五月婷婷| 欧美叉叉叉BBB网站| 欧美激情五月天婷婷| www.久久久久| 在线婷婷| 婷婷五月天天天| 色色婷婷综合| 精久久色| 亲子乱AV-区二区三区| 久热这里只有精品视频6| 午夜爱爱网站| av九九| 26UUU欧美| 丁香天堂夜| 婷婷激情小说| 久热69| 丁香五月人妻| 99在线视频网址在线观看| 嫩草AV久久伊人妇女超级A| 开心五月婷婷激情| 俺来也综合网精品一区| 国产精品18久久久| 五月婷婷干| 久久五月婷婷综合网| 操91| 伊人五月婷婷| 久草九九| 激情综合啪啪| 五月天婷婷綜合院| av人人干| 色综合大香蕉| 久操97| 免费操超碰| www.26uuu.com亚洲电影| 超91热| 色五月婷婷久久大| 9久热精品在线视频| 亚洲精品性色| 日韩五月婷婷| 天天干狠狠| 99热啪啪| 五月婷婷婷| 激情综合区| 成人一级片| 激情丁香五月天综合| 丁香五月播播| 色天天综合色| 91男人操女人视频| 中文aV网| 综合久久久婷| 色色操| 激情com| 亚洲岛国电影| 日本久久性| 久久狠狠色| 中国女人做爰A片| 五月丁香六月激情综合啪啪| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 五月婷婷无码专区| 久久综合色五月| 开心激情婷婷| 天天做天天爱天天要| 国产在线黄色| 九九99久久| 一本久久亚洲五月婷婷| 丁香五月天堂网AV| 色无码| 3p日韩网站视频| 九九久久精品國產| 激情丁香五月婷婷| 色播五月婷婷| 91精品丝袜久久久久久| 天天操天天操天天操天天操天天操| 99 r热| 日韩AV无码影片| 五月婷久久在线| 国产成人综合在线| 无码99| 久久偷拍综合五月天| 综合www色| 五月天激情国产综合婷婷婷| 激情五月婷婷五月| 狠狠干2007| 色yeye色综合| 色综合综合色| 可以观看的AV| 棕合影院色色| 伊人大香蕉在线视频| 婷婷色网站| 久热精品视频| 色色色视频| 久re在线| 色九月婷婷| 思思热99热| 六月婷婷日| 99热久草| 日本精品人妻无码77777| 97碰| 开心深爱激情网| 婷婷五月天首页激情| 激情操逼婷婷| 超碰不卡在线| 婷婷久久亚洲| 思思99热热热99| 婷婷五月天大香蕉| 在线观看日韩12345区| 久久色婷婷| 五月婷婷成人| 99热这只有| 99热精品在线播放| 九九激情综合| 五月婷婷深深爱| 影音先锋综合网| 九九在线精点品| a在线观看| 色人妻五月| 桃色伊人在线| 日韩综合久| 丁香激情五月少妇| 超pen个人视频97| 亚洲天堂大香蕉| 天天 日综合| 丁香五月日韩| 久久午夜丁香| 欧美电影在线播放| 色老久久| 婷婷五月天综合中文| 国产亚洲色婷婷99精品| 亚洲1区| 墨西哥毛片内射精| 99色色| 91狠狠色丁香婷婷综合久久| 很很干天天干| 五月天成人手机在线视频| 五月丁香999| 丁香五月六月久久综合| 五月天色色激情综合| 无码激情| 久久丁香婷婷五月| 中文字幕在线人妻| 免费无码毛片一区二区A片| 色婷婷丁香五月| 夜精品无码A片一区二区蜜桃| 九九视频在线观看视频6| 九九亚洲视频| 色五月激情五月| 99热这里只有精品55| 丁香五月偷拍| 97丁香五月| 九月丁香| 欧美色色色色色色色| 婷婷久久大香蕉| 婷婷的色色五月天| 婷婷综合在线| 大香蕉婷婷五月| 五月婷婷色五月| 丁香婷婷五月综合| 少妇人妻人伦A片| 美女激情综合| 99re这里只有| 99无吗| 超碰成人电影| 亚洲激情网| 丁香五月成人社区| 色婷婷九月| 99视频自拍| 99久在线视频| 99精品久久| 99热综合网| 久久激情网| W色综合| 91色性感五月婷婷丁香| 91久草五月天婷婷| 五月六月播婷婷| 插少妇综合网| 婷婷成人丁香色情基地30 | 五月天操逼网| 激情六月色| 99精品视频在线观看| 亚洲国产精品VA在线看黑人| 免费无码毛片一区二区A片| 嫩草免费视频| 91天天操天天干天天射| 五月婷婷av| AV美美午夜| 国产综合激情五月久久| pacopacomama 070722_670 素人奥様初撮りドキュメント 103 大久保純子 | 天天爱天天做天天舔| 五月花婷婷丁香| 久青操| 丁香六月婷婷色播| 少妇2做爰HD韩国电影| 久热久re| 色色色色色五月| 99久久玖玖| 91 九色 熟女| 操操操av| 六月丁香婷婷综合在线| 欧洲色色| 91在线视频综合| WWW免费视频碰碰碰碰| 另类 在线| 亚洲成人在线播放| 丁香婷婷深情五月亚洲| 五月丁香婷婷导航视频| 9精品在线| 99色综合| 色99久草在线| 五月丁香人妻| 九月激情网| 亚洲mm色| 欧美97色| 亚洲殴洲精品Av在线| 婷婷五月激情视频网| 九九九九九无码| 丁香五月天啪啪激情综合网| 丁香六月婷婷色XXXXX| 亚洲婷婷91丁香| 久久五月婷综合网| 丁香六月亚洲| 天天搡日日搡aaaaⅩ| 女人高潮内射99精品| 久草五月丁香婷婷综合| 影音先锋91| 伊人久久激情图区五月| 天天插天天插天天插天天插| 少妇AB又爽又紧无码网站| 婷婷五月丁香91| 五月天激日本色情在线| 五月激情婷婷开心| 亚洲情欲| 97av在线视频| 久久久91精品| 亚洲成人免费电影| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 婷婷五月天av小说| 午夜色色色极品视频| 天天日天天舔| 天啪色| 战争与艾拉电影免费观看| pacopacomama 070722_670 素人奥様初撮りドキュメント 103 大久保純子 | 日本色天堂| 99ri在线视频| 91干99| 久久只这里有精品| 亚洲秘 无码一区二区三区妃光/1| 91/九色黑人| 狠狠狠狠狠狠狠狠草| 99这里| 五月Huangsewang| 我爱宗和色| h在线看免费版在线看| 色吊丝av中文字幕| 这里只有精品视频99| 玖玖资源在线视频| 一月婷婷色色| 日撸夜撸日操| 久草 tingting| 婷婷激情伍月网| 高清不卡一区| 开心五月婷婷综合在线精品素人| 五月情四婷婷| 成人精品在线观看| 久久久99婷婷久久久久久| 天天干电影| 精品亚洲国产成AV人片传媒| 天天色综合色色色色色。| 操碰97| 丁香六月激情四射| 五月狠狠| 91窝窝| 能直接看的av网站| www.玖玖婷婷在线| 亚洲精品色| 久久丁香综合香蕉| 久久九九大香蕉电院| 伊人婷婷五月天| 五月丁香久久综合色| 五月婷婷乱| 一本婷婷丁香久久| 《》【无码】想被搞到爽AV应募而来的超M素人 西纯子 10musume-011723-01 | 激情网婷婷婷| 99精品在线观看| 9久久婷婷国产综合精品性色| 亭亭五月色男人| 9色免费网| 狠狠色大香蕉| 六月丁香婷婷大香蕉| 玖玖资源站蜜臀| 亚洲成人中文字幕| 久久人妻高清中文| 欧美毛卡| 五月天婷婷无码视频| 99热 精品在线| 桔色成人官方网站| 丁香五月婷婷综合激情哟哟哟| 九九无码视屏| 欧美电影在线观看| 淫荡综合网| 久热婷婷在线视频| 热久久66| 五月婷婷影视| 91成人性爱视频| 亚洲在线综合| 欧美性生交XXXXX无码小说| 五月天色网站| 色欲色欲久久宗合网| 激情六月丁| www久| 99九九精品| 在线日韩视频| 亭亭五月色男人| 激情婷婷人妻| 色狠狠综合入口| 天天干,夜夜爽| 九九精品网站| 日韩啪啪视频| 99热精品在线播放| 五月激情偷拍| 五月天激情国产综合婷婷婷就去爱| 91中文狠狠综合| www.夜夜操.com| 伊人五月天综合网| 国产乱妇乱子在线播视频播放网站 | 91精品国产99久久久久久天美| 久久99热这里| 伊人久久大香线蕉亚洲五月天,| 深爱五月日韩| 精品久色| 国产人妻人伦精品一区二区| 婷婷综合网在线| 综合色吧| 丁香五月av| 26uuu精品一区二区| 婷婷五月天日本国产| 97碰碰碰免费公开在线视频| 深爱五月激情| 久月婷婷| 播丁香五月婷婷欧美| 久超超碰| 亚洲性爱99| 欧美久人人| 精品国产AV色一区二区深夜久久| 美国十月色婷婷在线观看| 黄色片精品| 日本熟妇乱妇熟色A片蜜桃| 操操自拍| 79色色免费| 色5月婷婷| 婷婷婷婷婷婷婷婷婷婷丁香| 九九热中文| 人人人操B超碰| 激情五月伊人婷婷| 中文字幕成人网站| 丁香五月天AV| 678五月丁香亚洲综合| 久久五月丁香综合| 99色在线视频| 婷婷色丁香六月| 99精品久久久久| 九九操屄| 少妇性按摩无码中文A片| 97五月天婷婷| 永久免费视频| 9久久狠狠的| 99热成人| 99丁香五月婷| 日韩一级片| 亚洲乱码日产精品BD| 五月花在线观看视频| 丁香六月爱综合| 亚洲色婷婷五月天| 狠狠色色色| 开心五月婷婷激情| 天天操夜夜肏| 五月丁香婷婷无码A∨| 日韩色色色色色| 狠狠噪| 欧美日本va| 天天综合亚洲综合| 婷婷在线五月天观看| 99热乎| 99精品热视频| 亚洲人妻电影| 九九九九九九综合| 精品一区二区三区免费毛片爱| 九九热99热| 亚洲欧美999| 丁香五月六月欧美| 欧美激情综合| 亚洲成Av人片乱码色第1集| 天天爽天天| 亚洲性视频| 亚洲婷婷五月| 久久久久这里只有精品| 思思热精品免费视频| www.av视频xx999.com| 99在线热| 日本一级黄色电影| 五月天婷婷激情四射综合| 91色婷婷综合久久中文字幕二区| 丁香五月天视频| 热99在线| 国产精品久久99| www.av视频xx999.com| 五月婷婷深深的爱| 亚洲激情免费久久| 亚洲丁香婷婷五月天综合色| 色色色色区| 久久婷鲁| 色色99| 涩五月婷婷| 999热这里只有精品| 这里只有精品视频在线| 激情五月婷婷开心网| 99热都是精品| ss视频xx91| 这里只有精品视频看看| 五月综合六月丁| 久久只有精| 91碰碰碰| 天天人人综合| 天天日夜夜高潮| 婷婷丁香成人网址| 婷婷五月天成人综合网| 五月天伊人网| 亚洲色A| 99热这里只有精品一| 婷婷五月天无码熟女| 丁香五月综合福利视频导航| 69热在线| 色五月婷婷大| 丁香五月婷婷手机| 99综合一区| 夜夜夜夜操| 综合激情五月丁香9999久久精| 激情五月综合色| 欧美va国产va| 亚洲va欧洲va国产va不卡| 99热激情| 成人AV免费观看| 婷婷精品免费久久| 中文字幕AV网址| 九九色婷婷| 婷婷激情性爱| 五月丁香亭亭操逼| 在线视频另类| 色色激情| 五月丁香婷婷基地| 少妇搡BBBB搡BBB搡毛茸茸| 婷婷久综合| 精品自拍99| 99色五月| 丁香色色网| 在线观看五月婷婷网| 丁香五月综合在线| 天天日夜夜爽。| 亚洲人妻五月丁香婷婷| 五月婷婷丁香在线视频| 大香蕉伊人99| 最近中文字幕在线中文视频| 色色五月综合| 色五月婷婷1| 99热碰碰| 9色在线| 五月丁香亚洲综合网| 美女激情综合| 国产无套精品一区二区| 色情综合网| 91麻豆国产三级精品福利在线观看 | 婷婷五月天视频| 伊人久久婷| 婷婷色中文字幕| 亚洲成人综合在线| 久久精品一区二区三区四区| 精品久久久中文字幕大豆网推荐理由| 丁香五月婷婷激情完整版| 五月丁香六月婷婷久久肏| site:hcxsz888.com| 日日爱699| 99视频在线播放大全| 任你日视频| 99日热在线视频| 九月丁香欧美综合| 五月天合网| 亚洲激情97五月天| 激情综合婷婷| 色婷婷五月天| 五月丁香婷婷久久| 色综合日日| 丁香五月最新地址| 99亚州综合精品成人网| 亚洲成人无码免费| 亚洲精品操一操、噜一噜、摸一摸、爽| 久久综合丁香五月| 新激情五月天色播| 伊人激情| 丁香六月成人| 久er免费视频| 深爱五月日韩| 国产成人在线精品| 久久伊人大香蕉| 九热精品| 丁香5月综合啪啪| 99热这里| 99精品网| www九月婷婷| 五月天婷婷伊人| 99色热| 久久资源综合| 久9热| AAAA网站| 五月天激情图片| 国内精品免费一区二区2009| 婷婷激情视频| 婷婷丁香色情| 国产成人综合网| 大香蕉AV电影在线| 久久人视频| 婷婷五月四狠狠| 99久久久| 午夜一区| 99久久综合网| 五月婷婷丁香社区| 五月丁香综合激情| WWW·色色色·COM| 9久热这里只有精品| 日韩黄色影院| 99色看这里只有精品| h在线看免费版在线看| 国内9l视频自拍老熟女九色| 综合欧美五月婷婷| 综合网色| 午夜成人片400| WWW.桔色成人.COM入口| www.sezonghe| 色久女| 不卡影院午夜理论片| 内射在线CHINESE| 国产五月天婷婷| 99热天堂| 婷婷五月天免费99| 五月天婷婷导航| 色五月综合激情| 91人人看| 激情五月天网页| 亚洲激情av| 中文字幕在线日亚洲9| 综合久久人妻| 男人天堂AV在线一区二区| 深爱激情网五月天| 男人先锋久久| 99re6热在线精品视频播放速度 | 欧美激情 日韩无码 婷婷 五月天| 亚洲中文av| 超碰色女人| 婷婷四色五月| 亚洲一区二区色图-亚洲精品国产精品乱码-成人AV | 青草激情综合| 99热亚洲精品| 人人草开心五月天| A片试看50分钟做受视频| 伊人五月人妻精品| 欧美日韩一区二区三区四区| 色婷婷a| 五月天色网站| 色色99| www,色婷婷| 亚洲成人影视在线观看| 亚洲成人中文字幕| 五月天激情社区| 综合网色| 色五月av伊人| 成人综合视频网址| 99热久久这里只有精品| 四LLL少妇BBBB槡BBBB| 日本女va| 人妻丰满精品一区二区A片| 五月开心婷婷中文字幕| 欧美三级欧美一级| 外国碰视频网站97| 激情五月婷婷| 六月丁香六月婷婷欧美| 色五月色五天色情网| 色七色九九| 天天操夜夜操| 丁香五月AV在线| 天天插天天插天天插天天插 | 丁香六月婷月91婷月| 免费看欧美成人A片无码| 五月色丁香综合| 嫩草极品| 婷婷涩五月天综合| 伊人久久大香线蕉AV最新午夜| 99色精品| 九九激情视频| 97色天堂| 亚洲欧洲99| 琪琪狠狠干| 79色色色色| 婷婷色基地在线看| 五月天婷婷影院影院观看| 开心久久五月天| 丁香婷婷社区| 五月婷婷激情综合视频| 亚洲色区17| 色婷婷婷婷| 综合色播| 丁香五月瑟瑟| 国产美女视频久| 色婷婷五月六月丁香综合视频| 久久婷婷七月丁香| 日本va欧美va欧美精品88| 婷婷视频网|