在我們?nèi)粘I(yè)務(wù)開發(fā)過程中,或多或少都會用到并發(fā)的功能。那么在用到并發(fā)功能的過程中,就肯定會碰到下面這個問題
并發(fā)線程池到底設(shè)置多大呢?
通常有點年紀(jì)的程序員或許都聽說這樣一個說法 (其中 N 代表 CPU 的個數(shù))
這個說法到底是不是正確的呢?
其實這是極不正確的。那為什么呢?
那么我們到底該怎么設(shè)置線程池大小呢?有沒有一些具體實踐方法來指導(dǎo)大家落地呢?讓我們來深入地了解一下。
一個系統(tǒng)請求數(shù)等于請求的到達(dá)率與平均每個單獨請求花費的時間之乘積
假設(shè)服務(wù)器單核的,對應(yīng)業(yè)務(wù)需要保證請求量(QPS):10 ,真正處理一個請求需要 1 秒,那么服務(wù)器每個時刻都有 10 個請求在處理,即需要 10 個線程
同樣,我們可以使用利特爾法則(Little’s law)來判定線程池大小。我們只需計算請求到達(dá)率和請求處理的平均時間。然后,將上述值放到利特爾法則(Little’s law)就可以算出系統(tǒng)平均請求數(shù)。估算公式如下
*線程池大小 = ((線程 IO time + 線程 CPU time )/線程 CPU time ) CPU數(shù)目**
通過公式,我們了解到需要 3 個具體數(shù)值
Web 服務(wù)容器中,可以通過 Filter 來攔截獲取該請求前后消耗的時間
public class MoniterFilter implements Filter {
private static final Logger logger = LoggerFactory.getLogger(MoniterFilter.class);
@Override
public void doFilter(ServletRequest request, ServletResponse response, FilterChain chain) throws IOException,
ServletException {
long start = System.currentTimeMillis();
HttpServletRequest httpRequest = (HttpServletRequest) request;
HttpServletResponse httpResponse = (HttpServletResponse) response;
String uri = httpRequest.getRequestURI();
String params = getQueryString(httpRequest);
try {
chain.doFilter(httpRequest, httpResponse);
} finally {
long cost = System.currentTimeMillis() - start;
logger.info("access url [{}{}], cost time [{}] ms )", uri, params, cost);
}
private String getQueryString(HttpServletRequest req) {
StringBuilder buffer = new StringBuilder("?");
Enumeration<String> emParams = req.getParameterNames();
try {
while (emParams.hasMoreElements()) {
String sParam = emParams.nextElement();
String sValues = req.getParameter(sParam);
buffer.append(sParam).append("=").append(sValues).append("&");
}
return buffer.substring(0, buffer.length() - 1);
} catch (Exception e) {
logger.error("get post arguments error", buffer.toString());
}
return "";
}
}
CPU 計算時間 = 請求總耗時 - CPU IO time
假設(shè)該請求有一個查詢 DB 的操作,只要知道這個查詢 DB 的耗時(CPU IO time),計算的時間不就出來了嘛,我們看一下怎么才能簡潔,明了的記錄 DB 查詢的耗時。通過(JDK 動態(tài)代理/ CGLIB)的方式添加 AOP 切面,來獲取線程 IO 耗時。代碼如下,請參考
public class DaoInterceptor implements MethodInterceptor {
private static final Logger logger = LoggerFactory.getLogger(DaoInterceptor.class);
@Override
public Object invoke(MethodInvocation invocation) throws Throwable {
StopWatch watch = new StopWatch();
watch.start();
Object result = null;
Throwable t = null;
try {
result = invocation.proceed();
} catch (Throwable e) {
t = e == null ? null : e.getCause();
throw e;
} finally {
watch.stop();
logger.info("({}ms)", watch.getTotalTimeMillis());
}
return result;
}
}
邏輯 CPU 個數(shù) ,設(shè)置線程池大小的時候參考的 CPU 個數(shù)
cat /proc/cpuinfo| grep "processor"| wc -l
合適的配置線程池大小其實很不容易,但是通過上述的公式和具體代碼,我們就能快速、落地的算出這個線程池該設(shè)置的多大。不過最后的最后,我們還是需要通過壓力測試來進(jìn)行微調(diào),只有經(jīng)過壓測測試的檢驗,我們才能最終保證的配置大小是準(zhǔn)確的。
Little's law
另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)scvps.cn,海內(nèi)外云服務(wù)器15元起步,三天無理由+7*72小時售后在線,公司持有idc許可證,提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡單易用、服務(wù)可用性高、性價比高”等特點與優(yōu)勢,專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應(yīng)用場景需求。
分享文章:如何確定線程池大小-創(chuàng)新互聯(lián)
當(dāng)前網(wǎng)址:http://aaarwkj.com/article8/hseip.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供定制開發(fā)、品牌網(wǎng)站設(shè)計、網(wǎng)站營銷、網(wǎng)站改版、營銷型網(wǎng)站建設(shè)、響應(yīng)式網(wǎng)站
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)
猜你還喜歡下面的內(nèi)容