首頁  >  文章  >  Java  >  SpringBoot能同時處理多少請求

SpringBoot能同時處理多少請求

PHPz
PHPz轉載
2023-05-15 15:22:121166瀏覽

正文

我們都知道,SpringBoot預設的內嵌容器是Tomcat,也就是我們的程式其實是運行在Tomcat裡的。所以與其說SpringBoot可以處理多少請求,到不如說Tomcat可以處理多少請求。

關於Tomcat的預設配置,都在spring-configuration-metadata.json檔案中,對應的設定類別則是org.springframework.boot.autoconfigure.web.ServerProperties

SpringBoot能同時處理多少請求

和處理請求數量相關的參數有四個:

SpringBoot能同時處理多少請求

  • server.tomcat.threads.min-spare:最少的工作執行緒數,預設大小是10。此參數相當於長期工,如果並發請求的數量達不到10,就會依序使用這幾個執行緒去處理請求。 server.tomcat.threads.max:最多的工作執行緒數,預設大小是200。此參數相當於臨時工,如果並發請求的數量在10到200之間,就會使用這些臨時工線程進行處理。 server.tomcat.max-connections:最大連線數,預設大小是8192。表示Tomcat可以處理的最大請求數量,超過8192的請求就會被放入到等待佇列。

  • server.tomcat.accept-count:等待佇列的長度,預設大小是100。

舉例說明一下這幾個參數之間的關係:

SpringBoot能同時處理多少請求

如果把Tomcat比喻成飯店的話,那麼一個請求其實就等於一位客人。 min-spare就是廚師(長期工);max是廚師總數(長期工 臨時工);max-connections就是飯店裡的座位數;accept-count是門口小板凳的數量。來的客人優先坐到飯店裡面,然後廚師開始忙活,如果長期工可以乾的完,就讓長期工幹,如果長期工幹不完,就再讓臨時工幹。圖中畫的廚師總共15人,飯店裡有30個座位,也就是說,如果現在來了20個客人,那麼就會有5個人先在飯店裡等著。如果現在來了35個人,飯店坐不下,就會讓5個人先到門口坐一下。如果來了50個人,那麼飯店座位 門口小板凳一共40個,所以就會有10人離開。

也就是說,SpringBoot同時所能處理的最大請求數量是max-connections accept-count,超過該數量的請求直接就會被丟掉。

紙上得來終覺淺,絕知此事要躬行。

上面只是理論結果,現在透過一個實際的小例子來示範一下到底是不是這樣:

創建一個SpringBoot的項目,在application.yml裡配置這幾個參數,因為預設的數量太大,不好測試,所以配小一點:

server:
  tomcat:
    threads:
      # 最少线程数
      min-spare: 10
      # 最多线程数
      max: 15
    # 最大连接数
    max-connections: 30
    # 最大等待数
    accept-count: 10

再來寫一個簡單的介面:

    @GetMapping("/test")
    public Response test1(HttpServletRequest request) throws Exception {
        log.info("ip:{},线程:{}", request.getRemoteAddr(), Thread.currentThread().getName());
        Thread.sleep(500);
        return Response.buildSuccess();
    }

程式碼很簡單,只是印了一下線程名,然後休眠0.5秒,這樣肯定會導致部分請求處理一次性處理不了而進入到等待隊列。

然後我用Apifox建立了一個測試案例,去模擬100個請求:

SpringBoot能同時處理多少請求

觀察測試結果:

SpringBoot能同時處理多少請求

##從結果可以看出,由於設定的

max-connections accept-count 的和是40,所以有60個請求會被丟棄,這和我們的預期是相符的。由於最大執行緒是15,也就是有25個請求會先等待,等前15個處理完了再處理15個,最後在處理10個,也就是將40個請求分成了15,15,10這樣三批進行處理。

SpringBoot能同時處理多少請求

再從控制台的列印日誌可以看到,執行緒的最大編號是15,這也印證了前面的想法。

總結一下:如果並發請求數量低於server.tomcat.threads.max,則會被立即處理,超過的部分會先進行等待,如果數量超過max-connections與accept-count總和,則多餘的部分則會直接丟棄。

延伸:並發問題是如何產生的

到目前為止,就已經搞明白了SpringBoot可以同時處理多少請求的問題。但這裡我還想基於上面的例子再延伸一下,就是為什麼並發場景下會出現一些數值和我們預期的不一樣?

设想有以下场景:厨师们用一个账本记录一共做了多少道菜,每个厨师做完菜都记录一下,每次记录都是将账本上的数字先抄到草稿纸上,计算x+1等于多少,然后将计算的结果写回到账本上。

SpringBoot能同時處理多少請求

Spring容器中的Bean默认是单例的,也就是说,处理请求的Controller、Service实例就只有一份。在并发场景下,将cookSum定义为全局变量,是所有线程共享的,当一个线程读到了cookSum=20,然后计算,写回前另一个线程也读到是20,两个线程都加1后写回,最终cookSum就变成了21,但是实际上应该是22,因为加了两次。

private int cookSum = 0;

@GetMapping("/test")
public Response test1(HttpServletRequest request) throws Exception {
	// 做菜。。。。。。
	cookSum += 1;
    log.info("做了{}道菜", cookSum);
    Thread.sleep(500);
	return Response.buildSuccess();
}

SpringBoot能同時處理多少請求

以上是SpringBoot能同時處理多少請求的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述:
本文轉載於:yisu.com。如有侵權,請聯絡admin@php.cn刪除