在C#中使用HttpWebRequest
發起HTTP請求時,達到最大并發和性能可以從以下幾個方面改進:
1. ServicePointManager設置
ServicePointManager
類是一個靜態類,它提供了用于管理HTTP連接的屬性和方法。為了提升并發性能,你需要調整以下幾個關鍵屬性:
ServicePointManager.DefaultConnectionLimit = 100; // 一個合適的值,例如100
ServicePointManager.Expect100Continue = false;
ServicePointManager.ReusePort = true;
2. 異步編程模型
使用HttpWebRequest
的異步方法,如BeginGetResponse
和EndGetResponse
或者GetResponseAsync
,可以讓你的應用程序在等待HTTP響應時不會阻塞,這對于提高并發性能非常重要。
3. 資源利用和釋放
確保在請求完成后及時釋放HttpWebResponse
對象和其他資源,以避免不必要的資源占用和內存泄漏。
using (HttpWebResponse response = (HttpWebResponse)request.GetResponse()) { // 處理響應 }
4. 并行處理
在.NET中,可以使用Parallel
類或者Task
類來并行發送多個請求。
var tasks = urls.Select(url => Task.Run(() => {
// 使用HttpWebRequest發送請求 })).ToArray(); Task.WaitAll(tasks); // 等待所有請求完成
5. 使用HttpClient
如果可能,考慮使用HttpClient
類來代替HttpWebRequest
。
HttpClient
是一個更現代的HTTP客戶端,它提供了更簡潔的API,更好的異步支持,并且默認就配置了更高的并發連接限制。
using (var client = new HttpClient()) { // 發送請求 }
6. 系統級配置
有時候,操作系統級別的設置也會對HTTP并發性能產生影響。例如,在Windows上,可能需要調整注冊表中的MaxUserPort
和TcpTimedWaitDelay
值來增加可用的端口數量和減少端口釋放前的等待時間。
在Windows操作系統中,MaxUserPort
是一個注冊表項,用于確定可用的最大用戶端口號。默認情況下,MaxUserPort
的值通常設置為 5000,這意味著TCP/IP協議棧會使用1024到5000之間的端口號用于用戶的TCP/UDP連接。
如果你需要調整 MaxUserPort
的值(比如,你想要允許更多的并發網絡連接),你可以通過注冊表編輯器(regedit)進行修改。通常,MaxUserPort
的值位于以下注冊表路徑:
HKEY_LOCAL_MACHINE\System\CurrentControlSet\Services\Tcpip\Parameters
在修改 MaxUserPort
值后,通常需要重啟Windows操作系統來使更改生效,因為TCP/IP堆棧需要重新加載配置參數。
對于高并發應用,MaxUserPort
值可以設置得更高,以允許系統打開更多的動態端口。理論上,這個值可以設置到 65534 (因為 0 到 1023 是保留端口,而 65535 是最大端口號),但實際上,推薦的最大值通常會低于這個理論上限。
在實踐中,很多Windows服務器管理員可能會將 MaxUserPort
設置在 10000 到 60000 之間,具體數值取決于應用需求以及系統和網絡環境。微軟官方文檔曾建議可以將 MaxUserPort
設置為 32768,但這并不是一個硬性限制,實際應用中應根據具體情況進行設置。
設置 MaxUserPort
時應當謹慎,因為非常高的值可能會導致系統資源(例如內存和句柄等)的消耗增加。此外,這種改變可能會影響到網絡安全策略。因此,最好在調整這個值之前評估應用的實際需求,并在測試環境中進行充分測試。
在修改 MaxUserPort
后,你需要重啟系統以使設置生效。同時,建議配合 TcpTimedWaitDelay
注冊表項一起調整,這可以幫助更快地回收處于 TIME_WAIT 狀態的端口,從而允許系統再次使用這些端口。默認情況下,TcpTimedWaitDelay
的值為 240 秒,但可以減少到 30-60 秒,特別是在高并發環境中,這樣可以幫助減少因為端口耗盡導致的連接問題。
TcpTimedWaitDelay
是Windows注冊表中的一個項,用于控制TCP連接關閉后,其端口進入TIME_WAIT狀態的時間。TIME_WAIT狀態是TCP連接斷開后的一種保持狀態,用于確保最后的確認包能夠到達。這個時間默認是240秒。
減少 TcpTimedWaitDelay
的值可以加快端口的回收速度,這對于那些需要處理大量短連接的高并發應用是有益的。對于 TcpTimedWaitDelay
,典型的設置值介于30秒到120秒之間。
要設置 TcpTimedWaitDelay
,請按照以下步驟:
打開注冊表編輯器(regedit
)。這可以通過在開始菜單中搜索“regedit”或者按 Win + R
鍵打開運行窗口,然后輸入 regedit
并回車來完成。
導航到以下路徑:
HKEY_LOCAL_MACHINE\System\CurrentControlSet\Services\Tcpip\Parameters
查找 TcpTimedWaitDelay
鍵值。如果它不存在,你需要創建它:
雙擊 TcpTimedWaitDelay
鍵值,然后在“數值數據”框中輸入你希望設置的秒數(請確保你選擇了十進制而不是十六進制)。
點擊“確定”保存更改。
關閉注冊表編輯器。
為了使更改生效,你需要重啟你的計算機。
在調整 TcpTimedWaitDelay
之前,請確保你了解更改的影響,并且在生產環境中進行更改前在測試環境中進行了充分測試。不恰當的設置可能會導致不預期的行為,例如潛在的網絡問題或性能下降。
7. 服務器設置
客戶端性能的提升也依賴于服務器端的配置。確保服務器能夠處理高并發連接和請求。
8. 性能測試
使用壓力測試工具(如JMeter或LoadRunner)對你的應用程序進行壓力測試,以確定最佳的并發設置。通過測試可以發現性能瓶頸,并據此調整設置。
注意事項
設置ServicePointManager.DefaultConnectionLimit
過高可能會導致服務器壓力增大,甚至拒絕服務,應根據實際情況謹慎設置。
在高并發場景中,HttpClient
通常是比HttpWebRequest
更好的選擇。
使用異步編程模式時,確保理解async
和await
關鍵字,避免常見的陷阱,如死鎖。
作者:Eric zhou
來源:https://www.cnblogs.com/tianqing/p/17868395.html
該文章在 2023/12/26 9:42:50 編輯過