如何使用async和await创建大量并发Web请求？

Question

我在如何：通过使用async和等待（C＃）并行创建多个Web请求时阅读了Microsoft 如何找到：

private async Task CreateMultipleTasksAsync()  
{  
    // Declare an HttpClient object, and increase the buffer size. The  
    // default buffer size is 65,536.  
    HttpClient client =  
        new HttpClient() { MaxResponseContentBufferSize = 1000000 };  

    // Create and start the tasks. As each task finishes, DisplayResults   
    // displays its length.  
    Task<int> download1 =   
        ProcessURLAsync("http://msdn.microsoft.com", client);  
    Task<int> download2 =   
        ProcessURLAsync("http://msdn.microsoft.com/library/hh156528(VS.110).aspx", client);  
    Task<int> download3 =   
        ProcessURLAsync("http://msdn.microsoft.com/library/67w7t67f.aspx", client);  

    // Await each task.  
    int length1 = await download1;  
    int length2 = await download2;  
    int length3 = await download3;  

    int total = length1 + length2 + length3;  

    // Display the total count for the downloaded websites.  
    resultsTextBox.Text +=  
        string.Format("\r\n\r\nTotal bytes returned:  {0}\r\n", total);  
}  

我理解这段代码，但我的问题是：如何修改它以将其缩放为喜欢，让我们说一百或一千？

Answer 1

由于我的帐户受到限制，我无法发表评论，但在回复@ CreativeManix的回答时，

List<Task> tasks = new List<Task>();

Task.WaitAll(tasks)不接受任务列表。 其中一个覆盖接受一个任务数组。

Task.WaitAll(tasks.ToArray())

Answer 2

您可以在循环中调用异步调用。 每次调用都可以返回一个Task，您必须等待所有任务完成

var requestInfoCollection = new RequestInfo[]
{
     new RequestInfo("http://url1","GET"),
     new RequestInfo("http://url2","GET"),
     new RequestInfo("http://url2","POST")
};
List<Task> tasks = new List<Task>();
foreach(var requestInfo in requestInfoCollection)
{
   tasks.Add(ProcessURLAsync(requestInfo))
}
Task.WaitAll(tasks);

以上将调用多个请求并等待结果，但是async \\ await有助于在执行外部调用（http，db等...）时将线程释放给应用程序。 但扩展取决于您的硬件和应用程序架构。