C＃-将数据从ThreadPool线程传递回主线程

Question

当前实现：等待直到收集parallelCount值，使用ThreadPool处理值，等待直到所有线程完成，重新收集另一组值，依此类推...

码：

private static int parallelCount = 5;
private int taskIndex;
private object[] paramObjects;

// Each ThreadPool thread should access only one item of the array, 
// release object when done, to be used by another thread
private object[] reusableObjects = new object[parallelCount];     

private void MultiThreadedGenerate(object paramObject)
{
    paramObjects[taskIndex] = paramObject;
    taskIndex++;

    if (taskIndex == parallelCount)
    { 
        MultiThreadedGenerate();

        // Reset
        taskIndex = 0;
    }
}

/*
 * Called when 'paramObjects' array gets filled
 */
private void MultiThreadedGenerate()
{
    int remainingToGenerate = paramObjects.Count;

    resetEvent.Reset();

    for (int i = 0; i < paramObjects.Count; i++)
    {
        ThreadPool.QueueUserWorkItem(delegate(object obj)
        {
            try
            {
                int currentIndex = (int) obj;       

                Generate(currentIndex, paramObjects[currentIndex], reusableObjects[currentIndex]);
            }
            finally
            {
                if (Interlocked.Decrement(ref remainingToGenerate) == 0)
                {
                    resetEvent.Set();
                }
            }
        }, i);
    }

    resetEvent.WaitOne();    
}

我已经看到这种方法可以显着提高性能，但是有许多问题需要考虑：

[1]可以避免在paramObjects收集值以及使用resetEvent进行同步，因为线程之间（或当前值集与下一组值）之间没有依赖性。 我只是这样做来管理对reusableObjects访问（当完成对paramObjects的处理时，我知道reusableObjects中的所有对象都是空闲的，因此将taskIndex重置，并且下一组值的每个新任务将具有其唯一的'reusableObj ' 跟...共事）。

[2]在reusableObjects的大小和ThreadPool使用的线程数之间没有真正的联系。 我可能将reusableObjects初始化为具有10个对象，并且说由于某些限制，ThreadPool只能为我的MultiThreadedGenerate()方法运行3个线程，然后浪费了内存。

因此，通过摆脱paramObjects ，如何以一种线程完成其工作后，该线程返回其taskIndex使用且不再需要的taskIndex （或reusableObj ）的方式改进上述代码，以便对下一个值。 另外，代码应该创建一个reUsableObject并且仅在有需求时才将其添加到某个集合中。 在这里使用队列是个好主意吗？

谢谢。

Answer 1

确实没有任何理由再进行自己的手动线程和任务管理。 您可以使用Task Parallel Library （可能还有System.Collections.Concurrent用于结果整理）将其重组为耦合程度更松散的模型。

如果您无需等待全部工作完成再交出每个Task进行处理，则可以进一步提高性能。

TPL出现在.Net 4.0中，但被反向移植到.Net 3.5中 。 在这里下载。