如何使用IAsyncEnumerable并行化

Question

我有一种情况，我正在启动Task-s，我希望他们的结果以某种方式以最快的速度在数据结构中进行管道/排队，而不关心他们的订单。

IAsyncEnumerable适合这种情况吗？

public async Task BigMethod()
{
    Queue<int> queue = new Queue<int>();
    foreach (var item in RunJobsAsync())
    {
        queue.Enqueue(item);
    }
    //await foreach(var item in await RunIAsyncJobsAsync())
    // {
    //     queue.Enqueue(item);
    // }
    // [some more code]
}

无IAsyncEnumerable

public async Task<IEnumerable<int> RunJobsAsync()
{    
    List<Task<int>> tasks = new List<Task<int>>();
    foreach(var x in Enumerable.Range(0,100))
    {
        tasks.Add(Task.Run(async()=> await someMethodAsync()));
    }
    await tasks.WhenAll(tasks);
    return tasks.Select(x=>x.Result);
}

用IAsyncEnumerable

public async IAsyncEnumerable<int> RunIAsyncJobsAsync()
{
    foreach (var x in Enumerable.Range(0, 100))
    {
        yield return await Task.Run(async () => await someMethodAsync());
    }
}

IAsyncEnumerable是否有任何性能增益，因为我希望在所有async调用完成之前不要进一步移动算法，但是我希望它们并行执行，因此，我不想顺序地等待所有调用，我只想等待最长的调用完成。

P.S在这种情况下我需要ConcurrentQueue/locking吗？

Answer 1

不，IAsyncEnumerable不适合这个案子。由于您不想在所有异步操作完成之前更进一步，所以您不会利用IAsyncEnumerable的主要资产。即:一旦结果可用，就立即进行流处理。返回一个Task<IEnumerable<int>>，甚至更好的一个Task<int[]>，是更简单和更可取的。特别是如果您还想同时启动操作，这是IAsyncEnumerable默认不做的事情，并且是quite tricky要实现的。