8wDlpd.png
8wDFp9.png
8wDEOx.png
8wDMfH.png
8wDKte.png

在 C# 8 / Unity 2022 中,为什么 PLINQ SelectMany + Select + FirstOrDefault 以顺序模式执行?

Daniel Benedí 1月前

28 0

以下是有问题的代码:var raw = Enumerable.Range(1, 10);var candidates = raw.AsParallel();var p1 = candidates.AsParallel() .SelectMany( ii => { Debug....

以下是有问题的代码:

var raw = Enumerable.Range(1, 10);

var candidates = raw.AsParallel();

var p1 = candidates.AsParallel()
    .SelectMany(
        ii =>
        {
            Debug.Log(">>>>> " + ii);

            Thread.Sleep(1000);

            Debug.Log("<<<<< " + ii);

            return new[] { ii };
        }
    );

            var p2 = p1.Select(
                (v, i) => v);

            var chosen = p2.FirstOrDefault();

执行后,给出以下日志:

>>>>> 1
<<<<< 1
>>>>> 2
<<<<< 2
>>>>> 3
<<<<< 3
>>>>> 4
<<<<< 4
>>>>> 5
<<<<< 5
>>>>> 6
<<<<< 6
>>>>> 7
<<<<< 7
>>>>> 8
<<<<< 8
>>>>> 9
<<<<< 9
>>>>> 10
<<<<< 10

执行耗时 10 秒。理论上应该耗时 1 秒, >>>>> x 执行后立即到达。

这种行为的原因是什么以及如何解决它?

更新1: 我已经试验了第一个答案的解决方案:


            var raw = Enumerable.Range(1, 10);

            var candidates = raw.AsParallel()
                .WithExecutionMode(ParallelExecutionMode.ForceParallelism);

            var p1 = candidates.AsParallel()
                .SelectMany(
                    ii =>
                    {
                        Debug.Log(">>>>> " + ii);

                        Thread.Sleep(1000);
                        Debug.Log("<<<<< " + ii);
                        return new[] { ii };
                    }
                );

            var p2 = p1.Select(
                (v, i) => v);

            var chosen = p2.FirstOrDefault();

结果仍然失败:

>>>>> 3
<<<<< 3
>>>>> 2
<<<<< 2
>>>>> 1
<<<<< 1
>>>>> 4
<<<<< 4
>>>>> 5
<<<<< 5
>>>>> 6
<<<<< 6
>>>>> 7
<<<<< 7
>>>>> 8
<<<<< 8
>>>>> 9
<<<<< 9
>>>>> 10
<<<<< 10
帖子版权声明 1、本帖标题:在 C# 8 / Unity 2022 中,为什么 PLINQ SelectMany + Select + FirstOrDefault 以顺序模式执行?
    本站网址:http://xjnalaquan.com/
2、本网站的资源部分来源于网络,如有侵权,请联系站长进行删除处理。
3、会员发帖仅代表会员个人观点,并不代表本站赞同其观点和对其真实性负责。
4、本站一律禁止以任何方式发布或转载任何违法的相关信息,访客发现请向站长举报
5、站长邮箱:yeweds@126.com 除非注明,本帖由Daniel Benedí在本站《c#》版块原创发布, 转载请注明出处!
最新回复 (0)
  • @AlexanderPetrov 16,添加 WithDegreeOfParallelism(16) 在这里也没有效果

  • 似乎 的存在 SelectMany 会影响 PLINQ 内部机制处理数据的方式。似乎 ParallelExecutionMode.ForceParallelism 可以解决这个问题:

    var candidates = raw.AsParallel()
        .WithExecutionMode(ParallelExecutionMode.ForceParallelism);
    
    var p1 = candidates
        .SelectMany(...)
    

    默认情况下 PLINQ:

    将检查查询的结构,并且仅在可能加速时才并行化查询。如果查询结构表明不太可能获得加速,则 PLINQ 将把查询作为普通的 LINQ to Objects 查询执行。

    并且看起来在这种特殊情况下它并没有并行执行。

    另请参阅:

    • p5

    • p6

      p7

    • p8

    '在我的计算机上'它们没有显著的影响,但在某些情况下它们可能有用(取决于多种因素,包括运行时间、设置、可用的 CPU 数量)。

  • 只有 ThreadPool.SetMinThreads 和 WithDegreeOfParallelism 对我有帮助。

  • @AlexanderPetrov 是的,这也会起作用。虽然我的情况不是这样(我已经用 \'vanilla\' .NET 8 运行时进行了测试),所以我没有将它们添加到答案中。但这也值得一提,稍后会添加。

  • 非常感谢,不幸的是 ForceParallelism 也坏了,请参阅我的更新 1。我想知道它是否应该与 ParallelMergeOptions 结合使用

  • @tribbloid 您可能需要所有提到的选项。尽管如我所写 - 我使用了 \'vanilla\' 运行时,但 unity 可能会有额外的效果。

  • @tribbloid 是的,我使用了你的代码(减去第二个 AsParallel 调用)。

返回
作者最近主题: