PLINQ可以轻松实现MapReduce编程模式

Map (映射)  Reduce （规约） 编程模型：

 

 常用于统计词频（也就是统计单词的使用数量）

具体实现演变：

 

public partial class Program
{
  public static void Sample05()
  {
    var words = File.ReadAllText("Data.txt").Split(' ');
    var map = words.AsParallel().ToLookup(p => p, k => 1);
    var reduce = from IGrouping<string, int> wordMap in map.AsParallel()
    where wordMap.Count() > 1
    select new {Word = wordMap.Key, Count = wordMap.Count()};

    foreach (var word in reduce)
    {
     Console.WriteLine($"Word: {word.Word},Count:{word.Count}");
    }
  }
}

 注意：PLINQ 是不支持 LINQ to SQL 都是需要加载到内存中处理的