(转)Entity Framework 缓存处理与日志监控,(非常重要的技术)
2012-11-02 16:33 CoolJie 阅读(1244) 评论(0) 编辑 收藏 举报编写Entity Framework项目的过程中,经常遇到性能问题,但是由于Entity Framework没有很好的调试手段观察编写的LINQ语句产生的SQL语句,导致调试优化性能非常困难,下面的文章能够很容易的解决该问题。
在Kooboo中使用了Entity Framework作为持久化框架,但由于EF1.0并没有提供完整缓存解决方案,一直以来都在为数据缓存而烦脑,在没有找到合适解决方案的情况下,采取了临时的解决办法:直接缓存实体。但是由于Entity实体都是带状态的,并且都与ObjectContext有间接的反向引用,缓存带状态的实体,会造成对象上下文混乱和连接资源的无法被正确释放。因此缓存的Entity实体,首先必须被分离或者重新定义POCO实体来代替Entity实体作为缓存对象。这样一来,所有的缓存实体的关联关系都会失效,造成使用上的麻烦和整个软件框架存在严重的不足。
再说说EF的SQL日志问题。在之前的LINQ TO SQL的项目中,有一个可视化的调试器,可以查看查询表达式生成对应的SQL语句,这种可以大大方便开发人员的调试工作。可以在EF1.0中,却一直也找不到类似可用的工具。因此,我的做法是通过SQL Profile来查看EF生成和执行的SQL语句。虽然可行,但还是很不方便。
现在,EF团队终于推出一套比较完整的缓存和SQL执行日志的解决方案,EFProviderWrappers。他们的做法是在原来的EF Provider之上,再加一层包装,通过这层包装拦截,进行数据缓存和日志监控。这里缓存的数据是数据库查询后返回的原生数据,并不是Entity实体对象,这样就可以避免Entity实体状态对缓存造成的的极端负面影响。并且这样的缓存对上层的数据查询本身是透明,在同一个封闭区间内,缓存数据所依赖的实体类型在被更新后(对应的表有发生CURD操作),缓存并会被自动清空。对于日志的监控,经过这层包装后就可以非常容易得到处理。
上面的图虽然是说明对SqlClient有效,但由于这层包装并不涉及具体的SQL操作,因此对不同的数据的Provider应该都是有效。下面通过一个自带的实例简单介绍一下如何使用。
在下载的EFProviderWrappers解决方案中,EFProviderWrapperToolkit,EFCachingProvider,EFTracingProvider这三个工程是真正干事的,其它的工程都是示例工程。在EFProviderWrapperDemo工程,我们可以找到我们所要的例子。
第一步:在配置文件中添加如下配置:
<system.data> <DbProviderFactories> <add name="EF Caching Data Provider" invariant="EFCachingProvider" description="Caching Provider Wrapper" type="EFCachingProvider.EFCachingProviderFactory, EFCachingProvider, Version=1.0.0.0, Culture=neutral, PublicKeyToken=def642f226e0e59b" /> <add name="EF Tracing Data Provider" invariant="EFTracingProvider" description="Tracing Provider Wrapper" type="EFTracingProvider.EFTracingProviderFactory, EFTracingProvider, Version=1.0.0.0, Culture=neutral, PublicKeyToken=def642f226e0e59b" /> <add name="EF Generic Provider Wrapper" invariant="EFProviderWrapper" description="Generic Provider Wrapper" type="EFProviderWrapperToolkit.EFProviderWrapperFactory, EFProviderWrapperToolkit, Version=1.0.0.0, Culture=neutral, PublicKeyToken=def642f226e0e59b" /> </DbProviderFactories> </system.data>
第二步:从生成的ObjectContext中继承一个扩展的ObjectContext,定义所需的扩展属性,其中重点是重新定义构造器,生成包装后的EntityConnection对象。
1 public ExtendedNorthwindEntities() 2 : this("name=NorthwindEntities") 3 { 4 } 5 6 public ExtendedNorthwindEntities(string connectionString) 7 : base(EntityConnectionWrapperUtils.CreateEntityConnectionWithWrappers( 8 connectionString, 9 "EFTracingProvider", 10 "EFCachingProvider" 11 )) 12 { 13 }
第三步:指定缓存管理器和缓存策略,缓存管理器是可扩展的。默认提供两种缓存管理器的实现,InMemoryCache和AspNetCache,另外还提供了一种分布式缓存NVelocity适配器的实现:VelocityCache。对于日志监控,可以通过EFTracingProviderConfiguration设置是否输出到控制台或输出到文件,当然通过扩展的ObjectContext还可以将日志输出到指定的TextWriter:
1 ICache cache = new InMemoryCache(); 2 CachingPolicy cachingPolicy = CachingPolicy.CacheAll; 3 4 // log SQL from all connections to the console 5 EFTracingProviderConfiguration.LogToConsole = true;
接下来直接就可以使用,注意不同的ObjectContext实例都要指向同一个ICache实例,并且即使你的创建的ObjectCotnext不需要缓存操作,也应该指定ICache实例,并且设置缓存策略为NoCaching,这样在当你的ObjectContext调用了SaveChanges后将会自动清空被更新的实体类型的缓存数据。下面一段简单代码演示了数据缓存后的SQL执行情况:
1 private static void CacheInvalidationDemo() 2 { 3 var cache = new InMemoryCache(); 4 5 // log SQL from all connections to the console 6 EFTracingProviderConfiguration.LogToConsole = true; 7 8 for (int i = 0; i < 3; ++i) 9 { 10 Console.WriteLine(); 11 Console.WriteLine("*** Pass #{0}...", i); 12 Console.WriteLine(); 13 using (var context = new ExtendedNorthwindEntities()) 14 { 15 // set up caching 16 context.Cache = cache; 17 context.CachingPolicy = CachingPolicy.CacheAll; 18 19 Console.WriteLine("Loading customer..."); 20 var cust = context.Customers.First(c => c.CustomerID == "ALFKI"); 21 Console.WriteLine("Customer name: {0}", cust.ContactName); 22 cust.ContactName = "Change" + Environment.TickCount; 23 Console.WriteLine("Loading orders..."); 24 cust.Orders.Load(); 25 Console.WriteLine("Order count: {0}", cust.Orders.Count); 26 context.SaveChanges(); 27 } 28 } 29 30 Console.WriteLine(); 31 }
在结果控制台中你会看第一次执行了SQL,后面两次都是直接返回结果,并没有访问数据库。
最后,还想提醒一下,目前下载的这个版本在真正使用时,可能还会存在一些小问题,其中最常见的就是存在大量的throw new NotSupportedException(); 不知出于什么目的并没有提供这些方法的默认实现,其实只是调用被包装对象的相应方法而已。
更多的资源:
http://blogs.msdn.com/jkowalski/archive/tags/EFProviderWrappers/default.aspx
http://code.msdn.microsoft.com/EFProviderWrappers