EF Core优化技巧之预热处理(预热膨胀系数高的材料有哪些)
ccwgpt 2024-10-07 07:06 34 浏览 0 评论
今天和听到同事们在讨论一个关于使用EFCore时,为什么第一次查询数据库总是很慢的原因。我们在工作中经常使用EFCore进行数据访问,但发现每次第一次查询都需要较长的时间,这给我们带来了困扰。因此,我们聚在一起,探讨了这个问题的原因和可能的解决方案。通过查询相关资料,于是就有了这篇博客,现在分享给有需要的你。#分享编程心得# #编程经验#
EFCore首次使用缓慢
在使用Entity Framework Core(EF Core)时,首次查询可能会比较慢,这是因为EF Core需要进行模型构建、元数据加载、数据库连接建立和查询计划生成等操作。那么有什么办法可以解决这个问题呢,答案之一就是使用EF Core的预热来处理问题。
什么是EF Core的预热问题?
EF Core是一个轻量级、可扩展的ORM(对象关系映射)框架,用于在.NET应用程序中处理数据库操作。在应用程序启动时,EF Core需要进行一些初始化操作,如构建模型、加载元数据和建立数据库连接等。这些操作会导致首次查询的耗时增加,影响应用程序的性能。当使用Entity Framework Core(EF Core)进行数据库操作时,会涉及以下几个操作:
- 模型构建(Model Building):在使用EF Core之前,需要定义领域模型(Domain Model),即表示数据库表格的CLR对象。可以使用属性注解、Fluent API或实现IEntityTypeConfiguration接口等方式来配置模型。在运行时,EF Core会根据模型定义生成相应的数据库表结构。
- 元数据加载(Metadata Loading):EF Core通过反射和模型构建过程中的元数据提供程序来加载模型的元数据。这些元数据包括实体类型的属性、关系、索引等信息。在第一次创建DbContext实例时,EF Core会从模型构建器中加载元数据。
- 数据库连接建立(Database Connection Establishment):当执行数据库操作时,EF Core会根据配置连接字符串(Connection String)建立与数据库的连接。连接字符串包含数据库服务器的地址、身份验证方式、数据库名称等信息。EF Core会根据连接字符串选择合适的数据库提供程序来建立连接。
- 查询计划生成(Query Plan Generation):当执行查询操作时,EF Core会将LINQ查询表达式或查询方法转换为相应的SQL查询语句。这个过程称为查询翻译(Query Translation)。EF Core会根据查询表达式和模型的元数据生成查询计划,包括选择合适的表格、列、关联以及执行顺序等。
上述的操作都是在第一次进行数据库查询时执行的,因此首次查询可能会比较慢。这是因为EF Core需要进行模型构建、元数据加载、数据库连接建立和查询计划生成等操作。为了优化应用程序的性能,可以采取预热操作,提前执行这些操作,从而减少首次查询的耗时。
预热EF Core的解决方案
为了解决EF Core的预热问题,我们可以采取以下措施来优化应用程序的性能:
1. 显式调用EnsureCreated方法
在EF Core 3.0及更高版本中,可以通过显式调用EnsureCreated方法来预先构建模型并加载元数据。这样,在第一次查询时,EF Core就不需要再执行这些操作,从而减少查询的耗时。示例代码如下:
using (var context = new MyDbContext())
{
context.Database.EnsureCreated();
}
2. 执行迁移操作
如果应用程序使用了EF Core的迁移功能,我们可以在应用程序启动时执行迁移操作。这可以通过调用Database.Migrate方法来实现。该方法会执行所有的迁移操作,并初始化数据库中的表结构和数据。示例代码如下:
using (var context = new MyDbContext())
{
context.Database.Migrate();
}
3. 预热连接池
EF Core使用连接池来管理数据库连接。在应用程序启动时,我们可以预先创建和配置一组数据库连接,以减少首次查询时连接建立的时间。这可以通过设置连接池的MinPoolSize属性和调用连接的Open方法来实现。示例代码如下:
var connectionString = "Server=(localdb)\\mssqllocaldb;Database=MyDatabase;Trusted_Connection=True;";
for (int i = 0; i < 10; i++)
{
var connection = new SqlConnection(connectionString);
connection.Open();
connection.Close();
}
测试预热与不预热的对比
为了验证预热操作对EF Core性能的影响,我们可以编写测试代码来比较预热与不预热的情况下的查询执行时间。具体步骤如下:
- 创建一个简单的测试应用程序,包含一个使用EF Core的查询操作。
- 在应用程序的入口点处,分别添加预热操作和不预热操作的代码。
- 编写测试方法,分别对应预热和不预热的情况。在每个测试方法中,创建一个新的DbContext实例,并执行相同的查询操作。
- 使用Stopwatch类来测量每个测试方法的执行时间,并比较两者之间的差异。
通过以上步骤,我们可以得出预热与不预热的情况下查询执行时间的对比结果,从而判断预热操作对EF Core性能的影响。
示例代码
1、初始化数据库,写入10万条数据
using System;
using Microsoft.EntityFrameworkCore;
namespace EFCoreWarmup
{
// 定义实体类
public class User
{
public int Id { get; set; }
public string Name { get; set; }
}
// 定义数据库上下文
public class AppDbContext : DbContext
{
protected override void OnConfiguring(DbContextOptionsBuilder optionsBuilder)
{
string connectionString = "Data Source=mydb.db";
optionsBuilder.UseSqlite(connectionString);
}
public DbSet<User> Users { get; set; }
}
class Program
{
// 初始化并添加10万条记录
static void InitializeAndAddRecords(AppDbContext context)
{
const int recordsToAdd = 100000;
for (int i = 1; i <= recordsToAdd; i++)
{
context.Users.Add(new User { Name = #34;User_{i}" });
// 每1000条保存一次以提高效率
if (i % 1000 == 0)
{
context.SaveChanges();
context.Dispose();
context = new AppDbContext(); // 重新创建上下文以确保内存管理
}
Console.WriteLine(i);
}
}
static void Main(string[] args)
{
using(var db = new AppDbContext())
{
db.Database.EnsureCreated();
InitializeAndAddRecords(db);
}
}
}
}
2、预热前的执行查询
/// <summary>
/// 测试预热前执行查询
/// </summary>
static void TestEfCoreWithoutWarmup()
{
var stopwatch = Stopwatch.StartNew();
using (var context = new AppDbContext())
{
var users = context.Users.ToList().Take(100);
}
stopwatch.Stop();
Console.WriteLine(#34;预热前执行时间: {stopwatch.ElapsedMilliseconds} ms");
}
static void Main(string[] args)
{
TestEfCoreWithoutWarmup();
}
运行结果
3、预热后的执行查询
/// <summary>
/// 测试预热后执行查询
/// </summary>
static void TestEfCoreWithWarmup()
{
var stopwatch = Stopwatch.StartNew();
using (var context = new AppDbContext())
{
var users = context.Users.ToList();
}
stopwatch.Stop();
Console.WriteLine(#34;预热后执行时间: {stopwatch.ElapsedMilliseconds} ms");
}
static void Main(string[] args)
{
// 执行预热
using (var context = new AppDbContext())
{
context.Database.EnsureCreated();
}
TestEfCoreWithWarmup();
}
运行结果
运行结果对比
预热前后的对比,有接近1.2s的差距。由此可见预热的情况,在一定程度上提高了首次执行的效率。
EF Core 预热处理的优化技巧
提前执行一些查询操作,以便 EF Core 可以缓存查询计划、连接到数据库并建立连接池等资源,下面是一些 EF Core 预热处理的优化技巧:
- 在应用程序启动时进行预热处理:在应用程序启动时,执行一些常见的查询操作,以便 EF Core 可以缓存查询计划并建立数据库连接池。这样,在后续的请求中,EF Core 就可以直接使用已经建立好的连接和查询计划,提高性能和响应速度。
- 使用后台任务进行预热处理:可以将预热处理操作放在一个后台任务中,以避免应用程序启动时的阻塞。例如,可以使用 .NET Core 中的 Hosted Service 或者定时任务库(如 Hangfire)来执行预热处理。
- 选择适当的查询进行预热处理:根据应用程序的需求,选择一些常用的查询进行预热处理。这些查询通常是应用程序中频繁执行的查询,可以帮助 EF Core 建立查询计划并缓存结果,从而提高性能。
- 注意预热处理的时机和频率:预热处理不应该过于频繁,否则可能会对数据库造成额外的负担。根据应用程序的特点和数据库的性能,选择适当的时机和频率进行预热处理。
- 监控和调整预热处理的效果:在进行预热处理后,监控应用程序的性能和响应速度变化。如果发现预热处理没有达到预期的效果,可以考虑调整预热处理的查询内容或者时机。
总结
EF Core的预热问题是由于模型构建、元数据加载、数据库连接建立和查询计划生成等操作导致的。为了提高应用程序的性能,我们可以采取上述解决方案来优化EF Core的预热问题。通过显式调用EnsureCreated方法、执行迁移操作和预热连接池,我们可以减少首次查询的耗时,并提升应用程序的性能。
希望本文对你理解和解决EF Core的预热问题有所帮助!
参考文档:
相关推荐
- 一个基于.Net Core遵循Clean Architecture原则开源架构
-
今天给大家推荐一个遵循CleanArchitecture原则开源架构。项目简介这是基于Asp.netCore6开发的,遵循CleanArchitecture原则,可以高效、快速地构建基于Ra...
- AI写代码翻车无数次,我发现只要提前做好这3步,bug立减80%
-
写十万行全是bug之后终于找到方法了开发"提示词管理助手"新版本那会儿,我差点被bug整崩溃。刚开始两周,全靠AI改代码架构,结果十万行程序漏洞百出。本来以为AI说没问题就稳了,结果...
- OneCode低代码平台的事件驱动设计:架构解析与实践
-
引言:低代码平台的事件驱动范式在现代软件开发中,事件驱动架构(EDA)已成为构建灵活、松耦合系统的核心范式。OneCode低代码平台通过创新性的注解驱动设计,将事件驱动理念深度融入平台架构,实现了业务...
- 国内大厂AI插件评测:根据UI图生成Vue前端代码
-
在IDEA中安装大厂的AI插件,打开ruoyi增强项目:yudao-ui-admin-vue31.CodeBuddy插件登录腾讯的CodeBuddy后,大模型选择deepseek-v3,输入提示语:...
- AI+低代码技术揭秘(二):核心架构
-
本文档介绍了为VTJ低代码平台提供支持的基本架构组件,包括Engine编排层、Provider服务系统、数据模型和代码生成管道。有关UI组件库和widget系统的信息,请参阅UI...
- GitDiagram用AI把代码库变成可视化架构图
-
这是一个名为gitdiagram的开源工具,可将GitHub仓库实时转换为交互式架构图,帮助开发者快速理解代码结构。核心功能一键可视化:替换GitHubURL中的"hub...
- 30天自制操作系统:第六天:代码架构整理与中断处理
-
1.拆开bootpack.c文件。根据设计模式将对应的功能封装成独立的文件。2.初始化pic:pic(可编程中断控制器):在设计上,cpu单独只能处理一个中断。而pic是将8个中断信号集合成一个中断...
- AI写代码越帮越忙?2025年研究揭露惊人真相
-
近年来,AI工具如雨后春笋般涌现,许多人开始幻想程序员的未来就是“对着AI说几句话”,就能轻松写出完美的代码。然而,2025年的一项最新研究却颠覆了这一期待,揭示了一个令人意外的结果。研究邀请了16位...
- 一键理解开源项目:两个自动生成GitHub代码架构图与说明书工具
-
一、GitDiagram可以一键生成github代码仓库的架构图如果想要可视化github开源项目:https://github.com/luler/reflex_ai_fast,也可以直接把域名替换...
- 5分钟掌握 c# 网络通讯架构及代码示例
-
以下是C#网络通讯架构的核心要点及代码示例,按协议类型分类整理:一、TCP协议(可靠连接)1.同步通信//服务器端usingSystem.Net.Sockets;usingTcpListene...
- 从复杂到优雅:用建造者和责任链重塑代码架构
-
引用设计模式是软件开发中的重要工具,它为解决常见问题提供了标准化的解决方案,提高了代码的可维护性和可扩展性,提升了开发效率,促进了团队协作,提高了软件质量,并帮助开发者更好地适应需求变化。通过学习和应...
- 低代码开发当道,我还需要学习LangChain这些框架吗?| IT杂谈
-
专注LLM深度应用,关注我不迷路前两天有位兄弟问了个问题:当然我很能理解这位朋友的担忧:期望效率最大化,时间用在刀刃上,“不要重新发明轮子”嘛。铺天盖地的AI信息轰炸与概念炒作,很容易让人浮躁与迷茫。...
- 框架设计并不是简单粗暴地写代码,而是要先弄清逻辑
-
3.框架设计3.框架设计本节我们要开发一个UI框架,底层以白鹭引擎为例。框架设计的第一步并不是直接撸代码,而是先想清楚设计思想,抽象。一个一个的UI窗口是独立的吗?不是的,...
- 大佬用 Avalonia 框架开发的 C# 代码 IDE
-
AvalonStudioAvalonStudio是一个开源的跨平台的开发编辑器(IDE),AvalonStudio的目标是成为一个功能齐全,并且可以让开发者快速使用的IDE,提高开发的生产力。A...
- 轻量级框架Lagent 仅需20行代码即可构建自己的智能代理
-
站长之家(ChinaZ.com)8月30日消息:Lagent是一个专注于基于LLM模型的代理开发的轻量级框架。它的设计旨在简化和提高这种模型下代理的开发效率。LLM模型是一种强大的工具,可以...
你 发表评论:
欢迎- 一周热门
- 最近发表
- 标签列表
-
- 框架图 (58)
- flask框架 (53)
- quartz框架 (51)
- abp框架 (47)
- springmvc框架 (49)
- 分布式事务框架 (65)
- scrapy框架 (56)
- shiro框架 (61)
- 定时任务框架 (56)
- java日志框架 (61)
- mfc框架 (52)
- abb框架断路器 (48)
- beego框架 (52)
- java框架spring (58)
- grpc框架 (65)
- tornado框架 (48)
- 前端框架bootstrap (54)
- orm框架有哪些 (51)
- 知识框架图 (52)
- ppt框架 (55)
- 框架图模板 (59)
- 内联框架 (52)
- cad怎么画框架 (58)
- ssm框架实现登录注册 (49)
- oracle字符串长度 (48)