EF Core 11でSplit Queryが高速化
EF Core 11 makes your split queries faster (steven-giesel.com)
要約
EF Core 11では、`AsSplitQuery`機能におけるパフォーマンスの改善が行われました。以前のバージョンでは、参照ナビゲーションを含めるとコレクションクエリで不要なJOINが発生し、クエリが非効率になることがありました。EF Core 11では、これらの参照ナビゲーションをクエリから除外することで、SQLクエリが最適化され、実行速度の向上とメモリ使用量の削減が実現されています。
全文翻訳
EF Core 11 で Split Query が高速化
コードベースのどこかで AsSplitQuery を使用している場合、EF Core 11 はあなたにプレゼントがあります。それは、クエリが高速になることです。
デフォルトでは、EF Core はすべてのデータを1つのクエリでロードします。コレクションを Include すると、それは JOIN を意味し、コレクションに対する JOIN は親行を子ごとに複製します。より多くのものを JOIN するほど、「悪化」します。AsSplitQuery はこれを解決します。EF はルートエンティティ用のクエリと、追加された各コレクション用のクエリを実行します。もちろん、これは万能薬ではなく、以下のような結果を招く可能性があります。
- ラウンドトリップの増加
- ルートエンティティと子エンティティの間で状態が変更される可能性(これはアトミックな操作ではないため、複数のトランザクションが発生します)。
詳細はこちら: https://learn.microsoft.com/en-us/ef/core/querying/single-split-queries
では、問題は何でしょうか?#
こちらが 元のイシュー からのセットアップです。1つのリファレンスナビゲーション、1つのコレクションナビゲーションです。
var result = context.Blogs
.Include(x => x.BlogType) // リファレンスナビゲーション
.Include(x => x.Posts) // コレクションナビゲーション
.AsSplitQuery()
.ToList();
EF Core 10 までは、これは2つのクエリを生成していました。
SELECT [b].[Id], [b].[BlogDetailId], [b].[BlogTypeId], [b].[Name], [b0].[Id], [b0].[Type]
FROM [Blogs] AS [b]
LEFT JOIN [BlogType] AS [b0] ON [b].[BlogTypeId] = [b0].[Id]
ORDER BY [b].[Id], [b0].[Id]
SELECT [p].[Id], [p].[BlogId], [p].[Title], [b].[Id], [b0].[Id]
FROM [Blogs] AS [b]
LEFT JOIN [BlogType] AS [b0] ON [b].[BlogTypeId] = [b0].[Id]
INNER JOIN [Post] AS [p] ON [b].[Id] = [p].[BlogId]
ORDER BY [b].[Id], [b0].[Id]
2番目のクエリを見てください。Posts を取得するクエリです。なぜ BlogType がそこに含まれているのでしょうか?それはテーブルを JOIN し、その Id を選択し、それに基づいて並べ替えを行っています。これらはどれも必要ありません。Post をその Blog に一致させるには、ブログの主キーがあれば十分です。
そして、リファレンスナビゲーションが増えるほど、状況は悪化します。リファレンスナビゲーションに5つの Include を指定した場合?すべてのコレクションクエリは、5つの JOIN と5つの追加の ORDER BY 列を一緒に引きずります。データベースは作業を行いますが、結果は捨てられ、クエリプランはそれに苦しみます。
では、何が変わったのでしょうか?#
EF Core 11(プレビュー3以降)は、リファレンスナビゲーションをコレクションクエリから削除(プルーニング)します。2番目のクエリは、手動で記述したであろうものに近くなります。
SELECT [p].[Id], [p].[BlogId], [p].[Title], [b].[Id]
FROM [Blogs] AS [b]
INNER JOIN [Post] AS [p] ON [b].[Id] = [p].[BlogId]
ORDER BY [b].[Id]
ベンチマーク#
ブログ記事の最後に、全体のセットアップへのリンクを貼ります。ここで使用した小さなセットアップを紹介します。上記のリンクされた Github イシューでほぼ同じものを見つけることができます。
免責事項: EF 10(.net 10 で)と EF 11(.net 11 で)を比較しました。とはいえ、すべての利点が EF 11 だけによるものとは限りません。ベンチマーク中に2つの変数を変更したためです。理論的には、.net 10 から .net 11 への変更のみによる可能性もありますが、可能性は低いです。
[MemoryDiagnoser]
[SimpleJob(RuntimeMoniker.Net10_0)]
[SimpleJob(RuntimeMoniker.Net11_0)]
public class SplitQueryBenchmarks
{
private SqliteConnection _connection = null!;
private DbContextOptions<BloggingContext> _options = null!;
[GlobalSetup]
public void Setup()
{
_connection = new SqliteConnection("Data Source=:memory:");
_connection.Open();
_options = new DbContextOptionsBuilder<BloggingContext>()
.UseSqlite(_connection)
.Options;
using var context = new BloggingContext(_options);
context.Database.EnsureCreated();
Seeder.Seed(context, blogCount: 5_000, postsPerBlog: 5);
}
[GlobalCleanup]
public void Cleanup() => _connection.Dispose();
[Benchmark]
public List<Blog> SplitQuery()
{
using var context = new BloggingContext(_options);
return BlogQuery(context).AsSplitQuery().ToList();
}
private static IQueryable<Blog> BlogQuery(BloggingContext context)
=> context.Blogs
.AsNoTracking()
.Include(b => b.Author)
.Include(b => b.Category)
.Include(b => b.Series)
.Include(b => b.Posts);
}
結果:
| Method | Runtime | Mean | Error | StdDev | Median | Gen0 | Gen1 | Gen2 | Allocated |
|----------- |---------- |---------:|---------:|---------:|---------:|----------:|----------:|---------:|----------:|
| SplitQuery | .NET 10.0 | 68.53 ms | 1.358 ms | 2.742 ms | 67.54 ms | 4375.0000 | 1000.0000 | 375.0000 | 33.35 MB |
| SplitQuery | .NET 11.0 | 62.07 ms | 1.213 ms | 2.788 ms | 61.10 ms | 4111.1111 | 1333.3333 | 444.4444 | 30.15 MB |
実行時間と割り当てメモリが減少しました!
リソース#
- このブログ記事のソースコード: こちら
- 私のサンプルコードはすべてこのリポジトリでホストされています: こちら
- Github イシュー: https://github.com/dotnet/efcore/issues/29182