HN 日本語サマリー

← 一覧へ戻る
プログラミング

EF Core 11でSplit Queryが高速化

EF Core 11 makes your split queries faster (steven-giesel.com)

58 pointsby rellem28 コメント

要約

EF Core 11では、`AsSplitQuery`機能におけるパフォーマンスの改善が行われました。以前のバージョンでは、参照ナビゲーションを含めるとコレクションクエリで不要なJOINが発生し、クエリが非効率になることがありました。EF Core 11では、これらの参照ナビゲーションをクエリから除外することで、SQLクエリが最適化され、実行速度の向上とメモリ使用量の削減が実現されています。

全文翻訳

EF Core 11 で Split Query が高速化

コードベースのどこかで AsSplitQuery を使用している場合、EF Core 11 はあなたにプレゼントがあります。それは、クエリが高速になることです。

デフォルトでは、EF Core はすべてのデータを1つのクエリでロードします。コレクションを Include すると、それは JOIN を意味し、コレクションに対する JOIN は親行を子ごとに複製します。より多くのものを JOIN するほど、「悪化」します。AsSplitQuery はこれを解決します。EF はルートエンティティ用のクエリと、追加された各コレクション用のクエリを実行します。もちろん、これは万能薬ではなく、以下のような結果を招く可能性があります。

  • ラウンドトリップの増加
  • ルートエンティティと子エンティティの間で状態が変更される可能性(これはアトミックな操作ではないため、複数のトランザクションが発生します)。

詳細はこちら: https://learn.microsoft.com/en-us/ef/core/querying/single-split-queries

では、問題は何でしょうか?#

こちらが 元のイシュー からのセットアップです。1つのリファレンスナビゲーション、1つのコレクションナビゲーションです。

var result = context.Blogs
    .Include(x => x.BlogType) // リファレンスナビゲーション
    .Include(x => x.Posts)    // コレクションナビゲーション
    .AsSplitQuery()
    .ToList();

EF Core 10 までは、これは2つのクエリを生成していました。

SELECT [b].[Id], [b].[BlogDetailId], [b].[BlogTypeId], [b].[Name], [b0].[Id], [b0].[Type]
FROM [Blogs] AS [b]
LEFT JOIN [BlogType] AS [b0] ON [b].[BlogTypeId] = [b0].[Id]
ORDER BY [b].[Id], [b0].[Id]

SELECT [p].[Id], [p].[BlogId], [p].[Title], [b].[Id], [b0].[Id]
FROM [Blogs] AS [b]
LEFT JOIN [BlogType] AS [b0] ON [b].[BlogTypeId] = [b0].[Id]
INNER JOIN [Post] AS [p] ON [b].[Id] = [p].[BlogId]
ORDER BY [b].[Id], [b0].[Id]

2番目のクエリを見てください。Posts を取得するクエリです。なぜ BlogType がそこに含まれているのでしょうか?それはテーブルを JOIN し、その Id を選択し、それに基づいて並べ替えを行っています。これらはどれも必要ありません。Post をその Blog に一致させるには、ブログの主キーがあれば十分です。

そして、リファレンスナビゲーションが増えるほど、状況は悪化します。リファレンスナビゲーションに5つの Include を指定した場合?すべてのコレクションクエリは、5つの JOIN と5つの追加の ORDER BY 列を一緒に引きずります。データベースは作業を行いますが、結果は捨てられ、クエリプランはそれに苦しみます。

では、何が変わったのでしょうか?#

EF Core 11(プレビュー3以降)は、リファレンスナビゲーションをコレクションクエリから削除(プルーニング)します。2番目のクエリは、手動で記述したであろうものに近くなります。

SELECT [p].[Id], [p].[BlogId], [p].[Title], [b].[Id]
FROM [Blogs] AS [b]
INNER JOIN [Post] AS [p] ON [b].[Id] = [p].[BlogId]
ORDER BY [b].[Id]

ベンチマーク#

ブログ記事の最後に、全体のセットアップへのリンクを貼ります。ここで使用した小さなセットアップを紹介します。上記のリンクされた Github イシューでほぼ同じものを見つけることができます。


免責事項: EF 10(.net 10 で)と EF 11(.net 11 で)を比較しました。とはいえ、すべての利点が EF 11 だけによるものとは限りません。ベンチマーク中に2つの変数を変更したためです。理論的には、.net 10 から .net 11 への変更のみによる可能性もありますが、可能性は低いです。


[MemoryDiagnoser]
[SimpleJob(RuntimeMoniker.Net10_0)]
[SimpleJob(RuntimeMoniker.Net11_0)]
public class SplitQueryBenchmarks
{
    private SqliteConnection _connection = null!;
    private DbContextOptions<BloggingContext> _options = null!;

    [GlobalSetup]
    public void Setup()
    {
        _connection = new SqliteConnection("Data Source=:memory:");
        _connection.Open();

        _options = new DbContextOptionsBuilder<BloggingContext>()
            .UseSqlite(_connection)
            .Options;

        using var context = new BloggingContext(_options);
        context.Database.EnsureCreated();
        Seeder.Seed(context, blogCount: 5_000, postsPerBlog: 5);
    }

    [GlobalCleanup]
    public void Cleanup() => _connection.Dispose();

    [Benchmark]
    public List<Blog> SplitQuery()
    {
        using var context = new BloggingContext(_options);
        return BlogQuery(context).AsSplitQuery().ToList();
    }

    private static IQueryable<Blog> BlogQuery(BloggingContext context)
        => context.Blogs
            .AsNoTracking()
            .Include(b => b.Author)
            .Include(b => b.Category)
            .Include(b => b.Series)
            .Include(b => b.Posts);
}

結果:

| Method     | Runtime   | Mean     | Error    | StdDev   | Median   | Gen0      | Gen1      | Gen2     | Allocated |
|----------- |---------- |---------:|---------:|---------:|---------:|----------:|----------:|---------:|----------:|
| SplitQuery | .NET 10.0 | 68.53 ms | 1.358 ms | 2.742 ms | 67.54 ms | 4375.0000 | 1000.0000 | 375.0000 |  33.35 MB |
| SplitQuery | .NET 11.0 | 62.07 ms | 1.213 ms | 2.788 ms | 61.10 ms | 4111.1111 | 1333.3333 | 444.4444 |  30.15 MB |

実行時間と割り当てメモリが減少しました!

リソース#