更快地运行插入数据库任务

Question

我问了一个question，那是我怎样才能更快地运行任务，但没有一个答案对我有用。我有以下代码将 1500 条记录插入数据库，但问题是大约需要 4 秒。我使用了async/await、并行循环和AddRange，并且我在保存时禁用了更改自动检测和验证，但它们都没有效果。我的代码是这样的：

async void button7_Click(object sender, EventArgs e)
{
    var task = await Task.Run(() =>
    {
        Random rnd = new Random();
        for (int i = 0; i <= 1500; i++)
        {
            db.Tbls.Add(new Tbl()
            {
                Name = "User" + i + 1,
                Num = rnd.Next(10, i + 10) / 10
            });
        }

        db.SaveChanges();
        return db.Tbls.Count();

    });
}

加上 AddRange：

async void button7_Click(object sender, EventArgs e)
{
    var task = await Task.Run(() =>
    {
        Random rnd = new Random();
        var tbls = new List<Tbl>();
        for (int i = 0; i <= 1500; i++)
        {
            tbls.Add(new Tbl()
            {
                Name = "User" + i + 1,
                Num = rnd.Next(10, i + 10) / 10
            });
            progress.Report(i * 100 / 1500);
         }
        db.Tbls.AddRange(tbls);
        db.SaveChanges();
        return db.Tbls.Count();

    });
}

并带有并行循环：

var task = await Task.Run(() =>
{
    int seed = Environment.TickCount;
    var random = new ThreadLocal<Random>(() => new Random(Interlocked.Increment(ref seed)));
    var tbls = new ConcurrentBag<Tbl>();
    Parallel.For(0, 1500, (i) => {
        tbls.Add(new Tbl()
        {
            Name = "User" + i + 1,
            Num = random.Value.Next(10, i + 10) / 10
        });
    });                
    db.Tbls.AddRange(tbls);
    db.SaveChanges();
    return db.Tbls.Count();
});

有谁知道问题出在哪里？

Answer 1

如果您想一次性将大量行加载到数据库中，那么您可能会从批量加载中获得更好的性能。如果您加载单个行，我可以想象 1500 次插入很容易花费 4 秒 - 而且您可能不会让单个插入运行得更快，因为主要瓶颈是任何数据库事务所需的最小 I/O。

使用批量加载 API - 例如SQLBulkCopy - 您准备一个记录集，然后一键将其加载到数据库中。这将比 1,500 个单独的插入要快得多。

您尚未指定需要具有支持批量加载的驱动程序的数据库平台。 SQL Server 可以；除非您购买某些版本，否则某些（例如）Oracle 不会。