EF大数据批量添加性能问题

前几天做一个批量发消息的功能，因为要向消息表中批量写入数据，用的EF框架的插入方法；不用不知道，一用吓一跳；就10000条数据就耗时好几分钟，对应追求用户体验的我来说这是极不能容忍的，后来改为拼接SQL，性能提高了好几倍；现在来分享一下经验：

原始的方法类似这种：

         public ActionResult Add(ItemDetails entity)

         {

             var sw = new Stopwatch();

             sw.Start();

             using (db)

             {

                 for (var i = ; i < ; i++)

                 {

                     db.ItemDetails.Add(entity);

                     db.SaveChanges();

                 }

             }

             sw.Stop();

             var date = sw.Elapsed;

             return Json(string.Format("总耗时：{0}", date));

         }

来看看添加10000条数据耗时：

就10000条数据就耗时这么久，要是上百万的数据量，那简直就不能想象，再来看看优化后的：

生成SQL的方法：

 public class ItemDetailBatch

     {

         public static string BatchAdd(ItemDetails entity)

         {

             SqlParameter [] paras=

             {

                 new SqlParameter("@Item_Name",SqlDbType.VarChar,),

                 new SqlParameter("@Item_Price",SqlDbType.Int),

                 new SqlParameter("@Image_Name",SqlDbType.VarChar,),

                 new SqlParameter("@Description",SqlDbType.VarChar,),

                 new SqlParameter("@AddedBy",SqlDbType.VarChar,)

             };

             paras[] .Value= entity.Item_Name;

             paras[].Value = entity.Item_Price;

             paras[].Value = entity.Image_Name;

             paras[].Value = entity.Description;

             paras[].Value = entity.AddedBy;

             var sb=new StringBuilder();

             sb.Append("insert into ItemDetails (Item_Name,Item_Price,Image_Name,Description,AddedBy) ");

             sb.AppendFormat("values ('{0}',{1},'{2}','{3}','{4}')", paras[].Value, paras[].Value, paras[].Value,paras[].Value, paras[].Value);

             return sb.ToString();

         }

     }

Controller层调用：

         public ActionResult Add(ItemDetails entity)

         {

             var sw = new Stopwatch();

             sw.Start();

             using (var db = new ShoppingDBConn())

             {

                 var sql = new StringBuilder();

                 for (int i = ; i < ; i++)

                 {

                     //生成SQL

                     sql.Append(ItemDetailBatch.BatchAdd(entity));

                 }

                 //一次性执行SQL

                 db.Database.ExecuteSqlCommand(sql.ToString());

             }

             sw.Stop();

             var date = sw.Elapsed;

             return Json(string.Format("总耗时：{0}", date));

         }

界面数据：

同样10000条总耗时：

EF没添加一次都要向数据库提交一次，而直接拼接SQL的方法就是减少与数据库的交互次数，一次性提交执行所有数据；

巴特西

EF大数据批量添加性能问题

最新文章

热门文章