在Web界面中实现Excel数据大量导入的处理方式

前端之家收集整理的这篇文章主要介绍了在Web界面中实现Excel数据大量导入的处理方式前端之家小编觉得挺不错的,现在分享给大家,也给大家做个参考。

在早期Bootstrap框架介绍中,我的随笔《》中介绍了利用Bootstrap FieInput插件上传Excel文件到服务器,然后利用Bootstrap-table表格插件进行展示数据,最后导入到系统里面中,这个导入过程中可以预览到要导入的数据,而且可以选择性的导入。在实际使用过程中,发现使用Ajax导入大批量(几百条记录数据)的情况下,页面就会罢工,估计和提交的数据大小限制有关,为了解决这个问题,并结合导入数据一般都是全部导入的情况下,我们修改下数据导入的过程,从而实现大量数据量的Excel数据导入。

1、使用预览数据,并勾选导入的处理方式

Excel导入的的界面展示如下所示。

上传文件后,数据直接展示在弹出层的列表里面,这里直接使用了 Bootstrap-table表格插件进行展示。

这样我们就可以把Excel的记录展示出来,实现了预览的功能,勾选必要的记录,然后保存即可提交到服务器进行保存,实现了Excel数据的真正导入数据库处理。

实际的代码就比较多一点点,详细可以参考下随笔《》,这里就主要简要介绍下导入的处理逻辑即可,由于是在客户端组装列表数据,然后通过ajax提交的,它的的代码如下所示。(这个也就是后面需要解决的问题)。

</span><span style="color: #0000ff;"&gt;var</span> list = [];<span style="color: #008000;"&gt;//</span><span style="color: #008000;"&gt;构造集合对象</span> <span style="color: #0000ff;"&gt;var</span> rows = $import.bootstrapTable('getSelections'<span style="color: #000000;"&gt;); </span><span style="color: #0000ff;"&gt;for</span> (<span style="color: #0000ff;"&gt;var</span> i = 0; i < rows.length; i++<span style="color: #000000;"&gt;) { list.push({ </span>'Name': rows[i].Name,'Mobile': rows[i].Mobile,'Email': rows[i].Email,'Homepage'<span style="color: #000000;"&gt;: rows[i].Homepage,</span>'Hobby': rows[i].Hobby,'Gender': rows[i].Gender,'Age': rows[i].Age,'BirthDate'<span style="color: #000000;"&gt;: rows[i].BirthDate,</span>'Height': rows[i].Height,'Note'<span style="color: #000000;"&gt;: rows[i].Note }); } </span><span style="color: #0000ff;"&gt;if</span> (list.length == 0<span style="color: #000000;"&gt;) { showToast(</span>"请选择一条记录","warning"<span style="color: #000000;"&gt;); </span><span style="color: #0000ff;"&gt;return</span><span style="color: #000000;"&gt;; } </span><span style="color: #0000ff;"&gt;var</span> postData = { 'list': list };<span style="color: #008000;"&gt;//</span><span style="color: #008000;"&gt;可以<a href="https://www.jb51.cc/tag/zengjia/" target="_blank" class="keywords">增加</a>其他参数,如{ 'list': list,'Rucanghao': $("#Rucanghao").val() };</span> postData =<span style="color: #000000;"&gt; JSON.stringify(postData); $.ajax({ url: </span>'/TestUser/SaveExcelData'<span style="color: #000000;"&gt;,type: </span>'post'<span style="color: #000000;"&gt;,dataType: </span>'json'<span style="color: #000000;"&gt;,contentType: </span>'application/json;charset=utf-8'<span style="color: #000000;"&gt;,traditional: </span><span style="color: #0000ff;"&gt;true</span><span style="color: #000000;"&gt;,success: </span><span style="color: #0000ff;"&gt;function</span><span style="color: #000000;"&gt; (data) { </span><span style="color: #0000ff;"&gt;if</span><span style="color: #000000;"&gt; (data.Success) { </span><span style="color: #008000;"&gt;//</span><span style="color: #008000;"&gt;保存成功 1.<a href="https://www.jb51.cc/tag/guanbi/" target="_blank" class="keywords">关闭</a>弹出层,2.清空记录<a href="https://www.jb51.cc/tag/xianshi/" target="_blank" class="keywords">显示</a> 3.刷新主列表</span> showToast("保存成功"<span style="color: #000000;"&gt;); $(</span>"#import").modal("hide"<span style="color: #000000;"&gt;); $(bodyTag).html(</span>""<span style="color: #000000;"&gt;); Refresh(); } </span><span style="color: #0000ff;"&gt;else</span><span style="color: #000000;"&gt; { showToast(</span>"保存失败:" + data.ErrorMessage,"error"<span style="color: #000000;"&gt;); } },data: postData }); }</span></pre>

在实际使用过程中,发现数据几百条的时候,页面就罢工了,不能正常插入,搜索解决问题说是大小受限的问题,但是我在Web.Config里面也设置了上传文件的大小,最终没有找到配置解决思路。

最终这个配置项也无法解决,那么我们只能找其他方式来避免数据大量提交了。

2、使用在控制器后台读取Excel文件导入数据库

以上的数据导入方式,在一般数据比较少的时候,体验还是不错的,不过它的过程也是先上传Excel文件,然后读取Excel里面的记录,转换为对应的List类型,在序列号JSON列表在前端界面展示。

既然我们文件在服务器上,并且也可以通过把Excel文件转换为对应的List,那么我们减少用户勾选的步骤,确认后直接读取导入即可,这样处理应该就没有这样的受限于页面数据大小的问题的。

这样我们以设备信息导入为案例,介绍这个处理过程,如下前端代码是在文件上传到服务器后,用户确认后负责导入的逻辑的。

postData = { 'guid'= $.ajax({ url: </span>'/Device/SaveExcelByGuid'<span style="color: #000000;"&gt;,success: </span><span style="color: #0000ff;"&gt;function</span><span style="color: #000000;"&gt; (data) { </span><span style="color: #0000ff;"&gt;if</span><span style="color: #000000;"&gt; (data.Success) { Refresh(); </span><span style="color: #008000;"&gt;//</span><span style="color: #008000;"&gt;保存成功 1.<a href="https://www.jb51.cc/tag/guanbi/" target="_blank" class="keywords">关闭</a>弹出层,2.清空记录<a href="https://www.jb51.cc/tag/xianshi/" target="_blank" class="keywords">显示</a> 3.刷新主列表</span> showToast("保存成功"<span style="color: #000000;"&gt;); $(</span>"#import").modal("hide"<span style="color: #000000;"&gt;); $(bodyTag).html(</span>""<span style="color: #000000;"&gt;); } </span><span style="color: #0000ff;"&gt;else</span><span style="color: #000000;"&gt; { showToast(</span>"保存失败:" + data.ErrorMessage,data: postData });</span></pre>

最终我们是看到处理方式是在SaveExcelByGuid的控制器方法里面的,这个方法根据服务器的GUID,获取对应Excel文件的信息,然后进行读取和导入操作。

这个方法的详细代码如下所示。

ActionResult SaveExcelByGuid(= (! list = GetDevice(guid);获取对应的Excel文件,并把内容转换为对应的List (list != (DeviceInfo detail isExist = BLLFactory.Instance.IsExistKey( (! result.Success = = = </span><span style="color: #0000ff;"&gt;return</span><span style="color: #000000;"&gt; ToJsonContent(result); }</span></pre>

其中我们看到 GetDevice(guid) 就是获取Excel文件内容并转换为对应的实体类列表过程的。

其中的GetDevice就是转换为对应实体类集合的过程,代码如下所示。

获取设备导入文件,转换为对应的实体类集合 List GetDevice( list = List DataTable table </span>=<span style="color: #000000;"&gt; ConvertExcelFileToTable(guid); </span><span style="color: #0000ff;"&gt;if</span> (table != <span style="color: #0000ff;"&gt;null</span><span style="color: #000000;"&gt;) { </span><span style="color: #0000ff;"&gt;#region</span> 数据转换 <span style="color: #0000ff;"&gt;foreach</span> (DataRow dr <span style="color: #0000ff;"&gt;in</span><span style="color: #000000;"&gt; table.Rows) { DeviceInfo info </span>= <span style="color: #0000ff;"&gt;new</span><span style="color: #000000;"&gt; DeviceInfo(); info.DeviceId </span>= dr[<span style="color: #800000;"&gt;"</span><span style="color: #800000;"&gt;设备ID</span><span style="color: #800000;"&gt;"</span><span style="color: #000000;"&gt;].ToString(); info.VersionInfo </span>= dr[<span style="color: #800000;"&gt;"</span><span style="color: #800000;"&gt;版本信息</span><span style="color: #800000;"&gt;"</span><span style="color: #000000;"&gt;].ToString(); info.MinitorInfo </span>= dr[<span style="color: #800000;"&gt;"</span><span style="color: #800000;"&gt;预留监控信息</span><span style="color: #800000;"&gt;"</span><span style="color: #000000;"&gt;].ToString(); info.DeviceMsisdn </span>= dr[<span style="color: #800000;"&gt;"</span><span style="color: #800000;"&gt;公话手机号</span><span style="color: #800000;"&gt;"</span><span style="color: #000000;"&gt;].ToString(); list.Add(info); } </span><span style="color: #0000ff;"&gt;#endregion</span><span style="color: #000000;"&gt; } </span><span style="color: #0000ff;"&gt;return</span><span style="color: #000000;"&gt; list; }</span></pre>

而 ConvertExcelFileToTable 就是利用aspose.Cell的Excel操作控件,实现数据转换的。

获取第一个Excel文件,并转换Excel数据为对应的DataTable返回 DataTable ConvertExcelFileToTable(= (!获取上传附件的路径 serverRealPath = BLLFactory </span><span style="color: #0000ff;"&gt;if</span> (!<span style="color: #0000ff;"&gt;string</span><span style="color: #000000;"&gt;.IsNullOrEmpty(serverRealPath)) { </span><span style="color: #008000;"&gt;//</span><span style="color: #008000;"&gt;转换Excel<a href="https://www.jb51.cc/tag/wenjian/" target="_blank" class="keywords">文件</a>到DatTable里面</span> <span style="color: #0000ff;"&gt;string</span> error = <span style="color: #800000;"&gt;""</span><span style="color: #000000;"&gt;; dt </span>= <span style="color: #0000ff;"&gt;new</span><span style="color: #000000;"&gt; DataTable(); AsposeExcelTools.ExcelFileToDataTable(serverRealPath,</span><span style="color: #0000ff;"&gt;out</span> dt,<span style="color: #0000ff;"&gt;out</span><span style="color: #000000;"&gt; error); } } </span><span style="color: #0000ff;"&gt;return</span><span style="color: #000000;"&gt; dt; }</span></pre>

这样实现效果,不考虑用户勾选记录的情况,确认后直接对整个Excel文件进行判断导入操作,一般也是符合我们实际的导入过程的,这样处理起来,再也不会有前面介绍的那种情况了,至少我们能够顺利上传Excel文件,在后台读取Excel文件并转换是没有什么压力的,而且体验效果也很不错,非常快速

最后看看大量数据导入后,也能够快速刷新,并能够在分页控件进行展示了。

原文链接:https://www.f2er.com/bootstrap/73632.html

猜你在找的Bootstrap相关文章