ajax 导入大量excel,在Web界面中实现Excel数据大量导入的处理方式

里就主要简要介绍下导入的处理逻辑即可,由于是在客户端组装列表数据,然后通过ajax提交的,它的的代码如下所示。(这个也就是后面需要解决的问题)。//保存导入的数据

function SaveImport() {

var list = [];//构造集合对象

var rows = $import.bootstrapTable('getSelections');            for (var i = 0; i 

list.push({                    'Name': rows[i].Name, 'Mobile': rows[i].Mobile, 'Email': rows[i].Email, 'Homepage': rows[i].Homepage,                    'Hobby': rows[i].Hobby, 'Gender': rows[i].Gender, 'Age': rows[i].Age, 'BirthDate': rows[i].BirthDate,                    'Height': rows[i].Height, 'Note': rows[i].Note

});

}            if (list.length == 0) {

showToast("请选择一条记录", "warning");                return;

}            var postData = { 'list': list };//可以增加其他参数,如{ 'list': list, 'Rucanghao': $("#Rucanghao").val() };

postData = JSON.stringify(postData);

$.ajax({                url: '/TestUser/SaveExcelData',                type: 'post',                dataType: 'json',                contentType: 'application/json;charset=utf-8',                traditional: true,                success: function (data) {                    if (data.Success) {                        //保存成功  1.关闭弹出层,2.清空记录显示 3.刷新主列表

showToast("保存成功");

$("#import").modal("hide");

$(bodyTag).html("");

Refresh();

}                    else {

showToast("保存失败:" + data.ErrorMessage, "error");

}

},                data: postData

});

}

在实际使用过程中,发现数据几百条的时候,页面就罢工了,不能正常插入,搜索下解决问题说是大小受限的问题,但是我在Web.Config里面也设置了上传文件的大小,最终没有找到配置解决思路。

useFullyQualifiedRedirectUrl="true" minFreeThreads="8"

minLocalRequestFreeThreads="4" appRequestQueueLimit="100"  enableVersionHeader="true"/>

最终这个配置项也无法解决,那么我们只能找其他方式来避免数据大量提交了。

2、使用在控制器后台读取Excel文件导入数据库

以上的数据导入方式,在一般数据比较少的时候,体验还是不错的,不过它的过程也是先上传Excel文件,然后读取Excel里面的记录,转换为对应的List类型,在序列号JSON列表在前端界面展示。

既然我们文件在服务器上,并且也可以通过把Excel文件转换为对应的List,那么我们减少用户勾选的步骤,确认后直接读取导入即可,这样处理应该就没有这样的受限于页面数据大小的问题的。

这样我们以设备信息导入为案例,介绍这个处理过程,如下前端代码是在文件上传到服务器后,用户确认后负责导入的逻辑的。//保存导入的数据

function SaveImport() {            var postData = { 'guid': importGuid };

postData = JSON.stringify(postData);

$.ajax({                url: '/Device/SaveExcelByGuid',                type: 'post',                dataType: 'json',                contentType: 'application/json;charset=utf-8',                traditional: true,                success: function (data) {                    if (data.Success) {

Refresh();                        //保存成功  1.关闭弹出层,2.清空记录显示 3.刷新主列表

showToast("保存成功");

$("#import").modal("hide");

$(bodyTag).html("");

}                    else {

showToast("保存失败:" + data.ErrorMessage, "error");

}

},                data: postData

});

最终我们是看到处理方式是在SaveExcelByGuid的控制器方法里面的,这个方法根据服务器的GUID,获取对应Excel文件的信息,然后进行读取和导入操作。

这个方法的详细代码如下所示。/// 

/// 在服务端保存Excel

/// 

/// 

/// 

public ActionResult SaveExcelByGuid(string guid)

{

CommonResult result = new CommonResult();            if(!string.IsNullOrEmpty(guid))

{                var list = GetDevice(guid);//根据guid获取对应的Excel文件,并把内容转换为对应的List

if (list != null)

{                    foreach (DeviceInfo detail in list)

{                        var isExist = BLLFactory.Instance.IsExistKey("DeviceId", detail.DeviceId);                        if (!isExist)

{

BLLFactory.Instance.Insert(detail);

}

}                    //成功操作

result.Success = true;

}                else

{

result.ErrorMessage = "导入信息不能为空";

}

}            else

{

result.ErrorMessage = "导入信息不能为空";

}            return ToJsonContent(result);

}

其中我们看到 GetDevice(guid) 就是获取Excel文件内容并转换为对应的实体类列表过程的。

其中的GetDevice就是转换为对应实体类集合的过程,代码如下所示。/// 

/// 获取设备导入文件,转换为对应的实体类集合

/// 

/// 附件GUID

/// 

private List GetDevice(string guid)

{            List list = new List();

DataTable table = ConvertExcelFileToTable(guid);            if (table != null)

{                #region 数据转换

foreach (DataRow dr in table.Rows)

{

DeviceInfo info = new DeviceInfo();

info.DeviceId = dr["设备ID"].ToString();

info.VersionInfo = dr["版本信息"].ToString();

info.MinitorInfo = dr["预留监控信息"].ToString();

info.DeviceMsisdn = dr["公话手机号"].ToString();                    list.Add(info);

}                #endregion

}            return list;

}

而 ConvertExcelFileToTable 就是利用aspose.Cell的Excel操作控件,实现数据转换的。/// 

/// 从附件列表中获取第一个Excel文件,并转换Excel数据为对应的DataTable返回

/// 

/// 附件的Guid

/// 

protected DataTable ConvertExcelFileToTable(string guid)

{

DataTable dt = null;            if (!string.IsNullOrEmpty(guid))

{                //获取上传附件的路径

string serverRealPath = BLLFactory.Instance.GetFirstFilePath(guid);                if (!string.IsNullOrEmpty(serverRealPath))

{                    //转换Excel文件到DatTable里面

string error = "";

dt = new DataTable();

AsposeExcelTools.ExcelFileToDataTable(serverRealPath, out dt, out error);

}

}            return dt;

}

这样实现效果,不考虑用户勾选记录的情况,确认后直接对整个Excel文件进行判断导入操作,一般也是符合我们实际的导入过程的,这样处理起来,再也不会有前面介绍的那种情况了,至少我们能够顺利上传Excel文件,在后台读取Excel文件并转换是没有什么压力的,而且体验效果也很不错,非常快速。

作者:伍华聪_开发框架

链接:https://www.jianshu.com/p/dd3e293a9803

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
poi解析excel功能参数说明 此项目是基于springMVC实现的,基本流程为从前台jsp页面使用Ajax文件上传导入excel文件(.xls(97-03)/.xlsx(07以后)),传到后台controller调用相应工具类解析后返回指定参数做后续处理. 1. POIUtil.java工具类 解析通过MutilpartFile导入Excel并解析里面数据,先判断文件的类型(excel处理有两种此处为两种通用)是.xls/.xlsx,通过workbook.getNumberOfSheets()获取工作簿数量,遍历工作簿,sheet.getLastRowNum()获取最大行数,将每行数据放入List list = new Array List(),并根据excel数据类型将器转换为字符串、数字、Boolean、公式、空值类型防止出现错误,最后返回一个list. 2. ExcelUtil.java工具类 解析通过MutilpartFile导入Excel并解析里面数据,先判断文件的类型(excel处理有两种此处为两种通用)是.xls/.xlsx,采用Apache的POI的API来操作Excel,读取内容后保存到List,再将List转Json(使用Linked,增删快,与Excel表顺序保持一致),Sheet表1————>List1<Map> 步骤1:根据Excel版本类型创建对于的Workbook以及CellSytle 步骤2:遍历每一个表的每一行的每一列,这里做了些小改动,因为后续可能解析过后可能会保存入数据库,这里为第一行数据添加一个自定义表头 String[] p = new String[]{"name","age","sex","tel","address","e-mail","phone"}; 遍历的列数量以p的length为准 步骤3:一个sheet表就是一个Json,多表就多Json,对应一个 List 一个sheet表的一行数据就是一个 Map 一行的一列,就把当前列头为key,列值为value存到该列的Map Map 一个线性Hash Map,以Excel的sheet表顺序,并以sheet表明作为key,sheet表转换Json后的字符串作为value 最后返回一个LinkedHashMap 3. ExcelToJsonPoi.java工具类 这个与上面工具类类似,不过这个是解析本地excel文件不是使用的流,使用迭代遍历sheet工作簿与每行每列的值,将所有类型作为String类型处理返回一个json对象输出至控制台
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值