文章插图
文章插图
POI实现大数据的导入
之前介绍过通过POI实现数据的导出以及百万数据的导出,今天介绍一般数据以及大数据集的数据导入 。之前介绍过POI操作Excel2007的三种模式:用户模式:有许多分装好的方法操作简单事件模式:基于SAX方式解析XML,他是一个接口,是一种XML解析的替代方法,不同于DOM解析XML文档时把所有数据内容一次性加载到内存,他是逐行扫描SXSSF对象:生成海量Excel数据文件
POI基于用户模式的数据导出
【poi读取excel数据类型 poi读取excel数据一行一行数据存储】主要步骤:根据上传信息创建Workbok根据Workbook创建Sheet读取Sheet行中数据
@ApiOperation(value="http://www.mnbkw.com/jxjc/171536/导入数据")@RequestMapping(value="http://www.mnbkw.com/importpoi",method=RequestMethod.POST)@ResponseBodypublicCommonResultimportExcelPOI(@RequestParam(name="file")MultipartFileimportfile)throwsException{//根据上传信息创建workboolWorkbooksheets=WorkbookFactory.create(importfile.getInputStream());//创建一个sheetSheetsheet=sheets.getSheetAt(0);//从第二行获取数据List<MesAdmin>mesAdmins=newArrayList<>();//从第二行读取数据for(intrown=1;rown<sheet.getLastRowNum();rown++){Rowrow=sheet.getRow(rown);MesAdminmesAdmin=newMesAdmin();for(intcelln=0;celln<row.getLastCellNum();celln++){//此处为数据每行数据以及对每行数据进行操作}}returnCommonResult.success(ResultCode.SUCCESS);}
使用POI的SAX(事件)模式读取百万数据POI在对Excel的XML解析以及做了一些封装,我们只有实现这些封才可以安装SAX方式进行读取Excel,主要就是要实现XSSFSheetXMLHandler.SheetContentsHandler接口,给接口有三个方式需要我们去实现:方法作用public void startRow(int i)开始读取行public void endRow(int i)结束读取行public void cell(String s, String s1, XSSFComment xssfComment)读取行中单元
需求分析
使用POI的SAX模式解析EXCEl文件解决方案
使用SAX模式,逐行扫描文件,一边扫描一遍解析 。不需要将数据存储到内存,对于大型文档解析具有很大优势 。步骤分析
设置POI的时间模式
1.根据Excel获取文件流
2.根据文件流创建OPCPackage
3.创建XSSFReader对象SAX解析
1.自定义Sheet处理器
2.创建Sax的XmlReader
3.设置Sheet事件处理器
4.逐行读取原理分析
Excel2007的本质就是一种特殊的XML存储数据,这样就可以使用基于SXA的方式去解析XML完成对Excel的读取 。SAX提供一种从XML文档读取数据的机制,逐行扫描文档,一边扫描一边解析,解析原理如图:代码实现自定义实现XSSFSheetXMLHandler.SheetContentsHandler处理器
packagecom.macro.mall.tiny.config;importorg.apache.poi.xssf.eventusermodel.XSSFSheetXMLHandler;importorg.apache.poi.xssf.usermodel.XSSFComment;importjava.util.ArrayList;importjava.util.List;//自定义Sheet给予Sax解析处理器publicclassMesSheetHandlerimplementsXSSFSheetXMLHandler.SheetContentsHandler{//行信息privateList<String>lRows=newArrayList<String>();[email protected](inti){if(i>0){lRows.clear();[email protected][email protected](inti){//可以每行都对数据进行插入操作,也可以使用监听进行数据操作System.out.println("i:"+lRows.get(0));[email protected][email protected][email protected][email protected](Strings,Strings1,XSSFCommentxssfComment){if(lRows!=null){lRows.add(s1);}else{lRows.add("");}}}
在Controller层实现解析@ApiOperation(value="http://www.mnbkw.com/jxjc/171536/批量导入用户数据")@RequestMapping(value="http://www.mnbkw.com/importpoi",method=RequestMethod.POST)@ResponseBodypublicCommonResultimportExcelpoiSax(@RequestParam(name="file")MultipartFilemultipartFile,HttpServletRequestrequest)throwsException{//Stringfile="C:/Users/180454/Downloads/1.xlsx";//根据Eccel获取OPCPackage对象OPCPackagepkg=OPCPackage.open(multipartFile.getInputStream());//try{//创建XSSFReaderXSSFReaderxssfReader=newXSSFReader(pkg);//获取SharedStringTable对象SharedStringsTablesharedStringsTable=xssfReader.getSharedStringsTable();//获取StylesTable对象StylesTablestyles=xssfReader.getStylesTable();XMLReaderxmlReader=XMLReaderFactory.createXMLReader();MesSheetHandlermesSheetHandler=newMesSheetHandler();xmlReader.setContentHandler(newXSSFSheetXMLHandler(styles,sharedStringsTable,mesSheetHandler,false));XSSFReader.SheetIteratorsheets=(XSSFReader.SheetIterator)xssfReader.getSheetsData();//每一个Sheetwhile(sheets.hasNext()){InputStreamsheetstream=sheets.next();InputSourcesheetSource=newInputSource(sheetstream);try{xmlReader.parse(sheetSource);LOGGER.info("row:"+"结束");}finally{sheetstream.close();}}}finally{pkg.close();}returnCommonResult.success(ResultCode.SUCCESS);}
总结:通过简单地介绍Excel读取数据的两种模式,可以发现在用户模式下Excel读取实现简单但是内存占用量大,不理想,而事件模式操作比较繁琐,但是可以读取大文件的Excel 。
- 做表格的软件excel教程视频算数 做表格的软件excel教程合并单元格
- 电子表格下载安装,免费的excel在哪下载?
- excel表格怎么排序 excl表格怎样排序
- excel设置了密码怎么把密码解除掉 Excel解除密码
- excel怎么进行回归预测 excel利用回归预测未来数据
- php excel导入数据库更新数据 phpexcel导入数据库乱码
- excel的最新版本是多少 最新版excel是哪个版本
- java excel框架 java实现excel
- Excel怎么设置密码保护 excel怎么设置保护密码怎么设置
- 如何将中国统计年鉴中的数据导出 中国统计年鉴数据怎么导出到excel表格