摘要:阅读原文如何高效导出百万级数据在一个具有统计功能的系统中,导出功能几乎是一定的,如何导出导出的数据有多少如何高效的导出简介什么是就不用介绍了,这里主要说明不同版本下每个下的行列限制。
阅读原文:POI如何高效导出百万级Excel数据?
在一个具有统计功能的系统中,导出excel功能几乎是一定的,如何导出excel?导出的数据有多少?如何高效的导出?
Excel简介
什么是excel就不用介绍了,这里主要说明不同版本下每个sheet下的行列限制。
版本区间 | 行数 | 列数 | 生成文件后缀 |
---|---|---|---|
Excel 2003及以下 | 65535 | 256 | xls |
Excel 2007及以上 | 1048576 | 16384 | xlsx |
由上面可知 Excel 2003及以下是无法实现单sheet百万级的数据。
Apache POI
简介
Apache POI 是用Java编写的免费开源的跨平台的 Java API,Apache POI提供API给Java程式对Microsoft Office(Excel、WORD、PowerPoint、Visio等)格式档案读和写的功能。POI为“Poor Obfuscation Implementation”的首字母缩写,意为“可怜的模糊实现”。
常用类
HSSF - 提供读写Microsoft Excel XLS格式档案的功能。
XSSF - 提供读写Microsoft Excel OOXML XLSX格式档案的功能。
SXSSF - 一种基于XSSF的低内存占用的API(3.8版本开始出现)。
HWPF - 提供读写Microsoft Word DOC97格式档案的功能。
XWPF - 提供读写Microsoft Word DOC2003格式档案的功能。
HSLF - 提供读写Microsoft PowerPoint格式档案的功能。
HDGF - 提供读Microsoft Visio格式档案的功能。
HPBF - 提供读Microsoft Publisher格式档案的功能。
HSMF - 提供读Microsoft Outlook格式档案的功能。
我们这里是导出Excel,所以使用的是前三个。
导出策略
方案
使用XSSF和SXSSF分别导入1w,10w,100w数据
使用SXSSF,SXSSF以10w分页,SXSSF多线程以10w分页导入100w数据
性能对比
时间不包含网络耗时
图片描述
类型 | 1w条/时间 | 10w条/时间 | 100w条/时间 |
---|---|---|---|
XSSF | 1331ms | 10496ms | 小心电脑
文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。 转载请注明本文地址:https://www.ucloud.cn/yun/73612.html 相关文章
发表评论0条评论lemanli男|高级讲师TA的文章阅读更多
阅读需要支付1元查看
|