文档章节

Java ST模板方式导出大批量数据到Excel

 兜兜乐
发布于 2016/05/06 17:57
字数 1532
阅读 37
收藏 1

程序执行时,出现的错误现象如下:
1.前端导出大数据,显示响应超时,导出的文件无返回;
2.数据量上万时,导出半小时无反映,数据量过大,后台也容易造成内存溢出。

 

针对以上现象,急需调整导出策略,主要思路如下:
1.修改程序,增加条件过滤,比如,限定导出数据的类别、设置时间范围或状态值等,达到缩小一次导出大量数据的目的。

2.优化导出sql

3.根据数据量的大小,分sheet

4.换一种导出方式,使用最普通的java基础技术,IO流来实现,不依赖poi,jxl等导出方式

 

下面整理一下调整的方法和步骤。

首先需要引入两个jar

pom.xml
<dependency>
    <groupId>antlr</groupId>
    <artifactId>antlr</artifactId>
    <version>2.7.7</version>
</dependency>
<dependency>
    <groupId>org.antlr</groupId>
    <artifactId>stringtemplate</artifactId>
    <version>3.2.1</version>
</dependency>

ST Excel模板文件

head.st
<?xml version="1.0"?>
<?mso-application progid="Excel.Sheet"?>
<Workbook xmlns="urn:schemas-microsoft-com:office:spreadsheet"
    xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:x="urn:schemas-microsoft-com:office:excel"
    xmlns:ss="urn:schemas-microsoft-com:office:spreadsheet" xmlns:html="<a href="http://www.w3.org/TR/REC-html40" "="" style="color: rgb(53, 114, 176); text-decoration: none; border-radius: 0px !important; border: 0px !important; bottom: auto !important; float: none !important; height: auto !important; left: auto !important; margin: 0px !important; outline: 0px !important; overflow: visible !important; padding: 0px !important; position: static !important; right: auto !important; top: auto !important; vertical-align: baseline !important; width: auto !important; box-sizing: content-box !important; min-height: auto !important; background: none !important;">http://www.w3.org/TR/REC-html40">
    <DocumentProperties xmlns="urn:schemas-microsoft-com:office:office">
        <Created>1996-12-17T01:32:42Z</Created>
        <LastSaved>2013-08-02T09:21:24Z</LastSaved>
        <Version>11.9999</Version>
    </DocumentProperties>
    <OfficeDocumentSettings xmlns="urn:schemas-microsoft-com:office:office">
        <RemovePersonalInformation />
    </OfficeDocumentSettings>
    <ExcelWorkbook xmlns="urn:schemas-microsoft-com:office:excel">
        <WindowHeight>4530</WindowHeight>
        <WindowWidth>8505</WindowWidth>
        <WindowTopX>480</WindowTopX>
        <WindowTopY>120</WindowTopY>
        <AcceptLabelsInFormulas />
        <ProtectStructure>False</ProtectStructure>
        <ProtectWindows>False</ProtectWindows>
    </ExcelWorkbook>
    <Styles>
        <Style ss:ID="Default" ss:Name="Normal">
            <Alignment ss:Vertical="Bottom" />
            <Borders />
            <Font ss:FontName="Arial" x:Family="Swiss" />
            <Interior />
            <NumberFormat />
            <Protection />
        </Style>
        <Style ss:ID="s40" ss:Name="差">
            <Font ss:FontName="宋体" x:CharSet="134" ss:Size="11" ss:Color="#9C0006" />
            <Interior ss:Color="#FFC7CE" ss:Pattern="Solid" />
        </Style>
        <Style ss:ID="s63" ss:Parent="s40">
            <Alignment ss:Vertical="Bottom" />
            <Borders />
            <Font ss:FontName="Calibri" x:Family="Swiss" ss:Size="11"
                ss:Color="#800080" />
            <Interior />
        </Style>
        <Style ss:ID="s64">
            <Font ss:FontName="Arial" x:Family="Swiss" />
        </Style>
        <Style ss:ID="s65">
            <Borders />
            <Font ss:FontName="Arial" x:Family="Swiss" />
        </Style>
        <Style ss:ID="s68">
            <Font ss:FontName="宋体" x:CharSet="134" />
        </Style>
        <Style ss:ID="s69">
            <NumberFormat ss:Format="@" />
        </Style>
        <Style ss:ID="s70" ss:Parent="s40">
            <Alignment ss:Vertical="Bottom" />
            <Borders />
            <Font ss:FontName="Calibri" x:Family="Swiss" ss:Size="11"
                ss:Color="#800080" />
            <Interior />
            <NumberFormat ss:Format="@" />
        </Style>
    </Styles>
body.st
$worksheet:{
<Worksheet ss:Name="$it.sheet$">
    <Table ss:ExpandedColumnCount="$it.columnNum$"
        ss:ExpandedRowCount="$it.rowNum$" x:FullColumns="1" x:FullRows="1"
        ss:DefaultColumnWidth="54" ss:DefaultRowHeight="14.25">
        <Row>
            $it.title:{
            <Cell>
                <Data ss:Type="String">$it$</Data>
            </Cell>
            }$
        </Row>
        $it.rows:{
        <Row>
            $it.result:{
            <Cell ss:StyleID="s63">
                <Data ss:Type="String">$it$</Data>
            </Cell>
            }$
        </Row>
        }$
    </Table>
</Worksheet>
}$

Worksheet类代码如下:

Worksheet.java
package com.clazz.export.util;
import java.util.List;
class Row{
    private List<String> result;
     
    private String styleId;
    public List<String> getResult() {
        return result;
    }
    public void setResult(List<String> result) {
        this.result = result;
    }
    public String getStyleId() {
        return styleId;
    }
    public void setStyleId(String styleId) {
        this.styleId = styleId;
    }
     
}
class Worksheet{
    private String sheet;
     
    private int columnNum;
     
    private int rowNum;
    private List<String> title;
     
    private List<Row> rows;
    public String getSheet() {
        return sheet;
    }
    public void setSheet(String sheet) {
        this.sheet = sheet;
    }
    public List<Row> getRows() {
        return rows;
    }
    public void setRows(List<Row> rows) {
        this.rows = rows;
    }
    public int getColumnNum() {
        return columnNum;
    }
    public void setColumnNum(int columnNum) {
        this.columnNum = columnNum;
    }
    public int getRowNum() {
        return rowNum;
    }
    public void setRowNum(int rowNum) {
        this.rowNum = rowNum;
    }
    public List<String> getTitle() {
        return title;
    }
    public void setTitle(List<String> title) {
        this.title = title;
    }
}

ExcelStUtil类代码如下:

ExcelStUtil.java
package com.clazz.export.util;
import java.io.IOException;
import java.io.PrintWriter;
import java.lang.annotation.Annotation;
import java.lang.reflect.Field;
import java.lang.reflect.InvocationTargetException;
import java.lang.reflect.Method;
import java.text.SimpleDateFormat;
import java.util.ArrayList;
import java.util.Collection;
import java.util.Date;
import java.util.List;
import javax.xml.bind.annotation.XmlElement;
import org.antlr.stringtemplate.StringTemplate;
import org.antlr.stringtemplate.StringTemplateGroup;
import com.clazz.export.DeliveryItemSum;
/**
 * @author ethan
 * 导出工具类
 */
public class ExcelStUtil {
    /**
     * 模板路径
     */
    private static final String shipmentsTempHead ="com/clazz/export/util/head";
    private static final String shipmentsTempBody ="com/clazz/export/util/body";
    /**
     *
     * @param outList   导出数据
     * @param sheetList sheet名称
     * @param max       特殊需求,子项为不固定列
     * @param writer    输出
     * @throws NoSuchMethodException
     * @throws InvocationTargetException
     * @throws IllegalAccessException
     */
    public static void export(List<List> outList,List<String> sheetList,int max,PrintWriter writer) throws NoSuchMethodException, InvocationTargetException, IllegalAccessException {
        long startTime = System.currentTimeMillis();
        StringTemplateGroup stGroup = new StringTemplateGroup("stringTemplate");
        //解决可能发生的中文乱码
        stGroup.setFileCharEncoding("UTF-8");
        //写入excel文件头部信息
        StringTemplate head =  stGroup.getInstanceOf(shipmentsTempHead);
        writer.print(head.toString());
        writer.flush();
        for(int i = 0 ; i < outList.size(); i++){
            //标题
            List<String> title = new ArrayList<String>();
            //方法名称
            List<Method> getMethods = new ArrayList<Method>();
            Class<?> clazz = outList.get(i).get(0).getClass();
            Field[] fields = clazz.getDeclaredFields();
            if(fields != null && fields.length > 0){
                for(Field field : fields){
                    if(!"serialVersionUID".equals(field.getName())) {
                        if(!"deliveryItemSumList".equals(field.getName()) && !"deliveryId".equals(field.getName())&& !"status".equals(field.getName())){
                            //获取属性上的指定类型的注释
                            Annotation annotation = field.getAnnotation(XmlElement.class);
                            //有该类型的注释存在
                            if (annotation!=null) {
                            //强制转化为相应的注释  
                            XmlElement xmlElement = (XmlElement)annotation;
                             
                            title.add(xmlElement.name());
                            }
                        }
                        if(!"deliveryId".equals(field.getName()) && !"status".equals(field.getName())){
                            getMethods.add(clazz.getDeclaredMethod("get" + field.getName().substring(0, 1).toUpperCase() + field.getName().substring(1)));
                        }
                    }
                }
                if(max > 0){
                    for(int j = 1; j <= max; j++){
                        //商品名${col.colNum}  货号${col.colNum} 定价${col.colNum} 数量${col.colNum} 码洋${col.colNum} </jx:forEach>
                        title.add("商品名" + j);
                        title.add("货号" + j);
                        title.add("定价" + j);
                        title.add("数量" + j);
                        title.add("码洋" + j);
                    }
                }
            }
             
            int columnLength = title.size();
            int rowNum = outList.get(i).size();
            SimpleDateFormat sdf = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss");
            /*
             * 写入excel sheet
             */
            if(outList.get(i).size() > 0){
                StringTemplate body =  stGroup.getInstanceOf(shipmentsTempBody);
                Worksheet worksheet = new Worksheet();
                worksheet.setTitle(title);
                worksheet.setSheet(sheetList.get(i));
                worksheet.setColumnNum(columnLength);
                worksheet.setRowNum(rowNum+1);
                List<Row> rows = new ArrayList<Row>();
                int startIndex = 0;
                int endIndex = rowNum-1;
                for(int j=startIndex;j<=endIndex;j++){
                    String deliveryStyle = "s63";
                    Row row = new Row();
                    List<String> result = new ArrayList<String>();
                    for(int n=0;n<getMethods.size();n++){
                        Object value = getMethods.get(n).invoke(outList.get(i).get(j));
                        if(value == null){
                            result.add("");
                        }else{
                            if(value instanceof Date){
                                result.add(sdf.format((Date)value));
                            }if(value instanceof Collection){
                                @SuppressWarnings("unchecked")
                                List<DeliveryItemSum> deliveryItemSumList = (List<DeliveryItemSum>)value;
                                for(int k = 0; k < deliveryItemSumList.size(); k++){
                                    deliveryStyle = "s65";
                                    //因为模板是XML格式,需要对特殊标签进行转意
                                    result.add(deliveryItemSumList.get(k).getTitle().replace("<", "&lt;").replace(">", "&gt;"));
                                    result.add(deliveryItemSumList.get(k).getSku());
                                    result.add(deliveryItemSumList.get(k).getPrice());
                                    result.add(deliveryItemSumList.get(k).getNums());
                                    result.add(deliveryItemSumList.get(k).getReturnAmount());
                                }
                            }else{
                                result.add(value.toString().replace("<", "&lt;").replace(">", "&gt;"));
                            }
                        }
                    }
                     
                    row.setResult(result);
                    row.setStyleId(deliveryStyle);
                    rows.add(row);
                }
                worksheet.setRows(rows);
                body.setAttribute("worksheet", worksheet);
                writer.print(body.toString());
                writer.flush();
                rows.clear();
                rows = null;
                worksheet = null;
                body = null;
                Runtime.getRuntime().gc();
            }
        }
        //写入excel文件尾部
        writer.print("</Workbook>");
        writer.flush();
        writer.close();
    }
     
    public static void exportUtil(List<List> outList,List<String> sheetList,int max,PrintWriter printWriter)throws IOException, NoSuchMethodException, IllegalAccessException, InvocationTargetException {
        ExcelStUtil.export(outList,sheetList,max, printWriter);
    }
}

Excel ST模板制作方法
下面我将以2007版Excel为例,展示转换xml格式的模板文件。
1.新建一个空Excel;
2.点击菜单->文件->导出->选择另存为,XML电子表格2003(*.xml);
3.以文本方式打开xml文件;
4.将xml文件重命名为.st。

 

模板的样式使用方法

可以在模板里面指定样式,在Row-> Cell 指定ss:StyleID="sContent"

也可以自己根据需求,灵活增加样式


© 著作权归作者所有

共有 人打赏支持
粉丝 1
博文 2
码字总数 2158
作品 0
海淀
高级程序员
java基于poi实现快速操作Excel的工具[v2.1.0]版本更新

Excel4J v2.x 一. v2.x新特性 Excel读取支持部分类型转换了(如转为Integer,Long,Date(部分)等) v2.0.0之前只能全部内容转为String Excel支持非注解读取Excel内容了,内容存于对象内 现在支持导...

Crab2Died
2017/10/28
0
1
java poi导入excel日期处理

java导入execl常见问题 一,导入的日期为一串数字 如“320422192610161818” 1, 在java导出excel时获取到的日期或其他列是一串数字,并且不管怎么更改都为数字则可以判断为模板有问题 解决办...

菜鸟来了
2015/04/18
0
0
Apache POI操作Excel导出JAVABEAN对象方法

Apache POI操作Excel导出方法说明 Apache的POI组件是Java操作Microsoft Office办公套件的强大API,其中对Word,Excel和PowperPoint都有支持,当然使用较多的还是Excel,因为Word和PowerPoin...

JAVA枪手
2014/05/08
0
0
Apache POI 操作Word部分

Apache POI ----Word部分 最近在研究Apache POI,不过只研究了如何做word的部分。网上对于Excel等的介绍也很多例子也很多,但是对于word缺少的可怜,导致我学的也很费劲,只能算是会了皮毛。...

QH_C
2014/11/15
0
0
Java快速开发平台,JEECG 3.7.7闪电版本发布,增加多套主流UI代码生成器模板

JEECG 3.7.7 闪电版本发布,提供5套主流UI代码生成器模板 导读 ⊙平台性能优化,速度闪电般提升 ⊙提供5套新的主流UI代码生成器模板(Bootstrap表单+BootstrapTable列表 ElementUI列表表单)...

Jeecg
07/16
0
0

没有更多内容

加载失败,请刷新页面

加载更多

中秋快乐!!!

HiBlock
21分钟前
0
0
Node安装教程

1、安装最新版的node 2、设置相关目录(以D盘为例) 分别建立目录:D:\node,D:\node\node-globa,D:\node\node-cache 命令行输入: // 设置npm国内镜像 npm config set registry https://re...

Mohan710
49分钟前
1
0
中国发布域名系统基础软件 “红枫”

9月12日消息,域名工程中心(英文缩写 ZDNS)发布了宣称自主开发的域名系统基础软件 “红枫(Maple DNS)”。 9月12日消息,域名工程中心(英文缩写 ZDNS)发布了宣称自主开发的域名系统基础软...

问题终结者
今天
3
0
Shell编程(分发系统介绍、expect远程登录、expect远程执行命令、expect传递参数)

分发系统介绍expect 分发系统expect即分发脚本,是一种脚本语言;通过他可以实现传输,输入命令(上线代码) 应用场景:业务越来越大,网站app,后端,编程语言是php,所以就需要配置lamp或者...

蛋黄_Yolks
今天
2
0
Java Http请求工具类

public static String httpPost(String source, String params) {URL url = null;HttpURLConnection conn = null;OutputStream os = null;String ret = null;try {......

yuewawa
今天
3
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部