文档章节

Java ST模板方式导出大批量数据到Excel

 兜兜乐
发布于 2016/05/06 17:57
字数 1532
阅读 26
收藏 1
点赞 2
评论 0

程序执行时,出现的错误现象如下:
1.前端导出大数据,显示响应超时,导出的文件无返回;
2.数据量上万时,导出半小时无反映,数据量过大,后台也容易造成内存溢出。

 

针对以上现象,急需调整导出策略,主要思路如下:
1.修改程序,增加条件过滤,比如,限定导出数据的类别、设置时间范围或状态值等,达到缩小一次导出大量数据的目的。

2.优化导出sql

3.根据数据量的大小,分sheet

4.换一种导出方式,使用最普通的java基础技术,IO流来实现,不依赖poi,jxl等导出方式

 

下面整理一下调整的方法和步骤。

首先需要引入两个jar

pom.xml
<dependency>
    <groupId>antlr</groupId>
    <artifactId>antlr</artifactId>
    <version>2.7.7</version>
</dependency>
<dependency>
    <groupId>org.antlr</groupId>
    <artifactId>stringtemplate</artifactId>
    <version>3.2.1</version>
</dependency>

ST Excel模板文件

head.st
<?xml version="1.0"?>
<?mso-application progid="Excel.Sheet"?>
<Workbook xmlns="urn:schemas-microsoft-com:office:spreadsheet"
    xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:x="urn:schemas-microsoft-com:office:excel"
    xmlns:ss="urn:schemas-microsoft-com:office:spreadsheet" xmlns:html="<a href="http://www.w3.org/TR/REC-html40" "="" style="color: rgb(53, 114, 176); text-decoration: none; border-radius: 0px !important; border: 0px !important; bottom: auto !important; float: none !important; height: auto !important; left: auto !important; margin: 0px !important; outline: 0px !important; overflow: visible !important; padding: 0px !important; position: static !important; right: auto !important; top: auto !important; vertical-align: baseline !important; width: auto !important; box-sizing: content-box !important; min-height: auto !important; background: none !important;">http://www.w3.org/TR/REC-html40">
    <DocumentProperties xmlns="urn:schemas-microsoft-com:office:office">
        <Created>1996-12-17T01:32:42Z</Created>
        <LastSaved>2013-08-02T09:21:24Z</LastSaved>
        <Version>11.9999</Version>
    </DocumentProperties>
    <OfficeDocumentSettings xmlns="urn:schemas-microsoft-com:office:office">
        <RemovePersonalInformation />
    </OfficeDocumentSettings>
    <ExcelWorkbook xmlns="urn:schemas-microsoft-com:office:excel">
        <WindowHeight>4530</WindowHeight>
        <WindowWidth>8505</WindowWidth>
        <WindowTopX>480</WindowTopX>
        <WindowTopY>120</WindowTopY>
        <AcceptLabelsInFormulas />
        <ProtectStructure>False</ProtectStructure>
        <ProtectWindows>False</ProtectWindows>
    </ExcelWorkbook>
    <Styles>
        <Style ss:ID="Default" ss:Name="Normal">
            <Alignment ss:Vertical="Bottom" />
            <Borders />
            <Font ss:FontName="Arial" x:Family="Swiss" />
            <Interior />
            <NumberFormat />
            <Protection />
        </Style>
        <Style ss:ID="s40" ss:Name="差">
            <Font ss:FontName="宋体" x:CharSet="134" ss:Size="11" ss:Color="#9C0006" />
            <Interior ss:Color="#FFC7CE" ss:Pattern="Solid" />
        </Style>
        <Style ss:ID="s63" ss:Parent="s40">
            <Alignment ss:Vertical="Bottom" />
            <Borders />
            <Font ss:FontName="Calibri" x:Family="Swiss" ss:Size="11"
                ss:Color="#800080" />
            <Interior />
        </Style>
        <Style ss:ID="s64">
            <Font ss:FontName="Arial" x:Family="Swiss" />
        </Style>
        <Style ss:ID="s65">
            <Borders />
            <Font ss:FontName="Arial" x:Family="Swiss" />
        </Style>
        <Style ss:ID="s68">
            <Font ss:FontName="宋体" x:CharSet="134" />
        </Style>
        <Style ss:ID="s69">
            <NumberFormat ss:Format="@" />
        </Style>
        <Style ss:ID="s70" ss:Parent="s40">
            <Alignment ss:Vertical="Bottom" />
            <Borders />
            <Font ss:FontName="Calibri" x:Family="Swiss" ss:Size="11"
                ss:Color="#800080" />
            <Interior />
            <NumberFormat ss:Format="@" />
        </Style>
    </Styles>
body.st
$worksheet:{
<Worksheet ss:Name="$it.sheet$">
    <Table ss:ExpandedColumnCount="$it.columnNum$"
        ss:ExpandedRowCount="$it.rowNum$" x:FullColumns="1" x:FullRows="1"
        ss:DefaultColumnWidth="54" ss:DefaultRowHeight="14.25">
        <Row>
            $it.title:{
            <Cell>
                <Data ss:Type="String">$it$</Data>
            </Cell>
            }$
        </Row>
        $it.rows:{
        <Row>
            $it.result:{
            <Cell ss:StyleID="s63">
                <Data ss:Type="String">$it$</Data>
            </Cell>
            }$
        </Row>
        }$
    </Table>
</Worksheet>
}$

Worksheet类代码如下:

Worksheet.java
package com.clazz.export.util;
import java.util.List;
class Row{
    private List<String> result;
     
    private String styleId;
    public List<String> getResult() {
        return result;
    }
    public void setResult(List<String> result) {
        this.result = result;
    }
    public String getStyleId() {
        return styleId;
    }
    public void setStyleId(String styleId) {
        this.styleId = styleId;
    }
     
}
class Worksheet{
    private String sheet;
     
    private int columnNum;
     
    private int rowNum;
    private List<String> title;
     
    private List<Row> rows;
    public String getSheet() {
        return sheet;
    }
    public void setSheet(String sheet) {
        this.sheet = sheet;
    }
    public List<Row> getRows() {
        return rows;
    }
    public void setRows(List<Row> rows) {
        this.rows = rows;
    }
    public int getColumnNum() {
        return columnNum;
    }
    public void setColumnNum(int columnNum) {
        this.columnNum = columnNum;
    }
    public int getRowNum() {
        return rowNum;
    }
    public void setRowNum(int rowNum) {
        this.rowNum = rowNum;
    }
    public List<String> getTitle() {
        return title;
    }
    public void setTitle(List<String> title) {
        this.title = title;
    }
}

ExcelStUtil类代码如下:

ExcelStUtil.java
package com.clazz.export.util;
import java.io.IOException;
import java.io.PrintWriter;
import java.lang.annotation.Annotation;
import java.lang.reflect.Field;
import java.lang.reflect.InvocationTargetException;
import java.lang.reflect.Method;
import java.text.SimpleDateFormat;
import java.util.ArrayList;
import java.util.Collection;
import java.util.Date;
import java.util.List;
import javax.xml.bind.annotation.XmlElement;
import org.antlr.stringtemplate.StringTemplate;
import org.antlr.stringtemplate.StringTemplateGroup;
import com.clazz.export.DeliveryItemSum;
/**
 * @author ethan
 * 导出工具类
 */
public class ExcelStUtil {
    /**
     * 模板路径
     */
    private static final String shipmentsTempHead ="com/clazz/export/util/head";
    private static final String shipmentsTempBody ="com/clazz/export/util/body";
    /**
     *
     * @param outList   导出数据
     * @param sheetList sheet名称
     * @param max       特殊需求,子项为不固定列
     * @param writer    输出
     * @throws NoSuchMethodException
     * @throws InvocationTargetException
     * @throws IllegalAccessException
     */
    public static void export(List<List> outList,List<String> sheetList,int max,PrintWriter writer) throws NoSuchMethodException, InvocationTargetException, IllegalAccessException {
        long startTime = System.currentTimeMillis();
        StringTemplateGroup stGroup = new StringTemplateGroup("stringTemplate");
        //解决可能发生的中文乱码
        stGroup.setFileCharEncoding("UTF-8");
        //写入excel文件头部信息
        StringTemplate head =  stGroup.getInstanceOf(shipmentsTempHead);
        writer.print(head.toString());
        writer.flush();
        for(int i = 0 ; i < outList.size(); i++){
            //标题
            List<String> title = new ArrayList<String>();
            //方法名称
            List<Method> getMethods = new ArrayList<Method>();
            Class<?> clazz = outList.get(i).get(0).getClass();
            Field[] fields = clazz.getDeclaredFields();
            if(fields != null && fields.length > 0){
                for(Field field : fields){
                    if(!"serialVersionUID".equals(field.getName())) {
                        if(!"deliveryItemSumList".equals(field.getName()) && !"deliveryId".equals(field.getName())&& !"status".equals(field.getName())){
                            //获取属性上的指定类型的注释
                            Annotation annotation = field.getAnnotation(XmlElement.class);
                            //有该类型的注释存在
                            if (annotation!=null) {
                            //强制转化为相应的注释  
                            XmlElement xmlElement = (XmlElement)annotation;
                             
                            title.add(xmlElement.name());
                            }
                        }
                        if(!"deliveryId".equals(field.getName()) && !"status".equals(field.getName())){
                            getMethods.add(clazz.getDeclaredMethod("get" + field.getName().substring(0, 1).toUpperCase() + field.getName().substring(1)));
                        }
                    }
                }
                if(max > 0){
                    for(int j = 1; j <= max; j++){
                        //商品名${col.colNum}  货号${col.colNum} 定价${col.colNum} 数量${col.colNum} 码洋${col.colNum} </jx:forEach>
                        title.add("商品名" + j);
                        title.add("货号" + j);
                        title.add("定价" + j);
                        title.add("数量" + j);
                        title.add("码洋" + j);
                    }
                }
            }
             
            int columnLength = title.size();
            int rowNum = outList.get(i).size();
            SimpleDateFormat sdf = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss");
            /*
             * 写入excel sheet
             */
            if(outList.get(i).size() > 0){
                StringTemplate body =  stGroup.getInstanceOf(shipmentsTempBody);
                Worksheet worksheet = new Worksheet();
                worksheet.setTitle(title);
                worksheet.setSheet(sheetList.get(i));
                worksheet.setColumnNum(columnLength);
                worksheet.setRowNum(rowNum+1);
                List<Row> rows = new ArrayList<Row>();
                int startIndex = 0;
                int endIndex = rowNum-1;
                for(int j=startIndex;j<=endIndex;j++){
                    String deliveryStyle = "s63";
                    Row row = new Row();
                    List<String> result = new ArrayList<String>();
                    for(int n=0;n<getMethods.size();n++){
                        Object value = getMethods.get(n).invoke(outList.get(i).get(j));
                        if(value == null){
                            result.add("");
                        }else{
                            if(value instanceof Date){
                                result.add(sdf.format((Date)value));
                            }if(value instanceof Collection){
                                @SuppressWarnings("unchecked")
                                List<DeliveryItemSum> deliveryItemSumList = (List<DeliveryItemSum>)value;
                                for(int k = 0; k < deliveryItemSumList.size(); k++){
                                    deliveryStyle = "s65";
                                    //因为模板是XML格式,需要对特殊标签进行转意
                                    result.add(deliveryItemSumList.get(k).getTitle().replace("<", "&lt;").replace(">", "&gt;"));
                                    result.add(deliveryItemSumList.get(k).getSku());
                                    result.add(deliveryItemSumList.get(k).getPrice());
                                    result.add(deliveryItemSumList.get(k).getNums());
                                    result.add(deliveryItemSumList.get(k).getReturnAmount());
                                }
                            }else{
                                result.add(value.toString().replace("<", "&lt;").replace(">", "&gt;"));
                            }
                        }
                    }
                     
                    row.setResult(result);
                    row.setStyleId(deliveryStyle);
                    rows.add(row);
                }
                worksheet.setRows(rows);
                body.setAttribute("worksheet", worksheet);
                writer.print(body.toString());
                writer.flush();
                rows.clear();
                rows = null;
                worksheet = null;
                body = null;
                Runtime.getRuntime().gc();
            }
        }
        //写入excel文件尾部
        writer.print("</Workbook>");
        writer.flush();
        writer.close();
    }
     
    public static void exportUtil(List<List> outList,List<String> sheetList,int max,PrintWriter printWriter)throws IOException, NoSuchMethodException, IllegalAccessException, InvocationTargetException {
        ExcelStUtil.export(outList,sheetList,max, printWriter);
    }
}

Excel ST模板制作方法
下面我将以2007版Excel为例,展示转换xml格式的模板文件。
1.新建一个空Excel;
2.点击菜单->文件->导出->选择另存为,XML电子表格2003(*.xml);
3.以文本方式打开xml文件;
4.将xml文件重命名为.st。

 

模板的样式使用方法

可以在模板里面指定样式,在Row-> Cell 指定ss:StyleID="sContent"

也可以自己根据需求,灵活增加样式


© 著作权归作者所有

共有 人打赏支持
粉丝 1
博文 2
码字总数 2158
作品 0
海淀
高级程序员
Java 代码生成器 - InfinityJEEEU

无垠式 Java 代码生成器 JEEEU 版 项目介绍 这是最轻量级的代码生成器,生成物大概占用7.5M数据大小。 采用Servlet,JSP, JSON, Easy UI等简单技术实现,是标准的Model2的MVC设计模式的架构。...

火箭船 ⋅ 05/28 ⋅ 0

java面试必备之ThreadLocal

按照传统的经验,如果某个对象是非线程安全的,在多线程环境下对象的访问需要采用synchronized进行同步。但是模板类并未采用线程同步机制,因为线程同步会降低系统的并发性能,此外代码同步解...

编程老司机 ⋅ 05/16 ⋅ 0

解读POI操作之表格导出(生成多个sheet)

Java表格导出的方式有很多,有前端弹出对话框的形式,有poi操作,有jxl操作,可以说实现的形式多种多样。下面我用的只是其中一个poi操作Excel表格,同时可以在一张表格中生成多个sheet,后端...

海岸线的曙光 ⋅ 03/28 ⋅ 0

Spring MVC-集成(Integration)-生成Excel示例(转载实践)

以下内容翻译自:https://www.tutorialspoint.com/springmvc/springmvc_excel.htm 说明:示例基于Spring MVC 4.1.6。 以下示例显示如何使用Spring Web MVC框架生成Excel。首先,让我们使用E...

easonjim ⋅ 2017/09/10 ⋅ 0

无垠式 Java 通用代码生成器 Ada 1.5.0 正式版已发布

无垠式Java通用代码生成器JEEEU版 Ada 1.5.0 正式版已发布,项目地址: https://gitee.com/jerryshensjf/InfinityJEEEU 无垠式Java代码生成器JEEEU版 这是最轻量级的代码生成器,生成物大概占...

火箭船 ⋅ 06/11 ⋅ 3

Java调用Keras、Tensorflow模型

实现python离线训练模型,Java在线预测部署。查看原文 目前深度学习主流使用python训练自己的模型,有非常多的框架提供了能快速搭建神经网络的功能,其中Keras提供了high-level的语法,底层可...

ioiogoo ⋅ 04/03 ⋅ 0

Spring之jdbc Template实现CRUD操作

Spring为各种持久化技术都提供了简单操作的模板回调。比如jdbc、hibernate、Mybatis以及JPA等。 这里我们就以JDBC为例,看看JDBC template怎么实现CRUD操作。 JdbcTemplate主要提供以下几类方...

Java攻城玩家 ⋅ 05/31 ⋅ 0

java编程语言知识要点学习java基础英语单词表

Java是一种可以撰写跨平台应用软件的面向对象的程序设计语言。Java 技术具有卓越的通用性、高效性、平台移植性和安全性,广泛应用于PC、数据中心、游戏控制台、科学超级计算机、移动电话和互...

Java小辰 ⋅ 05/19 ⋅ 0

Spring Boot整合模板引擎jsp

jsp也算是一种模板引擎吧。整合jsp前,先说一下运行SpringBoot项目的几种方式 1. 运行SpringBoot项目的几种方式 1.1 使用内嵌Tomcat运行项目 在IDE中右键运行启动类,也就是直接直接运行App...

yysue ⋅ 06/15 ⋅ 0

Java序列化技术即将被废除!!!

我们的对象并不只是存在内存中,还需要传输网络,或者保存起来下次再加载出来用,所以需要Java序列化技术。Java序列化技术正是将对象转变成一串由二进制字节组成的数组,可以通过将二进制数据...

Java技术栈 ⋅ 05/30 ⋅ 0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

volatile和synchronized的区别

volatile和synchronized的区别 在讲这个之前需要先了解下JMM(Java memory Model :java内存模型):并发过程中如何处理可见性、原子性、有序性的问题--建立JMM模型 详情请看:https://baike.b...

MarinJ_Shao ⋅ 39分钟前 ⋅ 0

深入分析Kubernetes Critical Pod(一)

Author: xidianwangtao@gmail.com 摘要:大家在部署Kubernetes集群AddOn组件的时候,经常会看到Annotation scheduler.alpha.kubernetes.io/critical-pod"="",以表示这是一个关键服务,那你知...

WaltonWang ⋅ 47分钟前 ⋅ 0

原子性 - synchronized关键词

原子性概念 原子性提供了程序的互斥操作,同一时刻只能有一个线程能对某块代码进行操作。 原子性的实现方式 在jdk中,原子性的实现方式主要分为: synchronized:关键词,它依赖于JVM,保证了同...

dotleo ⋅ 53分钟前 ⋅ 0

【2018.06.22学习笔记】【linux高级知识 14.4-15.3】

14.4 exportfs命令 14.5 NFS客户端问题 15.1 FTP介绍 15.2/15.3 使用vsftpd搭建ftp

lgsxp ⋅ 今天 ⋅ 0

JeeSite 4.0 功能权限管理基础(Shiro)

Shiro是Apache的一个开源框架,是一个权限管理的框架,实现用户认证、用户授权等。 只要有用户参与一般都要有权限管理,权限管理实现对用户访问系统的控制,按照安全规则或者安全策略控制用户...

ThinkGem ⋅ 昨天 ⋅ 0

python f-string 字符串格式化

主要内容 从Python 3.6开始,f-string是格式化字符串的一种很好的新方法。与其他格式化方式相比,它们不仅更易读,更简洁,不易出错,而且速度更快! 在本文的最后,您将了解如何以及为什么今...

阿豪boy ⋅ 昨天 ⋅ 0

Python实现自动登录站点

如果我们想要实现自动登录,那么我们就需要能够驱动浏览器(比如谷歌浏览器)来实现操作,ChromeDriver 刚好能够帮助我们这一点(非谷歌浏览器的驱动有所不同)。 一、确认软件版本 首先我们...

blackfoxya ⋅ 昨天 ⋅ 0

线性回归原理和实现基本认识

一:介绍 定义:线性回归在假设特证满足线性关系,根据给定的训练数据训练一个模型,并用此模型进行预测。为了了解这个定义,我们先举个简单的例子;我们假设一个线性方程 Y=2x+1, x变量为商...

wangxuwei ⋅ 昨天 ⋅ 0

容器之查看minikue的environment——minikube的环境信息

执行如下命令 mjduan@mjduandeMacBook-Pro:~/Docker % minikube docker-envexport DOCKER_TLS_VERIFY="1"export DOCKER_HOST="tcp://192.168.99.100:2376"export DOCKER_CERT_PATH="/U......

汉斯-冯-拉特 ⋅ 昨天 ⋅ 0

mysql远程连接不上

设置了root所有hosts远程登录,可是远程登录还是失败,原因可能如下: 登录本地数据库 mysql -uroot -p123456 查询用户表 mysql> select user,host,password from mysql.user; 删除密码为空的...

冰公子 ⋅ 昨天 ⋅ 0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

返回顶部
顶部