之前,本想与客户商量做几张固定的报表予使用,结果发现客户每个月都需要各种各样的报表,所以我们做了个窗口用于直接执行SQL语句;数据量一开始并不是很大查询出来的数据较少(约1~6W左右),所以刚开始几个月很好用,查询出来的数据直接从页面复制下来贴到Excel做月报表,就这样一年过去了,最近做三期,发现运维人员月底几天特别的忙,数据逾百万(汗),SQL查询语句都要写n多分页。。。。
伙伴们如此幸苦,还是我来拯救他们吧~
我的解决思路大致如下:
A>界面增加查询倒出Excel表功能(SQL不需要分页,也不需要在页面显示)
B>在后端把查询结果字段全转换成String类型(主要解决BigDeceal还有long类型在JXL中数据类型转换问题)
C>把查询出来的数据按6W/每页 分页(主要由于JXL只能导出.XLS文件类型(2003型)的EXCEL文件,故每sheet最多只能容纳65536行数据)
D>查询出来的数据遍历分页(需要注意的是sheet名需要按当前数据量和位置命名,EXCEL样式为固定样式)
开始上代码啦~
A就直接略过...
SQL语句传入JdbcTemplate获取数据后会返回一个SqlRowSet对象,现在就开始把每一列的字段类型通过遍历获取字段的String数据,然之放入Map中,以此类推,把所有记录的各个字段全转换成String,其中需要主要的是,Map的Key需要通过getMetaData().getColumnNames()获取,这是个String数组,你需要遍历这个String数组(下标从0开始),对应的Value的下标是从1开始的,千万不要搞错啦~(附代码)
/**
* 查询数据
* @param sql
* @return
*/
public List<Map<String,String>> queryToFile(String sql){
SqlRowSet rs=jdbc.queryForRowSet(sql);//JdbcTemplate
List<Map<String,String>> mList=new ArrayList<Map<String,String>>();
while(rs.next()){
Map<String,String> mp=new HashMap<String,String>();
for(int i=0;i<rs.getMetaData().getColumnNames().length;i++){
mp.put(rs.getMetaData().getColumnNames()[i], rs.getString(i+1));//注意!
}
mList.add(mp);
}
return mList;
}
SqlRowSet提供的Api确实够用,如果是从存储过程取固定列长度类型的数据完全可以使用getBigDecimal(...)、getInt(...)等方法直接获取指定的列的数据 再行处理更为便捷
以上数据处理算是个难点,数据处理好了,接下来还有两个问题:如何分页,如何按数据的index给sheet命名?
下面我是按6W每份切割源数据,核心就是整除取余,记住整除的时候预计会是一个float或double的数,这不重要,重要的是你用int接收,double的小数部分会被无情地截掉,因此页数不会小于1的,(代码):
/**
* 将数据切割成6W每组的List
* @param data
* @return
* @throws ParseException
*/
public List<List<Map<String,String>>> splitDatas(List<Map<String,String>> data) throws ParseException{
List<List<Map<String,String>>> mList=new ArrayList<List<Map<String,String>>>();
int len=data.size()%60000==0?data.size()/60000:data.size()/60000+1;//关键点!!!
for(int i=0;i<len;i++){
if(i<len-1){//不是最后一组数据
List<Map<String,String>> l=new ArrayList<Map<String,String>>();
l.addAll(data.subList(i==0?0:i*60000, (i+1)*60000));
mList.add(l);
}else{//最后一组数据这样处理
List<Map<String,String>> l=new ArrayList<Map<String,String>>();
l.addAll(data.subList(i*60000, data.size()));
mList.add(l);
}
}
return mList;
}
做到这里,我们已经把数据按每6W/份 扔进List里面了,但是导出的数据量大的时候不可能不看sheet名吧,sheet是可以命名的干嘛要使用自动生成的sheet1、sheet2...?
说白了,为了更方便些,我们需要做成这样子:
定位准确清晰易懂岂不更好?
说的容易做的并不轻巧,这时你需要处理好当前组的index和size才行,要不然做出来的东西可能就存在断号或遗漏的问题...,以下是个人的处理逻辑,请小心查看book.createSheet(...)的命名方式(也就是sheet的命名方式):
/**
* 导出多Sheet Excel,按6W每份分sheet
* @param data 数据
* @param headerName 头名称
* @param cellName 数据名称
* @param formName 表格名称
* @param response 响应
* @throws ParseException 异常
*/
public void expSheetsExcel(List<Map<String,String>> data,List<String> headerName,List<String> cellName,String formName, HttpServletResponse response) throws ParseException{
try {
OutputStream os=response.getOutputStream();
response.reset();
WritableFont font1 = new WritableFont(WritableFont.TAHOMA, 11, WritableFont.BOLD, false);
WritableFont font2 = new WritableFont(WritableFont.TAHOMA, 10, WritableFont.NO_BOLD, false);
WritableCellFormat cellFormat1 = new WritableCellFormat(font1);
WritableCellFormat cellFormat2 = new WritableCellFormat(font2);
cellFormat1.setBackground(Colour.GRAY_25);
cellFormat1.setAlignment(jxl.format.Alignment.CENTRE);
cellFormat1.setVerticalAlignment(jxl.format.VerticalAlignment.CENTRE);
cellFormat2.setAlignment(jxl.format.Alignment.CENTRE);
cellFormat2.setVerticalAlignment(jxl.format.VerticalAlignment.CENTRE);
WritableWorkbook book=Workbook.createWorkbook(os);//创建一个Excel表
String fileName =formName+".xls";
response.setContentType("application/x-excel");
response.setHeader("Content-disposition","attachment;filename="+new String(fileName.getBytes("GBK"),"iso8859-1"));
/*切割数据为6W每份*/
List<List<Map<String,String>>>mData=splitDatas(data);
for (List<Map<String, String>> mList : mData) {
//第一个sheet 参数(sheet名称,sheet的序号)
WritableSheet sheet=book.createSheet(String.format("%s~%s",
(data.size()>60000?
mData.indexOf(mList)*6000+1//(mData.size()==(mData.indexOf(mList)+1)?mData.indexOf(mList)*6000:60000*(mData.indexOf(mList)))
:0)+"",
(data.size()>60000?
(mData.size()==(mData.indexOf(mList)+1)?data.size():60000*(mData.indexOf(mList)+1))
:data.size())+""),
mData.indexOf(mList)
);
for(int i=1;i<cellName.size();i++){
sheet.setRowView(i,350,false); //设置行高
}
for(int j=0;j<mList.size();j++){
sheet.setColumnView(j,30);//设置宽度
}
/*设置表头数据*/
int colLength=0;//标记行数
for(int k=0;k<headerName.size();k++){
sheet.addCell(new Label(k,colLength,headerName.get(k),cellFormat1));//(?列,?行,单元格内容,样式)
}
colLength+=1;//添加一行
/*设置表体数据*/
for(Map<String,String> d : mList) {
for(int m=0;m<cellName.size();m++){
sheet.addCell(new Label(m,colLength,d.get(cellName.get(m)),cellFormat2));//(?列,?行,单元格内容,样式)
}
colLength+=1;//添加一行
}
}
book.write();
book.close();
os.close();
os.flush();
response.flushBuffer();
} catch(Exception e){
e.printStackTrace();
}
}
关键的地方用了三目运算,新手同学需自行查找三目运算相关的资料,这里就不再缀诉啦~~~