POI解析多excel多sheet文件（单文件百万级以下）生成指定文件入Hive

             临下班前有个需求，有个同事有一份excel数据需要导入到hive中，到手后发现需要导入的excel文件有5个，且每个excel有60个sheet，每个sheet文件是顶行的，由于文件是xls格式的，单excel文件数据量大概在390万左右，且sheet表有的有标题，有的是空行，且有的sheet要解析有的不要。

           直接用poi解析xls格式形式进行解析，结果在new HSSFWorkbook(inputStream)这一步对输入文件流进行装载的时候发生内存问题（java.lang.OutOfMemoryError:Javaheapspace (堆内存溢出) java.lang.OutOfMemoryError:GCoverheadlimitexceeded (当垃圾回收器释放空间占用较多时间时抛出)）无法进行下部解析，尝试转为xlsx格式，同样发生类似的问题。        

           在网上查看大数据量解析excel博文，发现excel2007以上版有OPCPackage包能进行解析，理是根据行号范围批量将内容加入到内存中非一次性加入，这样就解决了内存不足的问题。但是，尝试了几篇网上的例子均不能原运行成功，因为那哥们这件事挺急需要第二天给智博会演示相关数据，也就没在这种方法上继续进行尝试，转而寻求更快捷方式，将单个文件的sheet数降为10个(数据量在六十几万)，这样再搭配多线程就完美导出文件了，再上传到hdfs上验证结束。

         所需依赖包:      

<dependency>
	<groupId>org.apache.poi</groupId>
	<artifactId>poi</artifactId>
	<version>3.9</version>
</dependency>
<dependency>
	<groupId>org.apache.poi</groupId>
	<artifactId>poi-excelant</artifactId>
	<version>3.9</version>
</dependency>
<dependency>
	<groupId>org.apache.poi</groupId>
	<artifactId>poi-ooxml</artifactId>
	<version>3.9</version>
</dependency>
<dependency>
	<groupId>org.apache.poi</groupId>
	<artifactId>poi-ooxml-schemas</artifactId>
	<version>3.9</version>
</dependency>
<dependency>
	<groupId>org.apache.poi</groupId>
	<artifactId>poi-scratchpad</artifactId>
	<version>3.9</version>
</dependency>

   解析文件：

  

package com.ali.scheduler.util;

import java.io.BufferedWriter;
import java.io.File;
import java.io.FileInputStream;
import java.io.FileOutputStream;
import java.io.IOException;
import java.io.OutputStreamWriter;
import java.text.SimpleDateFormat;
import java.util.ArrayList;
import java.util.Date;
import java.util.List;
import java.util.concurrent.ExecutorService;
import java.util.concurrent.Executors;

import org.apache.poi.hssf.usermodel.HSSFCell;
import org.apache.poi.hssf.usermodel.HSSFRow;
import org.apache.poi.hssf.usermodel.HSSFSheet;
import org.apache.poi.hssf.usermodel.HSSFWorkbook;
import org.apache.poi.xssf.usermodel.XSSFCell;
import org.apache.poi.xssf.usermodel.XSSFRow;
import org.apache.poi.xssf.usermodel.XSSFSheet;
import org.apache.poi.xssf.usermodel.XSSFWorkbook;

public class ReadExcel {

	private static SimpleDateFormat sdf = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss");
	
    public static vo