package com.zy.asrs.importexcle; import com.alibaba.excel.context.AnalysisContext; import com.alibaba.excel.event.AnalysisEventListener; import com.alibaba.fastjson.JSON; import com.core.exception.CoolException; import com.zy.asrs.entity.param.ProductCalibrationExcelParam; import com.zy.asrs.mapper.LocDetlMapper; import lombok.SneakyThrows; import lombok.extern.slf4j.Slf4j; import org.apache.ibatis.session.ExecutorType; import org.apache.ibatis.session.SqlSession; import org.apache.ibatis.session.SqlSessionFactory; import java.util.ArrayList; import java.util.List; /** * @author pang.jiabao * @description 监听立库已有物料excel数据导入 * @createDate 2023/10/9 11:13 */ @Slf4j public class ProductCalibrationImportListener extends AnalysisEventListener { /** * 每隔1000条存储数据库,实际使用中可以3000条,然后清理list ,方便内存回收 */ private static final int BATCH_COUNT = 100; private int count = 0; List list = new ArrayList<>(); /** * 假设这个是一个DAO,当然有业务逻辑这个也可以是一个service。当然如果不用存储这个对象没用。 */ private final SqlSessionFactory sqlSessionFactory; /** * 如果使用了spring,请使用这个构造方法。每次创建Listener的时候需要把spring管理的类传进来 */ public ProductCalibrationImportListener(SqlSessionFactory sqlSessionFactory) { this.sqlSessionFactory = sqlSessionFactory; } /** * 这个每一条数据解析都会来调用 */ @SneakyThrows @Override public void invoke(ProductCalibrationExcelParam data, AnalysisContext context) { log.info("成品校验解析到第 {} 条数据:{}", ++count, JSON.toJSONString(data)); if ("合格".equals(data.getQualified()) || "不合格".equals(data.getQualified())) { list.add(data); } else { throw new CoolException("成品校验校验结果异常:" + data); } // 达到BATCH_COUNT了,需要去存储一次数据库,防止数据几万条数据在内存,容易OOM if (list.size() >= BATCH_COUNT) { saveData(); // 存储完成清理 list list.clear(); } } /** * 所有数据解析完成了 都会来调用 */ @Override public void doAfterAllAnalysed(AnalysisContext context) { // 这里也要保存数据,确保最后遗留的数据也存储到数据库 if (list.size() > 0) { saveData(); } log.info("成品校验所有数据解析完成!"); } /** * 加上存储数据库 */ private void saveData() { log.info("{}条数据,开始存储数据库!", list.size()); try (SqlSession sqlSession = sqlSessionFactory.openSession(ExecutorType.BATCH)) { LocDetlMapper mapper = sqlSession.getMapper(LocDetlMapper.class); list.forEach(productCalibrationExcelParam -> { mapper.updateQualifiedByRollNo(productCalibrationExcelParam.getRollNo(), productCalibrationExcelParam.getQualified()); }); sqlSession.commit(); } log.info("成品校验存储数据库成功!"); } /** * 解析出现错误会进入该方法 具体看源代码或文档 */ @Override public void onException(Exception exception, AnalysisContext context) throws Exception { log.error("成品校验处理异常:" + exception.getMessage()); throw exception; } }