1 问题描述
当一次性生成大量优惠券时,发现后台cpu使用率突然很高,无法成功生成券。
2 排查过程
- 发现DAO层的Mapper.xml配置文件中,插入的SQL配置如下:【不正常】
<insert id="batchInsert" useGeneratedKeys="true" keyProperty="id" parameterType="java.util.List">
<foreach collection="list" item="model" separator=",">
insert into promotion_coupon_user (id,template_id, coupon_id...)
values
(#{model.id},#{model.templateId}, #{model.couponId}...
</foreach>
</insert>
- 上层应用程序插入优惠券一次性插入50W+条数据,没有做数据插入切分;【不正常】
3 解决问题
- 修改DAO层的Mapper.xml配置文件中,插入的SQL:
<insert id="batchInsert" useGeneratedKeys="true" keyProperty="id" parameterType="java.util.List">
insert into promotion_coupon_user (id,template_id, coupon_id...)
values
<foreach collection="list" item="model" separator=",">
(#{model.id},#{model.templateId}, #{model.couponId}...
</foreach>
</insert>
- 修改上层应用,数据量大时,一定要进行数据切割插入;
4 问题总结
- 为了提升效率,数据能一次提交不做多次提交;
- 能一次插入解析sql不要多次提交解析sql;
- 插入数据量太大时,需要程序预先切割数据;