添加链接
link管理
链接快照平台
  • 输入网页链接,自动生成快照
  • 标签化管理网页链接

为了批量导入数据,采用了csv文件存储数据,后端写csv解析工具对数据进行读取和解析并导入数据库。(使用opencsv)
pom依赖:

<!-- csv文件解析依赖 -->
<dependency>
    <groupId>com.opencsv</groupId>
    <artifactId>opencsv</artifactId>
    <version>4.3.2</version>
</dependency>

1、解析csv文件工具类(通用)(MultipartFile)

public class CsvUtil {
     * 日志对象
    private static final Logger LOGGER = LoggerFactory.getLogger(CsvUtil.class);
     * 解析csv文件并转成bean
     * @param file csv文件
     * @param clazz 类
     * @param <T> 泛型
     * @return 泛型bean集合
    public <T> List<T> getCsvData(MultipartFile file, Class<T> clazz) {
        InputStreamReader in;
        try {
            in = new InputStreamReader(file.getInputStream(), "gbk");
        } catch (Exception e) {
            LOGGER.error(Constant.LOG_FOMAT_TYPE_TWO,
                    ErrorCode.FILE_LOAD_ERROR.getErrorCode(),
                    ErrorCode.FILE_LOAD_ERROR.getMessage(),
                    e.getMessage());
            throw BaseException.of(ErrorCode.FILE_LOAD_ERROR.of());
        HeaderColumnNameMappingStrategy<T> strategy = new HeaderColumnNameMappingStrategy<>();
        strategy.setType(clazz);
        CsvToBean<T> csvToBean = new CsvToBeanBuilder<T>(in)
                .withSeparator(',')
                .withQuoteChar('\'')
                .withMappingStrategy(strategy).build();
        return csvToBean.parse();

或者(File)

public class CsvUtil {
     * 日志对象
    private static final Logger LOGGER = LoggerFactory.getLogger(CsvUtil.class);
     * 解析csv文件并转成bean
     * @param file csv文件
     * @param clazz 类
     * @param <T> 泛型
     * @return 泛型bean集合
    public <T> List<T> getCsvData(File file, Class<T> clazz) {
        FileReader fr;
        try {
            fr = new FileReader(file);
        } catch (Exception e) {
            LOGGER.error(Constant.LOG_FOMAT_TYPE_TWO,
                    ErrorCode.FILE_LOAD_ERROR.getErrorCode(),
                    ErrorCode.FILE_LOAD_ERROR.getMessage(),
                    e.getMessage());
            throw BaseException.of(ErrorCode.FILE_LOAD_ERROR.of());
        HeaderColumnNameMappingStrategy<T> strategy = new HeaderColumnNameMappingStrategy<>();
        strategy.setType(clazz);
        CsvToBean<T> csvToBean = new CsvToBeanBuilder<T>(fr)
                .withSeparator(',')
                .withQuoteChar('\'')
                .withMappingStrategy(strategy).build();
        return csvToBean.parse();

2、csv文件

3、csv文件对应的bean对象DataAndTypeCsv.java

public class DataAndTypeCsv {
     * 字典代码
    @CsvBindByName(column = "code")
    private String code;
    @CsvBindByName(column = "short_name")
    private String shortName;
    @CsvBindByName(column = "name", required = true)  //是否可以为null 否
    private String name;
     * 拼音或英文描述
    @CsvBindByName(column = "remark")
    private String remark;
     * 父类型id
    @CsvBindByName(column = "parent_id")
    private Integer parentId;
     * 类型名称
    @CsvBindByName(column = "type_name", required = true)  //是否可以为null 否
    private String typeName;
     * 类型id
    @CsvBindByName(column = "type_id", required = true)  //是否可以为null 否
    private Integer typeId;
	get、set方法

bean对象通过注解@CsvBindByName(column = “”, required = true) 映射csv文件的列名,并检查列数据是否为空,若是csv文件中该列存在值为空的情况会报错。

如果没有表头,则可使用@CsvBindByPosition(position = 0)

4、应用
controller层定义restful接口:

@Transactional(rollbackFor = BaseException.class)
@PostMapping
public Map<String, String> batchInsert(MultipartFile file) {
    CsvUtil csvUtil = new CsvUtil();
    // 将csv文件内容转成bean
    List<DataAndTypeCsv> csvData = csvUtil.getCsvData(file, DataAndTypeCsv.class);

postman调用接口测试:
postman调用批量导入restful接口示例
扩展
withQuoteChar()方法的作用
在这里插入图片描述

备注补充:

1. opencsv提供了基于"策略"的映射,将CSV绑定到bean。关系如下图:

2. 接口名与策略匹配如下(参考:https://www.jianshu.com/p/6414185b2f01):

接口名策略
MappingStrategy顶级的映射接口
headerColumnNameMappingStrategy基于列名的映射策略,读取csv文件的第一行作为header,比如header1,header2,header3然后调用bean的setHeader1方法,setHeader2方法,setHeader3方法分别设置值。**所以这种策略要求,列名与bean中的属性名完全一致,如果不一致,则值为空,不会出错。使用注解时,注解名字必须与csv中列名一致。
ColumnPositionMappingStrategy列位置映射策略,他没有header的概念,所以会输出取所有行。在columnMapping数组中指定bean的属性,第一个值对应csv的第一列,第二个值对应csv的第二列……
HeaderColumnNameTranslateMappingStrategy列头名字翻译映射策略,与HeaderColumnNameMappintStrategy相比,bean的属性名可以与csv列头不一样。通过指定map来映射。

简版(参考:https://www.jianshu.com/p/cb59458d5a34

接口策略
MappingStrategy顶级接口
HeaderColumnNameMappingStrategy基于DTO属性名或注解与csv头进行映射
ColumnPositionMappingStrategy基于DTO属性数组顺序或注解指定顺序进行映射
HeaderColumnNameTranslateMappingStrategy基于csv头和DTO属性的map关系进行映射

注:bean的类型只能为基本数据类型以及String类型,若是BigDecimal类型,那么将会抛出异常。

转载自,对原文有内容增加:https://blog.csdn.net/qq_21084687/article/details/84333188

为了批量导入数据,采用了csv文件存储数据,后端写csv解析工具对数据进行读取和解析并导入数据库。(使用opencsv)pom依赖:&lt;!-- csv文件解析依赖 --&gt;&lt;dependency&gt; &lt;groupId&gt;com.opencsv&lt;/groupId&gt; &lt;artifactId&gt;opencsv&lt;/artifactId&gt; &lt;version&gt;4.3.2&lt;/version&gt;&lt;/ * 日志对象 private static final Logger LOGGER = LoggerFactory.getLogger(CsvUtil.class); * 解析csv文件转成bean * @param file c...
1.首先导入相关的csv包 compile group: ‘com.opencsv’, name: ‘opencsv’, version: ‘4.0’ 2.首先定义javaBean public class AssetType { //这个注解的意思是让你绑绑定列名 @CsvBindByName(column = “收入id”) private String id; @CsvBindByName(...
本文参考链接地址:https://blog.csdn.net/wangjun5159/article/details/51655806 java读取csv的类库主要有两种,opencsvjavacsvjavacsv很久不维护了。opencsv是apache的项目,并且至今仍在维护。 csv文件,全名 comma separated values,默认以逗号分隔,是纯文本文件。虽然用excel打开后格式排版了,但是那是excel对他进行了处理。用notepad或者sublime text打开能看到最原
在做项目的时候,发现使用POI无法解析csv文件结尾的文件,虽然csv文件能用Excel打开,但是csv文件没有像Excel一样有规定的电子表格形式,故使用POI无法解析csv文件,在网上找了一下,发现java有提供java csv文件来帮忙解析csv文件。   CSV是Comma Separated Values(逗号分隔值)的英文缩写,通常都是纯文本文件。首先先来了解csv文件的基本格式:   ac, abs, moon   3000.00   Chevy
Java 毕业设计,Java 课程设计,基于 SpringBoot+Vue 开发的,含有代码注释,新手也可看懂。毕业设计、期末大作业、课程设计、高分必看,下载下来,简单部署,就可以使用。 包含:项目源码、数据库脚本、软件工具等,前后端代码都在里面。 该系统功能完善、界面美观、操作简单、功能齐全、管理便捷,具有很高的实际应用价值。 项目都经过严格调试,确保可以运行! 1. 技术组成 前端:html、javascript、Vue 后台框架:SpringBoot 开发环境:idea 数据库:MySql(建议用 5.7 版本,8.0 有时候会有坑) 数据库工具:navicat 部署环境:Tomcat(建议用 7.x 或者 8.x 版本), maven 2. 部署 如果部署有疑问的话,可以找我咨询 后台路径地址:localhost:8080/项目名称/admin/dist/index.html 前台路径地址:localhost:8080/项目名称/front/index.html (无前台不需要输入)
Java语言有许多库可用于读取CSV文件,并将其转换为对象。其中,比较常用的是OpenCSV和Apache Commons CSV这两个库。 使用OpenCSV进行读取和转换操作很简单。首先需要添加OpenCSV的依赖库,然后就可以使用CSVReader类来读取CSV文件。读取的每一行数据都被转换成一个字符串数组,可以将其转换成自定义的对象。 示例代码如下: ```java import com.opencsv.CSVReader; import java.io.FileReader; public class CsvReader { public static void main(String[] args) throws Exception { CSVReader reader = new CSVReader(new FileReader("data.csv"), ',', '"', 1); String[] record = null; while ((record = reader.readNext()) != null) { // 将CSV文件中读取的数据转换成自定义对象 DataObject object = new DataObject(record[0], record[1], record[2]); // 对象的后续处理 System.out.println(object.toString()); reader.close(); 在上面的示例代码中,我们使用了CSVReader来读取名为“data.csv”的CSV文件。字符串数组“record”保存了读取的每一行数据,而后将其转换成一个名为“DataObject”的自定义对象。 此外,Apache Commons CSV也提供了CSV文件读取和转换的功能,使用方式类似OpenCSV。至于哪种库更适合你的项目需求,可以根据具体情况进行选择。