为了批量导入数据,采用了csv文件存储数据,后端写csv解析工具对数据进行读取和解析并导入数据库。(使用opencsv)
pom依赖:
<!-- csv文件解析依赖 -->
<dependency>
<groupId>com.opencsv</groupId>
<artifactId>opencsv</artifactId>
<version>4.3.2</version>
</dependency>
1、解析csv文件工具类(通用)(MultipartFile)
public class CsvUtil {
* 日志对象
private static final Logger LOGGER = LoggerFactory.getLogger(CsvUtil.class);
* 解析csv文件并转成bean
* @param file csv文件
* @param clazz 类
* @param <T> 泛型
* @return 泛型bean集合
public <T> List<T> getCsvData(MultipartFile file, Class<T> clazz) {
InputStreamReader in;
try {
in = new InputStreamReader(file.getInputStream(), "gbk");
} catch (Exception e) {
LOGGER.error(Constant.LOG_FOMAT_TYPE_TWO,
ErrorCode.FILE_LOAD_ERROR.getErrorCode(),
ErrorCode.FILE_LOAD_ERROR.getMessage(),
e.getMessage());
throw BaseException.of(ErrorCode.FILE_LOAD_ERROR.of());
HeaderColumnNameMappingStrategy<T> strategy = new HeaderColumnNameMappingStrategy<>();
strategy.setType(clazz);
CsvToBean<T> csvToBean = new CsvToBeanBuilder<T>(in)
.withSeparator(',')
.withQuoteChar('\'')
.withMappingStrategy(strategy).build();
return csvToBean.parse();
或者(File)
public class CsvUtil {
* 日志对象
private static final Logger LOGGER = LoggerFactory.getLogger(CsvUtil.class);
* 解析csv文件并转成bean
* @param file csv文件
* @param clazz 类
* @param <T> 泛型
* @return 泛型bean集合
public <T> List<T> getCsvData(File file, Class<T> clazz) {
FileReader fr;
try {
fr = new FileReader(file);
} catch (Exception e) {
LOGGER.error(Constant.LOG_FOMAT_TYPE_TWO,
ErrorCode.FILE_LOAD_ERROR.getErrorCode(),
ErrorCode.FILE_LOAD_ERROR.getMessage(),
e.getMessage());
throw BaseException.of(ErrorCode.FILE_LOAD_ERROR.of());
HeaderColumnNameMappingStrategy<T> strategy = new HeaderColumnNameMappingStrategy<>();
strategy.setType(clazz);
CsvToBean<T> csvToBean = new CsvToBeanBuilder<T>(fr)
.withSeparator(',')
.withQuoteChar('\'')
.withMappingStrategy(strategy).build();
return csvToBean.parse();
2、csv文件
3、csv文件对应的bean对象DataAndTypeCsv.java
public class DataAndTypeCsv {
* 字典代码
@CsvBindByName(column = "code")
private String code;
@CsvBindByName(column = "short_name")
private String shortName;
@CsvBindByName(column = "name", required = true) //是否可以为null 否
private String name;
* 拼音或英文描述
@CsvBindByName(column = "remark")
private String remark;
* 父类型id
@CsvBindByName(column = "parent_id")
private Integer parentId;
* 类型名称
@CsvBindByName(column = "type_name", required = true) //是否可以为null 否
private String typeName;
* 类型id
@CsvBindByName(column = "type_id", required = true) //是否可以为null 否
private Integer typeId;
get、set方法
bean对象通过注解@CsvBindByName(column = “”, required = true) 映射csv文件的列名,并检查列数据是否为空,若是csv文件中该列存在值为空的情况会报错。
如果没有表头,则可使用@CsvBindByPosition(position = 0)
4、应用
controller层定义restful接口:
@Transactional(rollbackFor = BaseException.class)
@PostMapping
public Map<String, String> batchInsert(MultipartFile file) {
CsvUtil csvUtil = new CsvUtil();
// 将csv文件内容转成bean
List<DataAndTypeCsv> csvData = csvUtil.getCsvData(file, DataAndTypeCsv.class);
postman调用接口测试:

扩展
withQuoteChar()方法的作用

备注补充:
1. opencsv提供了基于"策略"的映射,将CSV绑定到bean。关系如下图:
2. 接口名与策略匹配如下(参考:https://www.jianshu.com/p/6414185b2f01):
接口名 | 策略 |
---|
MappingStrategy | 顶级的映射接口 |
headerColumnNameMappingStrategy | 基于列名的映射策略,读取csv文件的第一行作为header,比如header1,header2,header3 然后调用bean的setHeader1方法,setHeader2方法,setHeader3方法分别设置值。**所以这种策略要求,列名与bean中的属性名完全一致,如果不一致,则值为空,不会出错。使用注解时,注解名字必须与csv中列名一致。 |
ColumnPositionMappingStrategy | 列位置映射策略,他没有header的概念,所以会输出取所有行。在columnMapping数组中指定bean的属性,第一个值对应csv的第一列,第二个值对应csv的第二列…… |
HeaderColumnNameTranslateMappingStrategy | 列头名字翻译映射策略,与HeaderColumnNameMappintStrategy相比,bean的属性名可以与csv列头不一样。通过指定map来映射。 |
或简版(参考:https://www.jianshu.com/p/cb59458d5a34)
接口 | 策略 |
---|
MappingStrategy | 顶级接口 |
HeaderColumnNameMappingStrategy | 基于DTO属性名或注解与csv头进行映射 |
ColumnPositionMappingStrategy | 基于DTO属性数组顺序或注解指定顺序进行映射 |
HeaderColumnNameTranslateMappingStrategy | 基于csv头和DTO属性的map关系进行映射 |
注:bean的类型只能为基本数据类型以及String类型,若是BigDecimal类型,那么将会抛出异常。
转载自,对原文有内容增加:https://blog.csdn.net/qq_21084687/article/details/84333188
为了批量导入数据,采用了csv文件存储数据,后端写csv解析工具对数据进行读取和解析并导入数据库。(使用opencsv)pom依赖:<!-- csv文件解析依赖 --><dependency> <groupId>com.opencsv</groupId> <artifactId>opencsv</artifactId> <version>4.3.2</version></
* 日志对象
private static final Logger LOGGER = LoggerFactory.getLogger(CsvUtil.class);
* 解析csv文件并转成bean
* @param file c...
1.首先导入相关的csv包
compile group: ‘com.opencsv’, name: ‘opencsv’, version: ‘4.0’
2.首先定义javaBean
public class AssetType {
//这个注解的意思是让你绑绑定列名
@CsvBindByName(column = “收入id”)
private String id;
@CsvBindByName(...
本文参考链接地址:https://blog.csdn.net/wangjun5159/article/details/51655806
java读取csv的类库主要有两种,opencsv和javacsv,javacsv很久不维护了。opencsv是apache的项目,并且至今仍在维护。
csv文件,全名 comma separated values,默认以逗号分隔,是纯文本文件。虽然用excel打开后格式排版了,但是那是excel对他进行了处理。用notepad或者sublime text打开能看到最原
在做项目的时候,发现使用POI无法
解析以
csv文件结尾的
文件,虽然
csv文件能用Excel打开,但是
csv文件没有像Excel一样有规定的电子表格形式,故使用POI无法
解析csv文件,在网上找了一下,发现
java有提供
java csv文件来帮忙
解析csv文件。
CSV是Comma Separated Values(逗号分隔值)的英文缩写,通常都是纯文本
文件。首先先来了解
csv文件的基本格式:
ac, abs, moon
3000.00
Chevy
Java 毕业设计,Java 课程设计,基于 SpringBoot+Vue 开发的,含有代码注释,新手也可看懂。毕业设计、期末大作业、课程设计、高分必看,下载下来,简单部署,就可以使用。
包含:项目源码、数据库脚本、软件工具等,前后端代码都在里面。
该系统功能完善、界面美观、操作简单、功能齐全、管理便捷,具有很高的实际应用价值。
项目都经过严格调试,确保可以运行!
1. 技术组成
前端:html、javascript、Vue
后台框架:SpringBoot
开发环境:idea
数据库:MySql(建议用 5.7 版本,8.0 有时候会有坑)
数据库工具:navicat
部署环境:Tomcat(建议用 7.x 或者 8.x 版本), maven
2. 部署
如果部署有疑问的话,可以找我咨询
后台路径地址:localhost:8080/项目名称/admin/dist/index.html
前台路径地址:localhost:8080/项目名称/front/index.html (无前台不需要输入)
Java语言有许多库可用于读取CSV文件,并将其转换为对象。其中,比较常用的是OpenCSV和Apache Commons CSV这两个库。
使用OpenCSV进行读取和转换操作很简单。首先需要添加OpenCSV的依赖库,然后就可以使用CSVReader类来读取CSV文件。读取的每一行数据都被转换成一个字符串数组,可以将其转换成自定义的对象。
示例代码如下:
```java
import com.opencsv.CSVReader;
import java.io.FileReader;
public class CsvReader {
public static void main(String[] args) throws Exception {
CSVReader reader = new CSVReader(new FileReader("data.csv"), ',', '"', 1);
String[] record = null;
while ((record = reader.readNext()) != null) {
// 将CSV文件中读取的数据转换成自定义对象
DataObject object = new DataObject(record[0], record[1], record[2]);
// 对象的后续处理
System.out.println(object.toString());
reader.close();
在上面的示例代码中,我们使用了CSVReader来读取名为“data.csv”的CSV文件。字符串数组“record”保存了读取的每一行数据,而后将其转换成一个名为“DataObject”的自定义对象。
此外,Apache Commons CSV也提供了CSV文件读取和转换的功能,使用方式类似OpenCSV。至于哪种库更适合你的项目需求,可以根据具体情况进行选择。