时间戳

首页 > 解决方案 > 如何在 java 中读取存储在 Amazon S3 中的 JSON 文件并将其转换为 CSV

json - 如何在 java 中读取存储在 Amazon S3 中的 JSON 文件并将其转换为 CSV

问题描述

我在 Amazon S3 存储桶中存在一个文本文件，其中包含我需要从中解析和提取信息的 JSON 对象。我如何在java中做到这一点？

我无法在 Java 中做到这一点。我只需要能够解析这个 JSON 文件并转换为 csv 并将这个 CSV 文件上传到 Amazon S3。

一个示例文件是（file.txt）：

{"ID":"abc","mscore":45,"cscore":42,"grade":"A"}
{"ID":"xyz","mscore":41"cscore":35,"grade":"B"}
{"ID":"pqr","mscore":37"cscore":41,"grade":"B"}
{"ID":"mno","mscore":32,"cscore":29,"grade":"C"}

我想将其转换为（file.csv）：score=mscore+cscore

ID      score      grade
"abc"   87         A
"xyz"   76         B
"pqr"   78         B
"mno"   61         C

- - - - 更新 - - - - -

我创建了一个班级学生

public class Student{
String ID;
int mscore;
int cscore;
String grade;
}

我使用下面的代码片段来读取 JSON 对象的文本文件并将数据存储在studentList.

S3Object s3Object = s3Client.getObject(new GetObjectRequest(s3BucketName, fileKey)); 
S3ObjectInputStream s3Stream = s3Object.getObjectContent(); 
BufferedReader reader = new BufferedReader(new InputStreamReader(s3Stream, StringUtils.UTF8)); 
List<Student> studentList=null; 
while ((line = reader.readLine()) != null) {
  Student student = objectMapper.readValue(line, Student.class);
  studentList.add(student);
}

但是，我无法弄清楚如何将此列表转换为 CSV 文件并将其上传到 s3。我不想在本地存储文件。

标签： jsonamazon-web-servicescsvamazon-s3

解决方案

我会考虑编写一个使用 Java 运行时 API 和 AWS SDK for Java 的 Lambda 函数。在该 Lambda 函数中，使用 Java JSON Lib - 例如可以读取和解析 JSON 数据的 GSON。创建生成的 CSV 文件，然后使用 AWS SDK for Java API 调用 S3 以上传新文件。

推荐阅读