时间戳

首页 > 解决方案 > 无法使用 aws 数据管道从配置单元读取数据

amazon-web-services - 无法使用 aws 数据管道从配置单元读取数据

问题描述

使用 aws 数据管道，使用驱动程序 HiveJDBC4.jar 并将类名指定为 com.amazon.hive.jdbc4.HS1Driver 并尝试连接配置单元表。

连接成功，但无法检索数据。

424 [WARN] (TaskRunnerService-resource:df-081576635EAE6FCF0OLE_@ResourceId_O4iPA_2021-04-07T10:31:47-0) private.com.amazonaws.services.s3.AmazonS3Client：没有为流数据指定内容长度。流内容将在内存中缓冲，并可能导致内存不足错误。2021 年 4 月 7 日 10:36:04,548 [INFO]（TaskRunnerService-resource:df-081576635EAE6FCF0OLE_@ResourceId_O4iPA_2021-04-07T10:31:47-0）amazonaws.datapipeline.connector.s3.S3OutputConnector：没有记录提交 null 2021 年 4 月 7 日10:36:04,550 [INFO] (HeartBeatService-df-081576635EAE6FCF0OLE-@CopyActivityId_mnq7Z_2021-04-07T10:31:47_Attempt=1) amazonaws.datapipeline.taskrunner.HeartBeatService: HeartBeatService thread shutting down df-081576635EAE6FCF0OLE-@CopyActivityId_mnq7Z_2021-04-07T10 :31:47_Attempt=1 2021 年 4 月 7 日 10:36:04,550 [信息]（TaskRunnerService-资源：

标签： amazon-web-servicesjdbchiveaws-data-pipeline

解决方案

推荐阅读