首页 > 解决方案 > 如何将子目录数据读入bigsql表?

问题描述

Bigsql 无法像 hive 那样通过设置参数从子目录中读取数据。

set tblproperties (
    "hive.input.dir.recursive" = "TRUE",
    "hive.mapred.supports.subdirectories" = "TRUE",
    "hive.supports.subdirectories" = "TRUE",
    "mapred.input.dir.recursive" = "TRUE")

我尝试将上述参数添加到 bigsql 表属性中,但它无法读取子目录数据。

我需要在 bigsql 中设置哪些参数来读取子目录数据?

标签: bigsql

解决方案


据我了解,Bigsql 只查找父目录中的文件。它甚至不用检查子目录。它将显示一个空表,因为它无法递归读取数据。此功能仍在 IBM 产品和工程团队的产品改进想法中。


推荐阅读