时间戳

首页 > 解决方案 > 创建具有 serde 格式和额外列的外部表 - HIVE

hadoop - 创建具有 serde 格式和额外列的外部表 - HIVE

问题描述

我正在尝试将一个 txt 文件导入到外部表中，并在配置单元中添加一个额外的列，如下所示：


CREATE EXTERNAL TABLE IF NOT EXISTS bs.tbl_bt(
tp_registro string,
seq string,
num_a string,
dt_chamada string,
hr_chamada string,
num_b string,
pt_interconect string,
dur_rel_chamada string,
dur_tar_chamada string,
tp_servico string,
vl_liq_chamada string,
vl_brt_chamada string,
reserva string,
'${hiveconf:tez.task.operadora}' as operadora string)
ROW FORMAT SERDE 'org.apache.hadoop.hive.serde2.RegexSerDe'
WITH SERDEPROPERTIES (input.regex = (.{1})(.{10})(.{21})(.{8})(.{6})(.{20})(.{10})(.{7})(.{7})(.{2})(.{11})(.{11})(.{29}).*)
STORED AS TEXTFILE
LOCATION '/gr/Fi/B/${hiveconf:tez.task.operadora}';

我究竟做错了什么？

标签： hadoophive

解决方案

Hive DDL 定义列时不包括 AS

CREATE [TEMPORARY] [EXTERNAL] TABLE [IF NOT EXISTS] [db_name.]table_name    -- (Note: TEMPORARY available in Hive 0.14.0 and later)
 [(col_name data_type [column_constraint_specification] [COMMENT col_comment], ... [constraint_specification])]

所以，试试吧

'${hiveconf:tez.task.operadora}' STRING

或者，如果您确实需要该列始终为operadora，则删除 hiveconf 变量

https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL#LanguageManualDDL-CreateTableCreate/Drop/TruncateTable

也许您正在混淆一个 CTAS 语句，您可以在创建表时选择一个列作为另一个名称

推荐阅读