首页 > 解决方案 > 如果多列在使用sparksql 1.6v之间包含多个逗号,如何加载csv文件

问题描述

如果多个列之间包含多个逗号,如何使用 sparksql 1.6v 加载 csv 文件,例如给定的 csv 文件包含一些类似于下面的记录。

col1, col2, col3, col4, col5
abc, xyz, pqr, p,q, qq pr,tt

现在col1应该包含abc

col2 xyz, pqr
col3 p,q
col4 qq pr
col5 tt

在使用 spark 1.6v 的 spark 数据框中。

标签: apache-sparkapache-spark-sqlspark-csv

解决方案


推荐阅读