parquet - 雪花连接器的镶木地板文件格式
问题描述
我正在使用 Spark 连接器将 Hadoop 中的表写入雪花,但我在 Hadoop 中的文件位于 Apache Parquet 中。
用 Snowflake 编写时,它是以 csv 格式编写的,它应用默认分隔符“,”,但我需要应用“^”作为分隔符。我怎样才能做到这一点?
df.write.format(SNOWFLAKE_SOURCE_NAME).options(sfOptions).option("dbtable", "t24122018").mode(SaveMode.Overwrite).save
解决方案
推荐阅读
- java - 如何从 URL / String 中获取特定的字符序列
- python - 有没有办法将 python 字符串用作 html 代码?
- kotlin - 将密封类声明为对象的好处
- python - zip已经在python中打开的文件
- oracle - 两个表数据比较如果不同需要做更新代码不断执行它永远不会结束
- aws-api-gateway - Velocity 模板语言:如何导入 EscapeTool
- vue.js - 在 Vue-Cli 上启动项目的最佳实践
- python-3.x - 使用 P4Python,我如何使用环境变量跨不同的计算机/工作区访问不同的客户端?
- intellij-idea - 如何让 RubyMine 选择正确的测试
- firebase - Firebase 云功能:执行完成时间