首页 > 解决方案 > 在 R 中读取 avro 文件

问题描述

虽然在https://cran.r-project.org/web/packages/sparkavro/sparkavro.pdf有阅读这些文件的描述,但我想知道我是否可以使用 R 从本地驱动器读取 avro 文件。下面给出了pdf文件,可能需要与spark连接。由于我在本地目录中有 avro 文件,我不确定是否应该像处理其他 csv 文件一样设置默认目录。

sc <- spark_connect(master = "local")
df <- spark_read_avro(
  sc,
  "twitter",
  system.file("extdata/twitter.avro", package = "sparkavro"),
  repartition = FALSE,
  memory = FALSE)

标签: ravro

解决方案


推荐阅读