spark sql 查询表时报错:。。。 not a file

编程入门 行业动态 更新时间:2024-10-09 07:29:20

spark sql 查询表<a href=https://www.elefans.com/category/jswz/34/1770019.html style=时报错:。。。 not a file"/>

spark sql 查询表时报错:。。。 not a file

现象:

spark sql 查询表时报错:。。。 not a file

解决:

  1. 如果是在终端启动 spark shell,那么就执行 
    spark-sql --conf spark.hadoop.mapreduce.input.fileinputformat.input.dir.recursive=true --conf spark.hive.mapred.supports.subdirectories=true
  2. 如果是代码,那么就设置下边两个参数
      .set("spark.hadoop.mapreduce.input.fileinputformat.input.dir.recursive", "true").set("spark.hive.mapred.supports.subdirectories", "true")

更多推荐

spark sql 查询表时报错:。。。 not a file

本文发布于:2024-03-12 10:16:36,感谢您对本站的认可!
本文链接:https://www.elefans.com/category/jswz/34/1731292.html
版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。
本文标签:时报   spark   sql   file

发布评论

评论列表 (有 0 条评论)
草根站长

>www.elefans.com

编程频道|电子爱好者 - 技术资讯及电子产品介绍!