Spark 1.6.2 dataframe 如何插入到 Hive 表

guostong 2017-11-27 08:26:01


dfStage01.write.mode("append").insertInto("temp.acct_stage_01")

以上语句在 spark-shell 中跑没有问题,但是build成jar 后,用spaek-submit运行报以下错误:
Exception in thread "main" org.apache.spark.sql.AnalysisException: Specifying database name or other qualifiers are not allowed for temporary tables. If the table name has dots (.) in it, please quote the table name with backticks (`).;

这个应该怎么办?

谢谢
...全文
775 2 打赏 收藏 转发到动态 举报
写回复
用AI写文章
2 条回复
切换为时间正序
请发表友善的回复…
发表回复
张某码 2018-01-19
  • 打赏
  • 举报
回复

dfStage01.registerTempTable("table1")  
sql("insert into temp.acct_stage_01 select * from table1")
这样试试
Zzreal 2017-12-04
  • 打赏
  • 举报
回复
点(.)和冒号(:)是不允许出现在表名中的,需要使用反引号(``)把它们包起来来表示一个反勾字符

1,258

社区成员

发帖
与我相关
我的任务
社区描述
Spark由Scala写成,是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用的并行计算框架,Spark基于MapReduce算法实现的分布式计算。
社区管理员
  • Spark
  • shiter
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧