Apache Spark 1.3数据帧SaveAsTable数据库其他然后默认

Question

我想保存一个数据框作为表使用saveAsTable以及它的工作原理，但我想保存表不是默认数据库，有谁知道是否有方法来设置要使用的数据库？我试着用hiveContext.sql（“use db_name”），这似乎没有做到这一点。有一个saveAsTable需要一些选项。有没有办法，我可以做到这一点与选择？

Answer 1

它看起来并不像您可以设置数据库的名字呢？如果你看过HiveContext.scala代码，你看到很多评论像...

// TODO: Database support... 

所以我猜测它还不支持。

更新：

在火花1.5.1这个作品，这没有早期版本。在早期的版本中，你不得不使用像deformitysnot answer这样的使用语句。

df.write.format("parquet").mode(SaveMode.Append).saveAsTable("databaseName.tablename") 

Answer 2

这是固定在星火1.5，你可以用做：

hiveContext.sql("USE sparkTables"); 
dataFrame.saveAsTable("tab3", "orc", SaveMode.Overwrite); 

通过星火1.5，你可以读星火的方式保存从蜂巢命令行dataframes（直线，...） ，这在早期版本中是不可能的。