从sparklyr以外的默认方案（数据库）的访问表

Question

当我使用sparklyr和yarn-client方法设法连接到我们的（新）集群后，现在我只能显示默认方案中的表。我如何连接到scheme.table？ 使用DBI它正在工作，例如使用以下行： dbGetQuery(sc, "SELECT * FROM scheme.table LIMIT 10") 在HUE中，我可以显示所有方案的所有表格。

〜克

Answer 1

你可以使用一个完全合格的名称注册临时视图：

spark_session(sc) %>% 
    invoke("table", "my_database.my_table") %>% 
    invoke("createOrReplaceTempView", "my_view") 

tbl(sc, "my_view") 

，或者使用sql方法直接与dplyr:tbl切换数据库

spark_session(sc) %>% invoke("sql", "USE my_database") 

和访问表：

tbl(sc, "my_table")