livy

0热度

1回答

我试图连接到Kerberos安全下的Livy REST服务。在Linux CentOS的curl与negotiate正常工作，接收一个Kerberos kinit票通过 curl --negotiate -u : http://service_link 我面对的是试图做同样的远程Windows桌面上的问题连接后。我正在使用Windows的MIT Kerberos，它能够成功执行kinit。但是

0热度

1回答

Livy错误RSCClient：无法连接到上下文

我正在Scala ApI中运行Livy客户端应用程序，Livy的版本是0.3.0，Spark版本的版本是1.6.0。以下是主要代码。 def main(args: Array[String]): Unit = { var scalaClient: LivyScalaClient = null val livyurl = "http://172.24.4.110:8998" try {

0热度

1回答

在Livy（没有安装Hadoop）的批处理模式下提交Python文件

我已经做了一个简单的python文件，它想要在Livy.Livy中提交，目前运行在local mode.Also我在livy.conf文件中提到了以下属性。 curl -X POST --data '{"file": "/usr/local/livy/scripts/pi.py"}' -H "Content-Type: application/json" 10.140.178.24:8999/ba

0热度

1回答

获取集群上的Livy版本

如何获取我在集群中使用的livy版本是什么？我们在群集节点上都有livy客户端和服务器，但我需要知道它的版本最好在horthonwork群集上。与李维安装在节点上

0热度

1回答

Livy在计算结束前返回

在Hortonworks Sandbox上使用Livy，我们发现在某些情况下，Livy API会在实际工作结束之前为Spark语句监视工具所指示的结果提供结果。在某些情况下，Livy在正常执行时间超过10分钟的情况下，只需不到5秒的时间就能完成一项任务。如果我们在某些情况下多次使用相同的初始条件重复相同的任务，则会发生此问题。任何想法？

0热度

1回答

当我使用“mvn clean package”构建Livy时未能在存储库中找到jar

我是Livy的新手，并且我构建了Livy，正如官方说的。该命令如下： git clone https://github.com/apache/incubator-livy.git cd incubator-livy mvn package 然后我得到错误如下： [ERROR]插件org.apache.maven.plugins：行家-实施者-插件：1.4.1或一个无法解决：无法找到

2热度

1回答

使用Livy上传Python脚本

我试图找到一种方法来在火花服务器上使用Livy API (or client)来推送python脚本。我已经尝试了以下。卷曲-X POST --data '{ “文件”： “/user/test/pi.py”}' -H “内容类型：应用/ JSON” 本地主机：8998 /批次，但是当我看到它给没有发现，因为它试图找到服务器上的路径文件的日志。使用Livy Python Client。

0热度

1回答

如何向Livy提交依赖的JAR？

我在HDInsight上使用Livy将作业提交给Spark群集。我将我的代码写入并编译到JAR中，但它有多个依赖项，其中一些依赖于自定义存储库。我该如何让Livy自己解决这些依赖关系？我不想提交一个胖的jar包，因为依赖关系总是在变化，我不喜欢涉及到的ops努力。

1热度

1回答

在zeppelin中显示全列大小sql

我只是想显示没有截断的列到select中，我有一个数组或一个非常大的长度的Map。我用飞艇来查询DF寄存器作为临时表： %livy.sql select * from maTable 我想有Consommeur列全长我得到的是这样的：你有任何想法？

0热度

1回答

如何在Windows上构建Livy客户端？

我想在Windows上编写一个Java应用程序，该应用程序使用Livy的Java API与远程托管的Apache Livy服务器通信。该docs说： Add the Livy client dependency to your application's POM: <dependency> <groupId>org.apache.livy</groupId> <artifact