如何添加第三方Java JAR文件以在PySpark中使用

斯蒂芬·博斯

我有一些Java第三方数据库客户端库。我想通过访问它们

java_gateway.py

例如:通过Java网关使客户端类(不是JDBC驱动程序!)可用于Python客户端:

java_import(gateway.jvm, "org.mydatabase.MyDBClient")

目前尚不清楚将第三方库添加到JVM类路径的位置。我试图将其添加到文件compute-classpath.sh,但这似乎没有用。我得到:

Py4jError:尝试调用程序包

另外,与Hive相比:Hive JAR文件没有通过文件compute-classpath.sh加载,这使我感到怀疑。似乎还有其他机制正在建立JVM端类路径。

马尔

您可以将外部jar添加为pyspark的参数

pyspark --jars file1.jar,file2.jar

本文收集自互联网,转载请注明来源。

如有侵权,请联系[email protected] 删除。

编辑于
0

我来说两句

0条评论
登录后参与评论

相关文章

来自分类Dev

如何添加第三方Java jar以便在pyspark中使用

来自分类Dev

如何使用第三方应用程序在 Dropbox 中添加文件?

来自分类Dev

如何在Notes Xpages应用程序中添加外部第三方jar?

来自分类Dev

如何添加第三方SDK(多个.framework文件)以响应本机库模块?

来自分类Dev

使用angular-cli时如何添加第三方库?

来自分类Dev

如何使用第三方@ConfigurationProperties @Bean?

来自分类Dev

ImageJ:如何使用第三方插件API?

来自分类Dev

如何使用第三方组件

来自分类Dev

如何查找第三方库中正在使用的第三方组件

来自分类Dev

使用sbt发布jar文件(第三方)

来自分类Dev

使用sbt发布jar文件(第三方)

来自分类Dev

如何将第三方Java库编译为我可以使用的jar文件?

来自分类Dev

使用第三方控件

来自分类Dev

使用第三方控件

来自分类Dev

第三方库的使用

来自分类Dev

第三方jar取决于其他第三方jar

来自分类Dev

ClassNotFoundException:在Android中的libs中添加了第三方JAR文件时发生

来自分类Dev

在angular指令中使用第三方lib

来自分类Dev

在Jint中使用第三方js库

来自分类Dev

在NetBeans中使用第三方库

来自分类Dev

在Eclipse for Android中使用第三方库

来自分类Dev

在Jint中使用第三方js库

来自分类Dev

如何使用Java JDK 1.7在我的第三方服务器上对GKLocalPlayer进行身份验证?

来自分类Dev

在风暴拓扑中使用第三方库时出现java.lang.UnsatisfiedLinkError

来自分类Dev

在Java中使用curl调用第三方REST API

来自分类Dev

如何在Laravel中使用第三方软件包?

来自分类Dev

如何在Spring MVC中使用第三方WSDL服务

来自分类Dev

如何在taskKey中使用第三方库?

来自分类Dev

如何在ionic 2中使用第三方javascript库(pixijs)?

Related 相关文章

热门标签

归档