如何添加第三方Java jar以便在pyspark中使用

斯蒂芬·博斯

我有一些使用Java的第三方数据库客户端库。我想通过访问它们

java_gateway.py

例如:通过Java网关使客户端类(不是jdbc驱动程序!)可用于python客户端:

java_import(gateway.jvm, "org.mydatabase.MyDBClient")

目前尚不清楚将第三方库添加到jvm类路径的位置。我试图添加到compute-classpath.sh,但这似乎并没有奏效:我明白了

 Py4jError: Trying to call a package

另外,与Hive进行比较时:Hive jar文件不会通过compute-classpath.sh加载,这使我感到怀疑。似乎在建立jvm端类路径的其他机制正在发生。

马尔

您可以将外部jar添加为pyspark的参数

pyspark --jars file1.jar,file2.jar

本文收集自互联网,转载请注明来源。

如有侵权,请联系[email protected] 删除。

编辑于
0

我来说两句

0条评论
登录后参与评论

相关文章

来自分类Dev

如何添加第三方Java JAR文件以在PySpark中使用

来自分类Dev

如何在Notes Xpages应用程序中添加外部第三方jar?

来自分类Dev

使用angular-cli时如何添加第三方库?

来自分类Dev

如何使用第三方应用程序在 Dropbox 中添加文件?

来自分类Dev

如何使用第三方@ConfigurationProperties @Bean?

来自分类Dev

ImageJ:如何使用第三方插件API?

来自分类Dev

如何使用第三方组件

来自分类Dev

如何查找第三方库中正在使用的第三方组件

来自分类Dev

如何安装第三方模块,以便在启动时加载?

来自分类Dev

如何安装第三方模块,以便在启动时加载?

来自分类Dev

使用第三方控件

来自分类Dev

使用第三方控件

来自分类Dev

第三方库的使用

来自分类Dev

第三方jar取决于其他第三方jar

来自分类Dev

如何将第三方Java库编译为我可以使用的jar文件?

来自分类Dev

使用sbt发布jar文件(第三方)

来自分类Dev

使用sbt发布jar文件(第三方)

来自分类Dev

ClassNotFoundException:在Android中的libs中添加了第三方JAR文件时发生

来自分类Dev

如何使用Java JDK 1.7在我的第三方服务器上对GKLocalPlayer进行身份验证?

来自分类Dev

在angular指令中使用第三方lib

来自分类Dev

在Jint中使用第三方js库

来自分类Dev

在NetBeans中使用第三方库

来自分类Dev

在Eclipse for Android中使用第三方库

来自分类Dev

在Jint中使用第三方js库

来自分类Dev

在风暴拓扑中使用第三方库时出现java.lang.UnsatisfiedLinkError

来自分类Dev

在Java中使用curl调用第三方REST API

来自分类Dev

如何在Laravel中使用第三方软件包?

来自分类Dev

如何在Spring MVC中使用第三方WSDL服务

来自分类Dev

如何在taskKey中使用第三方库?

Related 相关文章

热门标签

归档