1,273
社区成员
发帖
与我相关
我的任务
分享spark加载使用第三方动态库.so文件
这边有个任务，通过音频来解析年龄和性别，这个过程中需要用到第三方动态库（.so文件），请教大神在spark中怎样加载和使用第三方库？
...全文
请发表友善的回复…
发表回复
东哥说-MES|从入门到精通 2017-07-11
- 打赏
- 举报
如何解决，
http://blog.csdn.net/ddjj_1980/article/details/74940593
sunwenzhi168 2017-07-10
- 打赏
- 举报
请教楼主如何解决的
Myra_Maimaimai 2016-03-08
- 打赏
- 举报
我用的是python，pyspark.SparkContext 的 addFile(path)可以用来将文件分发至各计算节点供调用（Add a file to be downloaded with this Spark job on every node），so库调用没有问题，我用过
冰雪_ang 2015-12-09
- 打赏
- 举报
这种方法太笨了，我想要的是通过spark代码加载进来，然后发布到各个计算节点，就类似hadoop的DistributedCache.addFileToClassPath()函数。
hijk8388 2015-11-01
- 打赏
- 举报
spark的每个节点也是一个linux主机，.so文件放到各个节点，工程通过java调用.so试试
