spark Flume问题

ᯤ ʸ ᵒ ᵘ692 2023-12-24 21:51:45

ERROR Executor:91 - Exception in task 0.0 in stage 1124.0 (TID 1090)
java.lang.AbstractMethodError: org.apache.spark.streaming.flume.FlumeReceiver.initializeLogIfNecessary(ZZ)Z
这个问题怎么解决？

...全文

244 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

这个压缩包中包含的是Flume-1.6.0对接Spark-1.6.2下的Spark Streaming时需要用到的jar包，将这些jar包放置到flume安装目录下对应的lib中

本科毕业设计项目，基于spark streaming+flume+kafka+hbase的实时日志处理分析系统基于spark streaming+flume+kafka+hbase的实时日志处理分析系统本科毕业设计项目，基于spark streaming+flume+kafka+hbase的实时日志处理分析系统基于spark streaming+flume+kafka+hbase的实时日志处理分析系统本科毕业设计项目，基于spark streaming+flume+kafka+hbase的实时日志处理分析系统基于spark streaming+flume+kafka+hbase的实时日志处理分析系统本科毕业设计项目，基于spark streaming+flume+kafka+hbase的实时日志处理分析系统基于spark streaming+flume+kafka+hbase的实时日志处理分析系统本科毕业设计项目，基于spark streaming+flume+kafka+hbase的实时日志处理分析系统基于spark streaming+flume

spark-streaming-flume_2.11-2.1.0.jar

大数据笔记，包含Hadoop、Spark、Flink、Hive、Kafka、Flume、ZK...... 大数据笔记，包含Hadoop、Spark、Flink、Hive、Kafka、Flume、ZK...... 大数据笔记，包含Hadoop、Spark、Flink、Hive、Kafka、Flume、ZK...... 大数据笔记，包含Hadoop、Spark、Flink、Hive、Kafka、Flume、ZK...... 大数据笔记，包含Hadoop、Spark、Flink、Hive、Kafka、Flume、ZK...... 大数据笔记，包含Hadoop、Spark、Flink、Hive、Kafka、Flume、ZK...... 大数据笔记，包含Hadoop、Spark、Flink、Hive、Kafka、Flume、ZK...... 大数据笔记，包含Hadoop、Spark、Flink、Hive、Kafka、Flume、ZK...... 大数据笔记，包含Hadoop、Spark、Flink、Hive、Kafka、Flume、ZK...... 大数据笔记，包含Hadoop

使用spark集成flume，由于flume默认只支持pull消息的方式，不过它可以自定义消息拉取方式，现要使用poll方式，可以使用spark-streaming-flume-sink_2.11-2.1.0.jar包下的org.apache.spark.streaming.flume.sink.SparkSink

1,269

社区成员

1,169

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章