Spark+Kafka构建实时分析Dashboard-问题解答(有偿)
张凯成 2019-08-21 07:36:26 本人在运行厦门大学大数据实验室《Spark+Kafka构建实时分析Dashboard》案例时,遇到个人难以解决的问题,发帖求助论坛大牛,望大牛能够给予一些帮助。解决问题后,有偿回报!!!
在运行程序时遇见的问题如下:按照官方的教程,一直顺利进行,直到在步骤三:Spark Streaming实时处理数据(python版本),安装kafka于运行测试实例时,都可以正常运行。出错的地方在:使用Spark Streaming 读取kafka topic为'sex'的数据,进行处理,将处理后的数据在以 topic 为result的数据存入kafka中,最后我在运行消费者读取topic为result的数据。在这个流程中,Spark Streaming与kafka之间的数据交互总是不能实现,使用kafka消费者消费result数据时总是不成功。望论坛大牛可以给予帮助。解决问题后有偿回报!!!!!
最后附上本人重现的实验环境:VritualBox 上的ubuntu16.04系统。实验项目链接地址:http://dblab.xmu.edu.cn/post/8274/