29558 [Thread-49-spout-executor[8 8]-EventThread] INFO o.a.c.f.s.ConnectionStateManager - State change: CONNECTED 29644 [Thread-49-spout-executor[8 8]] INFO o.a.s.k.DynamicBrokersReader - Read partition info from zookeeper: GlobalPartitionInformation

如题 遇到困难了 急求 如果有哪位大神会的话回复一下感激不尽

sparksql2.0版本如何修改指定行的指定属性（Dateframe）

使用pipeline 准备操作数据 但是在pipeline.setstages()加入vectorassmbler提示 typemismatch？

[图片]

先贴一下报错信息 如下所示，是我的代码： ------------------------------------------------------------------ ------------------------------------------------------------------ 上边循环是columns的值，是已经排序好的。 遍历所有列将列封装到Tuple2对象里边，但是保存的时候还是会报后边列没有前边列大。

我这边用的是新的groupId，在kafka上没有看到这个group出现，yarn日志没有报错，没有异常，就是卡住不动了

Error:(6, 12) object apache is not a member of package org import org.apache.spark.sql.{Encoder, Encoders} Error:(16, 42) not found: type Encoder implicit def newOggMessageBeanEncoder: Encoder[OggMessageBean] = Encoders.bean(classOf[OggMessageBean])

spark如何读取MinIO中的数据，hadoop的aws包可以吗？

本人刚开始学习spark，在创建独立应用时，遇到了错误ImportErrorn: Cannot import name SparkConf. 下面是具体的错误截图以及我的代码。另外，我的spark是运行在自己搭建的hadoop集群（3节点）上的，初始化SparkContext这部分我是百度的，不知道setMaster这个地方写的对不对。初始化之外的部分，我在PySpark shell上运行是没有问题的，截图如下。请各位大神指点！！

有什么办法可以绕过这个报错吗？ sql如下: SELECT COUNT(*) total,t.col1,t.col2,t.col3,t.col4 CASE WHEN col3='abc' THEN (SELECT MAX(col2) FROM xxx_log f WHERE col4='xxx11' AND col1=t.col1 AND col2=t.col2 ) ELSE t.col2 END newCol2 FROM xxx_log t 报错信息: xception in thread "

spark版本 2.4.3 模型训练好后保存到本地，再从本地加载使用的时候报错。无法加载，怎么回事？求大佬帮忙！[face]monkey2:019.png[/face][face]monkey2:019.png[/face]

用spark写的一个融合表，运行的时候出来问题

输入yum list就会出现这种情况，是什么情况？是挂载没挂好还是什么问题？

"aggregations": [{ "type": "filtered", "filter": { "type": "and", "fields": [{ "type": "interval", "dimension": "__time", "intervals": ["2020-11-09T00:00:00.000+08:00/2020-11-09T23:59:59.000+08:00"] }] }, "aggregator": { "type": "hyperUnique", "name"