【GraphX】有无全局节点属性聚合函数

forPrometheus forPrometheus 墨衍会员 · AI 创作全网分发 墨衍智能分发 通过墨衍一键同步至各平台 可同步平台 CSDN微信公众号微博知乎掘金百家号博客园抖音小红书 你的文章也可以这样分发 墨衍会员 ¥399起/年,写一次发全网 我也要 + 加入社区

统计图中节点不同属性值相应的数目,类似于python中collections.Counter

假设有一个图

则希望输出:

{1: 4, 2: 3}

或者输出具体的节点:

{1: [1, 2, 3, 4], 2: [5, 6, 7]}

 我希望最终这个函数能够和pregel一起使用,在pregel的每个迭代轮次对某个属性进行统计,当属性值等于目标值的节点数量达到阈值后,pregel停止超步迭代(例如某个联通子图的大小超过10后)

...全文
评论
收藏 已收藏
分享
返回顶部
forPrometheus
Spark 1,274 成员 1,171 内容