【GraphX】有无全局节点属性聚合函数

forPrometheus 2022-10-11 20:11:30

统计图中节点不同属性值相应的数目,类似于python中collections.Counter

假设有一个图

则希望输出:

{1: 4, 2: 3}

或者输出具体的节点:

{1: [1, 2, 3, 4], 2: [5, 6, 7]}

 我希望最终这个函数能够和pregel一起使用,在pregel的每个迭代轮次对某个属性进行统计,当属性值等于目标值的节点数量达到阈值后,pregel停止超步迭代(例如某个联通子图的大小超过10后)

...全文
290 回复 打赏 收藏 转发到动态 举报
AI 作业
写回复
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复

1,269

社区成员

发帖
与我相关
我的任务
社区描述
Spark由Scala写成,是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用的并行计算框架,Spark基于MapReduce算法实现的分布式计算。
社区管理员
  • Spark
  • shiter
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧