基于spark实现大表join效率优化效果好吗？

[treetor]

基于spark实现大表join效率优化效果好吗？能实现毫秒级join吗

[chyanch]

Spark 大表join效率取决于数据条数，记录大小，数据是否排过序等因素影响。实际操作过的3张5百万大表join在60s吧，仅供参考。