如何计算spark中某个文件的内存占用情况？

[mumumuyanyanyan]

通过spark读取文件，如何计算或者查看该文件内存占用情况？
比如
val memory = sc.textFile("part-all0")

我想知道这个文件占用多大内存

[上海菁数信息——实时数字智能]

1. 这个语句不会直接占用内存，在后面时才会加载进来，是惰性的 2. 集群环境中，会分散到多个节点上分摊使用内存，追踪的话需要看你时spark on yarn还是standalone不同的模式有不同的方式