spark streaming 输出采用gzip压缩，导致direct memory 内存泄漏

[qq_19917081]

spark streaming 对接kafka ，然后自定义输出，保存到hdfs，按文件内容，一小时为一批文件，实现文件追加，采用gzip压缩输出文件，但是运行起来后，发现executor 过几个小时就被yarn kill掉，然后启动新的，追踪发线是因为压缩导致的direct memory 内存泄漏，因为压缩使用java的NIO，会使用direct memory，求解决方法！！