2.3.5 也还是有这个问题，用的搜狗输入法

招商银行有全币种国际信用卡

合盖前把 WiFi 关了

@WendellSun 大佬厉害了啊

成都招大数据的吗

Remember me.....
刚刚才看了，很赞的。

@yanzixuan 那就很尴尬了，或者考虑 scala+shell 的方式吧

没用过 python spark，看 7688 介绍说升级到 python 3.1.0 可以用的嘛

对于 limit 操作，spark 的处理方式是对 RDD 的每个分区 take(limit),然后将每个分区 take 后的 RDD 转换成 SinglePartition 的 ShuffledRowRDD,然后再对每个分区 take(limit)，由于只有一个分区，因此结果就是最终的 limit 结果。
因此就明白为啥 limit 后 RDD 分区数量为 1 了。

给大佬跪了。。。

mac 上没有专门的 spark 任务监控工具
但是 spark 自身提供了一套 REST API，可以监控 application、executor、job、task 等状态，http://spark.apache.org/docs/latest/monitoring.html#rest-api，可以从这方面入手。