执行类似 xxx.write.format(“par…
月度归档: 2019 年 10 月
spark作业运行报org.apache.spark.shuffle.FetchFailedException
spark在运行过程中出现task fail 报如下错误: or…
spark Sql语句很长时Driver端出现栈溢出 java.lang.StackOverflowError
执行类似如下形式的Sql: select user_id fro…
spark 运行时报 Asked to remove non-existent executor
spark运行过程中打印如下信息: 15/06/23 17:50…
spark作业提交报InvalidClassException
启动Spark作业报如下错误: ERROR Remoting: …
spark 单个task拖慢集群任务(开启推测执行)
spark有些情况下单个任务运行特别慢, 比如原因有:数据倾斜,…
为什么精英都是时间控-读书总结,感悟
推荐此书不错, 讲了许多可以提高专注度的方法,认为完成的工作量=…