执行类似如下形式的Sql: select user_id fro…
spark 运行时报 Asked to remove non-existent executor
spark运行过程中打印如下信息: 15/06/23 17:50…
spark作业提交报InvalidClassException
启动Spark作业报如下错误: ERROR Remoting: …
spark 单个task拖慢集群任务(开启推测执行)
spark有些情况下单个任务运行特别慢, 比如原因有:数据倾斜,…
为什么精英都是时间控-读书总结,感悟
推荐此书不错, 讲了许多可以提高专注度的方法,认为完成的工作量=…
spark优化技巧: spark的排序任务很慢, 优化方式
对query按PV排序的时候, 特别慢, 原因是query往往很…
大话Spark(9)-源码之TaskScheduler
上篇文章讲到DAGScheduler会把job划分为多个Stag…
500GJava/Hadoop/Spark/机器学习…视频教程免费分享 百度云持续更新
参加工作这么长时间了,工作中遇到了不少技能都是看视频教程学习的,…
上百本电子书(Java/Hadoop/Spark/Linux/机器学习/)免费分享 百度云持续更新
分享一下自己整理的超多电子书, 其中包括:Java,Hadoop…
大话Spark(8)-源码之DAGScheduler
DAGScheduler的主要作用有2个: 一、把job划分成多…