热线电话:13121318867

登录
2019-01-20 阅读量: 977
spark中driver的作用?

spark中driver的作用是什么?

答:driver:

I.串联各个算子操作:DAG:有向无环图

II.拆分各个stage阶段

III.部分功能相当于yarn中的applicationmaster

dagscheduler:是driver中的一个组件,执行II操作:拆分各个stage阶段

taskscheduler:是driver中的一个组件,执行III操作:部分功能相当于applicationmaster

0.0000
0
关注作者
收藏
评论(0)

发表评论

暂无数据
推荐帖子