Spark基础教程(七)
任务提交简易流程
- Client提交任务后，Client会启动一个Driver进程。
- Client为当前的application向Master申请资源。
- Master找到满足资源的Worker节点，启动Executor（内有ThreadPool，可以跑Task）。
- Executor启动后，会反向注册给Driver（告诉Driver：你可以给我发Task，我有能力run）。
- Driver将task发送给Executor、监控Task的执行情况，并回收结果。