Standalone cluster模式下怎么生成一个DriverDescription类型的消息


这篇文章主要讲解了“Standalone cluster模式下怎么生成一个DriverDescription类型的消息”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“Stand开发云主机域名alone cluster模式下怎么生成一个DriverDescription类型的消息”吧!先看看代码,这个类代码比较短,目录是deploy/rest/下。创建一个RestSubmissionClient的client,然后将消息提交给client,消息的格式为:(appResource, mainClass, appArgs, sparkProperties, env)client.createSubmission(submitRequest)client.createSubmission命令做哪些事呢?他就是提交消息给服务端,真实的处理者是服务端,是RestSubmissionServer类或者它的子类。对于独立集群来说,就是StandaloneRestServer来处理的,我们就只看submit命令的处理逻辑就可以了。相关的函数有两个:私有方法buildDriverDescription和重写接口方法handleSubmithandleSubmit里调用了前一个方法,最关键的代码是两行:生成一个DriverDescription类型的消息,然后给Master发送RequestSubmitDriver消息,让Master来调度执行我们的spark程序,就是这里的driver。接下来,就进入了Master的处理流程了。 感谢各位的阅读,以上就是“Standalone cluster模式下怎么生成一个DriverDescription类型的消息”的内容了,经过本文的学习后,相信大家对Standalone cluster模式下怎么生成一个DriverDescription类型的消息这一问题有了更深刻的体会,具体使用情况还需要大家实践验证。这里是开发云,小编将为大家推送更多相关知识点的文章,欢迎关注!

相关推荐: 桌面虚拟化 | 同VDI扭打,IDV要如何补齐短板?

桌面云技术从诞生之初就深入“人”心,越来越多的政府、学校、企业等机构已经应用桌面云,即便如此,桌面云仍然具备着巨大的市场潜力: 2016-2022年中国桌面云行业市场规模预测 (图片来源:智研数据中心) 随着桌面虚拟化技术的迭代更新,从传统主流的VDI到近几年…

免责声明:本站发布的图片视频文字,以转载和分享为主,文章观点不代表本站立场,本站不承担相关法律责任;如果涉及侵权请联系邮箱:360163164@qq.com举报,并提供相关证据,经查实将立刻删除涉嫌侵权内容。

(0)
打赏 微信扫一扫 微信扫一扫
上一篇 05/20 22:32
下一篇 05/20 22:32

相关推荐