Apache Mesos模块间通信架构

1.  介绍

创新互联专注于网站建设，为客户提供做网站、成都网站建设、网页设计开发服务，多年建网站服务经验，各类网站都可以开发，品牌网站制作，公司官网，公司展示网站，网站设计，建网站费用，建网站多少钱，价格优惠，收费合理。

Mesos主要由四种组件组成，分别是mesos-master，mesos-save，scheduler和Executor，各个组件之间采用了基于protocal buffer的actor model进行通信（采用开源库libprocess）。也就是说，各个模块分别是一个server(实际上是socket server)，分别监听来自其他模块的消息，一旦收到某个消息后，便会调用相应的消息处理函数进行处理。

（什么是apache mesos？参考：《统一资源管理与调度平台（系统）介绍》,本文分析基于Mesos SVN Revision 1327410）.

2. 通信框架概述

对于某个计算框架（如Hadoop，Spark等），如果想接入Mesos，需要编写两个组件，分别是FrameworkSchduler和 FrameworkExecutor，这两个组件分别实现Scheduler和Executor接口，并分别通过SchedulerDriver和 ExecutorDriver接入Mesos，如图中黑色虚线，表示这几个组件之间通过函数调用产生关系。

其他组件，即mesos-master，mesos-save，SchedulerProcess和ExecutorProcess之间则通过消息机制进行通信（使用libprocess开源库）。

（1）【SchedulerProcess与mesos-master】：mesos-master为各个framework分配资源，这些资源直 接传递给SchedulerProcess，再由SchedulerProcess调用 FrameworkScheduler的相关函数，由FrameworkScheduler将这些资源分配给框架中的任务，并返回给mesos- master，由mesos-master转发给相应的mesos-slave。

（2）【SchedulerProcess与Mesos-slave】：如果SchedulerProcess中保存了Mesos-slave的地址，则直接将相关消息发送给Mesos-slave，不必再由mesos-master转发。

（3）【Mesos-master与Mesos-slave】：Mesos-master管理mesos-slave，如监控slave的健康状况等

（4）【Mesos-slave与ExecutorProcess】：Mesos-slave负责管理各个framework的executor，并为executor分配资源等。

具体如下图所示。

3. 消息类型及其处理函数

3.1 Mesos-Slave的消息类型及处理函数

3.2  Mesos-master的消息类型及处理函数

3.3  scheduler的消息类型及处理函数

位于sched/sched.cpp中，由SchedulerProcess/MesosSchedulerDriver实现

3.4  Executor的消息类型及处理函数

位于文件exec/exec.cpp中，由ExectorProcess中实现

网页名称：Apache Mesos模块间通信架构
本文URL：http://www.shufengxianlan.com/qtweb/news28/203478.html

网站建设、网络推广公司-创新互联，是专注品牌与效果的网站制作，网络营销seo公司；服务项目有等

广告

声明：本网站发布的内容（图片、视频和文字）以用户投稿、用户转载内容为主，如果涉及侵权请尽快告知，我们将会在第一时间删除。文章观点不代表本网站立场，如需处理请联系客服。电话：028-86922220；邮箱：631063699@qq.com。内容未经允许不得转载，或转载时需注明来源： 创新互联