首页 > 代码库 > nova-conductor与AMQP(一)

nova-conductor与AMQP(一)

源码版本:H版

一、AMQP基础

1.1什么是AMQP?

可以参考如下文章:

http://blog.csdn.net/linvo/article/details/5750987

http://blog.csdn.net/gaoxingnengjisuan/article/details/11468061

 

1.2 nova中的AMQP

可以参考如下文章:

http://docs.openstack.org/developer/nova/devref/rpc.html

 

二、以nova-conductor为例具体分析

  凡是对外提供RPC调用的组件都会包含rpcapi.py文件,将这些调用放在该文件中。如果需要对这些组件进行rpc调用,只需导入这个rpcapi.py文件,然后创建相应的类,调用相应的函数。

  在rpcapi.py中一般API类的函数都是调用self.clent的cast函数或call函数发送消息。其中,cast函数是异步的,不需要返回结果,而call函数是同步的,需要等待结果返回。我们需要进一步了解这个self.client对象。在这些API类的构造函数中我们发现self.client对象都是通过self.get_client函数获得,由于这些API类都继承nova.rpcclient.RpcProxy类,所以其调用的get_client函数就是nova.rpcclient.RpcProxy中的get_client,该方法获得的实例为nova.rpcclient.RPCClient对象。总的来说,就是rpcapi.py中的类方法都是借用nova.rpcclient.RPCClient对象的cast或call进行消息的发送。

  以nova.conductor.rpcapi.ComputeTaskAPI的 build_instances函数为例,这里希望通过该api调用nova-conductor为我们建立虚拟机,进一步的分析如下:

def build_instances(self, context, instances, image, filter_properties,            admin_password, injected_files, requested_networks,            security_groups, block_device_mapping, legacy_bdm=True):    instances_p = [jsonutils.to_primitive(inst) for inst in instances]    image_p = jsonutils.to_primitive(image)    cctxt = self.client.prepare(version=‘1.5‘)    cctxt.cast(context, build_instances,               instances=instances_p, image=image_p,               filter_properties=filter_properties,               admin_password=admin_password,               injected_files=injected_files,               requested_networks=requested_networks,               security_groups=security_groups,               block_device_mapping=block_device_mapping,               legacy_bdm=legacy_bdm)

  根据上面的说明,cctxt.cast 实际为RPCClient的cast函数,如下:

def cast(self, ctxt, method, **kwargs):    if self.server_params:        def cast_to_server(ctxt, msg, **kwargs):            if self.fanout:                return self.proxy.fanout_cast_to_server(                    ctxt, self.server_params, msg, **kwargs)            else:                return self.proxy.cast_to_server(                    ctxt, self.server_params, msg, **kwargs)        caster = cast_to_server    else:        """caster为ComputeTaskAPI实例的cast方法"""        caster = self.proxy.fanout_cast if self.fanout else self.proxy.cast    """调用caster方法"""    self._invoke(caster, ctxt, method, **kwargs)

  RPCClient中的self.proxy指向处理rpc的代理,这里为ComputeTaskAPI类,说了半天其实创建了RPCClient,但是RPCClient又回来调用API类自身的cast方法。由于继承关系,直接进入nova.openstack.common.rpc.proxy.py中,调用RpcProxy的cast方法。如下:

def cast(self, context, msg, topic=None, version=None):    self._set_version(msg, version)    msg[args] = self._serialize_msg_args(context, msg[args])    """其中rpc为nova.openstack.common.rpc"""    rpc.cast(context, self._get_topic(topic), msg)

  进入nova/openstack/common/rpc/__init__.py模块,如下:

def cast(context, topic, msg):    return _get_impl().cast(CONF, context, topic, msg)

  先看_get_impl()函数:

def _get_impl():    global _RPCIMPL    if _RPCIMPL is None:        try:            _RPCIMPL = importutils.import_module(CONF.rpc_backend)        except ImportError:            impl = CONF.rpc_backend.replace(nova.rpc,                                            nova.openstack.common.rpc)            _RPCIMPL = importutils.import_module(impl)    return _RPCIMPL

  此处rpc_backend为qpid,进入nova/openstack/common/rpc/impl_qpid.py。由于AMQP后端的实现有多种,所以这里对各种后端实现进行封装,对外提供统一的接口。且看cast函数:

def cast(conf, context, topic, msg):    return rpc_amqp.cast(        conf, context, topic, msg,        rpc_amqp.get_connection_pool(conf, Connection))

  rpc_amqp.get_connection_pool(conf, Connection)可以获取AMQP连接池,这个连接池和具体的AMQP后端实现对应,接着来看该cast方法,其为nova.openstack.common.amqp.cast,主要内容为从连接池中建立连接,然后使用impl_qpid.py中的Connection连接发送消息。后面的处理过程可以参考:

http://blog.csdn.net/gaoxingnengjisuan/article/details/12230521。主要内容就是建立创建TopicPublisher并绑定exchange,然后发送消息。

  总结流程图如下:

  在消息队列的使用中,最关键的是exchange和topic,其确定了消息将发送至哪个队列,也就确定了消息将由哪个组件的哪个函数处理。所有的nova服务组件启动时都会设置exchange为nova,使用哪个组件的rpcapi.py文件中的类就会将topic初始化为该组件的topic,每个组件的topic具体内容会在/etc/nova/nova.conf中进行配置。这样exchange和topic就共同确定了消息的处理流程!!!

 

nova-conductor与AMQP(一)