openstack L3-GRE 网络结构分析记录 (Icehouse) 第五篇（多外部网络）

在这样的一个环境中，所有计算节点与互联网之间的通信都通过一个网络节点，且网络节点只有一个互联网线路，在实际中，往往可能涉及到多个运营商线路的接入，那么当一个网络节点需要同时与多个外部网络进行连接的话，该怎么办。

通过之前的文章，可以知道，当多个租户共享同一个网络网络时候，其结构如下：

虽然每个租户都有一个自己的虚拟路由器，但是这些虚拟路由器都最终桥接到了同一个br-ex的网桥，那么如何实现接入多个外部网络？

根据文档：http://docs.openstack.org/training-guides/content/operator-network-node.html

Multiple Floating IP Pools

The L3 API in OpenStack Networking supports multiple floating IP pools. In OpenStack Networking, a floating IP pool is represented as an external network and a floating IP is allocated from a subnet associated with the external network. Since each L3 agent can be associated with at most one external network, we need to invoke multiple L3 agent to define multiple floating IP pools. 'gateway_external_network_id'in L3 agent configuration file indicates the external network that the L3 agent handles. You can run multiple L3 agent instances on one host.

In addition, when you run multiple L3 agents, make sure that handle_internal_only_routers is set to True only for one L3 agent in an OpenStack Networking deployment and set to False for all other L3 agents. Since the default value of this parameter is True, you need to configure it carefully.

Before starting L3 agents, you need to create routers and external networks, then update the configuration files with UUID of external networks and start L3 agents.

一个l3-agent最多只能关联一个外部网络，那么当多个外部网络存在时候，则需要在该网络节点上运行多个l3-agent。所以为了实现如下多外部网络，

我们需要创建第二个l3-agent：
1. 在网络节点上使用另一物理网卡（假设为eth3）接入第二条internet线路，从openstack角度，我们称之为第二外部网络

2. 创建第二个网桥，br-ex2
ovs-vsctl add-br br-ex2

3. 将eth3 加入br-ex2网桥中
ovs-vsctl add-port br-ex2 eth3

4. 修改现有l3-agent.ini配置, 将已存在的第一个外部网络ID与该l3-agent关联：

注意上述输出中的id，internet是已存在的外部网络name

* 注意handle-internal-only-routers 设置为true

5.创建第二个共享的external网络和其子网

这一步可通过horizon图形界面或直接使用neutron命令皆可，在admin租户下创建一个名叫internet2的共享的外部网络，并设置其子网为实际的外部网络子网，这里实验中的第二外部网络网段为192.168.205.0/24 ，结果如下：

5.创建第二个l3-agent.ini配置，命名为l3-agent2.ini

-进入/etc/neutron，直行cp l3_agent.in l3_agent2.ini
-修改l3_agent2.ini为：

*注意handle-internal-only-routers=false，设置network id为internet2的 ID

6.设置自启动第二个l3-agent2服务

- cd /etc/init
- cp neutron-l3-agent.conf neutron-l3-agent2.conf,并修改neutron-l3-agent2.conf为：

最后重启机器，确认l3-agent服务正常

这样，openstack就将internet2网络与br-ex2进行了mapping，当一个租户的虚拟路由器将internet2作为gateway设置时，系统将自动在br-ex2中添加qg***接口。 例如，为tenant3租户创建了两个路由器，并分别关联到internet和internet2上：

上述两个路由器的namespace中接口如下：
internet路由器接口：

internet2 路由器接口：

这样，在tennant3租户中就形成了这样的网络:

红圈中的实例通过internal和internal2 连接到了两个路由器上，形成了两个网络出口。

这样则可以为该实例分配两个网络的floating ip：

在各个路由器的namespace中产生了各自的nat条目：

备注：
在一个网络节点上运行多个l3-agent，测试发现不是那么稳定，会出现当设置或取消路由器的gateway设置时，ovs不能对应的在正确的网桥中增加或删除相关qg*接口。

该方式依旧是在一个网络节点实现多外部网络接入，一个网络节点容易成为瓶颈，因此若考虑实现多个网络节点，每个网络节点分别接入不同的外部网络，如何实现？ 待后续文章。