一、相关限制
- cvm规格对弹性网卡的限制 根据 CPU 和内存配置不同,云服务器可以绑定的弹性网卡数和单网卡绑定内网 IP 数有相关限制; 具体参考官网说明
- cvm规格对弹性ip的限制 根据 CPU 配置的差异,单台云服务器支持绑定的公网 IP 数量上限有相关限制; 具体参考官网说明
- vpc下允许配置的网卡上限限制 截止本文生成(2020年4月12日),限制同一个 VPC 下的云服务器最多绑定50个弹性网卡; 具体参考官网说明
二、创建cvm
创建cvm可以参考官网文档,本文主要演示如果在腾讯云cvm上配置一个主网卡与两个辅助网卡。作者已经购买好cvm和弹性公网ip,这里提前给出规划的ip与网卡对应关系:
网卡属性 | 网卡名 | 内网ip | 外网ip |
---|---|---|---|
主网卡 | test_cd_tel | 172.27.0.11 | 132.232.61.253 |
辅助网卡 | test_cd_cnc | 172.27.1.11 | 132.232.247.133 |
辅助网卡 | test_cd_cmcc | 172.27.2.11 | 111.231.194.145 |
三、创建弹性网卡
- 打开弹性网卡控制台
- 选择要配置的cvm所在的地区和vpc,然后选择新建。
- 在弹窗中输入网卡名称,选择cvm所在的私有网络和子网,如下图:
- 详细配置可以参考腾讯云官网配置手册
四、绑定弹性网卡
注意:要先将网卡绑定到云服务器,再将公网ip绑定到网卡上,顺序相反会报错。
1.绑定云服务器
回到刚才的弹性网卡页面,在右上角搜索“test_cd”,可以看到作者在此创建了两个辅助弹性网卡和主网卡,点击如下图中的网卡右侧的绑定云服务器,在弹出的页面中绑定cvm。
注意下图中红框标注的配额,确认自己的服务器是否支持绑定
- 详细配置可以参考腾讯云官网配置手册
2.绑定公网ip
绑定完云服务器后,到云服务器页面,找到自己的实例,进入实例页面,查看弹性网卡子页,点击绑定,绑定已经购买好的弹性公网ip
五、配置弹性网卡
1.查看网卡对应关系
登录服务器,查看网卡mac地址
代码语言:txt复制root@server ~# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
valid_lft forever preferred_lft forever
inet6 ::1/128 scope host
valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc mq state UP group default qlen 1000
link/ether 52:54:00:17:8e:55 brd ff:ff:ff:ff:ff:ff
inet 172.27.0.11/20 brd 172.27.15.255 scope global eth0
valid_lft forever preferred_lft forever
inet6 fe80::5054:ff:fe17:8e55/64 scope link
valid_lft forever preferred_lft forever
26: eth1: <BROADCAST,MULTICAST> mtu 1500 qdisc noop state DOWN group default qlen 1000
link/ether 20:90:6f:ca:6c:57 brd ff:ff:ff:ff:ff:ff
27: eth2: <BROADCAST,MULTICAST> mtu 1500 qdisc noop state DOWN group default qlen 1000
link/ether 20:90:6f:56:21:03 brd ff:ff:ff:ff:ff:ff
确认网卡对应关系
注意eth1、eth2并不是与控制台的网卡顺序对应,这里利用cvm元数据mac地址来确认对应关系,mac地址见上面“ip a”命令获取到的“link/ether”字段
- 元数据使用方法见官网说明
root@server ~# curl http://metadata.tencentyun.com/latest/meta-data/network/interfaces/macs/52:54:00:17:8e:55/local-ipv4s/172.27.0.11/gateway
172.27.0.1
root@server ~# curl http://metadata.tencentyun.com/latest/meta-data/network/interfaces/macs/20:90:6f:ca:6c:57/primary-local-ipv4
172.27.1.11
root@server ~# curl http://metadata.tencentyun.com/latest/meta-data/network/interfaces/macs/20:90:6f:56:21:03/primary-local-ipv4
172.27.2.11
根据获取的地址,知道对应关系是
弹性网卡名 | 内网ip | linux内网卡名 |
---|---|---|
test_cd_cnc | 172.27.1.11 | eth1 |
test_cd_cmcc | 172.27.2.11 | eth2 |
2.配置网卡
修改网卡配置文件
- 以eth0配置文件为模板复制eth1、eth2
root@server ~# cd /etc/sysconfig/network-scripts/
root@server network-scripts# cp ifcfg-eth0 ifcfg-eth1
root@server network-scripts# cp ifcfg-eth0 ifcfg-eth2
- eth0需要修改内容:
- 启动方式改为静态
- 添加ip地址和网关(网关在上面查看元数据处第一条命令已经获取)
- eth1、eth2需要修改内容:
- 启动方式改为静态
- 添加ip地址,修改mac地址,不需要添加网关地址
配置完的格式参考下面
代码语言:txt复制root@server network-scripts# cat ifcfg-eth0
BOOTPROTO=static
DEVICE=eth0
IPADDR=172.27.0.11
HWADDR=52:54:00:17:8e:55
NM_CONTROLLED=no
ONBOOT=yes
PERSISTENT_DHCLIENT=yes
TYPE=Ethernet
USERCTL=no
GATEWAY=172.27.0.1
root@server network-scripts# cat ifcfg-eth1
BOOTPROTO=static
DEVICE=eth1
IPADDR=172.27.1.11
HWADDR=20:90:6f:ca:6c:57
NM_CONTROLLED=no
ONBOOT=yes
PERSISTENT_DHCLIENT=yes
TYPE=Ethernet
USERCTL=no
启动网卡
代码语言:txt复制root@server network-scripts# service network restart
Restarting network (via systemctl):
[ OK ]
启动完成后,需要在cvm控制台对每个网卡配置安全组,才对对外服务
六、配置策略路由
1.手动配置方法
手动配置方法,参考官网说明第5点
此处最好将相关命令写入到/etc/rc.local,否则重启后需要重新配置
2.自动化脚本
下载自动化脚本
代码语言:txt复制root@server ~# git clone https://github.com/cnsbear/policy_route_cooking.git
root@server ~# cd policy_route_cooking
-c 清除旧的策略路由,然后生成新的策略路由
代码语言:txt复制root@server policy_route_cooking# sh policy_route_cooking.sh -c
root@server policy_route_cooking# sh policy_route_cooking.sh
写入启动文件,重启时自动配置
代码语言:txt复制root@server ~# echo "sh /root/policy_route_cooking/policy_route_cooking.sh -c" >> /etc/rc.local
root@server ~# echo "sh /root/policy_route_cooking/policy_route_cooking.sh" >> /etc/rc.local
七、UDP服务对策略路由的特殊处理
1.原理
在cvm中启动一个服务,当将服务在3个ip上都绑定时,tcp服务与udp服务都能正常工作;但是将服务绑定在0.0.0.0(INADDR_ANY),会发现udp服务下,策略路由没有生效。
这是因为对于udp
代码语言:txt复制当0.0.0.0作为接收端,调用bind()函数绑定ip时,接收来自任意ip、任意网卡的发给指定端口的数据;
当0.0.0.0作为发送端,调用bind()函数绑定ip时,使用网卡号最低的网卡(通常是eth0)发送数据;
因此当使用udp服务时,若代码没有做特殊处理,最好将服务监听的每个对外网卡ip上,而不是0.0.0.0
2.测试验证
使用python代码做测试
server端
代码语言:txt复制#!/usr/bin/python
# -*- coding: UTF-8 -*-
# 文件名:server.py
import socket
import sys
ip = sys.argv[1]
address = (ip, 3000)
s = socket.socket(socket.AF_INET, socket.SOCK_DGRAM)
#s = socket.socket()
s.bind(address)
while True:
data, addr = s.recvfrom(2048)
print "received:", data, "from", addr
s.sendto('this is a udp server',addr)
s.close()
client端
代码语言:txt复制#!/usr/bin/python
# -*- coding: UTF-8 -*-
# 文件名:client.py
import socket
import sys
ip = sys.argv[1]
address = (ip, 3000)
s = socket.socket(socket.AF_INET, socket.SOCK_DGRAM)
while True:
msg = raw_input()
if not msg:
break
s.sendto(msg, address)
data, addr = s.recvfrom(2048)
print "received:", data, "from", addr
s.close()
在server监听在0.0.0.0
代码语言:txt复制root@server ~# python server.py 0.0.0.0
在客户端118.126.91.54上测试
首先测试eth0
代码语言:txt复制python client.py 132.232.61.253
0.0.0.0-test
received: this is a udp server from ('132.232.61.253', 3000)
再测试eth1
代码语言:txt复制root@office:~# python client.py 132.232.247.133
0.0.0.0-test
可以看到,eth1只能发送,不能接收;只有test_cd_tel能正常访问
在server上监听在eth1
代码语言:txt复制root@server ~# python server.py 172.27.1.11
客户端测试访问eth1
代码语言:txt复制root@client:~# python client.py 132.232.247.133
eth1-test
received: this is a udp server from ('132.232.247.133', 3000)
可以看到,监听在eth1,可以正常访问