linux下多网卡绑定之实现负载均衡

 做此实验需要内核版本2.4.xx以上，且内核在编译时打开bonding driver support功能。。

   我在这介绍的Linux多网卡绑定实现就是使用多块网卡虚拟成为一块网卡，使这个聚合起来的设备看起来是一个单独的以太网接口设备，通俗点讲就是多块网卡 具有相同的IP地址而并行链接聚合成一个逻辑链路工作。其实这项技术早在Sun和Cisco上已存在并实施过，被称为Trunking和 Etherchannel技术，现在，在Linux的2.4.x的内核中也采用了这种技术，被称为bonding。
bonding技术的最早应用是在集群——beowulf上，为了提高集群节点间的数据传输而设计的。下面分析一下bonding 的原理,什么是bonding？需要我们从网卡的混杂(promisc)模式说起。我们知道，在正常情况下，网卡只接收目的硬件地址(MAC Address)是自身Mac的以太网帧，对于别的数据帧都滤掉，以减轻驱动程序的负担。但是网卡也支持另外一种被称为混杂promisc的模式，它可以 接收网络上所有的帧，比如说tcpdump，就是运行在这个模式下。bonding也是运行在这个模式下，而且修改了驱动程序中的Mac地址，将多块网卡 的Mac地址改成相同的，可以接收特定mac的数据帧。然后把相应的数据帧传送给bond驱动程序处理。
说了一下简单的原理，现在看看它的配置了，其实配置很简单，一共四个步骤（见下面的实施过程），我们实验的OS是RedHat Linux Enterprise 4以上的版本；绑定的前提硬件条件是：芯片组型号相同，而且网卡具备独立的BIOS芯片。 步骤如下：(实验中是以双网卡为例)
1.编辑虚拟网络接口配置文件,指定网卡IP:
   看/etc/sysconfig/network-scripts目录下是否有一个叫ifcfg-bond0的配置文件，如果没有，我们可以拷贝一个其他网卡的（反正要修改的，无所谓）。
[root@pxe /]# cp /etc/sysconfig/network-scripts/ifcfg-eth0 ifcfg-bond0
2、#vi ifcfg-bond0
将第一行改成 DEVICE=bond0
# vi ifcfg-bond0
DEVICE=bond0
BOOTPROTO=static
IPADDR=192.168.0.8
NETMASK=255.255.255.0
BROADCAST=192.168.3.253
ONBOOT=yes
TYPE=Ethernet
这里要注意的是，不要指定单个网卡的IP 地址、子网掩码或网卡 ID。将上述信息指定到虚拟适配器(bonding)中即可。
[root@pxe network-scripts]#vi ifcfg-eth0
DEVICE=eth0
ONBOOT=yes
BOOTPROTO=dhcp
[root@pxe network-scripts]#vi ifcfg-eth1
DEVICE=eth0
ONBOOT=yes
BOOTPROTO=dhcp
3、# vi /etc/modprobe.conf
编辑 /etc/modprobe.conf文件，加入如下一行内容，以使系统在启动时加载bonding模块，对外虚拟网络接口设备为 bond0。并加入下列两行:
alias bond0 bonding
options bond0 miimon=300 mode=0
说明：miimon是用来进行链路监测的。 比如:miimon=300，那么系统每300ms监测一次链路连接状态，如果有一条线路不通就转入另一条线路；mode的值表示工作模式，它有0，1,2,3四种模式，常用的为0,1两种。
mode=0：表示load balancing (round-robin)为负载均衡方式，两块网卡都工作。
mode=1：表示fault-tolerance (active-backup)提供冗余功能，工作方式是主备的工作方式,也就是说默认情况下只有一块网卡工作,另一块做备份。
bonding只能提供链路监测，即从主机到交换机的链路是否接通。如果只是交
换机对外的链路down掉了，而交换机本身并没有故障，那么bonding会认为
链路没有问题而继续使用。
4、# vi /etc/rc.local
在在此文件中加入如下两行两行：
ifenslave bond0 eth0 eth1
route add -net 192.168.3.253 netmask 255.255.255.0 bond0
到这时已经配置完毕重新启动机器。重启会看见以下信息就表示配置成功了： Bringing up interface bond0 OK
Bringing up interface eth0 OK
Bringing up interface eth1 OK
................

下面我们讨论以下mode分别为0,1时的情况。
mode=1工作在主备模式下,这时eth1作为备份网卡是no arp的。我们用ifconfig来验证网卡的配置信息
[root@pxe network-scripts]# ifconfig
bond0 Link encap:Ethernet HWaddr 00:0E:7F:25:D9:8B
inet addr:192.168.0.8 Bcast:192.168.3.255 Mask:255.255.255.0 UP BROADCAST RUNNING MASTER MULTICAST MTU:1500 Metric:1 RX packets:18495 errors:0 dropped:0 overruns:0 frame:0 TX packets:480 errors:0 dropped:0 overruns:0 carrier:0 collisions:0 txqueuelen:0 RX bytes:1587253 (1.5 Mb) TX bytes:89642 (87.5 Kb)
eth0 Link encap:Ethernet HWaddr 00:0E:7F:25:D9:8B
inet addr: 192.168.0.8 Bcast:192.168.3.255 Mask:255.255.255.0 UP BROADCAST RUNNING SLAVE MULTICAST MTU:1500 Metric:1 RX packets:9572 errors:0 dropped:0 overruns:0 frame:0 TX packets:480 errors:0 dropped:0 overruns:0 carrier:0 collisions:0 txqueuelen:1000 RX bytes:833514 (813.9 Kb) TX bytes:89642 (87.5 Kb) Interrupt:11
eth1 Link encap:Ethernet HWaddr 00:0E:7F:25:D9:8B inet addr:192.168.0.8 Bcast:192.168.3.255 Mask:255.255.255.0 UP BROADCAST RUNNING NOARP SLAVE MULTICAST MTU:1500 Metric:1 RX packets:8923 errors:0 dropped:0 overruns:0 frame:0 TX packets:0 errors:0 dropped:0 overruns:0 carrier:0 collisions:0 txqueuelen:1000 RX bytes:753739 (736.0 Kb) TX bytes:0 (0.0 b) Interrupt:15
最后，我们关闭IPV6：
# vi /etc/modprobe.conf
alias net-pf-10 off
alias ipv6 off
# vi /etc/sysconfig/network
NETWORKING_IPV6="no"

把3片网卡帮定

modprobe bonding mode=0
ifconfig bond0  xxx.xxx.xxx.xxx
ifenslave bond0 eth1
ifenslave bond0 eth2
ifenslave bond0 eth3

关闭cpu

echo 0 > /sys/devices/system/cpu/cpuX/online

alias net-pf-10 off
alias ipv6 off

 

#/etc/init.d/libvirtd stop