2024年4月3日发(作者:怀晖)
NX5K FEX
功能配置及测试
2013年01月
1
目 录
一、概述 .......................................................................................................................................... 3
1.1 测试目的 .................................................................................................................................................. 3
1.2测试环境: .............................................................................................................................................. 3
1.3配置前准备 .............................................................................................................................................. 3
1.3.1配置管理地址 ................................................................................................................................... 3
1.3.2安装存储license ............................................................................................................................... 4
1.3.2N5K操作系统升级 ............................................................................................................................ 4
二、FEX功能测试 ........................................................................................................................... 5
2.1 测试目的 .................................................................................................................................................. 5
2.2 测试拓扑 .................................................................................................................................................. 6
2.3测试配置 .................................................................................................................................................. 6
2.4测试结果 .................................................................................................................................................. 7
2
一、概述
1.1 测试目的
Nexus 5500交换机作为业界第一款统一端口交换机,同时支持ethernet、 Fibre Channel和
Fibre Channel over Ethernet (FCOE)协议。本次测试的目的是为了测试Nexus 5500交换机的功
能,以验证是否适合作为服务器区的汇聚交换机,同时实现服务器区的以太网汇聚和SAN存
储汇聚,从而逐渐向两网融合的方向演进。.
1.2测试环境:
1. 网络设备:两台Nexus 5596,一台Nexus 2148,一台Nexus 2248,一台Catalyst 3560G
以下是这次测试方案的拓扑。
1.3配置前准备
1.3.1配置管理地址
通过Console线连接到两台Nexus 5596的管理口上,分别配置两台设备的管理IP地址在
同一网段。在本例中Nexus 5596-1的管理ip是168.7.63.11,Nexus 5596-2的管理ip是
168.7.63.12。如下图所示,管理站和A、B控制器正常连接。
配置内容
N5596-1
备注
3
interface mgmt0
ip address 168.7.63.11/25
vrf context management
ip route 0.0.0.0/0 168.7.63.126
N5596-2
interface mgmt0
ip address 168.7.63.12/25
vrf context management
ip route 0.0.0.0/0 168.7.63.126
网管接口放在单独的管理VRF里,避免数据流
量的干扰
网管接口放在单独的管理VRF里,避免数据流
量的干扰
1.3.2安装存储license
缺省情况下,N5K没有安装存储license。需要通过思科网站申请临时license。申请步骤
如下:
配置内容
以N5596-1为例
switch# show license host-id
License hostid: VDH=FOX1513GHGZ
copy tftp://168.7.63.33/
bootflash: vrf management
install license bootflash:
备注
到思科网站/go/license申请
N5K的FCOE license,申请后更改license名
字(不能太长)。
将license文件拷贝到flash中。由于是通过
管理口拷贝,所以要加上vrf参数。
安装存储license。
1.3.2N5K操作系统升级
在测试前需要升级N5K的操作系统。
配置内容
以N5596-1为例
copy tftp://
n5000-uk9-
bootflash:
copy tftp://
bootflash:
Install all
备注
操作系统升级包括kickstart和system两个
image。
把kickstart image拷进bootflash
。
将system image文件拷进bootflash
升级操作系统
4
二、FEX功能测试
2.1 测试目的
传统数据中心网络结构采用生成树协议进行收敛,二层网络的收敛时间会相对较长,同时
会带来网络的不稳定因素,而且也非常不利于故障的分析和诊断。即使采用三层连接,由于应
用负载分担的要求,无法通过配置ospf area的方式来实现路由总结,也会给网络带来大的负
载和不稳定性。
新一代的数据中心接入交换机采用了FEX板卡延伸技术,这一技术通过IEEE802.1qbh协议
的实现,将原本互联在一起的多个TOR(Top of Rack 机柜交换机)交换单元的控制平面和转发平
面融合在一起,形成了多个交换机组合成一个交换机的状态,原有的分布在各个机架的TOR
接入交换机就成为新交换机的远程板卡。在这个架构下,TOR交换机不是单独存在的网元管理
点,也不用二层的生成树或三层的路由协议来维护网络拓扑。现有技术已经可以将多达32个
TOR交换单元的控制平面融合在一起,从而大大减少了网络节点,简化了网络拓扑,提高了网
络的可管理性和可维护性。这一技术综合了TOR方式在布线上的优势和EOR (End of Row)方式
管理节点少的两方面的优势。
板卡延伸技术(FEX)
Nexus 2000 Fabric Extender (FEX)
C97-541444-00 © 2009 Cisco Systems, Inc. All rights Public
21
本项测试的目的是验证FEX技术。
5
2.2 测试拓扑
2.3测试配置
配置内容
N5596-1
feature telnet
feature fex
feature lacp
vlan 1,10,50,150,300
fex 100
pinning max-links 1
description "FEX0100"
type N2148T
interface Ethernet1/1
switchport mode fex-fabric
fex associate 100
channel-group 100
interface Ethernet1/2
switchport mode fex-fabric
fex associate 100
channel-group 100
interface port-channel100
switchport mode fex-fabric
fex associate 100
N5596-2
feature telnet
feature fex
feature lacp
备注
;启用telnet
;启用fex
;启用lacp
;将N2148的fex号配置为100
;所有上联接口都捆绑成一个
portchannel接口
;N2K扩展模块型号
;与FEX相连的接口
;将上联接口捆绑在一起
6
vlan 1,10,50,150,300
fex 132
pinning max-links 1
description "FEX0132"
type N2248T
interface Ethernet1/1
switchport mode fex-fabric
fex associate 132
channel-group 132
interface Ethernet1/2
switchport mode fex-fabric
fex associate 132
channel-group 132
interface port-channel132
switchport mode fex-fabric
fex associate 132
2.4测试结果
配置内容
N5596-1
n5596-1# show fex
FEX FEX FEX FEX
Number Description State Model Serial
------------------------------------------------------------------------
100 FEX0100 Online N2K-C2148T-1GE FOX1316GD83
N5K-SW1(config)# show feature | inc enabled
fex 1 enabled
lacp 1 enabled
lldp 1 enabled
telnetServer 1 enabled
n5596-1#show run
。。。。。。。。。。。。。
interface Ethernet100/1/1
interface Ethernet100/1/2
interface Ethernet100/1/3
。。。。。。。。。。。。。
n5596-1# show port-channel database
port-channel100
Last membership update is successful
2 ports in total, 2 ports up
First operational port is Ethernet1/1
Age of the port-channel is 27d:15h:30m:25s
Time since last bundle is 27d:15h:31m:25s
Last bundled member is Ethernet1/2
Ports: Ethernet1/1 [on] [up] *
Ethernet1/2 [on] [up]
N5596-2
n5596-2# show fex
FEX FEX FEX FEX
Number Description State Model Serial
------------------------------------------------------------------------
备注
;fex已经正常连接
;相关feature已经启用
;配置中出现了FEX的接口
;portchannel100处于正常状
态
;fex已经正常连接
7
132 FEX0132 Online N2K-C2248TP-1GE SSI141904Y2
N5K-SW1(config)# show feature | inc enabled
fex 1 enabled
lacp 1 enabled
lldp 1 enabled
telnetServer 1 enabled
n5596-1#show run
。。。。。。。。。。。。。
interface Ethernet132/1/1
interface Ethernet132/1/2
interface Ethernet132/1/3
。。。。。。。。。。。。。
n5596-1# show port-channel database
port-channel132
Last membership update is successful
2 ports in total, 2 ports up
First operational port is Ethernet1/1
Age of the port-channel is 13d:21h:39m:23s
Time since last bundle is 13d:21h:40m:22s
Last bundled member is Ethernet1/2
Ports: Ethernet1/1 [on] [up] *
Ethernet1/2 [on] [up]
;相关feature已经启用
;配置中出现了FEX的接口
;portchannel132处于正常状
态
FEX功能工作正常。
8
2024年4月3日发(作者:怀晖)
NX5K FEX
功能配置及测试
2013年01月
1
目 录
一、概述 .......................................................................................................................................... 3
1.1 测试目的 .................................................................................................................................................. 3
1.2测试环境: .............................................................................................................................................. 3
1.3配置前准备 .............................................................................................................................................. 3
1.3.1配置管理地址 ................................................................................................................................... 3
1.3.2安装存储license ............................................................................................................................... 4
1.3.2N5K操作系统升级 ............................................................................................................................ 4
二、FEX功能测试 ........................................................................................................................... 5
2.1 测试目的 .................................................................................................................................................. 5
2.2 测试拓扑 .................................................................................................................................................. 6
2.3测试配置 .................................................................................................................................................. 6
2.4测试结果 .................................................................................................................................................. 7
2
一、概述
1.1 测试目的
Nexus 5500交换机作为业界第一款统一端口交换机,同时支持ethernet、 Fibre Channel和
Fibre Channel over Ethernet (FCOE)协议。本次测试的目的是为了测试Nexus 5500交换机的功
能,以验证是否适合作为服务器区的汇聚交换机,同时实现服务器区的以太网汇聚和SAN存
储汇聚,从而逐渐向两网融合的方向演进。.
1.2测试环境:
1. 网络设备:两台Nexus 5596,一台Nexus 2148,一台Nexus 2248,一台Catalyst 3560G
以下是这次测试方案的拓扑。
1.3配置前准备
1.3.1配置管理地址
通过Console线连接到两台Nexus 5596的管理口上,分别配置两台设备的管理IP地址在
同一网段。在本例中Nexus 5596-1的管理ip是168.7.63.11,Nexus 5596-2的管理ip是
168.7.63.12。如下图所示,管理站和A、B控制器正常连接。
配置内容
N5596-1
备注
3
interface mgmt0
ip address 168.7.63.11/25
vrf context management
ip route 0.0.0.0/0 168.7.63.126
N5596-2
interface mgmt0
ip address 168.7.63.12/25
vrf context management
ip route 0.0.0.0/0 168.7.63.126
网管接口放在单独的管理VRF里,避免数据流
量的干扰
网管接口放在单独的管理VRF里,避免数据流
量的干扰
1.3.2安装存储license
缺省情况下,N5K没有安装存储license。需要通过思科网站申请临时license。申请步骤
如下:
配置内容
以N5596-1为例
switch# show license host-id
License hostid: VDH=FOX1513GHGZ
copy tftp://168.7.63.33/
bootflash: vrf management
install license bootflash:
备注
到思科网站/go/license申请
N5K的FCOE license,申请后更改license名
字(不能太长)。
将license文件拷贝到flash中。由于是通过
管理口拷贝,所以要加上vrf参数。
安装存储license。
1.3.2N5K操作系统升级
在测试前需要升级N5K的操作系统。
配置内容
以N5596-1为例
copy tftp://
n5000-uk9-
bootflash:
copy tftp://
bootflash:
Install all
备注
操作系统升级包括kickstart和system两个
image。
把kickstart image拷进bootflash
。
将system image文件拷进bootflash
升级操作系统
4
二、FEX功能测试
2.1 测试目的
传统数据中心网络结构采用生成树协议进行收敛,二层网络的收敛时间会相对较长,同时
会带来网络的不稳定因素,而且也非常不利于故障的分析和诊断。即使采用三层连接,由于应
用负载分担的要求,无法通过配置ospf area的方式来实现路由总结,也会给网络带来大的负
载和不稳定性。
新一代的数据中心接入交换机采用了FEX板卡延伸技术,这一技术通过IEEE802.1qbh协议
的实现,将原本互联在一起的多个TOR(Top of Rack 机柜交换机)交换单元的控制平面和转发平
面融合在一起,形成了多个交换机组合成一个交换机的状态,原有的分布在各个机架的TOR
接入交换机就成为新交换机的远程板卡。在这个架构下,TOR交换机不是单独存在的网元管理
点,也不用二层的生成树或三层的路由协议来维护网络拓扑。现有技术已经可以将多达32个
TOR交换单元的控制平面融合在一起,从而大大减少了网络节点,简化了网络拓扑,提高了网
络的可管理性和可维护性。这一技术综合了TOR方式在布线上的优势和EOR (End of Row)方式
管理节点少的两方面的优势。
板卡延伸技术(FEX)
Nexus 2000 Fabric Extender (FEX)
C97-541444-00 © 2009 Cisco Systems, Inc. All rights Public
21
本项测试的目的是验证FEX技术。
5
2.2 测试拓扑
2.3测试配置
配置内容
N5596-1
feature telnet
feature fex
feature lacp
vlan 1,10,50,150,300
fex 100
pinning max-links 1
description "FEX0100"
type N2148T
interface Ethernet1/1
switchport mode fex-fabric
fex associate 100
channel-group 100
interface Ethernet1/2
switchport mode fex-fabric
fex associate 100
channel-group 100
interface port-channel100
switchport mode fex-fabric
fex associate 100
N5596-2
feature telnet
feature fex
feature lacp
备注
;启用telnet
;启用fex
;启用lacp
;将N2148的fex号配置为100
;所有上联接口都捆绑成一个
portchannel接口
;N2K扩展模块型号
;与FEX相连的接口
;将上联接口捆绑在一起
6
vlan 1,10,50,150,300
fex 132
pinning max-links 1
description "FEX0132"
type N2248T
interface Ethernet1/1
switchport mode fex-fabric
fex associate 132
channel-group 132
interface Ethernet1/2
switchport mode fex-fabric
fex associate 132
channel-group 132
interface port-channel132
switchport mode fex-fabric
fex associate 132
2.4测试结果
配置内容
N5596-1
n5596-1# show fex
FEX FEX FEX FEX
Number Description State Model Serial
------------------------------------------------------------------------
100 FEX0100 Online N2K-C2148T-1GE FOX1316GD83
N5K-SW1(config)# show feature | inc enabled
fex 1 enabled
lacp 1 enabled
lldp 1 enabled
telnetServer 1 enabled
n5596-1#show run
。。。。。。。。。。。。。
interface Ethernet100/1/1
interface Ethernet100/1/2
interface Ethernet100/1/3
。。。。。。。。。。。。。
n5596-1# show port-channel database
port-channel100
Last membership update is successful
2 ports in total, 2 ports up
First operational port is Ethernet1/1
Age of the port-channel is 27d:15h:30m:25s
Time since last bundle is 27d:15h:31m:25s
Last bundled member is Ethernet1/2
Ports: Ethernet1/1 [on] [up] *
Ethernet1/2 [on] [up]
N5596-2
n5596-2# show fex
FEX FEX FEX FEX
Number Description State Model Serial
------------------------------------------------------------------------
备注
;fex已经正常连接
;相关feature已经启用
;配置中出现了FEX的接口
;portchannel100处于正常状
态
;fex已经正常连接
7
132 FEX0132 Online N2K-C2248TP-1GE SSI141904Y2
N5K-SW1(config)# show feature | inc enabled
fex 1 enabled
lacp 1 enabled
lldp 1 enabled
telnetServer 1 enabled
n5596-1#show run
。。。。。。。。。。。。。
interface Ethernet132/1/1
interface Ethernet132/1/2
interface Ethernet132/1/3
。。。。。。。。。。。。。
n5596-1# show port-channel database
port-channel132
Last membership update is successful
2 ports in total, 2 ports up
First operational port is Ethernet1/1
Age of the port-channel is 13d:21h:39m:23s
Time since last bundle is 13d:21h:40m:22s
Last bundled member is Ethernet1/2
Ports: Ethernet1/1 [on] [up] *
Ethernet1/2 [on] [up]
;相关feature已经启用
;配置中出现了FEX的接口
;portchannel132处于正常状
态
FEX功能工作正常。
8