UCS各组成部分的连接与管理（统一计算系列6）(

qingmosk

1、UCS 6100 Fabric Interconnect后面板左侧有单独RJ45 CONSOLE口1个

                               
登录/注册后可看大图

  

                               
登录/注册后可看大图

  
同样在后面板左侧4个端口中，右上角端口为带外管理端口（Out-of-band/Lights-out），该口可分配IP并通过远程主机管理。
后面板最左侧垂直排列的2个端口是Fabric Interconnect的集群（cluster）端口，上方为L1，下方为L2，集群端口的作用是为Fabric Interconnect提供心跳信息（heartbeat message）或其它服务于UCS Manager的高层协议信息。
这两个端口的连接可采用IEEE802.3ad绑定，两端的IP地址是固定的，本端L1端口必须连接远端L1端口，避免混淆。
2、IOM
机箱上的两块IOM模块必须通过UCS management platform管理，不像Fabric Interconnect一样有直接的管理接口。

                               
登录/注册后可看大图

  
3、刀片的连接
排错期间，我们可以使用Blade dongle（包含DB9串口，VGA口，双USB口），把刀片看作一台独立的服务器操作。
4、UCS机箱
思科UCS 5108机箱通过内部的背板与8台刀片连接，背板同时承载了控制与数据流量。从外部看，刀片机箱拥有4个220V外部电源，刀片机箱没有直接管理模块。

                               
登录/注册后可看大图

  
5、高可用性连接
两台冗余的Fabric Interconnect通过L1-L1，L2-L2两条链路实现高可用。
Fabric Interconnect A与IOM A的 1-4 uplink口互连
Fabric Interconnect B与IOM B的 1-4 uplink口互连
6、Fabric A/B DCOS网络
Fabric A/B DCOS网络实体包括，数据包在以下三个实体之间传递：
a、Fabric Interconnect的DCOS(Data Center Operating System of Cisco UCS Manager)实例
b、刀片机箱IOM上的CMC(Chassis Management Controller)
c、刀片mezzanine卡上的管理实例。
Fabric A/B DCOS网络之间的流量包括2层协议数据，比如IOM的bootstrap数据包，用来network interface virtualization的virtual interface card协议数据包。这些数据包运行在VLAN 4042内。

7、Fabric A/B Adapter Management(AM) Network
AM负责连接DCOS实例与刀片mezzanine卡的管理模块，负责资源分配、标识定义、状态监控。2层协议数据包在两者之间实现刀片网卡的基本功能，3层IP数据包实现远程管理。以上数据包被分配至VLAN 4043。IP地址在刀片网卡启动过程中由UCS Manager根据算法自行分配。

8、Fabric A/B AM Infrastructure Network
基础网络提供系统级别的连接给AM、CMC和BMC。当UCS Manager发现有新的刀片机箱时，会通过网络将机箱号通告给CMC，并做进一步引导。所有上述数据通过VLAN 4404传递。

9、Fabric A/B UCS Manager PXE Network
PXE网络用来引导存储在UCS Manager内的的操作系统，VLAN 4047。

10、Fabric Interconnect网络配置
a. vlan
   在UCS内全局配置
   uplink链路启用trunk并包含所有在本UCS上配置过的VLAN
b. Port channel
   使用UCS统一为uplink创建port channel
   使用802.3ad或802.1ax作为channel协议

11、全局VLAN配置
在lan cloud标签下统一创建VLAN，默认该VLAN会同时出现在两个Fabric Interconnect上。不建议配置在单台Fabric Interconnect上。

12、保留VLAN
4042: UCS manager ------- chassis management
4043: UCS manager ------- mezzanine adapters
4044: UCS manager ------- CMC
4047: PXE boot for cisco ucs utility OS(UUOS)

13、port channel
在lan cloud标签下的fabric a/b标签下创建port channel，port channel是针对某个特定fabric interconnect及特定端口的。

14、VSAN
全局配置
基于单个Fabric Interconnect
默认VSAN 1是预配置，不建议跑数据流量
每个uplink目前仅支持一个VLAN
VLAN的创建在san cloud标签下的VSAN标签下，全局创建，创建的同时需要指定一个VLAN用于FCoE，并且不要与普通VLAN重名。

总之：
1、UCS 6100系列Fabric Interconnect的管理可以通过串行console口，带外IP，或是UCS manager GUI方式
2、UCS chassis与IOM统一通过UCS manager管理
3、UCS 6100为所有UCS组件提供管理通道（4042、4043、4044、4047），并且为UCS刀片节点的LAN/SAN提供数据通道。

                               
登录/注册后可看大图

该贴已经同步到 qingmosk的微博

myp197727

谢谢分享！