-
ATCA
和
OWLinux
维护操作手册
华数互动流媒体播出系统包含拓展城市的
CDN
节点采用了
ATCA
服务器
，系统平台为
Linux,
集群系统软件为
gfs
。
下面主要针对
ATCA<
/p>
设备、
OWLinux
、
GFS
的配置和维护展开讲解。
ATCA
介绍
ATCA
主要针对流媒体内容分发网络节点设备，
ATCA<
/p>
机箱主要包括
CMM
（管理模块）
、
CSS
（交换板）
、
SBC
（服务器板）
，通过交换板上
联到外部的光纤存储设备。
ATCA
主要有
2
种配置，根据不同的配置机箱和板卡也有所不同。主要
有
14
槽和
5
槽两
类。在
14
槽架构下，
所有的
CSS
交换板、
C
MM
管理模块均采用冗余配置方式，
SBC
服务器板
卡最多可以配置
10
块，
可以安装为
CRD
、
AuthView
、
CSG
、
M
SC
中的任意一种；在
5
槽架构
下，
CSS
交换板、
CMM
管理模块都只有
1
块，不提供冗
余配置，
SBC
服务器板卡最多可以配
置
3
块。
ATCA Contex
系列设备主要有
3
类：
核心节点设备
Contex7
000
、
骨干节点设备
Contex5
000
、
边缘节点设备
Contex3
000
。
Contex7000
和
Contex5000
主要架构在
14
槽的
ATCA
上，
对
CMM
管理模块和
CSS
交换板提供双冗余保护，
Contex3000
有
架构在
14
槽的
ATCA
上，也有架构
在
5
槽的
ATCA
上的小硬件配置结构，在
14
槽架构下提供
CMM
和
CSS
的双冗余保护，在
5
槽下即
没有该保护。另外，
Contex7000
主要用于核心节点安
装
CRD
、
AuthView
、
CDM
、
OCS
等组件，
Contex5000
则主要用于骨干节点安装
ICC
、
CSG
等组件，
Contex3000
主要用于
安装
CSG
、
MSC
等组件，形成层次化部署的模式。
ATCA
电源和接地
Contex
设备电源
:
额定电压为－
48VDC
，额定功率为
3000
瓦（
14
槽）
，
Conttex
设备会
产生
较大的电流，要求使用较粗的电缆，在一头制作卡头。如果机房没有配备－
48VDC<
/p>
电源
需要单独配置直流电源。
Contex
设备接地：
Contex
设备在运行过程中，需要严格的进行接地装置，以保证设备
的正常运行和
防护雷电侵扰，
在安装前，
需要测量设备的接地排是否符合设备
要求，
再进行
进行安装。
ATCA
板卡的面板和指示灯状态
<
/p>
1
）
、
CMM<
/p>
模块
如上图所示，在
CMM
面板上有
9
个指示灯，这些指示灯用来指示系统的健
康状态、
热
插拔状态和其他信息，主要包括
3
个系统健康状态指示灯（
Alarm
< br>LEDs
）
、
1
个
CMM
健康状
态指示灯（<
/p>
Health LED
）
、
1
个热插拔指示灯（
Hot Swap LED
）
、
4
个用户自定
义指示灯。
系统健康状态指示灯（
Alarm LEDs
< br>）
：
CMM
上有
3
个该类指示灯，分别对应不同的报警级别：
mino
r(!)
、
major(!!)
和
critical(!!!)
。
LED
状态
暗
亮
闪烁
含义
Minor
没有
minor
级别的报警
存在
minor
级别的报警
存在
minor
级别的报警，但是报警被静音
没有
major
级别的报警
存在
major
级别的报警
存在
major
级别的报警，但是报警被静音
没有
critical
级别的报警
存在
critical
级别的报警
存在
critical
级别的报警，但是报警被静音
Major
暗
亮
闪烁
critical
暗
亮
闪烁
CMM
健康状态指示灯（
Health
LED
）
:
每个
CMM
都维护一个健康状态指示
灯
来指示
CMM
的状态
,
其
LED
说明如下：
颜色
关闭
绿灯长亮
绿灯闪烁
红灯长亮
热插拔指示灯（
Hot Swap
LED
）
：每个
CMM
上都维护一个热插拔指示灯
示
CMM
的热插拔状态，其
LED
说明如下：<
/p>
颜色
关闭
，用
说明
CMM
未加电
正常工作
CMM
处于备用状态
CMM
由于电源问题而处于不健康状态
，用来表
说明
CMM
在使用中
长闪
蓝灯长量
快闪
<
/p>
寻找
CMM
（
9
00ms
亮，
100ms
暗）
可以进行热插拔
准备进行热插拔（
100ms
亮，
900ms
暗）
用户
自定义指示灯：每个
CMM
有
4
个用户自定义
LED
指示灯，前面板上的
A
、
B
、
C
、
D
分别对应
CLI
上的
led1
、
led2
、
led3
、
led4
。每个用户自定义的
LED
指示灯可以工作在
关闭、绿灯、黄灯和红灯几种状态
。在
CMM
启动的过程中，
4
个用户自定义的指示灯轮流
闪烁，指示系统正在启动。当系统启动完成
后，
4
个用户自定义的指示灯都将关闭，这个
< br>时候这
4
个指示灯就可以通过
C
LI
或者程序进行控制了。
CMM
启动过程
LED
灯的切换：在
CMM
启动过程中，
LED
会按照以下规则进行状态的切
换：
事件
CMM
的扳手关
闭、
CMM
上电启
动
健康状态指示灯
热插拔指示灯
LEDA
关闭
LEDB
关闭
LEDC
关闭
LEDD
关闭
红灯闪烁，然后
蓝灯长亮
绿灯长亮
短暂关闭，然后
蓝灯长亮
蓝灯长亮
REDBOOT
初始化
绿灯长亮
REDBOOT
初始
化完成，
用户脚
本
开始运行
绿灯长亮
绿灯
长亮
绿灯
长亮
绿
灯
长亮
短暂
关闭
然后
绿灯
长亮
关闭
绿灯
长亮
绿
灯
长亮
短暂
关闭
然后
绿灯
长亮
关闭
关闭
关闭
关闭
关闭
LINUX
初始化
绿灯长亮
完成，进入
INIT
1
状态
CMM
初始化脚
本运行，
应用程
序加载，<
/p>
CMM
在
M1
初始化完
成
,CMM
进入
M2
状态
CMM
处于
M3
或
者
M4
2)
、
SBC
板
绿灯长亮
蓝灯长亮
绿灯
长亮
短暂关
闭然后
绿灯长
< br>亮
关闭
关闭
短暂关闭然后
蓝灯长亮
绿灯
长亮
绿灯长亮
长闪，
100ms
暗
关闭
900ms
亮
关闭
关闭
关闭
绿灯长亮
关闭
关闭
关闭
上图所示为
< br>SBC
板的前面板，在拉手下方还有一个控制
SBC
板卡加电的“活动开关”
，
在需要热插拔<
/p>
SBC
板之前就需要将该开关拨到另一边，
使
SBC
板卡断电。
其指示灯状态说
明
如下：
OOS
LED
：
LED
状态
关闭
黄色
/
红色常亮
Health
LED
：
LED
状态
绿灯常亮
黄色
/
红色常亮
IDE Drive
active
：
LED
状态
关闭
绿灯（闪烁）
Hotswap
LED
LED
状态
含义
正常服务
硬件故障
< br>/
错误
含义
工作正常
有故障
/
错误情况
含义
正常状态或没有磁盘读写
磁盘正在读写
含义
关闭
蓝色常亮
蓝色闪烁
Hotswap
准备
正常状态
准备移除
< br>/
插入：长闪表示正在激活。短闪表示正在去活。
Fibre channel port state
LED
：
第一行：
channel 1
第二行：
channel 2
黄灯状态（左）
亮
闪烁
亮
关闭
闪烁
Netlink
LED
：
Channel
A
：
L2 / Channel
B
：
L6
连接指示灯状态
关闭
绿灯常亮
绿灯闪烁
没有连接
已连接
连接活动
含义
亮
关闭
关闭
亮
闪烁
绿灯状态（右）
上电过程
同步丢失
有
SFP
可获得信号
Online
F/W error
含义
注：
该指示灯在正常情况下一般都维持在规律闪烁得状态，
可以用该灯是否开始闪烁来
判断系统是否启动完成。
Network Controller Port
State LEDs
：
LED
状态（
L1&L5
）
关闭
黄色
/
红色
//
绿色
Network speed
LED
：
Channel A
L3&L4
Speed LED
状态
L3
黄灯常亮
关闭
关闭
关闭
绿灯常亮
关闭
Channel B
L7&L8
Speed LED
状态
L7
黄灯常亮
关闭
关闭
关闭
绿灯常亮
关闭
L8
1Gbps
连接
100Mbps
连接
10Mbps
连接
含义
L4
1Gbps
连接
100Mbps
连接
10Mbps
连接
含义
没有状态
活动状态（用户自定义）
含义
ATCA
硬件安装及配置
电源安装
ContEx
设备电源：额定电压
-48V DC,
额定功率
3000
瓦（
1
4
槽）
。
ContEX
设备会产生
较大的电流，要求使用较粗的电缆，在一头制作卡头。如果机房没
有配备
-48V
DC
电源需要
单独配置直流电源。设备在运行过程中，
需
要严格的进行接地装置，以保证设备的正常运
行和防护雷电侵扰。在安装前，先测量设备
的接地是否符合设备要求，再进行进行安装。
1
）首先安装机框接地
图中
8
为接地口，使用
M
6
号螺丝，孔距
15.9
mm
，需要使用
AWG6
类接地线。
2
）然后再进行电源安装
电源安装时，先移除保护板
(
图中
5)
，保护板的左右各有一个固定螺母，可卸下。
电源接口一共
8
个：左边
4
个
-48VDC
输入（蓝
色线部分）
，右
4
个为
RTN
输入（黑色
线部分）
，连接完电源线后恢复保护板
3
）图中
2
、
3
、
4
为
PEM
电源状态灯，绿色为正常，红色为警报，蓝灯闪烁时表示当前
PEM
为热插拔状态，可热插拔电源模块。图中
1
为的热插拔切换
按钮，按下该按钮后，此时
蓝灯闪烁，
PEM
< br>进入可热插拔状态，该操作用于电源的替换，平时切不可按动。
当上电后，电源模块工作正常时，整个机箱会开始工作。
交换板配置
命令行接口
CLI
（
Command
Line Interface
）
：
通过
console
线登陆交换板，<
/p>
RadiSys
交换板的波特率为
960
0
（同
ATCA
上的
< br>SBC
板
设置相同）
。
交换板登陆：
启动完以后会在终端上出现
ATCA-2100 login:
提示符表示交换板启动完成，通过
admin
登陆默认
admin
是没有密码。登陆以后，可以通过
?
来查看帮助：
ATCA-2100# ?
ethernet : Start ethernet CLI
fibre-channel : Start Fibre Channel
CLI
shelf-manager : Access the Shelf
Manage
shell : Start the BASH
shell
logout : Logout from CLI
session
version : Show version
information
help : Operation
instructions.
交换板
IP
配置：
为交换板配置
IP
地址，交换板有
3
种登陆方式：
(1).console
方式
;
(2).
直连方式
,
通过图中用网线直连，然后通过
telnet
IP
方式
;
(3).
网络方式
,
只要交换板连接到交换机上，然后通过配置
好的
IP
进行
telnet
方式登
陆
;
修改
IP
方式
:
登陆到
ATCA-2100#
界面后
,
执行
shell
命令会登陆到
linux shell
的界面，然后用
ifconfig
配置（在
ATCA
机箱中需要配置
dtl0
的
< br>IP
地址）
：
ifconfig eth0
这里配置的是直连连接
IP
ifconfig dtl0
这里配置的是网络登陆
IP
或
进入
/etc/sysconfig
/network-scripts/
修改配置文件
保存
Ethernet
设置：
(ATCA-2100-Eth) #
copy
system:running-config nvram:startup-config
退出
Ethernet CLI
界面：
通过
exit
命令。
Port-Channel
的配置：
根据以下步骤可以配置以太网端口
Port-Channel<
/p>
功能，但只有序号为
1/1~1/8
的端
口
才能配置
port-
channel
。
(1)
、进入以太网命令提示符
ATCA-2100-Eth#
< br>；
(2)
、执行“
configure
”命令，进入以太网配置提示符下
ATCA-2100-Eth(Config)#
；
(3)
、给汇聚端口分配一个逻辑端口序号：
ATCA-2100-Eth(Config)# port-channel
name
；
(4)
、将
port-channel
配置成
static
的模式。
ATCA-2100-Eth(Config)#
interface 3/1
；
ATCA-2100-Eth(Interface
3/1)#
port-channel
static
；
(4)
、进入需要加入汇聚的物理端口，譬如
1/1
和
1/2
：
ATCA-2100-Eth(Config)#
interface 1/1
ATCA-2100-Eth(Interface
1/1)#
addport 3/1
ATCA-2100-Eth(Interface
1/1)#
exit
ATCA-2100-Eth(Config)#
interface 1/2
ATCA-2100-Eth(Interface 1/2)#
addport 3/1
ATCA-2100-Eth(Interface
1/2)#
exit
ATCA-2
100-Eth(Config)#
interface 3/1
(8)
、通过这样的配置，就完成将
1/1
、
1/2
端口成功汇聚成
3/
1
逻辑端口；
(9)
、返回到以太网提示状态：
exit
；
-
查看汇聚端口
3/1
的状态：
show port-channel
3/1
；
-
查看所有端口状态：
show port
all
。
SBC
板配置
通过交换板
ssh
连接到
SBC
板，默认地址为
10.10.110.*
，
其中
*
为该板卡所在的
ATCA
槽位。
配置
SBC
板业务地址：
修改
/etc/sysconfig/network-
scripts/ ifcfg-bond0:1
DEVICE=bond0:1
ONBOOT=yes
BOOTPROTO=none
IPADDR=125.210.253.69
NETMASK=255.255.255.224
GATEWAY=125.210.253.65
修改
bond0:1
地址，默认
bond0
为心跳地址，重启
network
服务。
修改
/etc/sysconfig/n
etwork
文件：
NETWORKING=yes
HOSTNAME=nd01
GATEWAY=125.210.253.65
各块板卡做相应配置。
存储配置
创建分区
使用
fdisk
–
< br>l
查看存储设备是否已经识别到再进行分区。
如果没有认
到存储，
先重启
SBC
板查看，有可能
是
ATCA
先起，存储后起引起。
[root@nd01 ~]# cd /dev/mapper/
#
进入
dev/mapper
目录
[root@nd01 mapper]# fdisk
1FUJITSU_3 #
分区
分区步骤：
1.
输入
n
添加一个分区，回车
2.
输入
p
增加一个主分区，回车
3.
分区号选择
1
，回车
4.
cylinder
值选择默认，两次回车
5.
输入
w
保存分区表信息
6.
重复以上步骤，分别对
1FUJITSU_3
、
1FUJITSU_3
、
1FUJITSU_3
、
1FUJITSU_3
分区。
7.
重启板卡
8.
查看
/
dev/mapper
目录下有无
p1
设备，
如果无
p1
设备使用该命令修复
：
/sbin/dmsetup
is --target
multipath --exec
创建文件系统
gfs_mkfs
-p lock_dlm -t dali:san01 -j 20
/dev/mapper/1FUJITSU_3p1
gfs_mkfs -p
lock_dlm -t dali:san02 -j 20
/dev/mapper/1FUJITSU_3p1
gfs_mkfs -p
lock_dlm -t dali:san03 -j 20
/dev/mapper/1FUJITSU_3p1