技术白皮书
华为 SAN 存储在 VMware 系统下的主机连通
性指南
OceanStor Storage
VMware
华为技术有限公司
2014-02
华为 SAN 存储在 VMware 系统下的主机连通性指南
华为技术有限公司为客户提供全方位的技术支持,用户可与就近的华为办事处联系,也可直接与公司总
部联系。
地址:
网址:
华为技术有限公司
深圳市龙岗区坂田华为总部办公楼 邮编:518129
http://www.huawei.com
客户服务电话:
0755-28560000 4008302118
客户服务传真:
0755-28560111
客户服务邮箱:
Support@huawei.com
版权所有 © 华为技术有限公司 2014。 保留一切权利。
非经本公司书面许可,任何单位和个人不得擅自摘抄、复制本文档内容的部分或全部,并不得以任何形
式传播。
商标声明
和其他华为商标均为华为技术有限公司的商标。
本文档提及的其他所有商标或注册商标,由各自的所有人拥有。
注意
由于产品版本升级或其他原因,本文档内容会不定期进行更新。除非另有约定,本文档仅作为使用指导,
本文档中的所有陈述、信息和建议不构成任何明示或暗示的担保。
2014-02-10
华为所有和机密 版权所有 © 华为技术有限公司
第 1 页, 共 111 页
华为 SAN 存储在 VMware 系统下的主机连通性指南
目 录
1 操作系统介绍 ..................................................................................................................................... 11
1.1 VMware Infrastructure ................................................................................................................................... 11
1.2 VMware 文件系统 ........................................................................................................................................ 13
1.3 VMware RDM................................................................................................................................................ 15
1.4 VMware Cluster ............................................................................................................................................. 16
1.5 VMware vMotion ........................................................................................................................................... 16
1.6 VMware DRS ................................................................................................................................................. 17
1.7 VMware FT&HA ........................................................................................................................................... 17
1.8 规格限制 ....................................................................................................................................................... 17
2 组网规划 ............................................................................................................................................. 20
2.1 FC 组网图 ...................................................................................................................................................... 20
2.1.1 多路径直连组网图 .............................................................................................................................. 20
2.1.2 多路径交换机组网图 .......................................................................................................................... 21
2.2 iSCSI 组网图 ................................................................................................................................................. 23
2.2.1 多路径直连组网图 .............................................................................................................................. 23
2.2.2 多路径交换组网图 .............................................................................................................................. 24
3 配置前主机系统上的准备 ................................................................................................................ 26
3.1 识别 HBA ..................................................................................................................................................... 26
3.2 查询 HBA 卡信息 ........................................................................................................................................ 27
3.2.1 ESXi 5.5 之前的版本 ........................................................................................................................... 27
3.2.2 ESXi 5.5 ................................................................................................................................................ 28
4 配置前存储系统上的准备 ................................................................................................................ 35
5 配置交换机 ......................................................................................................................................... 36
5.1 光纤通道交换机 ........................................................................................................................................... 36
5.1.1 查询交换机的型号和版本 .................................................................................................................. 36
5.1.2 配置 Zone ............................................................................................................................................ 39
5.1.3 注意事项.............................................................................................................................................. 41
5.2 以太网交换机 ............................................................................................................................................... 42
5.2.1 配置 VLAN.......................................................................................................................................... 42
2014-02-10
华为所有和机密 版权所有 © 华为技术有限公司
第 2 页, 共 111 页
华为 SAN 存储在 VMware 系统下的主机连通性指南
5.2.2 配置端口绑定 ...................................................................................................................................... 43
6 建立 FC 连接...................................................................................................................................... 45
6.1 确定拓扑模式 ............................................................................................................................................... 45
6.1.1 OceanStor T 系列存储......................................................................................................................... 45
6.1.2 OceanStor 18000 系列存储 .................................................................................................................. 46
6.2 添加启动器 ................................................................................................................................................... 46
6.3 建立连接 ....................................................................................................................................................... 47
7 建立 iSCSI 连接 ................................................................................................................................ 48
7.1 主机系统上的配置 ....................................................................................................................................... 48
7.1.1 配置业务 IP ......................................................................................................................................... 48
7.1.2 配置主机启动器 .................................................................................................................................. 50
7.1.3 CHAP 认证 ........................................................................................................................................... 54
7.2 存储系统上的配置 ....................................................................................................................................... 55
7.2.1 OceanStor T 系列存储......................................................................................................................... 56
7.2.2 OceanStor 18000 系列存储 .................................................................................................................. 59
8 LUN 映射和使用................................................................................................................................ 61
8.1 映射 LUN 给主机 ......................................................................................................................................... 61
8.1.1 OceanStor T 系列存储.......................................................................................................................... 61
8.1.2 OceanStor 18000 系列存储 .................................................................................................................. 62
8.2 主机系统扫描 LUN ...................................................................................................................................... 63
8.3 主机系统使用 LUN ...................................................................................................................................... 64
8.3.1 裸盘映射.............................................................................................................................................. 64
8.3.2 创建数据存储(文件系统) .............................................................................................................. 68
8.3.3 虚拟磁盘映射 ...................................................................................................................................... 73
8.3.4 裸盘映射与虚拟磁盘映射对比 .......................................................................................................... 76
9 多路径管理 ......................................................................................................................................... 78
9.1 简介 ............................................................................................................................................................... 78
9.2 VMware PSA ................................................................................................................................................. 78
9.2.1 概述...................................................................................................................................................... 78
9.2.2 VMware NMP 模块 .............................................................................................................................. 79
9.2.3 VMware PSP I/O 路径策略 .................................................................................................................. 79
9.3 软件功能特点 ............................................................................................................................................... 79
9.4 多路径路径选择策略 ................................................................................................................................... 80
9.4.1 策略种类和差异 .................................................................................................................................. 80
9.4.2 不同版本下的路径策略 ...................................................................................................................... 82
9.5 多路径阵列类型策略 ................................................................................................................................... 83
9.6 策略配置 ....................................................................................................................................................... 86
9.6.1 OceanStor T 系列存储.......................................................................................................................... 87
2014-02-10
华为所有和机密 版权所有 © 华为技术有限公司
第 3 页, 共 111 页
华为 SAN 存储在 VMware 系统下的主机连通性指南
9.6.2 OceanStor 18000 系列存储 .................................................................................................................. 96
9.7 LUN 失效策略............................................................................................................................................... 97
9.8 查询和修改路径策略 ................................................................................................................................... 97
9.8.1 ESX/ESXi 4.0 ....................................................................................................................................... 97
9.8.2 ESX/ESXi 4.1 ....................................................................................................................................... 97
9.8.3 ESXi 5.0 .............................................................................................................................................. 100
9.8.4 ESXi 5.1 .............................................................................................................................................. 100
9.8.5 ESXi 5.5 .............................................................................................................................................. 101
9.9 网络单适配器和多适配器对 iSCSI 多路径的区别 .................................................................................. 102
9.9.1 单适配器 iSCSI 多路径网络 ............................................................................................................ 102
9.9.2 多适配器 iSCSI 多路径网络 ............................................................................................................ 102
10 常用命令 ......................................................................................................................................... 105
11 高可用技术介绍 ............................................................................................................................ 107
11.1 简介 ........................................................................................................................................................... 107
11.1.1 工作原理和功能 .............................................................................................................................. 107
11.1.2 VMwareHA、DRS、VMotion 相互关系 ........................................................................................ 108
11.2 安装配置方法 ........................................................................................................................................... 108
11.3 日志收集 ................................................................................................................................................... 108
12 缩略语 ............................................................................................................................................. 109
2014-02-10
华为所有和机密 版权所有 © 华为技术有限公司
第 4 页, 共 111 页
华为 SAN 存储在 VMware 系统下的主机连通性指南
插图目录
图 1-1 VMware Infrastructure 数据中心 ............................................................................................................. 12
图 1-2 存储体系结构.......................................................................................................................................... 13
图 1-3 VMFS 架构 ............................................................................................................................................... 14
图 1-4 VMFS 卷的组成 ....................................................................................................................................... 15
图 1-5 RDM 机制 ................................................................................................................................................ 16
图 2-2 FC 多路径直连组网连接图(双控存储) ............................................................................................. 21
图 2-3 FC 多路径直连组网连接图(四控存储) ............................................................................................. 21
图 2-4 FC 多路径交换机组网连接图(双控存储) ......................................................................................... 22
图 2-5 FC 多路径交换机组网连接图(四控存储) ......................................................................................... 22
图 2-6 iSCSI 多路径直连组网连接图(双控存储) ........................................................................................ 23
图 2-7 iSCSI 多路径直连组网连接图(四控存储) ........................................................................................ 24
图 2-8 iSCSI 多路径交换组网连接图(双控存储) ........................................................................................ 24
图 2-9 iSCSI 多路径交换组网连接图(四控存储) ........................................................................................ 25
图 3-1 查看 HBA 卡信息 ................................................................................................................................... 26
图 5-1 Switch information.................................................................................................................................... 37
图 5-2 交换机上灯的状态信息 .......................................................................................................................... 39
图 5-3 Zone 属性页签 ......................................................................................................................................... 39
图 5-4 Zone 配置截图 ......................................................................................................................................... 40
图 5-5 Zone Config 配置截图 ............................................................................................................................. 41
图 5-6 Name Server 管理界面 ............................................................................................................................. 41
图 6-1 OceanStor T 系列存储 FC 端口详细信息 .............................................................................................. 45
图 6-2 OceanStor 18000 存储 FC 端口详细信息 ............................................................................................... 46
图 7-1 添加 VMkernel ........................................................................................................................................ 48
图 7-2 创建标准交换机...................................................................................................................................... 49
图 7-3 选择网络标签.......................................................................................................................................... 49
2014-02-10
华为所有和机密 版权所有 © 华为技术有限公司
第 5 页, 共 111 页
华为 SAN 存储在 VMware 系统下的主机连通性指南
图 7-4 输入 iSCSI 业务 IP ................................................................................................................................. 49
图 7-5 完成后的信息汇总.................................................................................................................................. 50
图 7-6 双适配器 iSCSI 多路径网络 .................................................................................................................. 50
图 7-7 添加存储适配器...................................................................................................................................... 51
图 7-8 添加 iSCSI 适配器 .................................................................................................................................. 51
图 7-9 iSCSI Software Adapter ............................................................................................................................ 52
图 7-10 启动器属性............................................................................................................................................ 52
图 7-11 iSCSI 启动器属性 .................................................................................................................................. 52
图 7-12 与新 VMKernel 网络适配器绑定 ........................................................................................................ 53
图 7-13 完成 VMKernel 端口绑定 .................................................................................................................... 53
图 7-14 添加发送目标服务器 ............................................................................................................................ 54
图 7-15 常规属性页............................................................................................................................................ 54
图 7-16 CHAP 凭据的相关参数 ......................................................................................................................... 55
图 7-17 IP 地址功能截图 .................................................................................................................................... 56
图 7-18 启动器的 CHAP 菜单 ........................................................................................................................... 57
图 7-19 CHAP 配置菜单 ..................................................................................................................................... 57
图 7-20 CHAP 创建界面 ..................................................................................................................................... 58
图 7-21 将创建好的 CHAP 账号分配给启动器 ............................................................................................... 58
图 7-22 CHAP 状态设置 ..................................................................................................................................... 59
图 7-23 启用 CHAP ............................................................................................................................................ 59
图 7-24 激活 CHAP 后的启动器状态 ............................................................................................................... 59
图 8-1 扫描映射的 LUN .................................................................................................................................... 63
图 8-2 主机编辑设置.......................................................................................................................................... 64
图 8-3 添加硬盘 ................................................................................................................................................. 65
图 8-4 选择磁盘类型.......................................................................................................................................... 65
图 8-5 选择相关磁盘.......................................................................................................................................... 66
图 8-6 选择数据存储.......................................................................................................................................... 66
图 8-7 兼容模式 ................................................................................................................................................. 67
图 8-8 虚拟设备节点.......................................................................................................................................... 67
图 8-9 完成裸盘映射.......................................................................................................................................... 68
图 8-10 正在添加裸盘映射................................................................................................................................ 68
图 8-11 添加存储器 ............................................................................................................................................ 69
2014-02-10
华为所有和机密 版权所有 © 华为技术有限公司
第 6 页, 共 111 页
华为 SAN 存储在 VMware 系统下的主机连通性指南
图 8-12 存储器类型............................................................................................................................................ 69
图 8-13 选择磁盘/LUN ...................................................................................................................................... 70
图 8-14 文件系统版本........................................................................................................................................ 70
图 8-15 当前磁盘布局........................................................................................................................................ 71
图 8-16 数据存储名称........................................................................................................................................ 71
图 8-17 数据存储容量........................................................................................................................................ 72
图 8-18 确认磁盘布局正确................................................................................................................................ 72
图 8-19 编辑虚拟机属性.................................................................................................................................... 73
图 8-20 添加硬盘 ............................................................................................................................................... 74
图 8-21 创建新的虚拟磁盘................................................................................................................................ 74
图 8-22 指定磁盘属性........................................................................................................................................ 75
图 8-23 选择数据存储........................................................................................................................................ 75
图 8-24 虚拟设备节点........................................................................................................................................ 76
图 8-25 完成虚拟磁盘映射................................................................................................................................ 76
图 8-26 虚拟磁盘添加成功后可以修改其容量 ................................................................................................ 77
图 8-27 裸盘映射不能修改容量 ........................................................................................................................ 77
图 9-1 VMware Pluggable Storage Architecture .................................................................................................. 78
图 9-2 VMkernel 架构 ......................................................................................................................................... 80
图 9-3 存储适配器菜单...................................................................................................................................... 88
图 9-4 LUN 的路径菜单 ..................................................................................................................................... 88
图 9-5 管理路径上的设置.................................................................................................................................. 89
图 9-6 单适配器网络........................................................................................................................................ 102
图 9-7 多适配器网络 A .................................................................................................................................... 103
图 9-8 多适配器网络 A 的实际连接模式 ....................................................................................................... 103
图 9-9 多适配器网络 B .................................................................................................................................... 103
图 9-10 多适配器网络 B 实际部署模式 ......................................................................................................... 104
图 10-1 选择对应的版本.................................................................................................................................. 106
图 11-1 主机日志信息 ...................................................................................................................................... 108
2014-02-10
华为所有和机密 版权所有 © 华为技术有限公司
第 7 页, 共 111 页