升級的主要步驟如下：

1.配置新采購的2臺華為S6720S-SI交換機(jī)，并與S5720S進(jìn)行連接。

2.將新配置的服務(wù)器連接到網(wǎng)絡(luò)，并加入現(xiàn)有vSAN。

3.依次將原來的每臺主機(jī)進(jìn)入維護(hù)模式，重新分配vSAN流量上行鏈路、刪除vvSwitch1、重新配置vSwitch0，配置完成后退出維護(hù)模式。

4.對vSAN磁盤執(zhí)行主動平衡操作。

5.虛擬機(jī)默認(rèn)的虛擬網(wǎng)卡為Intel E1000，這是一塊千兆網(wǎng)卡，要將虛擬機(jī)網(wǎng)絡(luò)升級到萬兆，需要修改虛擬機(jī)的網(wǎng)卡為VMXNET3，刪除原來的Intel E1000虛擬網(wǎng)卡。添加VMXNET3虛擬網(wǎng)卡、刪除E1000虛擬網(wǎng)卡后，進(jìn)入虛擬機(jī)設(shè)置，為新添加的網(wǎng)卡設(shè)置IP地址、子網(wǎng)掩碼、網(wǎng)關(guān)、DNS。

將2臺S6720S-SI交換機(jī)配置為堆疊

首先配置2臺S6720SSI交換機(jī)，然后將這2臺萬兆交換機(jī)與原來的2臺千兆交換機(jī)級聯(lián)。

1.將新采購的2臺華為S6720S-SI交換機(jī)配置為堆疊，每臺交換機(jī)使用2個40G端口。將每臺交換機(jī)的業(yè)務(wù)口 40GE0/0/1、40GE0/0/2 配置為物理成員端口，并加入到相應(yīng)的邏輯堆疊端口。下面是第一臺交換機(jī)的配置命令（設(shè)置堆疊優(yōu)先級為200）。

system-view

sysname SwitchA

interface stack-port 0/1

p o r t i n t e r f a c e 40GE0/0/1 enable

y

quit

interface stack-port 0/2

p o r t i n t e r f a c e 40GE0/0/2 enable

y

quit

stack slot 0 priority 200

上文命令中的Y是確認(rèn)命令。設(shè)置完成后保存配置。另一臺交換機(jī)的配置與此相同，只是設(shè)置交換機(jī)的名稱為SwitchB，設(shè)置堆疊優(yōu)先級為100。其他配置相同。配置完成后保存退出。

2.然后將兩臺交換機(jī)下電，使用QSFP-40G的堆疊線將兩臺交換機(jī)連接起來，在連接的時候，第一臺交換機(jī)的40GE0/0/1的端口連接第二臺交換機(jī)的40GE0/0/2端口，第一臺交換機(jī)的40GE0/0/2端口連接第二臺交換機(jī)的40GE0/0/1端口，簡單說就是1連2，2連1。

說明：華為交換機(jī)配置堆疊時，同一條鏈路上相連交換機(jī)的堆疊物理接口必須加入不同的堆疊端口，是交叉的，也就是說本端交換機(jī)的堆疊端口1必須和對端交換機(jī)的堆疊端口2連接。

3.連接好之后，打開兩臺交換機(jī)的電源，等交換機(jī)啟動之后，按任意一臺交換機(jī)面板上的Mode按鈕將模式狀態(tài)燈切換到Stack。如果所有成員交換機(jī)的模式狀態(tài)燈都被切換到了Stack模式，說明堆疊組建成功。此時主交換機(jī)的端口1到端口8的指示燈閃爍，從交換機(jī)的端口1、端口2閃爍，表示堆疊成功。

如果有部分成員交換機(jī)的模式狀態(tài)燈沒有被切換到Stack模式，說明堆疊組建不成功。需要檢查配置。

4.當(dāng)交換機(jī)配置堆疊成功后，進(jìn)入交換機(jī)配置頁，為交換機(jī)設(shè)置新的名稱、劃分VLAN并設(shè)置VLAN接口的IP地址。本示例配置如下：

sysname S6720S-26Q

vlan batch 250 2381 to 2383

interface Vlanif250

ip address 192.168.

250.5 255.255.255.0

interface Vlanif2381

ip address 192.168.

238.60 255.255.255.192

interface Vlanif2383

ip address 192.168.238.140 255.255.255.240

5.在本項目中，服務(wù)器上行鏈路需要連接到交換機(jī)的Trunk端口。下面的命令將兩臺S6720S-SI交換機(jī)的端口1到端口22配置為Trunk端口并允許所有VLAN通過。

port-group groupm e m b e r X G i g a b i t Ethernet0/0/1 to XGiga bitEthernet0/0/22

port link-type trunk

port trunk allowpass vlan 2 to 4094

quit

port-group groupm e m b e r X G i g a b i t Ethernet1/0/1 to XGiga bitEthernet1/0/22

port link-type trunk

port trunk allowpass vlan 2 to 4094

quit

6.將每兩臺S6720S-SI交換機(jī)的端口23、24配置為鏈路聚合，設(shè)置為Trunk并允許所有VLAN通過，命令如下。

interface Eth-Trunk1

port link-type trunk

port trunk allow-pass vlan 2 to 4094

mode lacp

interface XGigabit Ethernet0/0/23

Eth-Trunk 1

interface XGigabit Ethernet0/0/24

Eth-Trunk 1

interface XGigabit Ethernet1/0/23

Eth-Trunk 1

interface XGigabit Ethernet1/0/24

Eth-Trunk 1

quit

7.然后為交換機(jī)添加靜態(tài)路由，指向原來的S5720S交換機(jī)。

配置2臺S5720S交換機(jī)

原 來 的2臺 華 為S5720S-52X-SI有4個萬兆端口。本項目中使用每臺交換機(jī)的XG0/0/1、XG0/0/2用作兩臺交換機(jī)的堆疊端口，將XG0/0/3配置為鏈路聚合連接到2臺S6720S的23或24端口。原計劃是將兩臺交換機(jī)的XG0/0/3、XG0/0/4共4個端口用作鏈路聚合，后來用戶說需要將其中的一個端口連接到外網(wǎng)交換機(jī)，所以只用了每臺交換機(jī)的XG0/0/3端口用作鏈路聚合。

1.配置交換機(jī)1的業(yè)務(wù)口XG0/0/1、XG0/0/2為物理成員端口，并加入到相應(yīng)的邏輯堆疊端口。

system-view

sysname SwitchA

interface stack-port 0/1

p o r t i n t e r f a c e XG0/0/1 enable

quit

interface stack-port 0/2

p o r t i n t e r f a c e XG0/0/2 enable

quit

stack slot 0 priority 200

交換機(jī)2的配置與此相同，只是修改交換機(jī)名稱為SwitchB、設(shè)置堆疊優(yōu)先級為100。

圖5 連接示意圖

2.將兩臺交換機(jī)下電，使用10G的直連光纖將兩臺交換機(jī)連接起來，在連接的時候，第一臺交換機(jī)的XG0/0/1的端口連接第二臺交換機(jī)的XG0/0/2端口，第一臺交換機(jī)的XG0/0/2端口連接第二臺交換機(jī)的XG0/0/1端口。

連接正確之后將交換機(jī)重新加電，等交換機(jī)啟動之后按Mode鍵到Stack處進(jìn)行測試。

3.堆疊成功之后，將交換機(jī)的XG0/0/3與XG1/0/3配置為鏈路聚合，端口屬性為Trunk并允許所有VLAN通過。配置命令如下：

interface Eth-Trunk1

port link-type trunk

port trunk allow-pass vlan 2 to 4094

mode lacp

interface XGigabit Ethernet0/0/3

Eth-Trunk 1

interface XGigabit Ethernet1/0/3

Eth-Trunk 1

4將S6720S與S5720S的進(jìn)行級聯(lián)，S5720S主交換機(jī)的XG0/0/3連接到S6720S主交換機(jī)的23或24端口；S5720S從交換機(jī)的XG1/0/3連接到S6720S從交換機(jī)的23或24端口，連接示意如圖5所示。

說明：本配置中，兩臺S5720S的XG0/0/3、XG1/0/3共2個端口進(jìn)行聚合，兩臺交換機(jī)S6720S的XG0/0/23、XG0/0/24、XG1/0/23、XG1/0/24共4個端口進(jìn)行聚合。也可以從兩臺S6720S各選擇一個端口例如XG0/0/24、XG1/0/24進(jìn)行聚合。

5.因為配置堆疊后從（備）交換機(jī)的配置清空，所以參照S5720S-52X主交換機(jī)的端口配置，將S5720S從交換機(jī)的GigabitEthernet1/0/1 到GigabitEthernet1/0/48進(jìn)行重新配置。

6.因為原來的兩臺S5720S是進(jìn)行了級聯(lián)，沒有配置堆疊。在配置堆疊后，原來S5720S從交換機(jī)中VLAN 的IP也被清除。在虛擬機(jī)中有些虛擬機(jī)的網(wǎng)關(guān)地址設(shè)置的是原S5720S的IP地址，可以在S5720S的VLAN配置中，添加子IP地址。

示例：原來主交換機(jī)vlan2381的VLAN的IP地址是 192.168.238.61，子網(wǎng)掩碼是255.255.255.192；從交換機(jī)的VLAN的IP地址是 192.168.238.62，新添加的萬兆交換機(jī)VLAN2381的IP地址是192.168.238.60。在2臺S5720配置堆疊 后192.168.238.62的IP地址被清除，可以進(jìn)入vlan2381配置視圖中，執(zhí)行ip addr 192.168.238.62 255.255.255.192 sub的命令添加子IP地址。這樣每個VLAN實際上有3個“網(wǎng)關(guān)”地址，例如，對于vlan2381來說，萬兆交換機(jī)上設(shè)置的IP地址是192.168.238.60，千兆交換機(jī) 上 是192.168.238.61、192.168.238.62，使用這三個地址都可以作為網(wǎng)關(guān)地址。但建議在以后的使用中將網(wǎng)關(guān)地址改為萬兆交換機(jī)的地址192.168.238.60。

7.最后進(jìn)行測試，使用ping命令測試從S5720S到S6720S的連通性，這個操作比較簡單不再介紹。

新添加主機(jī)連接配置

在配置好網(wǎng)絡(luò)之后，可以將新添加的服務(wù)器上架，主要內(nèi)容如下：

1.打開服務(wù)器機(jī)箱，移除RAID緩存。為服務(wù)器添加硬盤擴(kuò)展背板、添加PCI-E擴(kuò)展板，添加2塊萬兆網(wǎng)卡、添加2塊PCI-E固態(tài)硬盤。

2.進(jìn)入BIOS設(shè)置，為服務(wù)器進(jìn)入設(shè)置iMM的IP地址用于后期的管理與維護(hù)。

3.進(jìn)入RAID配置界面，將每塊硬盤配置為JBOD模式。

4.安裝ESXi 6.5.0 U2到第1塊300GB的硬盤中（這塊硬盤是原來下架服務(wù)器不用的硬盤，現(xiàn)在用來裝系統(tǒng)）。

說明：新上架的聯(lián)想3650 M5服務(wù)器，原來是1顆E5-2609 V3的CPU，再更換為2塊E5-2620 V4的CPU之后，開機(jī)無顯示。將2塊E5-2620 V4的CPU拆下并換上原來的E5-2609 V3 的CPU，從聯(lián)想官網(wǎng)下載最新的固件，升級之后可以支持E5-2620 V4的CPU，再次開機(jī)正常。

在安裝ESXi后為服務(wù)器設(shè)置IP地址并添加到vCenter Server。之后將這臺主機(jī)的網(wǎng)卡連接到網(wǎng)絡(luò)。

總體配置原則是：萬兆網(wǎng)卡的端口2用于ESXi主機(jī)管理流量與虛擬機(jī)流量，連接到新配置的2臺萬兆交換機(jī)的TRUNK端口。萬兆網(wǎng)卡的端口1用于vSAN流量，連接到vSAN專用交換機(jī)1、2。千兆網(wǎng)卡用于主機(jī)管理流量與虛擬機(jī)流量的備用。

5.新連接的主機(jī)，網(wǎng)卡1的端口1、網(wǎng)卡2的端口1連接到新配置的S6720S-26Q的端口5，配置為vSwitch0，添 加 VLAN2383、VLAN250、VM Network（VLAN ID 2381，192.168.238.0/26）,Management Network（VLAN ID：2381）等端口組。

6.新連接主機(jī)的網(wǎng)卡1的端口2、網(wǎng)卡2的端口2連接到原來交換機(jī)S6720S-EI的端口5，配置為vSwitch1，配置vSAN的VMkernel的IP地址為192.168.238.197，子網(wǎng)掩碼255.255.255.192。

本項目中，vSAN流量虛擬交換機(jī)用于VMotion。需要為vSwitch1的VMkernel啟用VMotion服務(wù)。

7.在磁盤管理中為新添加的主機(jī)添加磁盤組，這些不再介紹。

原有vSphere主機(jī)的網(wǎng)絡(luò)遷移升級

最后遷移原來4臺主機(jī)的網(wǎng)絡(luò)。為了保證業(yè)務(wù)的連續(xù)性，在遷移主機(jī)的網(wǎng)絡(luò)之前，將主機(jī)置于維護(hù)模式，等虛擬機(jī)遷移到其他主機(jī)之后再進(jìn)行遷移。其中的關(guān)鍵之處：千兆換萬兆，刪除vSwitch1，更改 VLAN ID。

因為升級之后有2塊2端口萬兆網(wǎng)卡，為了避免單塊網(wǎng)卡帶來的單點故障，每個虛擬交換機(jī)只使用每塊網(wǎng)卡的一個端口，不能將1塊網(wǎng)卡的2個端口用于同一個虛擬交換機(jī)。本文以IP地址為192.168.238.1的主機(jī)為例，其他主機(jī)與此相同。

1.將主機(jī)置于維護(hù)模式，不遷移數(shù)據(jù)。

2.關(guān)閉服務(wù)器電源，添加萬兆網(wǎng)卡。

3.打開服務(wù)器電源，進(jìn)入BIOS，為iMM設(shè)置IP地址。

4.將網(wǎng)卡2（新添加的萬兆網(wǎng)卡）的端口1，連接到原來的萬兆交換機(jī)（vSAN流量專用交換機(jī)）。

5.修改vSwitch2虛擬交換機(jī)的配置，添加網(wǎng)卡2的端口1，刪除萬兆網(wǎng)卡1的端口2。此時通過插拔網(wǎng)卡1的端口2的光纖進(jìn)行確認(rèn)。這一步不要刪除錯了網(wǎng)卡，應(yīng)慎重操作。例如在左側(cè)導(dǎo)航窗格中選擇192.168.238.1，在右側(cè)“配置→網(wǎng)絡(luò)→虛擬交換機(jī)”中單擊vSwitch2，此時看到vmnic5狀態(tài)為斷開。

在本次項目中，2端口萬兆網(wǎng)卡靠近金手指的為端口2，遠(yuǎn)離金手指的為端口1。

6.在確認(rèn)了萬兆網(wǎng)卡端口2之后，修改vSwitch2虛擬交換機(jī)的上行鏈路，刪除vmnic5（萬兆網(wǎng)卡1的端口2），添加vmnic6（萬兆網(wǎng)卡2的端口1）。

7.然后將萬兆網(wǎng)卡1的端口2（vmnic5）與萬兆網(wǎng)卡2的端口2（vmnic7）分別連接到兩臺新萬兆交換機(jī)端口1。

8.為虛擬機(jī)交換機(jī)vSwitch0，添加萬兆網(wǎng)卡1的端口2、萬兆網(wǎng)卡2的端口2，并將新添加的網(wǎng)卡移動到備用適配器。

9.修改vSwitch0上行鏈路，添加vmnic5、vmnic7并將其移動到“備用適配器”中，因為 vmnic0、vmnic1連接到交換機(jī)的Access端口（屬于 VLAN 2381），vmnic5、vmnic7連接到交換機(jī)的Trunk端 口，如 果 vmnic5、vmnic7也是活動適配器，網(wǎng)絡(luò)有可能中斷。

10.此 時“Management Network”端口組綁定的VMkernel的活動鏈路為vmnic0和vmnic1，vmnic5與vmnic7處于備用狀態(tài)。下一步修改Management Network的上行鏈路為萬兆網(wǎng)卡，原來的千兆網(wǎng)卡調(diào)整為備用。并修改VLAN ID為2381，注意，這是最關(guān)鍵的一步。如果配置出錯導(dǎo)致網(wǎng)絡(luò)中斷，vCenter會返回到原來的配置。用鼠標(biāo)單擊“Management Network”，然后再單擊圖標(biāo)，如圖6所示。

圖6 修改端口組屬性

圖7 指定故障切換順序

圖8 虛擬交換機(jī)vSwitch1最新配置

11.在“Management Network-編輯設(shè)置”對話框的“屬性→VLAN ID”處設(shè)置VLAN數(shù)值，本示例為2381，在“綁定和故障切換”中將vmnic5、vmnic7上 移 到 活動適配器位置，將vmnic0、vmnic1下移到未用的適配器處，如圖7所示，然后單擊“確定”完成配置。

12.參照第11步，將VM Network端口組的ID設(shè)置為 2381，同 樣 調(diào) 整 vmnic5、vmnic7為活動適配器，將vmnic0、vmnic1調(diào)整為未用適配器，此時vSwitch0使用2塊萬兆網(wǎng)卡的端口2。然后刪除vSwitch1虛擬交換機(jī)。

13.在vSwitch0上 添加原來vSwitch1虛擬交換機(jī)的端口組vlan2383和vlan250，至此等于將原來的vSwitch1的端口組合并遷移到vSwitch0虛擬交換機(jī)。

14.修改vSwitch0的上行鏈路，刪除vmnic0、vmnic1（這是連接到原來千兆交換機(jī)的Access端口的網(wǎng)卡端口），添 加 vmnic2、vmnic3（這是連接到原來千兆交換機(jī)的Trunk端口，原來是vSwitch1虛擬交換機(jī)的上行鏈路），并將 vmnic2、vmnic3移到備用適配器中，調(diào)整之后如圖8所示。

15.等上述配置完成之后，再進(jìn)行檢查之后，將主機(jī)退出維護(hù)模式。至此第1臺主機(jī)千兆升級到萬兆完成。

其他主機(jī)也參照上述操作執(zhí)行，在此不再贅述。

說明：聯(lián)想3650 M5服務(wù)器開機(jī)自檢較慢，從服務(wù)器進(jìn)入維護(hù)模式到服務(wù)器關(guān)機(jī)、插上萬兆網(wǎng)卡，再開機(jī)進(jìn)入系統(tǒng)，大約需要25分鐘的時間，其他的操作大約15分鐘，遷移升級一臺服務(wù)器需要40分鐘左右的時間。在vSAN的項目中，一臺服務(wù)器從關(guān)機(jī)到再次進(jìn)入系統(tǒng)，最好是在1小時內(nèi)完成。如果服務(wù)器離線超過60分鐘，這臺主機(jī)上的數(shù)據(jù)有可能在其他主機(jī)重建。

16.等所有主機(jī)完成網(wǎng)絡(luò)的遷移與升級之后，在“監(jiān)控→vSAN→運行狀況”中的“vSAN磁盤平衡”中執(zhí)行主動重新平衡磁盤的操作，如圖9所示。執(zhí)行此操作后，部分?jǐn)?shù)據(jù)會遷移到新上架的主機(jī)中，使數(shù)據(jù)相對均勻的分散保存在每臺主機(jī)的每個磁盤組中。

圖9 主動重新平衡磁盤

圖10 8塊12TB采用RAID-50劃分為2個卷

備份服務(wù)器

由于硬件故障、病毒、誤操作等情況，系統(tǒng)數(shù)據(jù)可能丟失或損壞，而數(shù)據(jù)備份則是保證數(shù)據(jù)完好的最后一到防線。一個完整的架構(gòu)一定要有單獨的備份設(shè)備，如果備份目標(biāo)與備份源在相同的存儲設(shè)備上，如果存儲設(shè)備故障，備份數(shù)據(jù)也無法讀取，此時備份是沒有意義的。在2017年項目規(guī)劃時配置了一臺服務(wù)器用于備份，因為空間不足需要升級。本次操作將原來的8塊4TB硬盤更換為12TB硬盤。這次更換主要步驟如下。

1.將備份服務(wù)器關(guān)機(jī)。

2.依次拆下原來的4TB的硬盤，并記下硬盤的位置，貼上標(biāo)記。因為這些硬盤還有近期的備份，所以需要存檔一段時間，等新?lián)Q上的硬盤備份成功一次，并且連續(xù)保存一段時間之后，這些4TB的硬盤可以另做他用。

3.安裝新的12TB硬盤，添加1塊2端口萬兆網(wǎng)卡，連接到新萬兆交換機(jī)。

4.打開服務(wù)器電源，進(jìn)入RAID卡配置界面，配置為RAID-50，劃分2個卷。第1個卷100GB，剩余的空間劃分為第2個卷，容量約64TB，如圖10所示。

5.在第1個卷上安裝備份軟件，在第2個卷上保存?zhèn)浞?。這些不再介紹。