紅皮書單挑DS

1、紅皮書單挑DS6800（續(xù)）之前jxufe前輩寫過(guò)連載，沒(méi)有受過(guò)ds6800培訓(xùn),手持紅書單挑i570+ds6800，最近正好有幸接觸到DS6800，由于之前也沒(méi)弄過(guò)，也是依靠紅皮書和手冊(cè)一步一步摸索，把我的理解和一些步驟寫下來(lái)，有什么錯(cuò)誤的地方請(qǐng)jxufe和各位前輩多多指教。硬件連接：怎么接expansion enclosure，這個(gè)問(wèn)題困擾了我好久，對(duì)照著紅皮書里面的圖一根線一根線的對(duì)照，最后也沒(méi)有看明白，但是，原理很重要，看完ds6000的內(nèi)部構(gòu)架圖，怎么接一眼就明白了，嘿嘿。如果要接loop0，那就IN-OUT直接接就可以了，可以這樣理解：ds6000的server enclosure

2、里本身就已經(jīng)包含了一個(gè)在loop0的expansion enclosure，內(nèi)部已經(jīng)連接好了，因此，如果要接loop0，那就IN-OUT接起來(lái)就保證沒(méi)問(wèn)題。如果要接loop1，那就得從disk contrl出來(lái)交叉接第一個(gè)expansion enclosure，剩下的expansion enclosure就是IN-OUT了。所以又可以回歸到另外一個(gè)問(wèn)題，為什么ds6000可以接7個(gè)expansion enclosure，因?yàn)閘oop0上已經(jīng)相當(dāng)于有了一個(gè)expansion enclosure，只不過(guò)在server enclosure的內(nèi)部，所以loop0上可以再接3個(gè)expansion enc

3、losure，而loop1上可以再接4個(gè)expansion enclosure。 本帖最后由 jiecho 于 2009-2-21 15:53 編輯 top.JPG (55.18 KB) 下載次數(shù):12009-2-21 15:51Ds6000構(gòu)架loop0.JPG (50.68 KB) 下載次數(shù):02009-2-21 15:51loop0接法loop1.JPG (50.94 KB) 下載次數(shù):02009-2-21 15:51loop1接法加電：接好了硬件，下面就是大事件了哦：加電開(kāi)機(jī)！這個(gè)大事件也很簡(jiǎn)單，嘿嘿?？礈?zhǔn)那個(gè)白色的小鈕，使勁捅一下，如果沒(méi)有跑偏，就會(huì)聽(tīng)到呼呼的風(fēng)扇聲，咱們就把這個(gè)大家

4、伙開(kāi)起來(lái)了，但是，是不是要先開(kāi)expansion enclosure電源啊，嘿嘿，錯(cuò)了，6000好歹比4000大2000呢，怎么也得先進(jìn)點(diǎn)，server enclosure會(huì)讓expansion enclosure自動(dòng)加電的，當(dāng)然你得都接上電源。配置ip：下面就是要改用來(lái)管理ds6000的ip地址了，跟4000里差不多，ds6000里默認(rèn)的ip是：13 for cluster014 for cluster1找出隨機(jī)帶的串口線，小口接到ds6000上，不要接錯(cuò)了，跟電話線接頭差不多的那個(gè)，串口接到筆記本上，如果筆記本沒(méi)有串口，人家IBM還送了一條一

5、頭是串口，一頭是USB的，還有一張光盤，怎么用，嘿嘿，自己琢磨吧。開(kāi)個(gè)超級(jí)終端，每秒位數(shù)那里改成38400，敲兩下回車，然后就guest/guest登陸了，剩下就是改ip、密碼啥的，自己玩吧。不過(guò)還有另外的發(fā)現(xiàn)，如果是版本低一些的微碼，你會(huì)發(fā)現(xiàn)ds6000是基于power linux的，還是2.4內(nèi)核的，微碼升級(jí)到最新，這些信息就被屏蔽掉了。如果能跳出那個(gè)配置菜單，弄到個(gè)shell，沒(méi)準(zhǔn)會(huì)有更多的發(fā)現(xiàn)呢。嘿嘿，想遠(yuǎn)了。SMC的安裝很簡(jiǎn)單，包含ds6000 storage manager/dscli，ds6000 storage manager只能裝在windows（2000、2003、xp）平

6、臺(tái)上，dscli可以裝在很多平臺(tái)上（windows、linux、aix等）安裝過(guò)程讓你輸密碼的時(shí)候就輸密碼，其他的就next就好。ds6000 storage manager 和ds4000 storage manager還是有很大區(qū)別的，ds4000是cs結(jié)構(gòu)的，到了ds6000就是基于was的bs結(jié)構(gòu)了，用起來(lái)復(fù)雜一些，速度慢一些，其他就沒(méi)啥缺點(diǎn)了，所以配置ds6000的時(shí)候用dscli比較好，簡(jiǎn)單快捷，邏輯結(jié)構(gòu)也比較快捷，推薦。安裝萬(wàn)SMC以后，就可以用admin/admin登陸了，登陸成功以后會(huì)強(qiáng)制修改密碼，完成以后就會(huì)登錄到SMC了，SMC的配置有了兩個(gè)模式Real-time man

7、ager/Simulated manager,顧名思義，前面就是在線配置，后面就是模擬器性質(zhì)的了。在Real-time manager模式中選擇添加storage unit，輸入ds6000的ip、S/N后，如果沒(méi)有什么異常，就可以把ds6000加入到SMC里進(jìn)行管理了。在使用一些copy service的時(shí)候，可能會(huì)使用的peer smc，也就是兩個(gè)smc，這些我沒(méi)有深究了。下面的工作，我們要配置一下dscli，以便我們操作的時(shí)候更方便，我的dscli是安裝在linux里，其他的平臺(tái)應(yīng)該類似，dscli的配置文件是/opt/ibm/dscli/profile/file主要改

8、兩個(gè)地方：hmc1改成你SMC的ip，devid有三部分組成，IBM+machine type+Serial Number，我的是改成下面的：xxxxxxx代表序列號(hào)，可以在ds6000前面找到。配置完成，就可以登陸dscli管理ds6000了。# Management Console/Node IP Address(es)#   hmc1 and hmc2 are equivalent to -hmc1 and -hmc2 command options.hmc1:   13#hmc2:  #

9、 Default target Storage Image ID#    "devid" and "remotedevid" are equivalent to#    "-dev storage_image_ID" and "-remotedev storeage_image_ID" command options, respectively.devid:              &

10、#160;   IBM.1750-xxxxxxx#remotedevid:   IBM.2107-AZ12341升級(jí)微碼微碼可以從IBM網(wǎng)站上下載，會(huì)讓你注冊(cè)并且提供DS6000的S/N等，升級(jí)過(guò)程就是在SMC里選好要升級(jí)的storage unit，transfer到ds6000后再active微碼。微碼的升級(jí)文件叫SEA.jar，開(kāi)始半天沒(méi)找到，以為是什么java的東西，呵呵。DS6000升級(jí)微碼有兩種模式：concurrent：也就是在線升級(jí)，所有連接主機(jī)的IO都不會(huì)中斷，但是會(huì)發(fā)生SDD、MPIO等多路徑軟件failover的切換。過(guò)程就是首先升級(jí)

11、controllor card 0，然后active微碼，這時(shí)候controllor card 0會(huì)offline，主機(jī)端的SDD、MPIO等會(huì)發(fā)生切換，等controllor card 0微碼acitve并且online以后，再進(jìn)行controllor card 1的微碼升級(jí)，整個(gè)過(guò)程可能持續(xù)的時(shí)間非常長(zhǎng)，有近一個(gè)小時(shí)。non-concurrent：這種最簡(jiǎn)單，就是停機(jī)，然后兩個(gè)controllor card同時(shí)升級(jí)，如果是新設(shè)備第一次配置使用，推薦用這種，升級(jí)需要的時(shí)間比concurrent模式短很多。注意的問(wèn)題：1，升級(jí)微碼之前一定要仔細(xì)看release notes，里面有minimum

12、 requirement的需求。2，升級(jí)微碼一定是首先升級(jí)DS6000硬件的微碼，然后再升級(jí)SMC(ds6000 storage manager/dscli)。3，升級(jí)之前在dscli里用lsproblem檢查是否有open的lsproblem，如果有的話請(qǐng)聯(lián)系IBM先解決這些問(wèn)題，如果一些smtp檢測(cè)之類的可以用closeproblem關(guān)掉，這些是用來(lái)發(fā)mail檢測(cè)ds6000狀態(tài)或者進(jìn)行remote support使用的。下面是最重要的部分，邏輯配置了，詳細(xì)的邏輯概念請(qǐng)參考紅皮書sg246781中virtualization concept部分。在進(jìn)行邏輯配置之前，請(qǐng)確保license已經(jīng)

13、生效：dscli> lskey IBM.1750-xxxxxxxDate/Time: February 19, 2009 11:21:39 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxActivation Key        Capacity (TB) Storage Type=Operating Environment            10 FBarraysite：ds60

14、00里面是4塊盤組成一個(gè)arraysite，ds8000里是8塊。arraysite沒(méi)有什么實(shí)際的意義，就是幾塊盤的組合。arraysite以S1、S2、S3等表示。array：一個(gè)array有一個(gè)或者兩個(gè)arraysite組成，也就是一個(gè)array里包含4塊或者8塊盤。在array的層次上，就需要有raid了。ds6000里面支持raid5或者raid10，根據(jù)raid選擇的不同，會(huì)影響到最后存儲(chǔ)的容量，支持的raid方式：P代表parity disk  S代表spare driveRAID 5：2+P+S,3+P      

15、60; 1個(gè)array包含1個(gè)arraysite   總共4塊盤 6+P+S,7+P        1個(gè)array包含2個(gè)arraysite   總共8塊盤RAID 10：2x1+2S,2x2 or   1個(gè)array包含1個(gè)arraysite   總共4塊盤2x3+2S,2or x4   1個(gè)array包含2個(gè)arraysite   總共8塊盤array以A1、A2等表示。dscli> lsarra

16、ysiteDate/Time: February 19, 2009 11:22:12 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxarsite DA Pair dkcap (109B) State      Array=S1     0               300.0 Unassigned -S2    

17、0;0               300.0 Unassigned -S3     0               300.0 Unassigned -S4     0               300.0 Unas

18、signed -#一共四個(gè)arraysite，state是Unassigned，我們可以在其上創(chuàng)建array。dscli> mkarray -raidtype 5 -arsite S1,S2Date/Time: February 19, 2009 11:22:39 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00004I mkarray: Array A0 successfully created.dscli>mkarray -raidtype 5 -arsite S3,S4Date/Time: Febru

19、ary 19, 2009 11:22:50 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00004I mkarray: Array A1 successfully created.#創(chuàng)建兩個(gè)raid5的array（A1、A2），方式是6+P+S。dscli> lsarrayDate/Time: February 19, 2009 11:22:53 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxArray State   

20、0;  Data   RAIDtype  arsite Rank DA Pair DDMcap (109B)=A0    Unassigned Normal 5 (6+P+S) S1,S2  -    0                300.0A1    Unassigned Normal 5 (6+P+S) S3,S4  - 

21、60; 0                300.0#最終的結(jié)果。下面就是rank了，一個(gè)rank包含一個(gè)array，對(duì)open system來(lái)說(shuō)，創(chuàng)建rank的過(guò)程就是把一個(gè)array分割成很多大小都是1G的extent，多個(gè)extent可以組成extpool。在rank之上是extpool，一個(gè)extpool可以包含一個(gè)或者多個(gè)rank，但是前提是rank包含的disk、rank的類型、raid類型必須相同。#在array A0創(chuàng)建rank，類型是fb，即open system使用。dscl

22、i> mkrank -array A0 -stgtype fbDate/Time: February 19, 2009 11:23:15 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00007I mkrank: Rank R0 successfully created.dscli> lsarrayDate/Time: February 19, 2009 11:24:59 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxArray State&#

23、160;     Data   RAIDtype  arsite Rank DA Pair DDMcap (109B)=A0    Assigned   Normal 5 (6+P+S) S1,S2  R0   0                300.0A1    Unassigned Normal 5 (6+P+S) S3,

24、S4  -    0                300.0dscli> mkrank -array A1 -stgtype fbDate/Time: February 19, 2009 11:25:39 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00007I mkrank: Rank R1 successfully created.#創(chuàng)建完成兩個(gè)rank（R0、R1）d

25、scli> lsrankDate/Time: February 19, 2009 11:27:08 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxID Group State      datastate Array RAIDtype extpoolID stgtype=R0     - Unassigned Normal    A0          &

26、#160;5 -         fbR1     - Unassigned Normal    A1           5 -         fb#創(chuàng)建兩個(gè)extpool，名字分別是extpool0、extpool1，rankgrp參數(shù)指定在ds6000的那個(gè)server上運(yùn)行，類似4000里面的preferpath，紅皮書里叫Se

27、rver affinity，這樣可以分散IO提高性能。dscli> mkextpool -rankgrp 0 -stgtype fb extpool0Date/Time: February 19, 2009 11:28:39 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00000I mkextpool: Extent pool P0 successfully created.dscli> mkextpool -rankgrp 1 -stgtype fb extpool1Date/Time: February

28、 19, 2009 11:28:50 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00000I mkextpool: Extent pool P1 successfully created.dscli> lsextpoolDate/Time: February 19, 2009 11:29:18 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxName     ID stgtype rankgrp status

29、 availstor (230B) %allocated available reserved numvols=extpool0 P0 fb            0   full                 0          0         0&

30、#160;       0       0extpool1 P1 fb            1   full                 0          0       

31、;  0        0       0把rank R0放到extpool P0里面dscli> chrank -extpool P0 R0Date/Time: February 19, 2009 11:29:47 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00008I chrank: Rank R0 successfully modified.dscli> chrank -extpool P1 R1Date/Time: February 19, 2009 11:33:05 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00008I chrank: Rank R1 successfully modif