紅皮書單挑DS

1、紅皮書單挑DS6800（續(xù)）之前jxufe前輩寫過連載，沒有受過ds6800培訓,手持紅書單挑i570+ds6800，最近正好有幸接觸到DS6800，由于之前也沒弄過，也是依靠紅皮書和手冊一步一步摸索，把我的理解和一些步驟寫下來，有什么錯誤的地方請jxufe和各位前輩多多指教。硬件連接：怎么接expansion enclosure，這個問題困擾了我好久，對照著紅皮書里面的圖一根線一根線的對照，最后也沒有看明白，但是，原理很重要，看完ds6000的內(nèi)部構(gòu)架圖，怎么接一眼就明白了，嘿嘿。如果要接loop0，那就IN-OUT直接接就可以了，可以這樣理解：ds6000的server enclosure

2、里本身就已經(jīng)包含了一個在loop0的expansion enclosure，內(nèi)部已經(jīng)連接好了，因此，如果要接loop0，那就IN-OUT接起來就保證沒問題。如果要接loop1，那就得從disk contrl出來交叉接第一個expansion enclosure，剩下的expansion enclosure就是IN-OUT了。所以又可以回歸到另外一個問題，為什么ds6000可以接7個expansion enclosure，因為loop0上已經(jīng)相當于有了一個expansion enclosure，只不過在server enclosure的內(nèi)部，所以loop0上可以再接3個expansion enc

3、losure，而loop1上可以再接4個expansion enclosure。 本帖最后由 jiecho 于 2009-2-21 15:53 編輯 top.JPG (55.18 KB) 下載次數(shù):12009-2-21 15:51Ds6000構(gòu)架loop0.JPG (50.68 KB) 下載次數(shù):02009-2-21 15:51loop0接法loop1.JPG (50.94 KB) 下載次數(shù):02009-2-21 15:51loop1接法加電：接好了硬件，下面就是大事件了哦：加電開機！這個大事件也很簡單，嘿嘿?？礈誓莻€白色的小鈕，使勁捅一下，如果沒有跑偏，就會聽到呼呼的風扇聲，咱們就把這個大家

4、伙開起來了，但是，是不是要先開expansion enclosure電源啊，嘿嘿，錯了，6000好歹比4000大2000呢，怎么也得先進點，server enclosure會讓expansion enclosure自動加電的，當然你得都接上電源。配置ip：下面就是要改用來管理ds6000的ip地址了，跟4000里差不多，ds6000里默認的ip是：13 for cluster014 for cluster1找出隨機帶的串口線，小口接到ds6000上，不要接錯了，跟電話線接頭差不多的那個，串口接到筆記本上，如果筆記本沒有串口，人家IBM還送了一條一

5、頭是串口，一頭是USB的，還有一張光盤，怎么用，嘿嘿，自己琢磨吧。開個超級終端，每秒位數(shù)那里改成38400，敲兩下回車，然后就guest/guest登陸了，剩下就是改ip、密碼啥的，自己玩吧。不過還有另外的發(fā)現(xiàn)，如果是版本低一些的微碼，你會發(fā)現(xiàn)ds6000是基于power linux的，還是2.4內(nèi)核的，微碼升級到最新，這些信息就被屏蔽掉了。如果能跳出那個配置菜單，弄到個shell，沒準會有更多的發(fā)現(xiàn)呢。嘿嘿，想遠了。SMC的安裝很簡單，包含ds6000 storage manager/dscli，ds6000 storage manager只能裝在windows（2000、2003、xp）平

6、臺上，dscli可以裝在很多平臺上（windows、linux、aix等）安裝過程讓你輸密碼的時候就輸密碼，其他的就next就好。ds6000 storage manager 和ds4000 storage manager還是有很大區(qū)別的，ds4000是cs結(jié)構(gòu)的，到了ds6000就是基于was的bs結(jié)構(gòu)了，用起來復雜一些，速度慢一些，其他就沒啥缺點了，所以配置ds6000的時候用dscli比較好，簡單快捷，邏輯結(jié)構(gòu)也比較快捷，推薦。安裝萬SMC以后，就可以用admin/admin登陸了，登陸成功以后會強制修改密碼，完成以后就會登錄到SMC了，SMC的配置有了兩個模式Real-time man

7、ager/Simulated manager,顧名思義，前面就是在線配置，后面就是模擬器性質(zhì)的了。在Real-time manager模式中選擇添加storage unit，輸入ds6000的ip、S/N后，如果沒有什么異常，就可以把ds6000加入到SMC里進行管理了。在使用一些copy service的時候，可能會使用的peer smc，也就是兩個smc，這些我沒有深究了。下面的工作，我們要配置一下dscli，以便我們操作的時候更方便，我的dscli是安裝在linux里，其他的平臺應(yīng)該類似，dscli的配置文件是/opt/ibm/dscli/profile/file主要改

8、兩個地方：hmc1改成你SMC的ip，devid有三部分組成，IBM+machine type+Serial Number，我的是改成下面的：xxxxxxx代表序列號，可以在ds6000前面找到。配置完成，就可以登陸dscli管理ds6000了。# Management Console/Node IP Address(es)#   hmc1 and hmc2 are equivalent to -hmc1 and -hmc2 command options.hmc1:   13#hmc2:  #

9、 Default target Storage Image ID#    "devid" and "remotedevid" are equivalent to#    "-dev storage_image_ID" and "-remotedev storeage_image_ID" command options, respectively.devid:              &

10、#160;   IBM.1750-xxxxxxx#remotedevid:   IBM.2107-AZ12341升級微碼微碼可以從IBM網(wǎng)站上下載，會讓你注冊并且提供DS6000的S/N等，升級過程就是在SMC里選好要升級的storage unit，transfer到ds6000后再active微碼。微碼的升級文件叫SEA.jar，開始半天沒找到，以為是什么java的東西，呵呵。DS6000升級微碼有兩種模式：concurrent：也就是在線升級，所有連接主機的IO都不會中斷，但是會發(fā)生SDD、MPIO等多路徑軟件failover的切換。過程就是首先升級

11、controllor card 0，然后active微碼，這時候controllor card 0會offline，主機端的SDD、MPIO等會發(fā)生切換，等controllor card 0微碼acitve并且online以后，再進行controllor card 1的微碼升級，整個過程可能持續(xù)的時間非常長，有近一個小時。non-concurrent：這種最簡單，就是停機，然后兩個controllor card同時升級，如果是新設(shè)備第一次配置使用，推薦用這種，升級需要的時間比concurrent模式短很多。注意的問題：1，升級微碼之前一定要仔細看release notes，里面有minimum

12、 requirement的需求。2，升級微碼一定是首先升級DS6000硬件的微碼，然后再升級SMC(ds6000 storage manager/dscli)。3，升級之前在dscli里用lsproblem檢查是否有open的lsproblem，如果有的話請聯(lián)系IBM先解決這些問題，如果一些smtp檢測之類的可以用closeproblem關(guān)掉，這些是用來發(fā)mail檢測ds6000狀態(tài)或者進行remote support使用的。下面是最重要的部分，邏輯配置了，詳細的邏輯概念請參考紅皮書sg246781中virtualization concept部分。在進行邏輯配置之前，請確保license已經(jīng)

13、生效：dscli> lskey IBM.1750-xxxxxxxDate/Time: February 19, 2009 11:21:39 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxActivation Key        Capacity (TB) Storage Type=Operating Environment            10 FBarraysite：ds60

14、00里面是4塊盤組成一個arraysite，ds8000里是8塊。arraysite沒有什么實際的意義，就是幾塊盤的組合。arraysite以S1、S2、S3等表示。array：一個array有一個或者兩個arraysite組成，也就是一個array里包含4塊或者8塊盤。在array的層次上，就需要有raid了。ds6000里面支持raid5或者raid10，根據(jù)raid選擇的不同，會影響到最后存儲的容量，支持的raid方式：P代表parity disk  S代表spare driveRAID 5：2+P+S,3+P      

15、60; 1個array包含1個arraysite   總共4塊盤 6+P+S,7+P        1個array包含2個arraysite   總共8塊盤RAID 10：2x1+2S,2x2 or   1個array包含1個arraysite   總共4塊盤2x3+2S,2or x4   1個array包含2個arraysite   總共8塊盤array以A1、A2等表示。dscli> lsarra

16、ysiteDate/Time: February 19, 2009 11:22:12 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxarsite DA Pair dkcap (109B) State      Array=S1     0               300.0 Unassigned -S2    

17、0;0               300.0 Unassigned -S3     0               300.0 Unassigned -S4     0               300.0 Unas

18、signed -#一共四個arraysite，state是Unassigned，我們可以在其上創(chuàng)建array。dscli> mkarray -raidtype 5 -arsite S1,S2Date/Time: February 19, 2009 11:22:39 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00004I mkarray: Array A0 successfully created.dscli>mkarray -raidtype 5 -arsite S3,S4Date/Time: Febru

19、ary 19, 2009 11:22:50 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00004I mkarray: Array A1 successfully created.#創(chuàng)建兩個raid5的array（A1、A2），方式是6+P+S。dscli> lsarrayDate/Time: February 19, 2009 11:22:53 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxArray State   

20、0;  Data   RAIDtype  arsite Rank DA Pair DDMcap (109B)=A0    Unassigned Normal 5 (6+P+S) S1,S2  -    0                300.0A1    Unassigned Normal 5 (6+P+S) S3,S4  - 

21、60; 0                300.0#最終的結(jié)果。下面就是rank了，一個rank包含一個array，對open system來說，創(chuàng)建rank的過程就是把一個array分割成很多大小都是1G的extent，多個extent可以組成extpool。在rank之上是extpool，一個extpool可以包含一個或者多個rank，但是前提是rank包含的disk、rank的類型、raid類型必須相同。#在array A0創(chuàng)建rank，類型是fb，即open system使用。dscl

22、i> mkrank -array A0 -stgtype fbDate/Time: February 19, 2009 11:23:15 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00007I mkrank: Rank R0 successfully created.dscli> lsarrayDate/Time: February 19, 2009 11:24:59 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxArray State&#

23、160;     Data   RAIDtype  arsite Rank DA Pair DDMcap (109B)=A0    Assigned   Normal 5 (6+P+S) S1,S2  R0   0                300.0A1    Unassigned Normal 5 (6+P+S) S3,

24、S4  -    0                300.0dscli> mkrank -array A1 -stgtype fbDate/Time: February 19, 2009 11:25:39 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00007I mkrank: Rank R1 successfully created.#創(chuàng)建完成兩個rank（R0、R1）d

25、scli> lsrankDate/Time: February 19, 2009 11:27:08 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxID Group State      datastate Array RAIDtype extpoolID stgtype=R0     - Unassigned Normal    A0          &

26、#160;5 -         fbR1     - Unassigned Normal    A1           5 -         fb#創(chuàng)建兩個extpool，名字分別是extpool0、extpool1，rankgrp參數(shù)指定在ds6000的那個server上運行，類似4000里面的preferpath，紅皮書里叫Se

27、rver affinity，這樣可以分散IO提高性能。dscli> mkextpool -rankgrp 0 -stgtype fb extpool0Date/Time: February 19, 2009 11:28:39 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00000I mkextpool: Extent pool P0 successfully created.dscli> mkextpool -rankgrp 1 -stgtype fb extpool1Date/Time: February

28、 19, 2009 11:28:50 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00000I mkextpool: Extent pool P1 successfully created.dscli> lsextpoolDate/Time: February 19, 2009 11:29:18 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxName     ID stgtype rankgrp status

29、 availstor (230B) %allocated available reserved numvols=extpool0 P0 fb            0   full                 0          0         0&

30、#160;       0       0extpool1 P1 fb            1   full                 0          0       

31、;  0        0       0把rank R0放到extpool P0里面dscli> chrank -extpool P0 R0Date/Time: February 19, 2009 11:29:47 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00008I chrank: Rank R0 successfully modified.dscli> chrank -extpool P1 R1Date/Time: February 19, 2009 11:33:05 PM CST IBM DSCLI Version: 88 DS: IBM.1750-xxxxxxxCMUC00008I chrank: Rank R1 successfully modif