Otmanix' Blog » Solaris

Nachruf: Servus c0t0d0s0.org

otmanix — Sun, 24 Jul 2011 08:50:51 +0000

Der norddeutsche Blogger, Vielflieger und IT-Mensch Jörg Möllenkamp hat die digitalen Pforten seines Blogs c0t0d0s0.org laut eigenem Bekunden für immer eingestellt.

Jeder, der irgendwie mit Solaris / OpenSolaris in Berührung kam, ist wohl zwangläufig irgendwann über einen seiner Artikel gestolpert. Besonders hervorzuheben ist die Reihe “less known Solaris features”, zusammengefasst auch als PDF erhältlich. Früher bei Sun, heute bei Oracle beschäftigt, hat er über IT-Trends berichtet, eigene Einschätzungen zu aktuellen Themen abgegeben und howtos verfasst. Nicht immer frei von Scheuklappen, aber stets um Objektivität bemüht, auch mal selbstkritisch und vor allem technikbegeistert… so habe ich dieses Blog erlebt. Nach dem Wechsel von Solaris zu AIX im eigenem Haus war dies auch immer eine Informationsquelle für mich aktuelle Entwicklungen im Solaris-Umfeld nicht zu verpassen.

Ich bedaure deshalb die Einstellung dieses Blogs und sage servus!

P.S.

Servus ist universell zur Verabschiedung, aber auch zur Begrüßung verwendbar. In diesem Sinne – vielleicht sieht man sich in den Tiefen des digitalen Netzes wieder…

Uptime

otmanix — Sat, 22 Aug 2009 13:46:06 +0000

Platform Shell xxx:SC> showsc SC: SSC1 Main System Controller V2 SC Failover: enabled and active. Clock failover enabled. SC date: Sat Aug 22 15:46:57 CEST 2009 SC uptime: 884 days 23 hours 58 minutes 45 seconds ScApp version: 5.20.1 Build_03 … Continue reading →

die Sonne geht unter

otmanix — Wed, 24 Jun 2009 15:45:20 +0000

Nach einer regelrechten Preisschlacht zwischen HP, IBM und SUN hat nun IBM den Zuschlag für unser neues UNIX-Equipment bekommen. Die aktuelle wirtschaftliche Lage und das anstehende Quartalsende ermöglichten einen “Schnäppchenpreis”.

D.h. ich werde jetzt AIX-Admin mit Migrationshintergrund.

P.S.

Ich wünsche den Sunnies beim Merge mit Oracle noch alles Gute und hoffe, dass ich Solaris nicht allzu sehr hinterhertrauern muss…

flying zones für Arme – Teil 3: Liveupgrade und ZFS für zoneroot

otmanix — Sat, 11 Apr 2009 08:31:01 +0000

Wie im letzten Artikel berichtet bin ich beim Liveupgrade über ein Problem gestolpert. Ausgangssituation war eine Solaris10u6-Installation mit ZFS-root-filesystem und eine zone, die sich in einem seperaten ZFS-Pool auf shared disks befand. Das sollte die Möglichkeit der Zonenmigration auf einen anderen phys. Rechner bieten.

Das lucreate-Kommando des Solaris Liveupgrade verschluckte sich aber am seperaten ZFS-Pool. Deshalb führte ich das Patchen zunächst ohne Zone durch (detached) und machte dann einen upgrade-on-attach.

Trotzdem wollte ich nun wissen, warum das nicht komplett mit Liveupgrade klappte. Nach etwas Experimentieren stellte sich heraus, dass lucreate nicht mit dem Zonen-Root direkt im ZFS-Pool umgehen kann. Das Zonen-Root muss in einem untergeordneten Filesystem des Pools liegen.

Hier der Beweis (die Zone wurde bereits von /zone1 nach /zone1/zoneroot umgezogen):

bash-3.00# lustatus
Boot Environment           Is       Active Active    Can    Copy
Name                       Complete Now    On Reboot Delete Status
————————– ——– —— ——— —— ———-
s10x_u6wos_07b             yes      no     no        yes    -
s10u6_recpatches           yes      yes    yes       no     -

bash-3.00# lucreate -n zone_lu_test
Checking GRUB menu…
System has findroot enabled GRUB
Analyzing system configuration.
Comparing source boot environment file systems with the
file system(s) you specified for the new boot environment. Determining
which file systems should be in the new boot environment.
Updating boot environment description database on all BEs.
Updating system configuration files.
Creating configuration for boot environment .
Source boot environment is .
Creating boot environment .
Cloning file systems from boot environment to create boot environment .
Creating snapshot for on .
Creating clone for on .
Setting canmount=noauto for in zone on .
Creating snapshot for on .
Creating clone for on .
Saving existing file in top level dataset for BE as //boot/grub/menu.lst.prev.
Saving existing file in top level dataset for BE as //boot/grub/menu.lst.prev.
File propagation successful
Copied GRUB menu from PBE to ABE
No entry for BE in GRUB menu
Population of boot environment successful.
Creation of boot environment successful.

bash-3.00# zfs list
NAME                                         USED AVAIL REFER MOUNTPOINT
patches                                     2.69G 5.12G 2.69G /patches
rpool                                       6.63G 1.19G    40K /rpool
rpool/ROOT                                  5.24G 1.19G    18K legacy
rpool/ROOT/s10u6_recpatches                 1.39G 1.19G 4.48G /
rpool/ROOT/s10u6_recpatches@zone_lu_test    82.5K      - 4.48G -
rpool/ROOT/s10x_u6wos_07b                   3.86G 1.19G 3.81G /
rpool/ROOT/s10x_u6wos_07b@s10u6_recpatches 50.5M      - 3.81G -
rpool/ROOT/zone_lu_test                      163K 1.19G 4.48G /
rpool/dump                                   900M 1.19G   900M -
rpool/export                                  37K 1.19G    19K /export
rpool/export/home                             18K 1.19G    18K /export/home
rpool/swap                                   512M 1.45G   244M -
testpool                                     155M   202K   154M /testpool
zone1                                        871M 1.10G   871M /zone1
zone1/zoneroot                                18K 1.10G    18K /zone1/zoneroot
zone1/zoneroot@zone_lu_test                     0      -    18K -
zone1/zoneroot-zone_lu_test                     0 1.10G    18K /zone1/zoneroot-zone_lu_test

Nachtrag

Heute habe ich den Liveupgradetest weitergeführt und eine gehörige Überraschung erlebt.

bash-3.00# cd /patches/java_es_required_os_patches_solaris10-x86

bash-3.00# luupgrade -n zone_lu_test -s /patches/java_es_required_os_patches_solaris10-x86 -t `cat patch_order`
System has findroot enabled GRUB
No entry for BE in GRUB menu
Validating the contents of the media .
The media contains 19 software patches that can be added.
Mounting the BE .
ERROR: mount point is already in use, mounted on
ERROR: failed to create mount point for file system
ERROR: unmounting partially mounted boot environment file systems
ERROR: cannot mount boot environment by icf file
cat: cannot open /tmp/.luupgrade.tmp.12595
ERROR: Unable to mount ABE disk slices: < >.
ERROR: Unable to mount the BE .

bash-3.00# zfs list
NAME                                         USED AVAIL REFER MOUNTPOINT
patches                                     2.88G 4.93G 2.88G /patches
rpool                                       6.63G 1.18G    40K /rpool
rpool/ROOT                                  5.25G 1.18G    18K legacy
rpool/ROOT/s10u6_recpatches                 1.40G 1.18G 4.49G /
rpool/ROOT/s10u6_recpatches@zone_lu_test     103K      - 4.49G -
rpool/ROOT/s10x_u6wos_07b                   3.86G 1.18G 3.81G /
rpool/ROOT/s10x_u6wos_07b@s10u6_recpatches 50.5M      - 3.81G -
rpool/ROOT/zone_lu_test                      172K 1.18G 4.49G /a/
rpool/dump                                   900M 1.18G   900M -
rpool/export                                  37K 1.18G    19K /export
rpool/export/home                             18K 1.18G    18K /export/home
rpool/swap                                   512M 1.44G   244M -
testpool                                     155M   202K   154M /testpool
zone1                                        871M 1.10G   871M /zone1
zone1/zoneroot                                18K 1.10G    18K /zone1/zoneroot
zone1/zoneroot@zone_lu_test                     0      -    18K -
zone1/zoneroot-zone_lu_test                     0 1.10G    18K /zone1/zoneroot-zone_lu_test

So, so… Das klappt wohl nicht wie geplant.

bash-3.00# lumount zone_lu_test /b
ERROR: unable to mount zones:
cannot mount ‘/zone1/zoneroot’: directory is not empty
zoneadm: zone ‘zone1′: zone root /zone1/zoneroot/root already in use by zone zone1
zoneadm: zone ‘zone1′: call to zoneadmd failed
ERROR: unable to mount zone in
ERROR: unmounting partially mounted boot environment file systems
ERROR: No such file or directory: error unmounting
ERROR: umount: warning: rpool/ROOT/zone_lu_test not in mnttab
umount: rpool/ROOT/zone_lu_test no such file or directory
ERROR: cannot unmount
ERROR: cannot mount boot environment by name

bash-3.00# zfs list
NAME                                         USED AVAIL REFER MOUNTPOINT
patches                                     2.88G 4.93G 2.88G /patches
rpool                                       6.63G 1.18G    40K /rpool
rpool/ROOT                                  5.25G 1.18G    18K legacy
rpool/ROOT/s10u6_recpatches                 1.40G 1.18G 4.49G /
rpool/ROOT/s10u6_recpatches@zone_lu_test     116K      - 4.49G -
rpool/ROOT/s10x_u6wos_07b                   3.86G 1.18G 3.81G /
rpool/ROOT/s10x_u6wos_07b@s10u6_recpatches 50.5M      - 3.81G -
rpool/ROOT/zone_lu_test                      172K 1.18G 4.49G /b
rpool/dump                                   900M 1.18G   900M -
rpool/export                                  37K 1.18G    19K /export
rpool/export/home                             18K 1.18G    18K /export/home
rpool/swap                                   512M 1.44G   244M -
testpool                                     155M   202K   154M /testpool
zone1                                        871M 1.10G   871M /zone1
zone1/zoneroot                                18K 1.10G    18K /zone1/zoneroot
zone1/zoneroot@zone_lu_test                     0      -    18K -
zone1/zoneroot-zone_lu_test                     0 1.10G    18K /zone1/zoneroot

bash-3.00# lumount
s10u6_recpatches on /

Also irgendwie scheint der lumount mit der Zone azf seperaten ZFS-Pool nicht zurecht zu kommen.

Fazit

Gibt es also tatsächlich nur upgrade-on-attach als funktionierende Variante für Zonen auf seperaten ZFS-Pools? Hat hier jemand Anregungen oder Erfahrungen? Bitte die Kommentarfunktion nutzen…

flying zones für Arme – Teil 2: Liveupgrade mit Solaris10 Update6 und ZFS-root

otmanix — Fri, 10 Apr 2009 19:10:28 +0000

Zuletzt habe ich darüber geschrieben wie man mit Vmware Server 2.01 und Solaris10 ein sog. “flying zones”-Szenario aufbauen kann. D.h. man installiert eine Solaris-Zone auf einer shared disk und kann dann eine sog. Zonenmigration durchführen. D.h. die Zone und die Filesysteme der Zone werden am ersten Rechner exportiert und am zweiten Rechner wird das Ganze dann wieder importiert.

serielles Patching und Zonen

Ein leidiges Thema, insbesondere bei Solaris Zonen, ist das Installieren von Patches. In regelmäßigen Abständen wird man z.B. dazu angehalten das “recommended patch cluster” zu installieren. In der Regel befinden sich Kernelpatches in den Patch-Sammlungen, so dass eine Installation im Single-User-Modus erforderlich ist. Zudem müssen auch alle Zonen beim Patchen verfügbar sein (nicht detached!). Das Standard-Patchinstallationstool von Sun arbeitet dann die Patchinstallation sequentiell ab. Bei einer größeren Anzahl Zonen kann das u.U. zeitkrisch werden.

Parallel Patching, Solaris Liveupgrade, Neuerungen in Solaris10u6 10/08

Gute Neuigkeiten gibt es bei Jeff Victor. Demnächst soll also eine neue Version des patchadd-Kommandos das parallele Patchen von Zonen beherrschen. Aber auch das ist u.U. noch zu zeitinsiv. Seit längerem gibt es bereits die Software Solaris Liveupgrade, die zum Patchen oder Upgraden auf ein neues Release benutzt werden kann. Dabei wird zunächst vom laufenden Solaris eine Kopie erzeugt, ein sog. boot environment (BE), auf der dann die Patches bzw. das Upgrade angewendet werden. Das ganze passiert im normalen Onlinebetrieb. Ist die Aktionen abgeschlossen, wird vom alternativen BE gebootet. Gibt es Ärger hat man ein Fallback auf das verherige BE.

Zunächst wurde Liveupgrade “zone aware” gemacht. D.h. auch Zonen können seit einiger Zeit damit aktualisiert werden. Im Solaris10u6 kam dann die Unterstützung für ZFS-root (ZFS-Pool als Bootumgebung für das Rootfilesystem) und “upgrade-on-attach”. War eine Zone beim Upgrade detached und hat somit einen älteren Stand kann nun beim Attach die Aktualisierung nachgeholt werden.

Infos zum Thema gibt es hier:

Solaris 10 10/08 Installation Guide: Solaris Live Upgrade and Upgrade Planning

Solution 206844: Solaris[TM] Live Upgrade Software: Minimum Patch Requirements

Solaris Liveupgrade bei S10u6 im Praxiseinsatz

Ich möchte also nun die Umgebung aus dem letzten Artikel auf Basis Solaris10u6 mit Hilfe von Liveupgrade auf das aktuelle recommended patch cluster patchen.

bash-3.00# cat /etc/release
Solaris 10 10/08 s10x_u6wos_07b X86
Copyright 2008 Sun Microsystems, Inc. All Rights Reserved.
Use is subject to license terms.
Assembled 27 October 2008

# zoneadm list -cv
ID NAME             STATUS     PATH                           BRAND    IP
0 global           running    /                              native   shared
1 zone1            running    /zone1                         native   shared

# lustatus
ERROR: No boot environments are configured on this system
ERROR: cannot determine list of all boot environment names

# lucreate -n s10u6_recpatches
Checking GRUB menu…
Analyzing system configuration.
No name for current boot environment.
INFORMATION: The current boot environment is not named – assigning name .
Current boot environment is named .
Creating initial configuration for primary boot environment .
The device is not a root device for any boot environment; cannot get BE ID.
PBE configuration successful: PBE name PBE Boot Device .
Comparing source boot environment file systems with the
file system(s) you specified for the new boot environment. Determining
which file systems should be in the new boot environment.
Updating boot environment description database on all BEs.
Updating system configuration files.
Creating configuration for boot environment .
Source boot environment is .
Creating boot environment .
Cloning file systems from boot environment to create boot environment .
Creating snapshot for on .
Creating clone for on .
Setting canmount=noauto for in zone on .
Creating snapshot for on .
cannot create ‘.’: missing dataset name
Creating clone for on .
ERROR: cannot create ‘zone1-s10u6_recpatches’: missing dataset name
ERROR: Unable to clone <> on <>.
/usr/lib/lu/luclonefs: zone1@s10u6_recpatches: not found
cannot open ‘zone1-s10u6_recpatches’: dataset does not exist
cannot open ‘zone1-s10u6_recpatches’: dataset does not exist
cannot open ‘zone1-s10u6_recpatches’: dataset does not exist
Saving existing file in top level dataset for BE as //boot/grub/menu.lst.prev.
File propagation successful
Copied GRUB menu from PBE to ABE
No entry for BE in GRUB menu
Population of boot environment successful.
Creation of boot environment successful.

# lustatus
Boot Environment           Is       Active Active    Can    Copy
Name                       Complete Now    On Reboot Delete Status
————————– ——– —— ——— —— ———-
s10x_u6wos_07b             yes      yes    yes       no     -
s10u6_recpatches           yes      no     no        yes    -

bash-3.00# zpool list
NAME    SIZE   USED AVAIL    CAP HEALTH ALTROOT
rpool 7.94G 6.78G 1.15G    85% ONLINE -
zone1 1.98G   546M 1.45G    26% ONLINE -

bash-3.00# zfs list
NAME                                         USED AVAIL REFER MOUNTPOINT
rpool                                       7.07G   766M 38.5K /rpool
rpool/ROOT                                  5.68G   766M    18K legacy
rpool/ROOT/s10u6_recpatches                  156K   766M 3.77G /a/
rpool/ROOT/s10x_u6wos_07b                   5.68G   766M 5.67G /
rpool/ROOT/s10x_u6wos_07b@s10u6_recpatches 12.0M      - 3.77G -
rpool/dump                                   900M   766M   900M -
rpool/export                                  37K   766M    19K /export
rpool/export/home                             18K   766M    18K /export/home
rpool/swap                                   512M 1.03G   222M -
zone1                                        546M 1.42G   545M /zone1
zone1@s10u6_recpatches                       619K      -   545M -

bash-3.00# cd /patches/10_x86_Recommended

bash-3.00# lumount s10u6_recpatches /a
ERROR: unable to mount zones:
/a/zone1 must not be group readable.
/a/zone1 must not be group executable.
/a/zone1 must not be world readable.
/a/zone1 must not be world executable.
could not verify zonepath /a/zone1 because of the above errors.
zoneadm: zone zone1 failed to verify
ERROR: unable to mount zone in
ERROR: unmounting partially mounted boot environment file systems
ERROR: No such file or directory: error unmounting
ERROR: umount: warning: rpool/ROOT/s10u6_recpatches not in mnttab
umount: rpool/ROOT/s10u6_recpatches no such file or directory
ERROR: cannot unmount
ERROR: cannot mount boot environment by name

bash-3.00# lustatus
Boot Environment           Is       Active Active    Can    Copy
Name                       Complete Now    On Reboot Delete Status
————————– ——– —— ——— —— ———-
s10x_u6wos_07b             yes      yes    yes       no     -
s10u6_recpatches           yes      no     no        yes    -

bash-3.00# ludelete s10u6_recpatches
System has findroot enabled GRUB
Checking if last BE on any disk…
ERROR: unable to mount zones:
/.alt.s10u6_recpatches/zone1 must not be group readable.
/.alt.s10u6_recpatches/zone1 must not be group executable.
/.alt.s10u6_recpatches/zone1 must not be world readable.
/.alt.s10u6_recpatches/zone1 must not be world executable.
could not verify zonepath /.alt.s10u6_recpatches/zone1 because of the above errors.
zoneadm: zone zone1 failed to verify
ERROR: unable to mount zone in
ERROR: unmounting partially mounted boot environment file systems
ERROR: No such file or directory: error unmounting
ERROR: umount: warning: rpool/ROOT/s10u6_recpatches not in mnttab
umount: rpool/ROOT/s10u6_recpatches no such file or directory
ERROR: cannot unmount
ERROR: cannot mount boot environment by name
ERROR: Failed to mount BE .
ERROR: Failed to mount BE .
cat: cannot open /tmp/.lulib.luclb.dsk.5254.s10u6_recpatches
ERROR: This boot environment is the last BE on the above disk.
ERROR: Deleting this BE may make it impossible to boot from this disk.
ERROR: However you may still boot solaris if you have BE(s) on other disks.
ERROR: You *may* have to change boot-device order in the BIOS to accomplish this.
ERROR: If you still want to delete this BE , please use the force option (-f).
Unable to delete boot environment.

bash-3.00# ludelete -f s10u6_recpatches
System has findroot enabled GRUB
No entry for BE in GRUB menu
Determining the devices to be marked free.
Updating boot environment configuration database.
Updating boot environment description database on all BEs.
Updating all boot environment configuration databases.
Boot environment deleted.

bash-3.00# lustatus
Boot Environment           Is       Active Active    Can    Copy
Name                       Complete Now    On Reboot Delete Status
————————– ——– —— ——— —— ———-
s10x_u6wos_07b             yes      yes    yes       no     -

bash-3.00# zfs list
NAME                        USED AVAIL REFER MOUNTPOINT
rpool                      7.11G   715M 38.5K /rpool
rpool/ROOT                 5.73G   715M    18K legacy
rpool/ROOT/s10x_u6wos_07b 5.73G   715M 5.73G /
rpool/dump                  900M   715M   900M -
rpool/export                 37K   715M    19K /export
rpool/export/home            18K   715M    18K /export/home
rpool/swap                  512M   984M   243M -
zone1                       546M 1.42G   545M /zone1
zone1@s10u6_recpatches      619K      -   545M -

bash-3.00# zfs destroy zone1@s10u6_recpatches

Na bravo! Das war ja der totale Reinfall…

Scheinbar kommt Liveupgrade nicht damit klar, dass die Zone in einem seperaten ZFS-Pool liegt. Das ist aber für die Zonenmigration unabdingbar.

neuer Versuch – Liveupgrade ohne Zonen, nur für ZFS-root

Dazu also erst einmal die Zone1 verschwinden lassen…

bash-3.00# zoneadm -z zone1 detach

bash-3.00# metaset -s zone1data -r

bash-3.00# metaset
Set name = zone1data, Set number = 1
Host                Owner
horst1
horst2
Drive    Dbase
c2t1d0   Yes
c3t1d0   Yes

bash-3.00# zpool export zone1

bash-3.00# zpool list
NAME      SIZE   USED AVAIL    CAP HEALTH ALTROOT
patches 7.94G 2.69G 5.25G    33% ONLINE -
rpool    7.94G 4.93G 3.01G    62% ONLINE -

bash-3.00# lucreate -n s10u6_recpatches
Checking GRUB menu…
System has findroot enabled GRUB
Analyzing system configuration.
Comparing source boot environment file systems with the
file system(s) you specified for the new boot environment. Determining
which file systems should be in the new boot environment.
Updating boot environment description database on all BEs.
Updating system configuration files.
Creating configuration for boot environment .
Source boot environment is .
Creating boot environment .
Cloning file systems from boot environment to create boot environment .
Creating snapshot for on .
Creating clone for on .
Setting canmount=noauto for in zone on .
Saving existing file in top level dataset for BE as //boot/grub/menu.lst.prev.
File propagation successful
Copied GRUB menu from PBE to ABE
No entry for BE in GRUB menu
Population of boot environment successful.
Creation of boot environment successful.

Na gut, das Erstellen des alternate BE hat also soweit geklappt. Nun zum Patchen..

bash-3.00# cd /patches/10_x86_Recommended/

bash-3.00# luupgrade -n s10u6_recpatches -s /patches/10_x86_Recommended -t `cat patch_order`
System has findroot enabled GRUB
No entry for BE in GRUB menu
Validating the contents of the media .
The media contains 152 software patches that can be added.
Mounting the BE .
Adding patches to the BE .
Validating patches…
Loading patches installed on the system…
Done!
Loading patches requested to install.
Version of package SUNWmctag from directory SUNWmctag in patch 121212-02 differs from the package installed on the system.
Version of package SUNWmcosx from directory SUNWmcosx in patch 121212-02 differs from the package installed on the system.
Version of package SUNWmcon from directory SUNWmcon in patch 121212-02 differs from the package installed on the system.
Version of package SUNWmcos from directory SUNWmcos in patch 121212-02 differs from the package installed on the system.
Done!
The following requested patches have packages not installed on the system
Package SUNWgzipS from directory SUNWgzipS in patch 120720-02 is not installed on the system. Changes for package SUNWgzipS will not be applied to the system.
Package SUNWbzipS from directory SUNWbzipS in patch 126869-03 is not installed on the system. Changes for package SUNWbzipS will not be applied to the system.
Package SUNWbreg from directory SUNWbreg in patch 121454-02 is not installed on the system. Changes for package SUNWbreg will not be applied to the system.
Package SUNWdc from directory SUNWdc in patch 121454-02 is not installed on the system. Changes for package SUNWdc will not be applied to the system.
Package SUNWbreg from directory SUNWbreg in patch 121454-02 is not installed on the system. Changes for package SUNWbreg will not be applied to the system.
Package SUNWdc from directory SUNWdc in patch 121454-02 is not installed on the system. Changes for package SUNWdc will not be applied to the system.
Package SUNWsmaS from directory SUNWsmaS in patch 120273-25 is not installed on the system. Changes for package SUNWsmaS will not be applied to the system.
Package SUNWsmbaS from directory SUNWsmbaS in patch 119758-14 is not installed on the system. Changes for package SUNWsmbaS will not be applied to the system.
Package SUNWpostgr-jdbcS from directory SUNWpostgr-jdbcS in patch 123591-09 is not installed on the system. Changes for package SUNWpostgr-jdbcS will not be applied to the system.
Package SUNWpostgrS from directory SUNWpostgrS in patch 123591-09 is not installed on the system. Changes for package SUNWpostgrS will not be applied to the system.
Package SUNWpostgr-tclS from directory SUNWpostgr-tclS in patch 123591-09 is not installed on the system. Changes for package SUNWpostgr-tclS will not be applied to the system.
Package SUNWkxplt from directory SUNWkxplt in patch 120415-23 is not installed on the system. Changes for package SUNWkxplt will not be applied to the system.
Package SUNWinleu from directory SUNWinleu in patch 120415-23 is not installed on the system. Changes for package SUNWinleu will not be applied to the system.
Package SUNWhkleu from directory SUNWhkleu in patch 120415-23 is not installed on the system. Changes for package SUNWhkleu will not be applied to the system.
Package SUNWcxplt from directory SUNWcxplt in patch 120415-23 is not installed on the system. Changes for package SUNWcxplt will not be applied to the system.
Package SUNWhleu from directory SUNWhleu in patch 120415-23 is not installed on the system. Changes for package SUNWhleu will not be applied to the system.
Package SUNWhleu2 from directory SUNWhleu2 in patch 120415-23 is not installed on the system. Changes for package SUNWhleu2 will not be applied to the system.
Package SUNWkleu from directory SUNWkleu in patch 120415-23 is not installed on the system. Changes for package SUNWkleu will not be applied to the system.
Package SUNWtleu from directory SUNWtleu in patch 120415-23 is not installed on the system. Changes for package SUNWtleu will not be applied to the system.
Package SUNWhkplt from directory SUNWhkplt in patch 120415-23 is not installed on the system. Changes for package SUNWhkplt will not be applied to the system.
Package SUNWinplt from directory SUNWinplt in patch 120415-23 is not installed on the system. Changes for package SUNWinplt will not be applied to the system.
Package SUNWtxplt from directory SUNWtxplt in patch 120415-23 is not installed on the system. Changes for package SUNWtxplt will not be applied to the system.
Package SUNWhxplt from directory SUNWhxplt in patch 120415-23 is not installed on the system. Changes for package SUNWhxplt will not be applied to the system.
Package SUNWsunpinyin from directory SUNWsunpinyin in patch 120415-23 is not installed on the system. Changes for package SUNWsunpinyin will not be applied to the system.
Package SUNWsibi from directory SUNWsibi in patch 119082-25 is not installed on the system. Changes for package SUNWsibi will not be applied to the system.
Package SUNWapchS from directory SUNWapchS in patch 122912-15 is not installed on the system. Changes for package SUNWapchS will not be applied to the system.
Package SUNWgrubS from directory SUNWgrubS in patch 138884-01 is not installed on the system. Changes for package SUNWgrubS will not be applied to the system.
Package SUNWsibi from directory SUNWsibi in patch 124629-10 is not installed on the system. Changes for package SUNWsibi will not be applied to the system.
Package SUNWsibi from directory SUNWsibi in patch 119253-31 is not installed on the system. Changes for package SUNWsibi will not be applied to the system.
Package SUNWTkS from directory SUNWTkS in patch 137872-02 is not installed on the system. Changes for package SUNWTkS will not be applied to the system.
Package SUNWipmiS from directory SUNWipmiS in patch 119765-06 is not installed on the system. Changes for package SUNWipmiS will not be applied to the system.
Package SUNWj5jmp from directory SUNWj5jmp in patch 118668-19 is not installed on the system. Changes for package SUNWj5jmp will not be applied to the system.
Package SUNWpngS from directory SUNWpngS in patch 137081-01 is not installed on the system. Changes for package SUNWpngS will not be applied to the system.
Package SUNWsibi from directory SUNWsibi in patch 124631-24 is not installed on the system. Changes for package SUNWsibi will not be applied to the system.
Package SUNWgtarS from directory SUNWgtarS in patch 139100-01 is not installed on the system. Changes for package SUNWgtarS will not be applied to the system.
Package SUNWbindS from directory SUNWbindS in patch 119784-10 is not installed on the system. Changes for package SUNWbindS will not be applied to the system.
Package SUNWzebraS from directory SUNWzebraS in patch 126207-04 is not installed on the system. Changes for package SUNWzebraS will not be applied to the system.
Package SUNWcleu2 from directory SUNWcleu2 in patch 120413-09 is not installed on the system. Changes for package SUNWcleu2 will not be applied to the system.
Package SUNWmysqlS from directory SUNWmysqlS in patch 120293-02 is not installed on the system. Changes for package SUNWmysqlS will not be applied to the system.
Package SUNWimagickS from directory SUNWimagickS in patch 136883-02 is not installed on the system. Changes for package SUNWimagickS will not be applied to the system.
Package SUNWapch2S from directory SUNWapch2S in patch 120544-14 is not installed on the system. Changes for package SUNWapch2S will not be applied to the system.
Package SUNWlxmlS from directory SUNWlxmlS in patch 125732-04 is not installed on the system. Changes for package SUNWlxmlS will not be applied to the system.
The following requested patches are already installed on the system
Requested patch 120720-02 is already installed on the system.
Requested patch 121297-01 is already installed on the system.
Requested patch 122035-05 is already installed on the system.
Requested patch 118344-14 is already installed on the system.
Requested patch 118919-21 is already installed on the system.
Requested patch 120901-03 is already installed on the system.
Requested patch 121334-04 is already installed on the system.
Requested patch 123840-04 is already installed on the system.
Requested patch 127756-01 is already installed on the system.
Requested patch 117435-02 is already installed on the system.
Requested patch 121264-01 is already installed on the system.
Requested patch 119575-02 is already installed on the system.
Requested patch 113000-07 is already installed on the system.
Requested patch 138218-01 is already installed on the system.
Requested patch 121454-02 is already installed on the system.
Requested patch 121454-02 is already installed on the system.
Requested patch 118855-36 is already installed on the system.
Requested patch 126424-03 is already installed on the system.
Requested patch 122641-06 is already installed on the system.
Requested patch 125548-02 is already installed on the system.
Requested patch 125504-02 is already installed on the system.
Requested patch 120012-14 is already installed on the system.
Requested patch 127128-11 is already installed on the system.
Requested patch 119318-01 is already installed on the system.
Requested patch 123612-05 is already installed on the system.
Requested patch 123591-09 is already installed on the system.
Requested patch 128412-01 is already installed on the system.
Requested patch 125542-03 is already installed on the system.
Requested patch 121976-01 is already installed on the system.
Requested patch 138182-01 is already installed on the system.
Requested patch 120202-06 is already installed on the system.
Requested patch 119082-25 is already installed on the system.
Requested patch 138884-01 is already installed on the system.
Requested patch 137138-09 is already installed on the system.
Requested patch 124445-01 is already installed on the system.
Requested patch 126541-02 is already installed on the system.
Requested patch 136999-05 is already installed on the system.
Requested patch 137872-02 is already installed on the system.
Requested patch 138276-01 is already installed on the system.
Requested patch 119765-06 is already installed on the system.
Requested patch 138362-01 is already installed on the system.
Requested patch 119811-05 is already installed on the system.
Requested patch 120330-02 is already installed on the system.
Requested patch 138323-02 is already installed on the system.
Requested patch 128001-01 is already installed on the system.
Requested patch 124189-02 is already installed on the system.
Requested patch 138270-02 is already installed on the system.
Requested patch 119131-33 is already installed on the system.
Requested patch 119901-06 is already installed on the system.
Requested patch 137081-01 is already installed on the system.
Requested patch 123614-01 is already installed on the system.
Requested patch 138624-02 is already installed on the system.
Requested patch 118960-03 is already installed on the system.
Requested patch 128329-01 is already installed on the system.
Requested patch 136840-01 is already installed on the system.
Requested patch 121013-02 is already installed on the system.
Requested patch 119116-34 is already installed on the system.
Requested patch 124458-01 is already installed on the system.
Requested patch 124998-01 is already installed on the system.
Requested patch 138877-01 is already installed on the system.
Requested patch 126207-04 is already installed on the system.
Requested patch 120236-01 is already installed on the system.
Requested patch 138266-01 is already installed on the system.
Requested patch 138105-01 is already installed on the system.
Requested patch 127854-02 is already installed on the system.
Requested patch 138374-02 is already installed on the system.
Requested patch 137033-01 is already installed on the system.
Requested patch 119813-08 is already installed on the system.
Requested patch 120293-02 is already installed on the system.
Requested patch 123939-01 is already installed on the system.
Requested patch 137094-01 is already installed on the system.
Requested patch 121096-02 is already installed on the system.
Requested patch 124939-03 is already installed on the system.
Requested patch 119987-03 is already installed on the system.
Requested patch 137322-01 is already installed on the system.
Requested patch 119904-02 is already installed on the system.
Requested patch 120831-06 is already installed on the system.
Requested patch 126441-01 is already installed on the system.
Requested patch 125280-05 is already installed on the system.
The following requested patches do not update any packages installed on the system
No Packages from patch 121212-02 are installed on the system.
Checking patches that you specified for installation.
Done!
The following requested patches will not be installed because
they have been made obsolete by other patches already
installed on the system or by patches you have specified for installation.
0 All packages from patch 118844-20 are patched by higher revision patches.
1 All packages from patch 122661-08 are patched by higher revision patches.
2 All packages from patch 124205-05 are patched by higher revision patches.
The following requested patches will not be installed because
the packages they patch are not installed on this system.
0 No Packages from patch 120415-23 are installed on the system.
1 No Packages from patch 120413-09 are installed on the system.
Approved patches will be installed in this order:
126869-03 126420-02 119255-65 126539-02 121119-15 120273-25 119758-14 126366-14
120740-05 119060-45 120411-30 122912-15 141009-01 125556-02 137122-06 138628-07
124629-10 119253-31 138372-06 125540-06 137128-05 119214-18 140775-03 123896-10
118668-19 139499-04 121309-16 119314-26 122213-32 139463-02 125185-11 121395-03
138857-02 118669-19 140384-01 120200-15 124631-24 138264-03 139100-01 138286-02
119784-10 119091-32 138224-03 138882-02 139482-01 138242-05 140145-01 119247-35
120223-31 139580-02 125165-13 125953-18 139501-02 139561-02 125333-05 139484-05
141015-01 124394-09 140456-01 136883-02 120095-22 125720-28 120544-14 125732-04
126364-07 138254-02 138867-02 138889-08
Checking installed patches…
Verifying sufficient filesystem capacity (dry run method)…
Installing patch packages…
Patch 126869-03 has been successfully installed.
See /a/var/sadm/patch/126869-03/log for details
Patch packages installed:
SUNWbzip
SUNWsfman
Checking installed patches…
Verifying sufficient filesystem capacity (dry run method)…
Installing patch packages…
Patch 126420-02 has been successfully installed.
See /a/var/sadm/patch/126420-02/log for details
Patch packages installed:
SUNWcsr
SUNWcsu
…
Patch 138889-08 has been successfully installed.
See /a/var/sadm/patch/138889-08/log for details
Patch packages installed:
SUNWcakr
SUNWckr
SUNWcpcu
SUNWcsd
SUNWcsl
SUNWcslr
SUNWcsr
SUNWcsu
SUNWdtrc
SUNWesu
SUNWhea
SUNWib
SUNWibsdpib
SUNWipfh
SUNWipfu
SUNWmdb
SUNWmdbr
SUNWnxge
SUNWos86r
SUNWrds
SUNWroute
SUNWtavor
Unmounting the BE .
The patch add to the BE completed.

Nach dem erfolgreichen Patchen nun also vom neuen BE starten…

bash-3.00# luactivate s10u6_recpatches
System has findroot enabled GRUB
Generating boot-sign, partition and slice information for PBE
Saving existing file in top level dataset for BE as //etc/bootsign.prev.
A Live Upgrade Sync operation will be performed on startup of boot environment .

Generating boot-sign for ABE
Saving existing file in top level dataset for BE as //etc/bootsign.prev.
Generating partition and slice information for ABE
Copied boot menu from top level dataset.
Generating multiboot menu entries for PBE.
Generating multiboot menu entries for ABE.
Disabling splashimage
Re-enabling splashimage
No more bootadm entries. Deletion of bootadm entries is complete.
GRUB menu default setting is unaffected
Done eliding bootadm entries.

**********************************************************************

The target boot environment has been activated. It will be used when you
reboot. NOTE: You MUST NOT USE the reboot, halt, or uadmin commands. You
MUST USE either the init or the shutdown command when you reboot. If you
do not use either init or shutdown, the system will not boot using the
target BE.

**********************************************************************

In case of a failure while booting to the target BE, the following process
needs to be followed to fallback to the currently working boot environment:

1. Boot from Solaris failsafe or boot in single user mode from the Solaris
Install CD or Network.

2. Mount the Parent boot environment root slice to some directory (like
/mnt). You can use the following command to mount:

mount -Fzfs /dev/dsk/c1t0d0s0 /mnt

3. Run utility with out any arguments from the Parent boot
environment root slice, as shown below:

/mnt/sbin/luactivate

4. luactivate, activates the previous working boot environment and
indicates the result.

5. Exit Single User mode and reboot the machine.

**********************************************************************

Modifying boot archive service
Propagating findroot GRUB for menu conversion.
File propagation successful
File propagation successful
File propagation successful
File propagation successful
Deleting stale GRUB loader from all BEs.
File deletion successful
File deletion successful
File deletion successful
Activation of boot environment successful.

bash-3.00# lustatus
Boot Environment           Is       Active Active    Can    Copy
Name                       Complete Now    On Reboot Delete Status
————————– ——– —— ——— —— ———-
s10x_u6wos_07b             yes      yes    no        no     -
s10u6_recpatches           yes      no     yes       no     -

bash-3.00# init 6
updating /platform/i86pc/boot_archive
…

Achtung: Es muss zwingend mit init oder shutdown neu gestartet werden!

bash-3.00# zoneadm list -cv
ID NAME             STATUS     PATH                           BRAND    IP
0 global           running    /                              native   shared
- zone1            configured /zone1                         native   shared

bash-3.00# zpool import zone1

bash-3.00# zpool list
NAME      SIZE   USED AVAIL    CAP HEALTH ALTROOT
patches 7.94G 2.69G 5.25G    33% ONLINE -
rpool    7.94G 6.36G 1.58G    80% ONLINE -
zone1    1.98G   547M 1.45G    26% ONLINE -

bash-3.00# metaset -s zone1data -t

bash-3.00# metaset
Set name = zone1data, Set number = 1
Host                Owner
horst1
horst2             Yes
Drive    Dbase
c2t1d0   Yes
c3t1d0   Yes

Patchen der Zone mit ugrade-on-attach

bash-3.00# zoneadm -z zone1 attach
These patches installed on the source system are inconsistent with this system:
118668: version mismatch
(17) (19)
118669: version mismatch
(17) (19)
119060: version mismatch
(44) (45)
119091: version mismatch
(31) (32)
119214: version mismatch
(17) (18)
119247: version mismatch
(34) (35)
119253: version mismatch
(29) (31)
119255: version mismatch
(59) (65)
119314: version mismatch
(24) (26)
119758: version mismatch
(12) (14)
119784: version mismatch
(07) (10)
120095: version mismatch
(21) (22)
120200: version mismatch
(14) (15)
120223: version mismatch
(29) (31)
120273: version mismatch
(23) (25)
120411: version mismatch
(29) (30)
120544: version mismatch
(11) (14)
120740: version mismatch
(04) (05)
121119: version mismatch
(13) (15)
121309: version mismatch
(14) (16)
121395: version mismatch
(01) (03)
122213: version mismatch
(28) (32)
122912: version mismatch
(13) (15)
123896: version mismatch
(05) (10)
124394: version mismatch
(08) (09)
124629: version mismatch
(09) (10)
124631: version mismatch
(19) (24)
125165: version mismatch
(12) (13)
125185: version mismatch
(08) (11)
125333: version mismatch
(03) (05)
125540: version mismatch
(04) (06)
125720: version mismatch
(24) (28)
125732: version mismatch
(02) (04)
125953: version mismatch
(17) (18)
126364: version mismatch
(06) (07)
126366: version mismatch
(12) (14)
126420: version mismatch
(01) (02)
126539: version mismatch
(01) (02)
126869: version mismatch
(02) (03)
136883: version mismatch
(01) (02)
137122: version mismatch
(03) (06)
137128: version mismatch
(02) (05)
138224: version mismatch
(02) (03)
138242: version mismatch
(01) (05)
138254: version mismatch
(01) (02)
138264: version mismatch
(02) (03)
138286: version mismatch
(01) (02)
138372: version mismatch
(02) (06)
138628: version mismatch
(02) (07)
138857: version mismatch
(01) (02)
138867: version mismatch
(01) (02)
138882: version mismatch
(01) (02)
These patches installed on this system were not installed on the source system:
125556-02
138889-08
139100-01
139463-02
139482-01
139484-05
139499-04
139501-02
139561-02
139580-02
140145-01
140384-01
140456-01
140775-03
141009-01
141015-01

bash-3.00# zoneadm -z zone1 attach -u
Getting the list of files to remove
Removing 1209 files
Remove 198 of 198 packages
Installing 1315 files
Add 198 of 198 packages
Updating editable files
The file within the zone contains a log of the zone update.

bash-3.00# zoneadm list -cv
ID NAME             STATUS     PATH                           BRAND    IP
0 global           running    /                              native   shared
- zone1            installed /zone1                         native   shared

bash-3.00# zoneadm -z zone1 boot

bash-3.00# zlogin zone1
[Connected to zone 'zone1' pts/4]
Last login: Thu Apr 9 09:06:23 on pts/5
Sun Microsystems Inc. SunOS 5.10 Generic January 2005
#
# exit
[Connection to zone 'zone1' pts/4 closed]

Upgrade-on-attach zum Patchen der Zone hat hier wunder geklappt.

weiterer Test nach Einspielen des recommended patch clusters

Nachdem nun Solaris10u6 mit neuestem recommended patch cluster installiert ist möchte ich das Liveupgrade inclusive Zone nochmals testen.

bash-3.00# zoneadm list -cv
ID NAME             STATUS     PATH                           BRAND    IP
0 global           running    /                              native   shared
2 zone1            running    /zone1                         native   shared

bash-3.00# lucreate -n s10u6_zonetest
Checking GRUB menu…
System has findroot enabled GRUB
Analyzing system configuration.
Comparing source boot environment file systems with the
file system(s) you specified for the new boot environment. Determining
which file systems should be in the new boot environment.
Updating boot environment description database on all BEs.
Updating system configuration files.
Creating configuration for boot environment .
Source boot environment is .
Creating boot environment .
Cloning file systems from boot environment to create boot environment .
Creating snapshot for on .
Creating clone for on .
Setting canmount=noauto for in zone on .
Creating snapshot for on .
cannot create ‘.’: missing dataset name
Creating clone for on .
ERROR: cannot create ‘zone1-s10u6_zonetest’: missing dataset name
ERROR: Unable to clone <> on <>.
/usr/lib/lu/luclonefs: zone1@s10u6_zonetest: not found
cannot open ‘zone1-s10u6_zonetest’: dataset does not exist
cannot open ‘zone1-s10u6_zonetest’: dataset does not exist
cannot open ‘zone1-s10u6_zonetest’: dataset does not exist
Saving existing file in top level dataset for BE as //boot/grub/menu.lst.prev.
Saving existing file in top level dataset for BE as //boot/grub/menu.lst.prev.
File propagation successful
Copied GRUB menu from PBE to ABE
No entry for BE in GRUB menu
Population of boot environment successful.
Creation of boot environment successful.
bash-3.00#

bash-3.00# ludelete -n s10u6_zonetest -f
System has findroot enabled GRUB
No entry for BE in GRUB menu
Determining the devices to be marked free.
Updating boot environment configuration database.
Updating compare databases on boot environment .
Updating boot environment description database on all BEs.
Updating all boot environment configuration databases.
Boot environment deleted.

bash-3.00# zfs destroy zone1@s10u6_zonetest

Tja, auch nach Installieren der aktuell empfohlen Patches klappt das nicht wie gewünscht.

Hat jemand zu diesem Thema eigene Erfahrungen oder Workarounds? Auf Kommentare oder Tips würde ich mich freuen…

flying zones für Arme im Eigenbau mit Solaris10 und Vmware Server 2

otmanix — Sun, 05 Apr 2009 20:33:08 +0000

Solaris Zones / Container

Sun Microsystems hat Solaris10 eine interessante OS-Virtualisierungslösung kostenlos beigelegt – Solaris Zones, ähnlich zu BSD jails. Im Gegensatz zu XVM (Xen im Solaris-Kernel für X86) oder Logical Domains (Hypervisor für CMT/Niagara) gibt es bei Zones kaum Overhead durch die Virtualisierung. Zudem steht es sowohl im Sparc- als auch im X86-Umfeld zur Verfügung. In einer Zone werden Resourcen der sog. “globalen Zone” genutzt. Es gibt aber auch z.T. die Möglichkeit dediziert Resourcen zuzuweisen, z.B. einen eigenen IP-Stack. Den OS-Kernel hingegen gibt es nur einmal. Die Kombination von OS-Virtualisierung mit Zones und dem Resourcemanagement wird als Container bezeichnet.

Container werden i.d.R. genutzt um Applikationen oder Applikationsschichten voneinander abzuschotten und die Resourcenverteilung zu steuern. So kann ein Container ein SAP ERP Entwicklungs- und Testsystem beinhalten und ein weiterer das Produktionssystem. Die Systeme haben je eine eigene Netzwerkkonfiguration und können weiche oder harten Grenzen für CPU-Auslastung und Speicherverbrauch besitzen.

flying zones

Heruntergefahrene Zonen kann man klonen oder exportieren. Kopiert man die Filesysteme der Zone auf einen anderen Rechner kann man sie dort importieren und die Zone wieder in Betrieb nehmen. Legt man die Filesysteme auf shared storage kann man durch Zuweisen der relevanten Disks auf allen relevanten Rechnern die Filesysteme je nach Bedarf am passenden System in Betrieb nehmen. Danach kann auch die Zone dort wieder in Betrieb genommen werden. Das Verfahren nennt man Zonenmigration. Das wird genutzt um bei Rechnerausfällen Zonen umzuziehen oder um eine bessere Auslastung der vorhandenen Systeme zu erzielen. Als Basis für den Umzug der Filesysteme kann sowohl ZFS als auch UFS auf shared disk sets genutzt werden.

Möchte man den Umzug von Zonen auf andere Rechner automatisieren, die Verfügbarkeit der Zonen/Rechner überwachen lassen und automische Reaktionen in Problemfällen haben, dann kann man den Sun Cluster 3.2 mit dem Zonenagent einsetzen.

Sun verkauft die Implementierung einer solchen Gesamtlösung unter dem Titel “flying zones“. Dabei wird noch das Monitoringtool N1AA Analyzer beigelegt. Dort kann man z.B. den Resourcenverbrauch von best. Zonen aufsummieren lassen und prüfen, ob das denn so zusammen auf einer best. Hardware laufen würde. Außerdem wird einem noch das Softwareinstallationssystem N1AA ans Herz gelegt.

flying zones für Arme im Eigenbau

Im kostenlosen Vmware Server 2.01 auf meinem PC habe ich eine Testumgebung aufgebaut um die Grundzüge von flying zones nachzustellen und zu testen. Wichtig war mir eine realistische Umgebung wie im Betriebsalltag, deshalb bin ich von 2 virt. Rechenzentren ausgegangen. In jedem virt. RZ befindet sich ein Solaris-Host und ein Storagesystem. Auf das Storagesystem jedes RZs kann jeder Server zugreifen. Die Platten im Storagesystem sind als shared disks konfiguriert. Es soll mit host based mirroring erreicht werden, dass trotz Ausfall eines kompletten Storagesystems den Betrieb der Zone nicht gestört wird, egal auf welchem host die Zone aktiv läuft. Auf den Einsatz kostenpflichtiger Clustersoftware zur Automatisierung verzichte ich in diesem Test.

In der Testumgebung gibt es nur eine Zone. In der Realität wären das natürlich mehr.

Auf jedem Solaris-Host ist Solaris10u6 (10/08) installiert. Dabei wurde ein lokale Platte genutzt um darauf das OS zu installieren. Dabei wurde bereits die neue Funktionalität genutzt ZFS als Rootfilesystem einzusetzen. Eine weitere kleine lokale Platte steht darüber hinaus zur Verfügung. Auf die Grundinstallation der Solaris-hosts gehe ich hier nicht näher ein. Die shared disks sind ebenfalls bereits den hosts bereitgestellt.

Testumgebung auf Vmware Server 2.01

Am Vmware Server ist eigentlich nur die Konfiguration der shared disks interessant. Die Disks werden zunächst in einer virt. Maschine erstellt, dann deren vmx-Dateien angepasst und die relevanten Teile der vmx-Datei in die des anderen hosts übertragen.

Benötigt werden also folgende Platten:

lokale disks pro System:

1 Disk mit >= 5GB für den ZFS-RootPool
1 Disk >= 20MB für die lokale State Database

shared disks (insgesamt):

2 shared Disks (preaallocated) für Zonen-Root (ZFS) 2GB
2 shared Disks (preaallocated) mit Zonen-Daten (UFS) 50MB

relevanter Teil der vmx-Dateien:

scsi1.present = "TRUE"
scsi1.sharedBus = "virtual"
scsi1.virtualDev = "lsilogic"

scsi1:0.present = "TRUE"
scsi1:0.fileName = "D:\Virtual Machines\ext1disk1.vmdk"
scsi1:0.writeThrough = "TRUE"
scsi1:0.mode = "independent-persistent"

scsi1:1.present = "TRUE"
scsi1:1.fileName = "D:\Virtual Machines\ext1disk2.vmdk"
scsi1:1.writeThrough = "TRUE"
scsi1:1.mode = "independent-persistent"

scsi2.present = "TRUE"
scsi2.sharedBus = "virtual"
scsi2.virtualDev = "lsilogic"

scsi2:0.present = "TRUE"
scsi2:0.fileName = "D:\Virtual Machines\ext2disk1.vmdk"
scsi2:0.writeThrough = "TRUE"
scsi2:0.mode = "independent-persistent"

scsi2:1.present = "TRUE"
scsi2:1.fileName = "D:\Virtual Machines\ext2disk2.vmdk"
scsi2:1.writeThrough = "TRUE"
scsi2:1.mode = "independent-persistent"

disk.locking = "FALSE"

Hier ein Blick auf das System nach der Solaris-Installation:

bash-3.00# zpool list
NAME    SIZE   USED  AVAIL    CAP  HEALTH  ALTROOT
rpool  7.94G  4.65G  3.28G    58%  ONLINE  -

bash-3.00# zpool status rpool
pool: rpool
state: ONLINE
scrub: none requested
config:
NAME        STATE     READ WRITE CKSUM
rpool       ONLINE       0     0     0
c1t0d0s0  ONLINE       0     0     0
errors: No known data errors

bash-3.00# zfs list
NAME                        USED  AVAIL  REFER  MOUNTPOINT
rpool                      5.15G  2.67G  35.5K  /rpool
rpool/ROOT                 3.77G  2.67G    18K  legacy
rpool/ROOT/s10x_u6wos_07b  3.77G  2.67G  3.77G  /
rpool/dump                  900M  2.67G   900M  -
rpool/export                 37K  2.67G    19K  /export
rpool/export/home            18K  2.67G    18K  /export/home
rpool/swap                  512M  3.16G  5.54M  -

bash-3.00# df -h
Filesystem             size   used  avail capacity  Mounted on
rpool/ROOT/s10x_u6wos_07b 7.8G   3.8G   2.7G    59%    /
/devices                 0K     0K     0K     0%    /devices
ctfs                     0K     0K     0K     0%    /system/contract
proc                     0K     0K     0K     0%    /proc
mnttab                   0K     0K     0K     0%    /etc/mnttab
swap                   532M   364K   532M     1%    /etc/svc/volatile
objfs                    0K     0K     0K     0%    /system/object
sharefs                  0K     0K     0K     0%    /etc/dfs/sharetab
/usr/lib/libc/libc_hwcap2.so.1 6.4G   3.8G   2.7G    59%    /lib/libc.so.1
fd                       0K     0K     0K     0%    /dev/fd
swap                   535M   2.7M   532M     1%    /tmp
swap                   532M    32K   532M     1%    /var/run
rpool/export           7.8G    19K   2.7G     1%    /export
rpool/export/home      7.8G    18K   2.7G     1%    /export/home
rpool                  7.8G    35K   2.7G     1%    /rpool
/hgfs                   16G   4.0M    16G     1%    /hgfs
/tmp/VMwareDnD           0K     0K     0K     0%    /var/run/vmblock

bash-3.00# swap -l
swapfile             dev  swaplo blocks   free
/dev/zvol/dsk/rpool/swap 181,1       8 1048568 1047280

Arbeiten mit den shared disks

ZFS für Zonenroot, RAID1 gespiegelt

bash-3.00# format
Searching for disks...done
AVAILABLE DISK SELECTIONS:
0. c1t0d0 
/pci@0,0/pci15ad,1976@10/sd@0,0
1. c1t1d0 
/pci@0,0/pci15ad,1976@10/sd@1,0
2. c2t0d0 
/pci@0,0/pci15ad,790@11/pci15ad,1976@0/sd@0,0
3. c2t1d0 
/pci@0,0/pci15ad,790@11/pci15ad,1976@0/sd@1,0
4. c3t0d0 
/pci@0,0/pci15ad,790@11/pci15ad,1976@1/sd@0,0
5. c3t1d0 
/pci@0,0/pci15ad,790@11/pci15ad,1976@1/sd@1,0
Specify disk (enter its number): 0
selecting c1t0d0
[disk formatted]
/dev/dsk/c1t0d0s0 is part of active ZFS pool rpool. Please see zpool(1M).
/dev/dsk/c1t0d0s2 is part of active ZFS pool rpool. Please see zpool(1M).

bash-3.00# zpool create zone1 mirror c2t0d0 c3t0d0
bash-3.00# zpool list zone1
NAME    SIZE   USED  AVAIL    CAP  HEALTH  ALTROOT
zone1  1.98G    94K  1.98G     0%  ONLINE  -

bash-3.00# zpool status zone1
pool: zone1
state: ONLINE
scrub: none requested
config:
NAME        STATE     READ WRITE CKSUM
zone1       ONLINE       0     0     0
mirror    ONLINE       0     0     0
c2t0d0  ONLINE       0     0     0
c3t0d0  ONLINE       0     0     0
errors: No known data errors

bash-3.00# zfs list
NAME                        USED  AVAIL  REFER  MOUNTPOINT
rpool                      5.15G  2.67G  35.5K  /rpool
rpool/ROOT                 3.77G  2.67G    18K  legacy
rpool/ROOT/s10x_u6wos_07b  3.77G  2.67G  3.77G  /
rpool/dump                  900M  2.67G   900M  -
rpool/export                 37K  2.67G    19K  /export
rpool/export/home            18K  2.67G    18K  /export/home
rpool/swap                  512M  3.16G  5.54M  -
zone1                       106K  1.95G    18K  /zone1

Datenbereich mit UFS-Filesystem auf SVM shared disk set, RAID1 gespiegelt

bash-3.00# metaset -s zone1data -a c2t1d0 c3t1d0 -h horst1 horst2
metaset: horst1: there are no existing databases

Es existiert noch keine lokale state database. Deshalb auf horst1 und horst2 die zweite lokale Platte partitionieren und in der Slice7 eine lokale State Database anlegen.

bash-3.00# format
Searching for disks...done
AVAILABLE DISK SELECTIONS:
0. c1t0d0 
/pci@0,0/pci15ad,1976@10/sd@0,0
1. c1t1d0 
/pci@0,0/pci15ad,1976@10/sd@1,0
2. c2t0d0 
/pci@0,0/pci15ad,790@11/pci15ad,1976@0/sd@0,0
3. c2t1d0 
/pci@0,0/pci15ad,790@11/pci15ad,1976@0/sd@1,0
4. c3t0d0 
/pci@0,0/pci15ad,790@11/pci15ad,1976@1/sd@0,0
5. c3t1d0 
/pci@0,0/pci15ad,790@11/pci15ad,1976@1/sd@1,0
Specify disk (enter its number): 1
selecting c1t1d0
[disk formatted]
FORMAT MENU:
disk       - select a disk
type       - select (define) a disk type
partition  - select (define) a partition table
current    - describe the current disk
format     - format and analyze the disk
fdisk      - run the fdisk program
repair     - repair a defective sector
label      - write label to the disk
analyze    - surface analysis
defect     - defect list management
backup     - search for backup labels
verify     - read and display labels
save       - save new disk/partition definitions
inquiry    - show vendor, product and revision
volname    - set 8-character volume name
!     - execute , then return
format> fdisk
No fdisk table exists. The default partition for the disk is:
a 100% "SOLARIS System" partition
Type "y" to accept the default partition,  otherwise type "n" to edit the
partition table.
y
quit
format> part
PARTITION MENU:
0      - change `0' partition
1      - change `1' partition
2      - change `2' partition
3      - change `3' partition
4      - change `4' partition
5      - change `5' partition
6      - change `6' partition
7      - change `7' partition
select - select a predefined table
modify - modify a predefined partition table
name   - name the current table
print  - display the current table
label  - write partition map and label to the disk
! - execute , then return
quit
partition> print
Current partition table (original):
Total disk cylinders available: 46 + 2 (reserved cylinders)
Part      Tag    Flag     Cylinders      Size            Blocks
0 unassigned    wm       0             0         (0/0/0)      0
1 unassigned    wm       0             0         (0/0/0)      0
2     backup    wu       0 - 45       46.00MB    (46/0/0) 94208
3 unassigned    wm       0             0         (0/0/0)      0
4 unassigned    wm       0             0         (0/0/0)      0
5 unassigned    wm       0             0         (0/0/0)      0
6 unassigned    wm       0             0         (0/0/0)      0
7 unassigned    wm       0             0         (0/0/0)      0
8       boot    wu       0 -  0        1.00MB    (1/0/0)   2048
9 unassigned    wm       0             0         (0/0/0)      0
partition> 7
Part      Tag    Flag     Cylinders      Size            Blocks
7 unassigned    wm       0             0         (0/0/0)      0
Enter partition id tag[unassigned]:
Enter partition permission flags[wm]:
Enter new starting cyl[0]:
Enter partition size[0b, 0c, 0e, 0.00mb, 0.00gb]: 46c
partition> print
Current partition table (unnamed):
Total disk cylinders available: 46 + 2 (reserved cylinders)
Part      Tag    Flag     Cylinders      Size            Blocks
0 unassigned    wm       0             0         (0/0/0)      0
1 unassigned    wm       0             0         (0/0/0)      0
2     backup    wu       0 - 45       46.00MB    (46/0/0) 94208
3 unassigned    wm       0             0         (0/0/0)      0
4 unassigned    wm       0             0         (0/0/0)      0
5 unassigned    wm       0             0         (0/0/0)      0
6 unassigned    wm       0             0         (0/0/0)      0
7 unassigned    wm       0 - 45       46.00MB    (46/0/0) 94208
8       boot    wu       0 -  0        1.00MB    (1/0/0)   2048
9 unassigned    wm       0             0         (0/0/0)      0
partition> label
Ready to label disk, continue? y
partition> quit
FORMAT MENU:
disk       - select a disk
type       - select (define) a disk type
partition  - select (define) a partition table
current    - describe the current disk
format     - format and analyze the disk
fdisk      - run the fdisk program
repair     - repair a defective sector
label      - write label to the disk
analyze    - surface analysis
defect     - defect list management
backup     - search for backup labels
verify     - read and display labels
save       - save new disk/partition definitions
inquiry    - show vendor, product and revision
volname    - set 8-character volume name
!     - execute , then return
quit
format> quit
bash-3.00#

bash-3.00# metadb -a -f c1t1d0s7

bash-3.00# metadb
flags           first blk       block count
a        u         16              8192            /dev/dsk/c1t1d0s7
bash-3.00# echo "set md:mirrored_root_flag=1" >> /etc/system

Auf horst1 nun das shared disk set anlegen.

bash-3.00# metaset -s zone1data -a -h horst1 horst2
metaset: horst2: rpc.metad: Permission denied

Dem Dienst fehlen die Berechtigungen.

Auf horst1

bash-3.00# echo horst2 > /.rhosts

Auf horst2

bash-3.00# echo horst1 > /.rhosts

Auf horst1 nun das shared disk set erstellen:

bash-3.00# metaset -s zone1data -a -h horst1 horst2

bash-3.00# metaset -s zone1data -a c2t1d0 c3t1d0

bash-3.00# metaset
Set name = zone1data, Set number = 1
Host                Owner
horst1             Yes
horst2
Drive    Dbase
c2t1d0   Yes
c3t1d0   Yes

bash-3.00# metadb -s zone1data
flags           first blk       block count
a        u         16              8192            /dev/dsk/c2t1d0s7
a        u         16              8192            /dev/dsk/c3t1d0s7

Nun die RAID1-Spiegelung mit Solaris Volummanager (SVM) aufsetzen:

bash-3.00# metainit -s zone1data d11 1 1 c2t1d0s0
zone1data/d11: Concat/Stripe is setup

bash-3.00# metainit -s zone1data d12 1 1 c3t1d0s0
zone1data/d12: Concat/Stripe is setup

bash-3.00# metainit -s zone1data d10 -m d11
zone1data/d10: Mirror is setup

bash-3.00# metattach -s zone1data d10 d12
zone1data/d10: submirror zone1data/d12 is attached

bash-3.00# metastat -s zone1data
zone1data/d10: Mirror
Submirror 0: zone1data/d11
State: Okay
Submirror 1: zone1data/d12
State: Okay
Pass: 1
Read option: roundrobin (default)
Write option: parallel (default)
Size: 86016 blocks (42 MB)
zone1data/d11: Submirror of zone1data/d10
State: Okay
Size: 86016 blocks (42 MB)
Stripe 0:
Device     Start Block  Dbase        State Reloc Hot Spare
c2t1d0s0          0     No            Okay   Yes
zone1data/d12: Submirror of zone1data/d10
State: Okay
Size: 86016 blocks (42 MB)
Stripe 0:
Device     Start Block  Dbase        State Reloc Hot Spare
c3t1d0s0          0     No            Okay   Yes
Device Relocation Information:
Device   Reloc  Device ID
c3t1d0   Yes    id1,sd@f0000000049d7b0e80006e5c10004
c2t1d0   Yes    id1,sd@f0000000049d7b0e80004846b0003

Im Anschluss die Platte mit UFS formatieren:

bash-3.00# newfs /dev/md/zone1data/rdsk/d10
/dev/md/zone1data/rdsk/d10: Unable to find Media type. Proceeding with system determined parameters.
newfs: construct a new file system /dev/md/zone1data/rdsk/d10: (y/n)? y
/dev/md/zone1data/rdsk/d10:     86016 sectors in 42 cylinders of 64 tracks, 32 sectors
42.0MB in 3 cyl groups (16 c/g, 16.00MB/g, 7680 i/g)
super-block backups (for fsck -F ufs -o b=#) at:
32, 32832, 65632,

Konfiguration und Installation der Zone zone1

bash-3.00# zonecfg -z zone1
zone1: No such zone configured
Use 'create' to begin configuring a new zone.
zonecfg:zone1> create
zonecfg:zone1> set zonepath=/zone1
zonecfg:zone1> set autoboot=false
zonecfg:zone1> add fs
zonecfg:zone1:fs> set dir=/daten
zonecfg:zone1:fs> set special=/dev/md/zone1data/dsk/d10
zonecfg:zone1:fs> set raw=/dev/md/zone1data/rdsk/d10
zonecfg:zone1:fs> set type=ufs
zonecfg:zone1:fs> end
zonecfg:zone1> add net
zonecfg:zone1:net> set physical=e100g0
zonecfg:zone1:net> set address=192.168.178.61
zonecfg:zone1:net> end
zonecfg:zone1> exit

bash-3.00# zoneadm list -c
global
zone1

bash-3.00# cat /etc/zones/index
# Copyright 2004 Sun Microsystems, Inc.  All rights reserved.
# Use is subject to license terms.
#
# ident "@(#)zones-index        1.2     04/04/01 SMI"
#
# DO NOT EDIT: this file is automatically generated by zoneadm(1M)
# and zonecfg(1M).  Any manual changes will be lost.
#
global:installed:/
zone1:configured:/zone1:

bash-3.00# cat /etc/zones/zone1.xml












bash-3.00# chmod 700 /zone1

bash-3.00# zoneadm -z zone1 install
Preparing to install zone .
Checking  file system on device  to be mounted at 
Creating list of files to copy from the global zone.
Copying <8135> files to the zone.
Initializing zone product registry.
Determining zone package initialization order.
Preparing to initialize <1186> packages on the zone.
Initialized <1186> packages on zone.
Zone  is initialized.
The file  contains a log of the zone installation.

bash-3.00# zoneadm list -cv
ID NAME             STATUS     PATH                           BRAND    IP
0 global           running    /                              native   shared
- zone1            installed  /zone1                         native   shared

bash-3.00# zoneadm -z zone1 boot

bash-3.00# zlogin -C zone1
[Connected to zone 'zone1' console]
143/143
Reading ZFS config: done.
Select a Language
0. English
1. German
2. es
3. fr
Please make a choice (0 - 3), or press h or ? for help:1
...
Auf welcher Art von Terminal arbeiten Sie?
1) ANSI Standard CRT
2) DEC VT52
3) DEC VT100
4) Heathkit 19
5) Lear Siegler ADM31
6) PC-Konsole
7) Sun-Kommando-Shell
  Sun-Workstation
9) Televideo 910
10) Televideo 925
11) Wyse Modell 50
12) X Terminal Emulator (xterms)
13) CDE Terminal Emulator (dtterm)
14) Andere
Geben Sie die gewünschte Zahl ein und drücken Sie Eingabetaste: 3
...
System identification is completed.
rebooting system due to change(s) in /etc/default/init
[NOTICE: Zone rebooting]
SunOS Release 5.10 Version Generic_137138-09 64-bit
Copyright 1983-2008 Sun Microsystems, Inc.  All rights reserved.
Use is subject to license terms.
Hostname: zone1
Reading ZFS config: done.
zone1 console login: Apr  5 13:33:22 zone1 sendmail[6008]: My unqualified host name (localhost) unknown; sleeping for retry
root
Password:
Apr  5 13:33:44 zone1 login: ROOT LOGIN /dev/console
Sun Microsystems Inc.   SunOS 5.10      Generic January 2005

# svcadm disable svc:*sendmail*

bash-3.00# df -h
Dateisystem           Größe belegt verfügbar Kapazität Eingehängt auf
/                        0K   541M   1,4G    28%    /
/daten                  39M   1,0M    34M     3%    /daten
/dev                   2,0G   541M   1,4G    28%    /dev
/lib                   6,4G   3,8G   2,7G    59%    /lib
/platform              6,4G   3,8G   2,7G    59%    /platform
/sbin                  6,4G   3,8G   2,7G    59%    /sbin
/usr                   6,4G   3,8G   2,7G    59%    /usr
proc                     0K     0K     0K     0%    /proc
ctfs                     0K     0K     0K     0%    /system/contract
mnttab                   0K     0K     0K     0%    /etc/mnttab
objfs                    0K     0K     0K     0%    /system/object
swap                   452M   316K   452M     1%    /etc/svc/volatile
/usr/lib/libc/libc_hwcap2.so.1 6,4G   3,8G   2,7G    59%    /lib/libc.so.1
fd                       0K     0K     0K     0%    /dev/fd
swap                   452M    36K   452M     1%    /tmp
swap                   452M    12K   452M     1%    /var/run
bash-3.00# exit
# ^D
zone1 console login: ~.
[Connection to zone 'zone1' console closed]

Zonenmigration

Zone exportieren

bash-3.00# zlogin zone1 init 0

bash-3.00# zoneadm list -cv
ID NAME             STATUS     PATH                           BRAND    IP
0 global           running    /                              native   shared
- zone1            installed  /zone1                         native   shared

bash-3.00# zoneadm -z zone1 detach
bash-3.00# zoneadm list -cv
ID NAME             STATUS     PATH                           BRAND    IP
0 global           running    /                              native   shared
- zone1            configured /zone1                         native   shared

bash-3.00# ls -l /zone1
total 3343
-rw-r--r--   1 root     root     1618163 Apr  5 14:25 SUNWdetached.xml
drwxr-xr-x  13 root     root          52 Apr  5 14:22 dev
drwxr-xr-x  19 root     root          21 Apr  5 13:44 root

ZFS-Pool mit Zonenroot exportieren

bash-3.00# zpool export zone1

bash-3.00# zpool list
NAME    SIZE   USED  AVAIL    CAP  HEALTH  ALTROOT
rpool  7.94G  5.02G  2.92G    63%  ONLINE  -

SVM disk set mit UFS-Filesystem für Daten exportieren

bash-3.00# metaset
Set name = zone1data, Set number = 1
Host                Owner
horst1             Yes
horst2
Drive    Dbase
c2t1d0   Yes
c3t1d0   Yes

bash-3.00# metaset -s zone1data -r

bash-3.00# metaset
Set name = zone1data, Set number = 1
Host                Owner
horst1
horst2
Drive    Dbase
c2t1d0   Yes
c3t1d0   Yes

Auf horst2:

ZFS-Pool importieren

bash-3.00# zpool list
NAME    SIZE   USED  AVAIL    CAP  HEALTH  ALTROOT
rpool  7.94G  4.65G  3.28G    58%  ONLINE  -

bash-3.00# zpool import
pool: zone1
id: 12609083278336438915
state: ONLINE
action: The pool can be imported using its name or numeric identifier.
config:
zone1       ONLINE
mirror    ONLINE
c2t0d0  ONLINE
c3t0d0  ONLINE

bash-3.00# zpool import zone1

bash-3.00# zpool list
NAME    SIZE   USED  AVAIL    CAP  HEALTH  ALTROOT
rpool  7.94G  4.65G  3.28G    58%  ONLINE  -
zone1  1.98G   544M  1.45G    26%  ONLINE  -

SVM disk set importieren

bash-3.00# metaset
Set name = zone1data, Set number = 1
Host                Owner
horst1
horst2
Drive    Dbase
c2t1d0   Yes
c3t1d0   Yes

bash-3.00# metaset -s zone1data -t

bash-3.00# metaset
Set name = zone1data, Set number = 1
Host                Owner
horst1
horst2             Yes
Drive    Dbase
c2t1d0   Yes
c3t1d0   Yes

bash-3.00# metastat -s zone1data d10
zone1data/d10: Mirror
Submirror 0: zone1data/d11
State: Okay
Submirror 1: zone1data/d12
State: Okay
Pass: 1
Read option: roundrobin (default)
Write option: parallel (default)
Size: 86016 blocks (42 MB)
zone1data/d11: Submirror of zone1data/d10
State: Okay
Size: 86016 blocks (42 MB)
Stripe 0:
Device     Start Block  Dbase        State Reloc Hot Spare
c2t1d0s0          0     No            Okay   Yes
zone1data/d12: Submirror of zone1data/d10
State: Okay
Size: 86016 blocks (42 MB)
Stripe 0:
Device     Start Block  Dbase        State Reloc Hot Spare
c3t1d0s0          0     No            Okay   Yes
Device Relocation Information:
Device   Reloc  Device ID
c2t1d0   Yes    id1,sd@f0000000049d7b0e80004846b0003
c3t1d0   Yes    id1,sd@f0000000049d7b0e80006e5c10004

Zone zone1 importieren und wieder in Betrieb nehmen:

bash-3.00# zonecfg -z zone1
zone1: No such zone configured
Use 'create' to begin configuring a new zone.
zonecfg:zone1> create -a /zone1
zonecfg:zone1> exit

bash-3.00# zoneadm list -cv
ID NAME             STATUS     PATH                           BRAND    IP
0 global           running    /                              native   shared
- zone1            configured /zone1                         native   shared

bash-3.00# zoneadm -z zone1 attach

bash-3.00# zoneadm list -cv
ID NAME             STATUS     PATH                           BRAND    IP
0 global           running    /                              native   shared
- zone1            installed  /zone1                         native   shared

bash-3.00# zoneadm -z zone1 boot

bash-3.00# zoneadm list -cv
ID NAME             STATUS     PATH                           BRAND    IP
0 global           running    /                              native   shared
2 zone1            running    /zone1                         native   shared

bash-3.00# zlogin zone1
[Connected to zone 'zone1' pts/5]
Last login: Sun Apr  5 14:22:15 on pts/5
Sun Microsystems Inc.   SunOS 5.10      Generic January 2005

# df -h
Filesystem             size   used  avail capacity  Mounted on
/                        0K   545M   1.4G    28%    /
/daten                  39M   5.0M    30M    15%    /daten
/dev                   2.0G   545M   1.4G    28%    /dev
/lib                   6.4G   3.8G   2.7G    59%    /lib
/platform              6.4G   3.8G   2.7G    59%    /platform
/sbin                  6.4G   3.8G   2.7G    59%    /sbin
/usr                   6.4G   3.8G   2.7G    59%    /usr
proc                     0K     0K     0K     0%    /proc
ctfs                     0K     0K     0K     0%    /system/contract
mnttab                   0K     0K     0K     0%    /etc/mnttab
objfs                    0K     0K     0K     0%    /system/object
swap                   437M   300K   437M     1%    /etc/svc/volatile
/usr/lib/libc/libc_hwcap2.so.1 6.4G   3.8G   2.7G    59%    /lib/libc.so.1
fd                       0K     0K     0K     0%    /dev/fd
swap                   437M    36K   437M     1%    /tmp
swap                   437M    12K   437M     1%    /var/run

# ls -l /daten
total 8176
-rw-r--r--   1 root     root     4165061 Apr  5 14:14 lksf_book_alpha.pdf
drwx------   2 root     root        8192 Apr  5 12:13 lost+found

Fazit

Zonen sind ne nette Sache. Mit der Möglichkeit der Zonenmigration wird das Thema aber erst richtig interessant und RZ-tauglich.

Weiterführende Literatur, etc.

Solaris Volume Manager Administration Guide

ZFS Administration Guide

Solaris Containers

Devices and Filesystems

Solaris10u6 10/08

Blog O’Matty zu shared disks unter Vmware Server 2

P.S.

Der nächste Test wird Liveupgrade mit ZFS-Rootfilesystem und Zonen zum Thema haben…

ZFS Webgui Patch

otmanix — Sat, 04 Apr 2009 20:11:29 +0000

Wer das ZFS Webgui vermisst hat – hier die relevanten Patches um es wieder lauffähig zu bekommen:

141105 — < 01 — 1 SunOS 5.10_x86: ZFS Administration Java Web Console Patch
141104 — < 01 — 1 SunOS 5.10: ZFS Administration Java Web Console Patch

Mit patchadd installieren und danach den Webserver durchstarten: /usr/sbin/smcwebserver restart

Anschliessend wie gewohnt https://localhost:6789/zfs/zfsmodule/Index aufrufen.

Automatisiertes Schreiben von disk label unter Solaris

otmanix — Wed, 18 Mar 2009 20:16:11 +0000

Wer unter Solaris mit UFS-Filesystemen arbeitet muss vor der Benutzung einer Platte selbige mit einem disk label (vtoc bzw. Partitionstabelle) versehen. Dazu startet man den Befehl “format”, wählt die gewünschte Disk aus, ändert unter “partition” die Größen für die Partitionen, speichert das mit “label” und beendet das Programm mit “quit”.

root@server # format
Searching for disks...done

AVAILABLE DISK SELECTIONS:
       0. c0t0d0 
          /ssm@0,0/pci@1a,700000/pci@1/SUNW,isptwo@4/sd@0,0
       1. c1t0d0 
          /ssm@0,0/pci@1b,700000/pci@1/SUNW,isptwo@4/sd@0,0
       2. c2t40d41 
          /ssm@0,0/pci@1a,600000/pci@1/lpfc@4/sd@28,29
...

Specify disk (enter its number): 0
selecting c0t0d0
[disk formatted]

FORMAT MENU:
        disk       - select a disk
        type       - select (define) a disk type
        partition  - select (define) a partition table
        current    - describe the current disk
        format     - format and analyze the disk
        repair     - repair a defective sector
        label      - write label to the disk
        analyze    - surface analysis
        defect     - defect list management
        backup     - search for backup labels
        verify     - read and display labels
        save       - save new disk/partition definitions
        inquiry    - show vendor, product and revision
        volname    - set 8-character volume name
        !     - execute , then return
        quit
format> partition

PARTITION MENU:
        0      - change `0' partition
        1      - change `1' partition
        2      - change `2' partition
        3      - change `3' partition
        4      - change `4' partition
        5      - change `5' partition
        6      - change `6' partition
        7      - change `7' partition
        select - select a predefined table
        modify - modify a predefined partition table
        name   - name the current table
        print  - display the current table
        label  - write partition map and label to the disk
        ! - execute , then return
        quit
partition> print
Current partition table (original):
Total disk cylinders available: 24620 + 2 (reserved cylinders)

Part      Tag    Flag     Cylinders         Size            Blocks
  0       root    wm       0 -  6812        9.39GB    (6813/0/0)  19682757
  1       swap    wu    6813 - 21330       20.00GB    (14518/0/0) 41942502
  2     backup    wm       0 - 24619       33.92GB    (24620/0/0) 71127180
  3 unassigned    wm       0                0         (0/0/0)            0
  4 unassigned    wm       0                0         (0/0/0)            0
  5        var    wm   21331 - 24233        4.00GB    (2903/0/0)   8386767
  6 unassigned    wm   24234 - 24596      512.06MB    (363/0/0)    1048707
  7 unassigned    wm   24597 - 24619       32.44MB    (23/0/0)       66447

partition> quit

FORMAT MENU:
        disk       - select a disk
        type       - select (define) a disk type
        partition  - select (define) a partition table
        current    - describe the current disk
        format     - format and analyze the disk
        repair     - repair a defective sector
        label      - write label to the disk
        analyze    - surface analysis
        defect     - defect list management
        backup     - search for backup labels
        verify     - read and display labels
        save       - save new disk/partition definitions
        inquiry    - show vendor, product and revision
        volname    - set 8-character volume name
        !     - execute , then return
        quit
format> quit

Im Bereich “partition” kann man mit “print” die aktuelle Partitionstabelle ansehen. Bei neuen Platten wird ein Standardvorschlag zur Partitionierung angezeigt, der natürlich abgeändert werden kann. Wird dies nicht getan und trotzdem “label” ausgeführt, wird dieser default-label geschrieben.

Hat man nun die Aufgabe eine größere Anzahl Platten zu partitionieren möchte man dann den Vorgang doch irgendwie automatisieren. Dazu gibt es die Tools prtvtoc und fmthard. Mit prtvtoc kann die Partitionstabelle einer Platte als Text in genormter Form ausgegeben werden.

root@server # prtvtoc /dev/rdsk/c0t0d0s0

* /dev/rdsk/c0t0d0s2 partition map

* Dimensions:

*     512 bytes/sector

*     107 sectors/track

*      27 tracks/cylinder

*    2889 sectors/cylinder

*   24622 cylinders

*   24620 accessible cylinders

* Flags:

*   1: unmountable

*  10: read-only

*                          First     Sector    Last

* Partition  Tag  Flags    Sector     Count    Sector  Mount Directory

       0      2    00          0  19682757  19682756

       1      3    01   19682757  41942502  61625258

       2      5    00          0  71127180  71127179

       5      7    00   61625259   8386767  70012025

       6      0    00   70012026   1048707  71060732

       7      0    00   71060733     66447  71127179

Diese Ausgabe läßt sich nun als Vorlage nutzen um Platten mit “fmthard” zu partitionieren. Sinn ergibt das natürlich nur bei Disks mit gleicher Größe.

prtvtoc /dev/rdsk/c0t0d0s2 | fmthard -s - /dev/rdsk/c1t0d0s2

Dummerweise bekommt man nun ziemlich wahrscheinlich einen I/O-error beim Schreiben der Partitionstabelle auf die zweite Platte (wenn diese neu ist). Hier des Rätsels Lösung:

manpage zu “fmthard”

For disks under one terabyte, fmthard cannot write a VTOC on an unlabeled disk. Use format(1M) for this purpose.
SunOS 5.10 Last change: 11 Apr 2005

Na klasse, da läßt sich das Tool zum Automatisieren in der Masse der Anwendungsfälle also nicht nutzen. Weniger bekannt ist der folgende Workaround:

Man automatisiert das Schreiben eines Standard disk label mit “Format” und benutzt im Anschluss wie oben gezeigt “prtvtoc” und “fmthard” (üblicherweise wird immer die Slice 2 angegeben, da diese per Definition die komplette Disk umfassen sollte!).

echo label > /tmp/input
echo quit >> /tmp/input
format -d c1t0d0  -f /tmp/input
prtvtoc /dev/rdsk/c0t0d0s2 | fmthard -s - /dev/rdsk/c1t0d0s2

Um eine größere Zahl Disks zu partitionieren schreibt man ein kleines Skript:

cd /dev/rdsk/
echo label > /tmp/input
echo quit >> /tmp/input
DISKS=$(ls c4t50d*s2|sed 's/s2//')
export DISKS
for i in $DISKS
do
format -d $i -f /tmp/input
done

In diesem Beispiel werden alle LUNs am Controller 4 / Target 50 mit einem Standard disk label versehen.

Danach kann man z.B. das Partitionslayout einer Platte auf alle neuen Platten übertragen:

for i in $DISKS
do
prtvtoc /dev/rdsk/c0t0d0s2 | fmthard -s - /dev/rdsk/${i}s2
done

Alternativ könnte man aber auch die neuen Platten einem Diskset hinzufügen:

for i in $DISKS
do
metaset -s oradb -a $i
done

P.S.

Die Skripte kann man natürlich noch schöner schreiben. Ich will hier nur das Prinzip zeigen…

Hier noch etwas Lesestoff: http://docs.sun.com/app/docs/doc/817-5093/disksprep-103?a=view

grub loswerden

otmanix — Sun, 25 Jan 2009 13:43:03 +0000

Wer Linux oder OpenSolaris in einer Multiboot-Umgebung betreibt verwendet i.d.R. grub als Bootmanager. Will man dann u.U. grub wieder loswerden, z.B. weil man OpenSolaris nur testen wollte, und auf den Standard Windows XP Bootmanager wieder zurückstellen funktioniert das folgendermaßen:

Windows XP CD und Administrator-Passwort bereithalten (falls nicht bekannt, das Passwort vorher neu vergeben!)
Windows-Partition auf aktiv setzen (Windows > rechte MT auf Arbeitsplatz > Verwalten > Datenspeicher > Datenträgerverwaltung > rechte MT auf Partition C: > Partition als aktiv markieren > ja), danach Reboot
von Windows XP CD starten und mit “R” in die Wiederherstellungskonsole wechseln, i.d.R. mit “1″ das relevante Windows auswählen und das Administrator-Passwort eingeben
Danach fixboot, ggf. auch fixmbr eingeben, anschließend Reboot
Danach können die Linux-/OpenSolaris-Partitionen gefahrlos in der Datenträgerverwaltung gelöscht werden

Performanceüberwachung unter Solaris

otmanix — Sun, 18 Jan 2009 17:18:03 +0000

Will man bei Solaris die Performance überwachen empfehle ich zusätzlich zu den mitgelieferten Tools die Programme der Performance Tools CD. Hier ein paar “real life”-Ausgaben der Systemlast auf einem Sun Fire 6800-System (Oracle-DB-Import während Unicode-Migration eines mySAP.ERP2005-Systems). Im Beispiel wird eine auf Disk exportierte DB in eine leere DB importiert. Dabei wird auch auf Unicode konvertiert.

Die Tools cpubar und iobar in Aktion:

Im linken Bereich von cpubar sieht man die Auslastung der CPU-cores. Der deutlich größte Teil der Last (gün) wird vom R3load und den Oracle-Prozessen verbraucht. Die vom Betriebssystem selbst bzw. vom Kernel verursachte Last wird rot dargestellt. Der orange Teil stellt dar, dass die cores mehr oder weniger auf IO warten mussten, d.h. von Disk lesen und auf Disk schreiben. Deutlicher wird das am zweiten roten Balken rechts daneben. In der “blocked queue” sieht man wie viele Prozesse aktuell auf IO warten. Der Speicherverbrauch wird außerdem weiter rechts angezeigt.

iotop Statistik:

Diese iotop-statistik zeigt eines deutlich: Es gibt bei Zugriffen auf Speichermedien mehr relevante Werte als den Durchsatz in MB/s. Interessant ist vor allem auch IOPS (Schreib- und Lesevorgänge). Datenbanken wie Oracle schreiben und lesen i.d.R. in 8kB großen Böcken.

In diesem Beispiel sind die Disks per Multipathing-Software (hier EMC Powerpath) an ein Storagesystem angebunden (hier EMC DMX4). Dabei stehen 2 Dual-Channel 2Gb/s Fibrechannel-HBAs vom Typ Emulex LP9002-DC zur Verfügung. Der HBA-Typ bzw. der daruf verbaute ASIC entscheidet über dessen Leistungsfähigkeit.

Für die Administration unter Windows kann Portable Putty und XMing empfehlen (ssh-Client und X-Server).

Einrichtung Tape Library im EMC Networker inc. DDS – Teil 6

otmanix — Thu, 21 Aug 2008 07:47:21 +0000

Einrichtung der Tape Library im EMC Networker – 2. Versuch

Bei der automatischen Erkennung stürzte zuletzt das Programm jbconfig ab, deshalb folgt nun die manuelle Variante (bei Sun/STK Librarys habe ich den Absturz noch nicht erlebt).

Zunächst einmal noch ein paar Grundlagen für das Einrichten der Jukebox und Dynamic Drive Sharing:

Für ein Tape drive werden am Host jede Menge Devices angelegt. Für Backup-Programme wird i.d.R. das no rewind – device inc. Hardwarekomprimierung bevorzugt, das die max. Kapizität nutzt. Bei den verwendeten LTO-3-drives könnte man z.B. LTO-2-Kompatibilität nutzen, was aber nur ggf. bei einem gemischten Betrieb von Drives Sinn ergibt.

Beim Dynamic Drive Sharing (DDS) übernimmt der Networker Server (oder ein Storage Node) die Steuerung der Jukebox (Controlpath/Changer/Robotik). Andere Hosts, z.B. auch NDMP-Tapeserver, können auch auf die Drives der Jukebox zugreifen. Für jedes gesharte Drive wird eine DDS-Lizenz benötigt. Die Jukebox wird gestaffelt nach Anzahl Slots lizensiert. Sollen außer dem Networker Server weitere Rechner direkt die Drives nutzen wird dafür eine Dedicated Storage Node – Lizenz benötigt. NAS-Systeme wie Netapp benötigen eine NDMP-Lizenz, die gestaffelt nach Tieren abgerechnet wird.

Aufgrund der vorherigen Auswertung auf dem Backup Server und den NAS-Geräten läßt sich sich eine Zuordnung zwischen WW(P)N und Tape-Device erstellen:

Changer: WWPN 50:03:08:c1:43:97:b0:02 / Lun 1
senbackup1: /dev/scsi/changer/c5t500308C14397B002d1

Tape drive 1: WWPN 50:03:08:c1:43:97:b0:02 / Lun 0
senbackup1: /dev/rmt/6cbn
filer1: nrst16a
sennst1: nrst7a

Tape drive 2: WWPN 50:03:08:c1:43:97:b0:05 / Lun 0
senbackup1: /dev/rmt/7cbn
filer1: nrst17a
sennst1: nrst4a

Tape drive 3: WWPN 50:03:08:c1:43:97:b0:08 / Lun 0
senbackup1: /dev/rmt/8cbn

Mit diesem Wissen kann nun die Jukebox für den EMC Networker konfiguriert werden:

root@senbackup1 # jbconfig

Jbconfig is running on host senbackup1 (SunOS 5.10),
and is using senbackup1 as the NetWorker server.

1) Configure an AlphaStor Library.
2) Configure an Autodetected SCSI Jukebox.
3) Configure an Autodetected NDMP SCSI Jukebox.
4) Configure an SJI Jukebox.
5) Configure an STL Silo.

What kind of Jukebox are you configuring? [1] 4
Enter the number corresponding to the type of jukebox you are installing:
1) ADIC-1200c/ADIC-1200d 20) Exabyte 690D          39) HP-Optical
2) ADIC-VLS              21) Exabyte Jukebox       40) Sony TSL-7000
3) ARC DiamondBack       22) Hitachi ML010 Series 41) Sony TSL-A500C
4) Sun 20Gb 4mm Tape Loader 23) HP-C1553A/Surestore 12000e 42) Sony TSL-AIT
5) Breece Hill Saguaro   24) HP-C1557A/Surestore 12000e 43) Digital 4mm DAT TLZ9L
6) Breece Hill           25) HP C5713A             44) Digital 4mm DAT (TLZxx)
7) Philips Blackjack     26) Hewlett-Packard A4853A 45) Digital TL800 Series
DLI Libra Series      27) Metrum (SCSI)         46) Digital TL810 Series
9) Quantum DLT/Digital DLT 28) Qualstar              47) Digital TL820 Series
10) Exabyte 10e or 10h    29) Spectralogic          48) Digital TL893
11) Exabyte 10i           30) STK 9704/Lago 340     49) Digital TL893
12) Exabyte 18D           31) STK 9708/Lago 380 (SCSI) Datawheel 50) Digital TL896
13) Exabyte 60            32) StorageTek 9730       51) Digital TL896
14) Exabyte 120           33) StorageTek 9738       52) Digital TL899
15) Exabyte 210           34) STK 9708/Lago 380 (SCSI) Datawheel 53) Digital TL899
16) Exabyte 218           35) Dell PowerVault 130T 54) Digital Optical
17) Exabyte 220           36) IBM 3570              55) Digital TK Series
18) Exabyte 230D          37) IBM 7331/IBM 9427     56) Standard SCSI Jukebox
19) Exabyte 400 Series    38) ATL/Odetics SCSI

Choice? 56
Installing an ‘Standard SCSI Jukebox’ jukebox.

What name do you want to assign to this jukebox device? senlib2
39744:jbconfig: Enter the control port of the jukebox in the following format:

scsidev@3.0.0 Pathname of the control port for the jukebox device? /dev/scsi/changer/c5t500308C14397B002d1
15814:jbconfig: Attempting to detect serial numbers on the jukebox and drives …

15815:jbconfig: Will try to use SCSI information returned by jukebox to configure drives.

Turn NetWorker auto-cleaning on (yes / no) [yes]? no
The drives in this jukebox cannot be auto-configured with the available
information. You will need to provide the path for the drives.
Is (any path of) any drive intended for NDMP use? (yes / no) [no] yes
Is any drive going to have more than one path defined? (yes / no) [no] yes

You will be prompted for multiple paths for each drive.
Pressing on a null default advances to the next drive.

Please enter the device path information in one of the following formats:

/dev/rmt/1cbn –for local path or
host:device-path –for remote node or NDMP device(s) or
host:drive-letter:directory path –for Windows disk file

After you have entered a device path, you will be prompted for an NDMP
user name for that path’s host. If this device path is not an NDMP device,
press the enter key to advance to the next device path. For NDMP devices,
you need to enter the user name and password the first time we encounter
that NDMP host. Pressing the enter key for the NDMP user name for any
subsequent device path on the same host will set the user name and password
to those defined the first time. You will not be prompted for the password
in such a case.

Drive 1, element 1
Device path 1 ? /dev/rmt/6cbn
Device path 2 ? filer1:nrst16a
Is this device configured as NDMP? (yes / no) [no]yes
Device path 3 ? sennst1:nrst7a
Is this device configured as NDMP? (yes / no) [no]yes
Device path 4 ?

Drive 2, element 2
Device path 1 ? /dev/rmt/7cbn
Device path 2 ? filer1:nrst17a
Is this device configured as NDMP? (yes / no) [no]yes
Device path 3 ? sennst1:nrst4a
Is this device configured as NDMP? (yes / no) [no]yes
Device path 4 ?

Drive 3, element 3
Device path 1 ? /dev/rmt/8cbn
Device path 2 ?

Please select the appropriate drive type number:
1) 3480                  24) 9840b                 47) optical
2) 3570                  25) 9840C                 48) qic
3) 3590                  26) 9940                  49) SAIT-1
4) 3592                  27) 9940B                 50) SD3
5) 4890                  28) adv_file              51) sdlt
6) 4mm                   29) dlt                   52) sdlt320
7) 4mm 12GB              30) dlt vs160             53) sdlt600
4mm 20GB              31) dlt-s4                54) SLR
9) 4mm 4GB               32) dlt-v4                55) T10000
10) 4mm 8GB               33) dlt1                  56) tkz90
11) 4mm DAT160            34) dlt7000               57) travan10
12) 4mm DAT72             35) dlt8000               58) TS1120
13) 8mm                   36) dst                   59) tz85
14) 8mm 20GB              37) dst (NT)              60) tz86
15) 8mm 5GB               38) dtf                   61) tz87
16) 8mm AIT               39) dtf2                  62) tz88
17) 8mm AIT-2             40) file                  63) tz89
18) 8mm AIT-3             41) himt                  64) tz90
19) 8mm AIT-4             42) logical               65) tzs20
20) 8mm AIT-5             43) LTO Ultrium           66) VXA
21) 8mm Mammoth-2         44) LTO Ultrium-2         67) VXA-172
22) 9490                  45) LTO Ultrium-3         68) VXA-2
23) 9840                  46) LTO Ultrium-4         69) VXA-320

Enter the drive type of drive 1? 45
Are all the drives the same model? (yes / no) [yes] yes

Jukebox has been added successfully

The following configuration options have been set:

> Autocleaning off.
> At least one drive was defined with multiple paths. All such drives are
defined with a hardware identification as well as a path value to avoid
confusion by uniquely identifying the drive. The hardware identification
for all drives which have one is always ‘autochanger_name – Drive #’ where
“autochanger_name” is the name you gave to the autochanger that was
just defined, and the # symbol is the drive number.
> Barcode reading to on.
> Volume labels that match the barcodes.

You can review and change the characteristics of the autochanger and its
associated devices using the NetWorker Management Console.

Would you like to configure another jukebox? (yes/no) [no]no

Das manuelle Erstellen der Jukebox hat also geklappt.

Hinweise:

Beim erstmaligen Anlegen eines NDMP-Devices wird ein User/Paßwort für die Authentifizierung am NAS-Gerät abgefragt. In diesem Beispiel sind bereits NDMP-Devices einer anderen Jukebox angelegt, deshalb entfiel die Frage.

Das Autocleaning im Networker sollte wenn möglich nicht benutzt werden und besser die Funtionalität der Tape Library zum Einsatz kommen. Der Networker reinigt nach fest eingestellten Intervallen, auch wenn die Laufwerke ggf. keine Reinigung benötigen. zu häufige Reinigungen verringern die Lebensdauer der Drives.

Einrichtung Tape Library im EMC Networker inc. DDS – Teil 4

otmanix — Wed, 20 Aug 2008 17:43:11 +0000

Prüfen der Tape Library devices am Networker Server

Der Networker Server läuft auf Solaris 10 Update 5. Zunächst einmal läßt man die Geräteerkennung laufen:

root@senbackup1 # devfsadm

Jetzt die Konfiguration des gezonten HBA-Ports abfragen:

root@senbackup1 # fcinfo hba-port -l
…
HBA Port WWN: 210100e08bb2d018
OS Device Name: /dev/cfg/c5
Manufacturer: QLogic Corp.
Model: 375-3356-01
Firmware Version: 4.2.2
FCode/BIOS Version: BIOS: 1.24; fcode: 1.26; EFI: 1.8;
Type: N-port
State: online
Supported Speeds: 1Gb 2Gb 4Gb
Current Speed: 4Gb
Node WWN: 200100e08bb2d018

Danach prüfen, welche Geräte auf diesem HBA-Port sichtbar sind:

root@senbackup1 # fcinfo remote-port -p 210100e08bb2d018 -s
…
Remote Port WWN: 500308c14397b002
Active FC4 Types: SCSI
SCSI Target: yes
Node WWN: 500308c14397b001
LUN: 0
Vendor: IBM
Product: ULT3580-TD3
OS Device Name: /dev/rmt/6n
LUN: 1
Vendor: IBM
Product: ULT3583-TL
OS Device Name: /devices/pci@7c0/pci@0/pci@9/SUNW,qlc@0,1/fp@0,0/sgen@w500308c14397b002,1
Remote Port WWN: 500308c14397b005
Active FC4 Types: SCSI
SCSI Target: yes
Node WWN: 500308c14397b004
LUN: 0
Vendor: IBM
Product: ULT3580-TD3
OS Device Name: /dev/rmt/7n
Remote Port WWN: 500308c14397b008
Active FC4 Types: SCSI
SCSI Target: yes
Node WWN: 500308c14397b007
LUN: 0
Vendor: IBM
Product: ULT3580-TD3
OS Device Name: /dev/rmt/8n
…

Alle 3 Tape drives sind sichtbar (Lun 0 am jeweiligen Target), ebenso der Changer (Lun 1 am ersten Target).

Nun mit dem Networker-Kommando inquire bzw. inquire -l die Geräteerkennung starten:

root@senbackup1 # inquire
…
scsidev@5.7.1:IBM     ULT3583-TL      6.10|Autochanger (Jukebox), /dev/scsi/changer/c5t500308C14397B002d1
S/N: 0000013254351000
ATNN=IBM     ULT3583-TL      0000013254351000
scsidev@5.9.0:IBM     ULT3580-TD3     73P5|Tape, /dev/rmt/6cbn
S/N: 1210029684
ATNN=IBM     ULT3580-TD3     1210029684
WWNN=500308C14397B001
WWPN=500308C14397B002
PORT=00000001
scsidev@5.10.0:IBM     ULT3580-TD3     73P5|Tape, /dev/rmt/7cbn
S/N: 1210029712
ATNN=IBM     ULT3580-TD3     1210029712
WWNN=500308C14397B004
WWPN=500308C14397B005
PORT=00000001
scsidev@5.13.0:IBM     ULT3580-TD3     73P5|Tape, /dev/rmt/8cbn
S/N: 1210029552
ATNN=IBM     ULT3580-TD3     1210029552
WWNN=500308C14397B007
WWPN=500308C14397B008
PORT=00000001

Für die Tape drives wurden also Devices mit dem st-Treiber erzeugt. Der Changer wurde mit dem sgen-Treiber erzeugt.

Einrichtung Tape Library im EMC Networker inc. DDS – Teil 3

otmanix — Wed, 20 Aug 2008 17:23:16 +0000

Prüfen der Tape drive – Konfiguration auf den Netapp NAS-Systemen

Dazu zunächst auf den beiden Systemen auf der Shell anmelden.

storage show tape zeigt die einzelnen erkannten Tape devices an. Dabei gibt es als Auskunft die WWN des Geräts an (die letzte Stelle ist 1 niedriger als die WWPN!). Damit kann eine Zuordnung zwischen Netapp-Devicenamen und tatsächlichen Tape drive erfolgen (wird später beim Anlegen der Jukebox im Networker benötigt!).

Hier kann man auch eine Eigenart von Netapp-Geräten erkennen. Im Hardwarepfad (Feld Tape Drive) ist der Name des SAN-Switches mit vermerkt. Ein Umhängen der Tape drives an Ports eines anderen Switches in der selben Fabric erzeugt damit neue Devices!!! Das bedeutet eine Umkonfiguration der Jukebox im Networker…

sysconfig -t listet zu allen erkannten Tape drives die erzeugten Devices.

ndmpd status zeigt an ob NDMP auf dem Netapp-NAS-System aktiviert ist und gibt u.a. auch die benutzte NDMP-Version an.

sennst1*> storage show tape
…
Tape Drive:         sansw14:5.2
Description:        IBM     ULT3580-TD3
Serial Number:      1210029712
World Wide Name:    WWN[5:003:08c143:97b004]
Alias Name(s):      st4
Device State:       available

Tape Drive:         sansw14:4.1
Description:        IBM     ULT3580-TD3
Serial Number:      1210029684
World Wide Name:    WWN[5:003:08c143:97b001]
Alias Name(s):      st7
Device State:       available

sennst1*> sysconfig -t
…
Tape drive (sansw14:5.2) IBM     ULT3580-TD3
rst4l - rewind device,        format is: LTO rd only 200GB cmp
nrst4l - no rewind device,     format is: LTO rd only 200GB cmp
urst4l - unload/reload device, format is: LTO rd only 200GB cmp
rst4m - rewind device,        format is: LTO 2 400GB cmp
nrst4m - no rewind device,     format is: LTO 2 400GB cmp
urst4m - unload/reload device, format is: LTO 2 400GB cmp
rst4h - rewind device,        format is: LTO 3 400GB
nrst4h - no rewind device,     format is: LTO 3 400GB
urst4h - unload/reload device, format is: LTO 3 400GB
rst4a - rewind device,        format is: LTO 3 800GB cmp
nrst4a - no rewind device,     format is: LTO 3 800GB cmp
urst4a - unload/reload device, format is: LTO 3 800GB cmp

Tape drive (sansw14:4.1) IBM     ULT3580-TD3
rst7l - rewind device,        format is: LTO rd only 200GB cmp
nrst7l - no rewind device,     format is: LTO rd only 200GB cmp
urst7l - unload/reload device, format is: LTO rd only 200GB cmp
rst7m - rewind device,        format is: LTO 2 400GB cmp
nrst7m - no rewind device,     format is: LTO 2 400GB cmp
urst7m - unload/reload device, format is: LTO 2 400GB cmp
rst7h - rewind device,        format is: LTO 3 400GB
nrst7h - no rewind device,     format is: LTO 3 400GB
urst7h - unload/reload device, format is: LTO 3 400GB
rst7a - rewind device,        format is: LTO 3 800GB cmp
nrst7a - no rewind device,     format is: LTO 3 800GB cmp
urst7a - unload/reload device, format is: LTO 3 800GB cmp

sennst1*> ndmpd status
ndmpd ON.
No ndmpd sessions active.

filer1*> storage show tape
…
Tape Drive:         sansw14:4.1
Description:        IBM     ULT3580-TD3
Serial Number:      1210029684
World Wide Name:    WWN[5:003:08c143:97b001]
Alias Name(s):      st16
Device State:       available

Tape Drive:         sansw14:5.2
Description:        IBM     ULT3580-TD3
Serial Number:      1210029712
World Wide Name:    WWN[5:003:08c143:97b004]
Alias Name(s):      st17
Device State:       available

filer1*> sysconfig -t
…
Tape drive (sansw14:4.1) IBM     ULT3580-TD3
rst16l - rewind device,        format is: LTO rd only 200GB cmp
nrst16l - no rewind device,     format is: LTO rd only 200GB cmp
urst16l - unload/reload device, format is: LTO rd only 200GB cmp
rst16m - rewind device,        format is: LTO 2 400GB cmp
nrst16m - no rewind device,     format is: LTO 2 400GB cmp
urst16m - unload/reload device, format is: LTO 2 400GB cmp
rst16h - rewind device,        format is: LTO 3 400GB
nrst16h - no rewind device,     format is: LTO 3 400GB
urst16h - unload/reload device, format is: LTO 3 400GB
rst16a - rewind device,        format is: LTO 3 800GB cmp
nrst16a - no rewind device,     format is: LTO 3 800GB cmp
urst16a - unload/reload device, format is: LTO 3 800GB cmp

Tape drive (sansw14:5.2) IBM     ULT3580-TD3
rst17l - rewind device,        format is: LTO rd only 200GB cmp
nrst17l - no rewind device,     format is: LTO rd only 200GB cmp
urst17l - unload/reload device, format is: LTO rd only 200GB cmp
rst17m - rewind device,        format is: LTO 2 400GB cmp
nrst17m - no rewind device,     format is: LTO 2 400GB cmp
urst17m - unload/reload device, format is: LTO 2 400GB cmp
rst17h - rewind device,        format is: LTO 3 400GB
nrst17h - no rewind device,     format is: LTO 3 400GB
urst17h - unload/reload device, format is: LTO 3 400GB
rst17a - rewind device,        format is: LTO 3 800GB cmp
nrst17a - no rewind device,     format is: LTO 3 800GB cmp
urst17a - unload/reload device, format is: LTO 3 800GB cmp

filer1*> ndmpd status
ndmpd ON.
Session: 36
Active
version:                4
Operating on behalf of primary host.
tape device:    nrst19a
mover state:    Active
data state:     Active
data operation: Backup

Einrichtung Tape Library im EMC Networker inc. DDS – Teil 2

otmanix — Wed, 20 Aug 2008 17:03:41 +0000

Konfiguration des FC-SAN / Zoning

Die 3 Ports der IBM 3583 werden über Multimode-LWL-Kabel mit LC-Steckern an einen Brocade-Fibrechannel-Switch angeschloßen. Dieser ist Bestandteil einer Fabric. Die Switches sind mit ISLs (Interswitchlinks) verbunden.

Zunächst einmal sollte man prüfen ob das Fabric-Login geklappt hat und die Ports der Tape drives sichtbar sind. Dazu am Switch anmelden:

Fabric OS (sansw14)
Fabos Version 5.2.2
sansw14 login: admin
Password:
sansw14:admin> switchshow
…
Area Port Media Speed State     Proto
=====================================
…
3   3   id    N4   No_Light
4   4   id    N2   Online           L-Port 1 public
5   5   id    N2   Online           L-Port 1 public
6   6   id    N2   Online           L-Port 1 public
7   7   id    N4   No_Light
…

sansw14:admin> portshow 4
…
portWwn:   20:04:00:05:1e:05:53:86
portWwn of device(s) connected:
50:03:08:c1:43:97:b0:02
Distance: normal
portSpeed: N2Gbps
…
sansw14:admin> portshow 5
…
portWwn:   20:05:00:05:1e:05:53:86
portWwn of device(s) connected:
50:03:08:c1:43:97:b0:05
Distance: normal
portSpeed: N2Gbps
…
sansw14:admin> portshow 6
…
portWwn:   20:06:00:05:1e:05:53:86
portWwn of device(s) connected:
50:03:08:c1:43:97:b0:08
Distance: normal
portSpeed: N2Gbps
…

Das hat ja schon mal gut geklappt. Deshalb kann nun das Zoning erstellt werden. Im Zoning wird in einer Art ACL beschrieben welcher Port eines Hosts auf welchen Port eines Storagesystems zugreifen darf. Hilfreich ist es zunächst für die einzelnen WWPNs (Adressen der Ports, ähnlich MAC-Adressen bei NICs) Aliase zu erstellen und dann im Zoning mit den Aliasen zu arbeiten. Das Ergbnis sieht dann z.B. so aus:

sansw14:admin> zoneshow
…
zone: filer1_0c_ibm3583_tape1
filer1_0c; ibm3583_tape1
zone: filer1_0d_ibm3583_tape2
filer1_0d; ibm3583_tape2
zone: senbackup1_hba1_port1_ibm3583_tape1
ibm3583_tape1; senbackup1_hba1_port1
zone: senbackup1_hba1_port1_ibm3583_tape2
ibm3583_tape2; senbackup1_hba1_port1
zone: senbackup1_hba1_port1_ibm3583_tape3
ibm3583_tape3; senbackup1_hba1_port1
zone: sennst1_10a_ibm3583_tape1
ibm3583_tape1; sennst1_10a
zone: sennst1_10b_ibm3583_tape2
ibm3583_tape2; sennst1_10b
…
alias: filer1_0c
50:0a:09:80:00:00:ed:cf
alias: filer1_0d
50:0a:09:81:00:00:ed:cf
alias: ibm3583_tape1
50:03:08:c1:43:97:b0:02
alias: ibm3583_tape2
50:03:08:c1:43:97:b0:05
alias: ibm3583_tape3
50:03:08:c1:43:97:b0:08
alias: senbackup1_hba1_port1
21:01:00:e0:8b:b2:d0:18
alias: sennst1_10a
20:00:00:e0:8b:87:d1:59
alias: sennst1_10b
20:01:00:e0:8b:a7:d1:59
…
Effective configuration:
cfg: zone1
zone: filer1_0c_ibm3583_tape1
50:0a:09:80:00:00:ed:cf
50:03:08:c1:43:97:b0:02
zone: filer1_0d_ibm3583_tape2
50:0a:09:81:00:00:ed:cf
50:03:08:c1:43:97:b0:05
zone: senbackup1_hba1_port1_ibm3583_tape1
50:03:08:c1:43:97:b0:02
21:01:00:e0:8b:b2:d0:18
zone: senbackup1_hba1_port1_ibm3583_tape2
50:03:08:c1:43:97:b0:05
21:01:00:e0:8b:b2:d0:18
zone: senbackup1_hba1_port1_ibm3583_tape3
50:03:08:c1:43:97:b0:08
21:01:00:e0:8b:b2:d0:18
zone: sennst1_10a_ibm3583_tape1
50:03:08:c1:43:97:b0:02
20:00:00:e0:8b:87:d1:59
zone: sennst1_10b_ibm3583_tape2
50:03:08:c1:43:97:b0:05
20:01:00:e0:8b:a7:d1:59
…
Für die beiden Netapp-Geräte sind nur 2 Ports gezont, da auch nur 2 DDS-Lizenzen verfügbar sind.

Achtung:

Das Aktivieren des Zonings kann zu einer kurzen Unterbrechung der Switch-Verbindung führen. Deshalb solche Aktivitäten möglichst nicht bei laufenden Backups (auf Tape) durchführen.

Einrichtung Tape Library im EMC Networker inc. DDS – Teil 1

otmanix — Wed, 20 Aug 2008 16:41:44 +0000

Problemstellung

Zusätzlich zur vorhandenen Tape Library im FC-SAN soll noch eine weitere in Betrieb genommen werden. Es handelt sich um eine IBM 3583 mit 3 LTO-3 FC-Tape drives. Die Tape Library soll im EMC Networker eingerichtet werden und zusätzlich zum Backup-Server auf Basis Solaris 10 auch 2 Netapp NAS-Systemen zur Verfügung gestellt werden. Aus Performancegründen sollen die Netapp-Geräte direkt auf die Tape drives zugreifen (also soll nicht der Networker-Server, sondern die NAS-Systeme selbst als NDMP-Tape-Server agieren). Deshalb stehen zusätzlich zur 64 Slot Autochanger-Lizenz noch 2 Dynamic Drive Sharing – Lizenzen (DDS) zur Verfügung.

Einrichtung der Tape Library IBM 3583

Ich zeige hier nur exemplarisch die wichtigsten Konfigurationsschritte.Die Library ist prinzipiell schon betriebsbereit, im LAN angeschlossen und konfiguriert.

Öffnen der Weboberfläche:

Auf der Weboberfläche stehen Links zur IBM-Homepage. Dort sollte man sich aktuelle Updates für das Gerät besorgen (Firmware für Tape drives, etc.) und diese installieren:

Für diese Arbeit sollte man Geduld mitbringen…

Die Standardeinstellung bei den meisten Herstellern zur Barcode-Label-Erkennung läßt die letzten beiden Zeichen (L2, L3, L4) bei LTO-Bändern aus. Diese kennzeichnen den Bandtyp (LTO-2, LTO-3, LTO-4). Bei IBM Tape Librarys ist das oft auf “Extended” eingestellt. Das verhindert später die sinnvolle Nutzung der Medien in anderen Geräten. Deshalb Volser auf “Default” stellen:

Das Reinigen der Laufwerke sollte man besser der Tape Library überlassen, die das nach Bedarf automatisch durchführen kann (statt im Networker feste Reinigungsintervalle):

Die IBM 3583 hat keinen eigenen FC-Anschluß für die Robotik. Deshalb muß der sog. Control Path auf eines der Tape drives gelegt werden (selbe Target-ID, aber drive = Lun 0, changer = Lun 1).

Anschließend die Library wieder in Betrieb nehmen:

Nun kann man die 3 FC-Tape drives mit dem FC-Switch verbinden.