SMPFR

tout l'monde
je continu les reportages sur le matos exotique qu'on rencontre, sa seré bien si d'autres membres du forum font profiter de ce qu'ils voient passer pour parler des technos utilisées / moyen de config / install, sa pourra aider d'autres personnes si jamais elles se font plaisir plus tard


http://www.newservers.com/1855-specs.pdf

en gros :
Chassit 7U, contenance 10 serveurs (1855 ou 1955 )
jusqu'a 4 Bloc d'alimentations redondant de 2.1KW chacun, redondant 2+2,3+1 ou aucune redondance
trois slots acceuillant jusqu'a 2 modules DRAC (acces à distance) pour la redondance et un module KVM analogique ou numerique (avocent), IP
4 slot d'extension reseaux, acceuillant entre autre des passtrought fiber channel, switch infiniband , et switch cisco
Des turbines, beaucoup, qui font du bruit, beaucoup


Les blades :
1855 :
Bi xeon, prends n'importe quel xeon FSB800 en 1/2mo, meme les paxville (dual core xeon)
6 slots DDR2 ecc reg, jusqu'a 16Go accepté
Dual lan gigabi intégré, intel
Un slot proprio pour carte fiber channel (emulex) / infiniband
Deux port sca pour des HDD scsi U320 (mode raid 1 supporté par le controleur, j'ai pas vu de 0 :/ )


1955:
bi xeon dual / quad core serie 5XXX
6 slot de ram FBDIMM, acceptant jusqu'a 32Go
dual lan giga broadcom intégré
slot proprio pour carte fiber channel / infiniband
deux port SAS pour HDD sata / sas 2"5 (raid 1, pas de 0 :/ comme sur le 1855)


Petite conclusion :
les + :
Les blades sont simples, pas de gros probleme à configurer.
le chassit est evolutif : acceptent deux generation de blades, peut s'adapter à votre reseau facilement (module ethernet, fiber channel, infiniband)
Le chassit integre plein de fonction sympa nativement, comme le kvm ou la gestion complete à distance
L'interface de controle à disance est assez complete
La possibilité d'avoir 10 VRAIS serveurs bi processeur dans 7U (encore faut il en avoir besoin ), en allegant le cablage dans l'armoire : 2 (ou 4) cables d'alim, 4 cables reseau au total (drac, KVM, grappe de 10port ethernet internes x2 avec les modules cisco par ex) pour controler et alimenter toutes les blades

Les - :
Le systeme developpé par dell n'est pas super abouti, on sens qu'on reste dans l'optique de dell de faire du rapport "qualité prix" :
connecteurs des blades tres fragiles, mauvais blocage des blades dans le chassit.
Interface drac lente, meme en gigabit
Interface KVM correcte mais sans plus, quelques bug (perte de souris, décalage entre la position du curseur et la position de la souris). La qualitée / resolution aurai pu etre meilleure :/
Bouton en façade tres fragiles :/
Dongle propriétaire pour avoir acces en local aux port USB et vga des lames / port ps/2 et vga du KVM, qui bien sur est facturé tres cher par dell :/


La suite en images :


Visible sur la photo : 9 modules blade installés, le bouton on/off se trouve en haut à droite de la façade



de haut en bas :
les 4 slots pour les modules reseaux. Sont installé ici deux switch cisco (j'ai commandé un passtrought 10port giga dell)
en dessous, deux modules alim "dummy" (si pas d'alim / en panne, ils doivent etre installés).Les modules contiennent des ventilos, bruyant of course
en dessous les 3 slot pour les modules interne. Un est non occupé, deux sont occupés (caché en partie sur la gauche) par un drac et le kvm digital
en dessous, deux bloc d'alim



On attaque les blades 1855 :



Deux slot pour HDD scsi sca. Un bouton on/off, et le bouton de selection pour le kvm. A coté un connecteur proprio dell, permetant de brancher un ecran vga + 2 usb via un dongle à 40€ pour faire son install "facilement"



Deux connecteurs haute densité qui relient le chassit à la blade. Connecteurs super fragile tres mal foutus, qui dépassent (dell aurai pu mieu prevoir le coup en les mettant plus à l'interieur afin de mieu les proteger)


Vue de l'interieur de la blade. La façade (boutons/leds/connecteur) est reliée à la mobo via la nappe visible en bas. Deux gros rad massif en cuivre assurent le refroidissement des proco. Deux dayday installé en façade, seagate 10K7


Une vue plus en details du slot proprio d'extension reseaux : installé ici, la carte qlogic fiber channel. Sont dispo en plus des cartes infiniband(10gb ? 2gb ?) et intel (ethernet) ?

Partie admin via le drac (interface oueb)

Avant de demarrer, il faut savoir que le drac a une config, qui peut etre inconnue (IP, mot de passe). Donc le mieu est un bon hard reset, histoire de remetre touts les parametres par defaut (mot de passe, mode DHCP)


La page de demarrage du drac, login / mdp par defaut, ouf


Si tout va bien, on obtien ensuite la page de depart, info sur les SN, qui a ouvert la connection....


Ce qui va nous interresser un peu plus, le bilan de puissance du chassit : indication de la puissance electrique dispo / consommée, redondance, qui est en route...


Page capteurs : temperature, vitesse de rotation des fans




Lecteur virtuel (disquette et cdrom), utile pour charger des iso via le reseau et faire son install
Note : Un seul groupe de lecteurs branché sur UNE seule blade à la fois :/ dommage de ne pas pouvoir faire du travail en parallele :/



en font, la page de lancement de la fenetre du kvm ip. Au premier plan, la dite fenetre .
Note : On ne peux apparament pas piloter le kvm directement en tapant son adresse IP (pas de page web qui s'affiche), faut passer par le drac / open manage et cie si on veux avoir une image :/
Une fois lancée, il faut physiquement appuyer en façade sur le bouton de selection KVM pour changer rapidement de serveur (passer par le drac est plus long )


paxville

Install de l'os sur une blade (plus de sous pour payer EDF :/ )

Afin de ne pas tenter le diable, j'ai preferé faire sauter le raid 1, et faire mon install sur un OS connu, un bon vieux server 2003 r2


on commence par charger une iso (originale ) de windows server 2003 dans le lecteur virtuel du drac, en le pointant bien entendu vers la bonne lame (ici, la 10, j'ai choisit déliberement un paxville )


on connecte ensuite le lecteur virtuel à la lame (la bonne )


on demarre ensuite une session console, histoire de voir ce qu'il se passe. ici, le serveur est perdu (ben tien), il a essayer de booter en dhcp sur la freebox, et non on peu pas


Il faut faire rebooter la machine pour que le lecteur virtuel apparaisse, un petit passage dans le bios pour passer le lecteur virtuel en "first boot device"


Youhou sa boot


Youhou le controleur scsi est detecté, sa evitera bien des emerdes


copie des fichiers


le reboot c'est bien passé, l'os s'installe


l'invite de server 2003, l'install a été un poil longue, faudra refaire le test en gigabit (j'ai du me servir d'un petit switch 10/100 car pas de cables assez long pour aller vers mon switch giga :/ )


paxville . Mais bon, il n'a pas aimer ni le controleur giga intel, ni la carte fiber channel (bi port, 2gb d'apres la doc). Reste à trouver un moyen d'envoyer les drivers et les updates systeme vers la blade, pour l'instant j'arrete pour la journée, on veira demain


la suite :

Apres avoir creer une image iso sur mon pc contenant tous les pilotes et les mises a jour que j'ai besoin, j'ai pu continuer mon install :


On commence par les drivers des controleur lan et fiber channel. En arriere plan, la page de cisco pour recharger les defaut d'usine sur les CBS-3030 (switch installé dans mon chassit blade).


on continu avec la mise a jour du bios / firmware ESM

Sa sera bien pour un debut


Config des modules cisco CBS-3030 :
Il faut commencer par regarder la procedure pour le "password recovery" sur le site de cisco.J'ai branché mon portable sur le port console, supprimer le config.text et le vlan.dat histoire detre sur qu'il ne reste rien
ensuite, miracle : mes blades detecte le reseau, et op connection à internet qui marche
On remarque sur le cisco :
[cpp]ROM: Bootstrap program is CBS30X0 boot loader
BOOTLDR: CBS30X0 Boot Loader (CBS3030-HBOOT-M) Version 12.2(25r)SEE, RELEASE SOF
TWARE (fc1)

Switch uptime is 1 minute
System returned to ROM by power-on
System image file is "flash:cbs30x0-lanbase-mz.122-25.SEE2/cbs30x0-lanbase-mz.12
2-25.SEE2.bin"

cisco WS-CBS3030-DEL (PowerPC405) processor (revision A0) with 118784K/12280K by
tes of memory.
Processor board ID FOC1052H00S
Last reset from power-on
1 Virtual Ethernet interface
16 Gigabit Ethernet interfaces
The password-recovery mechanism is enabled.

512K bytes of flash-simulated non-volatile configuration memory.
Base ethernet MAC Address : 00:18:18:A1:44:80
Motherboard assembly number : 73-10292-05
Motherboard serial number : FOC10465LZ2
Model revision number : A0
Motherboard revision number : A0
Model number : WS-CBS3030-DEL-F
Daughterboard assembly number : 73-10432-05
Daughterboard serial number : FOC10490FKC
System serial number : FOC1052H00S
Top Assembly Part Number : 800-27423-01
Top Assembly Revision Number : A0
Version ID : V01
CLEI Code Number : COUIAD8CAA
Daughterboard revision number : A0
Hardware Board Revision Number : 0x01


Switch Ports Model SW Version SW Image
------ ----- ----- ---------- ----------
* 1 16 WS-CBS3030-DEL 12.2(25)SEE2 CBS30X0-LANBASE-M


Configuration register is 0xF

Switch>
Switch>
Switch>
00:02:36: %LINK-3-UPDOWN: Interface GigabitEthernet0/11, changed state to up
00:02:37: %LINEPROTO-5-UPDOWN: Line protocol on Interface GigabitEthernet0/11, c
hanged state to up
00:08:01: %LINEPROTO-5-UPDOWN: Line protocol on Interface GigabitEthernet0/1, ch
anged state to down
00:08:03: %LINEPROTO-5-UPDOWN: Line protocol on Interface GigabitEthernet0/1, ch
anged state to up[/cpp]

rad en alu ? ou en cuivre ?

oups, c'est le stress des exams
mierde j'ai pas pris de screen du drac, on veira staprem ou demain

du bien beau matos tout ca! et superbe reportage

super topic

mise a jour avec une partie de l'install de l'os en vue de faire les mise a jour des firmwares systeme

Zolie

Je suis amoureux

en fait je comprends pas :/
tu as ta blade, avec le boot sur via drac (donc tu ouvres l'interface depuis une autre machine)et depuis l'interface de Dell tu as le vKVM ?
dans tous les cas

sinon pour les drv faudrai les injecter directement dans l'iso non?

>>kronick : ouep, tu lance le drac du chassit en lui meme, c'est le chassit qui controle chaque blade.
Si je rentre l'ip du kvm, j'ai un "http unotorized acces blabla " qui me jete violamenent. Pour ouvrir une fenetre, il me faut soit passer par le drac, qui ouvre un module java qui s'y connecte, ou passer par dell openmanage server.

>>biour : en fait oué, pour faire bien, faut preparer un iso et injecter les pilotes dedant (raid / fiber channel et lan). Mais j'ai eu la flemme comme d'ab, voila pourquoi j'ai tenter vite fait le coup en mode non raid pour mettre toutes les chances de mon coté
Jvé surement tout regrouper et creer une iso debille avec iso creator où je mettrai les pilotes qui manque, les updates des firm, et des outils de diag

Pour les pilotes sert toi du TAG Dell sur ta machine (sais plus le nom exacte)
c'est tres pratique pour eviter de ce perdre dans leur site support

ouè le TAG c'est pratique, par contre, Dell sont pas en reste sur les drivers. Sur leur site pour chaque serveur tu as facile 1go de drivers et software en tous genres.
tu as un soft qui analyse ton serveur et te donne les drivers correspondant (que tu as récupéré sous forme d'une grosse archive)

aujourdhui : fin de l'install des pilotes sur la blade 10, install complete sur les blades 1 à 3
config des switch cisco 3030 : reset de la config presente, j'ai pas besoin de fonction exotique pour l'instant

une tite photo de l'interface oueb des switch

iori: j'aime bien la page d'accueil de ton ftp

spour dissuader les curieux

tu peux faire quoi en gros sur ton interface ?
Gestion des vlan, etc.. j'imagine ?

yep, ya meme une petite appli (java ?) qui te donne la console
le but premier je pense est le monitoring du switch (voir si ya pas un goulot d'etranglement )

ça rox
plus de captures de cette interface ?