assemblage d'un serveur, besoin de conseil

gizmo78
Messages : 20534
Inscription : ven. 12 janv. 2018 17:44

assemblage d\'un serveur, besoin de conseil

Message par gizmo78 »

pk ca ? oO

si il l'utilise en jbod ca le fait nan?
Avatar de l’utilisateur
poulpito
Messages : 12402
Inscription : ven. 12 janv. 2018 17:44
Localisation : Grenoble

assemblage d\'un serveur, besoin de conseil

Message par poulpito »

la perc fait pas de jbod :p que du volume et interface quand même les disques
Avatar de l’utilisateur
biour
Messages : 24390
Inscription : ven. 12 janv. 2018 17:44

assemblage d\'un serveur, besoin de conseil

Message par biour »

ou alors ce n'est pas une Perc 5/i
la Perc 5i/r (4ports fait du JBOD)
(ou l'inverse, je suis sur que la 4port en perc5 gere le JBOD)
Image
gizmo78
Messages : 20534
Inscription : ven. 12 janv. 2018 17:44

assemblage d\'un serveur, besoin de conseil

Message par gizmo78 »

quand je dis du jbod c'est du raid 1 avec un seul disque quoi :o

juste l'utiliser en tant qu'ajout de ports et pas pour le raid qu'elle apporte
Avatar de l’utilisateur
biour
Messages : 24390
Inscription : ven. 12 janv. 2018 17:44

assemblage d\'un serveur, besoin de conseil

Message par biour »

a non Jbod c'est Jbod (acces total au disque comme si controleur integré a la mobo)
du raid1 ou 0 sur un disque c'est moyen car le contrôleur ecrit un petit bout de code sur le disque et des qtu change de contrôleur tu l'as dans l'OS
enfin de ce que je me souvienne lorsque j'ai fait mon Serveur sous Mdadm (mais ZFS c'est pareil de ce coté la)
Image
gizmo78
Messages : 20534
Inscription : ven. 12 janv. 2018 17:44

assemblage d\'un serveur, besoin de conseil

Message par gizmo78 »

oui je sais ^^ mais vu qu'il veut utiliser une perc je dis juste ca comme ca ^^
Avatar de l’utilisateur
augur1
Messages : 13167
Inscription : ven. 12 janv. 2018 17:44
Localisation : où tout est neuf et tout est sauvage
Contact :

assemblage d\'un serveur, besoin de conseil

Message par augur1 »

jbod : différent de raid0 single drive, où comme dit la carte inscrit 42 octects (il me semble) sur la table de début de disque.

Du coup pour ZFS, hors JBOD = pas de "Pass Through" ; ZFS n'accede donc pas directement au disque mais à la surcouche Perc pour le Raid0 single disque... et ça, il n'aime pas !

C'est aussi cela la grosse différente entre carte contrôleur HBA et Raid.
.... chez LSI distinction des cartes controleurs HBA et Megaraid

++
psycho-kila
Messages : 310
Inscription : ven. 12 janv. 2018 17:44

assemblage d\'un serveur, besoin de conseil

Message par psycho-kila »

dommage pour les perc, vu leurs prix c'etait avantageux.

enfin si je trouve un pont vers pci-x je met l'areca a la place de la perc 5i, je n'ai pas encore de perc 5e et je cherchais pas particulierement celle la mais juste une carte qui fait 8 ports externe :)
Avatar de l’utilisateur
augur1
Messages : 13167
Inscription : ven. 12 janv. 2018 17:44
Localisation : où tout est neuf et tout est sauvage
Contact :

assemblage d\'un serveur, besoin de conseil

Message par augur1 »

Areca, pas trop conseillé non plus pour du ZFS
.... enfin, pas toutes à priori : seules certaines serait viable avec ce système de fichier.

Les LSI ou IBM m1015 se trouvent à moins de 100 € pour 8 ports interne.
psycho-kila
Messages : 310
Inscription : ven. 12 janv. 2018 17:44

assemblage d\'un serveur, besoin de conseil

Message par psycho-kila »

il me semble que c'est celle la, j'attend la reception pour confirmer (acheté a chabu04)
http://www.newegg.com/Product/Product.a ... 6816131005

faudrait que je trouve un pont vers du pci-x deja, apres je pourrais tester :)
psycho-kila
Messages : 310
Inscription : ven. 12 janv. 2018 17:44

assemblage d\'un serveur, besoin de conseil

Message par psycho-kila »

l'areca est donc bien celle la :)
psycho-kila
Messages : 310
Inscription : ven. 12 janv. 2018 17:44

assemblage d\'un serveur, besoin de conseil

Message par psycho-kila »

bon voila donc ce qu'il me manque encore pour lancer le bouzin :

_ pont pci-e to pci-x ou carte d'extension infiniband avec un port pci-x
_ les DD SAS (en cours avec yullito et bbr241)
_ 1 (ou 2 suivant le nombre de port) carte jbod SAS, 8 port externe en directlink (en cours avec tadeus mais pas sur que ses 2 LSI sas3444E gerent le jbod :( )
_ 2 cable SFF-8088 (ou 8470 suivant la carte) vers 8482

l'histoire du pont pci-x m'inquiete un peu, vraiment galere a trouver...
Avatar de l’utilisateur
augur1
Messages : 13167
Inscription : ven. 12 janv. 2018 17:44
Localisation : où tout est neuf et tout est sauvage
Contact :

assemblage d\'un serveur, besoin de conseil

Message par augur1 »

LSI : déjà dit il me semble ...
psycho-kila
Messages : 310
Inscription : ven. 12 janv. 2018 17:44

assemblage d\'un serveur, besoin de conseil

Message par psycho-kila »

LSI : déjà dit il me semble ...
tu avais repondu sur les sas3442, il pensait que c'etait celle la, c'est en fait des sas3444e, et je ne trouve aucune info sur le net concernant le jbod pour cette carte
Avatar de l’utilisateur
augur1
Messages : 13167
Inscription : ven. 12 janv. 2018 17:44
Localisation : où tout est neuf et tout est sauvage
Contact :

assemblage d\'un serveur, besoin de conseil

Message par augur1 »

IBM SAS RAID Host Bus Adapter Controller Mfr P/N 25R8071
LSI LOGIC / IBM SAS PCI-E CONTROLLER 25R8071 SAS3444E

En IBM, elle dispose de 4x connecteurs SATA et d'un SAS externe ; en HP elle dispose d'1 connecteur SAS SFF 8484 et d'un SAS Externe
Elle est sous ref HBA donc gère le JBOD.

des toph en IBM : http://www.ebay.com/itm/LSI-Logic-IBM-2 ... 0852309560
plus de carac : http://www.scsi4me.com/ibm-25r8071-25r8060.html

la même en HP : http://www.ebay.com/itm/LSI-SAS3442E-HP ... RTM1062690

- -
psycho-kila
Messages : 310
Inscription : ven. 12 janv. 2018 17:44

assemblage d\'un serveur, besoin de conseil

Message par psycho-kila »

merci augur, je savais pas le coup du HBA :)
psycho-kila
Messages : 310
Inscription : ven. 12 janv. 2018 17:44

assemblage d\'un serveur, besoin de conseil

Message par psycho-kila »

bon il me manque plus grand chose je vais bientot pouvoir attaquer :)

_ le pont pci-e vers pci-x : je commence a desesperer donc si je trouve une carte jbod 12 ports sataII en pci-e a pas cher ca reglera le probleme.
_ 2x cable SFF-8088 vers 4x 8482, j'hesite encore a passer par un schema nettement plus pratique mais nettement plus couteux^^ :
cable 8088 to 8088 --> carte 8088 to 8087 --> cable 8087 to 4x 8482


j'ai pu tester pas mal de chose mais pas encore le ZFS pour lequel j'ai un peu de mal a bien cerner le tout, j'ai pas mal d'interrogation :

_ j'ai lu qu'il fallait eviter le raidZ1 pour les DD de plus d'1TB, c'est toujours d'actu ?

_ les DD SAS (os 146Gb) n'ont pas la meme capacité que les sata (data 2Tb), tout en raidZ par "grappe" de 3 DD, est il possible d'ajouter des raidZ avec des DD de capacité differentes a la meme pool ?

_ quel est l'interet de separer les logs sur un autre DD ? de quel maniere est ce geré si on ne les separe pas ?

_ dans la pratique ajouter un ssd en cache a t'il une difference notable en terme de performance ?

_ et le point ou je suis largué : la gestion avec ESXI, en partant sur un zfs sur ubuntu je vais etre obligé d'exclure un DD uniquement pour les 2 et ne pas pouvoir les placé sous un raidz non ?

pressé de le tester pour voir un peu tout ca :)
merci de vos reponses en tout cas (meme les indirectes cf: http://forum.setiaddicted.com/viewtopic.php?f=4&t=1638 :D)
psycho-kila
Messages : 310
Inscription : ven. 12 janv. 2018 17:44

assemblage d\'un serveur, besoin de conseil

Message par psycho-kila »

bon donc j'ai testé un peu tout ca et resolu la majorité de mes problemes :) :

_ le pont pci-e vers pci-x : [#FF0E00]trouvé une carte jbod. [/#FF0E00]
_ 2x cable SFF-8088 vers 4x 8482, [#FF0E00]trouvé et fonctionne bien, par contre si j'arrive a vendre ses 2 cables, je pense passer sur un schéma autre pour pouvoir me servir du backplane (entrées en sata) : cable 8088 to 8088 --> adptateur 8088 to 8087 --> cable 8087 to 4x sata [/#FF0E00]

_ j'ai lu qu'il fallait eviter le raidZ1 pour les DD de plus d'1TB, c'est toujours d'actu ? [#FF0E00]les 2Tb seront en raidZ2[/#FF0E00]

_ et le point ou je suis largué : la gestion avec ESXI, en partant sur un zfs sur ubuntu je vais etre obligé d'exclure un DD uniquement pour les 2 et ne pas pouvoir les placé sous un raidz non ? [#FF0E00]donc le combo ESXI/ZFS sera sur un sata 7K2 sur un port mobo, le ZFS sera géré par open indiana qui a l'air le plus stable :)[/#FF0E00]
il me reste donc plus que les cables a gerer et je met en application :)
psycho-kila
Messages : 310
Inscription : ven. 12 janv. 2018 17:44

assemblage d\'un serveur, besoin de conseil

Message par psycho-kila »

j'ai enfin recu les derniere piece donc je commence le montage du tout, je mettrais des photos au fur a mesure si ca interesse quelqu'un :)
psycho-kila
Messages : 310
Inscription : ven. 12 janv. 2018 17:44

assemblage d\'un serveur, besoin de conseil

Message par psycho-kila »

donc avec les prob de compatibilité entre carte raid / carte mere que j'ai, j'ai du penser a un autre schema.
vu que j'ai une machine sous garantie qui part pas et qui de toute facon partirait a un prix trop symbolique j'ai decidé de l'integré, ce qui m'arrange aussi car ca me donnera plus de liberté pour attribuer ram/core aux vm et plus de VM :)

voila donc ce que j'ai prevu coté hard : (en rouge ce qu'il me manque urgemment, en bleu il y a plus de temps)

_ Chassis AIC 3U :
_ mobo : supermicro X8SIE-O
_ CPU : Xeon X3430
_ RAM : 6x 2Gb DDR3 ecc reg ([#FF0E00]manque 4x 2Gb[/#FF0E00])
_ Alim : 3x 350W (total 650W)
_ carte raid : IBM M1015 ([#FF0E00]fw IT[/#FF0E00]) + LSI 3444E ([#FF0E00]fw IT[/#FF0E00]) + adaptec 2940UW (pour LTO)
_ DD sur mobo : 1x 160Go 7K2 (ESXI/OI/VM save) + 4x 160Go 5K4 (backup ESXI/OS - disque crypté - datastore iso OS - et je sais pas encore pour le 4eme^^)
_ DD sur M1015 : 8x 2To en raidz de 4DD ([#0000FF]manque 4 DD[/#0000FF])
_ DD sur 3444E : 4x 2To en raidz ([#0000FF]manque 4 DD[/#0000FF])

_ Chassis Supermicro 2U :
_ mobo : intel S1200BTLR
_ CPU : Xeon E3-1230 V2
_ Ram : 4x 4Gb DDR3 ecc
_ carte raid : ([#0000FF]manque carte PCI-E 8 port low profile[/#0000FF])
_ DD sur mobo : pas encore defini
_ DD sur carte raid : 7 sas 15K6 en raid 5 + 1 T10 en hot spare (toute les VM)


voila, dans l'immediat je fais le chassis AIC et je galere un peu avec le Fw de la M1015 (j'en suis a 5 machine sur lesquels ca n'a pas marché)

pour le chassis supermicro j'ai deja 2 prob a l'horizon :
_ la carte raid : j'ai une perc 5i masi elle est trop haute, le chassis n'accepte que des low profile, on trouve des hp P400 (512 Mb + BBU) a pas cher, vous savez ce qu'elle vaut ?
_ le power switch : connectique proprietaire, faut soit que je trouve un adaptateur soit le faire a la main pin par pin :)

je mettrais des photos le week end prochain
Avatar de l’utilisateur
biour
Messages : 24390
Inscription : ven. 12 janv. 2018 17:44

assemblage d\'un serveur, besoin de conseil

Message par biour »

_ la carte raid : j'ai une perc 5i masi elle est trop haute, le chassis n'accepte que des low profile, on trouve des hp P400 (512 Mb + BBU) a pas cher, vous savez ce qu'elle vaut ?

bha marche bien tu les trouve sur la bay avec le BBu pour 50 euro
par contre sous quel os? pasque sous ubuntu faut passer par la CLI et pas de GUI
et pour avoir cette cli faut suivre un tuto pour transformer le paquet et un autre pour le lancer car nvo kernel pas tip top compatible

sinon sous Win7 pas de soucis et y'a une GUI
Image
psycho-kila
Messages : 310
Inscription : ven. 12 janv. 2018 17:44

assemblage d\'un serveur, besoin de conseil

Message par psycho-kila »

euhh sous esxi avec un peu tout type d'os en VM.

j'ai lu un gars qui a fait un package modifié pour avoir le cli sur esxi 5
http://blog.campodoro.org/?p=325
Avatar de l’utilisateur
biour
Messages : 24390
Inscription : ven. 12 janv. 2018 17:44

assemblage d\'un serveur, besoin de conseil

Message par biour »

bha c'est bon alors
Image
Répondre