PROJET: boot on lan sur DDRAM vive

Répondre
mosie
Messages : 3024
Inscription : ven. 12 janv. 2018 17:44

PROJET: boot on lan sur DDRAM vive

Message par mosie »

yop tout le monde. :pt1cable:

alors voila l'idée:

[#ff1c00]On: crée un DDram dans la ram vive de la z8pe d18 avec SuperSpeed RamDisk machin +.
restaure un system dans ce DDram.
partage sur le réseau ce volume.
interconnecte une SR2 a la z8pe par 2 contrôleur réseau pcie optique.
boot on lan avec la SR2 sur le DDram. [/#ff1c00]

Comme je vais recup gratis une Z8PE D18
Donc cela me motive bien pour faire ce montage.

Need juste 18X 8G DDR3 1333 pour fait un zolie volume de 140G (en cours avec bulba)
Et de 2 contrôleur optique pas trop cheros et bien perf.



La ou le problème ce pose pour moi c'est justement sur ces contrôleur optique / infiniband.
J' y connais que dalle. :pfff: Mais je conte bien apprendre et dompté ce matos.

Les besoin de l'interconnexion sont:
les débit max doive être autour des 2.5 3GB/s réel (débit max d un DDram vive = dans les 3 3.5GB/s) :)
Donc soi 2 contrôleur interconnecter par 1 simple câble soit 2 contrôleur bi-port (mis en ''raid'' interne, matériellement: par le firm de la carte; ou logiciel: genre une sorte de load-balancing).



Berf, si vous connais des cartes réseaux optique qui serai bien opti pour ce montage (et pas a 1.5K€) ...
Quel protocole et utiliser en boot on lan
réglages général interne au contrôleur (protocoles, IPoIB, Iscsi ... ) serai le plus opti.




Pour les perf et intérêt d'un tel system:
la monté en débit (et débit max) d'un système DDran vive, compensera (selon moi) la latence induite par les contrôleur réseau et le protocole lan.
Enfin, je pence que ce sera moins pire que des système ram interfacer en sata II. ;)
[#ff3800] Donc potentiellement plus que que mes 5 acard en raidO sur areca 1231ML, le 1880ix ne les supportant pas.[/#ff3800]
Plusieurs conf client pourrais accéder a plusieurs DDram avec Os différant. avec contrôleur mult ports et/ou switch.
Faciliter de bacup/restauration automatique des DDram depuis le système de la config serv.

Je ne ferai pas de dépense en ram / contrôleur IB, tant que les problème théorique, et que des tests pratique concluant et était fait. Quoi que ... :sarcastic:



Des test son en court avec:
[#001ce2]Larifounette avec du petit matos.
street mobo avec 2 SR2 et 2 contrôleur optique HP (qui Bsod sous win serv 2008 et 7)
moi même avec 2 SR2 en Ethernet.[/#001ce2]



[#ff1c00]MAJ:[/#ff1c00]

Coter matos:
Apré avoir potasser pas mal de PDF de contrôleur IB, je commence a y voir plus clair.
Donc les conclusion sont:


Tout les contrôleurs IB Mellanox sont compatible Windows par winOF : http://www.mellanox.com/content/pages.p ... section=41

Je vais surement partir sur ce modèle: http://cgi.ebay.com/ws/eBayISAPI.dll?Vi ... ink:top:en
Un seul port IB 40GBs ( QDR donc 4X10GBs en un seul port QSFP).
Un port IB DE 40GBs a en théorie la même bande passante qu'un port 8X 2.0 (4 GB/s) ce qui nous donne 2.3GB/s réel.
Il n'existe pas de contrôleur IB en PCIE 16x 2.0.
DONC Un seul port IB 40GBs suffis (en théorie). Car il y a de grande chance que la bande passante réel du contrôleur IB soit moins importante que celle du pcie 8X 2.0.





[#0000ff]
Si vous avais des question, avis, idée ...[/#0000ff] :)
Avatar de l’utilisateur
biour
Messages : 24453
Inscription : ven. 12 janv. 2018 17:44

PROJET: boot on lan sur DDRAM vive

Message par biour »

[#001ce2]Larifounette avec du petit matos.
[/#001ce2]
:??:
ha et de plus
**Dual Rank 8GB Reg DIMM do not test yet
Image
mosie
Messages : 3024
Inscription : ven. 12 janv. 2018 17:44

PROJET: boot on lan sur DDRAM vive

Message par mosie »

Pourquoi ?
Avatar de l’utilisateur
biour
Messages : 24453
Inscription : ven. 12 janv. 2018 17:44

PROJET: boot on lan sur DDRAM vive

Message par biour »

gaffe au rette que tu veu mettre dessus toutes pourraient ne pas passer
Image
mosie
Messages : 3024
Inscription : ven. 12 janv. 2018 17:44

PROJET: boot on lan sur DDRAM vive

Message par mosie »

a cause de quoi ? compatibilité, taille épaisseur, gestion de 144G ???
Avatar de l’utilisateur
X-System
Messages : 6848
Inscription : ven. 12 janv. 2018 17:44

PROJET: boot on lan sur DDRAM vive

Message par X-System »

"Dual Rank 8GB Reg DIMM do not test yet "

Ca veut dire qu'on ne sait pas si c'est compatible ou pas à cause de ne pas avoir testé pour valider.
PC1 = MW70-3S0 # 2x E5-2689 v4 # 32Go DDR4-2400 ECC reg # RTX 3080 Ti # 2x1To SSD
PC2 = Z170XP-SLI # i7-7700 # 32Go DDR4-2400 # 240Go NVMe # SAS9211-8i # 10 SSD/HDD SATA # LTO-5 SAS
PC3 = T460p # i7-6700HQ # 16Go DDR4-2133 # 940MX # 240Go SSD
Avatar de l’utilisateur
poulpito
Messages : 12402
Inscription : ven. 12 janv. 2018 17:44
Localisation : Grenoble

PROJET: boot on lan sur DDRAM vive

Message par poulpito »

compatibilité appairage fluctuant et cie
mosie
Messages : 3024
Inscription : ven. 12 janv. 2018 17:44

PROJET: boot on lan sur DDRAM vive

Message par mosie »

ben généralement ces module son vendu en kit.
Les CM son officiellement compatible full slot 8GB ( tout les module 8G son référencer dans la compatibility liste de la Z8PE) ...

Je voie pas ou serai le problème. http://fr.asus.com/Server_Workstation/S ... PED18/#QVL

Au pire des cas dans ce genre de CM on doit bien pouvoir repasser en mode single du dual Chanels, non ?

Je me demande aussi comment et gère le tri channels extended.



sinon si vous avais des idée de contrôleur optique ...
Avatar de l’utilisateur
poulpito
Messages : 12402
Inscription : ven. 12 janv. 2018 17:44
Localisation : Grenoble

PROJET: boot on lan sur DDRAM vive

Message par poulpito »

uhmm en optique giga ?
me semble pas qu'on puisse faire de l'agrega hardware et bootpxe avec
faudrait confirmer
tu as regardé du côté de l'infiniband cuivre ? (qui tatane nivau vitesse)
au boulot les cluster font du bootpxe sur IB mai je connais pas plus que ca
en plus comme pas trop utilisé on trouve a pas trop cher sur ebay (enfin quand je regardai pour monter un proto cluster mpi
mosie
Messages : 3024
Inscription : ven. 12 janv. 2018 17:44

PROJET: boot on lan sur DDRAM vive

Message par mosie »

infiniband oui, j'y est penser, en gros communication par protocol PCIE quoi.
Problème c'est que je doute que, en boot on lan, l'adaptateur infiniband ne sera pas géré comme un contrôleur réseau.
Donc pas de partage de DD sur le réseaux (vu qu'il faut crée un serv ...) de ce que je pense.

Apré vi, je suis curieux de savoir comment il gère ca, a ton taf: debit max, perf problème, chargement d'une image pour les client ou boot direct sur volume avec système ...
je ne penser pas que c'etait possible.

Clair que ca serai cool de rester en norme PCIE pour les transaction.


''hardware et bootpxe avec
faudrait confirmer"
+1
mosie
Messages : 3024
Inscription : ven. 12 janv. 2018 17:44

PROJET: boot on lan sur DDRAM vive

Message par mosie »

ha ben si:

''IPoIB (IP sur InfiniBand) qui présente une couche Ethernet au-dessus de l'infiniband et donc la possibilité de configurer un réseau IP sur les ports InfiniBand.''
http://fr.wikipedia.org/wiki/InfiniBand
Avec une sur-couche soft pour protocole réseau ca devrais être possible (ca va brider un poil les perf).


A voir si c'est possible de cumuler plusieurs port. Car 40Gb/s c'est un peut juste.


Edit: pas l'air d'y avoir beaucoup de contrôleur compatible win serv 2008.
gizmo78
Messages : 20567
Inscription : ven. 12 janv. 2018 17:44

PROJET: boot on lan sur DDRAM vive

Message par gizmo78 »

sans vouloir être désagréable mosie tu peux faire un effort sur l'écriture car ca devient dur à lire
mosie
Messages : 3024
Inscription : ven. 12 janv. 2018 17:44

PROJET: boot on lan sur DDRAM vive

Message par mosie »

je vais tenter. :)
Avatar de l’utilisateur
Larifounette
Messages : 7803
Inscription : ven. 12 janv. 2018 17:44
Localisation : Maine et Loire

PROJET: boot on lan sur DDRAM vive

Message par Larifounette »

Alors, Mosie veut faire ça :

Il veut que sont HDD Système soit un "ramdrive" qui sera situé sur un serveur.

Donc,
------------------------------------------------------------
Config 1
Serveur avec beaucoup de Ram sous windows serveur 2008

Config 2
Client avec ces périfériques qui boot sur le RamDrive du serveur.
-------------------------------------------------------------
En gros, il faut un truc du genre que le ramdrive du serveur soit visible dans le bios du client pour booter dessu.

Voili, voilà, au travail !
kalistyan
Messages : 14259
Inscription : ven. 12 janv. 2018 17:44
Localisation : LYON
Contact :

PROJET: boot on lan sur DDRAM vive

Message par kalistyan »

Etherboot/gPXE Wiki
gPXE is an open source (GPL) network bootloader. It provides a direct replacement for proprietary PXE ROMs, with many extra features such as DNS, HTTP, iSCSI, etc. Take a look at our Screenshots page and the HowTo Guides for some ideas of what we can do, and grab the code from our Download page.
La suite ici

Cela peut p'être aider... :ange:
Avatar de l’utilisateur
dsebire
Messages : 13191
Inscription : ven. 12 janv. 2018 17:44
Localisation : Loiret - entre la ville et les champs

PROJET: boot on lan sur DDRAM vive

Message par dsebire »

a mon avis, faut eviter le PXE tant que possible ! l'image sera montée en lecture seule. faudrait trouver un truc pour acceder a partir du BIOS a un volume iSCSI ou quelquechose d'approchant ;)

pas eu le temps de lire le truc de kali mais dans le résumé, ça a l'air pas mal.

edit après lecture:
How to boot from SAN
Boot from SAN is the process of booting from a remote disk, using a protocol such as iSCSI or AoE. It can be used to boot operating systems that do not generally support network booting, such as Windows Server 2003, Windows XP or Windows Vista.

Boot from SAN
Install direct to SAN
quel OS tu veux mettre sur la machine qui va booter sur le reseau ?
mosie
Messages : 3024
Inscription : ven. 12 janv. 2018 17:44

PROJET: boot on lan sur DDRAM vive

Message par mosie »

Obligatoirement un win 7 64 en client et win serv 2008 pour la config serv.

Pour le gPXE, cette fonction doit directement être implémenter dans le contrôleur ou bios.


Avatar de l’utilisateur
dsebire
Messages : 13191
Inscription : ven. 12 janv. 2018 17:44
Localisation : Loiret - entre la ville et les champs

PROJET: boot on lan sur DDRAM vive

Message par dsebire »

Obligatoirement un win 7 64 en client et win serv 2008 pour la config serv.

Pour le gPXE, cette fonction doit directement être implémenter dans le contrôleur ou bios.
donc pas de pb coté OS deja...

pourquoi dis-tu que gPXE doit etre flashé dans le controleur ?
tu peux booter le gPXE sur une clef USB puis le reste sur ton disk RAM...
mosie
Messages : 3024
Inscription : ven. 12 janv. 2018 17:44

PROJET: boot on lan sur DDRAM vive

Message par mosie »

ben le problème (selon ce que je comprend), c'est que je doute que gPXE puisse géré ou détecter nativement, l'émulation de protocole réseau du contrôleur infiniband.

Enfin deja je vais faire des test en simple réseau Ethernet.

A voir si en scriptan correctement le serv DHCP, on peut empêcher l utilisation du une image et forcer le boot de la conf client.


A voir aussi si il existe pas deja des contrôleur optique ou infiniband qui intégrerai dans leur firm une fonction de boot.



Merci de votre aide :)
kalistyan
Messages : 14259
Inscription : ven. 12 janv. 2018 17:44
Localisation : LYON
Contact :

PROJET: boot on lan sur DDRAM vive

Message par kalistyan »

Avoir aussi, si en scriptan correctement le serv DHCP, on peut empêcher l utilisation du une image et forcer le boot de la conf client.
Possible via l'adresse MAC. ;)
Avatar de l’utilisateur
dsebire
Messages : 13191
Inscription : ven. 12 janv. 2018 17:44
Localisation : Loiret - entre la ville et les champs

PROJET: boot on lan sur DDRAM vive

Message par dsebire »

+1 avec kali

pour les controleurs optiques qui integrent une focntion de boot, oui, j'en ai a la maison. et je pense que comme c'est du matos haut de gamme, ya des chances que ce soit plutot courrant contrirement au cartes LAN a 2frs
mosie
Messages : 3024
Inscription : ven. 12 janv. 2018 17:44

PROJET: boot on lan sur DDRAM vive

Message par mosie »

hmmm.

Tu aurai moyen de faire des test dsebire ?

genre avec un ti DD système secondaire, partager sur le réseau.
Avatar de l’utilisateur
dsebire
Messages : 13191
Inscription : ven. 12 janv. 2018 17:44
Localisation : Loiret - entre la ville et les champs

PROJET: boot on lan sur DDRAM vive

Message par dsebire »

non, par contre, je peux t'envoyer les 2 cartes pour test avec la fibre qui va entre 2
cartes PCI-X par contre, donc faut les cartes meres qui vont avec.
mosie
Messages : 3024
Inscription : ven. 12 janv. 2018 17:44

PROJET: boot on lan sur DDRAM vive

Message par mosie »

Merci bien pour ta propal. :)

erf, me reste plus grand chose en PCIX meme pci 32.

a voir avec Larifounette. en PCI 32 ca devrais le faire.
kalistyan
Messages : 14259
Inscription : ven. 12 janv. 2018 17:44
Localisation : LYON
Contact :

PROJET: boot on lan sur DDRAM vive

Message par kalistyan »

Windows OpenFabrics (WinOF) ici

IB Subtable

The IB Subtable, if present, contains values that are required for all SRP sessions running over Infiniband transport.
Répondre