Petit projet perso en cours --> update 11/11/2016

Avatar de l’utilisateur
merlin2000fr
Messages : 2140
Inscription : ven. 12 janv. 2018 17:44

Petit projet perso en cours --> update 11/11/2016

Message par merlin2000fr »

Là pour l'instant j'installe mon esxi n°2

la paire de stoker on vera plus tard pour l'instant
kalistyan
Messages : 14259
Inscription : ven. 12 janv. 2018 17:44
Localisation : LYON
Contact :

Petit projet perso en cours --> update 11/11/2016

Message par kalistyan »

J'ai trouvé ton bonheur!
=> http://euronas.com/ha-cluster-r3/
HA Cluster - 2 Node / 16 TB / incl. 1 Year Gold Support
3.835.50€ :d
Il est dispo en mode évaluation. ;)

Download Form HA Cluster R3
This version of High-Availability (HA) Cluster R3 is fully functional until the 30th of June 2016 – during this period you will also receive free technical support. After the expiration – all services will be deactivated.

For the installation you will need a SSD, S-ATA or SAS drive (min. 8 GB)

The installation drive cannot be used for shares – for the shares you will need additional drives.

HA Cluster provides you real time mirror of 2 servers – you will need 2 servers or virtual machines for evaluati
Avatar de l’utilisateur
merlin2000fr
Messages : 2140
Inscription : ven. 12 janv. 2018 17:44

Petit projet perso en cours --> update 11/11/2016

Message par merlin2000fr »

salut salut

je vais m'y remettre sur de la virtu sur l'un de mes deux esxi voir en cross sur les deux, un nas par esxi.

Faut que je finalise le deuxieme esxi, mon ssd est arrivé chez mon fournisseur local.
Avatar de l’utilisateur
merlin2000fr
Messages : 2140
Inscription : ven. 12 janv. 2018 17:44

Petit projet perso en cours --> update 11/11/2016

Message par merlin2000fr »

Petit point du jour

Sur la partie du cluster esxi la base est prête
- cm supermicro x8dth-i
- 2 xeon L5530 avec ventirad cooler master evo tx3
- 16 go par nodes prévu de les up à 96 go
- 4 cartes (les 2 internes à la cm et 2 rajoutées)
- 1 ssd pour le swap des vm (samsung evo 850 120go)
- 1 hdd pour les sources iso (seagate 1to sata)

un ami va me preter un nas synology de deux disques gérant le iscsi
Avatar de l’utilisateur
merlin2000fr
Messages : 2140
Inscription : ven. 12 janv. 2018 17:44

Petit projet perso en cours --> update 11/11/2016

Message par merlin2000fr »

Salut salut

mise à jour et état d'avancement du projet.
j'ai pu tester avec un petit synology, je me suis bien amusé avec.
Cela ma permit de voir mes erreurs sur le paramétrage des deux machines qui me servaient de test san/san , apres avoir changer les cm j'ai remis le couvert et en suis presque venu à bout. gg moi.

bon en l'état j'en suis :
- les test de basculement des ipv d'un nas vers l'autre.
- les test sur les paramétrage entre utiliser mes cartes raid hard et intégré iscsitarget ou monter un volume zfs puis iscsitarget.
- les test pour loger mon cluster esxi et hyper-v sur le cluster.
Avatar de l’utilisateur
merlin2000fr
Messages : 2140
Inscription : ven. 12 janv. 2018 17:44

Petit projet perso en cours --> update 11/11/2016

Message par merlin2000fr »

Salut saut


J'ai presque enfin fini de monter mon cluster datacenter home made.
J'ai fini par remettre tout a plat avec les os que je pensais etre les plus compatible :
Principalement avec nas4free, centos 7, debian jessie, OMV
j'ai fini par prendre nas4free mon soucis avec etait qu il ne conservait pas ces paramétre d'initialisation master/eslave avec hast après une interruption électrique de la machine.
Je n'ai pas retenu debian jessie car il s'avère qu il y a un gros soucis avec la gestion des ivp car le modul pecemaker n'etait plus maintenu ou la livraison n'a pu etre intégré dans la version stable, chose qui pour moi devait impérative.
Je n'ai pas retenu OMV qui n'est pas sur la dernière base de debian cela m’embête beaucoup.
Je n'ai pas retenu centos je ne comprend pas trop leur manière de gérer les paramètre des cartes réseaux.

Donc au final il me restait freebsd ou nas4free qui en découlait et dont le développement est assez dynamique.
Je suis parti d'une version antédiluvienne en v9.0 puis j'ai fait les test en tentant les upgrade voir si mon soucis se resorblait ou pas, et au final une freesh install en v10.3 dernière mouture.

Il me reste un test a faire avec samba sur le coté lan, et l'iscsi coté serveur de virtu qui sera le client du datacenter maison^^

donc on pourra dire que mon DC maison est presque op a 99.99 %
kalistyan
Messages : 14259
Inscription : ven. 12 janv. 2018 17:44
Localisation : LYON
Contact :

Petit projet perso en cours --> update 11/11/2016

Message par kalistyan »

Si j'ai bien suivi, cela ronronne avec NAS4FREE ?
Avatar de l’utilisateur
merlin2000fr
Messages : 2140
Inscription : ven. 12 janv. 2018 17:44

Petit projet perso en cours --> update 11/11/2016

Message par merlin2000fr »

vi vi ca rononne mais c est un merdier à mettre en place

J'ai sur tout compris qu il ne fait pas le tester en virtu le cluster car il n'aime pas trop ca, sinon il est content Rosko ^^
kalistyan
Messages : 14259
Inscription : ven. 12 janv. 2018 17:44
Localisation : LYON
Contact :

Petit projet perso en cours --> update 11/11/2016

Message par kalistyan »

Quand tu auras le temps, un petit tuto sur le fofo. ;)
Avatar de l’utilisateur
merlin2000fr
Messages : 2140
Inscription : ven. 12 janv. 2018 17:44

Petit projet perso en cours --> update 11/11/2016

Message par merlin2000fr »

c'est prévu mais plus sur mon site avec un lien ici ^^
Avatar de l’utilisateur
merlin2000fr
Messages : 2140
Inscription : ven. 12 janv. 2018 17:44

Petit projet perso en cours --> update 11/11/2016

Message par merlin2000fr »

salut salut

un doute m'habite d'un coup
mon cluster est monté en full rj45 gigabit, mais la partie partage de stockage je pensais passer sur d'autre media (fc, infiniband)

sauf que je nage un peu dans les éléments qu il me faut, l'impératif c'est stabilité/débit/qualité/prix , possibilité de doubler ce réseau

environnement utilisés :
- nas4free
- esxi 5.5
- hyper-v 2012 et ou 2016
- proxmox

je le répète que se n'est que pour la partie partage de stockage. ^^

merci
gizmo78
Messages : 20049
Inscription : ven. 12 janv. 2018 17:44

Petit projet perso en cours --> update 11/11/2016

Message par gizmo78 »

iscsi sur du cuivre, te prends pas la tête
Avatar de l’utilisateur
poulpito
Messages : 12402
Inscription : ven. 12 janv. 2018 17:44
Localisation : Grenoble

Petit projet perso en cours --> update 11/11/2016

Message par poulpito »

+1 sachant que le iscsi sur cuivre avec le 10G (donc pour toi le 1G avec au pire de l'agrégat de lien) est un grand classique des grosses infra :)
pas besoin d'aller chercher du fc ou de l'ib
Avatar de l’utilisateur
merlin2000fr
Messages : 2140
Inscription : ven. 12 janv. 2018 17:44

Petit projet perso en cours --> update 11/11/2016

Message par merlin2000fr »

faut que je cogite ca
Avatar de l’utilisateur
augur1
Messages : 13147
Inscription : ven. 12 janv. 2018 17:44
Localisation : où tout est neuf et tout est sauvage
Contact :

Petit projet perso en cours --> update 11/11/2016

Message par augur1 »

Avatar de l’utilisateur
merlin2000fr
Messages : 2140
Inscription : ven. 12 janv. 2018 17:44

Petit projet perso en cours --> update 11/11/2016

Message par merlin2000fr »

sous bsd , glusterfs , j'ai un doute
Avatar de l’utilisateur
merlin2000fr
Messages : 2140
Inscription : ven. 12 janv. 2018 17:44

Petit projet perso en cours --> update 11/11/2016

Message par merlin2000fr »

Salut salut

J'ai enfin fini mon projet de cluster

Voici la configuration principale.
[*]2 Box
-- 1 freebox en adsl pour l'instant
-- 1 livebox en adsl
[*]2 router sous pfsense en redondance
-- 2 wan (free + orange)
-- 1 lan
-- 1 synchro pf/pf
-- 1 wifi captif
[*]2 nas sous nas4free en redondance
-- 1 partage smb pour mes data perso
-- 1 partage iscsi pour vm esxi
-- 1 partage iscsi pour vm hyper-v
[*]2 serveurs de virtualisation sous esxi + 1 vcenter en mode HA+Vmotion
-- en liaison vers le nas/san sur iscsi
[*]2 serveurs de virtualisation sous hyper-v
-- en liaison vers le nas/san sur iscsi
[*]3 switch manageable
-- 1 de 24 ports > le réseau iscsi
-- 1 de 24 ports > le réseau lan-serveurs
-- 1 de 16 ports > le réseau lan-clients
[*] 2 ap wifi
-- mise en place d'un portail captif

pas simple à faire car cela cout un bras quand on part depuis 0 ou presque.
kalistyan
Messages : 14259
Inscription : ven. 12 janv. 2018 17:44
Localisation : LYON
Contact :

Petit projet perso en cours --> update 11/11/2016

Message par kalistyan »

Bravo ! :sol:

Y a plus qu'à jouer avec maintenant ! :whistle:

Y a même pas de VLAN ? :d
Avatar de l’utilisateur
merlin2000fr
Messages : 2140
Inscription : ven. 12 janv. 2018 17:44

Petit projet perso en cours --> update 11/11/2016

Message par merlin2000fr »

salut salut

pour l'instant non pas de vlan dans un premier temps.

++
Avatar de l’utilisateur
merlin2000fr
Messages : 2140
Inscription : ven. 12 janv. 2018 17:44

Petit projet perso en cours --> update 11/11/2016

Message par merlin2000fr »

Salut salut


Bon je fais un petit retour sur l'avancé de mon projet.

J'ai fait l'acquisition d'un cluster Dell c6100 de 2u de haut en rack 19" ayant :
- une alim de 1100watts redondante.
- 4 node bi cpu xeon 55xx/56xx. de 1u de haut
-- 2 node avec esxi 16go ram , bi L5530
-- 2 node avec hyper-v 16go ram, bi L5520

Les liens iscsi node vers nas4free sont supers stables mêmes sur du 1gb je passerais bien sur du 10gb mais ca pique.

Le gros hic est le raffut que fait la ventilation de la bête.
Donc obligé de faire tourner cela que le jour de semaine (heure boulot) sinon je me fais presque mordre par la famille.
Si certain d'entre vous ont des machines bruyantes comme çà (environ 75+/- db) avez vous pu remplacer les ventilo par des truc moins assourdissant en 80*80 vers les 20db.
c'est un connecteur assez bizarre quand même il a 3+4 connecteur pour la liaison cm vers les ventilo.

Hormis le bruit, c'est plaisant de faire tourner ces machines, j'avais oublié qu'au moment ou les machines sont sollicitées les ventilo se mettent à tourner comme des malades la première fois cela surprend.

Donc en résumé
Il me reste à faire

Coté matos
-- économiser pour l'achat de mes disque de grande taille pour mes nas/san
-- monter les capacité ram des nodes passer de 16 non ecc à 64 ecc reg
-- trouver les 12 caddy 3"1/2.
-- trouver au mini 4 hdd sas/sata entre 146 et 300go à petit prix bien évidement.
-- trouver 2 switch administrable de 24 port mini

Coté soft une fois tous le matos trouvé et installé
-- réinitialiser mes pf (wan1, wan2, lan, dmz, wifi, synchro).
-- réinitialiser mes esxi.
-- réinitialiser mes hyper-v.
-- réinitialiser mes nas/san.
----- transfert final de mes data du home ciméma vers les nas pour synchro nas/nas.
----- paramétrer les volumes iscsi, (esxi, hyper-v, admin-windows).
----- paramétrer mes partage smb local.

Coté virtualisation
-- sur exsi monter les vm de production d'auto hébergement (j'hésite entre du full bsd ou du full linux ou du mixte)
-- sur hyper-v monter les vm windows d'administration des serveurs de virtualisation.

Voila voila pour l'évolution
Avatar de l’utilisateur
augur1
Messages : 13147
Inscription : ven. 12 janv. 2018 17:44
Localisation : où tout est neuf et tout est sauvage
Contact :

Petit projet perso en cours --> update 11/11/2016

Message par augur1 »

Good Job.

Sur tes expérimentations, je teste avec succès Nas4Free. :jap:
Avatar de l’utilisateur
merlin2000fr
Messages : 2140
Inscription : ven. 12 janv. 2018 17:44

Petit projet perso en cours --> update 11/11/2016

Message par merlin2000fr »

merci pour ce retour

nas4free est en faite assez simple à mettre en route meme avec en cluster
smb, iscsi, nfs sont associable sur une ipv ou plusieurs suivant l'architecture voulu.

y a qu'un truc qui me gene c'est qu'il y est d'ajouter virtualbox dans leur os. et l'autre chose est qu'il n'y est pas vraiment une interface de gestion du cluster (creation,administration,maintenance) des élément qui le compose comme le matériel, les services, et les addons.

A final, j'en suis content, et la prochaine version qui arrive la v11 m'a l'air d'être prometteur pour la correction de bug lattent de la v10 si j'en comprends bien le forum.

++
yahaha
Messages : 1831
Inscription : ven. 12 janv. 2018 17:44
Localisation : Bruxelles

Petit projet perso en cours --> update 11/11/2016

Message par yahaha »

pourquoi utiliser hyper-v et esx? pour l'expérience?
Avatar de l’utilisateur
merlin2000fr
Messages : 2140
Inscription : ven. 12 janv. 2018 17:44

Petit projet perso en cours --> update 11/11/2016

Message par merlin2000fr »

Salut salut

l'expérience est un aspect, mais aussi pour la curiosité,
si j'arrive à tout mettre en place je pense par après monter la suite avec xen et proxmox.

Mais principalement pour l'aspect technique.
kalistyan
Messages : 14259
Inscription : ven. 12 janv. 2018 17:44
Localisation : LYON
Contact :

Petit projet perso en cours --> update 11/11/2016

Message par kalistyan »

et l'autre chose est qu'il n'y est pas vraiment une interface de gestion du cluster (creation,administration,maintenance) des élément qui le compose comme le matériel, les services, et les addons.
Y a un moment au il faut bien payer...
Répondre