Petit projet perso en cours --> update 11/11/2016
- merlin2000fr
- Messages : 2140
- Inscription : ven. 12 janv. 2018 17:44
Petit projet perso en cours --> update 11/11/2016
Là pour l'instant j'installe mon esxi n°2
la paire de stoker on vera plus tard pour l'instant
la paire de stoker on vera plus tard pour l'instant
- merlin2000fr
- Messages : 2140
- Inscription : ven. 12 janv. 2018 17:44
Petit projet perso en cours --> update 11/11/2016
salut salut
je vais m'y remettre sur de la virtu sur l'un de mes deux esxi voir en cross sur les deux, un nas par esxi.
Faut que je finalise le deuxieme esxi, mon ssd est arrivé chez mon fournisseur local.
je vais m'y remettre sur de la virtu sur l'un de mes deux esxi voir en cross sur les deux, un nas par esxi.
Faut que je finalise le deuxieme esxi, mon ssd est arrivé chez mon fournisseur local.
- merlin2000fr
- Messages : 2140
- Inscription : ven. 12 janv. 2018 17:44
Petit projet perso en cours --> update 11/11/2016
Petit point du jour
Sur la partie du cluster esxi la base est prête
- cm supermicro x8dth-i
- 2 xeon L5530 avec ventirad cooler master evo tx3
- 16 go par nodes prévu de les up à 96 go
- 4 cartes (les 2 internes à la cm et 2 rajoutées)
- 1 ssd pour le swap des vm (samsung evo 850 120go)
- 1 hdd pour les sources iso (seagate 1to sata)
un ami va me preter un nas synology de deux disques gérant le iscsi
Sur la partie du cluster esxi la base est prête
- cm supermicro x8dth-i
- 2 xeon L5530 avec ventirad cooler master evo tx3
- 16 go par nodes prévu de les up à 96 go
- 4 cartes (les 2 internes à la cm et 2 rajoutées)
- 1 ssd pour le swap des vm (samsung evo 850 120go)
- 1 hdd pour les sources iso (seagate 1to sata)
un ami va me preter un nas synology de deux disques gérant le iscsi
- merlin2000fr
- Messages : 2140
- Inscription : ven. 12 janv. 2018 17:44
Petit projet perso en cours --> update 11/11/2016
Salut salut
mise à jour et état d'avancement du projet.
j'ai pu tester avec un petit synology, je me suis bien amusé avec.
Cela ma permit de voir mes erreurs sur le paramétrage des deux machines qui me servaient de test san/san , apres avoir changer les cm j'ai remis le couvert et en suis presque venu à bout. gg moi.
bon en l'état j'en suis :
- les test de basculement des ipv d'un nas vers l'autre.
- les test sur les paramétrage entre utiliser mes cartes raid hard et intégré iscsitarget ou monter un volume zfs puis iscsitarget.
- les test pour loger mon cluster esxi et hyper-v sur le cluster.
mise à jour et état d'avancement du projet.
j'ai pu tester avec un petit synology, je me suis bien amusé avec.
Cela ma permit de voir mes erreurs sur le paramétrage des deux machines qui me servaient de test san/san , apres avoir changer les cm j'ai remis le couvert et en suis presque venu à bout. gg moi.
bon en l'état j'en suis :
- les test de basculement des ipv d'un nas vers l'autre.
- les test sur les paramétrage entre utiliser mes cartes raid hard et intégré iscsitarget ou monter un volume zfs puis iscsitarget.
- les test pour loger mon cluster esxi et hyper-v sur le cluster.
- merlin2000fr
- Messages : 2140
- Inscription : ven. 12 janv. 2018 17:44
Petit projet perso en cours --> update 11/11/2016
Salut saut
J'ai presque enfin fini de monter mon cluster datacenter home made.
J'ai fini par remettre tout a plat avec les os que je pensais etre les plus compatible :
Principalement avec nas4free, centos 7, debian jessie, OMV
j'ai fini par prendre nas4free mon soucis avec etait qu il ne conservait pas ces paramétre d'initialisation master/eslave avec hast après une interruption électrique de la machine.
Je n'ai pas retenu debian jessie car il s'avère qu il y a un gros soucis avec la gestion des ivp car le modul pecemaker n'etait plus maintenu ou la livraison n'a pu etre intégré dans la version stable, chose qui pour moi devait impérative.
Je n'ai pas retenu OMV qui n'est pas sur la dernière base de debian cela m’embête beaucoup.
Je n'ai pas retenu centos je ne comprend pas trop leur manière de gérer les paramètre des cartes réseaux.
Donc au final il me restait freebsd ou nas4free qui en découlait et dont le développement est assez dynamique.
Je suis parti d'une version antédiluvienne en v9.0 puis j'ai fait les test en tentant les upgrade voir si mon soucis se resorblait ou pas, et au final une freesh install en v10.3 dernière mouture.
Il me reste un test a faire avec samba sur le coté lan, et l'iscsi coté serveur de virtu qui sera le client du datacenter maison^^
donc on pourra dire que mon DC maison est presque op a 99.99 %
J'ai presque enfin fini de monter mon cluster datacenter home made.
J'ai fini par remettre tout a plat avec les os que je pensais etre les plus compatible :
Principalement avec nas4free, centos 7, debian jessie, OMV
j'ai fini par prendre nas4free mon soucis avec etait qu il ne conservait pas ces paramétre d'initialisation master/eslave avec hast après une interruption électrique de la machine.
Je n'ai pas retenu debian jessie car il s'avère qu il y a un gros soucis avec la gestion des ivp car le modul pecemaker n'etait plus maintenu ou la livraison n'a pu etre intégré dans la version stable, chose qui pour moi devait impérative.
Je n'ai pas retenu OMV qui n'est pas sur la dernière base de debian cela m’embête beaucoup.
Je n'ai pas retenu centos je ne comprend pas trop leur manière de gérer les paramètre des cartes réseaux.
Donc au final il me restait freebsd ou nas4free qui en découlait et dont le développement est assez dynamique.
Je suis parti d'une version antédiluvienne en v9.0 puis j'ai fait les test en tentant les upgrade voir si mon soucis se resorblait ou pas, et au final une freesh install en v10.3 dernière mouture.
Il me reste un test a faire avec samba sur le coté lan, et l'iscsi coté serveur de virtu qui sera le client du datacenter maison^^
donc on pourra dire que mon DC maison est presque op a 99.99 %
Petit projet perso en cours --> update 11/11/2016
Si j'ai bien suivi, cela ronronne avec NAS4FREE ?
- merlin2000fr
- Messages : 2140
- Inscription : ven. 12 janv. 2018 17:44
Petit projet perso en cours --> update 11/11/2016
vi vi ca rononne mais c est un merdier à mettre en place
J'ai sur tout compris qu il ne fait pas le tester en virtu le cluster car il n'aime pas trop ca, sinon il est content Rosko ^^
J'ai sur tout compris qu il ne fait pas le tester en virtu le cluster car il n'aime pas trop ca, sinon il est content Rosko ^^
Petit projet perso en cours --> update 11/11/2016
Quand tu auras le temps, un petit tuto sur le fofo.
- merlin2000fr
- Messages : 2140
- Inscription : ven. 12 janv. 2018 17:44
Petit projet perso en cours --> update 11/11/2016
c'est prévu mais plus sur mon site avec un lien ici ^^
- merlin2000fr
- Messages : 2140
- Inscription : ven. 12 janv. 2018 17:44
Petit projet perso en cours --> update 11/11/2016
salut salut
un doute m'habite d'un coup
mon cluster est monté en full rj45 gigabit, mais la partie partage de stockage je pensais passer sur d'autre media (fc, infiniband)
sauf que je nage un peu dans les éléments qu il me faut, l'impératif c'est stabilité/débit/qualité/prix , possibilité de doubler ce réseau
environnement utilisés :
- nas4free
- esxi 5.5
- hyper-v 2012 et ou 2016
- proxmox
je le répète que se n'est que pour la partie partage de stockage. ^^
merci
un doute m'habite d'un coup
mon cluster est monté en full rj45 gigabit, mais la partie partage de stockage je pensais passer sur d'autre media (fc, infiniband)
sauf que je nage un peu dans les éléments qu il me faut, l'impératif c'est stabilité/débit/qualité/prix , possibilité de doubler ce réseau
environnement utilisés :
- nas4free
- esxi 5.5
- hyper-v 2012 et ou 2016
- proxmox
je le répète que se n'est que pour la partie partage de stockage. ^^
merci
Petit projet perso en cours --> update 11/11/2016
iscsi sur du cuivre, te prends pas la tête
Petit projet perso en cours --> update 11/11/2016
+1 sachant que le iscsi sur cuivre avec le 10G (donc pour toi le 1G avec au pire de l'agrégat de lien) est un grand classique des grosses infra
pas besoin d'aller chercher du fc ou de l'ib
pas besoin d'aller chercher du fc ou de l'ib
- merlin2000fr
- Messages : 2140
- Inscription : ven. 12 janv. 2018 17:44
Petit projet perso en cours --> update 11/11/2016
faut que je cogite ca
- augur1
- Messages : 13149
- Inscription : ven. 12 janv. 2018 17:44
- Localisation : où tout est neuf et tout est sauvage
- Contact :
Petit projet perso en cours --> update 11/11/2016
et un jour : GlusterFS ?
... https://jonarcher.info/2014/06/windows- ... able-data/
... https://jonarcher.info/2014/06/windows- ... able-data/
- merlin2000fr
- Messages : 2140
- Inscription : ven. 12 janv. 2018 17:44
Petit projet perso en cours --> update 11/11/2016
sous bsd , glusterfs , j'ai un doute
- merlin2000fr
- Messages : 2140
- Inscription : ven. 12 janv. 2018 17:44
Petit projet perso en cours --> update 11/11/2016
Salut salut
J'ai enfin fini mon projet de cluster
Voici la configuration principale.
[*]2 Box
-- 1 freebox en adsl pour l'instant
-- 1 livebox en adsl
[*]2 router sous pfsense en redondance
-- 2 wan (free + orange)
-- 1 lan
-- 1 synchro pf/pf
-- 1 wifi captif
[*]2 nas sous nas4free en redondance
-- 1 partage smb pour mes data perso
-- 1 partage iscsi pour vm esxi
-- 1 partage iscsi pour vm hyper-v
[*]2 serveurs de virtualisation sous esxi + 1 vcenter en mode HA+Vmotion
-- en liaison vers le nas/san sur iscsi
[*]2 serveurs de virtualisation sous hyper-v
-- en liaison vers le nas/san sur iscsi
[*]3 switch manageable
-- 1 de 24 ports > le réseau iscsi
-- 1 de 24 ports > le réseau lan-serveurs
-- 1 de 16 ports > le réseau lan-clients
[*] 2 ap wifi
-- mise en place d'un portail captif
pas simple à faire car cela cout un bras quand on part depuis 0 ou presque.
J'ai enfin fini mon projet de cluster
Voici la configuration principale.
[*]2 Box
-- 1 freebox en adsl pour l'instant
-- 1 livebox en adsl
[*]2 router sous pfsense en redondance
-- 2 wan (free + orange)
-- 1 lan
-- 1 synchro pf/pf
-- 1 wifi captif
[*]2 nas sous nas4free en redondance
-- 1 partage smb pour mes data perso
-- 1 partage iscsi pour vm esxi
-- 1 partage iscsi pour vm hyper-v
[*]2 serveurs de virtualisation sous esxi + 1 vcenter en mode HA+Vmotion
-- en liaison vers le nas/san sur iscsi
[*]2 serveurs de virtualisation sous hyper-v
-- en liaison vers le nas/san sur iscsi
[*]3 switch manageable
-- 1 de 24 ports > le réseau iscsi
-- 1 de 24 ports > le réseau lan-serveurs
-- 1 de 16 ports > le réseau lan-clients
[*] 2 ap wifi
-- mise en place d'un portail captif
pas simple à faire car cela cout un bras quand on part depuis 0 ou presque.
Petit projet perso en cours --> update 11/11/2016
Bravo !
Y a plus qu'à jouer avec maintenant !
Y a même pas de VLAN ? :d
Y a plus qu'à jouer avec maintenant !
Y a même pas de VLAN ? :d
- merlin2000fr
- Messages : 2140
- Inscription : ven. 12 janv. 2018 17:44
Petit projet perso en cours --> update 11/11/2016
salut salut
pour l'instant non pas de vlan dans un premier temps.
++
pour l'instant non pas de vlan dans un premier temps.
++
- merlin2000fr
- Messages : 2140
- Inscription : ven. 12 janv. 2018 17:44
Petit projet perso en cours --> update 11/11/2016
Salut salut
Bon je fais un petit retour sur l'avancé de mon projet.
J'ai fait l'acquisition d'un cluster Dell c6100 de 2u de haut en rack 19" ayant :
- une alim de 1100watts redondante.
- 4 node bi cpu xeon 55xx/56xx. de 1u de haut
-- 2 node avec esxi 16go ram , bi L5530
-- 2 node avec hyper-v 16go ram, bi L5520
Les liens iscsi node vers nas4free sont supers stables mêmes sur du 1gb je passerais bien sur du 10gb mais ca pique.
Le gros hic est le raffut que fait la ventilation de la bête.
Donc obligé de faire tourner cela que le jour de semaine (heure boulot) sinon je me fais presque mordre par la famille.
Si certain d'entre vous ont des machines bruyantes comme çà (environ 75+/- db) avez vous pu remplacer les ventilo par des truc moins assourdissant en 80*80 vers les 20db.
c'est un connecteur assez bizarre quand même il a 3+4 connecteur pour la liaison cm vers les ventilo.
Hormis le bruit, c'est plaisant de faire tourner ces machines, j'avais oublié qu'au moment ou les machines sont sollicitées les ventilo se mettent à tourner comme des malades la première fois cela surprend.
Donc en résumé
Il me reste à faire
Coté matos
-- économiser pour l'achat de mes disque de grande taille pour mes nas/san
-- monter les capacité ram des nodes passer de 16 non ecc à 64 ecc reg
-- trouver les 12 caddy 3"1/2.
-- trouver au mini 4 hdd sas/sata entre 146 et 300go à petit prix bien évidement.
-- trouver 2 switch administrable de 24 port mini
Coté soft une fois tous le matos trouvé et installé
-- réinitialiser mes pf (wan1, wan2, lan, dmz, wifi, synchro).
-- réinitialiser mes esxi.
-- réinitialiser mes hyper-v.
-- réinitialiser mes nas/san.
----- transfert final de mes data du home ciméma vers les nas pour synchro nas/nas.
----- paramétrer les volumes iscsi, (esxi, hyper-v, admin-windows).
----- paramétrer mes partage smb local.
Coté virtualisation
-- sur exsi monter les vm de production d'auto hébergement (j'hésite entre du full bsd ou du full linux ou du mixte)
-- sur hyper-v monter les vm windows d'administration des serveurs de virtualisation.
Voila voila pour l'évolution
Bon je fais un petit retour sur l'avancé de mon projet.
J'ai fait l'acquisition d'un cluster Dell c6100 de 2u de haut en rack 19" ayant :
- une alim de 1100watts redondante.
- 4 node bi cpu xeon 55xx/56xx. de 1u de haut
-- 2 node avec esxi 16go ram , bi L5530
-- 2 node avec hyper-v 16go ram, bi L5520
Les liens iscsi node vers nas4free sont supers stables mêmes sur du 1gb je passerais bien sur du 10gb mais ca pique.
Le gros hic est le raffut que fait la ventilation de la bête.
Donc obligé de faire tourner cela que le jour de semaine (heure boulot) sinon je me fais presque mordre par la famille.
Si certain d'entre vous ont des machines bruyantes comme çà (environ 75+/- db) avez vous pu remplacer les ventilo par des truc moins assourdissant en 80*80 vers les 20db.
c'est un connecteur assez bizarre quand même il a 3+4 connecteur pour la liaison cm vers les ventilo.
Hormis le bruit, c'est plaisant de faire tourner ces machines, j'avais oublié qu'au moment ou les machines sont sollicitées les ventilo se mettent à tourner comme des malades la première fois cela surprend.
Donc en résumé
Il me reste à faire
Coté matos
-- économiser pour l'achat de mes disque de grande taille pour mes nas/san
-- monter les capacité ram des nodes passer de 16 non ecc à 64 ecc reg
-- trouver les 12 caddy 3"1/2.
-- trouver au mini 4 hdd sas/sata entre 146 et 300go à petit prix bien évidement.
-- trouver 2 switch administrable de 24 port mini
Coté soft une fois tous le matos trouvé et installé
-- réinitialiser mes pf (wan1, wan2, lan, dmz, wifi, synchro).
-- réinitialiser mes esxi.
-- réinitialiser mes hyper-v.
-- réinitialiser mes nas/san.
----- transfert final de mes data du home ciméma vers les nas pour synchro nas/nas.
----- paramétrer les volumes iscsi, (esxi, hyper-v, admin-windows).
----- paramétrer mes partage smb local.
Coté virtualisation
-- sur exsi monter les vm de production d'auto hébergement (j'hésite entre du full bsd ou du full linux ou du mixte)
-- sur hyper-v monter les vm windows d'administration des serveurs de virtualisation.
Voila voila pour l'évolution
- augur1
- Messages : 13149
- Inscription : ven. 12 janv. 2018 17:44
- Localisation : où tout est neuf et tout est sauvage
- Contact :
Petit projet perso en cours --> update 11/11/2016
Good Job.
Sur tes expérimentations, je teste avec succès Nas4Free.
Sur tes expérimentations, je teste avec succès Nas4Free.
- merlin2000fr
- Messages : 2140
- Inscription : ven. 12 janv. 2018 17:44
Petit projet perso en cours --> update 11/11/2016
merci pour ce retour
nas4free est en faite assez simple à mettre en route meme avec en cluster
smb, iscsi, nfs sont associable sur une ipv ou plusieurs suivant l'architecture voulu.
y a qu'un truc qui me gene c'est qu'il y est d'ajouter virtualbox dans leur os. et l'autre chose est qu'il n'y est pas vraiment une interface de gestion du cluster (creation,administration,maintenance) des élément qui le compose comme le matériel, les services, et les addons.
A final, j'en suis content, et la prochaine version qui arrive la v11 m'a l'air d'être prometteur pour la correction de bug lattent de la v10 si j'en comprends bien le forum.
++
nas4free est en faite assez simple à mettre en route meme avec en cluster
smb, iscsi, nfs sont associable sur une ipv ou plusieurs suivant l'architecture voulu.
y a qu'un truc qui me gene c'est qu'il y est d'ajouter virtualbox dans leur os. et l'autre chose est qu'il n'y est pas vraiment une interface de gestion du cluster (creation,administration,maintenance) des élément qui le compose comme le matériel, les services, et les addons.
A final, j'en suis content, et la prochaine version qui arrive la v11 m'a l'air d'être prometteur pour la correction de bug lattent de la v10 si j'en comprends bien le forum.
++
Petit projet perso en cours --> update 11/11/2016
pourquoi utiliser hyper-v et esx? pour l'expérience?
- merlin2000fr
- Messages : 2140
- Inscription : ven. 12 janv. 2018 17:44
Petit projet perso en cours --> update 11/11/2016
Salut salut
l'expérience est un aspect, mais aussi pour la curiosité,
si j'arrive à tout mettre en place je pense par après monter la suite avec xen et proxmox.
Mais principalement pour l'aspect technique.
l'expérience est un aspect, mais aussi pour la curiosité,
si j'arrive à tout mettre en place je pense par après monter la suite avec xen et proxmox.
Mais principalement pour l'aspect technique.
Petit projet perso en cours --> update 11/11/2016
Y a un moment au il faut bien payer...et l'autre chose est qu'il n'y est pas vraiment une interface de gestion du cluster (creation,administration,maintenance) des élément qui le compose comme le matériel, les services, et les addons.