[Sondage] Boitier pour calcul CPU haut densitée

[TheMartel]

Bien le bonjour.

Dans mes idée folle, j’envisage de faire commerce de boitier pour faire du calcul CPU.
L'idée, c'est jusque 16CPU s2011 dans 3U (alimentation comprise), dans un boitier "propre", mais plutôt destiné a des gens près a mettre un peu les mains dedans. Les alims sont remplaçables facilement (extractibles a froid on va dire... enfin si on enlève l'alim tout coupe quoi), y a pas de redondance entre l'une et l'autre, il y a pas de backpane sur les cm (cul a l'air sur l'arrière, grille propre sur le devant), et l'alim des cm se connecte à l'alim sur un connecteur juste en dessous de son emplacement, grace a des connecteurs de ce type là:




Trois familles d'offres seraient dispo;

Nue
- le boitier avec les emplacement pour les 8 cartes meres et une alimentation de 2900W Platinum (350W/blade max).
- le boitier avec les emplacement pour les 8 cartes meres et deux alimentation de 2900W Platinum (700W par blade max).

- Les blades/tray pour les cartes meres, vendus a l'unité.

Barebone
- les memes options qu'au dessus, mais avec les cartes mères/rad fournies.

Clé en main
- le meme qu'au dessus, mais avec en plus CPU et ram et disques.


Pour avoir une idée, le boitier contient donc
- 2 emplacements alim (pas d'upgrade possible si le choix est fait d'une seule alim, sauf retour fournisseur pour upgrade, mais la puissance peut être répartie sur uniquement 4 blades), et les connecteurs pour envoyer le jus vers les cm.
- 8 emplacement pour les blades (plutôt des tray je dirais...)

Chaque blade a de quoi mettre une cm, une alimentation en 12V, trois turbines 4cm (à connecter sur la cm montée), et deux emplacement 2.5p.
Les emplacement cm sont prévus pour la gamme de carte mère supermicro twin, tous modèles confondus. Pas d’extension pciex possible (pas la place a priori... a voir sur le schéma final, et le surcout de conception). Il sera cependant aussi possible de placer une carte mere mitx et une alimentation 12V->ATX.

Le boitier avec les deux alim et les 8 tray cm pourrait être produit pour 600€ à 800€ environ.
Bien entendu, facture (sans recup de TVA possible au début, auto entreprise), et 6 mois de garantie extensibles via pépètes (max 2 ans). Matériel actif issu majoritairement du marché brocker.
Pensez vous que ce soit un marché attaquable? Par ce moyen là?

[TheMartel]

Pas d'avis sur mon super projet de la mort qui tue ?

[poulpito]

bah euh qui fait encore du calcul cpu maintenant réel cpu et non optimisation GPU
bah pas tant que ca de monde et pour le reste c'est le segment du HPC et la on tombe dans d'autre nécessité beaucoup plus pro
c'est un marché de niche jpense pas que ce sera très rentable tout ça

[dsebire]

moi je voyais plus ça comme des nœuds de cluster de virtu.
avec un gros SAN derrière pour le stockage de VM.

[TheMartel]

les utilisations sont multiples, en gros tout ce qui est demandeur de cpu.
Le segment visé c'est plus les petites boites, et/ou indépendants.
C'est pas trop mal aussi pour ceux qui louent des demies baies, faut juste trouver un fournisseur qui demande pas trop pour le Kw de jus.

ex: pour un boitier avec 4 noeuds en bi xeon 6/12 E5 et 32Go de ram/noeud (soit 96cHT et 128Go de ram) , on peut être sur du 3500€ tout compris avec 1 an de garantie.

[pastoufois]

bah euh qui fait encore du calcul cpu maintenant réel cpu et non optimisation GPU
bah pas tant que ca de monde et pour le reste c'est le segment du HPC et la on tombe dans d'autre nécessité beaucoup plus pro
c'est un marché de niche jpense pas que ce sera très rentable tout ça

Dans mon besoin de calcul, j'utilise uniquement les CPU pour l'alignement des photos.
Par la suite, le GPU peut prendre le relais jusqu'à 40/60 % je pense, mais les CPU sont fortement utilisés.

Donc le besoin en CPU est toujours présent.

[poulpito]

pour l'alignement de photo ? tu peux en dire plus
pour le non initié que je suis on dirait du boulot pour opencl ?
rien que par curiosité ca m'intéresse

[pastoufois]

voui c'est de l'opencl

j'utilise photoscan de agisoft.

je te laisse regarder un peu et si tu veux, tu peux me MP pour en discuter.

[Asbeste]

Nous on fait beaucoup de stitching (la majeur partie du temps pour des series de photos de 200MP, mais très régulièrement des 20GP), et les choix tout cpu ou tout gpu n'ont jamais été très concluants, l'argent est mieux investi en mixant CPU et GPU... Après c'est probablement aussi lié au soft...

tu vises un indépendant ou tpe, mais qui ferait quoi pour avoir besoin de 16x2011 ??? c'est hyper un marché de niche... Surtout que le client que tu vises il devra avoir besoin que son unité de calcul soit mise en datacenter (sinon il n'a que faire de la haute densité), ça réduit encore la cible...

En plus si c'est mis en datacenter c'est pas très compatible avec le coté "mains dans le cambouie"

Je pense que le besoin d'unités de calcul haute densité existe bien, mais que la cible n'est pas la bonne, ce besoin est trop peu présent sur les TPE

[augur1]

[quote]tu vises un indépendant ou tpe, mais qui ferait quoi pour avoir besoin de 16x2011 ??? c'est hyper un marché de niche... Surtout que le client que tu vises il devra avoir besoin que son unité de calcul soit mise en datacenter (sinon il n'a que faire de la haute densité), ça réduit encore la cible...

En plus si c'est mis en datacenter c'est pas très compatible avec le coté "mains dans le cambouie"

Je pense que le besoin d'unités de calcul haute densité existe bien, mais que la cible n'est pas la bonne, ce besoin est trop peu présent sur les TPE

[Asbeste]

Comme tu dis, c'est une cible hors DC, mais pour ce type de traitements et de domaines il y aura un peu d'équipement derrière, au minimum un SAN et deux-trois babioles, je ne pense pas que le form factor 3U soit décisif... C'est pas le besoin de puissance dont je doute, c'est la combinaison cible-puissance-densité-ergonomie-disponibilité qui me semble réduire les possibilités de vente du produit à un nombre de clients potentiels très réduits.

A mon avis plutôt que d'imaginer un produit et lui trouver une cible, il serait plus opportun de définir la cible et ses besoins, de définir le cahier des charge et d'adapter le produit et son prix en fonction...

[augur1]

Comme tu dis, c'est une cible hors DC, mais pour ce type de traitements et de domaines il y aura un peu d'équipement derrière, au minimum un SAN et deux-trois babioles, je ne pense pas que le form factor 3U soit décisif... C'est pas le besoin de puissance dont je doute, c'est la combinaison cible-puissance-densité-ergonomie-disponibilité qui me semble réduire les possibilités de vente du produit à un nombre de clients potentiels très réduits.

Nas plutôt que San.
Actuellement : 2x Bi xeon s2011 + 6x 4770k @4,2ghz pour du rendu Cinema 4D et After Effect... ca prend de la place en tour !

A mon avis plutôt que d'imaginer un produit et lui trouver une cible, il serait plus opportun de définir la cible et ses besoins, de définir le cahier des charge et d'adapter le produit et son prix en fonction...

C'est en effet la meilleure solution mais disposer d'un produit d'appel "vitrine" permet d'apater le client, lui montrer que c'est possible et de lui créer un besoin ; ensuite en découle d'autres possibilités

[biour]

heu et la conso d'un machin comme cela?
si @home paye l'onduleur et EDF vas bcp vous aimez

[poulpito]

c'est pas fait pour du @home ce genre de bestiolles
les boitiers 1.5U en L (tu mets deux machines en 3u)
avec 4 cpus intel et 32 dimms + l'interconnect le collègue m'a dit que c'était dans les 1kW/boitier donc grosso merdo 2kw/3U
je te laisse imaginer quand tu rempli de 8000 machines

[Asbeste]

Nas plutôt que San.
Actuellement : 2x Bi xeon s2011 + 6x 4770k @4,2ghz pour du rendu Cinema 4D et After Effect... ca prend de la place en tour !


C'est en effet la meilleure solution mais disposer d'un produit d'appel "vitrine" permet d'apater le client, lui montrer que c'est possible et de lui créer un besoin ; ensuite en découle d'autres possibilités

L'habitude (comme accessoirement j'enseigne dans une université qui a une licence pro audiovisuel, ça m'a permis d'avoir plusieurs clients dans le domaine) mes clients bossant essentiellement avec des SAN (xSAN pour la plupart)

Je ne pensait pas utiliser une série de tour comme form factor, je me disais qu'une petite boite de ce type a besoin d'une infra et a souvent une armoire 42" dans un coin, mettre 8 machines 2u (ou 1u si l'espace est un facteur important) bi-xeon s2011, ça devrait pas trop les déranger face à 1 machine 3U, c'est le coté hight-density pour le type de besoin ou je doute de l'intérêt, pas du coté rackable des machines (qui est essentiel au contraire)

D'accord avec toi pour le coté vitrine, mais là on est dans un autre but que de se demander si le produit est vendable...

[TheMartel]

300W par noeud en gros la conso.
J'ai bien noté toutes les remarques, merci d'y avoir passé un peu de temps
Le form factor réduit je pense que ça peux jouer pour une PME parisienne par exemple; ou clairement le max c'est une armoire 42U.
Quand on compte le reste de l’équipement (switchs, onduleurs, stockage, divers autre que calcul quoi), c'est très très vite rempli... et ça laisse pas la place a 8*1U en tout cas.

Ce qui est clair c'est que l’intérêt réside avant tout dans le prix de telles solutions: je ne crois pas que l'on puisse trouver un ratio perf/cout aussi bon ailleurs.

[SRay]

Bonjour,

Pourquoi ne pas faire une folie de la sorte ?
http://photos.imgix.com/racking-mac-pros

La, tu dois avoir une bonne puissance. Par contre, tu ne dois pas avoir la même consommation.

[TheMartel]

heu...
les mac pro actuels c'est du single socket 2011. Une daube sans nom pour le prix. Enfin si sa forme de poubelle montre bien son utilité: jeter ses thunes...
Sur mon système ce serait 16 sockets 2011 dans 3U, l'équivalent (hors CG) de 16 macpro actuels...et leur boitier fait 4U pour 4 machines. Autrement dit, sur un rack 42U, ils mettent 42 cpus; j'en met 224...
on joue pas dans la même cour quoi
Apres, ils ont également pour eux la cg incluse dans leur système, pour les calcul compatible c'est un beau gain de puissance. Je peux faire un design ou on peux mettre une cg relativement courte et single slot, mais le cout d’usinage du boitier augmente considérablement.
Niveau cout, le châssis 16cpu avec toutes les cartes, alimentations, cpu, ram, ... doit couté en gros équivalemment de deux macpro...

[levend]

Je reviens ici au sujet de la location, parce que dans ping-pong c'est un peu le bazard .
Ton idée n'est pas forcément mauvaise, j'avais un peu la même idée, il y a quelques années.
3D VF louait encore du matos pour le calcul, l'an dernier, donc pourquoi pas encore.
Je ne vais pas revenir sur le débat CPU/GPU, cependant une petite remarque : j'ai vu des fermes de calcul sur le net qui facture au ko, et non selon le temps de calcul.

[TheMartel]

au Ko, c'est a dire?

[kalistyan]

Tous nos prix sont basés sur une unité appelée "GigaHertz par heure" (GHz-H) : le coût d'un projet est basé sur le nombre de GHz-H utilisés pour le calculer.
Source : ici

[TheMartel]

c'est sur ça que je me base aussi.
Le problème est de pouvoir faire une estimation du temps de calcul nécessaire, non? Ou on laisse le client "estimer" son temps seul?

edit: l'estimateur de cout du site que tu as mis en lien ne prend en compte que le calcul d'image. mais c'est sans doute un bon moyen de procéder pour avoir une estimation...

[TheMartel]

je me penche un peu sur les os a mettre en place.
Il y a vraiment beaucoup de choses...
A l’époque des KII 600, on avait monté un petit truc avec des vieux pc avant la mise a la poubelle, dans les vielles salle info de la fac. Mais je me souviens surtout que c'était galère
Je privilégierai plutôt les système avec boot pxe, pour ne pas utiliser de disques sur les machines calcul, ça limitera les chances de casse et la conso sur les machines... (surtout avec des vieux disques...).

Mais j'ai du mal à voir vers quoi me tourner pour avoir un truc utilisable de manière un peu universelle, disons qu'au moins je sais plus ou moins ce qui permettrait de rendre le truc exploitable:
- possibilité de mix de configuration
- possibilité d'ajout de machines et de retrait de façon "dynamique" (enfin sans couper tout le cluster quoi)
- gestion de files d’attente priorisée (sur deux à trois niveaux). En gros une liste de taches gratuite en priorité basse, payante peu chère en priorité moyenne, payante chère en priorité haute.
- pas d'utilisation des disques locaux des machines de calcul (et disques retirés en vrai...)
- possibilité de traiter des images, du dessin et animation 3D, et du calcul scientifique.

[kalistyan]

https://www.rebusfarm.net/fr/fr-lets-go/calculator

[augur1]

https://www.rebusfarm.net/fr/fr-lets-go/calculator

utilisé par des boites de pub lors de modalisations 3D, dont celle pour L'Oreal (les rouges à lèvres ne sont pas de vrais objets dans leurs pubs ...)