[ESXi] Copie sur Datastore lent

Message par **kalistyan** » jeu. 22 sept. 2011 15:11

Tout d'abord, je tient à préciser que le problème à l'air connu... suffit de tapper "esxi datastore slow transfer" dans votre moteur de recherche favoris.

Pour ma part, impossible de dépasser les 5 Mo/s

dans les deux sens !

Tests réalisés sur différents datastore, à savoir :

Datastore local / Adaptec 2810SA (SATA)
80 Go
160 Go (RAID1)

Stockage virtualisé / LSI 3080X-R (SAS)
iSCSI / 146 Go 15k
NFS / 146 Go 15K

Les disques sont mappés en RDM via cette méthode ici

Copie réalisé comme ceci :

1. Via le client ESXi
2. Via VM Explorer de chez Trilead
3. Via FastSCP de chez Veeam
4. Via FTP

De votre côté, qu'est ce que sa donne ?

Message par **gizmo78** » jeu. 22 sept. 2011 15:23

les seules fois où j'ai utilisé de l'iscsi avec esxi j'ai jamais eu de problème de débit oO

t'as testé le nfs? normalement c'est plus pourri que l'iscsi mais bon ^^

en tout cas bonne chance

Message par **micha30000** » jeu. 22 sept. 2011 16:58

Chez nous ça a toujours marché... je drapalise histoire de connaitre le fin mot

Message par **Alucardfh** » jeu. 22 sept. 2011 18:25

Même sur les disque locaux ?

Sur une perc 6/i avec des dd SAS 300Go je tournai autour de 200Mo/s lecture/écriture en local.

Et sur une baie fiber channel et un lun de 5 disques en raid 5 c'était plus vers les 180Mo/s (la baie était pas toute jeune)

Sur mon nas (seagate blackarmor 400) en raid1 je suis autour de 80Mo/s lecture 60Mo/s en lecture en iSCSI.

Les mesures ont été fait dans une VM ubuntu avec fio (sequential read/write de 4 fichiers de 2Go avec des blocks de 128ko).

Pas de RDM par contre.

Tu en as besoin pour quoi en fait d'ailleurs du RDM ?

As tu testé de faire un wget directement sur un des datastores ?

Message par **kalistyan** » jeu. 22 sept. 2011 19:33

Même sur les disque locaux ?

... et oui.

Tu en as besoin pour quoi en fait d'ailleurs du RDM ?

Afin de pouvoir monter mes disques physique sur une VM Openfiler

As tu testé de faire un wget directement sur un des datastores ?

Non

Sur mon nas (seagate blackarmor 400) en raid1 je suis autour de 80Mo/s lecture 60Mo/s en lecture en iSCSI.
Les mesures ont été fait dans une VM ubuntu avec fio (sequential read/write de 4 fichiers de 2Go avec des blocks de 128ko).

VM à VM Linux

Code : Tout sélectionner

Client connecting to 192.168.100.130, TCP port 5001
TCP window size: 22.6 KByte (default)
------------------------------------------------------------
[  3] local 192.168.100.115 port 47035 connected with 192.168.100.130 port 5001
[ ID] Interval       Transfer     Bandwidth
[  3]  0.0- 1.0 sec  11.1 MBytes  93.3 Mbits/sec
[  3]  1.0- 2.0 sec  11.5 MBytes  96.5 Mbits/sec
[  3]  2.0- 3.0 sec  12.9 MBytes   108 Mbits/sec
[  3]  3.0- 4.0 sec  14.9 MBytes   125 Mbits/sec
[  3]  4.0- 5.0 sec  7.75 MBytes  65.0 Mbits/sec
[  3]  5.0- 6.0 sec  3.88 MBytes  32.5 Mbits/sec
[  3]  6.0- 7.0 sec  10.1 MBytes  84.9 Mbits/sec
[  3]  7.0- 8.0 sec  7.50 MBytes  62.9 Mbits/sec
[  3]  8.0- 9.0 sec  6.88 MBytes  57.7 Mbits/sec
[  3]  9.0-10.0 sec  9.50 MBytes  79.7 Mbits/sec
[  3] 10.0-11.0 sec  8.88 MBytes  74.4 Mbits/sec
[  3] 11.0-12.0 sec  7.00 MBytes  58.7 Mbits/sec
[  3] 12.0-13.0 sec  6.88 MBytes  57.7 Mbits/sec
[  3] 13.0-14.0 sec  5.62 MBytes  47.2 Mbits/sec
[  3] 14.0-15.0 sec  7.00 MBytes  58.7 Mbits/sec
[  3]  0.0-15.0 sec   132 MBytes  73.5 Mbits/sec

VM Linux à VM Windows Server 2K3

Code : Tout sélectionner

Client connecting to 192.168.100.90, TCP port 5001
TCP window size: 16.0 KByte (default)
------------------------------------------------------------
[  3] local 192.168.100.115 port 44097 connected with 192.168.100.90 port 5001
[ ID] Interval       Transfer     Bandwidth
[  3]  0.0- 1.0 sec  21.1 MBytes   177 Mbits/sec
[  3]  1.0- 2.0 sec  18.0 MBytes   151 Mbits/sec
[  3]  2.0- 3.0 sec  10.6 MBytes  89.1 Mbits/sec
[  3]  3.0- 4.0 sec  6.88 MBytes  57.7 Mbits/sec
[  3]  4.0- 5.0 sec  5.12 MBytes  43.0 Mbits/sec
[  3]  5.0- 6.0 sec  6.12 MBytes  51.4 Mbits/sec
[  3]  6.0- 7.0 sec  6.38 MBytes  53.5 Mbits/sec
[  3]  7.0- 8.0 sec  6.50 MBytes  54.5 Mbits/sec
[  3]  8.0- 9.0 sec  6.00 MBytes  50.3 Mbits/sec
[  3]  9.0-10.0 sec  7.25 MBytes  60.8 Mbits/sec
[  3] 10.0-11.0 sec  7.12 MBytes  59.8 Mbits/sec
[  3] 11.0-12.0 sec  5.38 MBytes  45.1 Mbits/sec
[  3] 12.0-13.0 sec  4.25 MBytes  35.7 Mbits/sec
[  3] 13.0-14.0 sec  5.88 MBytes  49.3 Mbits/sec
[  3] 14.0-15.0 sec  7.75 MBytes  65.0 Mbits/sec
[  3]  0.0-15.1 sec   124 MBytes  69.3 Mbits/sec

Message par **kalistyan** » jeu. 22 sept. 2011 20:32

Même soucis

sur un ESXi que je viens de monter...

Message par **Alucardfh** » jeu. 22 sept. 2011 21:46

Sur le nouveau ESXi t'as utilisé la même méthode pour créer le RDM ?

Il semble qu'il y ait quelque différences avec la méthode vmware: http://www.vmware.com/pdf/esx25_rawdevicemapping.pdf (fin du pdf)

Message par **kalistyan** » jeu. 22 sept. 2011 22:35

Sur le nouveau, suis en local...

Message par **Alucardfh** » ven. 23 sept. 2011 08:23

Hum, c'est étrange.

Tu peux décrire plus précisément la nouvelle config ?

Message par **kalistyan** » ven. 23 sept. 2011 08:56

Carte mère : Asus NCCH-DL (chip intel 875)
Processeur : Intel Xeon 3 Ghz
Réseau : On board Intel® PRO /1000 CT
Mémoire : 1 Go
Disque dur : 80 Go SATA

Certe petite config, mais pour tester une copie en local plus que suffisante...

Message par **micha30000** » ven. 23 sept. 2011 10:49

Tu as le même problème sur une config qui n'a rien à voir ? Y reste quoi d'identique ? La version d'ESX ? T'as vérifié les KB VMWare ?

Message par **kalistyan** » ven. 23 sept. 2011 11:03

Tu as le même problème sur une config qui n'a rien à voir ?

Exact, l'autre config :

Carte mère : Asus PP-DLW (chipset Intel 7505)
Processeur : Intel Xeon 2.8 Ghz
Réseau : On board Contrôleur Gigabit Ethernet Intel® 82540EM
Mémoire : 8 Go
OS : ESXi 3.5 Update 5 (installé sur une clé USB)
Contrôleur 1 : Adaptec 2810SA (SATA/PCI-X)
Contrôleur 2 : LSI 3080X-R (SAS/PCI-X)

Y reste quoi d'identique ?

Switch GS724T

La version d'ESX ?

Config ESXi 3.5 Update 3 sur la machine montée récement

T'as vérifié les KB VMWare ?

Pas spécialement, mais comme déjà dit le problème est connu... cf. ici et sur des configurations bcp plus balaise! :/

Message par **kalistyan** » ven. 23 sept. 2011 11:26

Je viens d'installer l'update 5 sur la seconde machine, même résultat... :/

Message par **gizmo78** » ven. 23 sept. 2011 11:27

essaye le 4?

Message par **kalistyan** » ven. 23 sept. 2011 12:05

32 bits sur la machine en 8 Go et pas suffisament de ram sur la config 64 bits... :/

Message par **micha30000** » ven. 23 sept. 2011 13:27

Attention à ton switch, c'est peut-être ton étranglement. Tu perds des paquets sur tes ports ?
PS: vlans, jumbo frames ou autre ? tes câbles sont en bon état ?

Message par **Alucardfh** » ven. 23 sept. 2011 14:56

En précisant ta version tu 'mas fait me souvenir d'un truc.

Les test que j'ai cités ont été effectué avec la version 4.1.

J'ai un DL760 G2 qui tourne sur ESXi 3.5 avec une baie SCSI MSA30 sur une smart array 6400 et 14 disques 73Go 10K en 2x7disques raid5.
Je tourne autour de 60Mo/s lecture 45Mo/s écriture (la batterie est hs donc cache désactivé).

J'ai aussi une baie MSA20 avec des disques SATA (samsumg F3 en 1To).
Lorsque j'avais branché la baie sur le ESXi je tournai autour de 6-8Mo/s toujours sur la 6400.

Maintenant la baie est connecté à un server 2k8 sur lequel elle tourne autour de 110Mo/s lecture et 90Mo/s écriture.

Je vois que tu n'as fait les tests qu'avec des disques SAS/sata, peut être que ESXi 3.5 à du mal à les gérer.

Message par **micha30000** » ven. 23 sept. 2011 15:18

ESX 3.5 gère très bien les disques SAS/SATA

Message par **Alucardfh** » ven. 23 sept. 2011 16:59

Disons que c'est la seule chose en commun qui m'ai sauté au yeux.

Mais après c'est vrai que ce serait étonnant.

Message par **kalistyan** » ven. 23 sept. 2011 19:16

Attention à ton switch, c'est peut-être ton étranglement. Tu perds des paquets sur tes ports ?

Code : Tout sélectionner

[  6] local 192.168.100.35 port 1153 connected with 192.168.100.30 port 5001
[  7]  0.0- 2.0 sec   123 MBytes  61.7 MBytes/sec
[  4] 28.0-30.0 sec  203051008 MBytes  101525504 MBytes/sec
[  4]  0.0-30.0 sec  4182556671 MBytes  139344239 MBytes/sec
[  6]  0.0- 2.0 sec   118 MBytes  59.0 MBytes/sec
[  7]  2.0- 4.0 sec   115 MBytes  57.7 MBytes/sec
[  6]  2.0- 4.0 sec   119 MBytes  59.3 MBytes/sec
[  7]  4.0- 6.0 sec   114 MBytes  57.1 MBytes/sec
[  6]  4.0- 6.0 sec   118 MBytes  59.2 MBytes/sec
[  7]  6.0- 8.0 sec   113 MBytes  56.4 MBytes/sec
[  6]  6.0- 8.0 sec   117 MBytes  58.4 MBytes/sec
[  7]  8.0-10.0 sec   113 MBytes  56.3 MBytes/sec
[  6]  8.0-10.0 sec   116 MBytes  58.2 MBytes/sec
[  7] 10.0-12.0 sec   112 MBytes  56.1 MBytes/sec
[  6] 10.0-12.0 sec   115 MBytes  57.7 MBytes/sec
[  7] 12.0-14.0 sec   111 MBytes  55.6 MBytes/sec
[  6] 12.0-14.0 sec   116 MBytes  58.2 MBytes/sec
[  7] 14.0-16.0 sec   112 MBytes  56.0 MBytes/sec
[  6] 14.0-16.0 sec   116 MBytes  57.9 MBytes/sec
[  7] 16.0-18.0 sec   110 MBytes  55.2 MBytes/sec
[  6] 16.0-18.0 sec   116 MBytes  57.8 MBytes/sec
[  7] 18.0-20.0 sec   114 MBytes  56.8 MBytes/sec
[  6] 18.0-20.0 sec   116 MBytes  57.8 MBytes/sec
[  7] 20.0-22.0 sec   113 MBytes  56.7 MBytes/sec
[  6] 20.0-22.0 sec   114 MBytes  57.2 MBytes/sec
[  7] 22.0-24.0 sec   110 MBytes  55.1 MBytes/sec
[  6] 22.0-24.0 sec   113 MBytes  56.6 MBytes/sec
[  7] 24.0-26.0 sec   113 MBytes  56.5 MBytes/sec
[  6] 24.0-26.0 sec   119 MBytes  59.6 MBytes/sec
[  7] 26.0-28.0 sec   115 MBytes  57.4 MBytes/sec
[  6] 26.0-28.0 sec   120 MBytes  59.9 MBytes/sec
[  7] 28.0-30.0 sec   115 MBytes  57.5 MBytes/sec
[  7]  0.0-30.1 sec  1712 MBytes  56.8 MBytes/sec
[  6] 28.0-30.0 sec   147 MBytes  73.3 MBytes/sec
[  6]  0.0-30.0 sec  1780 MBytes  59.3 MBytes/sec

Test réalisé entre deux postes physique via le switch...

PS: vlans, jumbo frames ou autre ? tes câbles sont en bon état ?

Non.

Message par **kalistyan** » ven. 23 sept. 2011 19:17

Disons que c'est la seule chose en commun qui m'ai sauté au yeux.

Chose commune, carte réseau Intel sur chacun des host/esxi...

Message par **kalistyan** » mar. 27 sept. 2011 01:00

Loin d'être au top

Edit :

Désactivation de l'interface réseau intégré à la carte mère.
Changement de slot PCI de la carte réseau Intel 1000 Pro (4 ports).
Test réalisé en local sur un RAID 1 de 146 Go en 15K
Trunk activé

Message par **djalex** » mar. 20 déc. 2011 13:54

Salut,

réponse un peu conne mais as tu essayer en utilisant 2 cartes réseaux physiques soit une pour les data normal et l'autre pour les accès disques

Message par **djalex** » mer. 21 déc. 2011 12:08

effectivement

Message par **X-System** » mer. 21 déc. 2011 14:59

Je dis que c'est extrêmement peu pour un disque dur 15k

RAID-1 = la performance d'un disque dur.