Performance Probleme nach Mainboard Wechsel

[Tobi]

Hallo liebe deutschsprachige FreeNAS-Community!
Ich bin neu hier im Forum, "experimentiere" aber schon über ein Jahr mit FreeNAS rum.
Als jetzt die Nutzung von FreeNAS immer mehr und die Projekte ernster wurden, habe ich mir daher besser Hardware zugelegt. Leider habe ich seitdem einen Geschwindigkeitsverlust von ca. 20 Prozent. Zur besseren Nachvollziehbarkeit deshalb erstmal mein alter Setup, der so ohne Probleme über 1/2 Jahr lief:

- ASROCK B85M PRO4
- 1x 8GB Corsair Vengeance DDR3 Ram (PC1600, 16GB, CL9)
- Intel i3 4160T
- 5x Seagate Barracuda ST3000DM001 (3TB)
- KINGSTON SSD for the FreeNAS OS

Mit Hilfe von Crystal Disk Mark konnte ich für den alten Setup Geschwindigkeiten von ~>110MBytes/s ermitteln.
-----------------------------------------------------------------------

CrystalDiskMark 3.0.3 x64 (C) 2007-2013 hiyohiyo
Crystal Dew World : http://crystalmark.info/

-----------------------------------------------------------------------

* MB/s = 1,000,000 byte/s [SATA/300 = 300,000,000 byte/s]


Sequential Read : 111.348 MB/s
Sequential Write : 108.164 MB/s
Random Read 512KB : 107.333 MB/s
Random Write 512KB : 106.163 MB/s
Random Read 4KB (QD=1) : 10.894 MB/s [ 2659.6 IOPS]

Random Write 4KB (QD=1) : 10.744 MB/s [ 2623.0 IOPS]

Random Read 4KB (QD=32) : 106.244 MB/s [ 25938.5 IOPS]

Random Write 4KB (QD=32) : 94.075 MB/s [ 22967.5 IOPS]


Test : 100 MB [Z: 0.0% (0.0/10797.0 GB)] (x9)
Date : 2015/02/30 19:12:43
OS : Windows 8.1 (x64)

Nachdem ich mich mehr mit FreeNAS beschäftigt hatte, bin ich auf ein ECC fähiges System umgestiegen. Konkret musste ich Mainboard und RAM wechseln, der neue Server hatte also folgende Komponenten:
- ASROCK E3C226D2I
- 2x 8GB Kingston ValueRAM - DDR3 - 8 GB - DIMM 240-PIN - 1600 MHz / PC3-12800 - CL11
- Intel i3 4160T
- 5x Seagate Barracuda ST3000DM001 (3TB)
- KINGSTON SSD for the FreeNAS OS

Das große Problem ist, dass nach Wechsel von Mainboard + ECC die Übertragungsgeschwindigkeit massiv einbrach! Die folgenden Geschwindigkeiten stammen wieder aus Tests mit Crystal DM:
-----------------------------------------------------------------------
CrystalDiskMark 3.0.3 x64 (C) 2007-2013 hiyohiyo
Crystal Dew World : http://crystalmark.info/
-----------------------------------------------------------------------
* MB/s = 1,000,000 byte/s [SATA/300 = 300,000,000 byte/s]
Sequential Read : 88.156 MB/s
Sequential Write : 101.968 MB/s
Random Read 512KB : 86.019 MB/s
Random Write 512KB : 96.548 MB/s
Random Read 4KB (QD=1) : 10.618 MB/s [ 2592.2 IOPS]
Random Write 4KB (QD=1) : 8.377 MB/s [ 2045.2 IOPS]
Random Read 4KB (QD=32) : 88.400 MB/s [ 21582.0 IOPS]
Random Write 4KB (QD=32) : 88.580 MB/s [ 21626.0 IOPS]

Test : 100 MB [N: 0.0% (0.0/10797.0 GB)] (x9)
Date : 2015/06/03 16:04:00
OS : Windows 8.1 (x64)

Die Konfiguration und Version von FreeNAS war in beiden Fällen identisch oder ähnlich. Es wurden nur absolute 'basics' eingestellt (Nutzer/Gruppe, Volume, Dataset, CIFS).

Ich danke allen die mir weiterhelfen können schonmal für die Hilfe!

 

[Kurti2k]

Hi

evtl hat das neue board einen anderen onboard lan chipsatz ?

mfg marcel

 

[Ericloewe]

Hi

evtl hat das neue board einen anderen onboard lan chipsatz ?

mfg marcel

Hilft nicht, wenn die Hardware nicht defekt ist.

Die Intel i210s sind die besten (oder fast) GbE Kontroller, die es gibt. Etwas besser als die vorherige i217-V. Daran wird es also nicht liegen.

 

[xaibex]

Läuft FreeNAS denn nativ auf der Maschine?

Steht den Modus für den Sata Controller auf AHCI?

AHCI (Advanced Host Controller Interface) supports NCQ and other new features that will improve SATA disk performance but IDE mode does not have these advantages.

Quelle

Ist SATA Aggressive Link Power Management deaktiviert?

When enabled via the AHCI controller, this allows the SATA host bus adapter to enter a low-power state during periods of inactivity, thus saving energy. The drawback to this is increased periodic latency as the drive must be re-activated and brought back on-line before it can be used, and this will often appear as a delay to the end-user.

Quelle

was sagt zpool status?

 

[Tobi]

@xaibex
Weder AHCI noch Link Power Management scheinen das Problem zu sein...

 

[xaibex]

Lass mal bitte memtest86+ laufen und schau ob er irgendwelche speicherfehler erkennt.

Edit: hast du irgendwelche tunables gesetzt?

 

[Tobi]

Nach einer kurzen Zwangspause hatte ich jetzt endlich Zeit die Sache etwas genauer unter die Lupe zu nehmen...
Ich habe meinen Desktop PC (mit Intel Adapter Intel EXPI9301CT PRO1000) mit Ubuntu live gebootet und es dann nochmals mit iperf versucht.
Und siehe da:
Im Durchschnitt (ca. 15 Tests mit Standardparametern) waren über 940Mbit/s drin!
Die Testergebnisse waren insgesamt sehr konstant, es gab nur kleine Abweichungen (939 bis 944 Mbit/s).
Also wieder zurück zu Windows. Iperf gestartet, selbe Testparameter wie kurz zuvor in Linux und plötzlich lag der Durchschnitt kaum über 700Mbit/s!
Für mich sah das ganz klar nach einem Windows Treiberproblem des Intel Adapters aus. Der getestete onboard Realtek Anschluss hat aber fast die gleichen Werte ausgespuckt.
-> Das ist für mich dann nicht mehr als Treiberproblem zu erklären?!
Zur Sicherheit habe ich die Treiber von beiden Adaptern deinstalliert und nochmal neu installiert - komplett ohne Erfolg.
Als letzten Schritt habe ich auf einer derzeit unbenutzten Festplatte eine komplette Neuinstallation von Windows 8.1 durchgeführt und abermal iperf bemüht.
Selbst unter einem komplett neu installierten Windows war die Ethernet Durchsatzgeschwindigkeit nur bei ~700Mbit/s!
Ich hab absolut keine Idee mehr woran das liegen könnte...
freeNAS an sich bzw. der freeNAS Server scheiden aus, ebenso die Netzwerkinfrastruktur (Kabel + Switch + Desktop PC) da alle unter Linux vollen Ethernet Speed (>940Mbit/s) liefern konnten.

Hat irgendjemand auch nur die leiseste Ahnung woran der geringe Datendurchsatz unter Windows 8.1 in Verbindung mit dem Intel EXPI9301CT PRO1000 liegen könnte?
Nutzt irgendjemand die selbe Karte?

 

[xaibex]

Greifst du über smb auf deine freenas box zu?
Welches SMB Protokoll hast du hier unter freenas eingestellt? ich habe die erfahrung gemacht dass smb3 oft probleme macht.

 

[Tobi]

Nein über CIFS.
Wenn ich mich nicht täusche spielt das hier aber keine Rolle. Die Tests von Iperf setzen ja auf dem TCP (Protokoll) auf, d.h. beim Ethernet Geschwindigkeitstest wurden noch gar keine echten Dateien an freeNAS übertragen.

 

[xaibex]

smb ist sozusagen cifs
ich würde mal an deiner stelle das mit dem smb3 deaktivieren mal ausprobieren. Stattdessen mal auf SMB2_10 setzen. SMB3 wird nämlich ab Windows8 unterstützt und das ganze klingt für mich nach einem Protokollproblem zwischen freenas und Windows8.