Server

Bundkort / CPU d.  17. juli. 2013, skrevet af GUD
Vist: 1408 gange.

GUD
 
Overclocker
Tilføjet:
17-07-2013 21:22:48
Svar/Indlæg:
58/3
Hej
Jeg står og skal bygge en ny server i en Lian Li PC-D8000.
Jeg kigger derfor efter et nyt MB, CPU, PSU og RAM. Jeg har 27x3tb hdds der skal være i raid6 (HW/SW?), hvor jeg tænker jeg skal bruge 3 IBM ServeRAID M1015, samt 6 LSI Serial Attached SCSI (SAS) internt kabel. Så mangler derfor noget udstyr der kan klare det? Tænker i3, men resten er jeg lidt lost på? Nogen ideer, så det bare spiller. Det meste af tiden står det i idle mode, men er oppe 24/7. Og hvilken PSU kan klare dette?
Håber nogen kan hjælpe mig lidt på vej.
På forhånd tak


Tråden blev redigeret 1 gang, sidst af GUD d. 17-07-2013 21:24:56.
freak_master
 
Redaktør
Tilføjet:
17-07-2013 21:33:06
Svar/Indlæg:
6368/477
Med den data mængde skal du op i noget Xeon istedet, ellers får du absolut intet ud af hastigheden på diskene.

Lidt ala den her:
http://www.edbpriser.dk/proces...

http://www.edbpriser.dk/bundko...

http://www.edbpriser.dk/ram/co...

Sjovt nok er Corsair Dominator RAM de billigste 8GB der er at finde. Men det går vel nok også 😛


GUD
 
Overclocker
Tilføjet:
17-07-2013 21:36:39
Svar/Indlæg:
58/3
Det er ikke for lidt ram? Og hvad ville du anbefale med PSU? Og de IBM controllers jeg kigger på er ganske okay til formålet? Både HW og SW?
Tænker også PCI speed, og måske gerne med ekstra af dem, da jeg muligvis kunne tænke mig at udvide.
Tak for svaret btw.


Svaret blev redigeret 1 gang, sidst af GUD d. 17-07-2013 21:38:09.


elvisdk
 
Superbruger
Tilføjet:
17-07-2013 21:44:57
Svar/Indlæg:
21/7
IBM ServeRAID M1015 er absolut ikke anbefalelses værdig til RAID5/6 (ved tilkøb af option-key)

Den performer ganske rædsomt ved paritets beregninger.

Hvad er budgettet for raid controlleren ?


Svaret blev redigeret 1 gang, sidst af elvisdk d. 17-07-2013 21:45:18.


Swayde
 
Elitebruger
Tilføjet:
17-07-2013 21:45:55
Svar/Indlæg:
2246/14
har du overvejet raidz2 ?
Du bør ikke have mere end en 5-7 diske i en pool/raid.
IMO så er kravene til HW ikke så slemme. Hvis ikke du skal flytte data over mere end et eller to GBIT links så er en langsom cpu rigeligt.
Min 3800x2 64-bit dualcore kan køre et raidz1 med sustained 1gbit/s (ca 100MB/s i praksis), det er med 2GB DDR 400 ECC ram, så overhovedet ikke noget fartmonster.
Når min xeon e3-1230 flytter alt det data den kan (disk/net begrænset til under 200MB/s, raidz1) så kan man dårligt se på loadkurven at den laver noget.


Svaret blev redigeret 1 gang, sidst af Swayde d. 17-07-2013 21:47:35.


MadsAG
 
Elitebruger
Tilføjet:
17-07-2013 21:49:22
Svar/Indlæg:
5421/53
Ved raidz vil jeg dog anbefale 1 GB ram pr TB, så du skal nok maxe dit board hvis du vælger et desktop bundkort 😛


GUD
 
Overclocker
Tilføjet:
17-07-2013 21:50:57
Svar/Indlæg:
58/3
Som sådan er budgettet unlimited, bare læst, at de IBM klare fint nok ved software raid. Jeg tænker raid6, da jeg er sikker på at intet data går tabt. Det er ikke meget data der skal flyttes rundt. Men som sagt, vil have noget der spiller, og i fremtiden skal kunne udvides med 5-20 diske, alt efter hvordan jeg får udvidet kabinet. Det er på en 90/90mbit linje, så der skal ikke tænkes på SSD diske ved Gbit. Men tænker også PSU? Noget der spiller, og heller ikke skal udskiftes pga. man adder flere diske.
Tak for svarene :)


GUD
 
Overclocker
Tilføjet:
17-07-2013 21:52:40
Svar/Indlæg:
58/3
Havde også tænkt raidz, men vidste godt det krævede flere ram. Men det er også en mulighed. Men skal bare have det bedste udstyr der kan tåle det, samt klare at man udvider det.


Swayde
 
Elitebruger
Tilføjet:
17-07-2013 22:02:23
Svar/Indlæg:
2246/14
Som sagt er det BS at raidz kræver meget ram/cpu. Hvis ikke man skal over 1GB/s er det ikke noget problem (trust me - jeg har testet).
Jeg har selv 2x m1015 som HBA til raidz. Det klarer de fint. 8 porte pr kort er en god begyndelse. 4 af dem er sikkert fint til dit behov. Hvis du køber m1015 kort så er din eneste mulighed software raid, de der knapper man kan installere er bare software raid i driveren. Det er en bedre idé at bruge Lin/win/indiana/..'s indbyggede softraid, så kan du flytte diskene mellem controllere/computere uden problemer.
Ulempen ved raidz er at det pt. ikke er så gode muligheder for at lave spindown på diskene - men det ved jeg ikke engang om du synes er en god idé.


Svaret blev redigeret 1 gang, sidst af Swayde d. 17-07-2013 22:03:05.


GUD
 
Overclocker
Tilføjet:
17-07-2013 22:05:51
Svar/Indlæg:
58/3
Skal man ikke. Men tænker måske et "større" MB, så jeg har flere muligheder. Og så mangler jeg stadig et svar på PSU? Og det skal være sådan, at jeg kan, når en HDD er død, tage den ud, smide en ny en i, og så genskabe det tabte osv. Men i #1 anbefaler er ganske okay? Selv om jeg troede der skulle flere RAM til.
Tak for svarene :)


Swayde
 
Elitebruger
Tilføjet:
17-07-2013 22:19:19
Svar/Indlæg:
2246/14
Jeg ved ikke med PSU. Umiddelbart vil jeg tage en god 80+ platinium, da den skal være tændt 24/7 betyder det jo en del.
I gamle dage sagde man at man skulle regne med ca 30 W til hver disk ved start, men hvis du bruger staggered spin-up hjælper det rigtig meget. 27x30 = 810W, kun til diske ved spin-up. Ved staggered mener jeg at hvert kort starter sine diske hver for sig, så det er ca. 8x30W = 240W.
Det i #1 kommer lidt an på om du vil have alle diskene på m1015, så er der for få pci-e porte (med softraid kan du selvfølgelig godt bruge portene på MB'et - men der har været nogle rapporter om problemer).
Jeg ville tage en e3-1235 v2 i stedet. Den koster 100 kr mere men har hyperthreading, yder ca. 15% bedre og bruger mindre el.
Mit supermicro x9scl-f har småproblemer med at have mere end et par m1015, så det kan ikke anbefales.

EDIT:
med MB kan et intel 1200 nok bruges (det er EOL) :
http://www.edbpriser.dk/bundko...


Svaret blev redigeret 3 gange, sidst af Swayde d. 17-07-2013 22:30:36.


MadsAG
 
Elitebruger
Tilføjet:
17-07-2013 22:20:21
Svar/Indlæg:
5421/53
Det går jo an på hvad du beslutter dig for.

Min raidz2 NAS med 6x2TB diske har 16 GB ram. Som sagt, raidz kræver ram for at performe godt - men har det så de ram til rådighed det skal bruge, så er det utrolig hurtigt.

Jeg ville klart vælge software raid, alt andet er noget bøvl, når du pludselig mister en raid controller osv.


Swayde
 
Elitebruger
Tilføjet:
17-07-2013 22:22:05
Svar/Indlæg:
2246/14
#11 definér performe godt ?


MadsAG
 
Elitebruger
Tilføjet:
17-07-2013 22:26:29
Svar/Indlæg:
5421/53
#12 Det modsatte af et performe dårligt - som 81 TB presset ned over raidz3 med 2 GB ram.


#14
GUD
 
Overclocker
Tilføjet:
17-07-2013 22:27:35
Svar/Indlæg:
58/3
Så jeg skal op og kigge på en PSU på 1000W? Nogle af diskene ender jo nok på SATA porte fra MB af. Tænker også selv software raid, og igen lige nu er budgette unlimited, self. inde for rimeligheds grænser :) men et MB med flere PCI gør ikke noget, måske noget ikke desktop som #5 skriver? Men har ikke den store forstand på det, desværre. #11 troede også jeg måske skulle op på 32gb ram, men jo stadig ikke nok når man ender på 75tb :P Men skal ikke kunne skrive mere end max 200mb/s.


MadsAG
 
Elitebruger
Tilføjet:
17-07-2013 22:35:56
Svar/Indlæg:
5421/53
#14 Vær opmærksom på at du jo nok ender med en 1000 Mbit forbindelse på dit LAN, så den teoretiske hastighed er derfor 125 MB/s fra/til din server.

1000 Watt burde ikke være nødvendig, så længe du holder dig til en god kvalitets strømforsyning der ikke dør hvis alle harddiskene spinner op samtidigt. Jeg ville nok sige 15W pr disk. Så lad os antage du har 30 diske, så vil det være et forbrug på 450W. Mellem 600-750W ville jeg nok satse på, for at kunne klare spin-up, hvis de ikke forskydes af din controller.
Og så skal du så ud i at købe eller lave nogle sata power stik selvfølgelig.


Svaret blev redigeret 1 gang, sidst af MadsAG d. 17-07-2013 22:42:23.


#16
GUD
 
Overclocker
Tilføjet:
17-07-2013 22:37:38
Svar/Indlæg:
58/3
Hov var også forkert skrevet. Mente at 20MB/S, da jeg ikke regner med at linjen bliver forhøjet forløbeligt. Men raid6 mener i ikke er godt?

Redigeret:
Jeg vil stadig gerne have links til gode ting til setup.. PSU, RAM, MB, CPU (hvis #1's ikke er god nok :))


Svaret blev redigeret 1 gang, sidst af GUD d. 17-07-2013 22:38:51.


#17
GUD
 
Overclocker
Tilføjet:
17-07-2013 22:41:39
Svar/Indlæg:
58/3
Og ved i om IBM controlleren håndtere de 4tb hdds der er på market?


Swayde
 
Elitebruger
Tilføjet:
17-07-2013 22:42:31
Svar/Indlæg:
2246/14
#14 du kan ikke komme til at skrive med mere end ca. 200 MB/s, det er der ikke network interfaces til ;)
Eh.. med staggered spin-up burde 5-600W være rigeligt (ca 10W/disk i max load og 300W til resten).
intel 1200BTL, asus p8b WS, asus p8c WS er rimelige bud på MB.
Jeg ville tage min 1x8 GB ECC ram.


#19
GUD
 
Overclocker
Tilføjet:
17-07-2013 22:45:51
Svar/Indlæg:
58/3
#18 var også et 0 for meget, min fejl :P men har du nogle links til det du du skriver? ville hjælpe en del.
Tak :)


Swayde
 
Elitebruger
Tilføjet:
17-07-2013 22:59:58
Svar/Indlæg:
2246/14
#19 edbpriser.dk
http://forums.servethehome.com...
load power på en håndfuld nye diske:
http://techreport.com/review/2...
Ram:
KVR16E11/8
http://www.edbpriser.dk/ram/ki...
(valgt fordi de er på p8c's QVL)
MB:
http://www.edbpriser.dk/bundko...
(e3-1235 v2 er ikke på QVL - dog er e3-1230 så *5 burde virke)






unnamet
 
Passiv Hwt crew
Tilføjet:
18-07-2013 03:29:15
Svar/Indlæg:
5258/240
Mht PSU er de bygget til at kunne klare store spidsbelastninger og i skal derfor ikke tænke alt for meget på spinup strømmen, men bare hvor meget der trækkes ved load

Så 500w vil være ganske fint


Kilimanjaro
 
Elitebruger
Tilføjet:
18-07-2013 13:07:54
Svar/Indlæg:
247/38
Alt du skal bruge er her http://blog.backblaze.com/2013...

Se en indkøbliste I Appendix A. Så mangler du kun dine diske 😲