3D Renderfarm Specs

Diverse d.  15. september. 2014, skrevet af rodder
Vist: 2875 gange.

rodder
 
Superbruger
Tilføjet:
15-09-2014 11:13:44
Svar/Indlæg:
155/34
Hej folkens,

jeg går med en plan om at bygge min egen renderfarm til 3D rendering.
Idéen er at det skal være så småt som muligt og bruge så lidt strøm som muligt men samtidig yde godt.
Det er umiddelbart kun ram og CPU kraft der skal bruges.
Jeg har tænkt mig selv at bygge "Racket", så der er rimelig frie tøjler der.
Hardwaren jeg har fundet ind til videre er:
https://www.komplett.dk/k/shop...

Så jeg ville høre jer om i har nogen erfaringer på området?

Vil hardwaren jeg har fundet passe sammen?

Skal BIOS opdateres før CPU er kompatibel?

Mister man specielt meget CPU kraft ved at gå m-ATX istedet for ATX(Har hørt at det ikke betyder det store, men har i testet det?)

Ville gerne gå mITX, men der er ikke umiddelbart nogen der supporterer 32GB ram. Er der forlydender om at det kommer i den nærmeste fremtid?

Håber i kan hjælpe med spørgsmålene og alle idéer er selvfølgelig mere end velkomne 🙂

//Rodder
p0Pe
 
Elitebruger
Tilføjet:
15-09-2014 11:30:33
Svar/Indlæg:
3100/53
måske du burde kigge på noget xeon, eller noget med nogle flere kerner.

Med mindre du køber en hel del af de systemer der, så er det jo ikke en renderfarm, men bare en renderings pc.


rodder
 
Superbruger
Tilføjet:
15-09-2014 11:36:25
Svar/Indlæg:
155/34
#1 Glemte selvfølgelig den vigtige detalje, at jeg har 6 af de systemer i tankerne 🙂

Har overvejet Xeon, men syntes bare de bliver ekstremt dyre i forhold til ydelsen.
Men i min kommende workstation skal jeg nok køre 2 Xeon Cpu'er.


Springer
 
Elitebruger
Tilføjet:
15-09-2014 11:41:38
Svar/Indlæg:
765/28
#2 Er ideen ikke med den renderfarm, at det ikke er nødvendigt med så kraftige workstations? I min optik så er det dumt at have en workstation med dual xeon, når du så sparer på den renderfarm, som der er flere der skal have adgang til.

Er det din plan at overclocke dine CPU'er i farmen, for så er det ikke nødvendigt at købe "K" modeller.

Kan renderings farmen /softwaren bruge GPU'er til rendering?

EDIT: Nej 🙂 - Har lige læst lidt om det


Men det kan være jeg ikke ved hvad jeg snakker om. 🙂


Svaret blev redigeret 1 gang, sidst af Springer d. 15-09-2014 11:47:25.


rodder
 
Superbruger
Tilføjet:
15-09-2014 12:27:10
Svar/Indlæg:
155/34
#3 Personligt kan jeg bedre lide det omvendt. Have en hurtig, dyr maskine at arbejde på så alt kører helt flydende og man hurtigt kan teste ting. Og så smide det på farmen når det "bare" skal stå og tygge over længere tid. Eftersom farmen kun skal bruge ren CPU kraft syntes jeg det er stedet at spare, og så få så meget bang for the buck som muligt 🙂

Nej det er ikke umiddelbart min plan at overclocke, tror ikke jeg har power nok på PSU'en. Så det kunne være man skulle holde sig til en ikke-K model. Tak for det 🙂

Og nej det bliver kun ren CPU rendering.


Carpe^Diem
 
Elitebruger
Tilføjet:
15-09-2014 13:08:50
Svar/Indlæg:
1155/43
Hvor meget arbejde har du at kaste efter en sådan farm?


drcasino
 
Superbruger
Tilføjet:
15-09-2014 13:34:27
Svar/Indlæg:
374/32
Stumperne spiller fint sammen, du har 8 tråde til rendering (2 skal måske køre os) og måske får du lov at afsætte 3,5 effektive gb til hver tråd, husk på at dit onboard gfx i den 4790 gerne vil æde en stor luns ram. Men jeg kan ikke undgå at bekymre mig over luft og det m-atx kort. Hvis sådan en 4790 skal stå og flette billeder sammen over flere døgn, så skal den selvfølgelig have skubbet luften et sted hen, jf. dit rack, bundkortet må blive en varm satan efter sådan et døgn med fuld ryk på cpu+ram, så jeg ville virkelig være omhyggelig med ventilationen og måske rykke på noget aftermarket-køling.

Afhængigt af hvad du skal rendere igennem, så kan gfx være ret afgørende, men så kigger vi både på større psu og drastisk udvidelse af budgettet.

AEs raytracer er stadig ikke særligt fed og super heavy på cpuen, v-ray rt og iray elsker grafikkort, så mit spørgsmål er, hvilken software arbejder du i? Er det med henblik på at leje farmen ud?


svedel77
 
Grafiker
Tilføjet:
15-09-2014 13:35:12
Svar/Indlæg:
2263/307
Du skriver, at det helst ikke skal fylde så meget. Hvis det var mig, ville jeg vælge en kompakt PC, med i5 eller i7 CPU, som har alle 4 kerner og ikke kun 2 som mange af dem. Et bud kunne være Mac Mini. De kan stables.


drcasino
 
Superbruger
Tilføjet:
15-09-2014 13:40:56
Svar/Indlæg:
374/32
#7 uha, ja, så har vi mini´erne, men de er frygteligt ringe til at komme af med varmen. Hvis onboard gfx skal bruges til nogetsomhelst, så er det et no-go i min bog ved forlænget brug. Men prisen er fin.


rodder
 
Superbruger
Tilføjet:
15-09-2014 14:11:47
Svar/Indlæg:
155/34
#5 Det svinger meget, kommer helt an på opgaverne. Men igennemsnit kører de nok 1½ uge om måneden på 100%.

#6 Fedt, det er godt at vide at det passer sammen :) Tak for det. Tror du det vil æde specielt meget ram, når det kun er til at vise skrivebord og renderings vindue?
Mht. luft, så har jeg overvejet at købe lidt billigt vandkøling ala. h50, for at få varmen lidt væk. Samtidig have blæsere der skubber luften omkring bundkortet væk.
Regner ikke med at der skal køre andet en Maya/Max med enten Scanline eller Vray renderinger. Måske nogen gange Mental Ray. Men kun med CPU kraft, ikke noget RT endnu 🙂.
Og nej, farmen skal ikke leges ud. Tak for det gennemgående svar.

#7 Det er også en god idé. Tak for det. 3Ds Max kører dog ikke på Mac, så skulle der installeres en windows på. Men det skal da klart overvejes 🙂


Bonghætte
 
Elitebruger
Tilføjet:
15-09-2014 22:24:19
Svar/Indlæg:
1271/38
Forbrugerprodukter er ikke lavet til 24/7 drift og belastning.

Du vil have den skal stå og tygge større opgaver med forbrugerprodukter. Er du dermed indforstået med manglen på error correction, og den lavere og mere varierende MTBF og andre problematikker ved dette valg?

Kører du programmer der understøtter OpenCL? For så er der meget potentiale at hente i selv de små Quadro og FirePro modeller.


rodder
 
Superbruger
Tilføjet:
16-09-2014 17:37:59
Svar/Indlæg:
155/34
#10 Vi har allerede en I7 maskine stående som en del af vores nuværende farm og den har kørt upåklageligt et halvt år. Men ja, levetiden på dem er måske markant lavere end på et Xeon system.

Nej jeg er umiddelbart ikke indforstået med manglen på error correction og MTBF. Ved ikke hvad de ting betyder for rendering i Max/Maya, men som sagt har vi allerede en I7 på farmen som kører upåklageligt, så kan ikke se at det har den store betydning for den slags opgaver? Men vil gerne høre mere om det, hvis du mener det har stor betydning 🙂 Er altid godt at blive klogere.

Som sagt tidligere er det kun CPU tung rendering, så der skal ikke nogen GPU i 🙂

Tak for dit svar.


drcasino
 
Superbruger
Tilføjet:
17-09-2014 00:38:46
Svar/Indlæg:
374/32
#9 jeg vil antage, at der bliver taget min. 2gb til onboard gfx, måske op til 4. Bios har indstillinger til at nedbringe mængden, men der er et minimum, der bliver reserveret til onboard hardware. Kig i resource monitor.


Swayde
 
Elitebruger
Tilføjet:
17-09-2014 02:05:47
Svar/Indlæg:
2246/14
IMO: når det er oppe i en 6 systemer er det værd at have noget remote management.
Det er også værd at have en xeon og ecc. En xeon koster ikke så meget mere, og du skal vel ikke bruge oceaner af ram ?
Ved stock clocks kan stock køleren godt køle cpu'en ved 100% load 24/7, men det larmer selvfølgelig lidt. Skulle det ske at noget bliver for varmt clocker den selv ned.
En e3-1276v3 koster ca. det samme som i7'eren, og yder kun lidt mindre. Er du villig til at ofre ~7% ydelse, så koster en xeon det samme.
https://www.cpubenchmark.net/c...

På den anden side så Google mfl. har i lange tider kørt på konsument-hardware 24/7, så det er jo ikke krav at køre en xeon, du får bare error detction og et ipmi interface. (google har også error detection på applikations-laget, det går jeg ikke ud fra at der er på render software ?)
Fordelen ved ipmi over feks remote-desktop og vnc er at du kan tilgå bios via ipmi. Du kan endda installere os over netværket (man mounter en iso som en diskette eller en cd).
Parts list:
4 stk http://www.edbpriser.dk/ram/cr...
http://www.edbpriser.dk/proces...
http://www.edbpriser.dk/bundko... (så kan du dog "kun" have 16 gb ram - ellers er der en atx udgave med samme features - og flere porte mv.)


Svaret blev redigeret 3 gange, sidst af Swayde d. 17-09-2014 02:18:31.


Swayde
 
Elitebruger
Tilføjet:
17-09-2014 02:30:19
Svar/Indlæg:
2246/14
http://www.edbpriser.dk/ram/ki...
De ram er på asus' QVL, i modsætning til crucial rammene.


Prebbish
 
Superbruger
Tilføjet:
17-09-2014 09:31:39
Svar/Indlæg:
648/5
På mit arbejde har vi 10 beregningscomputere med i7-2600k, 16 gb ram osv. Udelukkende konsumer hardware, og de har kørt 24/7 (ofte på 100%) i omkring 3 år nu.

En computer er normalt afskrevet efter 2 år, herefter repræsenterer den ingen værdi i regnskabet, så at de stadig kører uden problemer er bare bonus :yes:

Det jeg mener er, du kan lige så godt købe konsumer hardware, og spare lidt penge, så er der råd til at udskifte en HDD eller ram hen ad vejen hvis det skulle gå i stykker. Just my 2 cents 😉


rodder
 
Superbruger
Tilføjet:
18-09-2014 11:47:06
Svar/Indlæg:
155/34
#12 Okay, det er lige til at leve med. Plejer ikke at komme over 25-26 GB ram i brug.

#13 Det bliver alligevel en del % dyrere at gå Xeon. Bundkort og ram er lidt mere pebret og idéen var lidt at få så meget bang for the buck som muligt. Og eftersom jeg har windows remote desktop(som virker fint til mit behov) og ikke rigtig ved hvad error detection skal gøre for mig, så kan jeg ikke se behovet. Kan du hurtigt forklare mig hvad error detection gør?(ligger vel lidt i navnet, men sådan helt specifikt) Derudover skal jeg minimum bruge 32GB ram, kan desværre ikke leve med mindre. Men mange tak for dit input og for at bruge tid på at finde alle delene. Much appreciated 🙂

#15 Fedt at få lidt input fra nogen der har prøvet det. Tak for det. Så ved jeg hvertfald at det sagtens kan lade sig gøre 🙂