Jeg ville købe WD Red hvis jeg var dig. Green er ikke lavet til 24/7-drift og kan nemt stoppe med at fungere ordentligt efter nogle måneder. WD Red er lavet og optimeret til 24/7-drift, ellers skal du ud i noget RE4 som koster kassen.
Derudover så overvej et Intel S1200 bundkort. Har selv et S1200BTL og det sparker røv. ;)
--
PrivatHost.dk - Colocation, Dedikerede servere og Gamehosting til overskuelige priser.
Er det ikke lidt overkill hardware til de to krav. Her menes Xeon og server grade mobo, du kan klare det med langt billigere alternativer.
--
2600K|Maximus IV Extreme-Z|16GB Ram
2xGainward460GTX GS SLI|BenQ XL2410T&M2700HD
OCZ Vertex2&3 120GB|CorsairGT 120GB
2xSamsung830 128GB|4x1TB&4x2TB
#2
Måske skulle jeg kigge på Red i stedet. Kender ikke så meget til den serie.
Men tror umiddelbart jeg kommer til at savne SATA porte på det S1200 kort.
#3
Grunden til det mobo (som faktisk ikke er så dyrt igen) er at jeg kan bruge det uden nogen udvidelses kort. Der er 2 NIC's på som virker med VMware ESXi og en HDD controller som også virker.
Hvis jeg køber et standard bundkort skal jeg højst sandsynligt ud og ha 2 ekstra netkort og en HDD controller for at kunne bruge det alligevel. Det ville sikkert ende med at blive dyrere.
Grunden til Xeon CPU'en er at den kun bruger 17W og har alle features jeg skal bruge. Den er samtidig ikke så dyr igen. Og det gør jo ikke noget den er lidt overkill hvis jeg skulle få sære ideer med den server. :-)
--
O.o
#0 Sikker på du kan have 14 sata diske til den? Umiddelbart ser det ud som om de 8 af dem er SAS diske? Har selv haft et supermicro board hvor der også var en sas LSI controller. Udover at den var langsom, så kunne den både tage sas og sata disk, så det kan denne garanteret også. Bare noget man måske lige skal have tjekket op på inden køb.
--
#4 Hvorfor dog det? Har endnu ikke fundet et mobo hvor netkort ikke virkede i ESXi.
Langt de fleste moboes køre med Realtek chips og de er praktisktalt alle med i ESXi.
Og da du skal køre Freenas så skal du ikke bruge hardware raid 5 men RAID-Z som er software. Så du har intet at bruge en hardware controller til og så længe du ikke skal bruge hardwareraid så virker 99% af controllerne ud af boksen.
Ikke at det er ringe det du har valgt, og ville sikkert også vælge det til erhvervsbrug. Men til hjemmenetværk er det ret overkill.
Jeg har haft ESXi til at køre på tilfældige Atom mobos uden problemer overhovedet. ESXi er slet ikke så pernippen som den har rygte for. Bare du holder dig fra nVidia chipsets, men de er alligevel også ved at forsvinde.
--
2600K|Maximus IV Extreme-Z|16GB Ram
2xGainward460GTX GS SLI|BenQ XL2410T&M2700HD
OCZ Vertex2&3 120GB|CorsairGT 120GB
2xSamsung830 128GB|4x1TB&4x2TB
#4 - Køb en hardware raidcontroller (MED WRITEBACK!), du kan ikke lave fakeraid med ESXi, den vil ikke genkende dine raids så du vil have 12 seperate diske.
--
PrivatHost.dk - Colocation, Dedikerede servere og Gamehosting til overskuelige priser.
#5
Som du nævner så kan man godt sætte SATA diske på en SAS port (men ikke omvendt :). Det er endda standard SATA stik på bundkortet så vidt jeg kan se.
Skal ikke bruge selve raid delen i den controller. Den skal bare lege "dum". Regner med at sætte FreeNAS op med et ZFS (software) raid. Så er ikke så bange for hastigheden. Mere effekt forbruget da det ligner der sidder en køleplade på LSI controlleren.
Det der skide strøm er jo dyrt :(
--
O.o
#6
Måske er jeg blevet fanget af gamle rygter om at ESXi var lidt svær at få til at arbejde sammen med Realtek, Broadcom og andet sjovt. Det vil måske gøre det lidt nemmere at finde et bundkort hvis det ikke er nødvendigt med et Intel netkort og fancy controller.
Og ja det er også min plan at bruge RAID-Z(2). Grunden til jeg gerne vil ha et board med en controller er at det så også har mange porte. Men kunne måske klares i stedet med en simpel SAS expander eller hvad det nu hedder.
Overkill?! Man skal aldrig gå ned på udstyr! :p
Hvad havde du kørende på de ESXi maskiner? Noget krævende eller bare lidt tilfældigt?
Så vidt jeg kan se på pfSense's hjemmeside anbefaler de en 1GHz CPU til at klare de 60Mbit + ekstra hvis den skal kører VPN og andet sjovt.
Deruover skal FreeNAS vel også ha lidt at arbejde med.
#7
Min plan var at ha VMware ESXi på en (intern) USB stick, VM's på en HDD (måske i RAID1), og så skulle FreeNAS via ZFS styre resten af diskene i en Zpool.
--
O.o
#9 Den kørte bare to virtuelle:
pfSense for min 70/70
Samt en Debian til noget Mumble og SQL server.
--
2600K|Maximus IV Extreme-Z|16GB Ram
2xGainward460GTX GS SLI|BenQ XL2410T&M2700HD
OCZ Vertex2&3 120GB|CorsairGT 120GB
2xSamsung830 128GB|4x1TB&4x2TB
#10
Hvor hårdt var den presset når den kørte de 70mbit?
--
O.o
#2
Hvad har du kørende på det S1200BTL bundkort? VMware?
Og ved du hvad trækker det samlede system i idle? Ser egentlig ganske fint ud.
--
O.o
Lille update hvis der var nogen der skulle være interesserede i et lignende build :-)
Har fået mine stumper hjem:
Cpu: Intel Xeon E3-1220LV2
Mobo: SuperMicro X9SCM-iiF
RAM: Kingston KVR16E11K4/32
HBA: IBM ServeRaid M1015
CPU Blæser: Noctua NH-L9i
PSU: Seasonic SS-520FL (Måske lidt overkill :)
På det er installeret:
VMware ESXi
pFsense 2.0.2
FreeNAS 8.3.0
Alt hardware blev fanget uden problemer og der er hul igennem routeren.
Idle (uden diske) bruger den under 30W målt med en Aldi strøm måler.
Nu mangler jeg bare at teste den lidt på kryds og tværs. Men ser ud til det virker efter hensigten :)
--
O.o
#13 - Surt at det blev en ServeRaid M1015, den vil køre af HT på din ESXi-maskine. Read-hastigheder vil være gode men write vil være meget dårligt.
--
PrivatHost.dk - Colocation, Dedikerede servere og Gamehosting til overskuelige priser.
#14
Hvad ville du da ellers foreslå der kører godt sammen med freenas og zfs?
--
O.o
#15 - Det har intet med Freenas at gøre. Jeg går udfra at du har lavet nogle raids hvor esxi bliver hostet på og så har nogle vmfs datastores som freenas hostes på. Problemet er at det normalt er OS'et som søger for writeback (medmindre controlleren har det). ESXi har desværre bare ikke nogen writeback-funktion, så hvis du bruger en controller uden det, vil du max få 20-30MB/s write speed.. Read speed sker der intet ved.
--
PrivatHost.dk - Colocation, Dedikerede servere og Gamehosting til overskuelige priser.
#16 - Der er skrevet længere oppe at han vil bruge zfs, derfor er controlleren bare en dummy..
Hence, imo er det et meget fornuftigt valg, man får ikke meget billigere 8 ports controller idag til netop det formål!
--
#16
Planen var at ESXi slet ikke skal ha noget at gøre med den M1015. Den skulle sættes op med passthrough til freenas VM'en.
Hvordan jeg skal hoste mine VM's er jeg dog ikke helt sikker på endnu. Indtil videre er det bare på en enkelt disk uden raid.
ESXi selv ligger på en lille intern USB stick.
--
O.o
#13 Hvad endte prisen så på?
Er kun lidt misundelig på dit dedikerede IPMI interface, dine PCIe 3.0 slots og dit strømforbrug :)
--
#19
For meget? :)
Ej den endte på ca 7500kr. Så rundt regnet det samme som en Synology 8bay løsning ville koste.
Kan sagtens laves billigere hvis man er ligeglad med ECC ram og andet sjovt.
Men forhåbenligt er det en løsning der vil tjene mig i mange år.
--
O.o
Hvordan performer pfsense ? har selv overvejet et lignende setup, men tænker at latency går amok når alle pakke skal igennem esxi laget ?
--
#21
Tja godt spørgsmål :-)
Har ikke lige fundet en god måde at teste den på endnu. Nogen forslag?
Jeg tænker selv på noget iperf halløj. Men er ikke så hjemmevandt med det.
--
O.o
#21
Fik leget lidt med iperf. Ser ud til den sagtens kan route 100Mbit/s. Mangler lige en computer til med et Gbit kort for at kører hurtigere.
Umiddelbart ligner det at latency gennem routeren er omkring 0.2ms.
Men har ingen anelse om hvad jeg laver i iperf så det kan være helt forkert ;-)
--
O.o
Puhh.. måske skulle man komme igang med sit projekt :P
--
Update med 1Gbit netkort.
Random kabler af tvivlsom kvalitet.
UDP: 800Mbit+ og
--
O.o