GIGABYTE Server MD60-SC0 Moderkortsrecension: Haswell-EP med QSFP

Ända sedan GIGABYTEs serverteam och jag först började diskutera recensioner, var det intressant att se vad en ren B2B-enhet (business to business) kunde göra. Sedan dess har GIGABYTE Server expanderat och vänder sig till både B2B och B2C (kund)marknader och säljer direkt till slutanvändare. Med släppet av Haswell-EP vi rapporterade om deras stora lansering vid den tiden och de skickade oss MD60-SC0 för granskning.

GIGABYTE Server MD60-SC0 Översikt

För dem som inte är bevandrade i 2P-arbetsstationer och serverkultur, ser MD60-SC0 lite annorlunda ut än konsumentprodukter. DRAM- och CPU-socklarna är inriktade för luftflöde, de kommer först över strömförsörjningen och sedan uttaget och ut från den bakre panelen, allt i en rak linje med dram som ger en baffeleffekt för att kanalisera luften. Detta innebär att PCIe-platserna är i en något besvärlig position i mitten av moderkortet, vilket begränsar längden på PCIe-enheter och gör att plattformen fokuserar mer på CPU-kraft och lagring snarare än ett GPU-kraftverk utan stigarkablar.

Uttagen kan också förvirra vissa användare. Till skillnad från de vanliga fyrkantiga LGA2011-3-socklarna vi ser på de flesta Haswell-E- eller Haswell-EP-moderkort, använder MD60-SC0 den smala sockelkonfigurationen. Detta kräver olika kylare också på grund av olika skruvhålsplaceringar, och dessa kylare säljs vanligtvis inte i detaljhandeln och kommer därför endast OEM. Gigabyte försåg oss också med ett par Dynatron R14 kylflänsar för vår recension som verkligen såg ut som en del, även om bruset vid hög belastning är något jag inte skulle önska någon. Denna systemkombination hör säkert hemma i ett serverrum.

Systemet är baserat på C612-kretsuppsättningen, som liknar den konsumentbaserade X99 men med 2P-relaterade funktioner, såsom MTCP över PCIe. Vi försågs också med ett typ-T LSI RAID-mezzaninkort för att möjliggöra några inbyggda SAS-portar. Så även om portarna är en del av moderkortet, är raidkortet ett separat köp och utnyttjar T-kortplatsens konfiguration. Det tillåter också en rad potentiella RAID-kort uppgraderingar över tid om det behövs.

Som med de flesta servermoderkort har MD60-SC0 ingen form av inbyggt ljud men erbjuder två gigabit-nätverksportar tillsammans med ett Aspeed-hanteringsgränssnitt. Kortet kommer också med en QSFP+-port för extra nätverksanslutning.

Benchmarkmässigt, eftersom detta är det första Haswell-EP-moderkortet vi har testat, är det lite svårt att placera. Som vanligt med moderkort av managementliknande typ är POST-tiderna långa och strömförbrukningen ligger i de övre led. DPC Latency med 2697 V3-processorer var dock ganska rimlig, trots att de andra två CPU-kombinationerna gav mycket högre toppar.

En av de viktigaste punkterna för serverdesign är orienteringen och storleken på kortet, så MD60-SC0 måste passa in i ditt designparadigm för att göra den korta listan. Med smala uttag och PCIe-orientering riktar den sig tydligt mot OEM- och serverbyggarna mer än konsumenterna.

Visuell inspektion

Det första som slår när moderkortet tas ur kartongen är två saker – storleken på uttagen, och det faktum att moderkortet inte är en enkel fyrkant utan med en utskärning. Storleken på uttagen är bara ur den synvinkeln att jag inte har stött på det smala ILM LGA2011-baserade uttaget tidigare, än mindre LGA2011-3-iterationen. Att använda uttaget är enkelt nog, även om istället för krokarna vi får med det större uttaget har det smala uttaget en tillplattad spak på ena sidan och en upphöjd spak den andra. Användningen är exakt densamma.

I likhet med det smala uttaget är Type-T mezzaninkontakter ett nytt koncept för den här recensenten. Gapet i PCB är sådant att tilläggskortet får plats, då kortet är byggt inom en viss 1U/2U standard. Jag skulle anta att icke-perfekta rektangulära kretskort är svårare att skapa, kräver en utskärning, men alla moderkort som vi har recenserat på AnandTech har alla utskärningar för skruvhål, och som sådana är förmodligen inte det konstigaste vi har stött på.

Varje sockel använder alla fyra minneskanalerna med två DIMM per kanal. Kombinera detta med de smala uttagen så finns det plats kvar för SATA-portar på kanten av kortet. Hur man än klipper det är det en väldigt snäv kläm och som sådan måste de smala CPU-kylarna överensstämma med Intels specifikationer exakt. De totalt 16 DRAM-kortplatserna tar emot 128 GB UDIMM-minne, upp till 512 GB RDIMM och 1024 GB LRDIMM. Tanken på 1 TB DRAM i ett enda system är svindlande.

Varje uttag levereras med sexfas ström och en tillämplig kylfläns. För dem som är mer vana vid konsumentmarknaden i mellan-till-högsegmentet kanske den här kombinationen inte ser tillräckligt ut, särskilt när moderkortet måste hantera 160W-processorer. En sak som C612 moderkort har till sin fördel är bristen på överklockning, vilket innebär att strömförbrukningen är en känd mängd. Med detta moderkort orienterat med uttag och DRAM i linje med den bakre panelen, kommer fokus att ligga i system med högtrycksfläktar som blåser i en enda riktning över moderkortet. Detta kommer att underlätta kylningen, särskilt när den är i full lutning.

PCIe mezzanine typ-T-arrangemanget är en komplett PCIe 3.0 x8-affär, där varje sida av PCIe-arrangemanget handlar om ström och data. En viktig sak att notera med typ-T är förmågan att klara av höjdbegränsningar. PCIe-enheter är notoriskt höga och ges sällan upprätt i serversystem som inte är 4U eller högre. Type-T tillåter mindre höjdarrangemang, och eftersom detta moderkort är mer inriktat på lagring med SATA breakout-kontakter och de åtta SAS RAID-portarna, passar Type-T bra för system med mindre höjd. Det är ingenting värt att de röda SATA-portarna på moderkortet är de grundläggande SATA 6 Gbps-portarna för att testa systemet eller OS/lagring när breakout-kablarna inte används.

Med vårt minne rakt upp mot SAS-portarna kan det bli en liten konflikt om låskablar används här, speciellt i kanterna med DRAM-spärrarna. Även om man skulle kunna föreställa sig att i en server är kablarna fixerade och bara enheterna flyttas om de behöver bytas ut.

I detta område av moderkortet är det också där vi ser fläktarrangemanget. Bredvid varje uttag finns ett fyrstifts fläkthuvud, även om dessa är SYS-huvuden. Det finns fem SYS-rubriker ombord – fyra på höger sida av tavlan och en överst. De två CPU-fläkthuvudena finns till vänster om båda uttagen.

PCIe-arrangemanget ger två möjligheter: antingen ett x8/x16/x8/x8-arrangemang med typ-T vid PCIe 3.0 x8, eller ett x8/x16/-/x16, återigen med typ-T vid PCIe 3.0 x8. Oavsett vilket, på grund av socklarnas placering, kan stora PCIe-samprocessorer endast användas med ett utbyggnadskort eller kabel. För våra tester utrustar vi vanligtvis systemet med en GTX 770 Lightning. Detta var inte möjligt med det här systemet, och som sådan använde vi en R7 240 istället och vi kunde inte utföra våra vanliga GPU-baserade tester.

Ovanför PCIe-platserna finns köttet från IO och kontroll, med Aspeed-hanteringsmotorchippet ihopkopplat med 256 MB Samsung-blixt och även Intel 82599ES-kontrollern i snabb följd.

Även i detta område av moderkortet finns en USB 3.0-header, en TPM-header, en COM-header och en Thunderbolt-header (för användning med ett TB-kort). QSFP Ethernet-kontrollern kräver sin egen kylfläns, och porten sträcker sig en bit in på moderkortet:

Kanske lite överraskande är strömkontakterna. Bonuspoäng för deras placering på kanten av moderkortet, även om vi vanligtvis ser dem mycket nära processorerna, särskilt 8-stiftskontakterna. Detta kan ha konsekvenser för strömförsörjningen och leveransen genom PCB:n, även om det verkar vara en rimlig kompromiss när kortet klämmer ihop två socklar med 2DPC DRAM-stöd på det sätt som det gör.

Den bakre panelen är nätverksfokuserad, vilket ger QSFP+-porten tillsammans med två Intel I350-portar och serverhanteringsporten. Alla sex USB-portar på baksidan är USB 3.0-standard, med en kombination PS/2-port, en COM-port och en VGA-port (från Aspeed) också i mixen.

Styrelsens funktioner

Den stora kostnaden här kommer att vara den QSFP+-porten, även om vi inte är säkra på den exakta kostnaden mellan tillverkare och slutanvändare – den kan ligga i området $50 till $300. De smala LGA2011-3-platserna kommer också att kräva andra CPU-kylare än normalt. Mezzanine Type-T-arrangemanget och RAID-slots kommer att behöva ett extra köp för att få dessa att fungera också.