Nízkoenergetický server

[havli]

Na to asi nemám moc vybavení - používám jen dvě LAN. Jedna je zapojená do gigabit switche a přes něj do zbytku sítě. Druhou mám připojenou rovnou kabelem do hlavního PC, tam to jede ve 2,5Gbit režimu (na druhé straně je Realtek 8125). Přes Sambu jsem dosáhnul kolem 190 MB/s (na obou stranách SSD), což není žádná sláva - ale patrně je limitem špatně nastavená Samba.

[LukášST]

Mám tu nějaké poznatky a nejspíš se blížím do finále s HW sestavou.

Dostaly se ke mě dvě desky se skt 1700 MSI PRO Z690-A DDR4 a ASUS Primę B7660M-A WIFI.
CPU se tu objevilo i9-12900K a je na cestě i3-12100

Aktuálním měřením i9tky napříč deskama MSI a ASUS jsem nezjistil velké rozdíly ve spotřebě .. odchylka cca 1W při stejných konfiguracích (různé počty RAM, NVMe, HDD, LAN). Tajně jsem doufal, že ta ASUSka bude mít menší spotřebu, ale nemá. Za což jsem ve výsledku rád. MSI má 4ks M.2 slotů což jsem od začátku chtěl, sice jsem původně chtěl víc, ale ty 4 budou nakonec stačit.

MSI deska s i9-12900K při osazených 4x RAM, 4x NVMe, 2x10TB + 1x12TB se zdrojem CV550, se zapojenou 2,5gbit LAN, bere ze zásuvky 53-54W (tohle bude, vyjma CPU, na 99% výsledná sestava mého serveru) .. podotýkám default BIOS a CPU pasivně chlazené - na moment vypnuté čerpadlo i ventilátor z AiO. OS W10 v idle (0% aktivita všude).
1ks RAM vs 4ks RAM jsou cca 1w
3x HDD jsou cca 15w
3x NVMe jsou cca 8w
a především bych řekl, že ta i9tka nebude nic úsporného ani v tom idle.
sestava vypnutá 1,5w

Picopsu je obrovské zklamání...
sestava vypnutá 2,2w
a nedokáže nabootovat s i9 ani s 1ks RAM, 1ks NVMe test na obou deskách .. nejspíš bych musel v biosu nastavit PL atd. což by ovlivnilo možná měření ve woknech.
S i3 si bude Picopsu už rozumět, nicméně už z toho předchozího měření s i5-9400T mě picopsu dost zklamalo.. něco mi ale říká, že zkusím až odladím sestavu s i3 na nízký odběr i při bootu, použít jiný napájecí adaptér.

i3 dorazí nejspíš na víkend, ale nevím zda se k tomu dostanu.. rád bych to měl nicméně změřené, udělat srovnání a otestovat s jiným OS.

Pak může začít s vaší pomocí, ladění i3 na nižší spotřebu než kterou naměřím

[LukášST]

Krátké zhodnocení i3tky.
V osazení:
msi pro Z690-A DDR4
i3-12100 - box chladič
4x Kingston FURY 32GB KIT DDR4 3200MHz CL16 Beast Black
4x mix nvme
3x 3,5" hdd
10gbit ASUS XG-C100C
cv550 = 59-60w
picopus = 54-55w
poznámka: bios stále výchozí, os W10 v idle (s 10gbit lankou se CPU nepodtaktuje úplně na 0,7-0.8ghz, ale drží si cca 1,6ghz

ovšem bude nějaký problém s deskou, která se od počátku co jí mám nahodile restartuje, je jedno zda je i9 nebo i3, zda je jeden nebo čtyři moduly ram, nemá vliv OS, ani osazení nvme, hdd apod.
zaregistroval jsem horký chipset, přidal jsem ofuk a bezezměny..
desku jsem bral z alzy jako zánovní, což je vždy takový vabank, je čas jí ještě vrátit, je objednaná druhá, pokud bude vykazovat stejný problém, budu se muset poohlédnout po jiné chybě nebo zkusit úplně jinou desku.

[TomasX]

os W10 v idle (s 10gbit lankou se CPU nepodtaktuje úplně na 0,7-0.8ghz, ale drží si cca 1,6ghz

Asi ta lanka nepodporuje lepší power state režimy.
Ale i tak na to množství disků je ta spotřeba celkem dobrá.

Máš zapnuté ASPM ?
Pokud to nepodporují správně všechny komponenty tak to může zlobit nebo něco třeba přestane fungovat vůbec.
Pokud to bude OK tak by to mělo snížit idle spotřebu.

[python.p]

A co vzít nějaký kvalitní zdroj? Třeba RMx který všude nasazují kvůli suprové účinnosti v nízkém zatížení?

A few potentially-important BIOS bits:

CPU C-states were enabled in the BIOS (C10)
ASPM was enabled with everything set to L1
RC6 (Render Standby) enabled
Aggressive LPM Support enabled (ALPM)
DISABLED: HD Audio, Connectivity Mode, LEDs, GNA Device, Serial Port

https://mattgadient.com/7-watts-idle-on ... erver-nas/

Je mi jasný, že s tolika disky to tak nízko nebude, ale.

[LukášST]

Máš zapnuté ASPM ?
Pokud to nepodporují správně všechny komponenty tak to může zlobit nebo něco třeba přestane fungovat vůbec.
Pokud to bude OK tak by to mělo snížit idle spotřebu.

To netuším, BIOS jsem hodil do továrního a zapnul

Aktuálně je tam pouze vypnutý secure BOOT a běží mi tam zkušebně truenas (ten mě teda vůbec nezaujal a přejdu na unraid)

A co vzít nějaký kvalitní zdroj? Třeba RMx který všude nasazují kvůli suprové účinnosti v nízkém zatížení?

s picopsu jsem měl fakt dobrý zkušenosti, zkusím mu dát ještě nějaký lepší zdroj, ten adaptér co k němu mám, samotný bere 1W bez zátěže..

Co mám jeden server, kde je tenhle zdroj, tak je spotřeba taky naprosto super. Kvůli místu (bude asi case na míru) ocením ten picopsu zas o fous víc.
https://www.alza.cz/be-quiet-pure-power ... 549562.htm

A few potentially-important BIOS bits:
CPU C-states were enabled in the BIOS (C10)
ASPM was enabled with everything set to L1
RC6 (Render Standby) enabled
Aggressive LPM Support enabled (ALPM)
DISABLED: HD Audio, Connectivity Mode, LEDs, GNA Device, Serial Port

https://mattgadient.com/7-watts-idle-on ... erver-nas/

Je mi jasný, že s tolika disky to tak nízko nebude, ale.

Díky za tip!! tohle určitě zkusím Povypínat cokoliv nepotřebného jsem měl v plánu až se ustálí ten OS který budu používat a hw konfigurace.

ps: promiň, že cituju poslední příspěvek ale pro přehlednost mi tak sedí

[python.p]

Chápu a cením omluvu.

Já to mám nastudovaný, ale furt jsem se k tomu nedokopal. Zjistim jsem, že mám doma asi tunu 500GB 2,5" disků a přemýšlím, že bych z toho udělal odkladiště na bordel. Páč prodávat to nemá cenu a co jinýho s tím dělat.

[LukášST]

není týden aby se tu někdo nenašel a tys ho nespražil

tak těch 500gb 2,5ˇ mám přesně 14ks a vůbec nevím co s nima takže jsem raději sáhnul po 3,5" s vyšší kapacitou..
ale hecnout to na kvantum malých disků, proč ne! Jen nemám teď žádný HW kromě RPi na čem to postavit a rpi je zas pomalý a není kámoš s usb huby na tolik disků - vyzkoušeno.

[TomasX]

Dokud to není stabilní tak bios v defaultu.
Další nastavení co (možná) sníží spotřebu ladit až to bude 100% fungovat.

Když jsem zkusil na jedné desce zapnou ASPM tak přestala úplně fungovat integrovaná síťovka.
Je to ale na dnešní poměry už starší deska. To jen na ilustraci, že ty ASPM a ALPM nemusí dobře fungovat ve všech kombinacích HW.

[LukášST]

Druhá deska z alzy, také zánovní, je OK a žádný restart už druhý den neproběhl. zkusím tam nějaké VMka udělat a nahodit pár dat na zkoušku.
Za tu původní kde probíhaly nahodilé restarty, vystavili dobropis

Vyzkouším to co posílal python a uvidíme )
Tome, integrovanou LANku naštěstí zapojenou nemám

[python.p]

Novější jak 10 generaci jsem tam nenašel. První sloupec je IDLE



Ale taky tam je jedno SSD a jedna RAM

[LukášST]

Joo to je ta tabulka od TomasX, tu mám nakoukanou neskutečně
taky tam má matx, ramka nedělá žádnou velkou spotřebu jsem tak proměřil .. možná kdyby se to podvoltovalo, už by tam rozdíl byl větší.
a teoreticky to s jedním ssd/nvme může odladit taky, pro tu srandu... pak to osadím a bude to zas 30w nahorů.
Zase když se budou hdd uspávat, tak si říkám, že to prostě do 50w v idle komplet sestavy je OK.. a kdybych byl do těch 20w bez disků po úpravě, tak budu dost spoko

edit: na současném dellu t320 se mi disky uspávaj a stejně to samo o sobě žere 100W.. ten powertop toho asi na delláckým serveru moc nezmůže, což jsem popravdě ani nijak neladil.

[TomasX]

Pokud někdo ladí idle spotřebu na windows tak může pomoci
"powercfg -energy"
Spustit z cmd (jako správce) když je pc v klidu.
Udělá to celkem dlouhý html report.

Mě to u stolního PC třeba řekne

Možnosti řízení spotřeby platformy:Aktivní režim řízení spotřeby (ASPM) sběrnice PCI Express je zakázán.
Aktivní režim řízení spotřeby (ASPM) sběrnice PCI Express byl zakázán z důvodu známé nekompatibility s hardwarem tohoto počítače.

Takže vím, že bez ASPM se už níž nedostanu.
Jak ale zjistit co přesně je nekompatibilní nevím.

Tak podrobné jako linuxový powertop to bohužel není. Ale aspoň něco.

[TomasX]

Máme tu už nějaké sestavy s Ryzen 8000G.
Vypadá to celkem fajn.

Hello everyone,

I would like to introduce my AM5 build here:

Idle consumption in watts: 9.2W
Load consumption in watts: 87W
C-State Package: C3
CPU: AMD Ryzen 5 8600G
Mainboard: ASRock B650M PG Lightning
Power supply: PicoPSU-160-XT + LEICKE 150W
GPU: iGPU
Measuring instrument: Energy Check 3000
NVME: Lexar NM790 4TB, M.2
RAM: Kingston Server Premier ECC 32GB, DDR5-5600,
Operating system: Debian 12
Mouse/keyboard: None (NAS servers)
Fan: CPU - Included BOX cooler


I have tested 2 motherboards:
- ASRock B650M PG Lightning
- ASUS Pro A620M-C-CSM

Here are my test results:


ASRock B650M PG Lightning + Seasonic Focus Gold 450w -> 20,7W
+ Bios "Tuning" -2,1W
+ powertop --auto-tune -1,2W
+ powersupersave (ASPM) -1.7W
+ without periphery -0.4W
+ picoPSU -6,1W
Final: 9.2W

Changes with additional hard drives:
Output 9.2W
+ 2nd NVME (Lexar NM790 4TB) +1,0W
+ HDD (Toshiba Enterprise Capacity MG07ACA 14TB) +5,7W
+ HDD standby -> -5,4W
Final with 2x NVME and 1x HDD: 10.5W

ASUS Pro A620M-C-CSM, (here I started with PicoPSU!!) -> 15,7W
+ Bios "Tuning" +0.7W (wtf?)
+ powersupersave (ASPM) -> No difference
+ powertop Autotune -2,1W
+ without periphery -0.3W
Final: 14.0W

zdroj: https://www.hardwareluxx.de/community/t ... t-30277779

[python.p]

To je hodně dobrý !

[Holda]

Konečně jsem se dostal k tomu HP ProDesk 600 G4, mám ho s i5 8100T a 16 GB RAM. Osadil jsem to dvěma NVMe a jedním SATA SSD.
Provozuju tam Proxmox, momentálně mi už běží vše, co jsem potřeboval (2 VM a 6 LXC) a je to super. Zbavil jsem se dvou RPi4 a jednoho OrangePi při spotřebě jednoho z nich, momentálně jsem na 6-7 W při běžném provozu všech VM a LXC, load si bere 41 W. Pro moje účely to má výkonu až dost, cpu nejde nad 10 %.
Moc neřeším použití jako NAS, mám prostě rozjetou sambu v jednom LXC.
Na cestě mám ještě 2,5 GBit síťovku místo WiFi karty, měla by fungovat.

[Vivec]

Dobrý nabídky na soho server, desky Gigabyte:
MATX AM4, 60€:
https://www.piospartslap.de/Gigabyte-Ma ... rd-NEU-NEW
Info: https://forums.servethehome.com/index.p ... zen.42579/

ITX s embeded Epyc 3151 (45W), 70€:
https://www.ram-koenig.de/Gigabyte-MJ11 ... ter-Server
Info: https://www.truenas.com/community/threa ... s4.115709/

Obvzlášť ta AM4 deska mě zaujala, 6x sata, PCIe 16 umí 4x4x4x4, ECC paměti, další 4x PCIe za prima cenu. Ta ITX je taky hodně zajímavá, ale pro plný využití jsou potřeba speciální kabely, zase ta cena je včetně procesoru a umí i REG paměti, který jsou levnější

[python.p]

Ten ventilátor tam vypadá jako hroznej bast...

Ale zajímavá deska, to jo.