NVIDIA DLSS - info a vše okolo

[Krteq]

U 5070TI 300%
...
150 vs 47

Tak to je o cca. 69% míň FPS, ne 300%

[-+_[]]

Zkoušel jsem Gothic Remake a vypadá to famózně. Performance hit na RTX 4090 je cca 40 procent. (3440x1440 DLSS quality), frame gen on. Někde kolem toho tabora v bažinách jsem měl místo 120 až 130 fps jen 80. Ale asi bych to byl schopen bez problémů s tím hrát.

Nějaké screenshoty k porovnání:
https://imgico.com/c/PJEHA6U
https://imgico.com/c/QfY1jSA

[skaven321]

presne ako na prezentaciach, DLSS 5 si vymysla tvare
a oziaruje ich neznamym zdrojom svetla

[Sobo]

To nasviceni me stve uplne nejvic. Ono to uplne kasle na aktualni pozici a barvu svetel ve scene a proste to tam streli imaginarni bily reflektor pred kazdou postavu...
Coz koresponduje s tim, co uz drive potvrdil nejaky ten nvidia inzenyr - nema to zadny prehled o geometrii objektu, svetlech a jejich pozici, materialech, nic. Vidi to jen uz vyrenderovany 2D obrazek + motion vektory, to je vsechno. Vysledek si to proste vymysli podle dat, na kterych to bylo natrenovane, coz je evidentne jenom tenhle podivny "netflix lightning", kde vsechno vypada stejne na jedno brdo - nejaky art direction hodime rovnou do popelnice.

Pockam na oficialni implementaci nekde, ale zatim se mi to porad nelibi. Radeji budu mit "LiDL" vypadajici postavy, ale korektne respektujici nasviceni sceny a art style vyvojaru.

[marek16]

IMHO to vypadá luxusně, hlavně v obličejích - posílal jsem to i kamarádovi, co je naprosto nepostiženej PC grafikou a shodli jsme se, že DLSS5 nasvícení vypadá o 300% reálněji a "co to ti lidi řeší"?
Jedinej problém tam vidím ten výkon, sice hodnotíte nějako leaklou prerelease verzi, ale jestli to opravdu bude žrát 50%+, s tím že silnější Rubin vyjde až za rok a půl, tak to nebudu zapínat ani já na 5080, protože radši 120fps než pod 60. Dobrou alternativu bych viděl v tom, zapínat to jen na cutscény - tam je to jedno a stejně jsou ksichty nejvíc vidět v nich, ale to by vyžadovalo podporu per hra.

To že si to "vymýšlí" nasvícení je taky blbost, podívejte se sem. Ta neuronovka vidí nasvícení, co spočítala hra předtím a vylepšuje ho - ne vždycky, jednu výhradu mám k občas přesvíceným "mastným" ksichtům, ale to je jen věc ladění, když se podíváte na ty leaknutý videa, je tam asi 10 hejblátek co nvidia může dál tunit.
Pěkně je to vidět tady to napravo vypadá jak fotka: https://www.reddit.com/r/nvidia/comment ... on_a_4070/
Tady si zase můžete prohlídnout jak realisticky to udělá nasvícení v TLOU2, a když se posunete na původní zjev, tak najednou děs běs:
https://www.reddit.com/r/nvidia/comment ... _5_tlou_2/

V jiných scénách to nasvícení může vypadat "genericky", protože ten underlying frame je vyblitej potato, takže neuronovka nemá s čím pracovat.

Tenhle screen je úplně insane:

[DOC_ZENITH]

Znovu tu tedy vytáhnu otázku, k čemu se posledních 8 let tak strašně tlačilo RT nasvětlení když nás to stojí tolik výkonu a i tranzistorů v HW... když teď přijde DLSS5 co celou scénu stejně nasvítí po svym. Jsem zvědavej kdy se tahle kontradikce stane tématem. Možná ve chvíli kdy se přiejde na kompletní neural rednering a nebude už potřeba ani 10% oné rasteritace. Model bude dostávat pouze pokyny, referenční assety a zákaldní informace o scéně a co kde má generovat.

[mouldy]

Myslíš, že před 8-10 lety měli nějaké potuchy, kam se DLSS dostane?

Každopádně vypadá to dobře, ale je to hudba příští generace, možná i té přespříští, kvůli hezčím ksichtům a nasvícení nebudu hrát s 1/3 výkonem.

[DOC_ZENITH]

Myslim si že možná věděli, resp mohli s tim počítat protože transformer based LLMka jsou v podstatě pořád to samý, jen se zdokonalila schopnost je trénovat a fine-tuning.

Sorry ale tohle je prostě operace na 2 karty. Nebo v budoucnu na spešl HW na kartě nebo na čipu. Mluvim o asic HW. AI asicy už jsou v produkci, velcí hráči si je dělaj protože jsou mnohem efektivnější a rychlejší a GPU už jsou pro ně primárně jen na tréning, ne inferenci. DLSS5 je inference, tzn spešl dedicated čip na tohle by byl nejefektivnější řešení, ject to na GPU je pletjvání a neefektivní.

[marek16]

ehm, a k čemu si myslíš že jsou ty tensor cores? to je asic na inferenci, jen nezabírá celej čip, protože ten čip musí dělat i jiný věci.
Jen byly navržený na zátěž X (DLSS+FG), a najednou dělají zátěž Y (mnohem víc heavy model, co před 5 lety, když ten čip byl v návrhu, neexistoval).
DLSS nejede "na GPU", ale na tensor jádrech.
Oddělovat je na další chip by se dalo jen kdyby od AMD koupili ty nový pouzdřící a komunikační technologie co bude mít zen6, protože jinak by to zas mělo prasečí latence jako Intel (co to bylo, Arrow lake?) (i když je otázka jak moc by to vadilo u v podstatě postprocess zpracování...).
Každopádně to jsou zase costs a pouzdřící kapacita, co si Huang schovává pro datacenter chipy za milion, ne pro consumer GPU...

[DOC_ZENITH]

Tensory nejsou asic, ty jsou z tohodle úhlu pohledu velice univerzální, na tensorech se právě trénuje, a asicy jsou cca 10x-50x efekitvnější v inferenci.

DLSS5 se o post-processig nenzajímá, to je součást renderu ještě než to vleze do DLSS5. Ta přeslopuuje celou scénu. Samotná DLSS5 s celmy zbytkem renderu vůbec nesouvisí a neni na něj nijak vázaná. Proto to jméno je dost zavádějící protože klasické DLSS (do 4,5) na něj naopak vázané jsou, počítaj s jeho vektor daty a tak pro boj s ghostingem a tak. DLSS5 nemá s DLSS nic společného, škoda toho konfliktu jmen. Nevim proč to NV nenazívá jinak. Input by mohly bejt ne obraz hry ale klidně video, nebo jen instrukce, DLSS5 je to jedno. Je to jen "X to video (v našem případě video to video) AI model, nemá nic společného s renderingem. Proto to taky NV prezentovala na dvou 5090tkách když to oni sami předváděli.

GPU nejsou efektivní v jednoúčelové inferenci, na to to ihmo chce asic.

[killerek]

-+_[]: Teda nevim, ale na tvých screenech se uplne zmenila barva kuze postav a na tom druhem se jedna postava leskne jako by byla z vylesteneho mramoru ...

[DOC_ZENITH]

Protože lesklá spocená kůžer vypadá cooler ne? O tomhle ještě bude spousta debat a konfliktů, je to něco jako foťáky co auto přesaturovávaj obraz, nebo auto sharpen filtry na videu, atd, atd. Jedno je "cool" druhý je správně, většina BFU se ti ale při blind testu přikloní na stranu cool a zde vzniká onen problém.

Tahle debata tu byla už při původní prezentaci, kdy to komplet změnilo nasvětlení a prezentaci celé scény, nebo třeba počasí. U AI (a to platí i pro normal generátory nejden DLSS5) je vždy problém když po nich chceš něco jiného, ala jak mu sdělíš "ne takhle to nemá bejt nasvětlené, ne ta ženská nemá mít makup, ne tohle je ponurá scéna s nízkym kontrastem, ne, všichni nemaj lesklou mastnou kůži ale třeba jen postavy 1+2 ale 3+4 ne". Ono to neni tak easy když je onen model natrénovanej na něco težko pak dělá něco jiného. A ještě horší je udržet to stabilní, ala aby to při každé scéně nevypadalo jinak, aby se ony parametry nepřelily na jinou postavu a pod.

[killerek]

V realu sem videl leskouci se jen naolejovane kulturisty. Vetsina sportovcu se ani spocena nijak zvlast neleskne.

Z tohohle duvodu bracha vypinal to AI udelatko na vylepseni videa u nove OLED TV, protoze najednou zenska bez makeupu mela namalovane rty. Proste to uplne zmenilo vyzaz te postavy, ze to ani nesedelo do sceny.

[Mafian277198]

Jako technologická věc je to zajímavý, ale za mě v praxi nepoužitelný, Na RT není výkon a DLSS si může v určitejch situacích dělat co chce a ve výsledku je to všechno mimo. Za mě DLSS blbost, maximálně jako berlička pro stárnoucí/slabší HW, aby rozjel nový/náročný hry s lepším výkonem na úkor kvality (někomu se to líbit bude, jako třebas lidi, co si ekvalizérem „vylepšují“ zvuk, většinou bassy v hudbě nebo pro dunivý výbuchy ve hrách) a RT k ničemu kvůli absenci dostatečnýho výkonu HW...

[DOC_ZENITH]

Hlavně by se to nemělo jmenovat DLSS5. I sama NV tomu interně říká DLSS Neural rendering, i se tak jmenujou ta souboru co unikly heh. Stále tu je problém onoho odladění na konkrétní situace a produkty. Slop "cool filtr" velice rychle omrzí to vám můžu garantovat a to i když to jakžtakž funguje. Pak jsou ale situace kdy ne, viz Cloud Strife a jak to z něj udělalo ženskou, protože model jej vyhodnotil jako ženskou a zvýraznil mu "to co si myslí že by na ženský měl zvýrazňovat, ala dehet pod očima, červené tučné rty, atd. Fail. Problém je že jakmile to hodnotí a aplikuje efekty takhle tak ve finále bude vše vypadat stejně.

I prezentace toho co jsem viděl nyní v souvislosti s tim leakem, lidi třeba tleskaj Cyberpunku jak je tam ženská v baru a s DLSS5 je mnohem více kontrastrní a cool a ok... cool to je, reliastické nasvětlení to neni ani omylem, sorry ale v středně silně nasvícené místnosti fakt neni vesta u výstřihu temná černá díra na kterou mé oko nemá dynamic range. Naopak, relisticky v takovéto místnosti vidim prakticky všechno a to i když ten objekt je hned vedle té lampy. Lidské oko neni shit kamera s nulovym dynamic range, naopak máme rqange dost masivní a vidíme co je v temných koutech.

Vše je to masivní counter argument proti RT. Takže 8 let se tu buduje RT, snažíme se o plynunej path-tracing, ray reconstruction aby to jakžtakž běhalo a tak, a pak bum, DLSS5 vyhodí veškeré realistické nasvětlení a prostě to vyslopí aby to vypadalo cool. Co je teda budoucnost? DLSS5 nebo RT+ DLSS4,5 + nedávno uvednej novej ray recnostruction protože ten se tentokrát povedl? Protože DLSS5 totálně ničí/zahazuje to co ti výše jmenovaní vytvořili.

Já bych rád aby se NV nesoustředila na tohle, ale pokud si myslej že tohle je fakt budoucnost tak ať jdou naplno do neural-renderingu a neztrácej čas s ňákými slop filtry.

[jctrnacty]

Pokrok nezastavis.....

spis bych se priklanel, kdyby misto grafiky konecne protlacili nejakej physics format. Od dob GTA IV nikdo neprisel s lepsi implementaci fyziky.(snad jedine beamNG). Tady vidim budoucnost, graficky jsme se dostali dostatecne daleko, ze uz to nelze rozeznat o reality viz Bodycam.

Ale kokoti to v nv zabili, kdy po koupi aegia physx to totalne pohrbili a dal uz nerozvijeli. Stejne tak intel s havokem. TAdy maji moznost protlacit smer ktery dava smysl a grafika to v pohode spocita. Zvedne nekdo tu rukavici???