Navigacija
Lista poslednjih: 16, 32, 64, 128 poruka.

Gde vidite Intel-a za nekih 2 do 5 godina? :)

[es] :: Advocacy :: Gde vidite Intel-a za nekih 2 do 5 godina? :)

Strane: << < .. 90 91 92 93 94 95 96 97 98 99 ... Dalje > >>

[ Pregleda: 296600 | Odgovora: 3024 ] > FB > Twit

Postavi temu Odgovori

Autor

Pretraga teme: Traži
Markiranje Štampanje RSS

Ivan Dimkovic

Administrator
Član broj: 13
Poruke: 16687
*.telemaxx.net.



+7177 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)20.01.2021. u 16:13 - pre 39 meseci
@Branimir Maksimovic,

OK, i sta ces tacno da radis sa AVX-512 sa DDR5? Pricamo o kucnoj upotrebi, ne nekom HPC-u, jel da?

- Post-procesiranje slika / videa? Osim ako nisu neki R&D filteri koji >nisu< DL, hardverski IP (fixed function ili TPU) ce uvek jesti CPU ili GPU za dorucak

- Neki gejming... fizika sta li? Ne secam se da sam video nesto u upotrebi

- Obrada signala? Za jednu sesiju (neki lab / R&D) OK. Za masivno procesiranje signala mozda samo u toku razvoja (mada, onda bih isao na cist matlab ili C/C++ kod) - za masivni deploy to nema sanse da ostane na CPU instrukcijama.

- Nesto specijalizovano, bas kao sahovski softver koji Nedeljko pominje ili nesto vezano za nauku ili inzenjering.. da, to je niche o kojem sam pricao: HPC i Workstation

@Nedeljko,

Ma to je sve u redu, svakako da ce uvek biti aplikacija koje ce iskoristiti neke instrukcije - pogotovu ako su u pitanju instrukcije za rad sa vektorima.

Ali sve to bukvalno moze da opravda par Xeon modela (od kojih ces osakatiti jedan i prodavati ga kao "HEDT" desktop) i mozda neki specijalizovani Atom.

Intel je bukvalno imao strategiju da trpa to gde stigne. Jedino sto ih je sprecilo je surova realnost da im je 10nm proces bio djubre. Da se, kojim slucajem, 10nm desio u 2015, danas bi verovatno imali ultra-thin laptope koji bi morali biti nakaceni na AC napajanje pre nego sto poteras neki AVX-512 benchmark :-)

AVX-512 zahteva povrsinu na CPU plocici i koriscenje istih instrukcija je ocigledan izazov i za Intel sto se potrosnje tic. Za serverske i workstation procesore koji su namenjeni aplikacijama koje mogu imati koristi je to OK.

Ali trpati to u laptop i desktop modele...




DigiCortex (ex. SpikeFun) - Cortical Neural Network Simulator:
http://www.digicortex.net/node/1 Videos: http://www.digicortex.net/node/17 Gallery: http://www.digicortex.net/node/25
PowerMonkey - Redyce CPU Power Waste and gain performance! - https://github.com/psyq321/PowerMonkey
 
Odgovor na temu

ademare

Član broj: 151475
Poruke: 8095



+1755 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)20.01.2021. u 16:27 - pre 39 meseci
Pa laptopovi vec imaju odavno AVX-512 . Ice Lake i Tiger Lake .

Za desktop ceka se nova 11.gen Rocket Lake tj , Ice Lake na 14 nm .

Bane izgeda to i ceka pa da kupuje , da ga zelja mine za AVX -512
 
Odgovor na temu

Nedeljko
Nedeljko Stefanović

Član broj: 314
Poruke: 8632
*.dynamic.isp.telekom.rs.



+2790 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)20.01.2021. u 16:39 - pre 39 meseci
Dakle, ne radi se o tome da te instrukcije ne trebaju, kao ni o tome da im primene neće biti široke, nego o tome da intel nije uspeo da dođe do 7nm. E, to je drugi padež i ne treba mešati sa instrukcijama koje su potrebne.
Nije bitno koji su zaključci izvučeni, već kako se do njih došlo.
 
Odgovor na temu

Ivan Dimkovic

Administrator
Član broj: 13
Poruke: 16687
*.telemaxx.net.



+7177 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)20.01.2021. u 20:24 - pre 39 meseci
Te instrukcije nisu potrebne kad imas bolji nacin da resis potrebe aplikacija koje se vrte na laptopovima i kucnim masinama.

Pricam o 99% upotrebe - znaci konzumacija sadrzaja, laka kreacija sadrzaja, malo obrade fotografija, videa, sve vise i vise AI/ML-a (od logina, preko post-procesiranja slike i zvuka). Da te tranzistore sto si bacio na AVX-512 iskoristis za nesto pametnije, korisnici bi ti bili zahvalni. Ili da to lepo uklonis i malo ustedis na potrosnji energije.

Oni kojima treba AVX-512 uvek mogu kupiti HEDT/Workstation procesore.


DigiCortex (ex. SpikeFun) - Cortical Neural Network Simulator:
http://www.digicortex.net/node/1 Videos: http://www.digicortex.net/node/17 Gallery: http://www.digicortex.net/node/25
PowerMonkey - Redyce CPU Power Waste and gain performance! - https://github.com/psyq321/PowerMonkey
 
Odgovor na temu

Nedeljko
Nedeljko Stefanović

Član broj: 314
Poruke: 8632
*.dynamic.isp.telekom.rs.



+2790 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)20.01.2021. u 21:10 - pre 39 meseci
E, to korišćenje sadržaja će sve više imati neku veštačku inteligenciju ili nešto drugo.

To što je nešto jednostavno za korišćenje, ne znači da su algoritmi iza toga jednostavni, niti da ne zahtevaju ne znam koje instrukcije.

Takođe, način na koji su računari korišćeni u 2020-te nije nalik na način na koji su korišćeni 2010-te, a on nije nalik na koji su korišćeni 2000-te.
Nije bitno koji su zaključci izvučeni, već kako se do njih došlo.
 
Odgovor na temu

Ivan Dimkovic

Administrator
Član broj: 13
Poruke: 16687
...kabel-badenwuerttemberg.de.



+7177 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)21.01.2021. u 00:53 - pre 39 meseci
@Nedeljko,

Upravo suprotno - algoritmi su sve komplikovaniji i komplikovaniji.

Kada na nekom najnovijem telefonu "skljocnes" fotku, kolicina post-procesiranja je nesto sto je radjeno u Holivudu 90-tih, i to ne real-time niti u dzepu :-)

Ali fora je sledeca: gomila tih algoritama se ne menjaju brze od vremena zamene hardvera, i zato je daleko efikasnije prebaciti ih na custom IP. Divoda sa tim custom IP-om je sto lepo mozes da ga ugasis da ne smeta kad se ne koristi kompet. Takodje, radom taj IP moze da se izoluje tako da utice samo na minimalan broj komponenti - tako danas Apple & Co postizu da mozes da gledas sate i sate filmova na tabletu, bez da ode baterija. To je zato sto video dekodiranje i render radi hardverski IP dok ostatak procesora i memorije vecinu vremena provodi u niskom stanju potrosnje.

Ono sto ostane, npr. "deep learning" (fancy naziv za velike neuronske mreze) - tu ce isto tako zasebna jedinica koja samo ovo radi (TPU) biti daleko efikasnija, zato sto mogu da implementiraju precice.

Pazi ovo, ovo mozes da radis kad znas da ti "black box" radi vrlo specijalizovan posao:



Uvodis precice i trikove, koje ne bi mogao da ne znas sta ce tacno da se vrti.
DigiCortex (ex. SpikeFun) - Cortical Neural Network Simulator:
http://www.digicortex.net/node/1 Videos: http://www.digicortex.net/node/17 Gallery: http://www.digicortex.net/node/25
PowerMonkey - Redyce CPU Power Waste and gain performance! - https://github.com/psyq321/PowerMonkey
Prikačeni fajlovi
 
Odgovor na temu

Nedeljko
Nedeljko Stefanović

Član broj: 314
Poruke: 8632
*.dynamic.isp.telekom.rs.



+2790 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)21.01.2021. u 01:23 - pre 39 meseci
Ja kažem da, ako je korišćenje jednstavno, algoritmi za to ne moraju da budu jednostavni, a ti kažeš da su algoritmi sve komplikovaniji. Šta je tu suprotno?

Dakle, nove operacije će ti trebati. HW akceleracija za ovo-ono. Nekada je FPU izdvajan kao nešto zasebno (matematički koprocesor), a sada je u istom komadu plastike. Procesori se odavno integrišu i sa grafičkim karticama, tako da se i one strpaju u isti komad plastike. Nisu bogznašta, ali niko ne osporava potrebu za jačim, tako da ima da se kupi.

Za potrebe ja ne brinem da će ih biti i da će rasti.
Nije bitno koji su zaključci izvučeni, već kako se do njih došlo.
 
Odgovor na temu

Ivan Dimkovic

Administrator
Član broj: 13
Poruke: 16687
2a02:8071:31e1:dd00:7109:368..



+7177 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)22.01.2021. u 01:02 - pre 39 meseci
Pa nije bas tako.

AVX-512 tj. "dugi" vektori jednostavno nisu potrebni za kucnu upotrebu.

Skoro sve sto je potrebno "za kucu" je obicno, algoritamski, debelo zrelo tako da bez rizika mozes da ga direktno sintetises u tranzistore. Ne treba ti procesor.

Za ono sto nije, gledaj, AVX-512 nije nikakva sreca. Hebes ti post-procesor za video playback koji ce da mi oguli bateriju za pola sata.

DigiCortex (ex. SpikeFun) - Cortical Neural Network Simulator:
http://www.digicortex.net/node/1 Videos: http://www.digicortex.net/node/17 Gallery: http://www.digicortex.net/node/25
PowerMonkey - Redyce CPU Power Waste and gain performance! - https://github.com/psyq321/PowerMonkey
 
Odgovor na temu

Ivan Dimkovic

Administrator
Član broj: 13
Poruke: 16687
2a02:8071:31e1:dd00:7109:368..



+7177 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)22.01.2021. u 01:10 - pre 39 meseci
Odlican "Part 1" video istorije Intel-a - od samih pocetaka (Shockley-eva grupa, "8 izdajica", Fairchild, ...):



12:08 - pocinje prica kako je pocela era racunara kakve znamo danas.

"Just figure it out..." :-)
DigiCortex (ex. SpikeFun) - Cortical Neural Network Simulator:
http://www.digicortex.net/node/1 Videos: http://www.digicortex.net/node/17 Gallery: http://www.digicortex.net/node/25
PowerMonkey - Redyce CPU Power Waste and gain performance! - https://github.com/psyq321/PowerMonkey
 
Odgovor na temu

Branimir Maksimovic

Član broj: 64947
Poruke: 5534
185.159.156.4



+1064 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)22.01.2021. u 01:25 - pre 39 meseci
Citat:
Ivan Dimkovic:
Pa nije bas tako.

AVX-512 tj. "dugi" vektori jednostavno nisu potrebni za kucnu upotrebu.

Skoro sve sto je potrebno "za kucu" je obicno, algoritamski, debelo zrelo tako da bez rizika mozes da ga direktno sintetises u tranzistore. Ne treba ti procesor.

Za ono sto nije, gledaj, AVX-512 nije nikakva sreca. Hebes ti post-procesor za video playback koji ce da mi oguli bateriju za pola sata.


Pa MMX je uveden da bi mogao da gledas video i da slusas mp3ke na tadasnjim pentiumima ;)

 
Odgovor na temu

Ivan Dimkovic

Administrator
Član broj: 13
Poruke: 16687
2a02:8071:31e1:dd00:7109:368..



+7177 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)22.01.2021. u 01:52 - pre 39 meseci
Da, drugo vreme, druge instrukcije.

U momentu uvodjenja MMX-a, 1996-te - audio i video codeci su bukvalno bili u stanju ranog razvoja na PC-u.

I te instrukcije su bile jednostavne i sa sirokom primenom.

AVX-512? Susta suprotnost. Pravo cudo pa imas pun q korisnickih aplikacija koje profitiraju od AVX-512. Kad bi se zezali.
DigiCortex (ex. SpikeFun) - Cortical Neural Network Simulator:
http://www.digicortex.net/node/1 Videos: http://www.digicortex.net/node/17 Gallery: http://www.digicortex.net/node/25
PowerMonkey - Redyce CPU Power Waste and gain performance! - https://github.com/psyq321/PowerMonkey
 
Odgovor na temu

Branimir Maksimovic

Član broj: 64947
Poruke: 5534
185.159.156.4



+1064 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)22.01.2021. u 02:00 - pre 39 meseci
Ivan:"U momentu uvodjenja MMX-a, 1996-te - audio i video codeci su bukvalno bili u stanju ranog razvoja na PC-u."

Problem je bio sto nisi uopste mogao da gledas kodirane strimove, kompovi su bili toliko slabi.
Koliko se secam ili si morao nekompresovano ili da koristis losiji kvalitet. Sa obzirom da je memorija
bila ogranicena, ni to nije bila opcija.

"AVX-512? Susta suprotnost. Pravo cudo pa imas pun q korisnickih aplikacija koje profitiraju od AVX-512. Kad bi se zezali."

Pa znas kako, zfs koristi max toga, pa blender, pa Handbrake i slicni. Gde god imas stream koji treba da se obradi tu se zgodno
nadje. Koriscenje AVX512 nije komplikovano doraditi uglavnom samo povecas vektore, sto se tice C koda.
Asembler je druga prica... E sad, to sto ne donosi drasticna ubrzanja 50+% zahvali DDR4 i sporom L3 koji je Intel iz
nekog razloga napravio na prvim primercima koji su podrzavali AVX512. Da li je i dalje L3 tako spor, posle 3 godine,
ne znam, ali ono kad moras da podatke drzis u L2 da bi se osetilo ubrzanje i nije neka prednost...
 
Odgovor na temu

Branimir Maksimovic

Član broj: 64947
Poruke: 5534
185.159.156.4



+1064 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)22.01.2021. u 02:09 - pre 39 meseci
Nego, evo zgodne stvari za ljubitelje neural mreza i AVX512:

Citat:

Introduction

NN-512 is a compiler that generates C99 code for neural net inference
It takes as input a simple text description of a convolutional neural net inference graph
It produces as output a stand-alone C99 implementation of that graph
The generated C99 code uses AVX-512 vector instructions to perform inference

The generated C99 code is human-readable and should be compiled with GCC 9.1 or later
Earlier versions of GCC may also be used, yielding slightly inferior object code
The generated C99 code has no dependencies outside the C POSIX library
NN-512 is a Go program with no dependencies outside the Go standard library
The NN-512 compiler executable is stand-alone

NN-512 performs a variety of inference graph optimizations
Fusion of elementwise operations into adjacent operations
Fusion of similar convolutions (as needed for, e.g., ResNet)
Removal of concatenations (as needed for, e.g., DenseNet)
End-to-end planning of memory layout

NN-512 generates specialized code for each tensor operation
Guided by a description of the target CPU cache hierarchy
Thread-level parallelism is maximized while limiting synchronization costs
Simplified code is generated for tensor edges, exploiting tile/vector overhang
Complete knowledge of memory layout simplifies addressing


https://nn-512.com/


 
Odgovor na temu

Ivan Dimkovic

Administrator
Član broj: 13
Poruke: 16687
2a02:8071:31e1:dd00:7109:368..



+7177 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)22.01.2021. u 02:32 - pre 39 meseci
Zanimljivo, u Intel se vraca ekipa iza Nehalem-a (prvi "Core")

https://www.anandtech.com/show...ehiring-retired-cpu-architects

Citat:

New Intel CEO Making Waves: Rehiring Retired CPU Architects

News in the last 24 hours, based on public statements, states that former Intel Senior Fellow Glenn Hinton, who lists being the lead architect of Intel’s Nehalem CPU core in his list of achievements, is coming out of retirement to re-join the company
..


Iako Hinton izgleda pregovara neko vreme, on je sam napisao da je postavljanje Gelsingera na CEO poziciju bilo potrebno za odluku. Moguce je da ima jos necega i da Pat zeli da ima oko sebe ekipu kojoj moze da veruje :-)

Kad smo kod Nehalema:

Evo vam jedno predavanje koje je retka prilika da se ima mali uvid u tok razvoja Intel procesora:

https://web.stanford.edu/class/ee380/Abstracts/100217-slides.pdf

Nehalem je izasao krajem 2008 - a kao sto se vidi u predavanju, glavne odluke su pocele da se prave jos 2003-ce. Skoro kompletna mikroarhitektura je odlucena do 2004.

Zanimljivo je da je Merom u razvoju bio jos od 2001.

@Bane, posebno te zanima strana 14. VSSE je bio rani naziv za AVX



DigiCortex (ex. SpikeFun) - Cortical Neural Network Simulator:
http://www.digicortex.net/node/1 Videos: http://www.digicortex.net/node/17 Gallery: http://www.digicortex.net/node/25
PowerMonkey - Redyce CPU Power Waste and gain performance! - https://github.com/psyq321/PowerMonkey
 
Odgovor na temu

Branimir Maksimovic

Član broj: 64947
Poruke: 5534
185.159.156.4



+1064 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)22.01.2021. u 03:09 - pre 39 meseci
Nehalem je i prva Intel arhitektura koja je preuzela integrisani kontroler umesto FSB i Numa arhitekturu mislim.
 
Odgovor na temu

mjanjic
Šikagou

Član broj: 187539
Poruke: 2712



+700 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)22.01.2021. u 16:18 - pre 39 meseci
A čemu bi tačno služio L3 keš, pa čak i L2, ako memorija radi na taktu procesora i nalazi se na istoj pločici (SoC), i te memorije ima npr. 16GB?

Još Pentium Pro je imao nešto slično, doduše L2 keš koji je kod x86 procesora uveden prvi put, i cena je bila za ono vreme astronomska, a performanse u odnosu na tadašnju konkurenciju... posebno po pitanju brzine FPU i upisa u video memoriju.

Sa druge strane, propao je jedan SGI čiji najveći kupci su bili Vlada SAD (posebno Ministarstvo odbrane SAD), kao i naučne institucije, a sada pričamo da će država da stane iza Intela zbog nekih svojih interesa — ok, sad je priča o bezbednosti podataka i špijuniranju na daleko višem nivou, ali opet...
Blessed are those who can laugh at themselves, for they shall never cease to be amused.
 
Odgovor na temu

Branimir Maksimovic

Član broj: 64947
Poruke: 5534
185.159.156.4



+1064 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)22.01.2021. u 16:43 - pre 39 meseci
mjanjic:"A čemu bi tačno služio L3 keš, pa čak i L2, ako memorija radi na taktu procesora i nalazi se na istoj pločici (SoC), i te memorije ima npr. 16GB?"

razlika je dal ces cekati 30 ili 300 taktova. A da memorija radi na taktu procesora jos nismo videli. Apple m1 ima 4266 a to je pola od toga,
plus latencija je bar 60ns. DDR5 pocinje sa 4800 a bice ga i 8000+ kasnije, a to je vec ozbiljno i na taktu procesora.
 
Odgovor na temu

mjanjic
Šikagou

Član broj: 187539
Poruke: 2712



+700 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)22.01.2021. u 22:25 - pre 39 meseci
Na to sam i mislio, pre smo negde pomenuli da će nova generacija Intela da podržava DDR5 i da će praktično RAM raditi na istoj frekvenciji kao i procesor - a možda i brže :)

Problem sa taktom procesora je složenost - na nekoj konferenciji u vezi rezultata projekata i istraživanja na temu simulacije rada ljudskog mozga (mislim da je "Human Brain Project"), jedan od radova se bavio procesorom koji bi bio pogodan za to, i upravo je kao ograničenje postojećih procesora naveo često obraćanje memoriji na šta se gube dragoceni taktovi, a složenost procesora ne omogućava dalje povećanje radne frekvencije, pa će dalje usložnjavanje procesora dovesti do obaranja frekvencije (problem je kašnjenje, odnosno sinhronizacija svih delova procesora pri visokim frekvencijama), ili ćemo morati da se vratimo jednostavnijoj arhitekturi pogodnoj za AI.

Tu je autor predložio arhitekturu kod koje bi procesor sadržao manje komplikovanu logiku, a višak prostora na silicijumu bi se iskoristio za RAM.

Eto, Apple je uradio nešto što delimično primenjuje tu ideju, samo što CPU i GPU nisu baš tako jednostavni, ali RAM je tu :)
Blessed are those who can laugh at themselves, for they shall never cease to be amused.
 
Odgovor na temu

Ivan Dimkovic

Administrator
Član broj: 13
Poruke: 16687
188.92.135.*



+7177 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)22.01.2021. u 23:58 - pre 39 meseci
Human Brain Projekat bi najefikasnije radio na arhitekturi koja je bliska bioloskim neuronima, ali takva arhitektura jos ne postoji - bar ne u komercijalnom smisllu uporedivim sa mainstream-om.

Mermistori, auto-asocijativna memorija i sl. su koncepti koji su probani, ali za sada nista od toga ne moze da prismrdi klasicnom Von Neumann-u.

Citat:

Tu je autor predložio arhitekturu kod koje bi procesor sadržao manje komplikovanu logiku, a višak prostora na silicijumu bi se iskoristio za RAM.


Evo i ja predlazem jednu arhitekturu - procesor bih drasticno uprostio i namestio da mu tranzistori okidaju 0-100 Hz.

Podaci ne bi bili pohranjeni u spoljnoj memoriji, vec ce biti ukodirani u "jacine" individualnih sinapsa.

I odmah posle trka za "sleep" gde se celo kolo oslobodilo "akcije" i boravi na energetskom minimumu.

Onda bih te drasticno uproscene procesore umnozio, da novi sistem ima koju stotinu milijardi istih procesorcica koji trce na max. 100 Hz.

Cek... ovo sam negde vec video... ne mogu da se setim gde...

Jedino nismo jos resili problem zicenja... 200 milijardi procesorcica ce praciti solidan cross-taalk.

DigiCortex (ex. SpikeFun) - Cortical Neural Network Simulator:
http://www.digicortex.net/node/1 Videos: http://www.digicortex.net/node/17 Gallery: http://www.digicortex.net/node/25
PowerMonkey - Redyce CPU Power Waste and gain performance! - https://github.com/psyq321/PowerMonkey
 
Odgovor na temu

Branimir Maksimovic

Član broj: 64947
Poruke: 5534
185.159.156.4



+1064 Profil

icon Re: Gde vidite Intel-a za nekih 2 do 5 godina? :)23.01.2021. u 00:52 - pre 39 meseci
Problem sa emulacijom mozga kako se to danas zamislja je u tome sto mozak trosi 20W, a takav superkompjuter megavat. Negde je nesto
poslo naopako...
 
Odgovor na temu

[es] :: Advocacy :: Gde vidite Intel-a za nekih 2 do 5 godina? :)

Strane: << < .. 90 91 92 93 94 95 96 97 98 99 ... Dalje > >>

[ Pregleda: 296600 | Odgovora: 3024 ] > FB > Twit

Postavi temu Odgovori

Navigacija
Lista poslednjih: 16, 32, 64, 128 poruka.