Tekoälyllä luodut karikatyyrikuvat herättäneet paljon keskustelua

NeliYgönen

Ylläpidon jäsen
Liittynyt
02.07.2020
Viestejä
624
tekoäly-virrankulutus-lyhyt-240226.jpg

Karikatyyrikuvat, joita sosiaalisen median käyttäjät ovat viime aikoina luoneet itsestään esimerkiksi ChatGPT:llä, ovat herättäneet runsaasti keskustelua eri näkökulmista. Esimerkiksi energian- ja vedenkulutus ovat suurten tekoälykeskusten kasvavia ongelmia, joiden ratkaisemiseen tarvittaisiin Ylen haastatteleman professorin mukaan poliittista ja eettistä päätöksentekoa. Toinen huolenaihe on käyttäjien yksityisyys, sillä karikatyyrikuvia varten tekoälymallille ladataan usein kuva itsestään, tai pahimmassa tapauksessa toisesta ihmisestä lupaa kysymättä.

Lähde & kuva: Yle
 
Paljon nähnyt näitä, mutta kukaan ei ole kertonut missä voin itse näitä tehdä
openai, google ja tsiljoona muuta. Lataa kuvan ja sanoo "muokkaa kuvaa ... ..." ja muokattu kuva tulee ulos jos muokkaus ei ole palvelusääntöjen vastainan


--

Vesihomma alkaa olemaan menneen talven haihdutuksia. Uudet konesalit pääsääntöisesti suljetulla nestekierrolla. Ei enää vettä haihdu hukkaan kuten ennen. Nvidian seuraavassa jäähdytysneste saa olla melkoisen lämmintä niin säästyy energiaa jäähdytyspuolella sen lisäksi ettei hukata vettä.
“With 45 degrees Celsius, no water chillers are necessary for data centers,” Huang said in his keynote address at the Consumer Electronics Show. “We’re basically cooling this supercomputer with hot water. It’s so incredibly efficient.”
Raising the temp on liquid cooling
 
Viimeksi muokattu:
openai, google ja tsiljoona muuta. Lataa kuvan ja sanoo "muokkaa kuvaa ... ..." ja muokattu kuva tulee ulos jos muokkaus ei ole palvelusääntöjen vastainan


--

Vesihomma alkaa olemaan menneen talven haihdutuksia. Uudet konesalit pääsääntöisesti suljetulla nestekierrolla. Ei enää vettä haihdu hukkaan kuten ennen. Nvidian seuraavassa jäähdytysneste saa olla melkoisen lämmintä niin säästyy energiaa jäähdytyspuolella sen lisäksi ettei hukata vettä.

Raising the temp on liquid cooling

Riippuu.

3840.jpg


Musk jauhaa tekoälyä kaasuturbiineilla ilman lupia, koska väitetysti nuo on trailerin päällä niin jonkun tulkinnan mukaan lupia ei tarvita.

Mutta ei muutakuin karikatyyrit tulille vaan, maailma pelastuu.
 
Tuntuu "vähän" liioitelluilta nuo MIT:n jutun numerot, mihin tuo Ylen juttu pohjaa. Esimerkkinä sanovat että 15 teksti ja 10 kuvageneroitiin: "You’d use about 2.9 kilowatt-hours of electricity", mutta kun vähän alkaa miettimään niin ei kyllä mitenkään voi olla noin paljoa edes pahimmassa tapauksessa. Otetaan nyt vaikka esimerkki jossa käytetään 8 x RTX 6000 näyttiksiä. Jokaisessa 48GB muistia = 384GB yhteensä, tuohon saa mahdutettua helposti esim. chatgpt 4o:ta vastaavan mallin. RTX 6000:ssa 300W TDP, eli yhteensä 2.4kw tunnissa ja heitetään nyt yläkanttiin että muut komponentit veisi 400W = 2.8 kilowattia tunnissa. 15 tekstigeneraatioon tolla setupilla ei menisi paria minuuttia pidempään, tuskin sitäkään. Kuvien generoinnissa taas käytössä on paljon pienemmät mallit joten 10 kuvagenerointiin ei menisi edes minuuttia, kun jokainen näyttis pystyy generoimaan kuvia samanaikaisesti, mutta sanotaan että kesti 3 minuuttia yhteensä. Tällä logiikalla saisin tuossa esimerkin skenariossa 0.14 kWh kulutuksen ja pitäisin tätä itse sellaisena "worst case" skenaariona. Yrityksillä on tietysti käytössä Nvidian serverinäyttikset jotka on paljon energiatehokkaampia kun useiden käyttäjien generointeja pystytään laskemaan samanaikaisesti.
 
Tuntuu "vähän" liioitelluilta nuo MIT:n jutun numerot, mihin tuo Ylen juttu pohjaa. Esimerkkinä sanovat että 15 teksti ja 10 kuvageneroitiin: "You’d use about 2.9 kilowatt-hours of electricity", mutta kun vähän alkaa miettimään niin ei kyllä mitenkään voi olla noin paljoa edes pahimmassa tapauksessa. Otetaan nyt vaikka esimerkki jossa käytetään 8 x RTX 6000 näyttiksiä. Jokaisessa 48GB muistia = 384GB yhteensä, tuohon saa mahdutettua helposti esim. chatgpt 4o:ta vastaavan mallin. RTX 6000:ssa 300W TDP, eli yhteensä 2.4kw tunnissa ja heitetään nyt yläkanttiin että muut komponentit veisi 400W = 2.8 kilowattia tunnissa. 15 tekstigeneraatioon tolla setupilla ei menisi paria minuuttia pidempään, tuskin sitäkään. Kuvien generoinnissa taas käytössä on paljon pienemmät mallit joten 10 kuvagenerointiin ei menisi edes minuuttia, kun jokainen näyttis pystyy generoimaan kuvia samanaikaisesti, mutta sanotaan että kesti 3 minuuttia yhteensä. Tällä logiikalla saisin tuossa esimerkin skenariossa 0.14 kWh kulutuksen ja pitäisin tätä itse sellaisena "worst case" skenaariona. Yrityksillä on tietysti käytössä Nvidian serverinäyttikset jotka on paljon energiatehokkaampia kun useiden käyttäjien generointeja pystytään laskemaan samanaikaisesti.
Tohon 2,9 kWh:iin sisältyi myös kolme viiden sekunnin videota. Huomauttavat artikkelissa myös, että heidän matikkansa perustuu olettamuksiin koska eivät tiedä OpenAI:n ja kumppaneiden nykymallien kokoja.

Mutuilisin kotikoneella ajamieni mallien perusteella että noi kolme videoklippiä on noista se kuluttavin, mutta tämäkin huomioiden oon kyllä samaa mieltä että toi 2,9 kWh kuulostaa todella paljolta.
 
Softassa on tehty todella paljon optimointeja malleihin. Altman viime viikolla näistä kommentoi. Nvidian gb200 ja gb300 rautaa testattu watti per token mielessä
1771961389397.png

 
Softassa on tehty todella paljon optimointeja malleihin. Altman viime viikolla näistä kommentoi. Nvidian gb200 ja gb300 rautaa testattu watti per token mielessä
1771961389397.png

Sit taas mallien kouluttamiseen menee enemmän energiaa ku koskaan ennen. Jotenkin se pitäis noihin lukuihin jyvittää.
 
Sit taas mallien kouluttamiseen menee enemmän energiaa ku koskaan ennen. Jotenkin se pitäis noihin lukuihin jyvittää.
Sulla lukuja miten jyvittää, vaikka prosentit laskentakapasiteetin käytöstä googlen nano banana inferenssi versus banaanin opettaminen?
 
Sulla lukuja miten jyvittää, vaikka prosentit laskentakapasiteetin käytöstä googlen nano banana inferenssi versus banaanin opettaminen?
Onkohan julkasseet? Usein toitotetaan vaan tota inferenssilukua ja kätevästi unohdetaan muu.

Ja sit kans unohdetaan kuinka nykymallit osaa polttaa tokeneita ihan eri tahtia ku jonku 640x480 px kuvan sijaan tehdään 4k videota.
 
Viimeksi muokattu:

Statistiikka

Viestiketjuista
301 221
Viestejä
5 150 072
Jäsenet
81 948
Uusin jäsen
kärpässieni

Hinta.fi

Back
Ylös Bottom