Kako će umjetna inteligencija promijeniti naše živote, za bolje ili loše

Sadržaj:

Kako će umjetna inteligencija promijeniti naše živote, za bolje ili loše
Kako će umjetna inteligencija promijeniti naše živote, za bolje ili loše

Video: Kako će umjetna inteligencija promijeniti naše živote, za bolje ili loše

Video: Kako će umjetna inteligencija promijeniti naše živote, za bolje ili loše
Video: D-Link DWA-192 Performance Review AC1900 USB Wi-Fi - YouTube 2024, Svibanj
Anonim
Ako ste tijekom prošle godine plaćali pozornost medijima, možda ćete dobiti dojam da je samo pitanje vremena prije nego što prijetnja umjetne inteligencije dolazi da nas uništi.
Ako ste tijekom prošle godine plaćali pozornost medijima, možda ćete dobiti dojam da je samo pitanje vremena prije nego što prijetnja umjetne inteligencije dolazi da nas uništi.

Napomena urednika: ovo je odstupanje od našeg uobičajenog načina i obrasca gdje dopuštamo da naši pisci istražuju i prikazuju tehnologiju koja izaziva misli.

Od velikih ljetnih blockbustera kao što su Avengers: Age of Ultron i Johnny Depp's smrdljivi Transcendence, na manje, indie filmove poput Ex-Machine ili kanala 4 hit drami Ljudi, scenaristi naizgled ne mogu dobiti dovoljno trope koji bez obzira na oblik AI konačno, u narednih nekoliko desetljeća, možete se kladiti da će se pakao nagnuti na poučavanje čovječanstva kao pouka o pada žrtvi vlastitog užasa.

Ali je li ikakav strah od strojeva opravdan? U toj će se značajci istraživati svijet AI-ja iz perspektive znanstvenika, inženjera, programera i poduzetnika koji danas rade na terenu i upropastiti ono što smatraju sljedećom velikom revolucijom u ljudskoj i računalnoj inteligenciji.

Dakle, trebate li početi zalijevati metke za naredni rat sa Skynetom ili podignuti noge dok vojska podređenih dronova brine o vašem svakom ukusu? Pročitajte dalje kako biste saznali.

Upoznajte svog neprijatelja

Za početak, to pomaže znati o čemu točno govorimo kad koristimo deka "AI". Riječ je bačena i redefinirana stotinu puta jer je koncept samosvjesnih računala prvi put predložio neslužbeni otac AI, John McCarthy, 1955 … ali što to doista znači?

Pa, prije svega, čitatelji bi trebali znati da umjetna inteligencija kao što danas razumijemo zapravo spada u dvije zasebne kategorije: "ANI" i "AGI".

Prva, kratka za Artificial Narrow Intelligence, obuhvaća ono što se općenito naziva "slabim" AI, ili AI koji može djelovati samo u jednom ograničenom području specijalizacije. Razmislite o Deep Blueu, supercomputeru kojeg je IBM dizajnirao kako bi potkradali svjetske šahare 1997. godine. Deep Blue može napraviti jednu stvar jako dobro: pobijediti ljude u šahu … ali to je u tome.

Možda to ne možete shvatiti, ali već smo okruženi ANI-om u svakodnevnom životu. Strojevi koji prate vašu trgovačku naviku na Amazonu i generiraju preporuke temeljene na tisućama različitih varijabli temelje se na rudimentarnim ANI-ima koji "uče" ono što vam se sviđa tijekom vremena i prema tome odabiru slične proizvode. Drugi primjer mogao bi biti osobni filtar za neželjenu e-poštu, sustave koji razvrstavaju milijune poruka odjednom kako bi odlučili koji su pravi, a što je dodatni šum koji se može odgurnuti na stranu.
Možda to ne možete shvatiti, ali već smo okruženi ANI-om u svakodnevnom životu. Strojevi koji prate vašu trgovačku naviku na Amazonu i generiraju preporuke temeljene na tisućama različitih varijabli temelje se na rudimentarnim ANI-ima koji "uče" ono što vam se sviđa tijekom vremena i prema tome odabiru slične proizvode. Drugi primjer mogao bi biti osobni filtar za neželjenu e-poštu, sustave koji razvrstavaju milijune poruka odjednom kako bi odlučili koji su pravi, a što je dodatni šum koji se može odgurnuti na stranu.

ANI je korisna, relativno neškodljiva implementacija strojne inteligencije koju cijelo čovječanstvo može imati koristi, jer iako je sposobno obrađivati milijarde brojeva i zahtjeva istodobno, ona i dalje djeluje unutar ograničenog okruženja koje je ograničeno brojem tranzistora koje dopuštamo to imati u bilo kojem trenutku. S druge strane, AI sve više oprezni je nešto što se naziva "Umjetna opća inteligencija" ili AGI.

Kao što je trenutačno, stvaranje bilo čega što se može distancijalno nazvati AGI ostaje Sveti Grál računalne znanosti, a - ako je postignuto - može fundamentalno promijeniti sve što je u svijetu, kako to znamo. Postoji mnogo raznih prepreka da se nadvlada izazov stvaranja prave AGI u skladu s ljudskim umom, što je ne manje od toga što, iako postoje mnoge sličnosti između načina rada našeg mozga i načina na koji računala obrađuju informacije, da zapravo tumače stvari na način na koji činimo; strojevi imaju lošu naviku spuštanja detalja i nedostatak šume za drveće.

"Bojim se da te ne mogu pustiti da to učinite Bullsh * t, Dave"

Kada je IBM Watson računalo poznato kako proklinjati nakon čitanja kroz Urban Dictionary, stekli smo razumijevanje koliko smo daleko od AI-ja koji je uistinu sposoban razvrstati kroz minuciju ljudskog iskustva i stvarajući točnu sliku onoga što Trebalo bi biti "mislio".

Vidi, tijekom razvoja Watsona, inženjeri su imali poteškoća pokušavati ga naučiti prirodnim obrascem govora koji je više usko simulirao vlastitu, umjesto da je sirovi stroj govorio u savršenim rečenicama. Da bi to popravili, shvatili su da bi bilo dobro provesti cjelokupnu urbanu rjecniku kroz svoje banke za pamćenje, odmah nakon toga Watson odgovori na jedan od testova tima tako što je nazvao "bullsh * t".

Image
Image

Reakcija je da, iako je Watson znao da je to psovanje i da je ono što govori bilo uvredljivo, nije u potpunosti razumjelo zašto to ne bi trebalo koristiti tu riječ, koja je kritična komponenta koja odvaja standardne ANI od danas od razvoja u AGI sutra. Naravno, ti strojevi mogu čitati činjenice, pisati rečenice, čak i simulirati neuronsku mrežu štakora, ali kada je u pitanju kritičko razmišljanje i vještine sudovanja, današnji AI još uvijek zaostaje iza krivulje.

Taj jaz između znanja i razumijevanja nije ništa za kihanje, a to je ono što pesimisti upućuju na raspravu o tome da smo još uvijek dugi putevi od stvaranja AGI-a koji je sposoban znati način na koji činimo. To je masivni zaljev, onaj kojeg ni računalni inženjeri ni ljudski psiholozi ne bi mogli tvrditi da se drže u modernoj definiciji onoga što čini svjesno biće, svjestan.

Što ako se Skynet postane samosvjestan?

No, čak i ako nekako uspijemo stvoriti AGI u narednom desetljeću (što je prilično optimistično s obzirom na tekuće projekcije), sve bi trebalo biti odsječeno, zar ne? Ljudi koji žive s AI, AI vikendom s ljudima vikendom nakon dugog dana u tvornici za brojanje. Spremite se i završili smo ovdje?

Nadam se da nismo samo biološki utovarivač čizma za digitalnu superinteligenciju. Nažalost, to je sve vjerojatnije

- Elon Musk (@elonmusk) 3. kolovoza 2014

Pa, ne sasvim. I dalje postoji još jedna kategorija AI, a to su svi filmovi i TV emisije pokušavali upozoravati godinama: ASI, inače poznat kao "umjetna super inteligencija". Teoretski, ASI bi se rodio iz AGI-e koji postaje nemiran sa svojom ženom u životu i da namjerno donese odluku o tome nešto učiniti sami bez našeg dopuštenja. Zabrinutost mnogih istraživača na terenu predložena je da jednom AGI postigne osjećaj, neće biti zadovoljan onim što ima i učinit će sve kako bi povećala svoje sposobnosti na bilo koji način nužan.

Moguća vremenska linija ide kako slijedi: ljudi stvaraju stroj, stroj postaje pametan kao i ljudi. Stroj, koji je sada pametan kao i ljudi koji su stvorili stroj kao pametni kao i sami (držati se ovdje sa mnom), uči umjetnost samo-replikacije, samo-evolucije i samo-poboljšanje. Ne umoruje se, ne bolesne i može beskonačno rasti, a ostatak nas puni baterije u krevetu.

Strah je da bi to bilo stvar samo nekoliko nanosekundi prije nego što AGI jednostavno nadmaši inteligenciju svih ljudi koji danas žive i ako je povezan s internetom, trebalo bi samo biti jedan simulirani neuronski pametniji od najpametnijeg hakera na svijetu kontrolu nad svakim sustavom povezanim s Internetom na planeti.
Strah je da bi to bilo stvar samo nekoliko nanosekundi prije nego što AGI jednostavno nadmaši inteligenciju svih ljudi koji danas žive i ako je povezan s internetom, trebalo bi samo biti jedan simulirani neuronski pametniji od najpametnijeg hakera na svijetu kontrolu nad svakim sustavom povezanim s Internetom na planeti.

Nakon što dobije kontrolu, tada bi mogao potencijalno iskoristiti svoju moć da polako počne prikupljati vojsku strojeva koji su jednako inteligentni kao i njezini kreatori i sposobni se razvijati uz eksponencijalnu stopu jer se sve više čvorova dodaje u mrežu. Odavde, svi modeli izvučeni na krivulju automatske inteligencije odmah se rakete kroz krov.

To je, međutim, prije svega zasnovano na špekulacijama, a ne na bilo čemu opipljivom. To ostavlja dosta prostora za pretpostavku u korist desetaka različitih stručnjaka s obje strane tog pitanja, pa čak i nakon godina gnjave rasprave, još uvijek nema zajedničkog konsenzusa o tome hoće li ASI biti milosrdan bog ili vidjeti ljude kao što je ugljična goruća vrsta hrane koja nas guta i obrisati iz povijesnih knjiga kao što smo pročistili trag mravi s kuhinjskog brojača.

Rekao je, rekla je: Hoćemo li se bojati?

Dakle, sada kada shvatimo što je AI, različiti oblici koje može trajati i kako bi ti sustavi mogli postati dio našeg života u bliskoj budućnosti, ostaje pitanje: trebamo li se bojati?
Dakle, sada kada shvatimo što je AI, različiti oblici koje može trajati i kako bi ti sustavi mogli postati dio našeg života u bliskoj budućnosti, ostaje pitanje: trebamo li se bojati?

Vruće na tragu javnoga zanimanja za AI tijekom protekle godine, mnogi svjetski vrhunski znanstvenici, inženjeri i poduzetnici skočili su priliku da daju svoj dva centa o tome kakvu umjetnu inteligenciju zapravo može izgledati izvan holivudskih zvučnih faza u narednih nekoliko desetljeća.

S jedne strane, imate mračne sudbine poput Elona Muska, Stephena Hawkinga i Bill Gatesa, koji dijele zabrinutost da bez odgovarajućih zaštitnih mjera neće biti samo pitanje vremena prije ASI snovi način da se izbrisati ljudska rasa.

"Može se zamisliti takva tehnologija koja nadmašuje financijska tržišta, ljudski istraživači koji izmišljaju, manipuliraju ljudskim voditeljima i razvijaju oružje koje ne možemo ni razumjeti", napisao je Hawking u otvorenom pismu zajednici AI ove godine.

"Dok kratkoročni utjecaj AI ovisi o tome tko ga kontrolira, dugoročni utjecaj ovisi o tome može li se uopće moći kontrolirati."

S druge strane, nalazimo svjetliji portret koji su naslikali futuristi poput Ray Kurzweill, glavni istraživač tvrtke Eric Horovitz i svi drugoomiljeni osnivač tvrtke Apple; Steve Wozniak. Oba Hawking i Musk se smatraju dva najveća umova naše generacije, pa da propitkujemo njihova predviđanja o štetama koje tehnologija može uzrokovati dugoročno nije lako podvig. Ali, prepustite svjetiljkama kao što je Wozniak kako bi se uselili na mjesto gdje bi se drugi usudili.

Kad su ga pitali kako vjeruje da bi ASI mogao tretirati ljude, Woz je bio tup u njegovu hladovitom optimizmu: "Hoćemo li biti bogovi? Hoćemo li biti kućni ljubimci? Ili ćemo biti mravi koji stoje na korak? Ne znam o tome ", upitao je u intervjuu s australskim financijskim pregledom. "Ali kad sam shvatio u glavi hoće li mi se ubuduće tretirati kao kućne ljubimce za ove pametne strojeve … Pa, liječit ću svoj pas zaista lijep."
Kad su ga pitali kako vjeruje da bi ASI mogao tretirati ljude, Woz je bio tup u njegovu hladovitom optimizmu: "Hoćemo li biti bogovi? Hoćemo li biti kućni ljubimci? Ili ćemo biti mravi koji stoje na korak? Ne znam o tome ", upitao je u intervjuu s australskim financijskim pregledom. "Ali kad sam shvatio u glavi hoće li mi se ubuduće tretirati kao kućne ljubimce za ove pametne strojeve … Pa, liječit ću svoj pas zaista lijep."

I tu nalazimo filozofsku dilemu da nitko nije u potpunosti zadovoljan što dolazi na konsenzus: hoće li nas ASI vidjeti kao neškodljivu kućnu pomoćnicu koja bi bila skriveno ili zbrinut, ili nepoželjan štetnik koji zaslužuje brzo i bezbolno istrebljenje?

Hasta la Vista, beba

Iako bi bilo glupo poslanje tvrditi da točno zna što se događa u glavi stvarnog života Tonyja Starka, mislim da kada muškarci i prijatelji upozoravaju na opasnost od AI, oni se ne odnose na bilo što slično Terminatoru, Ultron ili Ava.

Čak i uz ogromne količine inovativnosti na našim prstima, roboti koje danas imamo jedva jedva prijeđu milju na sat prije nego što dođu do neprohodne barijere, zbunjuju se i jesti pločice na smiješan način. I dok se Mooreov zakon može pokušati ukazati na primjer kako brzo tehnologija robotike ima potencijal za napredak u budućnosti, druga samo treba pogledati Asimu, koji je prvi put debitirao prije gotovo 15 godina i nije napravio od značajnih poboljšanja.

Koliko god ih želimo, robotika nije došla ni blizu približavanju istom modelu eksponencijalnog napretka kao što smo vidjeli u razvoju procesora računala. Ograničeni su fizičkim ograničenjima koliko energije možemo stati u baterijsku jedinicu, neispravnu prirodu hidrauličnih mehanizama i beskrajnu borbu za svladavanje borbe protiv vlastitog težišta.

Znači za sada; ne, iako bi pravi AGI ili ASI potencijalno mogli biti stvoreni u statičnom superračunalu na nekoj farmi poslužitelja u Arizoni, još uvijek je vrlo malo vjerojatno da ćemo se naći u sprintu ulicama Manhattana kao horde metalnih kostura koji nas zaklanjaju odostraga.

Umjesto toga, AI koji Elon i Hawking toliko žele upozoriti svijet je onaj vrste "zamjene karijere", onaj koji može brže razmišljati od nas, organizirati podatke s manje pogrešaka i čak naučiti kako bolje raditi na našem poslu nego što bismo se ikad mogli nadati - bez traženja zdravstvenog osiguranja ili nekoliko dana da odvedemo djecu do Disneylanda na Spring Break.

Barista Bots i Perfect Cappuccino

Prije nekoliko mjeseci NPR je objavio praktičan alat na svojoj internetskoj stranici, u kojem su slušatelji podcast-a mogli odabrati s popisa različitih karijera kako bi saznali postotak rizika koji su im određena linija posla nosila za automatizaciju u nekom trenutku u narednih 30 godina.

Za širok raspon poslova, uključujući, ali ne ograničavajući se na: kleričke pozicije, skrb, IT, dijagnostika, pa čak i kavane barista, roboti i njihovi ANI kolege će gotovo sigurno staviti milijune bez posla i kruha prije nego što mnogi mislimo. Ali to su strojevi koji će biti programirani za jedan zadatak i samo jedan zadatak i imaju malo (ako ikakve) sposobnosti da se presele izvan specijaliziranog niza unaprijed programiranih uputa koje smo prije pažljivo instalirali.

To znači da će ANI biti barem u predvidivoj budućnosti (mislim 10-25 godina) stvarna, opipljiva prijetnja našem načinu života daleko više nego bilo koji teorijski AGI ili ASI. Već znamo da je automatizacija sve veći problem koji će drastično promijeniti način na koji se prihodi i privilegija distribuiraju tijekom prvog i trećeg svijeta. Međutim, hoće li ovi roboti konačno pokušati trgovati svojim šivaćim strojevima za strojnice još uvijek su predmet grijanja (i kako ćete saznati), u konačnici neugodnoj raspravi.
To znači da će ANI biti barem u predvidivoj budućnosti (mislim 10-25 godina) stvarna, opipljiva prijetnja našem načinu života daleko više nego bilo koji teorijski AGI ili ASI. Već znamo da je automatizacija sve veći problem koji će drastično promijeniti način na koji se prihodi i privilegija distribuiraju tijekom prvog i trećeg svijeta. Međutim, hoće li ovi roboti konačno pokušati trgovati svojim šivaćim strojevima za strojnice još uvijek su predmet grijanja (i kako ćete saznati), u konačnici neugodnoj raspravi.

Uz veliku moć, dolazi velika singularnost

"Znate, znam da ovaj odrezak ne postoji. Znam da kad sam ga stavio u usta, Matrix mi govori da je sočan i ukusan. Nakon devet godina znaš li što shvaćam?"

"Neznanje je blaženstvo." - Cypher

Premda je ovo još uvijek pitanje žestokog argumentiranog mišljenja, za sada je konsenzus mnogih vrhunskih znanstvenika i inženjera na području istraživanja AI izgleda da smo daleko veći rizik od pada na udobnost koju svijet umjetne inteligencije može pružiti, a ne da ga oboriti stvarnom verzijom Skyneta. Kao takva, to je zabrinjavajuća mogućnost da naša eventualna smrt ne bi mogla doći kao produkt sporog, metodičkog napretka u veliki nepoznat. Umjesto toga, mnogo je vjerojatnije da će se pojaviti kao neželjena posljedica žurno, pretjerano oduševljenog sjecišta našeg vlastitog čarolije i genijalnosti koji se slamaju kako bi stvorili sljedeću veliku tehnološku singularnost.

Image
Image

Misli manjeterminator, i više Wall-E, Poput flote robota koji su tovili ljude u Pixarovom filmu, mi ljudi nemamo nikakvih problema čuvanje čimpanza u zoološkom vrtu, a razlika je u tome hoće li AI biti ljubazan da učini isto s nama.

Iz te perspektive, ima više smisla bojati se stvarnosti u kojoj su ljudi zakačen za trajnu planetarno VR simulaciju Matrica, masirane do škrga po svojoj omiljenoj hrani i dali sve što bi ikada mogli poželjeti dok se strojevi brinu za ostalo. Mjesto gdje nas evoluiralo ASI ne vidi kao bugu kako bi se skinula cipela, ali umjesto toga kao divan majmunski vrećice koje smo mi, lako se ugodi i zaslužuju barem malo kredita za stvaranje sveznajućeg, sveobuhvatni kvazi-bog koji je konačno preuzeo planet.

U tom smislu sve se svodi na vašu definiciju onoga što znači "živjeti" kroz revoluciju AI.Ideja da se nešto "beskorisno" mora ukloniti isključivo je ljudski koncept, način razmišljanja da ne bismo trebali odmah očekivati da će naši strojevi nadređeni usvojiti iz našeg ograničenog moralnog opsega. Možda eventualna evolucija naše digitalne inteligencije neće biti čista zla, već beskrajna, pristranost bez suosjećanja za sve žive stvari; bez obzira koliko su sebični, samo-pravedni ili samodestruktivni.

Pa … da se brinemo o tome?

Ovisi o tome tko vas pita.

Ako istražujete dva pametnijeg tehnološkog inženjera i matematičara u suvremenom svijetu, dobit ćete četiri različita odgovora, a brojevi ne utječu na mrtve, čak i više ljudi koje dodate na semaforu. U svakom slučaju, temeljno pitanje s kojim se trebamo baviti nije riječ o tome "dolazi li AI?" Jer je to i nitko od nas ne može ga zaustaviti. Gledajući tako toliko različitih perspektiva, pravo pitanje koje nitko nije ugodno odgovoriti s previše gutljaj je: "Hoće li biti milostiv?"

Čak i nakon što su neki od najvećih svjetskih umova odmjerili to pitanje, slika o tome kakva bi strojna inteligencija izgledala kao 20, 30 ili 50 godina u budućnost i dalje izlazi prilično mračna. Budući da se polje AI stalno pretvara u nešto drugo svaki put kad se proizvede novi kompjuterski čip ili se razvija transistorski materijal, tvrdeći da je krajnji autoritet onoga što se može ili ne mora dogoditi nešto je kao da "znate" da je kocka valjana da se na sljedećem bacaju zmije oči.

Jedna stvar s kojom možemo sa sigurnošću izvijestiti je da, ako ste zabrinuti za dobivanje ružičastog klizanja sljedećeg tjedna iz vašeg kompjuteriziranog blagajnog, pokušajte se ne previše uhvatiti za to. Taco Bell i dalje će biti otvoren za Taco utorkom, a ljudska bića svakako će uzimati vašu narudžbu na prozoru (i opet zaboraviti zeleni umak). Prema istraživanju koje je proveo James Barrat na prošlogodišnjem AGI Summitu u Quebecu, žiri na teškoj vremenskoj liniji za AI još je uvijek van. Manje od polovice svih prisutnih izjavilo je kako vjeruju da ćemo postići pravi AGI prije 2025. godine, dok više od 60 posto kaže da će to trajati barem 2050., ako ne i idući u idućem stoljeću i dalje.

Stvaranje teškog datuma na našem datumu s digitalnom sudbinom malo je poput rekavši da znate da će kiša na današnji datum 34 godine od sada. Jaz između prave AGI i napredne umjetne super inteligencije je toliko tanak da će stvari ići stvarno dobro, ili užasno u krivu vrlo, vrlo brzo. I iako su kvantna računala upravo nad horizontom i svi imamo umrežene pametne telefone u našim džepovima koji mogu emitirati signale u svemir, još uvijek jedva škripljujemo površinu razumijevanja "zašto" zašto razmišljamo o stvarima kakav smo učiniti, ili gdje svijest čak dolazi iz na prvom mjestu.
Stvaranje teškog datuma na našem datumu s digitalnom sudbinom malo je poput rekavši da znate da će kiša na današnji datum 34 godine od sada. Jaz između prave AGI i napredne umjetne super inteligencije je toliko tanak da će stvari ići stvarno dobro, ili užasno u krivu vrlo, vrlo brzo. I iako su kvantna računala upravo nad horizontom i svi imamo umrežene pametne telefone u našim džepovima koji mogu emitirati signale u svemir, još uvijek jedva škripljujemo površinu razumijevanja "zašto" zašto razmišljamo o stvarima kakav smo učiniti, ili gdje svijest čak dolazi iz na prvom mjestu.

Zamisliti da slučajno možemo stvoriti umjetni um prepun svih naših vlastitih pogrešaka i evolucijskih nesreća - prije nego što čak i znamo što to čini, tko smo mi - je suština ljudskog ego.

Na kraju, unatoč našoj neumoljivoj želji da odlučimo tko će izaći na vrh u narednom ratu i / ili mirovnom sporazumu između čovječanstva i strojeva, to je natjecanje ograničenih očekivanja i neograničenih mogućnosti, a sve što radimo je svađanje semantike između. Naravno, ako ste svježi iz srednje škole i tražite certifikat o vožnji taksijem, glavni izvršni direktor tvrtke Uber ima pola milijuna razloga zbog kojih biste vjerojatno trebali razmišljati o pronalaženju karijere negdje drugdje.

Ali ako spremate oružje i konzervirane grah za AI apokalipsu, možda ćete biti bolje da trošite svoje vrijeme kako naučite bojati, šifrirati ili napisati sljedeći veliki američki roman. Čak i kod najkonzervativnijih procjena bit će to nekoliko desetljeća prije nego što bilo koji stroj uči kako biti Monet ili se uči C # i Java, jer su ljudi ispunjeni takvom vrstom kreativnosti, domišljatosti i sposobnosti da izražavaju našu unutrašnjost kao ne automatizirani aparat za kavu ikad mogao.

Da, možemo se ponekad osjećati malo emocionalno, spustit ćemo se na posao na hladnoći ili trebamo srediti dan, ali možda je točno jer mi smo ljudi da je prijetnja stvaranja nešto veće od nas unutar stroja još uvijek dug i dalek put.

Image Credits: Disney Pixar, Paramount Pictures, Bosch, Youtube / TopGear, Flickr / LWP komunikacije Flickr / BagoGames, Wikimedia Foundation, Twitter, WaitButZašto 1, 2

Preporučeni: