MeniEN
Zapri meni
Filmi in oder

Marko Plahuta in Igor Tavčar: AI – umetna inteligenca

Epizoda 12, 07/04/2023

V dvanajsti epizodi podkasta smo se o umetni inteligenci pogovarjali antropolog in strokovnjaka za strojno učenje. O tem, kaj to je, o njeni zgodovini, in v drugem delu predvsem o posledicah za družbo. Nedvomno bodo velikanske, nihče pa si ne predstavlja zares, kakšne. Prisluhnite!

Današnja gosta:

Marko Plahuta, programer, specialist za strojno učenje na področju obdelave jezika, Twitter: @Virostatiq
Igor Tavčar, razvijalec softvera in strokovnjak za strojno učenje

Kazalo:

1:20Kaj sploh je umetna inteligenca?
2:50Je umetna inteligenca rezultat strojnega učenja?
5:30Podcenjevanje zmogljivosti algoritmov
7:05Ljudje nismo tako zelo posebni ampak pripadamo tipologijam, ki jih je mogoče grupirati
10:10Modeli postanejo neodvisni od jezika
15:15Učenje modela na podlagi nagrajevanja uspehov in kaznovanja napak
19:20Je lahko podatkovno računska arhitektura podobna biološki?
29:03GPT2 in pesnikovanje
35:00Prilagoditev modela, da upošteva moralo
38:10Chatbot novinarju pove, da ga ljubi
39:204096 dimenzij
43:40Razmerje med fizikalnim in simbolnim svetom
45:50Vpliv ChatGPT na število delovnih mest
51:50Ali smo vstopili v dobo AGI (Artificial General Intelligence)?
56:50Uporaba multimodalnih modelov za učenje umetne inteligence o fizikalnem svetu
1:03:00Orodja za prepoznavo vsebin preprečujejo da bi se model učil iz vsebin (besedil, videov in slik), ki jih je sam generiral
1:10:10AI kot rešitelj repetitivnega dela, ki prisili poklice, da se vrnejo k svojemu izhodišču
1:14:40Nujnost t.i. telesnih služb
1:20:00Romantične predstave o umetni inteligenci, ki se končajo takoj ko se pri razvoju AI ne oziraš več na etiko
1:24:35Razvoj znotraj korporacij je močnejši in hitrejši kot razvoj v znanosti
1:31:00Modus iskanja odgovorov vs. modus iskanja izkušenj
1:33:50Destilacija znanja in novi poklici

Pomembna dejstva in manj znani izrazi:

2:10Machine learning (ML) ali strojno učenje, je raziskovalno področje, namenjeno razumevanju in gradnji metod, ki se “učijo”, ki izkoriščajo podatke za izboljšanje uspešnosti pri določenem nizu nalog. Nanj se gleda kot na del umetne inteligence.
2:12Bayesova statistika oz. Bayesovo sklepanje je pomembna tehnika zlasti v matematični statistiki. Še posebej pomembno je pri dinamični analizi zaporedja podatkov.
8:45Podatkovno-centričen model – Pristop, osredotočen na podatke. Izboljšanje učinkovitosti modela s tem ko sistematično spreminjamo ali izboljšamo nabor podatkov. V nasprotju s pristopom osredotočenim na model, je model fiksen, izboljšajo se samo podatki.
14:10Large language model (LLM) – Velik jezikovni model je jezikovni model, ki je sestavljen iz nevronske mreže s številnimi parametri, usposobljene na velikih količinah neoznačenega besedila z uporabo samonadzorovanega učenja.
14:35OpenAI – je ameriški raziskovalni laboratorij katerega moto je »prijazna umetna inteligenca za vse človeštvo«. Ustanovljeni so bili leta 2015 v San Franciscu. Med ustanovitelji so bili Elon Musk, Sam Altman, Peter Thiel in drugi.
15:15Reinforcement learning oziroma učenje s podkrepitvijo je metoda usposabljanja strojnega učenja, ki temelji na nagrajevanju želenega vedenja in/ali kaznovanju nezaželenega, da je model sposoben zaznati in interpretirati svoje okolje, ukrepati in se učiti na podlagi poskusov in napak.
16:10Stalkfish je orodje za spremljanje dejavnosti na spletnem mestu, ki vam omogoča natančno beleženje vseh stvari, ki se dogajajo na vašem spletnem mestu.
19:20Nevronska mreža – podatkovno-računska arhitektura, ki je nekako podobna biološki – na osnovi impulzov, ki prihajajo na vhod se model po lastni presoji odloči ali ta impulz pošlje naprej oziroma ali zaradi njega nekaj aktivirajo.
23:50Neokognitron je hierarhično omrežje, sestavljeno iz številnih slojev celic, ki ima spremenljive povezave med celicami v sosednjih slojih. Z učenjem lahko pridobi sposobnost prepoznavanja vzorcev in se lahko usposobi za prepoznavanje katerega koli niza vzorcev.
25:20Recurrent Neural Network (RNN) – ali ponavljajoča se nevronska mreža je vrsta umetne nevronske mreže, ki uporablja zaporedne podatke ali podatke časovnih vrst. Ti algoritmi globokega učenja se običajno uporabljajo za npr. prevajanje jezika, obdelavo naravnega jezika (NLP), prepoznavanje govora in podnapise slik; vključeni so v priljubljene aplikacije, kot so Siri, glasovno iskanje in Google Translate.
25:50Cuda je programska plast, ki omogoča neposreden dostop do navideznega nabora ukazov GPU in vzporednih računalniških elementov za izvajanje računalniških jeder. Ustvarila jo je Nvidia, podjetje za programsko opremo, ki oblikuje grafične procesne enote (GPU), vmesnike za programiranje aplikacij (API) za znanost o podatkih in visoko zmogljivo računalništvo ter sistemske enote na čipu (SoC) za mobilno računalništvo in avtomobilski trg.
28:26Pesem, ki jo je napisal chat bot, po navdihu pesmi Nicka Cave-a
29:03Vuk Čosić – soneti iz tvitov: Za projekt so izbrali 14 najbolj znanih predstavnikov lokalnega panteona. “Iz twitterskega opusa vsakogar od njih smo izbrskali najznačilnejši tvit, ki predstavlja vrhunec prizadevanj pri proizvodnji čim bolj zaudarjajočih arom sovraštva. Tako izbrani cvetober uničevalnosti smo potem prepustili posebej izurjeni umetni inteligenci, ki je dopisala manjkajoče verze in dovršila sonet”.
31:10Rorschachov test ali diagnostični preizkus je projekcijska tehnika za diagnostično in prognostično oceno normalne in motene osebnosti.
32:10Jacques-Marie-Émile Lacan, pogosteje Jacques Lacan, francoski psihoanalitik, psihiater in zdravnik
31:12Mladen Dolar je slovenski filozof. Skupaj s Slavojem Žižkom in Rastkom Močnikom je bil soustanovitelj Društva za teoretsko psihoanalizo.
34:00Noam Chomsky in ChatGPT manija
34:40Martin Luther King ameriški baptistični duhovnik in borec za državljanske pravice, ki je leta 1964 prejel Nobelovo nagrado za mir.
35:50Inherentno – neločljivo, nerazdružno povezan s čim: inherentna lastnost stvari; elementarne potrebe so večini posameznikov inherentne.
35:50Cinizem je odnos, za katerega je značilno splošno nezaupanje v motive drugih. Cinik ima lahko splošno pomanjkanje vere ali upanja v ljudi, ki jih motivirajo ambicije, želja, pohlep, zadovoljstvo, materializem, cilji in mnenja, ki jih cinik dojema kot nečimrna, nedosegljiva ali navsezadnje nesmiselna.
38:10Pogovor novinarja New York Timesa s chatbotom
38:40Jailbreaking je osvoboditev uporabnikov iz “zapora” omejitev, za katere se domneva, da obstajajo pri določeni napravi. Gre za postopek, ki omogoča lastniku naprave popoln dostop do vseh funkcij. Izkoristi napake zaklenjene elektronske naprave za namestitev programske opreme, ki ni tista, ki jo je proizvajalec dal na voljo za to napravo.
38:50Reddit je ameriška zabavna, družbena in novičarska spletna stran, ustanovljena 2005 v Massachusettsu. Na Redditu uporabniki objavljajo razne povezave, ki jih lahko drugi uporabniki ocenijo pozitivno ali negativno in komentirajo.
42:40Kavzalnost oziroma vzročnost je vpliv, s katerim en dogodek, proces, stanje ali predmet prispeva k produkciji drugega dogodka, procesa, stanja ali predmeta, kjer je vzrok delno odgovoren za posledico, posledica pa je delno odvisna od vzroka.
48:30Python je programski jezik, ki ga je ustvaril Guido van Rossum leta 1990. Jezik podpira dinamične podatkovne tipe, kar ga razlikuje od Jave. Ime je dobil po priljubljeni angleški televizijski nanizanki Leteči cirkus Montyja Pythona.
48:35JavaScript je programski jezik, ki ga je razvil Netscape, da bi spletnim programerjem pomagal pri ustvarjanju interaktivnih spletnih strani.
51:50Artificial General Intelligence (AGI) je hipotetični inteligentni agent, ki lahko razume ali se nauči katere koli intelektualne naloge, kot ljudje ali živali. AGI je bil opredeljen tudi kot avtonomni sistem, ki pri večini ekonomsko vrednega dela presega človeške sposobnosti. Razvoj AGI je glavni cilj nekaterih raziskav umetne inteligence in več podjetij z umetno inteligenco, kot so OpenAI, DeepMind in Anthropic, ter pogosta tema v znanstveni fantastiki in študijah prihodnosti.
55:35WolframAlpha je iskalnik, ki skuša odgovoriti na zastavljeno vprašanje, namesto da zgolj poda klasičen seznam spletnih strani, ki bi lahko poznale odgovor na vprašanje. Razvilo ga je podjetje Wolfram Research.
57:45Multimodalno učenje – navskrižno učenje iz besedila, slik in videov.
59:50Teorija kaosa proučuje obnašanje dinamičnih sistemov, ki so zelo občutljivi na začetne pogoje – pogosto se kot primer navaja »metuljev učinek«. Je področje študija v matematiki, ki se uporablja v več disciplinah, kot so meteorologija, sociologija, inženirstvo, ekonomija, biologija in filozofija.
1:07:10Deep Blue versus Garry Kasparov je šestih partij šahovskih dvobojev med takratnim svetovnim šahovskim prvakom Garijem Kasparovom in IBM-ovim superračunalnikom Deep Blue. Kasparov je prvo tekmo, ki je potekala v Philadelphii leta 1996, zmagal s 4–2. Deep Blue je zmagal na povratni tekmi leta 1997 v New Yorku s 3½–2½. Druga tekma je bila prvi poraz aktualnega svetovnega šahovskega prvaka z računalnikom pod turnirskimi pogoji in je bila tema dokumentarnega filma Game Over: Kasparov and the Machine.
1:13:20Amazon’s Mechanical Turk – je spletna stran na kateri podjetja najamejo oddaljene “množične delavce” za opravljanje diskretnih nalog, ki jih računalniki trenutno ne zmorejo, na zahtevo. Upravlja se v okviru Amazon Web Services in je v lasti Amazona.
1:13:40Richard Sennett je profesor sociologije na London School of Economics in nekdanji univerzitetni profesor humanistike na Univerzi v New Yorku.
1:20:50NSA – Nacionalna varnostna agencija bolje znana pod kratico NSA je obveščevalna agencija ZDA, ki je zadolžena in specializirana za globalno opazovanje, zbiranje in obdelavo elektronskih podatkov. Agencija je tudi zadolžena za varovanje komunikacijsko informacijskega sistema vlade ZDA ter izvajanje kibernetskih napadov.
1:25:10Kako bo OpenAI preoblikoval realnost – intervju z OpenAI CEO in CTO
1:26:20Raspberry Pi je mikroračunalnik v velikosti kreditne kartice, ki so ga razvili v Združenem Kraljestvu, za Raspberry Pi Fundacijo, ki spodbuja poučevanja osnov računalništva v šolah in v državah v razvoju.
1:28:10Github je spletni gostiteljski servis za repozitorije v Git. Ponuja distribuirano upravljanje z izvorno kodo z Git ter nekatere dodatne storitve. V nasprotju z Git-om, ki je ukazno orodje, ponuja GitHub spletni grafični vmesnik.