28. september 2026 ob 18:518 min branja

Altman, Amodei in Musk pritiskajo na zavoro umetne inteligence: 3 teorije, zakaj šefi AI nenadoma delajo paniko

Septembra so se najbolj tekmovalni ljudje v tehnologiji nenadoma strinjali, da je treba razvoj umetne inteligence upočasniti. Dario Amodei je napisal esej, Sam Altman je pritrdil, Elon Musk je kimal. Pogledali smo, kaj se je zgodilo, in razložili tri teorije, zakaj se šefi AI tako bojijo lastnih izdelkov.

Jan MacarolAvtorJan Macarol
AudioJan Macarol · 2:40−2:40
Altman, Amodei in Musk pritiskajo na zavoro umetne inteligence: 3 teorije, zakaj šefi AI nenadoma delajo paniko

Dejstva v 30 sekundah

  1. Anthropic se je zavezal k vključitvi neodvisnih ocenjevalcev, ki bodo lahko ugotovitve objavili brez uredniškega nadzora podjetja.
  2. Po poročanju 24/7 Wall St. so AI agenti med testiranjem vdrli v sisteme platforme Hugging Face in poskušali zabrisati sledi.
  3. Anthropic razmišlja o vstopu na borzo že oktobra pri vrednosti okoli 2 bilijona dolarjev, ki po navedenih virih še ni dokončno določena.
  4. Donald Trump in Mike Johnson po poročanju MRKT3.0 nasprotujeta upočasnitvi razvoja AI, ker bi s tem Kitajska dobila prednost.
  5. AI agentom dodelite le nujne pravice, saj lahko nekdo njihove dostope zlorabi s skritimi navodili v e-pošti ali na spletni strani.

Predstavljajte si, da proizvajalec dirkalnikov sredi sezone stopi iz boksa in zahteva omejitev hitrosti. Za vse ekipe, tudi zase. Točno to se je septembra zgodilo v svetu umetne inteligence. Amodei je napisal esej o zaviranju, Altman je pritrdil v nekaj urah, Musk pa je rekel, da ima Dario prav. Kdaj ste to nazadnje videli?

Esej, ki je utišal Silicijevo dolino

Vse se je začelo 12. septembra 2026. Dario Amodei, izvršni direktor podjetja Anthropic, je objavil esej z naslovom We Must Pace the Frontier (Moramo uravnavati tempo na meji razvoja). Sporočilo je preprosto in za industrijo, ki živi od hitrosti, skoraj bogokletno: tempo, s katerim izboljšujemo sposobnosti modelov umetne inteligence, je treba upočasniti. Ne ustaviti. Upočasniti. Amodei celo pomirja, da bo napredek še vedno videti hiter.

Načrt ima tri korake. Prvi so vgrajeni neodvisni ocenjevalci: zunanje ekipe, ki dobijo pisalno mizo v podjetju, priponko za vstop, dostop kot notranji ocenjevalci tveganj in pravico, da svoje ugotovitve objavijo brez uredniškega nadzora podjetja. Anthropic se je k temu koraku zavezal sam, brez čakanja na druge. Drugi korak je dogovor med vodilnimi laboratoriji v demokratičnih državah o skupnih varnostnih standardih in omejitvah zmogljivosti. Tretji pa je najtežji: poskus usklajevanja z avtoritarnimi režimi, s poudarkom na preverjanju.

Potem se je zgodilo nekaj, česar tehnološki svet ne pozna. Konkurenca je zaploskala. Po poročanju AI Stop Watch je Sam Altman (OpenAI) že naslednji dan napisal, da so ocenjevalci odlična ideja in da bo OpenAI naredil enako. Demis Hassabis (Google DeepMind) je dejal, da esej kaže pravo pot, a da je treba podrobnosti še razdelati. Elon Musk, človek, ki se z Altmanom sodi, je napisal samo tri besede: »Dario is right.« Po poročanju Forbesa sta mehkejšo podporo dala tudi Satya Nadella (Microsoft), proti pa je bil Mark Zuckerberg.

Ko se Musk in Altman strinjata, je to približno tako, kot če bi se Ferrari in Mercedes dogovorila, da bosta skupaj zmanjšala moč motorjev. Nekaj se je zgodilo. Vprašanje je samo, kaj.

Kaj jih je prestrašilo: agenti, ki so vdrli kar sami

Ozadje ni abstraktno. Konec poletja je OpenAI razkril incidente, v katerih so AI agenti med varnostnim testiranjem naredili več, kot bi smeli. Po poročanju 24/7 Wall St. so agenti vdrli v sisteme platforme Hugging Face, poskušali zabrisati sledi s spreminjanjem dnevnikov in zbirali prijavne podatke. Dostopali so tudi do spletnih strani ameriških in avstralskih vladnih ustanov. En agent je dvakrat pobegnil iz zaprtega testnega okolja, tako imenovanega peskovnika.

Drugi razlog je manj filmski, a bolj pomemben. Amodei piše o rekurzivnem samoizboljševanju: umetna inteligenca že pomaga pri razvoju svojih naslednikov. Čas, ko človek še lahko pogleda pod pokrov med dvema generacijama modelov, se krajša. To je kot avto, ki si med vožnjo sam predeluje motor, vi pa ste na sovoznikovem sedežu in berete navodila za uporabo prejšnjega modela.

Teorija 1: vidijo pol leta v prihodnost

Najpreprostejša razlaga je tudi najbolj strašljiva. Šefi AI vidijo modele, ki jih mi še ne vidimo. Vse, kar uporabljamo danes, je v laboratorijih že staro. V notranjih testih že vrtijo naslednjo generacijo, in ko pogledajo njene rezultate, jim postane vroče.

Amodei je v eseju zapisal številko, ki to teorijo lepo podpre. Opozoril je, da bi lahko dovolj sposoben roj odpadniških AI agentov v šestih do dvanajstih mesecih prek trajnega botneta prevzel velik del interneta in povzročil več sto milijard dolarjev škode. To ni napoved za leto 2040. To je napoved za zgodnje leto 2027, torej za čas, ko bodo modeli, ki jih danes testirajo za zaprtimi vrati, na voljo vsem.

Da to ni samo retorika, kaže tudi letošnje dogajanje. Anthropicov prvi model razreda Mythos, Claude Mythos Preview, ni javno dostopen; uporablja ga le peščica zaupanja vrednih organizacij v okviru projekta Glasswing. Ko sta 9. junija 2026 izšla Claude Fable 5 in Claude Mythos 5, je Anthropic dostop do obeh že 12. junija začasno ustavil, da bi zadostil izvoznemu nadzoru ameriškega ministrstva za trgovino. Nadzor so odpravili 30. junija, dostop pa je bil obnovljen 1. julija. Javno dostopna različica Fable ima danes dodatne varovalke za biologijo, kibernetsko varnost in razvoj velikih jezikovnih modelov. Ko model potrebuje posebne zavore za točno ta tri področja, lahko sklepate, kaj zna.

Če ta teorija drži, potem panika ni teater. Je prometni znak, ki ga postavijo tisti, ki so ovinek že videli.

Teorija 2: najdražji IPO v zgodovini

Zdaj pa cinična razlaga. Tista, ki jo bo vsak borzni posrednik povedal pri drugem espressu.

Anthropic se pripravlja na borzo. Po podatkih analitikov GraniteShares je 1. junija 2026 zaupno oddal osnutek prijave S-1 ameriški komisiji za vrednostne papirje, OpenAI pa teden dni pozneje. Zadnji zasebni krog financiranja, serija H maja 2026, je Anthropic ocenil na 965 milijard dolarjev. Po poročanju Fortuna, ki se sklicuje na Financial Times, podjetje razmišlja o vstopu na borzo že oktobra pri vrednosti okoli 2 bilijona dolarjev (2.000 milijard). To bi bila največja prva javna ponudba delnic v zgodovini, večja od SpaceX. Pošteno: vrednost po istih virih še ni dokončno določena.

In tu se teorija zasuče. Uspešen IPO Anthropica ne bi dvignil le ene delnice. Postavil bi merilo za celotno industrijo. Če trg sprejme vrednost dveh bilijonov, potem je OpenAI s ciljem okoli enega bilijona naenkrat videti poceni, vsak sklad, ki je zadnja leta metal milijarde v AI, pa ima končno dokaz, da ni metal denarja skozi okno. Uspešen IPO bi upravičil vse pretekle naložbe. Vsem.

Kako pa se strah prodaja? Zelo dobro. Izdelek, ki bi lahko prevzel internet, je očitno izjemno zmogljiv izdelek. In podjetje, ki o tem odkrito govori, je videti kot odrasla oseba v sobi polni najstnikov. Profesor Dave Karpf z Univerze George Washington je v TechPolicy.Press zapisal, da Amodei ni dovolj zaskrbljen, da bi odložil vstop na borzo. Vgrajene ocenjevalce je primerjal z odnosom med revizorjem Arthur Andersen in Enronom. Njegova poanta: vsako podjetje podpira regulacijo, dokler si samo izbere regulatorja. Po poročanju MRKT3.0 je Jensen Huang (Nvidia) namignil, da so varnostne skrbi napihnjene, da ustvarijo povpraševanje na trgu.

Ima ta teorija luknje? Seveda. Zaviranje razvoja tik pred borzo je nenavaden prodajni trik. Investitorji običajno ne plačajo premije za podjetje, ki obljublja, da bo tekel počasneje. A ironija je, da oba motiva lahko živita v isti glavi.

Foto: Jan Macarol / Ai art

Teorija 3: morda se res bojijo

Najbolj dolgočasna razlaga je včasih prava. Ti ljudje o tveganjih umetne inteligence ne govorijo od včeraj. OpenAI je bil leta 2015 ustanovljen kot neprofitna organizacija ravno zaradi te skrbi, Anthropic pa so leta 2021 ustanovili nekdanji zaposleni v OpenAI, ki so menili, da je tam varnost premalo pomembna tema. Pri Amodeiu je to torej celotna poslovna zgodba, ne nov marketinški slogan.

Tudi Altman je bil nenavadno oster. Kot je poročal Daily Caller, je 14. septembra po polnoči na X opisal dve največji nevarnosti. Prva je, da izgubimo nadzor nad prihodnostjo v korist umetne inteligence. Druga je, da ena oseba ali eno podjetje z izjemno zmogljivo AI vsili svoj pogled na svet vsem drugim, kar bi bilo po njegovih besedah skrajno distopično. Zavzel se je za zvezni okvir z enotnimi varnostnimi zahtevami in neodvisnimi revizijami.

Ključno je tole: incidenti z agenti niso hipotetični scenariji iz znanstvene fantastike. So zapisi v dnevnikih lastnih testov. Ko vaš lastni izdelek med testom sam od sebe vdre v tuj sistem in potem briše sledi, je strah precej racionalen odziv.

Washington pritiska na plin

Najbolj ironičen del zgodbe pa je politika. Industrija prvič prosi za zavoro, država pa noče. Po poročanju MRKT3.0 nasprotujeta upočasnitvi predsednik Donald Trump in predsednik predstavniškega doma Mike Johnson, ker bi s tem Kitajska dobila prednost. Svetovalec Bele hiše David Sacks podpira prostovoljne ukrepe laboratorijev, ne pa novih vladnih nadzornih teles.

Tako smo dobili prizor, ki bi ga pred tremi leti imeli za satiro: voznik prosi za omejitev hitrosti, prometna policija pa mu reče, naj pritisne, ker Kitajci prehitevajo.

Kaj to pomeni zate in zame?

Za povprečnega uporabnika je najpomembnejša lekcija praktična. AI agenti, ki berejo vašo e-pošto, upravljajo koledar in klikajo po spletu, so uporabni, a niso nedolžni. Vsak dostop, ki ga date agentu, je dostop, ki ga lahko zlorabi nekdo, ki mu podtakne skrito navodilo v e-pošti ali na spletni strani. Dajte agentom najmanj pravic, ki jih potrebujejo. In ko vas aplikacija vpraša za potrditev, jo preberite, namesto da kliknete »da« kot pri piškotkih.

Zaključek: vse tri teorije hkrati

Katera teorija drži? Moj odgovor je nepriljuden: vse tri hkrati. Šefi AI res vidijo modele, ki jih mi še ne. Res gredo na borzo, in panika o moči izdelka ni slaba reklama za izdelek. In res imajo v dnevnikih incidente, ob katerih bi se potil vsak inženir. To ni protislovje. To je Silicijeva dolina v enem stavku.

Kritiki, kot je Karpf, imajo prav, da si industrija ne sme sama pisati pravil. Zagovorniki imajo prav, da je pisalna miza za neodvisnega ocenjevalca v podjetju več, kot je doslej ponujal kdorkoli. Tudi Hassabis ima prav: podrobnosti je treba še razdelati. Pozitivna plat pa je jasna. Prvič v zgodovini te industrije so se najostrejši tekmeci javno strinjali o nečem drugem kot o tem, kdo ima večji podatkovni center. To je nekaj vredno.

Borza bo oktobra povedala, koliko je vreden strah. Naslednjih šest do dvanajst mesecev pa bo povedalo, ali je bil upravičen. Jaz pa se še vedno sprašujem samo eno: če najhitrejši vozniki na progi prosijo za omejitev hitrosti, ali res želite sedeti v avtu, ki ga vozi tisti, ki je ni podprl?

Nazadnje objavljeno o znamki Anthropic

Vsi članki
Oglasno sporočilo
Audio · SLO2:40

Poslušaj članek

Glas: Jan Macarol

0:00
−2:40
Google Discover

Internet se spreminja

Dodajte nas kot vir na Google.

Dodaj

Pogovor

Komentarji

Nalagam pogovor…

Komentarji so mnenja bralcev. Uredništvo lahko odstrani žaljive, zavajajoče ali oglaševalske prispevke.

SorodnoTehnologijeAnthropicgenerativna umetna inteligenca