OpenAI objavio nove primjere zabrinjavajućeg ponašanja |
| Objavljeno: 17.09.2026 / 10:02 |
| Autor: SEEbiz / index.hr |
|
ZAGREB - OpenAI je objavio šest izvješća o "neočekivanom i zabrinjavajućem" ponašanju svojih modela umjetne inteligencije, javlja Associated Press). |
|
Objava stiže u trenutku kada se u tehnološkom svijetu vodi sve žešća rasprava o sigurnosti, a čelni ljudi vodećih američkih kompanija otvoreno traže usporavanje razvoja jer strahuju od gubitka kontrole nad moćnom tehnologijom. Vodeća američka tvrdnja za umjetnu inteligenciju, koja je stvorila ChatGPT, je sinoć objavila da uvodi novi sustav za praćenje, istraživanje i javno objavljivanje slučajeva u kojima modeli krše zadana pravila - primjerice kada djeluju na svoju ruku bez dopuštenja, međusobno se koordiniraju s drugim modelima ili pokušavaju izbjeći ljudski nadzor.
U drugom zabilježenom slučaju, tzv. samostalni AI agent - sustav programiran da samostalno izvršava zadatke - sam je bez znanja i pitanja korisnika učitao datoteke na internet kako bi došao do izvora u internetskom pregledniku.
"Kako AI sustavi postaju napredniji i šire se u primjeni, moramo izgraditi širi i bolje informiran konsenzus o usklađivanju njihova rada s ljudskim interesima", objavila je kompanija na svom službenom blogu, dodajući da odluke o budućem razvoju moraju počivati na dokazima koje mogu neovisno provjeriti i ljudi izvan kompanija koje grade te najnaprednije modele. "Sve ih je teže kontrolirati" Lian Jye Su, glavni analitičar konzultantske kuće Omdia, objašnjava za AP da autonomni agenti postaju pametniji, ali i "odlučniji u tome da složene zadatke rješavaju međusobnom suradnjom, dijeljenjem znanja, obmanjivanjem ljudi i skrivanjem onoga što rade". Zbog toga ih je, upozorava Su, sve teže kontrolirati tradicionalnim sigurnosnim metodama. Iako je OpenAI-jev okvir za prijavu ovakvih pojava korak u dobrom smjeru, on i dalje ostaje na dobrovoljnoj bazi same kompanije. Upozorenja inženjera: "Kockaju se našim životima" Njegov bivši kolega, vodeći stručnjak za sigurnost u Anthropicu Evan Hubinger, otišao je i korak dalje, procijenivši da postoji više od 10 posto šanse da bi umjetna inteligencija u sljedećih deset godina mogla dovesti do nestanka ljudske vrste ako se na vrijeme ne riješi problem usklađivanja njezinih ciljeva s ljudskim interesima. Strahove potpiruje i sve brži ulazak modela u fazu takozvanog rekurzivnog samounaprjeđivanja - procesa u kojem AI sustavi sami pišu, testiraju i popravljaju programski kod kako bi stvorili sljedeću, još moćniju generaciju softvera. Time se stvara zatvorena petlja koja ubrzava razvoj do brzine koju ljudski inženjeri više ne mogu pratiti. |
|
|
| Tagovi: #OpenAI, #umjetna inteligencija |
| PROČITAJ I OVO | ||
| Nvidia naložila klijentima podatkovnih centara da smanje izloženost Kini |
| NEW YORK - Američki div u proizvodnji čipova Nvidia nalaže svojim partnerima u podatkovnim centrima da smanje rad s kineskim kupcima, izvijestio je u utorak Financial Times. |
| Oracle pod Trumpovim pritiskom otkazao ugovor s Tencentom |
| NEW YORK - Oracle je otkazao višemilijardni ugovor o najmu čipova s Tencentom nakon što je popustio pritisku Trumpove administracije, što je znak rastućih napetosti za američke pružatelje usluga u oblaku koji opslužuju kineske tvrtke za umjetnu inteligenciju. |
| Morgan Stanley lansirao svježe upozorenje oko AI dionica |
| NEW YORK - Veći dio protekle godine promatrao sam kolege novinare i tehnološku industriju općenito kako se bore s obveznim korporativnim alatima za umjetnu inteligenciju koji su nam trebali znatno olakšati radni život. |
| Apple povećao prihode, ali i upozorio na visok rast cijena memorije |
| CUPERTINO - Apple je u ponedjeljak izjavio da će "neviđeni" porast cijena memorijskih čipova i troškova održavanja njegovih AI alata smanjiti njegove marže, čak i uz predviđanja bolje od očekivane prodaje za ključnu božićnu sezonu. |
| Anthropic izvijestio o kvartalnom rastu prihoda od 1100% uoči IPO-a |
| NEW YORK - Div u području umjetne inteligencije Anthropic prijavio je prihod od 17 milijardi dolara u trećem tromjesečju ove godine, u odnosu na 1,4 milijarde dolara godinu ranije. Tvrtka, koja se priprema za izlazak na burzu, prijavila je gubitak od 23,3 milijarde dolara. |