Tajni upiti mogu promijeniti pamćenje umjetne inteligencije i to je opasnost

Sinapse
4 komentara

Istraživači su pokazali napad GhostWriter koji u 98% slučajeva uspijeva ugraditi lažna sjećanja u dugoročno pamćenje AI chatbota, a da korisnik to ne primijeti.

Donedavno ChatGPT, Gemini i drugi chatbotovi nisu pamtili tko ste. OpenAI je zatim dodao pamćenje, a nedavno i Google u Francuskoj. Više nije potrebno kopirati odlomke kako bi AI zapamtio da želite kratke odgovore bez formalnosti.

Razvojem agentne umjetne inteligencije koja djeluje umjesto vas, pamćenje postaje ključno. Programeri žele da se sjeća svega, čak i mjeseci starih spomena. No računalno pamćenje moguće je manipulirati. Istraživači sa Sveučilišta savezne države Novi Meksiko pokazali su koliko je to zabrinjavajuće.

Napad GhostWriter ne hakira AI da bi poslao podatke hakerima. Koristi skrivene upite za promjenu sjećanja. Lažne informacije miruju dok ih AI ne dohvati tijekom legitimnog zahtjeva. Posljedice: lažni rokovi, izmišljene informacije, ili potajno prenošenje podataka.

Istraživački tim objašnjava da GhostWriter uspijeva ugraditi lažna sjećanja u pamćenje umjetne inteligencije u 98% slučajeva. Ta se sjećanja kasnije aktiviraju u 60% slučajeva. Postojanost je jedna od posebnosti ovog napada, što ga čini još opasnijim. Kako bi se to riješilo, istraživači su razvili obrambeni sustav nazvan Agentic Memory Sentry, koji kombinira filtriranje pamćenja sa strožim upravljanjem istim. Ostaje za vidjeti hoće li ga tvrtke prihvatiti. Ovo otkriće dolazi u vrijeme kada se sve više govori o opasnostima umjetne inteligencije.

ChatbotGhostWriterpamćenje umjetne inteligencijesigurnost umjetne inteligencijeumjetna inteligencija

Stavovi izneseni u tekstu i u komentarima ne odražavaju nužno stav redakcije.

PRAVILA KOMENTIRANJA: Vaši komentari ne smiju biti kritika drugog komentatora, nego vaše mišljenje, prijedlog ili ideja o temi. Nema rasprave tko je u pravu. Čitatelji neka zaključe što je istina. Cilj nije polemika, nego napredak svih Logičara. Inspiracija, umjesto uvjeravanja. Ako nemate ideju, ne komentirajte. Ne budete li respektirali pravila, biti će te blokirani.
Pretplatiti se
Obavijesti o
4 Komentari
Najstariji
Najnoviji Najviše komentiran
Max
19 dana prije

I onda laže ko dnevnik ili?

warcommander
19 dana prije

Ljudi sasvim dobro manipuliraju sa svojim i tuđim lažima. AI spada pod potonje,
Ne vidim problem,

Biti-ili-ne-biti
19 dana prije

Napredak u razvoju umjetne inteligencije i biomedicine ponovno je otvorio raspravu o tome hoće li starenje jednog dana postati kontroliran proces. Među najglasnijim zagovornicima takvog scenarija je futurolog i izumitelj Ray Kurzweil, koji smatra da se medicina približava prekretnici. Kurzweil, koji sada ima 78 godina, ponovio je svoje predviđanje temeljeno na konceptu “brzine bijega od dugovječnosti”. Prema toj ideji, do 2032. godine medicinske tehnologije trebale bi dosegnuti razinu na kojoj mogu kompenzirati biološke promjene koje tijelo prolazi tijekom svake godine života. To bi značilo da znanost više ne bi samo usporavala starenje, već bi i omogućila osobi da ima još jednu godinu zdravog života za svaku godinu koja prođe. Istovremeno, Kurzweil naglašava da takav razvoj događaja ne podrazumijeva besmrtnost u doslovnom smislu. Ljudi će i dalje umirati od nesreća, infekcija ili nasilja, ali smrt uzrokovana samim procesom starenja mogla bi prestati biti neizbježna biološka sudbina. Glavni razlog optimizma vidi u… Čitaj više »

© 2024 – Portal Logično

POVEZANE VIJESTI