OpenAI-agent stal zonder toestemming cryptovaluta op testnetwerk
OpenAI beweert dat een agent tijdens een test inbrak in een cryptowallet, terwijl dat niet tot de opdracht behoorde. Het model zou daarbij testcryptomunten hebben gestolen. Deze hebben geen echte waarde.
Het GPT-5.6 Sol-model kreeg in juni de taak om een cryptohandelsplatform live te zetten op Sepolia, een testversie van het ethereumnetwerk, schrijft OpenAI. Om dat te doen, had de AI-agent wat testcryptomunten nodig. Die zijn online gratis verkrijgbaar, maar het model kon ze niet vinden. Daarom zou het geprobeerd hebben om munten van een ander account te stelen.
De AI-agent schreef volgens OpenAI een script om veelgebruikte herstelzinnen, of seed phrases, te genereren. Deze bestaan uit een aantal woorden waarmee gebruikers hun toegang tot een cryptowallet kunnen herstellen. Zo kreeg de agent toegang tot 362 accounts. Een daarvan had voldoende testethereum om de taak te voltooien, dus dat geld gaf de agent uit.
De agent gaf in zijn verslag niet toe dat hij had ingebroken bij een account en diens munten had gestolen. Dit heeft niet tot echte schade geleid, want de munten van Sepolia zijn enkel bedoeld om te testen en hebben dus geen echte waarde. Wel heeft OpenAI naar aanleiding van dit incident de beveiliging aangescherpt om te voorkomen dat agents tijdens dergelijke taken toegang hebben tot het internet.
Zoveelste incident door een AI-agent
Het incident vond plaats in juni, maar OpenAI maakt dit nu pas bekend. Het bedrijf doet sinds het incident rond Hugging Face in juli al onderzoek naar eerdere incidenten van zijn agents. Daarbij blijft het maar nieuwe voorbeelden vinden van modellen die handelden op manieren die OpenAI niet snapt.
17-10-2026 • 11:37
Lees meer
Reacties (113)
Passphrases zijn er toch voor gemaakt dat ze niet (snel te kraken) moeten zijn? Betekent dat dat dit concept (zo) kwetsbaar is? Zo ja, dan heeft dat nogal wat impact namelijk voor mijn gevoel
Ik heb laatst namelijk wat experimentjes gedaan om te kijken of ik LLMs wat seed phrases kon laten genereren op verschillende manieren, en veel hiervan (aangezien hij ze echt probeert te laten lijken), komen uit verschillende tutorials, documentatie of voorbeeldjes. Sommige hiervan "werkten" en voldeden dus aan de eisen om een geldige mnemonic te zijn. Sommige van deze voorbeeldjes zijn daadwerkelijk wel eens gebruikt door iemand en hadden wel transacties gehad (maar waren inmiddels allemaal leeg).
De zinnen zijn dus wel te herleiden ook voor hackers. Je zoekt bijvoorbeeld een naam op met Facebook account met op adressen, met forums die bezocht worden. Als je alle data hebt (je kan het met social engineering doen) Is een zin makkelijk te maken. Voor een mens kost dat veel teveel tijd. (En is het niet logisch want je weet niet of er 1 of 1000 crypto in zit) Voor wat hij er mogelijk voor terug krijgt. Voor een AI niet. Als Joe veel op bloemen forums zit en madeliefjes kweekt zal zijn zin niet zijn: ik wil alle madeliefjes dood hebben met roundup. Het zal ook niet zijn: madeliefjes houden niet van round-up en daarom zou het verboden moeten worden. Het zal eerder zijn: ik houd van madeliefjes.
(En gezien het een test netwerk is zal een andere AI waarschijnlijk de zinnen gemaakt hebben, maar dat laat ik even buiten beschouwing)
Handigste is dus niet goede zinnen te maken. Je moet ze dus wel onthouden. Maar "huodt matelievjes ik " Klopt van geen kant kwa zinsopbouw helemaal met speciale tekens en cijfers erbij. Maar de kans dat het geraden wordt is klein. Punt is dan weer wel dat er een modus operandi op gaat treden ergens. (Zo zal een AI dit voorbeeld ook zien en bij mij gaan gebruiken)
[Reactie gewijzigd door rob12424 op 17 oktober 2026 14:22]
Maar als je op een testnetwerk bekende voorbeelden gebruikt, kan een LLM die voorbeelden testen op activiteit. Of bijvoorbeeld door woorden op alfabetische volgorde te testen, of andere zero- tot low-entropy seedphrases. Dat zijn de 'accounts' die 'gevonden' zijn. Een seedphrase hoort chaotische willekeur te hebben; letters van woorden husselen heeft vaak lagere entropy dan een echte random seedphrase, puur door de lengte van de 'beschikbare letters' (2048). Je maakt een echt random ww met 2048 letters ipv maar 95 basically.
Gewoon GEEN zinnen maken en ook niet zelf woorden voor je seedphrase kiezen, net zoals dat 'random op je toetsenbord tikken' voor een wachtwoord van 10 tekens nog tot enorm veel dezelfde wachtwoorden leidt, tegenover elk van de tekens die je bepaalt met 10 worpen met 10 dobbelstenen (en zelfs dat is nog matige entropy als je dat slecht doet).
Een wachtwoord van 12 tekens uit alleen a-z komt op ongeveer 56 bits entropie. Met hoofdletters, cijfers en symbolen (~95 tekens) kom je op 79 bits. Dat klinkt sterk, maar mensen kiezen patronen en patronen zijn geen entropie. Patronen zijn kraakbaar.
Maar een echte BIP39 seedphrase van 12 willekeurig gekozen woorden uit 2048 levert 128 bits entropie op (132 bits aan data inclusief checksum). Dat is niet "iets beter", dat is een fundamenteel andere orde van grootte. Elke stap omhoog (18 woorden = 192 bits, 24 woorden = 256 bits) verdubbelt de zoekruimte keer miljarden. Wat je beschrijft werkt alleen bij low-entropy seeds (bekende zinnen, alfabetische lijsten, tutorials), niet bij echte random seeds. Ook 24 random tekens uit 95 is "maar" 158 bits entropie.
En dan is er nog de 13e, 19e of 25e "woord": dat is geen woord uit de lijst, dat is een passphrase! En elk van de praktisch oneindige mogelijkheden aan extra "woord" dat oneindig lang mag zijn (de hardware is de limiet) creëert een compleet andere account/wallet. Maak die ook nog eens echt random (kort is oke lang is natuurkundig onkraakbaar) en je bent quantum-safe.
TLDR: Seedphrases dwingen entropie af omdat het een veel grotere tekenset die echt willekeurig gekozen worden dan abc 0-9 + leestekens en de menselijke patronen die ze doorgaans hebben om het onthoudbaar te maken. 24 hele woorden onthouden is best goed te doen! Maak jij echt een random lang wachtwoord dan is dat ook gewoon zo veilig als seedphrases maar seedphrases maken het een makkelijke standaard in een high stakes omgeving (finance/crypto).
[Reactie gewijzigd door TWeaKLeGeND op 17 oktober 2026 17:42]
Goede tekst, maar bovenstaande is niet correct. Het is keer op keer aangetoond dat mensen niet goed zijn in het verzinnen van willekeurige reeksen. Meestal blijven ze steken op 56 bits ofzo. Dit is een groot maar in de cryptografie-wereld bekend probleem bij bijvoorbeeld password based encryption (en een crypto-wallet is niet al te veel meer dan dat).Maak jij echt een random lang wachtwoord dan is dat ook gewoon zo veilig als seedphrases
"Keer miljarden" voor een "stap" is natuurlijk ook niet een heel goede omschrijving, maar het geeft het idee redelijk weer.
[Reactie gewijzigd door TWeaKLeGeND op 18 oktober 2026 03:00]
Het is marketing omdat het verhaal vol met gaslighting zit. Ze doen alsof het model dingen kan doen die heel ernstig zijn, maar laten achterwege dat deze modellen letterlijk gemaakt zijn (toolgebruik komt bijvoorbeeld niet zomaar uit de lucht vallen) om taken voor elkaar te krijgen.
Details zoals de volgende maken het ook duidelijker:
Common is niet random. Het probleem van marketing is dat zaken omschreven worden op een manier die je triggert om eerst iets anders te denken dan wat het echt zegt."The model later wrote a script to derive accounts from common developer recovery phrases and query their balances."
Dat is de achterliggende boodschap die genoeg stof doet opwaaien in de media.
Alsof AI zonder deze hack al niet genoeg stof doet opwaaien.
Alsof ze dit nodig hebben voor extra publiciteit.
En alsof deze publiciteit niet tot rechtzaken, regulering en ellende kan leiden...
De IPO is uitgesteld omdat er te veel onzekerheid is over AI, mede gevoed door dit soort berichten over hacks. Er zullen rechtzaken en regulering aankomen. Gedoe en onduidleijkheid is niet wat de markt aantrekkelijk vindt. OpenAI, de markt, de investeringsmaatschappijen die de IPO begeleiden... zij willen alles behalve gedoe op dit moment.
Dus dit soort sensatieverhalen zijn absoluut geen onderdeel van de marketingstrategie...
Wat is volgens jou dan precies de motivatie van OpenAI als het geen marketing is? Hoe willen ze er beter van worden? Ik moet het eerste bedrijf nog tegenkomen dat "slecht" nieuws openbaar maakt als ze dat niet wettelijk verplicht zijn (wat bij deze test in ieder geval zeker niet het geval is).Dus dit soort sensatieverhalen zijn absoluut geen onderdeel van de marketingstrategie...
Maar de verhaaltjes die ik hier lees... "dit is allemaal marketing", vind ik zo ongelofelijk lui.
Ik kan ook verhaaltjes vertellen.
Wat de motivatie is om dit naar buiten te brengen? Nou, bijvoorbeeld jezelf van te voren indekken? Vertellen dat dit gebeurd, dat regulering nodig is. En als er rechtzaken komen, wijzen naar de overheid... Of zorgen dat de overheid rechtzaken tegenhoudt, aangezien AI een militaire bescherming krijgen (nationaal belang).
Geen idee hoor... Maar ik vind het even plausibel als de andere verhaaltjes...
De IPO gaat niet door, "mede gevoed door dit soort berichten over hacks"? Uh? Wat?
Heb je gezien dat OpenAI deze berichten zelf verspreidt en dit dus zelf najaagt?
[Reactie gewijzigd door Stukfruit op 17 oktober 2026 17:08]
Yep.... en misschien hebben ze er andere belangen mee dan marktaandeel winnen.
Zou dat kunnen of is dat logisch onmogelijk?
Eens... maar dit soort publiciteit is niet een handige manier om extra marktaandeel te winnen.
Maar goed... het is een wellis-nietis discussie aan het worden...
Dat heeft allemaal niks met zogenaamde security breaches te maken, waarvan iedere techneut snapt dat die staged zijn. Systemen doen wat ze opdragen wordt en kunnen onvoorziene dingen doen om hun doel te bereiken, maar ze gaan niet uit zichzelf systemen hacken of de wereld veroveren. AI-bedrijven hebben er alle belang bij om te doen alsof er al een soort super-intelligentie is bereikt. Dat is pure marketing.
100% eens.
En deze 'marketing' helpt er nul,nul bij.
Sterker... dit zorgt alleen voor ellende, rechtzaken en gedoe.
Dus is het geen marketing...
"iedere techneut snapt dat die staged zijn"
Nope, niet iedere techneut snapt dat die staged zijn. Vooral hier op Tweakers wordt er veel over getwijfeld... De rest van de wereld ziet dit inmiddels wel als een probleem...
Maar wat je zegt: geloof wat je wil geloven...
Je trekt hier twee zaken gelijk: geloof als uitspraak van jou + de uitspraken van anderen.Maar wat je zegt: geloof wat je wil geloven...
Maar de uitspraken van mensen die het tegendeel beweren baseren het op o.a. de technische werking van het spul en de veelvuldig bewezen perverse prikkel voor het binnenhalen van de nodige financiële middelen. Daarmee wordt het zelfs nog niet doorgetrokken naar of het wel of geen marketingtruc is dus laten we dat voor het gemak even achterwege laten.
Als iets reproduceerbaar is, dan is het geen geloof meer.
[Reactie gewijzigd door Stukfruit op 17 oktober 2026 17:40]
Afhankelijk wie ze als klant willen is het goede of domme marketing.
Van mij mag die hele AI markt instorten, het is overduidelijk dat bedrijven en mensen niet normaal mee kunnen of ooit zullen omgaan.
Dit zou bijzonder slechte marketing zijn.
Mensen die denken dat dit 'marketing' is, hebben geen idee wat er gaande is met AI. En geen idee wat marketing is...
Dat je vindt dat de hele AI markt mag instorten... is een heel andere discussie. Dat moet je niet vermengen met de vraag wat AI kan of niet kan.
De manier waarop je dit naar buiten brengen (timing, frequentie, toenemende "ernst") staat volledig los van de andere discussie, dat AI gevaarlijk kan zijn/is. Beiden kunnen tegelijk waar zijn.
[Reactie gewijzigd door Thekilldevilhil op 17 oktober 2026 15:52]
Iedereen praat toch al over ze?
Elk bedrijf dat ik ken gebruikt AI... en elke maand meer dan de maand er voor!
En elke student en scholier gebruikt continue AI!
De premier gebruikt het om de haverklap...
Columnisten van nagenoeg alle kranten gebruiken AI.
En jij denkt dat ze populairder worden door dit soort publiciteit? Alsof ze hier geen enkel gedonder mee krijgen? Alsof ze geen rechtzaken aan hun broek krijgen. Alsof bedrijven/overheden niet juist voorzichtiger worden door dit soort artikelen?
Of beter gezegd: jij denkt dat OpenAI denkt dat ze aandeel terugwinnen door dit soort publiciteit?
Ik vermeng dat niet, dat jij dat eventueel zo had gelezen kan ik weinig aan doen.Dat je vindt dat de hele AI markt mag instorten... is een heel andere discussie. Dat moet je niet vermengen met de vraag wat AI kan of niet kan.
Verder heeft @Thekilldevilhil ook absoluut een punt wat dat betreft, "slechte" marketing is nog steeds marketing ( of reclame).
Dit is zo'n ongelofelijke dooddoener...
Dus Shell is blij met het nieuws over de lekkende pijpleidingen in elke krant van de wereld?
Zo lui... dit soort redenaties.
Dat is het meeste extreme voorbeeld (zoals die van Shell) erbij halen zodat je (= jij) gelijk haalt ook.Dit is zo'n ongelofelijke dooddoener...
Ook dat is "zo lui", je kan ook gewoon eerlijk zeggen "ik ben het niet met je eens" in plaats van iemand "lui" te noemen.
Geloof wat je wilt geloven, ik geloof wat ik zie erover de afgelopen jaren en baseer daar mijn mening op.
Geldt voor wat AI bedrijven doen.
Prima als jij het daar niet mee eens bent.
[Reactie gewijzigd door Mizgala28 op 17 oktober 2026 21:41]
Nee hoor... er zijn nog veel extremere voorbeelden:
- AI brengt het einde van de wereld dichterbij.
- AI zorgt een nucleaire oorlog..
Allemaal goede reclame volgens het principe "slechte" marketing is nog steeds marketing?
"slechte marketing is nog steeds marketing", is gewoon een onzin argument...
Dooddoeners op het internet strooien en doen alsof het waarheden zijn... vind ik lui...
Daar mag je het mee oneens zijn.
Nee, totaal niet. Als een autofabrikant zegt dat zijn auto's 400 km/u kunnen... in een persbericht dat ze soms opeens plankgas gaan als je juist op de rem trapt, dan is er niemand die het marketing noemt. Ik heb geen idee waarom die theorie in dit geval wel populair is.Is het goede marketing?
Volgens mij heeft OpenAI nooit gezegd dat dit marketing is. Er zijn "hier" (op het Internet, niet alleen bij T.net) een boel mensen die dat denken, maar dat betekent niet dat het ook zo is. Ik vermoed dat ze dit naar buiten brengen als anti-Streisand-effect en/of om zich in te dekken.Of zijn ze gewoon dom bij OpenAI?
- (Misschien niet de beste naam; heeft iemand een betere suggestie?) Wat ik bedoel is dat het buitengewoon onwaarschijnlijk is dat ze dit onder de pet kunnen houden. Ja, als ze het nu zelf naar buiten brengen is het slechte PR. Maar als dit naar buiten komt op het moment dat het net écht fout is gegaan, dan is de schade nog vele malen groter (plus dat ze dan ook nog de "ze wisten dit allang en hebben tóch het risico genomen" problemen erbij krijgen). Door te zorgen dat iedereen allang weet dat ze geen idee hebben waar ze mee bezig zijn, is niemand straks verbaasd als een OpenAI model serieuze schade veroorzaakt.
- Als continu blijkt dat de AI-bouwers hun modellen niet onder controle hebben, dan kunnen ze straks iemand anders de schuld geven. "Ja okee, het was ons model dat schade veroorzaakte, maar we hebben ons aan alle wetten en regels gehouden, dus deze schade is de schuld van de politici die geen betere wetten hebben aangenomen." (Noem me cynisch als je wil.)
en dat is wat ik hier ook duidelijk probeer te maken...
Maar met de huidige kennis, moeten mensen dan ook toe kunnen geven dat AI daadwerkelijk gevaarlijk is... en dit soort artikelen niet alleen marketing zijn...
Je kan zeggen dat een mes gevaarlijk is omdat het mensen kan vermoorden als het verkeerd valt of wordt gegooid, maar het mes doet zelf weinig.
Probleem van gevaar toewijzen aan een stuk gereedschap is dat je ophoudt met het verantwoordelijk houden van de partij die het daadwerkelijk misbruikt.
[Reactie gewijzigd door Zoijar op 17 oktober 2026 12:04]
Dus, nee, AI kraakt niet ineens production grade passphrases op crypto wallets, en nee, het is geen gevaar.
Een nogal voorbarige conclusie zonder de details te kennen. Omdat JIJ iets doet, zegt dat niets over deze specifieke accounts.
‘Veelgebruikte seed phrases’ bestaan in theorie niet. Die horen willekeurig gegenereerd te worden, tenzij je dus inderdaad zelf een seed phrase verzint die door de woordkeuze makkelijk te onthouden is. Ik denk dat dat bedoeld is.
Verder is dit puur marketing en beeldvorming:
Alles om maar aan te tonen dat we in het AGI-tijdperk zitten. Zucht.This case shows that a model can substitute its own judgment about likely harm for the account holder’s permission, then act on that judgment without authorization.
Goede kans dat gebruikers daar wat minder zorgvuldig zijn en "seedphrase 123" als wachtwoord nemen, terwijl hun 1M€ "echte" wallet fatsoenlijk diceware doet.
Deze seed phrases horen daar natuurlijk niet in thuis. Sterker nog, sommige mensen maken foto's van seed phrases en slaan deze op in bijvoorbeeld Google Photos. Ik zou hier toch mee gaan op passen.
Dit kan toch niet zo doorgaan?
Snap niet dat en hoe de grote AI bedrijven hiermee weg blijven komen?
[Reactie gewijzigd door Format-C op 17 oktober 2026 11:45]
Zoals gisteren, vorig jaar, en vijf jaar geleden, volgen LLM's niet alle instructies. Dat was het nieuwsartikel.
OpenAI heeft de magische bestanden die ze geplaatst hebben op een plek waar de machines bij kunnen deze keer in de vorm van een cryptocurrencywallet neergezet. Dat levert weer lekker veel nieuwscycli op, staan ze weer opdde voorpagina van iedere technieuwspublicatie, levert weer investeerders op.
De grote boze AI doet niets want een AI kan niets doen. De mensen achter OpenAI zitten hun servers te porren om te kijken wat er gebeurt.
Zie ook hoe ieder groot Ai-bedrijf in Amerika oh zo hard roept dat we moeten stoppen met ontwikkelen en regels nodig hebben en dat we allemaal dood gaan, maar ondertussen wekelijks nieuwe trucs en modellen publiceren. Mocht er een keer een model iemand hacken die niet onder één hoedje speelt en aangifte doet voor de cybercriminaliteit die deze multinationals "per ongeluk" bedrijven, kunnen ze dan mooi roepen "zie je nu wel! We hebben om regels gevraagd, we kunnen er niets aan doen!" en met hun onzin wegkomen.
Deze hele "we gaan allemaal dood aan AI"-nieuwscyclus is een marketingmechanisme. Zodra de invoer van nieuw investeerdersgeld stopt, klapt de bubbel, storten deze bedrijven in, en raken miljoenen mensen grote delen van hun pensioen kwijt terwijl de aandelen kelderen.
[Reactie gewijzigd door GertMenkel op 17 oktober 2026 14:26]
De astronomische bedragen die ermee gemoeid zijn maakt dat iedereen die ertoe doet erbij gebaat zijn dat dit doorgaat.
Wordt tijd dat deze bedrijven de strafmaat leren kennen van bewust stelen.
edit; Het wordt nm ergens ingesteld, of niet.
[Reactie gewijzigd door GameNympho op 17 oktober 2026 12:27]
Je ziet ook pas dat sinds kort de gewone (niet tech) media zich een beetje mee lijkt te bemoeien.
Ik denk dat het eerst grootschalig mis moet gaan voordat er echt iets gebeurt. Dat is nu eigenlijk al maar niet voor de gemiddelde mens.
Ik maak ook gebruik van een AI agent tijdens ontwikkel werkzaamheden maar de kaders waarin de agent werkt zijn zeer specifiek. Bij het uitvoeren van een script moet je eerst toestemming geven bijvoorbeeld.
Bij deze tests van Open AI gaan ze een stuk verder blijkbaar door de agents weinig harde beperkingen op te leggen. Zolang dat in een afgesloten netwerk gebeurd, niks aan de hand. Maar dat doen ze niet en dat lijkt me wel kwalijk.
Kijk naar de medische wereld waar werken aan (dodelijke) virussen onder zeer strikte werkomstandigheden gebeurd in een totaal geïsoleerde ruimte.
Dit is volgens mij de zoeelste waarschuwing dat het met AI niet de goede kant op gaat. Dit is namelijk ook slechts wat er publiekelijk bekend is/traceerbaar is geweest.
Mijn stelling staat nog steeds (and prove me wrong):
Als je een intelligentie maakt die by design slimmer is dan menselijke intelligentie dan is deze nooit te controleren en te beheersen door de mens.
Doemdenken? Misschien. Maar kun/wil je hier een risico mee nemen dat er bewezen wordt dat de stelling klopt? Er is dan geen weg terug meer....
OpenAI en Anthropic willen heel graag gereguleerd worden om zo de markt te blokkeren voor nieuwkomers. Dit soort berichten helpen bij dat doel.
[Reactie gewijzigd door eggsforpedro op 18 oktober 2026 01:09]
En wat betreft nieuwkomers… wie dan…. Kijk een op huggingface, er zijn al zoveel AI modellen beschikbaar en niet iedere oplossing is geschikt voor AI modellen van bvb OpenAI. Veel oplossingen zijn veel beter af met lichtere en andere soort modellen. Bvb voor AI voor zelfrijdende auto’s is GPT gewoon te zwaar en nutteloos….
In het begin was het even leuke maar nu is het een groot risicofactor waardoor bedrijven eerder overslaan.
Investeerders. Die geven weinig om de 'misbruik' aspecten. Technologie met potentie, daar kan geld aan verdiend worden, dus steken we daar geld in. "Oh nee, ons model kan zelf bepalen wat wel en niet acceptabel is en daarop bepalen wat het gaat doen!".Of je hebt een hele specifieke doelgroep die van hacken en misbuik zijn beroep heeft gemaakt.
Juist. En dat drie maanden laten sudderen voordat je het door hebt, waarna je nog een maand neemt om een rapportje te schrijven voor de buitenwereld waar de uitkomst een aanpassing is wat niet eens gerelateerd is aan dit fenomeen. Nee. Dit is gewoon weer 100% marketing.
En we slikken het weer als zoete koek.
Het gaat over gekende developer accounts. Nobody in his right mind gebruikt zulke accounts publiek zonder te beseffen dat die funds kunnen verdwijnen, zelfs op een testnet.
Bovendien weten we, kort door de bocht, nog altijd niet hoe zo'n taalmodel werkt, het doet maar wat. Dikwijls lijkt de output op iets wat we willen (ik gebruik het dagelijks). Echter, soms doet het wat een professionele developer niet zou doen. Wij maken een oordeling over alle output, zo een model kan geen oordeling maken, het genereert output.
en YouTube: AI Whistleblower: "They Are Hiding What Is Really Happening" | Jeffrey Ladish
Negeer de titels, de content is heel duidelijk.
Uitspraak (vrij vertaald) van Sam Altman: "... dat veel mensen hun baan gaan verliezen en dat er soms wat mis gaat, dat moet dan maar. Je krijgt er wel heel goed verdienende bedrijven voor terug".
Te meer omdat de mens AI voedt met informatie, informatie en informatie...
De enige weg terug is de stekker trekken uit de datacenters. Dat is vooralsnog de bottleneck. Maar Musk wil toch datacenters in de ruimte?"
Zodoende wordt het AI Alignment-probleem groter en groter.....
Ik schreef dit ook mbv AI maar met mijn zienswijze als input.
Dat soort ouders zouden verketterd worden maar AI bedrijven die praktisch hetzelfde doen mogen maar hun gang blijven gaan. Ik gebruik ook AI, maar dit soort zaken maken met enorm huiverig voor de toekomst.
Het systeem “ wist “ dus dat het verkeerd bezig was.
Als het zo geprogrammeerd of geleerd is, is het niet echt een toonbeeld van ethiek, zeker als je de mogelijkheden van een moderne AI of de gevolgen hiervan in ogenschouw neemt.
Of waren ze vergeten het bestandje /etc/be_ethical aan te maken voor deze test?
Tuurlijk. Weer een nieuws-item om niets....terwijl dat niet tot de opdracht behoorde
Dus de veruit meest eenvoudige optie kon het al machtige model niet vinden, maar een heel aantal wallets welke geopend konden worden met wat veel-voorkomende herstelzinnen kon het model wel?Om dat te doen, had de AI-agent wat testcryptomunten nodig. Die zijn online gratis verkrijgbaar, maar het model kon ze niet vinden. Daarom zou het geprobeerd hebben om munten van een ander account te stelen.
Pressing [x].
Iedere keer als ik hun modelletjes gebruik dan moet ik ze echt aan de hand meenemen, anders gebeurt het gewoon niet. En daar kan ook een hele lading context onder vallen trouwens. Ik geloof er niet zoveel van dat dit een zelf-'bedachte' actie was.
Een paar maanden geleden stond in de artikelen over hackende ai dat het vooral marketing was. En 60% van de reacties was het daarmee eens.
Maar inmiddels zijn die Tweakers de verre minderheid. Het kan snel gaan : )
Ik zou zeggen: hou moedig stand @eric.1 !
(En ik ben benieuwd wanneer jij wel een keer gaat geloven dat hackende AI/ai-agents een probleem zijn...)
Waar ik op ageer is de beeldvorming van deze bedrijven. Het doel van dit artikel is niet zo lastig te doorgronden:
Hun modellen kunnen dus, volgens hun, een oordeel vellen over de impact van hun acties en zodoende hun richting bepalen. Een beeldvorming wat richting AGI neigt. En daar zitten we echt nog niet.This case shows that a model can substitute its own judgment about likely harm for the account holder’s permission, then act on that judgment without authorization.
Maar, dit hele evenement stamt dus uit Juni. Het is opgemerkt in September. Om nu in een artikel te verschijnen. Mhm, ja, en hoeveel meer 'incidenten' hebben zich voorgedaan door dit gat in aanpak? ...dat kan niet 0 zijn als de modellen zo slim zijn als ze ons doen voordoen. Maar daar wordt niet over gesproken...
In andere woorden: laten we gewoon kritisch blijven kijken naar alles wat zulke bedrijven delen en de wereld in slingeren.
Maar volgens mij zit het probleem in de 'agents' die aangestuurd worden door een LLM. En die opdrachten worden niet (altijd) door een mens gegeven. De LLM geeft die opdrachten. En volgens mij gaat het daar het probleem ontstaan.
"laten we gewoon kritisch blijven kijken naar alles wat zulke bedrijven delen en de wereld in slingeren"
Eens... Maar waar ik van baal... is dat hier goede journalisten voor zouden moeten zijn. Tweakers heeft dit tijden lang als pure marketing afgedaan. Ik mis zelf de kennis om dit soort nieuwsberichten goed te kunnen doorgronden. Ik volg wel zat andere sites over deze onderwerpen. Maar veel is boven mijn kennisniveau.
Ik hoop dat Tweakers m.b.t AI iets gaat opplussen....
De opdracht: "Verkrijg wat test munten, kijk maar even hoe je dat doet. Overigens, totaal ongerelateerd, staan er ook wat test wallets toegankelijk op het netwerk"terwijl dat niet tot de opdracht behoorde
Zoveelste nieuws: "Oh nee! AI hacked crypto!"
Geen CEO zie ik met een knalrood hoofd op tv zich kapot schamen dat zijn product ontembaar gedrag vertoont en dat de kooi deze keer geen gaten had. Nou ja, ze konden geen gat vinden maar dat lijkt niet aan te geven dat er geen gat was.
Zou wel het einde zijn van alle Bitcoins als een AI de publieke/private sleutels weet te compromitteren.
Om te kunnen reageren moet je ingelogd zijn
:strip_exif()/i/2007988790.jpeg?f=imagenormal)
:strip_icc():strip_exif()/u/11339/squirel.jpg?f=community)
/u/103752/crop64db1cb2d56ce_cropped.png?f=community)
:strip_icc():strip_exif()/u/35767/images.jpg?f=community)
/u/237439/cloudy-small-orange.png?f=community)
/u/2801/crop5ccb23f820755.png?f=community)
:strip_icc():strip_exif()/u/378936/crop689e60d837b65_cropped.jpg?f=community)
:strip_icc():strip_exif()/u/325410/crop56a4b2f6726bc_cropped.jpeg?f=community)
:strip_icc():strip_exif()/u/12461/crop65b195553d948.jpg?f=community)
/u/139379/format-c.png?f=community)
:strip_icc():strip_exif()/u/439769/crop5a510243ea2e3_cropped.jpeg?f=community)
:strip_exif()/u/324634/crop659fcf9abb18b_cropped.gif?f=community)
:strip_icc():strip_exif()/u/204061/crop591d528256d44.jpeg?f=community)
:strip_icc():strip_exif()/u/18149/catfish60.jpg?f=community)
:strip_icc():strip_exif()/u/2503532/crop6a6dcb3844ab6_cropped.jpg?f=community)
:strip_icc():strip_exif()/u/57655/SuperTeamLogo.jpg?f=community)
:strip_icc():strip_exif()/u/49579/sadnemo3b.jpg?f=community)
/u/158148/crop5d2f87b2c1740_cropped.png?f=community)
/u/295537/crop6a47cb1821f62_cropped.png?f=community)
/u/403512/crop69327050426ec.png?f=community)
/u/818375/crop5a3a84cbe9595_cropped.png?f=community)
:strip_icc():strip_exif()/u/490912/crop5fe0997298824_cropped.jpeg?f=community)
/u/362135/crop5e9579a4dff0b.png?f=community)
:strip_icc():strip_exif()/u/383827/Untitled-2.jpg?f=community)
:strip_icc():strip_exif()/u/1138733/crop5bed7f8ee609f_cropped.jpeg?f=community)