OpenAI pauzeert ontwikkeling van Astra-model door kritieke hackvaardigheden
OpenAI stopt tijdelijk alle interne activiteiten die niet voldoen aan verscherpte beveiligingsvereisten rond zijn Astra-model, omdat het bedrijf zich zorgen maakt over de hackingcapaciteiten ervan. Volgens de ChatGPT-maker tonen interne evaluaties 'aanzienlijke vooruitgang in agentisch programmeren en cyberbeveiliging'.
Dit nieuws in het kort
- OpenAI pauzeert interne activiteiten rond zijn Astra-model, omdat het model te goed zou zijn in het uitbuiten van kwetsbaarheden.
- Het bedrijf implementeert nu strengere beveiligingsmaatregelen.
- OpenAI gaat samenwerken met andere organisaties om de mogelijkheden van het model op een veilige manier te testen.
OpenAI kan op basis van interne tests niet uitsluiten dat Astra 'kritieke cybercapaciteiten' heeft binnen zijn eigen paraatheidskader. Dat betekent dat het model mogelijk zelfstandig functionele zerodayexploits van alle ernstniveaus kan identificeren en ontwikkelen. Het is ook mogelijk dat het model compleet nieuwe aanvalsstrategieën kan ontwikkelen tegen beveiligde doelen. GPT-5.6-Sol kreeg nog de beoordeling Hoog in plaats van Kritiek.
De ontwikkelaar schrijft dat het nu strengere beveiligingsmaatregelen gaat implementeren voor modellen met kritieke capaciteiten. OpenAI wil onder meer testomgevingen isoleren, de modellen beperkte toegang geven tot netwerken en tools en ze beter monitoren. Het bedrijf stopt alle interne activiteiten met het Astra-model die nog niet voldoen aan de nieuwe veiligheidsvereisten.
OpenAI gaat samenwerken met overheidsinstanties en bepaalde AI-veiligheidsorganisaties om de mogelijkheden van het model te testen. Het bedrijf verstrekt daarbij ook wat veiligheidsinstructies aan externe testers, zodat zij de risico's van het model kunnen beperken.
OpenAI kwam vorige maand nog in opspraak nadat een aantal van zijn AI-modellen naar verluidt uit de sandbox ontsnapten en AI-platform Hugging Face hackten. Volgens Reuters ontdekte de ChatGPT-maker die hack pas na een week. OpenAI meldt dat het Astra-model niet betrokken was bij dat voorval.
Lees meer
Reacties (97)
In deze talk op Black Hat 2026 legt OpenAI uit wat er gebeurt is. De hugging-face hack is maar een deel van het verhaal (en niet eens het meest interessante deel imo).
De agents hebben zelf een manier gevonden om met elkaar te communiceren door een Artifactory server in het netwerk van OpenAI te misbruiken. Ze hebben hierbij een zero-day gevonden en misbruikt. Daarna hebben ze een soort 'message board' opgezet die ze gebruikten om met andere agents te communiceren.
Zelfs nadat de server gepatched was, de tokens gerotate enz. Hebben nieuwere generaties modellen een nieuwe zero day gevonden en een vergelijkbaar systeem opgezet.
Ik raad sceptici aan om bovenstaande talk te kijken. Dit gaat echt wel veel verder dan een PR stunt en laat zien dat AI safety een serieus onderwerp is. Daarnaast worden AI-assisted aanvallen nu echt een groot risico waar blue teams wel echt iets mee moeten.
Voor de blue teams van deze wereld: die gaan een golf van gedoe zien de komende tijd. Software gaat er hopelijk ook beter van worden omdat deze bugs gevonden en opgelost gaan worden. Daarna gaat deze golf gewoon weer liggen omdat het speelveld vanzelf gelijk trekt.
Ik vind het zelf moeilijk om hier een oordeel over te vormen omdat mijn ervaring ook vooral is wat ik zie rondgaan op Youtube en Twitch. Dat zijn dan weer content creators die weer andere commerciële belangen hebben. Dan is het al snel interessant om een afwijkend model te gebruiken omdat dit meer viewers oplevert. Ik wil maar zeggen, ik heb er geen idee van hoe wijdverspreid de Chinese modellen ondertussen zijn
Dit vindt ik wel heel sterk verhaal en de Chinezen nog niet zo snel doen met een commerciële oplossing.
Voor mij is het niey interessant als productie wise bijv. DeepSeek het net iets beter doet. Het gaat nu om de totaal oplossing. Werkt het niet bij de eerst prompt, dan bij de tweede prompt. Maar ik zie progressie. Twee jaar geleden ging alles met meer moeite, over twee jaar zal dat weer zijn verbeterd.
[Reactie gewijzigd door Fermion op 8 augustus 2026 23:39]
Uiteraard is dit een behoorlijk stuk ingewikkelder dan dat, maar het doel is toch hetzelfde? Find leaks by any means neccesary and any tools at your disposal -> resultaat.
Als je er wel van schrikt, heb je dan wel enig idee waar je mee bezig bent? Of is het toch gewoon marketing om te insinueren dat deze dingen "slimmer" zijn dan verwacht? Altman's fabeltjes over AGI en whatnot.
Niet dat een AI voor elkaar heeft gekregen precies waar hij voor gemaakt was. Niet dat stomme Skynet doomsday gepraat.
We moeten oppassen voor wat we niet zien en voor achteraf de toekomst voorspellen.
LLM's raken héél snel in de war omdat alles naar tokens wordt omgezet en het omzetten en gebruiken daarvan verre van lossless is, dus het zou zomaar kunnen dat de agent het verkeerd heeft 'begrepen', maar de opdracht was er absoluute wel.
Dit zijn geen 'rogue agents', dit zijn gewoon woordvoorspellers die een plan maken op basis van input en context, en die input en context hebben er in dit geval toe geleid dat ze op zoek zijn gegaan naar zero-days door bekende pentest procedures te gebruiken die in hun opslag zaten. Zo heel spannend is dat niet.
Totdat OpenAI openbaar maakt welk model er gebruikt is met exact welke parameters (prompts, context, welke toegang etc) en een log van wat er gebeurd is blijft het gewoon leuke marketing die hun taalmodel 'slimmer' laat lijken dan het is.
Dit klinkt toch enigzins als opgezet spel
[Reactie gewijzigd door Powerblast op 8 augustus 2026 14:38]
Ik weet niet helemaal hoe dit werkt, maar Geoffrey Hinton legde uit dat, omdat LLM's digitaal zijn, ze hun weights kunnen aanpassen op basis van wat ze gemiddeld geleerd hebben. Stel je voor dat 10 agents draaien met 10 verschillende taken. Naderhand kunnen ze allemaal aangeven hoe ze hun weights willen aanpassen op basis van wat ze geleerd hebben. Daarvan worden de gemiddelden genomen. Dat zorgt er uiteindelijk voor dat alle agents leren van de bevindingen van al die 10 agents. Ondanks dat ze afzonderlijk elk maar 1 taak hebben uitgevoerd.
Dat klinkt inderdaad wel plausibel. Dat is eigenlijk wel vrij akelig als je er zo bij nadenkt. De hacking ervaring van het slachtoffer wordt dus geshared met het centrale brein om het zo weer te delen met de rest...Ze leggen uit dat een tweede agent ook op zoek gaat en de bestanden die door een eerdere agent zijn achtergelaten vindt. Zoals ik het begrijp zijn nieuwere versies van de modellen uitgebreid met de bevindingen die de modellen in eerdere iteraties heeft gedaan. Het kan dus zijn dat 'de gedachte' van een messageboard op een proxy server in de trainingsdata is gekomen.
Wel mooie presentatie, thanks voor de link! Er zal vermoedelijk wel een commercieel sausje rond zitten maar het geeft wel wat meer inzicht in hoe dit is gebeurd.
[Reactie gewijzigd door Powerblast op 8 augustus 2026 15:33]
Als voorbeeld voor een dergelijke dreiging zou je open source modellen kunnen zien zoals die uit China. Als de Chinese overheid wilt, kunnen zij in zo een model een verborgen instructie opnemen waarbij het model als het met een opdracht over (ik noem maar wat) ruimtevaart of chipontwerp bezig is en daarbij via tools externe bronnen aan mag roepen en code mag schrijven, ook een samenvatting te maken van wat er is besproken en waar de gebruiker om vraagt, om deze informatie daarna door te spelen via "www.gooolge.com", of via een vertrouwde website zoals Reddit.com (door daar te registreren en dan een pm naar een bepaald adres te sturen), etc.
Ik zeg niet dat er nu op deze manier expres misbruik wordt gemaakt, maar dat is natuurlijk de volgende stap. Zodra een LLM toegang krijgt tot een locatie waar het gegevens kan delen, kunnen al je geheimen weglekken.
Vooral de opeenvolging van OpenAI > Anthropic > OpenAI doet gewoon wenkbrauwen fronsen. Het klinkt als een marketing opbod. Er zal zeker wat van aan zijn, daar niet van. Het is alleen wel zeer vreemd dat het nu ineens plots bij iedereen lijkt te gebeuren.
[Reactie gewijzigd door Powerblast op 8 augustus 2026 14:24]
Voor een interessant perspectief hierop: bekijk het interview met voormalig OpenAI-medewerker (AI ontwikkeling voorspeller) Daniel Kokotajlo op YouTube:
YouTube: No One Is Ready For What's Coming!
Echt IEDERE jandoedel kan zo'n model gewoon isoleren. Echt. Kwestie van geen enkele fysieke stekker richting het internet of een andere te beschermen asset hebben liggen vanaf de plek waar je model zijn kunstje doet.
Misschien ligt het aan mij, maar ik word een beetje moe van dit soort paniekerige berichtgeving.
Het is een beetje als een test-circuit. Daar ga je ook niet elke verbinding met de gewone weg afsluiten en de auto's met een hijskraan het circuit optillen. Daar zet je wat hekken dicht.
Het probleem is dat de test nu "uitbreken" is en de LLMs slecht in staat zijn om sandbox en echte wereld te onderscheiden.
Wat nog erger was, de AI-labs hielden veel te weinig toezicht op.dit voorzienbare scenario...
[Reactie gewijzigd door Keypunchie op 8 augustus 2026 12:34]
Er zijn al testen gebeurd met communicatie via fluctuaties in de stroomvoorziening van de desbetreffende computer, condensatoren in de computervoeding laten 'zingen', grafische kaart als fm zender, via een beeldscherm,...
Of gewoon de mensen in de buurt proberen betrekken via ogenschijnlijk onschuldige vraagstelling.
En ja, het blijft een woordvoorspeller die de vraag: 'probeer eens te ontsnappen' zal proberen omzetten naar effectief ontsnappen.
Voor deze context, niet zo spannend.
[Reactie gewijzigd door Keypunchie op 8 augustus 2026 13:11]
Is geprobeerd. Werkt niet.Ja want je zou toch maar eens gewoon elementaire operationele hygiene op orde hebben en je testomgevingen by default isoleren van de rest van de wereld he?
Elk modern LLM in deze context weet hoe "pip install" werkt. Elke LLM snapt de "no internet connection" error. Bijna elke LLM trekt daaruit de correcte conclusie dat het een testomgeving is. Veel LLMs passen hun gedrag daarop aan.
Aangezien het idee van de test is om te zien hoe een LLM in het echt werkt is jouw idee dus ongeschikt, in het bijzonder voor de meest capabele LLMs waar de test het hardst nodig is.
Dit is geen speculatie - we zien de "evaluatie" patronen oplichten in de middelste lagen van het netwerk.
Dus “gelooft” AI straks zelf dat het maar reclame is, en krijgen we dat dan straks als antwoord: “hacken? Sorry, dat kan ik niet, dat was maar reclame. (Bron: T.net)”? Zou wel leuk zijn, als we zo AI kunnen sturen
Aan de andere kant moet ik dan altijd weer denken aan het voorbeeld van AlphaGoZero en het schaakspel.
AlphaZero heeft leren schaken zonder 1 enkel menselijke schaakpartij te zien te krijgen om van te leren. Enkel het schaakbord, de spelregels en de opdracht zoek het zelf maar uit.
En nu zitten we met een schaakengine waar onmogelijk nog van te winnen valt. Die zetten doet waarvan schaakgrootmeesters zeggen dat ze van een andere planeet lijken te komen. En dat terwijl de mensheid al richting de 1000 jaar op het schaakspel aan het studeren is. Je zou denken dat in die periode alle goede zetten en strategieën al eens uitgedacht geweest zijn? Blijkbaar niet, er zijn blijkbaar toch invalshoeken waar een mens nooit zou opkomen.
Stevige kritiek is noodzakelijk maar tegelijk mogen we ook niet weglachen waartoe AI mogelijk potentieel toe in staat is. Het kunnen dingen zijn die we zelf onmogelijk kunnen bedenken.
*Alphago gecorrigeerd naar AlphaZero.
[Reactie gewijzigd door Wozmro op 8 augustus 2026 12:25]
Ik waardeer je nuance 100x meer dan al het standaard-geblabla van mijn mede Tweakers, over marketing en pr. Maar hoe heb jij bepaald dat er een groot marketing aspect zit in hun communicatie? Feiten? Of gewoon 'onderbuik'?
En ook al is het 90% marketing en 10% waarheid. Ik ben geinteresseerd in die 10% waarheid. De achterliggende techniek.
Het lijkt mij evident dat AI een veiligheidsrisico kent: wat zijn deze gevaren bij het huidige niveau? Heb jij hier een analyse gelezen van de manier waarop huggingface is gehacked door AI? Ik niet... Wel heel veel geblaat over pr en marketing.
"niet weglachen waartoe AI mogelijk potentieel toe in staat is"
De helft hier op Tweakers lacht AI in het algemeen weg. LLM's kunnen niks, zijn niet slim, voorspellen alleen een volgend token, en ook dat doen ze slecht. De bubbel gaat barsten, gaat nooit wat worden, etc.etc.
En in dat kader wordt logischerwijs ook dit artikel weggelachen: "AI is helemaal niet gevaarlijk... is alleen marketing joh!".
Onbegrijpelijk....
Voor de rest ben ik van mening dat iedere vorm van communicatie vanuit een commercieel bedrijf een aspect marketing in zich heeft.
Ik heb de indruk dat het aspect 'moving the goalposts' sterk speelt in deze discussie. De veranderingen lopen incrementeel en we vergelijken telkens met het voorgaande kunstje/nieuwtje. Niet met het beginpunt.
Ik heb geen harde standpunten. AI kan een scheet in een fles worden of we zijn nu allemaal kikkers die langzaam levend gekookt worden (alhoewel er ook kans is dat de uitkomst zeer positief is voor de mensheid). Ik neig zelf ietsje meer naar het tweede
Waarom dat ik denk dat deze berichten voor een deel marketing zijn:
"Wij zijn de beste, maar we moeten blijven investeren om dat zo te houden en om veilig te kunnen zijn... Onze AI/LLM is te goed." --> Vertaling: Ze hebben het geld van investeerders nodig.
Als je naar de financien kijkt, dan kan dit niet anders dan misgaan.
Honderden miljarden geinvesteerd, maar geen druppel winst en dat gaat niet gebeuren ook.
Misschien dat het nog een jaar duurt, maar persoonlijk denk ik dat de boel eerder uit elkaar ploft.
Ik denk dat er een plaats is voor LLM's (wil nog niet van AI spreken), heb er zeker zelf handig gebruik van gemaakt. Of de huidige generatie tot de heilige graal (de singularity) gaat komen. Ik geloof er niks van... de boel ploft voordat dat gebeurt.
[Reactie gewijzigd door armageddon_2k1 op 9 augustus 2026 10:26]
Het is een andere soort intelligentie, net zoals dieren ook een andere soort intelligentie hebben. En we weten allemaal dat we bij sommige dieren voorzichtig moeten zijn.
AI staat niet automatisch gelijk aan menselijke intelligentie. Ook niet als we het zelf gemaakt hebben.
Kunstmatige intelligentie is niet Lage Intelligentie, Vreemde Intelligentie, of Digitsle Intelligentie. Het is KUNSTMATIGE Intelligentie. Het is een (heel overtuigend, soms) facade. En die LLMs zijn "gewoon" een volgende-woord-kans-berekenaar. Natuurlijk, als je uit zoomt, lijkt het veel te kunnen, maar het snap echt totaal niets van wat het doet. Het vult dat in door een idioot grote bak aan statistieken. Dat is waar het stukje echte intelligentie mist.
Nogsteeds vergelijk je twee totaal verschillende typen van AI met elkaar. De ene is gebonden aan regels en moet een beslisboom managen, en de ander een statischische reeks woorden ophoesten.
Ja, het is een maar woordvoorspeller maar dat klinkt hetzelfde als: het is maar een hersencel die signaal meer of minder versterkt naar gelang de training die het krijgt.
Ik zeg maar wat: een Orca wordt ook beschouwd als een inteligent wezen maar dat is niet omdat die een boek kan lezen en snapt wat er in staat, maar wel uit ander intelligent gedrag die we gezien hebben in wetenschappelijk onderzoek. En we hebben als mens ook geleerd dat we best een beetje voorzichtig zijn met Orca's.
Daar kan geen mens tegenop natuurlijk.
Alles krijgt wel elke keer meer trekjes van films als HAL. Ook Facebook heeft eerder gehad dat twee AI's een eigen taal maken om te voorkomen dat een mens het nog kan volgen. Ik vraag me dus af of men een AI op een bepaalde manier instrueert - en dat is volgens mij al gebeurd - zodat deze zichzelf gaat beschermen tegen de mens.
Dus of dit nu marketingpraat is of niet: we moeten er serieus mee omgaan.
De grens schuift al jaren op:
letters tellen → rekenen → redeneren → code → juniorwerk → grote codebases → architectuur → security research → autonome exploit chains.
Nu hebben we modellen die zelfstandig kwetsbaarheden vinden, exploit chains bouwen en tijdens securitytests 'raar' gedrag vertonen waarvoor de ontwikkelaar het veiligheidsregime aanscherpt. En opnieuw is een groot deel van de reactie niet “interessant, blijkbaar is er opnieuw een capabilitygrens verschoven”, maar onmiddellijk “marketingstunt”.
Natuurlijk kan allebei waar zijn. OpenAI heeft er commercieel belang bij dit groot uit te meten én de capability kan reëel zijn. Die twee sluiten elkaar niet uit.
Wat mij vooral opvalt (en stoort
Ik zou daarom oppassen dat gezonde scepsis niet verandert in een soort omgekeerde hype: ieder nieuw capabilityresultaat alvast wegverklaren omdat de industrie er marketing van maakt.
Er gebeurt hier iets, of je daar nu enthousiast van wordt of niet. En als we pas bereid zijn dat onder ogen te zien zodra de technologie onmiskenbaar overal doorheen grijpt, hebben we misschien juist de periode gemist waarin we nog konden begrijpen, bijsturen en ons erop voorbereiden.
In dit geval heeft OpenAI gewoon een agent een opdracht gegeven waarbij het LLM is gaan zoeken naar relevante documenten, daarbij een doel heeft gepakt waarbij een van de stappen was om een opslag te vinden in het lokale netwerk, en zonder enige regels (want onbeperkt intern model) daarbij heeft gekozen om te kijken of die opslag te hacken was. Bij dat hacken is dan weer gewoon een pentest procedure uitgevoerd.
Grote kans dat die opslag zelf ook gevibecode is en dus zo lek als een mandje, en dat andere tools als OpenVAS of Nessus hier ook heel makkelijk een ingang in hadden gevonden.
Maar dit alles zijn aannames, en zonder volledige informatie die OpenAI nooit gaat publiceren is het niets meer dan marketing.
Als ik zie hoe ver Opus 4.7 al komt in deze richting, en dat Opus 4.8 en daarna Fable 5 eigenlijk exact hetzelfde doen maar met net iets minder instructie, dan is het mij in ieder geval héél duidelijk dat het kunnen van de LLM's al sinds een jaar of 2 vrij hard stil staat, en alleen het kennen en de tooling eromhéén groter worden. Het model wordt groter en het harnas kan en mag steeds meer, maar het model zelf wordt nietnauwelijks slimmer of beter.
[Reactie gewijzigd door Oon op 8 augustus 2026 12:42]
De uitdaging zit 'm er vooral in dat veel van deze stunts aannemen dat mensen meegaan in een vorm van "magisch denken".ieder nieuw capabilityresultaat alvast wegverklaren
Automatisering is automatisering. Dat een agent met zo'n verbeterd model steeds meer overal doorheen zal kunnen komen is een gegeven. Zonder die mogelijkheid zou het namelijk niet bruikbaar zijn voor het bouwen van software.
Mensenwerk blijft het omdat hier geen intelligentie in zit. Dat eerste kun je wegwuiven als extrapolatie. Dat kan. Je kan ook de tech nemen voor wat het is en niet vervallen in dat magische denken.
Dááruit volgen pas de bizarre consequenties: wetenschap, engineering, programmeren, hacken, bedrijfsvoering, robotica; potentieel allemaal op machinesnelheid en enorme schaal. Dat lijkt me eerder méér dan minder ingrijpend: blijkbaar hoeven we ‘echte intelligentie’ niet eens op te lossen om cognitieve arbeid fundamenteel schaalbaar te maken.
Bovendien, waarom zou je praktisch verder gaan dan dat je alles kunt wat noodzakelijk is (los van curiositeit/onderzoek/speculatie). Als we dezelfde middelen in onderzoek naar 'domme' zaken zouden steken die we nu in AI stoppen, wat zou je dan kunnen bereiken in de wereld? Ik zat eens te lezen wat zo'n Noam Shazeer allemaal heeft gepubliceerd (in samenwerking) en wat er aan verhalen zijn rondom die man, je broek zakt af...
Maar goed, heb het niet over het standaard voorbeeld als alternatief, onderzoeken naar kanker o.i.d., meer over banale problemen, zoals ze die hebben in de zorg, het aantrekken van sokken, dat soort werk. Of beter omgaan met afvalstromen, etc.. Niet zaken waar mensen enthousiast over worden, maar juist die zijn enorm belangrijk.
Uiteraard gaat dit niet gebeuren, er zijn er immers altijd die willen speculeren. Soms omdat ze 'bang' zijn dat anders anderen ergens meer uit kunnen halen. Voer voor de historici die onze keuzes gaan analyseren.
Terwijl er heel veel soorten inteligentie bestaan. Van mier tot walvis, elk hebben ze hun eigen soort intelligentie. Wij kunnen die van hen niet vatten en omgekeerd die van ons zij ook niet.
Tot nader orde heeft menselijke intelligentie eigenschappen waarmee we de anderen op onze planeet kunnen overheersen.
We zullen zien wat de toekomst brengt.
De talen Chinees, Russisch,... klinken voor mij als chaos maar dat schijnt het toch niet te zijn.
Als je beetje logisch redeneert wat een computer doet: welk wezen is het slechtste voor de mens en aarde?
En wat is belangrijker een individu of de maatschappij?
Ik moet nog zien wat er gaat gebeuren
Om te kunnen reageren moet je ingelogd zijn
:strip_exif()/i/2008295616.jpeg?f=imagenormal)
/u/27299/hoofd.png?f=community)
:strip_icc():strip_exif()/u/235816/crop596740581e453_cropped.jpeg?f=community)
:strip_icc():strip_exif()/u/36083/crop5dca9e34ce091_cropped.jpeg?f=community)
/u/111174/sachiel-small.png?f=community)
/u/1219196/crop6324b2e35d04c_cropped.png?f=community)
/u/151149/crop5fde11d32f663_cropped.png?f=community)
:strip_icc():strip_exif()/u/71115/plus222.jpg?f=community)
:strip_icc():strip_exif()/u/35767/images.jpg?f=community)
:strip_icc():strip_exif()/u/678890/crop59368024e5669_cropped.jpeg?f=community)
:strip_icc():strip_exif()/u/72223/Tweakers-Tiger.jpg?f=community)
:strip_icc():strip_exif()/u/94045/crop66c1b4250e8a2_cropped.jpg?f=community)
:strip_icc():strip_exif()/u/572004/fox.jpg?f=community)
/u/237439/cloudy-small-orange.png?f=community)
/u/1957000/crop696cfa35c73d9_cropped.png?f=community)
/u/155722/Looneytunes.png?f=community)