BlastLoop sender AI-fejl tilbage til kilden

Ross Shaw har lagt metoden BlastLoop på GitHub, hvor et AI-program skriver kode i tre niveauer og tester den i tre faser. Det betyder noget, fordi metoden tvinger strukturfejl op til overordnet niveau og lader test finde fejl, misbrug og sikkerhedshuller. Nu ligger metoden frit på GitHub, men dens eksempel er fiktivt, og der mangler uafhængige målinger.

Ross Shaw har lagt BlastLoop ud på GitHub. GitHub er en hjemmeside, hvor folk deler og samarbejder om tekstfiler, som computere kan læse som opskrifter. BlastLoop lader en agent med kunstig intelligens (AI) skrive kode. En AI-agent er et program, der kan handle. Kode er de instruktioner, et program består af. AI-agenten kan skrive på et af tre niveauer. Blast er systemets overordnede form, som når man tegner grundplanen for et hus. Mid er en enkelt funktion eller et modul. En funktion er en lille kommando, der gør én ting. Et modul er en samling kode, der hører sammen. Det svarer til at bygge ét rum eller én væg. Inner er få filer eller funktioner. En fil er et dokument med kode. Det svarer til at justere en enkelt dør eller kontakt.

Derefter kører tre testfaser i fast rækkefølge. En test er en undersøgelse af, om koden gør det, den skal. Den første testfase (T1) gransker strukturen, altså om grundplanen hænger sammen. Den anden testfase (T2) retter fejl og driftsproblemer, altså ting der får programmet til at gå i stå eller opføre sig forkert i den daglige brug. Den tredje testfase (T3) angriber koden med kanttilfælde, misbrug og sikkerhedshuller. Kanttilfælde er de sjældne situationer, hvor noget næsten ikke sker, men stadig kan vælte systemet. Misbrug er, når nogen bruger systemet på en måde, det ikke var tænkt til. Sikkerhedshuller er svage steder, hvor nogen kan bryde ind eller overtage kontrollen.

Er problemet strukturelt, altså noget grundlæggende i opbygningen, må det ikke lappes lokalt. Det svarer til, at en skæv væg ikke må dækkes med tapet. T3 sender problemet tilbage til T1. T1 peger på det niveau, der ejer koden — altså det sted, hvor grundplanen, rummet eller døren hører til. Derefter kører T2 og T3 igen. Metoden kræver ingen bestemt kodestil, altså ingen bestemt måde at skrive og formatere koden på. Ifølge Shaw kan andre tilgange, som rød/blå-testning, ligge inde i niveauerne eller i T3. Rød/blå-testning er en måde at lade et hold angribe og et andet forsvare. Et gennemløb er et forløb, hvor metoden bruges fra start til slut. Eksemplet på et gennemløb i det offentliggjorte kodelager er fiktivt, altså opdigtet. Der findes ingen uafhængige målinger af metoden. Uafhængige målinger betyder målinger lavet af nogen, der ikke er en del af projektet.