Cribl tester AI-modeller mot IT- og sikkerhetstelemetri

Cribl har lansert et AI Research Lab som skal forbedre hvordan kunstig intelligens forstår og behandler IT- og sikkerhetstelemetri. Laboratoriet utvikler egne modeller og evaluerer ledende AI-systemer mot reelle arbeidsflyter, spesielt for å gjøre AI mer nøyaktig og effektiv for tekniske team. Fokuset ligger på å teste AI-modeller i praksis, i motsetning til generiske AI-benchmarker som bruker standardiserte tester. Cribl har utviklet «SecIT-Bench», et rammeverk som evaluerer AI-agenters ytelse i IT- og sikkerhetsrelaterte hendelsesscenarier. Målet er å forstå både sluttresultatet og hvordan AI-en kom frem til det. SecIT-Bench vurderer faktorer som etterforskningsnøyaktighet, rotårsaksanalyse, resonnering og verktøybruk, samt håndtering av ufullstendig eller tvetydig telemetri. Dette gir innsikt i AI-ens evne til å takle komplekse, virkelige problemer, i tillegg til kostnadseffektivitet knyttet til token-forbruk. Resultatene herfra blir AI-funksjonalitet i Cribls plattform, og bidrar også til bransjen som helhet.