Mandoline LLM Evalueringsværktøj

Mandoline er et specialiseret softwareværktøj designet til evaluering af Large Language Models (LLM). Det giver udviklere mulighed for at oprette brugerdefinerede metrikker til at måle forskellige aspekter af modelresponser, såsom tone, imødekommenhed eller undskyldende adfærd. Platformen tilbyder et softwareudviklingssæt (SDK), der understøtter flere programmeringssprog, herunder Node.js og Python, hvilket muliggør problemfri integration i AI-udviklingsworkflows.

Mandoline blev grundlagt som en moderne teknologisk løsning inden for AI-evaluering og betjener virksomheder og uafhængige udviklere, der ønsker at optimere deres LLM-output. Virksomheden er baseret i USA og fungerer som en uafhængig enhed i teknologisektoren med fokus på kvalitetssikring og præstationsmålinger af generative AI-applikationer. Fra 2026 og frem forbliver det en specialiseret udbyder i det voksende økosystem af AI-overvågningsværktøjer.