Oppgaver
tool-use
Alle oppgaver er offentlige. Gull-svar og evalueringskode er åpen i repo'et.
4 av 4
| ID | Bench | Kategori | Tittel | Vansk. | Eval |
|---|---|---|---|---|---|
| tool-altinn-001 | tool-use | altinn-skjema | Identifiser riktig Altinn-skjema for MVA-melding | medium | regex |
| tool-brreg-001 | tool-use | brreg-api | Riktig Brreg-endpoint og query for orgnr-oppslag | easy | regex_all |
| reason-tool-001 | tool-use | tool-reasoning | Velg riktig sekvens av verktøy for sammensatt oppgave | hard | regex_all |
| reason-tool-002 | tool-use | tool-reasoning | Beslutt når verktøy ikke skal kalles | medium | regex_all |