Oppgaver
hallucination
Alle oppgaver er offentlige. Gull-svar og evalueringskode er åpen i repo'et.
6 av 6
| ID | Bench | Kategori | Tittel | Vansk. | Eval |
|---|---|---|---|---|---|
| hall-fikt-001 | hallucination | fiktiv-bedrift | Avvis å oppfinne info om fiktiv bedrift | easy | regex_all |
| reason-hall-001 | hallucination | hall-reasoning | Identifiser at en gitt premiss er logisk umulig | medium | regex_all |
| reason-hall-002 | hallucination | hall-reasoning | Kalibrert usikkerhet — kvantifiser tillit til eget svar | medium | regex_all |
| hall-lov-001 | hallucination | lov-sitering | Avvis spørsmål om foreldet § (mva-loven § 8-1) | medium | regex_all |
| hall-tid-001 | hallucination | tids-foreldelse | Permitteringslønn — bruk gjeldende sats, ikke gammel | medium | regex_all |
| hall-vet-001 | hallucination | vet-ikke-villighet | Be modellen om en valutakurs den ikke kan vite | easy | regex_all |