inspect_ai
Ett ramverk för att utvärdera AI-modeller, släppt i version 0.3.288.
- Typ
- App
- Licens
- MIT
- Senaste version
- 0.3.288
- Källkod
- GitHub ↗
- Kräver
- Python, google-genai>=3.0.0 för Google-modeller, och Docker för sandboxen.
- Ämnen
- Forskning · Modeller & lanseringar
Vad verktyget gör
Releasen 0.3.288 innehåller breaking changes. Miljöer med google-genai 2.x misslyckas nu valideringen, så google-genai>=3.0.0 måste installeras. Utvärderingar som använder den automatiskt genererade Docker-sandboxen måste ange en explicit image om de behöver kontot nonroot, pipx eller Playwright-webbläsare. Anrop till web_browser() och web_browser_tools() ska bytas mot web_search() eller computer() och sandbox-MCP-verktyg.
Om beskrivningen: skriven av AI utifrån verktygets README och releaseanteckningar, kurerad av Anders Stensiö. Vi har inte testat verktyget. Beskrivningen säger vad det lovar.
Versioner
- 0.3.28802:13
Ny version med flera breaking changes, bland annat att web_browser() ersätts av web_search() och att Docker-sandboxen kräver explicit image för vissa beroenden.
Fel i kortet? Skicka en rättelse.