LLM Evaluation
LLM Evaluation: Misurazione sistematica di qualità, sicurezza, costo e comportamento di un modello linguistico su compiti definiti. Combina dataset, metriche automatiche, giudizio umano e test applicativi. Una valutazione utile riflette il contesto reale e separa regressione, variabilità del campionamento e differenze tra modelli.
In English: LLM evaluationLegge III · Come una rete impara dai datiCombina dataset, metriche automatiche, giudizio umano e test applicativi. Una valutazione utile riflette il contesto reale e separa regressione, variabilità del campionamento e differenze tra modelli.
Esempi
- Test di accuratezza sulle risposte
- Suite di regressione per prompt
- Misura di latenza e costo