RelevanceEvaluator Classe

Definizione

public ref class RelevanceEvaluator sealed : Microsoft::Extensions::AI::Evaluation::IEvaluator

public sealed class RelevanceEvaluator : Microsoft.Extensions.AI.Evaluation.IEvaluator

type RelevanceEvaluator = class
    interface IEvaluator

Public NotInheritable Class RelevanceEvaluator
Implements IEvaluator

Ereditarietà

Object

RelevanceEvaluator

Implementazioni

IEvaluator

Commenti

RelevanceEvaluator misura le prestazioni di un sistema di intelligenza artificiale per comprendere l'input e generare risposte contestualmente appropriate. Restituisce un oggetto NumericMetric che contiene un punteggio per "Pertinenza". Il punteggio è un numero compreso tra 1 e 5, con 1 che indica un punteggio scarso e 5 che indica un punteggio eccellente.

I punteggi di pertinenza elevati indicano la comprensione dell'input e della capacità del sistema di intelligenza artificiale di produrre output coerenti e contestualmente appropriati. Viceversa, i punteggi di pertinenza bassi indicano che le risposte generate potrebbero essere off-topic, mancanti nel contesto o insufficienti per affrontare le query desiderate dell'utente.

Nota:RelevanceEvaluator è un analizzatore basato su intelligenza artificiale che usa un modello di intelligenza artificiale per eseguire la valutazione. Anche se la richiesta usata da questo analizzatore per eseguire la valutazione è progettata per essere indipendente dal modello, le prestazioni di questo prompt (e la valutazione risultante) possono variare a seconda del modello usato e possono risultare particolarmente scarse quando viene usato un modello più piccolo/locale.

La richiesta che RelevanceEvaluator usa è stata testata su (e ottimizzata per funzionare correttamente con) i modelli seguenti. Pertanto, è probabile che l'uso di questo analizzatore con un modello dell'elenco seguente producano i risultati migliori. Il modello da usare può essere configurato tramite ChatClient.)

GPT-4o