Format-ScorerRegelbasiert

ValidLinksScorer

Überprüft, dass URLs in der Vorhersage korrekt formatiert und optional zugänglich sind. Extrahiert URLs aus Text, validiert deren Format und kann optional prüfen, ob sie sich auf gültige Ressourcen auflösen.

Übersicht

Überprüft, dass URLs in der Vorhersage korrekt formatiert und optional zugänglich sind. Extrahiert URLs aus Text, validiert deren Format und kann optional prüfen, ob sie sich auf gültige Ressourcen auflösen.

formatrule-basedtrace-evaluationurlvalidation

Anwendungsfälle

  • Validierung strukturierter Ausgaben

Funktionsweise

Dieser Scorer validiert Ausgaben mithilfe einer deterministischen regelbasierten Evaluierung anhand konkreter Kriterien. Vordefinierte Regeln und Muster bewerten die Antwort und liefern konsistente, reproduzierbare Ergebnisse ohne LLM-Inferenz.

Eingabeschema

ParameterTypErforderlichBeschreibung
predictionstrJaText containing URLs to validate
context.check_accessibilityboolNeinWhether to check if URLs are accessible

Ausgabeschema

FeldTypBeschreibung
scorefloatPercentage of valid links (0-10 scale)
passedboolTrue if all links valid
reasoningstrLink validation summary
metadatadictList of valid and invalid links

Score-Interpretation

Standardschwellenwert: 10/10

10Vollständige ÜbereinstimmungDie Ausgabe entspricht exakt dem erwarteten Format oder Wert
0Keine ÜbereinstimmungDie Ausgabe entspricht nicht dem erwarteten Format oder Wert

Häufig gestellte Fragen

Wann sollte ich diesen Scorer verwenden?

Verwenden Sie ValidLinksScorer, wenn Sie die Aspekte format and rule-based Ihrer KI-Ausgaben evaluieren möchten. Der Scorer eignet sich besonders für validierung strukturierter ausgaben.

Warum benötigt dieser Scorer keine erwartete Ausgabe?

Dieser Scorer evaluiert ohne Referenzantwort anhand der konkreten Eingabefelder seines Schemas. Diese Felder sind Belege für die Prüfung; sie gelten nicht automatisch als faktische Ground Truth.

Kann ich den Schwellenwert anpassen?

Der angezeigte Standardschwellenwert dieses Scorers ist 10. Wenn die Konfiguration des Evaluierungsauftrags einen Schwellenwert bereitstellt, prüfen Sie ihn vor dem Speichern anhand der nativen Skala des Scorers. Die gespeicherte Bestanden-Entscheidung verwendet diese scorerspezifische Konfiguration.

Kurzinfo

KategorieFormat
EvaluierungstypRegelbasiert
Erwartete Ausgabe erforderlichNein
Standardschwellenwert10/10

Möchten Sie ValidLinksScorer ausprobieren?

Starten Sie die Evaluierung Ihrer KI-Agenten mit der umfassenden Scorer-Bibliothek von Noveum.ai.

Weitere Scorer entdecken

Entdecken Sie 112 veröffentlichte Scorer in 15 Kategorien: 82 Premium-, 30 kostenlose, 76 modellgestützte sowie 36 dedizierte Sprach- und Audio-Scorer