Modellanfragen

Wie sich novita-Inferenz in einen KI-Workflow einfügt

Novita hilft Ihnen, eine Modelleingabe in eine Ausgabe umzuwandeln, die Ihre Anwendung nutzen kann. Der grundlegende Ablauf besteht darin, ein geeignetes Modell auszuwählen, eine korrekt formulierte Anfrage zu senden, die Antwort zu prüfen und Fehler zu behandeln, ohne davon auszugehen, dass sich alle Modelle gleich verhalten.

Novita-Einstiegsbild zur Einführung in Arbeitsabläufe mit KI-Modellen

Wo Modellantworten nützliche Aufgaben erfüllen

Das Anfrage-Antwort-Muster bleibt bei verschiedenen Aufgaben ähnlich, doch die Eingabe, die erwartete Ausgabe und die Prüfungen unterscheiden sich.

Anwendungsentwickler

Übergeben Sie einem Sprachmodell eine Nutzerfrage und relevanten Kontext und zeigen Sie die Antwort anschließend in einer App an.

Eine Antwort kann auf Relevanz geprüft und formatiert werden, bevor sie den Nutzer erreicht.

novita LLM

Entwickler eines Programmierassistenten

Senden Sie eine klar umrissene Programmieraufgabe mit Angaben zur Sprache, zu den Vorgaben und zum Kontext der umgebenden Dateien.

Die vorgeschlagene Änderung kann mit Tests überprüft werden, statt sie allein deshalb zu übernehmen, weil sie plausibel klingt.

novita-Coding-Plan

Kreativer Prototypenentwickler

Nutzen Sie einen visuellen Prompt, um Bildkonzepte zu erkunden, bevor Sie sich für ein Asset für den produktiven Einsatz entscheiden.

Das zurückgegebene Bild kann als Grundlage für die weitere Gestaltung dienen, sofern die Eingaben vom ausgewählten Modell unterstützt werden.

novita-Bildmodelle

Designer von Audioerlebnissen

Bereiten Sie Text- oder Audioeingaben für eine sprachbezogene Aufgabe vor, wenn ein kompatibles Modell verfügbar ist.

Die Ausgabe kann auf Verständlichkeit, Timing und Eignung für die Zielgruppe geprüft werden.

novita-Sprachmodelle

Eine Anfrage Schritt für Schritt ausführen

Betrachten Sie jede Antwort als Ergebnis eines bestimmten Modells, einer bestimmten Eingabe und einer bestimmten Auswahl an Optionen – nicht als universelle Antwort.

Aufgabe auswählen

Entscheiden Sie, ob Sie Text-, Code-, Bild- oder Audioausgabe benötigen. Prüfen Sie, welche Eingaben das ausgewählte Modell akzeptiert und in welcher Form es die Ausgabe liefert, bevor Sie eine Anfrage vorbereiten.

Eingabe vorbereiten

Beschreiben Sie die Aufgabe klar, geben Sie nur hilfreichen Kontext an und legen Sie Einschränkungen wie Format oder Länge fest, sofern das Modell dies unterstützt.

Ergebnis prüfen

Prüfen Sie den zurückgegebenen Inhalt, behandeln Sie Fehler oder unvollständige Ergebnisse und testen Sie wichtige Ausgaben, bevor Sie sie in einem produktiven Ablauf verwenden.

Antwort auf die Zielgruppe abstimmen

Der grundlegende Ablauf eignet sich für verschiedene Teams. Ob ein Ergebnis nützlich ist, hängt jedoch davon ab, was nach der Antwort des Modells damit geschieht.

Anhand des Ausgabeformats planen

Legen Sie für eine Anwendung fest, wie ein erfolgreiches Ergebnis aussieht, bevor Sie ein Modell einbinden. Eine Textantwort, ein generiertes Bild und eine Audiodatei erfordern unterschiedliche Wege zur Validierung und Darstellung.

  • Prüfen Sie Pflichtfelder vor der Darstellung.
  • Halten Sie eine Alternative für Fehler oder unbrauchbare Ausgaben bereit.

Vergleiche reproduzierbar halten

Wenn Sie Novita für ein Experiment evaluieren, dokumentieren Sie Modell, Eingabe, Optionen und Bewertungskriterien. Wenn Sie mehrere Variablen gleichzeitig ändern, lassen sich abweichende Ergebnisse schwerer erklären.

  • Verwenden Sie eine kleine Auswahl repräsentativer Aufgaben.
  • Bewerten Sie neben der Antwortzeit auch die Qualität.

Vor der Veröffentlichung prüfen

Generierte Inhalte können als erster Entwurf oder als Konzept dienen, gelten aber nicht automatisch als freigegeben. Prüfen Sie Richtigkeit, Tonalität, Rechte und ob die Ausgabe die Vorgaben erfüllt.

  • Vergleichen Sie das Ergebnis mit den ursprünglichen Vorgaben.
  • Lassen Sie öffentlich zugängliche Inhalte von einer Person freigeben.

Übergabe von der Anfrage zum Ergebnis ansehen

Vorbereitete Anfrage

Illustration einer Modellanfrage und ihres Kontexts
Illustration eines zurückgegebenen Modellergebnisses
Antwort auf die Bewertung

Diese Darstellungen veranschaulichen den Ablauf; sie sind weder ein gemessener Vorher-nachher-Vergleich noch eine Garantie für die Qualität der Ergebnisse.

Grenzen und Sonderfälle, die Sie einplanen sollten

Die Inferenz liefert ein Modellergebnis. Sie ersetzt weder die Validierung und das Testen noch Entscheidungen darüber, wie das Ergebnis verwendet werden soll.

Kein universelles Eingabeformat

Eine Anfrage, die für ein Modell geeignet ist, kann bei einem anderen fehlschlagen oder zu anderen Ergebnissen führen.

LösungsansatzPrüfen Sie die Eingabeanforderungen des gewählten Modells und testen Sie zuerst eine minimale Anfrage.

Keine Garantie für sachliche Richtigkeit

Flüssige Texte und überzeugend wirkende Medien können dennoch Fehler enthalten oder die Aufgabenstellung verfehlen.

LösungsansatzÜberprüfen Sie Aussagen mit weitreichenden Folgen und begutachten Sie generierte Inhalte vor der Veröffentlichung.

Keine automatische Fehlerbehebung

Anfragen können fehlschlagen, eine Zeitüberschreitung verursachen oder Ergebnisse liefern, die Ihre Anwendung nicht verwenden kann.

LösungsansatzBehandeln Sie Fehler ausdrücklich und legen Sie fest, was Nutzer sehen, wenn kein Ergebnis verfügbar ist.

Kein einheitliches Leistungsprofil

Antwortzeit und Eigenschaften der Ergebnisse hängen vom gewählten Modell, der Eingabe und den Betriebsbedingungen ab.

LösungsansatzTesten Sie mit repräsentativen Eingaben, statt sich auf ein veranschaulichendes Beispiel zu verlassen.

Vergleichen Sie zwei Möglichkeiten, ein Modellergebnis zu nutzen

Ein kurzer Test und eine Funktion für Nutzer können mit derselben Aufgabe beginnen, benötigen aber unterschiedliche Schutzmaßnahmen.

Einmalige Erkundung Anwendungs-Workflow
1

Ziel

Einmalige Erkundung

Prüfen, ob ein Modell die Aufgabe bewältigen kann

Anwendungs-Workflow

Ein Ergebnis erzeugen, das die Anwendung zuverlässig verarbeiten kann

2

Eingabe

Einmalige Erkundung

Ein repräsentatives Beispiel

Anwendungs-Workflow

Validierte Nutzereingaben mit klaren Vorgaben

3

Ausgabeprüfung

Einmalige Erkundung

Manuelle Prüfung

Anwendungs-Workflow

Formatprüfungen und, wenn die Tragweite es erfordert, eine zusätzliche Überprüfung

4

Fehler

Einmalige Erkundung

Werden untersucht, sobald sie auftreten

Anwendungsworkflow

Mit einem definierten Fallback behandelt

5

Qualitätstest

Einmalige Erkundung

Einige beispielhafte Ergebnisse

Anwendungsworkflow

Ein wiederholbarer Satz realistischer Fälle

6

Änderungsmanagement

Einmalige Erkundung

Einstellungen können frei angepasst werden

Anwendungsworkflow

Modell- und Eingabeänderungen werden vor der Veröffentlichung getestet

Stellen Sie den Workflow auf die Probe

Beginnen Sie mit einer repräsentativen Anfrage

Wählen Sie eine Aufgabe, bereiten Sie eine Eingabe vor und prüfen Sie, was das ausgewählte Modell zurückgibt. Entscheiden Sie anhand dieses Ergebnisses, welche Prüfungen und welches Fallback-Verhalten Ihr Workflow als Nächstes benötigt.

  • Wählen Sie einen Ausgabetyp
  • Testen Sie eine realistische Eingabe
  • Prüfen Sie das Ergebnis

Fragen zur Modellinferenz von Novita

Damit ist gemeint, dass eine Eingabe an ein Modell gesendet und dessen Ausgabe über einen mit Novita verbundenen Workflow empfangen wird. Was Sie senden und empfangen, hängt vom Modell und der Aufgabe ab. Prüfen Sie daher die Anforderungen des ausgewählten Modells.

Nein. Bei der Inferenz wird ein Modell verwendet, um aus einer Eingabe ein Ergebnis zu erzeugen. Beim Training wird ein Modell mithilfe von Daten und einem Optimierungsprozess verändert. Diese Seite behandelt die Anfrage- und Antwortseite.

Geben Sie die Aufgabe, den relevanten Kontext und alle Ausgabevorgaben an, die das ausgewählte Modell unterstützt. Vermeiden Sie unnötige Informationen und prüfen Sie, ob die Eingabe dem vom Modell erwarteten Format entspricht.

Eine Antwort sollte im Hinblick auf ihren vorgesehenen Verwendungszweck geprüft werden. Überprüfen Sie wichtige Fakten, sichten Sie generierte Medien und berücksichtigen Sie Ergebnisse, die unvollständig, fehlerhaft formatiert oder ungeeignet sind.

Jetzt entwickeln
Jetzt entwickeln