Anpassen des Modells für eine bessere Leistung im jeweiligen Anwendungsfall

Destillation

Mit der Destillation können Sie Wissen von einem größeren, intelligenteren Modell (Lehrer) auf ein kleineres, schnelleres und kostengünstigeres Modell (Schüler) übertragen. Amazon Bedrock automatisiert den Destillationsprozess mithilfe der neuesten Datensynthesetechniken, um anhand des Lehrermodells vielfältige, qualitativ hochwertige Antworten zu generieren und das Schülermodell zu optimieren.

Wenn Sie die Destillation verwenden möchten, wählen Sie ein Lehrermodell aus, dessen Genauigkeit Sie für Ihren Anwendungsfall erreichen möchten, und ein Schülermodell für die Feinabstimmung. Dann geben Sie anwendungsfallspezifische Prompts als Eingabedaten an. Für die bereitgestellten Prompts generiert Amazon Bedrock Antworten aus dem Lehrermodell und optimiert das Schülermodell dann anhand der Antworten. Sie können optional beschriftete Eingabedaten als Prompt-Antwort-Paare bereitstellen.

Weitere Informationen zur Verwendung der Destillation finden Sie unter Anpassen eines Modells mit Destillation in Amazon Bedrock.

Feinabstimmung der Verstärkung

Die Feinabstimmung von Reinforcement verbessert die Abstimmung des Fundamentmodells auf Ihren spezifischen Anwendungsfall durch Feedback-basiertes Lernen. Anstatt beschriftete Input-Output-Paare bereitzustellen, definieren Sie Belohnungsfunktionen, mit denen die Qualität der Antworten bewertet wird. Das Modell lernt iterativ, indem es Feedbackwerte aus diesen Belohnungsfunktionen erhält.

Sie können vorhandene Bedrock-Aufrufprotokolle als Trainingsdaten verwenden oder benutzerdefinierte Eingabeaufforderungsdatensätze hochladen. Sie können Belohnungsfunktionen definieren, anhand AWS Lambda derer die Qualität der Antworten bewertet wird. Amazon Bedrock automatisiert den Schulungsablauf und bietet Echtzeitmetriken zur Überwachung des Lernfortschritts der Modelle.

Weitere Informationen zur Feinabstimmung von Verstärkungen finden Sie unter. Passen Sie ein Modell mit Verstärkungsfeinabstimmung in Amazon Bedrock an

Überwachte Feinabstimmung

Stellen Sie beschriftete Daten zur Verfügung, um ein Modell für eine bessere Leistung bei bestimmten Aufgaben zu trainieren. Durch die Bereitstellung eines Trainingsdatensatzes mit beschrifteten Beispielen lernt das Modell, welche Arten von Ausgaben für bestimmte Arten von Eingaben generiert werden sollen. Die Modellparameter werden in diesem Prozess angepasst und die Modellleistung für die durch den Trainingsdatensatz dargestellten Aufgaben wird verbessert.

Fortgesetztes Vortraining

Stellen Sie unbeschriftete Daten bereit, um ein Basismodell vorab zu trainieren, indem Sie es mit bestimmten Arten von Eingaben vertraut machen. Sie können Daten zu spezifischen Themen bereitstellen, um ein Modell für diese Bereiche zu trainieren. Im Rahmen des fortgesetzten Vortrainings werden die Modellparameter optimiert, um sie an die Eingabedaten anzupassen und das Fachwissen zu erweitern.

Beispielsweise können Sie ein Modell mit privaten Daten wie Geschäftsdokumenten trainieren, die für das Training großer Sprachmodelle (LLMs) nicht öffentlich verfügbar sind. Darüber hinaus können Sie das Modell weiter verbessern, indem Sie das Modell mit mehr unbeschrifteten Daten erneut trainieren, sobald diese verfügbar sind.