Provisioned Throughput für ein benutzerdefiniertes Modell erwerben - Amazon Bedrock

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Provisioned Throughput für ein benutzerdefiniertes Modell erwerben

Wenn Sie ein benutzerdefiniertes Modell mit dedizierter Rechenkapazität und garantiertem Durchsatz verwenden möchten, können Sie dafür Provisioned Throughput erwerben. Anschließend können Sie das resultierende bereitgestellte Modell als Inferenz verwenden. Weitere Informationen zum bereitgestellten Durchsatz finden Sie unter. Bereitgestellter Durchsatz

Console
So erwerben Sie bereitgestellten Durchsatz für ein benutzerdefiniertes Modell

  1. Melden Sie sich bei der AWS-Managementkonsole mit einer IAM-Identität an, die berechtigt ist, die Amazon Bedrock-Konsole zu verwenden. Öffnen Sie dann die Amazon Bedrock-Konsole unter https://console.aws.amazon.com/bedrock.

  2. Wählen Sie im linken Navigationsbereich unter Foundation-Modelle die Option Benutzerdefinierte Modelle aus.

  3. Wählen Sie auf der Registerkarte Modelle das Optionsfeld neben dem Modell aus, für das Sie Provisioned Throughput erwerben möchten, oder wählen Sie den Modellnamen aus, um zur Detailseite zu navigieren.

  4. Wählen Sie Provisioned Throughput kaufen aus.

  5. Folgen Sie den Schritten in der Dokumentation zum bereitgestellten Durchsatz, um weitere Informationen zu erhalten.

  6. Folgen Sie nach dem Kauf von Provisioned Throughput für Ihr benutzerdefiniertes Modell den Schritten in der Dokumentation zur Nutzung des bereitgestellten Durchsatzes.

Wenn Sie einen Vorgang ausführen, der die Verwendung benutzerdefinierter Modelle unterstützt, wird Ihr benutzerdefiniertes Modell als Option im Modellauswahlmenü angezeigt.

API

Um Provisioned Throughput für ein benutzerdefiniertes Modell zu erwerben, folgen Sie den Schritten in der Dokumentation zum bereitgestellten Durchsatz, um eine Anfrage CreateProvisionedModelThroughput(siehe Link für Anfrage- und Antwortformate und Felddetails) mit einem Amazon Bedrock Control Plane-Endpunkt zu senden. Verwenden Sie den Namen oder ARN Ihres benutzerdefinierten Modells alsmodelId. Die Antwort gibt eine zurückprovisionedModelArn, die Sie als Antwort verwenden könnenmodelId, wenn Sie eine InvokeModelInvokeModelWithResponseStreamOder-Anfrage stellen.

Siehe Codebeispiele