Provisioned Throughput für ein benutzerdefiniertes Modell erwerben - Amazon Bedrock

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Provisioned Throughput für ein benutzerdefiniertes Modell erwerben

Wenn Sie ein benutzerdefiniertes Modell mit dedizierter Rechenkapazität und garantiertem Durchsatz verwenden möchten, können Sie dafür Provisioned Throughput erwerben. Anschließend können Sie das resultierende bereitgestellte Modell als Inferenz verwenden. Weitere Informationen zum bereitgestellten Durchsatz finden Sie unter. Erhöhen Sie die Kapazität für den Modellaufruf mit Provisioned Throughput in Amazon Bedrock

Console
So erwerben Sie bereitgestellten Durchsatz für ein benutzerdefiniertes Modell

  1. Melden Sie sich bei der AWS Management Console mit einer IAM-Identität an, die berechtigt ist, die Amazon Bedrock-Konsole zu verwenden. Öffnen Sie dann die Amazon Bedrock-Konsole unter https://console.aws.amazon.com/bedrock/.

  2. Wählen Sie im linken Navigationsbereich unter Foundation-Modelle die Option Benutzerdefinierte Modelle aus.

  3. Wählen Sie auf der Registerkarte Modelle das Optionsfeld neben dem Modell aus, für das Sie Provisioned Throughput erwerben möchten, oder wählen Sie den Modellnamen aus, um zur Detailseite zu navigieren.

  4. Wählen Sie Provisioned Throughput kaufen aus.

  5. Folgen Sie den Schritten unter, um weitere Informationen zu Erwerben Sie einen bereitgestellten Durchsatz für ein Amazon Bedrock-Modell erhalten.

  6. Folgen Sie nach dem Kauf von Provisioned Throughput für Ihr benutzerdefiniertes Modell den Schritten unterVerwenden Sie einen bereitgestellten Durchsatz mit einer Amazon Bedrock-Ressource.

Wenn Sie einen Vorgang ausführen, der die Verwendung benutzerdefinierter Modelle unterstützt, wird Ihr benutzerdefiniertes Modell als Option im Modellauswahlmenü angezeigt.

API

Um Provisioned Throughput für ein benutzerdefiniertes Modell Erwerben Sie einen bereitgestellten Durchsatz für ein Amazon Bedrock-Modell zu erwerben, folgen Sie den Schritten unter So senden Sie eine Anfrage CreateProvisionedModelThroughput(siehe Link für Anfrage- und Antwortformate und Felddetails) mit einem Amazon Bedrock Control Plane-Endpunkt. Verwenden Sie den Namen oder ARN Ihres benutzerdefinierten Modells alsmodelId. Die Antwort gibt eine zurückprovisionedModelArn, die Sie als Antwort verwenden könnenmodelId, wenn Sie eine InvokeModelInvokeModelWithResponseStreamOder-Anfrage stellen.

Siehe Codebeispiele