Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.
Amazon-Nova-Rezepte
Sie können ein Amazon Nova-Rezept aus dem Rezepte-Repository
Sie können auch über Amazon SageMaker Studio auf Amazon Nova-Rezepte zugreifen, indem Sie zum Model-Hub navigieren, Amazon Nova-Modelle auswählen und durchsuchen AWS, um die zugehörigen Rezepte zu finden. Sowohl Amazon SageMaker Studio als auch Amazon stellen Beispielnotizbücher für jedes Rezept zur Verfügung, die alle erforderlichen Schritte zum Ändern der Rezepte und zum Ausführen von Anpassungsaufgaben mithilfe von SageMaker Trainingsjobs oder SageMaker HyperPod Umgebungen enthalten.
Um auf die Rezeptseiten in Amazon SageMaker Studio zugreifen zu können, muss die Ausführungsrolle über die folgenden Berechtigungen verfügen.
Verwenden Sie eine der folgenden SageMaker Distributions-Image-Versionen, um die Beispielnotizbücher für SageMaker Trainingsjobs auszuführen: 2.7.1+2.8.0+,,3.2.1+,3.3.0+. Dies gilt sowohl für Amazon SageMaker Studio als auch.
Themen
Abrufen von Amazon-Nova-Rezepten
Um ein Amazon Nova-Basisrezept zu erhalten, klonen Sie das Rezepte-Repository
git clone https://github.com/aws/sagemaker-hyperpod-recipes.git
Die Basisrezepte sind unter recipes_collection/recipes/
cd recipes_collection/recipes/
Die Amazon-Nova-Anpassungsrezepte befinden sich in den folgenden Ordnern.
| Rezepttyp | Ordner |
|---|---|
| SFT (Full-rank und PEFT), PPO, DPO (Full-rank und PEFT) | gut- tuning/nova |
| Bewertung | evaluation/nova |
| CPT | training/nova |
Amazon Nova Forge-Rezepte abrufen
Um auf spezielle Amazon Nova Forge-Rezepte für Jobs zuzugreifen, richten Sie bitte Ihren Zugang zu Amazon Nova Forge ein und folgen Sie dann diesem Workshop
Verfügbare Modelle und Algorithmen
In der folgenden Tabelle werden die Verfügbarkeit von Anpassungen für Amazon Nova-Modelle und die unterstützten Algorithmen unter Verwendung von SageMaker zusammengefasst.
Modellname |
Modell-ID |
Fine-tuning |
Hinweise |
|---|---|---|---|
Amazon Nova Lite 2.0 |
amazon.nova-2-lite-v 1:0:256 k |
Ja |
|
Amazon Nova Lite
In der folgenden Tabelle sind detaillierte Informationen zur Amazon Nova Lite-Rezeptreferenz aufgeführt.
| Modell | Category/Sub-category | Technik | Name des Rezepts | Bild-URI (Ausbildungsjobs) | Bild-URI (SageMaker HyperPod) | Instanz berechnen |
|---|---|---|---|---|---|---|
| Nova Lite | Training/Fine-tuning | Beaufsichtigt Fine-Tuning (LoRa) |
|
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-SFT-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-SFT-latest |
|
| Nova Lite | Training/Fine-tuning | Betreut Fine-Tuning (Vollständig) | nova_lite_1_0_p5_p4d_gpu_sft.yaml |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-SFT-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-SFT-latest |
ml.p5.48xlarge, ml.p5en.48xlarge |
| Nova Lite | Training/Fine-tuning | Direkte Präferenzoptimierung (vollständig) | nova_lite_1_0_p5_p4d_gpu_dpo.yaml |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-DPO-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-DPO-latest |
ml.p5.48xlarge, ml.p5en.48xlarge |
| Nova Lite | Training/Fine-tuning | Direkte Präferenzoptimierung (LoRA) |
|
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-DPO-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-DPO-latest |
|
| Nova Lite | Training/Reinforcement lernen | Verstärkung Fine-Tuning (RFT) | nova_lite_1_0_p5_gpu_ppo.yaml |
n/a | 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SMHP-PPO-TRAIN-latest |
ml.p5.48xlarge, ml.p5en.48xlarge |
| Nova Lite | Training/Continued Pre-Training | Fortsetzung Pre-Training (Basismodell) | nova_lite_gpu_p5x16_pretrain.yaml |
n/a | 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:HP-CPT-latest |
ml.p5.48xlarge |
| Nova Lite | Evaluation/Evaluate | Standard-Text-Benchmarks | nova_lite_p5_48xl_general_text_benchmark_eval.yaml |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest |
ml.p5.48xlarge |
| Nova Lite | Evaluation/Evaluate | Benutzerdefinierte Datensatzbewertung | nova_lite_p5_48xl_bring_your_own_dataset_eval.yaml |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest |
ml.p5.48xlarge |
| Nova Lite | Evaluation/Evaluate | Multi-modal Benchmarks | nova_lite_p5_48_general_multi_modal_benchmark_eval.yaml |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest |
ml.p5.48xlarge |
| Nova Lite | Evaluation/Evaluate | LLM-as-a-Judge | nova_lite_p5_48xl_llm_judge_eval.yaml |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest |
ml.p5.48xlarge |
Amazon Nova Micro
In der folgenden Tabelle sind detaillierte Informationen zur Amazon Nova Micro-Rezeptreferenz aufgeführt.
| Modell | Category/Sub-category | Technik | Name des Rezepts | Bild-URI (Ausbildungsjobs) | Bild-URI (SageMaker HyperPod) | Instanz berechnen |
|---|---|---|---|---|---|---|
| Nova Micro | Training/Fine-tuning | Beaufsichtigt Fine-Tuning (LoRa) |
|
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-SFT-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-SFT-latest |
|
| Nova Micro | Training/Fine-tuning | Betreut Fine-Tuning (Vollständig) |
|
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-SFT-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-SFT-latest |
|
| Nova Micro | Training/Fine-tuning | Direkte Präferenzoptimierung (LoRA) |
|
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-DPO-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-DPO-latest |
|
| Nova Micro | Training/Fine-tuning | Direkte Präferenzoptimierung (vollständig) | nova_micro_1_0_p5_p4d_gpu_dpo.yaml |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-DPO-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-DPO-latest |
ml.p5.48xlarge, ml.p5en.48xlarge, ml.p4d.24xlarge |
| Nova Micro | Training/Reinforcement lernen | Verstärkung Fine-Tuning (RFT) | nova_micro_1_0_p5_gpu_ppo.yaml |
n/a | 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SMHP-PPO-TRAIN-latest |
ml.p5.48xlarge, ml.p5en.48xlarge |
| Nova Micro | Training/Continued Pre-Training | Fortsetzung Pre-Training (Basismodell) | nova_micro_gpu_p5x8_pretrain.yaml |
n/a | 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:HP-CPT-latest |
ml.p5.48xlarge |
| Nova Micro | Evaluation/Evaluate | Allgemeines Text-Benchmark | nova_micro_p5_48xl_general_text_benchmark_eval.yaml |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest |
ml.p5.48xlarge |
| Nova Micro | Evaluation/Evaluate | Benchmark mit eigenem Datensatz (gen_qa) | nova_micro_p5_48xl_bring_your_own_dataset_eval.yaml |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest |
ml.p5.48xlarge |
| Nova Micro | Evaluation/Evaluate | LLM-as-a-Judge | nova_micro_p5_48xl_llm_judge_eval.yaml |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest |
ml.p5.48xlarge |
Amazon Nova Pro
In der folgenden Tabelle sind detaillierte Informationen zur Amazon Nova Pro-Rezeptreferenz aufgeführt.
| Modell | Category/Sub-category | Technik | Name des Rezepts | Bild-URI (Ausbildungsjobs) | Bild-URI (SageMaker HyperPod) | Instanz berechnen |
|---|---|---|---|---|---|---|
| Nova Pro | Training/Fine-tuning | Beaufsichtigt Fine-Tuning (LoRa) | nova_pro_1_0_p5_p4d_gpu_lora_sft.yaml |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-SFT-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-SFT-latest |
ml.p5.48xlarge, ml.p5en.48xlarge, ml.p4d.24xlarge |
| Nova Pro | Training/Fine-tuning | Betreut Fine-Tuning (Vollständig) | nova_pro_1_0_p5_p4d_gpu_sft.yaml |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-SFT-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-SFT-latest |
ml.p5.48xlarge, ml.p5en.48xlarge |
| Nova Pro | Training/Fine-tuning | Direkte Präferenzoptimierung (vollständig) | nova_pro_1_0_p5_gpu_dpo.yaml |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-DPO-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-DPO-latest |
ml.p5.48xlarge, ml.p5en.48xlarge |
| Nova Pro | Training/Fine-tuning | Direkte Präferenzoptimierung (LoRA) | nova_pro_1_0_p5_p4d_gpu_lora_dpo.yaml |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-DPO-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-DPO-latest |
ml.p5.48xlarge, ml.p5en.48xlarge, ml.p4d.24xlarge |
| Nova Pro | Training/Reinforcement lernen | Verstärkung Fine-Tuning (RFT) | nova_pro_1_0_p5_gpu_ppo.yaml |
n/a | 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SMHP-PPO-TRAIN-latest |
ml.p5.48xlarge, ml.p5en.48xlarge |
| Nova Pro | Training/Continued Pre-Training | Fortsetzung Pre-Training (Basismodell) | nova_pro_gpu_p5x24_pretrain.yaml |
n/a | 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:HP-CPT-latest |
ml.p5.48xlarge |
| Nova Pro | Training/Data Augmentation | Modelldestillation nach dem Training | nova_pro_r5_cpu_distill.yaml |
n/a | 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-distillation-repo:SM-TJ-DISTILL-LATEST |
ml.r5.24xlarge |
| Nova Pro | Evaluation/Evaluate | Standard-Text-Benchmarks | nova_pro_p5_48xl_general_text_benchmark_eval.yaml |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest |
ml.p5.48xlarge |
| Nova Pro | Evaluation/Evaluate | Benutzerdefinierte Datensatzbewertung | nova_pro_p5_48xl_bring_your_own_dataset_eval.yaml |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest |
ml.p5.48xlarge |
| Nova Pro | Evaluation/Evaluate | Multi-modal Benchmarks | nova_pro_p5_48xl_general_multi_modal_benchmark_eval.yaml |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest |
ml.p5.48xlarge |
| Nova Pro | Evaluation/Evaluate | LLM-as-a-Judge | nova_pro_p5_48xl_llm_judge_eval.yaml |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest |
708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest |
ml.p5.48xlarge |