Ricette Amazon Nova - Amazon SageMaker AI

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Ricette Amazon Nova

Puoi ottenere una ricetta Amazon Nova dall'archivio delle SageMaker HyperPod ricette. Una ricetta Nova è un file di configurazione YAML che fornisce dettagli all' SageMaker IA su come eseguire il processo di personalizzazione del modello. Fornisce il nome del modello di base, imposta gli iperparametri di addestramento, definisce le impostazioni di ottimizzazione e include tutte le opzioni aggiuntive necessarie per perfezionare o addestrare correttamente il modello.

Puoi anche accedere alle ricette Nova tramite Amazon SageMaker Studio e Amazon SageMaker Unified Studio accedendo al JumpStart Model Hub AWS, selezionando e sfogliando i modelli Amazon Nova per trovare le ricette associate. Sia Amazon SageMaker Studio che Amazon SageMaker Unified Studio forniscono taccuini di esempio per ogni ricetta, che includono tutti i passaggi necessari per modificare le ricette ed eseguire lavori di personalizzazione utilizzando lavori di SageMaker formazione sull'intelligenza artificiale o ambienti Amazon. SageMaker HyperPod

Per accedere alle pagine delle ricette in Amazon SageMaker Studio, il ruolo di esecuzione deve disporre delle seguenti autorizzazioni.

{ "Version": "2012-10-17", "Statement": [ { "Effect": "Allow", "Action": [ "s3:GetObject" ], "Resource": [ "arn:aws:s3:::*model-customization-recipes*" ] } ] }

Per eseguire i taccuini di esempio durante i lavori di SageMaker formazione SageMaker HyperPod, utilizza una delle seguenti versioni delle immagini di SageMaker distribuzione:2.7.1+,,,. 2.8.0+ 3.2.1+ 3.3.0+ Questo vale sia per Amazon SageMaker Studio che per Amazon SageMaker Unified Studio.

Ottenere ricette Amazon Nova

Per ottenere una ricetta base di Amazon Nova, clona l'archivio delle SageMaker HyperPod ricette eseguendo il comando seguente.

git clone https://github.com/aws/sagemaker-hyperpod-recipes.git

Le ricette base sono disponibili all'indirizzo. recipes_collection/recipes/

cd recipes_collection/recipes/

Le ricette di personalizzazione di Amazon Nova si trovano nelle seguenti cartelle.

Recipe type Cartella
SFT (Full-rank e PEFT), PPO, DPO (Full-rank e PEFT) fine-tuning/nova
Valutazione valutazione/nova
CPT formazione/nova

Modelli e algoritmi disponibili

La tabella seguente riassume la disponibilità della personalizzazione per i modelli Amazon Nova e gli algoritmi supportati utilizzando l'intelligenza artificiale. SageMaker

Nome modello

ID del modello

Ottimizzazione

Note

Amazon NovaMicro

amazzone. nova-micro-v1:01:28 K

Sia per SFT che per DPO, questo modello accetta testo come input e produce testo solo come output.

Amazon Nova Lite

amazzone. nova-lite-v1:0:300 k

  • SFT: accetta testo, and/or immagine o testo and/or video come input e produce testo come output. Un singolo lavoro non può combinare testo, immagini e video nella stessa esecuzione.

  • DPO: accetta testo e immagini come input e produce testo come output.

Amazon Nova Pro

amazzone. nova-pro-v1:0:300 k

  • SFT: accetta testo, and/or immagine o testo and/or video come input e produce testo come output. Un singolo lavoro non può combinare testo, immagini e video nella stessa esecuzione.

  • DPO: accetta testo e immagini come input e produce testo come output.

Riferimento alle ricette di Amazon Nova

La tabella seguente elenca informazioni dettagliate sulle ricette di riferimento di Amazon Nova.

Modello Categoria/sottocategoria Tecnica Nome della ricetta URI dell'immagine (lavori di SageMaker formazione) URI dell'immagine (SageMaker HyperPod) Istanza di calcolo
Nova Lite Formazione/messa a punto

Ottimizzazione fine supervisionata (LoRa)

nova_lite_p5_gpu_lora_sft.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-SFT-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-SFT-latest ml.p5.48xlarge
Nova Lite Formazione/messa a punto

Ottimizzazione fine supervisionata (completa)

nova_lite_p5_gpu_sft.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-SFT-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-SFT-latest ml.p5.48xlarge
Nova Lite Formazione/messa a punto

Ottimizzazione diretta delle preferenze (completa)

nova_lite_p5_gpu_dpo.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-DPO-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-DPO-latest ml.p5.48xlarge
Nova Lite Formazione/messa a punto

Ottimizzazione diretta delle preferenze (LoRa)

nova_lite_p5_gpu_lora_dpo.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-DPO-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-DPO-latest ml.p5.48xlarge
Nova Lite Formazione/Apprendimento per rinforzo

Apprendimento per rinforzo basato sui premi (PPO)

nova_lite_p5_gpu_ppo.yaml N/A 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SMHP-PPO-TRAIN-latest ml.p5.48xlarge
Nova Lite Formazione/Preformazione continua Pre-allenamento continuo (modello base) nova_lite_gpu_p5x16_pretrain.yaml N/A 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:HP-CPT-latest ml.p5.48xlarge
Nova Lite Valutazione/valutazione Benchmark testuali standard nova_lite_p5_48xl_general_text_benchmark_eval.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest ml.p5.48xlarge
Nova Lite Valutazione/valutazione

Valutazione personalizzata del set di dati

nova_lite_p5_48xl_bring_your_own_dataset_eval.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest ml.p5.48xlarge
Nova Lite Valutazione/valutazione

Benchmark multimodali

nova_lite_p5_48_general_multi_modal_benchmark_eval.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest ml.p5.48xlarge
Nova Lite Valutazione/valutazione

LLM come giudice

nova_lite_p5_48xl_llm_judge_eval.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest ml.p5.48xlarge
Nova Micro Formazione/messa a punto

Ottimizzazione fine supervisionata (LoRa)

nova_micro_p5_gpu_lora_sft.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-SFT-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-SFT-latest ml.p5.48xlarge
Nova Micro Formazione/messa a punto

Ottimizzazione fine supervisionata (completa)

nova_micro_p5_gpu_sft.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-SFT-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-SFT-latest ml.p5.48xlarge
Nova Micro Formazione/messa a punto

Ottimizzazione diretta delle preferenze (completa)

nova_micro_p5_gpu_dpo.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-DPO-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-DPO-latest ml.p5.48xlarge
Nova Micro Formazione/messa a punto

Ottimizzazione diretta delle preferenze (LoRa)

nova_micro_p5_gpu_lora_dpo.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-DPO-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-DPO-latest ml.p5.48xlarge
Nova Micro Formazione/Apprendimento rinforzato

Apprendimento per rinforzo basato sui premi (PPO)

nova_micro_p5_gpu_ppo.yaml N/A 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SMHP-PPO-TRAIN-latest ml.p5.48xlarge
Nova Micro Formazione/Preformazione continua Formazione preliminare continua (modello base) nova_micro_gpu_p5x8_pretrain.yaml N/A 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:HP-CPT-latest ml.p5.48xlarge
Nova Micro Valutazione/valutazione Benchmark testuale generale nova_micro_p5_48xl_general_text_benchmark_eval.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest ml.p5.48xlarge
Nova Micro Valutazione/valutazione

Porta il tuo benchmark personale per il set di dati (gen_qa)

nova_micro_p5_48xl_bring_your_own_dataset_eval.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest ml.p5.48xlarge
Nova Micro Valutazione/valutazione

LLM come giudice

nova_micro_p5_48xl_llm_judge_eval.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest ml.p5.48xlarge
Nova Pro Formazione/messa a punto

Ottimizzazione fine supervisionata (LoRa)

nova_pro_p5_gpu_lora_sft.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-SFT-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-SFT-latest ml.p5.48xlarge
Nova Pro Formazione/messa a punto

Ottimizzazione fine supervisionata (completa)

nova_pro_p5_gpu_sft.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-SFT-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-SFT-latest ml.p5.48xlarge
Nova Pro Formazione/messa a punto

Ottimizzazione diretta delle preferenze (completa)

nova_pro_p5_gpu_dpo.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-DPO-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-DPO-latest ml.p5.48xlarge
Nova Pro Formazione/messa a punto

Ottimizzazione diretta delle preferenze (LoRa)

nova_pro_p5_gpu_lora_dpo.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-TJ-DPO-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SM-HP-DPO-latest ml.p5.48xlarge
Nova Pro Formazione/Apprendimento per rinforzo

Apprendimento per rinforzo basato sui premi (PPO)

nova_pro_p5_gpu_ppo.yaml N/A 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:SMHP-PPO-TRAIN-latest ml.p5.48xlarge
Nova Pro Formazione/Preformazione continua Formazione preliminare continua (modello base) nova_pro_gpu_p5x24_pretrain.yaml N/A 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-fine-tune-repo:HP-CPT-latest ml.p5.48xlarge
Nova Pro Formazione/aumento dei dati Modello di distillazione per il post-allenamento nova_pro_r5_cpu_distill.yaml N/A 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-distillation-repo:SM-TJ-DISTILL-LATEST ml.r5.24xlarge
Nova Pro Valutazione/valutazione Benchmark testuali standard nova_pro_p5_48xl_general_text_benchmark_eval.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest ml.p5.48xlarge
Nova Pro Valutazione/valutazione Valutazione personalizzata del set di dati nova_pro_p5_48xl_bring_your_own_dataset_eval.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest ml.p5.48xlarge
Nova Pro Valutazione/valutazione Benchmark multimodali nova_pro_p5_48xl_general_multi_modal_benchmark_eval.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest ml.p5.48xlarge
Nova Pro Valutazione/valutazione LLM come giudice nova_pro_p5_48xl_llm_judge_eval.yaml 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-TJ-Eval-latest 708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-evaluation-repo:SM-HP-Eval-latest ml.p5.48xlarge
Nova Premier Addestramento Modello di distillazione per il post-allenamento

nova_premier_r5_cpu_distill.yaml

708977205387.dkr.ecr.us-east-1.amazonaws.com/nova-distillation-repo:SM-TJ-DISTILL-LATEST

N/A

ml.r5.24xlarge