Can AWS Batch jobs use SageMaker FastFile mode?
0
Can a regular (non-machine learning) Python job submitted via AWS Batch make use of SageMaker FastFile mode to stream data from S3 to the container? Or is there any equivalent of SageMaker FastFile mode in other Python libraries? The key point is about whether it's possible to avoid the need to copy data from S3 to the EBS or instance store volume before processing.
Lingua
English
posta 2 anni fa481 visualizzazioni
1 Risposta
- Più recenti
- Maggior numero di voti
- Maggior numero di commenti
1
Don't think FastFile mode is available outside of SageMaker Training. Depending on your use-case/trade-offs, some of the options are
- Use SageMaker Training as your processing host
- Could try FSx/EFS
con risposta 2 anni fa
Contenuto pertinente
AWS UFFICIALEAggiornata 2 anni fa- AWS UFFICIALEAggiornata 3 anni fa
- AWS UFFICIALEAggiornata un anno fa
- AWS UFFICIALEAggiornata 2 anni fa