2 Respuestas
- Más nuevo
- Más votos
- Más comentarios
1
This is done by Hadoop if the folder does not exist. This _$folder$ is just a placeholder. This is created by mkdir commands. The actual folder is only created when first file is placed. The other jobs where this is not happening might be writing to existing folders. These files should not cause a problem.
respondido hace un año
0
This happens because of the S3 path you use during writing.
s3:// vs s3a://
s3:// will make the folder s3a:// will not
They both have their ups and downs and is generally recommended to stick with s3://.
respondido hace un año
Contenido relevante
- OFICIAL DE AWSActualizada hace 2 años
- OFICIAL DE AWSActualizada hace un año
- OFICIAL DE AWSActualizada hace 3 años