1 Respuesta
- Más nuevo
- Más votos
- Más comentarios
1
Custom classifiers cannot be used to create partitioned table if the data itself is not partitioned.
Crawler creates a partitioned table based on directory structure and schema similarity at each level. Suppose there are 2 sub-directories in a target path and data in these directories are at least 70% similar, then it creates a partitioned table, otherwise it creates two table one for each sub-directory.
respondido hace un año
Contenido relevante
- OFICIAL DE AWSActualizada hace 2 años
- OFICIAL DE AWSActualizada hace 2 años
- OFICIAL DE AWSActualizada hace 9 meses
Thanks Sachin , do you have any workflow recommendation besides repartition of data directories ?