Glue crawler creating a table only with 'Crawl all sub-folders' option, but not with 'Crawl new sub-folders only'

0

I have a .csv file in s3://<bucket-name>/SRC1/TBL1/2022/10/04/. Created a crawler on this bucket with the following configuration options

  • Crawl new sub-folders only
  • Create a single schema for each S3 path
  • Table level - 3
  • teaget data base 'sample-db'

When I trigger my crawler, expectation was to create a new table 'TBL1' in 'sample-db'. But it did not create the new table. Then I updated the config option to 'Crawl all sub-folders', then the table was created.

Question: Can we make crawler to create the table with option Crawl new sub-folders only TIA

질문됨 2년 전85회 조회
답변 없음

로그인하지 않았습니다. 로그인해야 답변을 게시할 수 있습니다.

좋은 답변은 질문에 명확하게 답하고 건설적인 피드백을 제공하며 질문자의 전문적인 성장을 장려합니다.

질문 답변하기에 대한 가이드라인

관련 콘텐츠