Amazon Athena 查询时将 csv 中的所有列输出为 VARCHAR

Question

【以下的问题经过翻译处理】 客户想要通过 Athena 关联两张 AWS Glue 生成的表。抓取 Athena 查询的结果生成 CSV ，并在Glue Catalog中创建一张新表。
每当 Athena 生成 CSV 输出时，其所有 VARCHAR 列的值都带有双引号，即使是那些不应该是 VARCHAR 的列。所有列都有双引号；如何删除双引号以便 Glue 爬虫可以检测到正确的数据类型？

有没有办法来解决这个问题？

Answer

【以下的回答经过翻译处理】 让 Glue Crawler 使用 OpenCSVSerDe，这样您可以使用 [custom CSV classifier](https://docs.aws.amazon.com/glue/latest/dg/custom-classifier.html#custom-classifier-csv)，指定双引号(") 在引号中并选择在识别列名之前修剪空格。

Amazon Athena 查询时将 csv 中的所有列输出为 VARCHAR

Relevant content