如何让Glue发现EventBridge的有效载荷以在通过CDK 进行Glue 表部署时使用?

0

【以下的问题经过翻译处理】 初次接触Glue和Athena。我跟着AWS社区创建者的一个很好的示例来学习。但是,在我的实际用例中,我想从EventBridge事件的“ detail”部分捕获所有字段,并创建列。这是多层嵌套的。我无法弄清schema 发现过程。我尝试将一个文本文件发布到S3并让Glue Crawler程序工作,但没有成功。

profile picture
EXPERTE
gefragt vor 5 Monaten56 Aufrufe
1 Antwort
0

【以下的回答经过翻译处理】 Glue Crawler是用于数据的,对元数据这样的东西可能不会很好地起作用。您可以运行一个AWS Lambda,使用pandas读取json事件(这将推断模式)。

但是,我的建议是不要使用CDK部署表(至少不要部署会变化的表),而是让代码/爬虫来维护它。根据您的描述,您正在尝试的这个东西(通过CDK部署表的变更)可能会有问题。

profile picture
EXPERTE
beantwortet vor 5 Monaten

Du bist nicht angemeldet. Anmelden um eine Antwort zu veröffentlichen.

Eine gute Antwort beantwortet die Frage klar, gibt konstruktives Feedback und fördert die berufliche Weiterentwicklung des Fragenstellers.

Richtlinien für die Beantwortung von Fragen