Incremental archive from DynamoDB, Glue Bookmarking?

0

My customer is currently archiving DynamoDB data to their data lake with a Glue job and the DynamoDB connector. They've asked if instead of a full load each day they can do an incremental.

I see Glue supports bookmarking which looks like what I need but it only supports S3 (and some JDBC) sources for this.

Is there a way to achieve this?

質問済み 5年前822ビュー
1回答
0
承認された回答

Hi,

Have they considered using DynamoDB Streams + Lambda + Kinesis Data Firehose to continuously feed the data lake in S3?

This blog post describes something similar for expired items with a TTL.

profile pictureAWS
エキスパート
Tasio
回答済み 5年前

ログインしていません。 ログイン 回答を投稿する。

優れた回答とは、質問に明確に答え、建設的なフィードバックを提供し、質問者の専門分野におけるスキルの向上を促すものです。

質問に答えるためのガイドライン

関連するコンテンツ