Transferring data from AWS Kinesis data streams to AWS Redshift using AWS Glue

I transferred data from RDS to Kinesis using DMS but I am not able to transfer data from Kinesis Data Stream to Redshift using Glue ETL Process. So can anyone help me with it?

Argomenti

Analisi

Tag

AWS Glue Flussi di dati Amazon Kinesis Amazon Redshift

Lingua

English

Pratik AWS

posta 2 anni fa1305 visualizzazioni

1 Risposta

Più recenti
Maggior numero di voti
Maggior numero di commenti

Queste risposte sono utili? Dai un voto positivo alla risposta corretta per aiutare la community a trarre vantaggio dalle tue conoscenze.

With Redshift Streaming Ingestion, you can now directly consume data from Kinesis Data Streams from within your Redshift Cluster without needing to ETL through Glue Streaming. Is Glue mandatory or can you use this feature?

The feature is in Public Preview however and is expected to GA soon this year.

https://docs.aws.amazon.com/redshift/latest/dg/materialized-view-streaming-ingestion.html

ESPERTO

Jag

con risposta 2 anni fa

Pratik AWS
2 anni fa
It is mandatory to use Glue

Contenuto pertinente

Perché si verifica un errore di consegna dei dati in Kinesis Data Firehose con un dominio Servizio OpenSearch come destinazione?
AWS UFFICIALEAggiornata 6 mesi fa
Come posso risolvere l'errore "javaSQLSQLException: No more data to read from socket (Nessun dato di lettura rimanente dal socket)" quando provo a connettermi alla mia istanza Amazon RDS for Oracle?
AWS UFFICIALEAggiornata 2 anni fa
Come posso trasferire i file di log Amazon CloudWatch a Kinesis Data Firehose?
AWS UFFICIALEAggiornata un anno fa
Come posso risolvere gli errori "could not send data to client" o "could not receive data from client" quando mi collego alla mia istanza database Amazon RDS per PostgreSQL o Aurora compatibile con PostgreSQL?
AWS UFFICIALEAggiornata 10 mesi fa