Best services for client data upload, data cleaning, ingestion into RDS

I'm having trouble figuring out the best AWS service/services for a scenario where a client uploads a .csv file, then these data are cleaned and ingested into RDS using and R script. FTP and code pipeline? Any suggestions?

Argomenti

Migrazione e modernizzazione Database Archiviazione

Tag

Migrazione e modernizzazione Database Archiviazione

Lingua

English

rePost-User-3666101

posta 2 anni fa215 visualizzazioni

1 Risposta

Più recenti
Maggior numero di voti
Maggior numero di commenti

Is this CSV a custom one or some database backup etc. ? Assuming that its former, then is R a mandate requirement to use? One quick option would be to use AWS Glue which can be used to do your ETL. The source of CSV can be S3. Glue automatically generates Scala or Python code for your ETL jobs that you can further customize using tools you are already familiar with.

ESPERTO

AWS-User-Nitin

con risposta 2 anni fa

ESPERTO

Chris_G

verificato 2 anni fa

rePost-User-3666101
2 anni fa
That's very helpful. Thank you. It is a custom CSV. I will look into Glue right now!

Contenuto pertinente

Come faccio a utilizzare Oracle Instant Client per eseguire l'importazione o l'esportazione di Data Pump per la mia istanza database di Amazon RDS per Oracle?
AWS UFFICIALEAggiornata 2 anni fa
Come posso risolvere l'errore "javaSQLSQLException: No more data to read from socket (Nessun dato di lettura rimanente dal socket)" quando provo a connettermi alla mia istanza Amazon RDS for Oracle?
AWS UFFICIALEAggiornata 2 anni fa
Quali sono le best practice per la migrazione di un database Oracle a un database RDS per PostgreSQL di destinazione utilizzando AWS DMS?
AWS UFFICIALEAggiornata 2 anni fa
Come posso risolvere gli errori "could not send data to client" o "could not receive data from client" quando mi collego alla mia istanza database Amazon RDS per PostgreSQL o Aurora compatibile con PostgreSQL?
AWS UFFICIALEAggiornata 10 mesi fa