All Content tagged with AWS Glue

AWS Glue is a serverless data integration service that makes it easy to discover, prepare, and combine data for analytics, machine learning, and application development.

コンテンツの言語: 日本語

フィルターするタグを選択する
並べ替え 最新
85件の結果
AWS GlueからAzure上のSQL Serverのデータ取得を試みています。 テーブル名がASCIIの場合は問題なく取得できますが、日本語の場合はエラーになります。 Azure上なので文字コードはSJISのはずですが、日本語(SJIS)はサポート外でしょうか? AWS GlueはJDBCを呼びだしていますが、JDBCとしてはcharacterEncoding=MS932と設定できますが、AW...
1
回答
0
投票
91
ビュー
質問済み 3ヶ月前
GlueジョブのCI/CDとしてGit上のスクリプトを元にCloudFormationテンプレートを作成してジョブデプロイをする方法を考えてます。 メンテナンス性を考慮してGlueジョブはVisualETLで編集可能な形にしたいです。 CloudFormationテンプレートを使ったGlueジョブデプロイ時にVisualETLで編集可能な形で作成するためには、CloudFormationテンプレー...
1
回答
0
投票
69
ビュー
質問済み 3ヶ月前
取り込んだデータをparquet化し、S3に格納するJOBがあるとします。 ファイル名ランダムで、複数ファイルが同じS3に格納される方式の想定です。 一部並列で実行しているworkerが先にS3へparquetファイルを格納した場合は、 その後他のworkerでエラー出力され、jobが止まってもs3にparquetファイルはそのまま残りますでしょうか
1
回答
0
投票
44
ビュー
質問済み 3ヶ月前
AWS Glue Visual ETLを使用して、OracleSQLから、parquet形式でS3にテーブルデータを差分出力したいです。 VisualETLで、データソースをOracleSQL、データターゲットをS3に設定し、parquet形式で出力を行いました。 再度ETLを実行すると、同じテーブルデータに対し、ファイル名の異なるparquetファイルが出力されてしまいます。 (parquet...
1
回答
0
投票
154
ビュー
質問済み 5ヶ月前