AWS re:Postを使用することにより、以下に同意したことになります AWS re:Post 利用規約
AWS re:Postre:Post

Available SQL Functions in Glue

0

Using the step: "Derived Column" where I can use SQL functions to derive new columns I found SUBSTRING works but CHARINDEX it doesn't. And as usual with AWS documentation, there's no place or indication which functions are available in this particular kind of glue node.

トピック
分析データベース
タグ
分析AWS Glueデータの抽出、変換、ロード
言語
English
blanchma
質問済み 1年前343ビュー
1回答
2
承認された回答

Are you using DynamicFrames?

You can convert it to DataFrame and then use SparkSQL functions.

https://spark.apache.org/docs/latest/api/sql/index.html

profile pictureAWS
acmanjon
回答済み 1年前
profile picture
エキスパート
Sedat Salman
レビュー済み 1年前
  • blanchma
    1年前

    The goal is to use "Derived Column" and not dabble with the script itself.

  • blanchma
    1年前

    Actually that list is correct. Thanks, @acmanjon

  • Gonzalo Herreros エキスパート
    1年前

    Yes, that node allows using SparkSQL functions based on the Glue version you are using (3.3.0 for Glue 4 and 3.1.1 for Glue 3)

ログインしていません。 ログイン 回答を投稿する。

優れた回答とは、質問に明確に答え、建設的なフィードバックを提供し、質問者の専門分野におけるスキルの向上を促すものです。

質問に答えるためのガイドライン

関連するコンテンツ