从Spark程序中访问Glue数据目录

【以下的问题经过翻译处理】客户按照 http://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-spark-glue.html 中的指示创建了 EMR 集群，并在 Glue 中创建了数据目录。然而，客户尝试使用下面的代码访问表时遇到了错误：“ops.eventnote” table doesn’t exist。确认过表在目录中已经存在。是否有其他不同的方式指定 Glue 上下文？

主题

分析

标签

AWS Glue

语言

中文 (简体)

专家

rePost Polyglot

已提问 5 个月前1 查看次数

1 回答

最新
投票最多
评论最多

这些答案有用吗？为正确答案投票，以帮助社区从您的知识中受益。

【以下的回答经过翻译处理】请确保启用了Hive支持，并且可以直接使用SparkSession.sql来执行SQL查询。

以下是Python示例。在Java或Scala中工作方式相同。

from pyspark.sql import SparkSession

spark = SparkSession.builder.appName("Test").enableHiveSupport().getOrCreate()
spark.sql("show tables").show()

专家

rePost Polyglot

已回答 5 个月前

从Spark程序中访问Glue数据目录

相关内容