Help us improve the AWS re:Post Knowledge Center by sharing your feedback in a brief survey. Your input can influence how we create and update our content to better support your AWS journey.
All Content tagged with 亚马逊 EMR 无服务器
Run big data applications using open-source frameworks without managing clusters and servers
内容语言: 中文 (简体)
筛选内容
选择要筛选的标签
排序方式
排序方式 最新
20 条结果
【以下的问题经过翻译处理】 EMR Serverless 服务是否有利用 Spot 容量的计划?类似的,例如到 ECS 的 Fargate Spot。
1
回答
0
点赞数
82
检视次数
【以下的问题经过翻译处理】 您能否建议使用哪些工具来迁移Spark应用程序到AWS?:
Spark应用程序仅用于更改数据,没有任何UI。我们会定期启动它,可能每周启动几次。每次启动都会触及不同数量的来自Hadoop的数据。从我们团队中的不同人员启动该应用程序。
* 输入为:Hadoop / Kafka / HDFS中的表,
* 输出为:Hadoop / Kafka和一些Clickhouse,但不是...
1
回答
0
点赞数
138
检视次数
【以下的问题经过翻译处理】 *下面的CF堆栈出现错误,错误信息为“Resource handler returned message: Error occurred during operation 'CreateApplication'.”(RequestToken:<some-token-id>,HandlerErrorCode:GeneralServiceException)”
*区域:eu...
1
回答
0
点赞数
141
检视次数
【以下的问题经过翻译处理】 我知道EMR Serverless 有应用程序限制。但是当同一个应用程序上同时运行多个Job 时,它们是否可以共享Worker的 可用容量?或者如果一个作业被分配了工作,它们被分配了整个工作容量吗?
1
回答
0
点赞数
107
检视次数
【以下的问题经过翻译处理】 我在EMR Serverless中运行了一个ETL作业,但是即使EMR应用程序和S3存储桶位于同一地区,我仍然被收取了NAT gateway费用。我还在VPC中配置了网关终端节点以连接S3,但仍然看到NAT gateway费用。使用EC2实例测试了VPC终端节点,可以连接到S3。我想知道为什么EMR Serverless要使用NAT gateway而不是VPC终端节点,...
1
回答
0
点赞数
78
检视次数
【以下的问题经过翻译处理】 Hi,我想在 EMR Serverless上运行一个Job,该Job从 PostgreSQL 中读取和写入数据。我已经下载了 Jar 文件并将其上传到 S3,并在管理控制台的 Spark 属性中设置了 "spark.jars"。然而,作业失败了。
谢谢,Muthu
1
回答
0
点赞数
95
检视次数
【以下的问题经过翻译处理】 你好,
我终于使用EMR无服务器应用程序解决了大部分问题,但根据日志显示,似乎在以下代码行中存在特定问题:
if (DeltaTable.isDeltaTable(spark, targetDeltaTableURI)):
日志中的错误消息如下所示,你可以在日志的顶部看到数据帧已创建,但在检查Delta表是否存在时出现错误。
|135123 |167...
1
回答
0
点赞数
86
检视次数
