AWS RDS 作为 AWS EMR 的外部 Hive 元存储答案

【问题标题】：AWS RDS as External Hive Metastore for AWS EMRAWS RDS 作为 AWS EMR 的外部 Hive 元存储
【发布时间】：2018-01-17 13:07:44
【问题描述】：

我创建了一个 MySQL 类型的 AWS RDS 实例，并希望将此实例用作 EMR 的外部配置单元元存储。我正在创建一个 EMR 并在“编辑软件设置”中为外部配置单元元存储设置属性，但出现了一些错误比如“终止引导失败”。请帮助我并提前致谢。

【问题讨论】：

也尝试阅读这个aws论坛forums.aws.amazon.com/thread.jspa?threadID=236894

标签： amazon-web-services amazon-ec2 amazon-rds amazon-emr

【解决方案1】：

尝试在编辑软件设置选项卡中添加此配置：

[{"classification":"hive-site","properties":{"javax.jdo.option.ConnectionUserName":<YOUR_MYSQL_USER>,"javax.jdo.option.ConnectionDriverName":"com.mysql.jdbc.Driver","javax.jdo.option.ConnectionPassword":<YOUR_MYSQL_PASSWORD>,"javax.jdo.option.ConnectionURL":<YOUR_CONNECTION_URL>}}]

谢谢

【讨论】：

试试看forums.aws.amazon.com/thread.jspa?threadID=236894

【解决方案2】：

我正在创建一个具有默认配置单元元存储的 EMR 集群，之后我将使用一些将 aws rds 实例指向配置单元元存储的属性覆盖 hive-site.xml，一切都很好，但是在重新启动配置单元服务器后，我无法将 RDS 用作配置单元元存储。它仍在使用 EMR 创建的默认配置单元元存储。

【讨论】：