amazon-web-services - 如何在 CloudFormation 模板中获取 Glue 开发端点 URL？

Question

我正在尝试编写一个 CloudFormation 模板来创建:

• Glue 开发端点(类型 AWS::Glue::DevEndpoint)；和
• Zeppelin 笔记本连接到创建的端点的 EC2 实例。

第二个资源需要端点 URL。 AWS::Glue::DevEndpoint 在输出中提供端点名称，但不清楚如何获取 URL。

到目前为止，我找到的唯一解决方案是引入 awsglue get-dev-endpoint 命令并在实例初始化过程的某个时刻解析其输出。

Answer 1

自 2019 年 5 月起，Cloudformation 不支持从 AWS::Glue::DevEndpoint 资源中检索公共(public)地址。

正如您在问题中所建议的，您可以从 CF 获取开发终端节点名称，并将其传递给 EC2 实例的用户数据中的 AWS CLI 命令，这可能是检索该名称的最佳方法。

我认为，如果您确保使用latest version of the AWS CLI，您使用glue CLI遇到的模型错误可能会得到解决。在运行该命令之前。此错误听起来像是 CLI 中的粘合服务存在某种配置问题。

Resources:
   MyDevEndpoint:
      Type: AWS::Glue::DevEndpoint
      Properties: 
         ...

   MyInstance:
      Type: AWS::EC2::Instance
      Properties:
         ...
         UserData:
            Fn::Base64: !Sub |
               aws --version
               yes | pip3 install awscli --upgrade --user
               aws --version
               ENDPOINT_NAME=${MyDevEndpoint}
               aws glue get-dev-endpoint --endpoint-name $ENDPOINT_NAME
               ...