0


大数据Flink(一百一十一):开通阿里云Flink全托管

开通阿里云Flink全托管

一、前提条件

  • 已拥有阿里云账号。您还没有阿里云账号,请先完成注册。
  • 已完成阿里云账号角色授权或RAM用户授权。
  • 已开通OSS和VPC: - Flink全托管产品采用存储计算分离架构,需要使用对象存储OSS存储上传的JAR包、Flink作业的日志、Flink作业中生成的Savepoint或Checkpoint等信息。如果还没有开通OSS,请先完成开通。- 还需要开通VPC,即创建专有网络和交换机。
  • 开通Flink全托管服务前,请确保阿里云账户余额不少于100.00元人民币或等值的代金券或优惠券。

二、​​​​​​​​​​​​​​注意事项

  • 当需要一次开通的资源数大于1000 CU时,请通过工单进行开通。
  • 选择OSS Bucket时,不要对选择的OSS做任何策略设置,例如版本控制、合规保留等。此外,OSS选择后不可更换。

警告:在OSS Bucket未开启版本控制功能时,如果需要设置生命周期规则,请勿对Flink的相关目录(包括artifacts、flink-jobs、flink-savepoints、sql-artifacts、plan和flink-sessionclusters等。)设置清除策略。因为设置清除策略可能会把Flink相关文件清理掉,导致Flink作业运行异常。

  • 开通Flink全托管自动创建的SLB是被托管实例,不允许删除或修改SLB配合用于其他服务,例如将SLB用于容器服务。此外,我们还需要保证该SLB服务不欠费,否则可能会因为SLB欠费被释放,导致Flink全托管服务不可用。

三、开通流程

1、登录实时计算控制台。

2、单击Flink全托管旁的立即购买。

3、在购买页面,填写配置信息。

类别

配置项

说明

示例

基本配置

付费模式

支持包年包月和按量付费模式。

按量付费

购买时长

仅包年包月需要选择。选择所需要购买的时长。

自动续费

仅包年包月需要选择。开启自动续费功能后,后续可以在阿里云控制台上方费用 > 续费管理中修改续费策略。

地域

建议选择与上下游存储相同的地域。

北京

可用区

建议选择与上下游存储相同的可用区。

可用区H

网络配置

SLB服务

SLB是用户通过浏览器访问Flink产品控制台的必要网络连接组件。在开通Flink全托管服务后,会自动开通SLB服务。单击创建Flink全托管集群后,在控制台初始化阶段就会拉起SLB,SLB就开始收费。

重要:

  • Flink全托管模式开通时会为您创建按量付费的SLB,如果当前账户金额少于100元,需充值后方可开通。

  • 开通Flink全托管自动创建的SLB是被托管实例,该SLB专用于Flink全托管服务,请不要用于其他情况,不允许删除或修改SLB配合用于其他服务,例如将SLB用于容器服务。

  • 需要保证该SLB服务不欠费,否则可能会因为SLB欠费被释放,从而导致Flink全托管服务不可用。

专有网络

选择对应地域下的专有网络。

  • 如果目标上下游存储在专有网络下,则Flink全托管工作空间必须和目标上下游存储在同一个专有网络下。
  • 仅支持192.168.0.0/16、172.16.0.0/12、10.0.0.0/8三个RFC标准私网网段及其子网。

flink-test-vpc

虚拟交换机

每个Flink作业的Task Manager和Job Manager实例都会占用一个IP,我们可以选择1~5个虚拟交换机,根据Flink作业规模,合理规划网段。

说明:Flink控制台上只显示指定专有网络下,与阿里云Flink全托管工作空间在同一可用区下的虚拟交换机。如果页面中没有可供选择的虚拟交换机,则需要确认工作空间所选的可用区是否有误,或者是否在该可用区下已经创建了虚拟交换机。

flinktest-vsw-2ze4fp****

工作空间配置

工作空间名称

以字母开头,仅包含英文字母、数字、中划线(-),长度限制为1~60个字符。

说明:

  1. 同一个阿里云账号下的工作空间名称是唯一的,请勿填写已有的名称,否则会提示重新填写。
  2. Flink全托管服务开通成功后,不可修改工作空间名称。

lanson-flinkworkspace

计算资源配额

仅包年包月模式需要填写,将按照此配额进行计费。

存储配置

OSS存储

OSS用于存储作业系统检查点、作业快照、日志和JAR包等信息。Flink全托管服务会在我们选择的Bucket下创建以下目录来保存不同类型的数据:

  • artifacts:上传的JAR包会被存储到该目录。
  • flink-jobs:Flink作业的HA信息和Checkpoint会被存储到该目录。
  • flink-savepoints:在Flink全托管开发控制台上单击Savepoint,会触发Savepoint操作,最终的Savepoint文件会被存储到该目录。
  • logs:如果作业中日志模板选择了OSS,则作业的日志会被存储到该目录。
  • sql-artifacts:注册自定义函数和Connector所依赖的文件会被存储到该目录。
  • plan:使用专家模式,配置的资源信息会被存储到该目录。
  • flink-sessionclusters:Session集群的HA信息和Checkpoint信息会被存储到该目录。

说明:

  • Flink全托管服务开通成功后,不可修改OSS存储。
  • OSS存储需要与Flink全托管服务在同一地域。

flink-test-oss

监控服务

监控服务

在开通Flink全托管服务后,会自动开通ARMS服务,为我们提供商业版Prometheus监控能力。

4、单击确认订单并支付,即可开通成功。支付完成后,单击管理控制台,即可在Flink全托管页签,看到正在创建的工作空间。通常,支付完成后5~10分钟即可创建完成工作空间。

5、 开通完成后,可以根据需要进行相关操作。

功能

操作入口

作业开发和运维

在Flink全托管开发控制台,您可以进行作业开发和运维工作。

在Flink全托管页签,单击目标工作空间操作列下的控制台,即可进入开发控制台。

订单续费

在实时计算控制台上,可以在包年包月类型的工作空间到期前进行续费,延长对应工作空间的使用时间。

资源变配

在实时计算控制台上,在包年包月模式下,可以对工作空间和项目空间资源进行变配。

修改虚拟交换机

在实时计算控制台上,可以修改虚拟交换机,解决虚拟交换机IP不足带来的作业启动失败的问题。

释放资源

在实时计算控制台上,可以在Flink全托管页签,单击目标工作空间的更多>释放资源,释放按量付费的资源,释放后将不再进行计费。

转化计费方式

在实时计算控制台上,可以进行按量付费和包年包月计费模式的互转。

查看工作空间详情

在实时计算控制台上,可以在Flink全托管页签,单击目标工作空间的更多>工作空间详情,查看空间名称、工作空间ID、OSS Bucket、SLB IP、专有网络名称和ID、虚拟交换机等信息。

添加项目空间

在实时计算控制台上,可以添加项目空间。

工作空间创建后默认生成一个名称为工作空间名称-default项目空间。


  • 📢博客主页:https://lansonli.blog.csdn.net
  • 📢欢迎点赞 👍 收藏 ⭐留言 📝 如有错误敬请指正!
  • 📢本文由 Lansonli 原创,首发于 CSDN博客🙉
  • 📢停下休息的时候不要忘了别人还在奔跑,希望大家抓紧时间学习,全力奔赴更美好的生活✨

本文转载自: https://blog.csdn.net/xiaoweite1/article/details/141288774
版权归原作者 Lansonli 所有, 如有侵权,请联系我们删除。

“大数据Flink(一百一十一):开通阿里云Flink全托管”的评论:

还没有评论