开通阿里云Flink全托管
一、前提条件
- 已拥有阿里云账号。您还没有阿里云账号,请先完成注册。
- 已完成阿里云账号角色授权或RAM用户授权。
- 已开通OSS和VPC: - Flink全托管产品采用存储计算分离架构,需要使用对象存储OSS存储上传的JAR包、Flink作业的日志、Flink作业中生成的Savepoint或Checkpoint等信息。如果还没有开通OSS,请先完成开通。- 还需要开通VPC,即创建专有网络和交换机。
- 开通Flink全托管服务前,请确保阿里云账户余额不少于100.00元人民币或等值的代金券或优惠券。
二、注意事项
- 当需要一次开通的资源数大于1000 CU时,请通过工单进行开通。
- 选择OSS Bucket时,不要对选择的OSS做任何策略设置,例如版本控制、合规保留等。此外,OSS选择后不可更换。
警告:在OSS Bucket未开启版本控制功能时,如果需要设置生命周期规则,请勿对Flink的相关目录(包括artifacts、flink-jobs、flink-savepoints、sql-artifacts、plan和flink-sessionclusters等。)设置清除策略。因为设置清除策略可能会把Flink相关文件清理掉,导致Flink作业运行异常。
- 开通Flink全托管自动创建的SLB是被托管实例,不允许删除或修改SLB配合用于其他服务,例如将SLB用于容器服务。此外,我们还需要保证该SLB服务不欠费,否则可能会因为SLB欠费被释放,导致Flink全托管服务不可用。
三、开通流程
1、登录实时计算控制台。
2、单击Flink全托管旁的立即购买。
3、在购买页面,填写配置信息。
类别
配置项
说明
示例
基本配置
付费模式
支持包年包月和按量付费模式。
按量付费
购买时长
仅包年包月需要选择。选择所需要购买的时长。
自动续费
仅包年包月需要选择。开启自动续费功能后,后续可以在阿里云控制台上方费用 > 续费管理中修改续费策略。
地域
建议选择与上下游存储相同的地域。
北京
可用区
建议选择与上下游存储相同的可用区。
可用区H
网络配置
SLB服务
SLB是用户通过浏览器访问Flink产品控制台的必要网络连接组件。在开通Flink全托管服务后,会自动开通SLB服务。单击创建Flink全托管集群后,在控制台初始化阶段就会拉起SLB,SLB就开始收费。
重要:
Flink全托管模式开通时会为您创建按量付费的SLB,如果当前账户金额少于100元,需充值后方可开通。
开通Flink全托管自动创建的SLB是被托管实例,该SLB专用于Flink全托管服务,请不要用于其他情况,不允许删除或修改SLB配合用于其他服务,例如将SLB用于容器服务。
需要保证该SLB服务不欠费,否则可能会因为SLB欠费被释放,从而导致Flink全托管服务不可用。
专有网络
选择对应地域下的专有网络。
- 如果目标上下游存储在专有网络下,则Flink全托管工作空间必须和目标上下游存储在同一个专有网络下。
- 仅支持192.168.0.0/16、172.16.0.0/12、10.0.0.0/8三个RFC标准私网网段及其子网。
flink-test-vpc
虚拟交换机
每个Flink作业的Task Manager和Job Manager实例都会占用一个IP,我们可以选择1~5个虚拟交换机,根据Flink作业规模,合理规划网段。
说明:Flink控制台上只显示指定专有网络下,与阿里云Flink全托管工作空间在同一可用区下的虚拟交换机。如果页面中没有可供选择的虚拟交换机,则需要确认工作空间所选的可用区是否有误,或者是否在该可用区下已经创建了虚拟交换机。
flinktest-vsw-2ze4fp****
工作空间配置
工作空间名称
以字母开头,仅包含英文字母、数字、中划线(-),长度限制为1~60个字符。
说明:
- 同一个阿里云账号下的工作空间名称是唯一的,请勿填写已有的名称,否则会提示重新填写。
- Flink全托管服务开通成功后,不可修改工作空间名称。
lanson-flinkworkspace
计算资源配额
仅包年包月模式需要填写,将按照此配额进行计费。
存储配置
OSS存储
OSS用于存储作业系统检查点、作业快照、日志和JAR包等信息。Flink全托管服务会在我们选择的Bucket下创建以下目录来保存不同类型的数据:
- artifacts:上传的JAR包会被存储到该目录。
- flink-jobs:Flink作业的HA信息和Checkpoint会被存储到该目录。
- flink-savepoints:在Flink全托管开发控制台上单击Savepoint,会触发Savepoint操作,最终的Savepoint文件会被存储到该目录。
- logs:如果作业中日志模板选择了OSS,则作业的日志会被存储到该目录。
- sql-artifacts:注册自定义函数和Connector所依赖的文件会被存储到该目录。
- plan:使用专家模式,配置的资源信息会被存储到该目录。
- flink-sessionclusters:Session集群的HA信息和Checkpoint信息会被存储到该目录。
说明:
- Flink全托管服务开通成功后,不可修改OSS存储。
- OSS存储需要与Flink全托管服务在同一地域。
flink-test-oss
监控服务
监控服务
在开通Flink全托管服务后,会自动开通ARMS服务,为我们提供商业版Prometheus监控能力。
4、单击确认订单并支付,即可开通成功。支付完成后,单击管理控制台,即可在Flink全托管页签,看到正在创建的工作空间。通常,支付完成后5~10分钟即可创建完成工作空间。
5、 开通完成后,可以根据需要进行相关操作。
功能
操作入口
作业开发和运维
在Flink全托管开发控制台,您可以进行作业开发和运维工作。
在Flink全托管页签,单击目标工作空间操作列下的控制台,即可进入开发控制台。
订单续费
在实时计算控制台上,可以在包年包月类型的工作空间到期前进行续费,延长对应工作空间的使用时间。
资源变配
在实时计算控制台上,在包年包月模式下,可以对工作空间和项目空间资源进行变配。
修改虚拟交换机
在实时计算控制台上,可以修改虚拟交换机,解决虚拟交换机IP不足带来的作业启动失败的问题。
释放资源
在实时计算控制台上,可以在Flink全托管页签,单击目标工作空间的更多>释放资源,释放按量付费的资源,释放后将不再进行计费。
转化计费方式
在实时计算控制台上,可以进行按量付费和包年包月计费模式的互转。
查看工作空间详情
在实时计算控制台上,可以在Flink全托管页签,单击目标工作空间的更多>工作空间详情,查看空间名称、工作空间ID、OSS Bucket、SLB IP、专有网络名称和ID、虚拟交换机等信息。
添加项目空间
在实时计算控制台上,可以添加项目空间。
工作空间创建后默认生成一个名称为工作空间名称-default项目空间。
- 📢博客主页:https://lansonli.blog.csdn.net
- 📢欢迎点赞 👍 收藏 ⭐留言 📝 如有错误敬请指正!
- 📢本文由 Lansonli 原创,首发于 CSDN博客🙉
- 📢停下休息的时候不要忘了别人还在奔跑,希望大家抓紧时间学习,全力奔赴更美好的生活✨
版权归原作者 Lansonli 所有, 如有侵权,请联系我们删除。