若您要使用DataWorks进行EMR Serverless StarRocks任务的开发、管理,需先将您的EMR Serverless StarRocks实例绑定为DataWorks的Serverless StarRocks计算资源。绑定完成后,可在DataWorks中使用该计算资源进行数据开发操作。
前提条件
已创建EMR Serverless StarRocks实例。
建议购买EMR Serverless StarRocks实例时,地域与创建Serverless StarRocks计算资源的DataWorks工作空间地域一致。若地域不一致,则无法绑定为该工作空间的计算资源。
DataWorks已创建工作空间,操作者使用的RAM账号已加入工作空间并设置为工作空间管理员角色。
重要仅支持使用新版数据开发(Data Studio)的工作空间。
未使用新版数据开发(Data Studio)的工作空间支持在DataWorks创建StarRocks数据源进行使用。
已为工作空间绑定资源组,且确保网络连通。
使用Serverless资源组时,只需确保该计算资源实例与Serverless资源组连通性正常即可。
使用旧版独享型资源组时,需确保该计算资源实例与对应场景下的独享调度资源组连通性正常。
获取资源组内网IP网段并添加到EMR Serverless StarRocks实例内网白名单中,确保资源组与实例网络连通。
使用限制
地域限制:华东1(杭州)、华东2(上海)、华北2(北京)、华北3(张家口)、华北6(乌兰察布)、华南1(深圳)、中国香港、日本(东京)、新加坡、印度尼西亚(雅加达)、德国(法兰克福)、美国(硅谷)、美国(弗吉尼亚)。
权限限制:
操作人
具备权限说明
阿里云主账号
无需额外授权。
阿里云RAM账号/RAM角色
仅拥有运维和空间管理员角色的空间成员,或拥有
AliyunDataWorksFullAccess权限的空间成员可创建计算资源。授权详情请参见授权用户空间管理员权限。
进入计算资源列表页
登录DataWorks控制台,切换至目标地域后,单击左侧导航栏的,在下拉框中选择对应工作空间后单击进入管理中心。
在左侧导航栏单击计算资源,进入计算资源列表页。
绑定Serverless StarRocks计算资源
在计算资源列表页,配置绑定Serverless StarRocks计算资源。
选择绑定计算资源类型。
单击绑定计算资源,进入绑定计算资源页面。
在绑定计算资源页面选择计算资源类型为Serverless StarRocks,进入绑定Serverless StarRocks计算资源配置页面。
配置Serverless StarRocks计算资源。
在绑定Serverless Spark计算资源配置页面,根据下表内容进行相应配置。
参数
说明
配置模式
阿里云实例模式和连接串模式。您可根据所选的配置模式配置相应参数。
阿里云实例模式
StarRocks实例
选择需要绑定的EMR Serverless StarRocks实例。您也可单击下拉菜单中的新建来创建EMR Serverless StarRocks实例。
说明如果在创建工作空间时选择隔离生产、开发环境,则此处需要分别为生产和开发环境选择StarRocks实例。
数据库名称
选择EMR Serverless StarRocks实例中的数据库。如果未创建数据库,您可在EMR Serverless StarRocks实例中创建数据库。
用户名和密码
创建EMR Serverless StarRocks实例时设置的账号和密码,账号默认为
admin。如忘记密码可在EMR Serverless StarRocks实例详情页进行重置密码。连接串模式
主机地址/IP
StarRocks FE的IP。
端口
StarRocks FE的Query端口,一般为
9030。请根据您StarRocks侧的配置填写。Load URL
StarRocks FE的地址用于StreamLoad,配置格式:
FE_IP:FE_HTTP。如有多个FE地址,需使用逗号进行分隔。说明其中
FE_IP支持内网地址不支持公网地址。FE_HTTP端口一般为8030或18030,请根据您StarRocks侧的配置填写。数据库名称
选择EMR Serverless StarRocks实例中的数据库。如果未创建数据库,您可在EMR Serverless StarRocks实例的SQL Editor中创建数据库。
用户名和密码
创建EMR Serverless StarRocks实例时设置的账号和密码,账号默认为
admin。如忘记密码可在EMR Serverless StarRocks实例详情页进行重置密码。高级参数
非必填参数。您可通过单击新增属性按钮添加属性参数,参数详情请参见MySQL官方文档。
计算资源实例名
用于标识该计算资源,在任务运行时,通过计算资源实例名称来选择任务运行的计算资源。
测试连通性。
在连接配置区域,请选择DataWorks用于运行StarRocks节点任务的资源组,并单击测试连通性以确保资源组可以正常访问您的EMR Serverless StarRocks实例。详情请参见网络连通方案概述。
单击确认,完成Serverless StarRocks计算资源配置。
说明在绑定Serverless StarRocks计算资源时,系统会自动在当前工作空间的数据源中同步创建一个同名的Serverless StarRocks数据源。
后续操作
配置完Serverless StarRocks计算资源后,您可在数据开发相关节点进行数据开发操作。
在节点中使用该计算资源进行离线同步任务开发,详情请参见离线同步节点。
在节点中使用该计算资源进行EMR Serverless StarRocks任务开发,详情请参见Severless StarRocks SQL节点。