备案 控制台
文档
产品文档

创建ClickHouse数据源

更新时间:
一键部署
产品详情
相关技术圈
我的收藏

若您要使用DataWorks进行ClickHouse集群任务的开发、管理,需先将您的ClickHouse集群创建为DataWorks的ClickHouse数据源。创建完成后,可在DataWorks的各功能模块使用该数据源连接ClickHouse集群,进行相应的数据同步、数据开发、数据分析等操作。

前提条件

  • 已创建ClickHouse集群。详情请参见 新建集群。

    说明

    建议创建ClickHouse集群时,地域与创建ClickHouse数据源的DataWorks工作空间地域一致。若地域不一致,则只能创建为跨地域的数据源,此类数据源无法绑定为计算引擎,即无法在DataWorks的数据开发、运维中心页面中执行对应计算任务,仅可进行数据同步任务。

  • 已购买所需的DataWorks资源组并完成资源组配置。ClickHouse仅支持使用独享数据集成资源组、独享调度资源组、独享数据服务资源组。

    ClickHouse数据源创建完成后,可用于进行数据同步、计算任务开发与调度、生成API提供数据服务等应用场景中,各应用场景需要分别使用DataWorks的数据集成资源组、调度资源组、数据服务资源组。您需要根据数据源的应用场景提前准备好对应的资源组并完成资源组配置,在创建ClickHouse数据源时确保与对应资源组间网络连通。各资源组的介绍与配置引导请参见 DataWorks资源组概述。

  • 已创建或加入目标工作空间。

    您需在目标工作空间中,将ClickHouse集群创建为该工作空间的数据源,用于后续在该工作空间进行开发操作。同时,需将购买的DataWorks资源组绑定至该工作空间,确保数据源与资源组网络连通。创建工作空间,详情请参见 配置工作空间。

    说明

    同一个ClickHouse集群可在多个DataWorks工作空间中被创建为数据源。

使用限制

  • 当ClickHouse数据源开启了认证服务,则不支持用于数据开发或周期性调度任务。

  • 仅支持通过连接串模式创建ClickHouse数据源。

  • 仅支持使用独享数据集成资源组、独享调度资源组运行ClickHouse任务;基于ClickHouse数据源创建数据服务API,仅支持使用独享数据服务资源组。详情请参见 新增和使用独享数据集成资源组、 新增和使用独享调度资源组、 新增和使用独享数据服务资源组。

操作前准备:权限说明与配置

使用RAM用户(即子账号)或 RAM角色创建数据源,需拥有如下任意权限:

  • 仅拥有项目所有者空间管理员运维空间角色的RAM用户或RAM角色可创建数据源,授权详情请参见 添加空间成员并管理成员角色权限。

  • 仅拥有AliyunDataWorksFullAccessAdministratorAccess策略权限的RAM用户或RAM角色可创建数据源,授权详情请参见 为RAM用户授权、 为RAM角色授权。

数据源创建入口

  1. 进入数据源页面。

    1. 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的管理中心,在下拉框中选择对应工作空间后单击进入管理中心

    2. 进入工作空间管理中心页面后,单击左侧导航栏的数据源 > 数据源列表,进入数据源页面。

  2. 单击新增数据源,选择ClickHouse,根据界面指引创建数据源。

    您也可进入数据集成界面创建,但该页面仅支持创建生产数据源,且创建完成后需在管理中心 > 数据源进行管理。数据集成页面支持创建的数据源类型,具体请以实际界面为准。

创建数据源

  1. 配置基础信息。

    您可根据界面提示配置数据源的名称等基础信息,核心配置参数如下表所示。

    说明

    标准模式工作空间,需分别创建开发环境数据源和生产环境数据源。工作空间模式,详情请参见 必读:简单模式和标准模式的区别。

    image.png

    参数

    说明

    数据源名称

    定义数据源在DataWorks的名称,名称必须唯一。

    配置模式

    目前支持通过连接串模式增ClickHouse集群。

    JDBC URL

    连接ClickHouse的JDBC URL信息。您可登录 云数据库ClickHouse控制台,获取相关数据库及端口信息。

    用户名

    访问ClickHouse集群的用户名。

    密码

    访问ClickHouse集群的用户密码。

    认证选项

    选择后续访问ClickHouse集群时是否需要SSL认证。开启该认证服务后,ClickHouse数据源不支持用于数据开发或周期性调度任务。

  2. 测试资源组连通性。

    根据使用场景不同,资源组分为数据集成(用于数据同步)、数据开发(用于任务调度)、数据服务(用于数据服务任务)三种类型。各类资源组的详细介绍,请参见 DataWorks资源组概述。

    您需根据数据源后续的用途,在连接配置区域对应资源组类型后,测试所需资源组的连通性。若资源组与数据源无法连通,则相应数据源任务将无法正常执行。

后续操作

数据源创建完成后,您可根据需要执行如下操作:

  • 计算任务开发与调度:

    DataWorks的数据开发与运维中心模块,为您提供ClickHouse任务的开发与调度能力,若您需要基于该ClickHouse数据源进行ClickHouse任务开发,或周期性调度ClickHouse相关任务,需先进入数据开发(DataStudio)页面,将创建的数据源绑定至数据开发(DataStudio)。

    说明

    仅当ClickHouse集群和DataWorks工作空间同地域、同账号时,基于该项目创建的数据源才可绑定至数据开发(DataStudio)。

  • 进行数据同步:

    DataWorks的数据集成模块为您提供读取和写入数据至ClickHouse的能力,您可将其他数据源的数据同步至当前ClickHouse数据源,或将当前ClickHouse数据源的数据同步至其他数据源。您可通过离线同步场景执行相关数据同步操作。

  • 增删改查数据源:进入数据源管理页面执行编辑、删除等管理操作。

上一篇:创建AnalyticDB for MySQL3.0数据源 下一篇:创建SSH数据源
  • 本页导读 (1)

深圳SEO优化公司黔西南模板推广多少钱罗湖网站设计模板哪家好盘锦优化公司毕节模板推广价格南平网站推广工具报价滨州模板网站建设报价泸州网络广告推广公司盐田网站定制报价驻马店百度爱采购普洱百度标王公司益阳网络营销哪家好安阳建网站报价深圳网站优化按天收费报价黄冈百搜标王报价安顺网站设计模板报价丹东阿里店铺托管哪家好诸城关键词按天计费哪家好赤峰网页制作多少钱临汾网站优化按天计费价格抚州网站优化按天扣费丹东百度标王多少钱固原优秀网站设计推荐驻马店网站优化按天计费哪家好榆林SEO按效果付费公司广元网站优化按天扣费多少钱恩施企业网站改版报价黄石网络营销济南百度网站优化哪家好防城港英文网站建设报价驻马店网站设计模板报价歼20紧急升空逼退外机英媒称团队夜以继日筹划王妃复出草木蔓发 春山在望成都发生巨响 当地回应60岁老人炒菠菜未焯水致肾病恶化男子涉嫌走私被判11年却一天牢没坐劳斯莱斯右转逼停直行车网传落水者说“没让你救”系谣言广东通报13岁男孩性侵女童不予立案贵州小伙回应在美国卖三蹦子火了淀粉肠小王子日销售额涨超10倍有个姐真把千机伞做出来了近3万元金手镯仅含足金十克呼北高速交通事故已致14人死亡杨洋拄拐现身医院国产伟哥去年销售近13亿男子给前妻转账 现任妻子起诉要回新基金只募集到26元还是员工自购男孩疑遭霸凌 家长讨说法被踢出群充个话费竟沦为间接洗钱工具新的一天从800个哈欠开始单亲妈妈陷入热恋 14岁儿子报警#春分立蛋大挑战#中国投资客涌入日本东京买房两大学生合买彩票中奖一人不认账新加坡主帅:唯一目标击败中国队月嫂回应掌掴婴儿是在赶虫子19岁小伙救下5人后溺亡 多方发声清明节放假3天调休1天张家界的山上“长”满了韩国人?开封王婆为何火了主播靠辱骂母亲走红被批捕封号代拍被何赛飞拿着魔杖追着打阿根廷将发行1万与2万面值的纸币库克现身上海为江西彩礼“减负”的“试婚人”因自嘲式简历走红的教授更新简介殡仪馆花卉高于市场价3倍还重复用网友称在豆瓣酱里吃出老鼠头315晚会后胖东来又人满为患了网友建议重庆地铁不准乘客携带菜筐特朗普谈“凯特王妃P图照”罗斯否认插足凯特王妃婚姻青海通报栏杆断裂小学生跌落住进ICU恒大被罚41.75亿到底怎么缴湖南一县政协主席疑涉刑案被控制茶百道就改标签日期致歉王树国3次鞠躬告别西交大师生张立群任西安交通大学校长杨倩无缘巴黎奥运

深圳SEO优化公司 XML地图 TXT地图 虚拟主机 SEO 网站制作 网站优化