过期欠费
过期欠费 过期欠费行为 1、用户在欠费1天内正常服务，欠费超过1天后系统会下线project/topic停服，相关资源均不会删除，存储会根据生命周期清理，欠费期间您所占用的存储空间的这部分资源仍会继续扣费（累计7天，直到资源被收回收）；...
查看订阅
订阅详情信息的订阅ID会被用来索引，在订阅搜索页面可以根据关键字进行匹配，方便后面订阅查询，尤其在某些Topic订阅量很多的时候这个功能非常有用。查看订阅 订阅详情信息的订阅ID会被用来索引，在订阅搜索页面可以根据关键字进行匹配，...
子账号权限设置模板
授权策略 具体授权策略可见 权限控制 参考模板 权限设置：定义子账号只能获取test_ss project 所拥有的全部权限 {"Statement":[{"Action":["dhs:ListProject"],"Effect":"Allow","Resource":"acs:dhs:*:*:projects/*"},{"Action":["dhs:...
2020-07-23版本
新增多种内置Connector：源表 日志服务SLS源表 消息队列Kafka源表 数据总线DataHub源表 结果表 日志服务SLS结果表 消息队列Kafka结果表 数据总线DataHub结果表 表格存储Tablestore结果表 云数据库HBase版结果表 Elasticsearch结果表 维表 ...
云速搭部署 Flink 应用
通过云速搭实现一个 DataHub+Flink 的实时流计算引擎架构，利用 DataHub ...产品列表 专有网络VPC 对象存储OSS 实时计算Flink版 DataV数据可视化 数据总线DataHub 云速搭CADT 方案架构 操作步骤 具体操作步骤请参考《云速搭部署 Flink 应用》
数据转发到DataHub
通过物联网平台云产品流转功能将设备数据流转到数据总线DataHub后，用户可以编写应用程序或者使用流计算引擎来处理写入到数据总线DataHub的流式数据（例如再流转至实时计算、MaxCompute等服务中），产出各种实时的数据处理结果，例如实时...
数据转发到DataHub
通过物联网平台云产品流转功能将设备数据流转到数据总线DataHub后，用户可以编写应用程序或者使用流计算引擎来处理写入到数据总线DataHub的流式数据（例如再流转至实时计算、MaxCompute等服务中），产出各种实时的数据处理结果，例如实时...
2023-02-20版本
数据总线DataHub源表 缺陷修复 修复修改作业中Kafka的WITH参数后启动任务可能导致启动失败的缺陷。修复Flink CDC在异步线程里用JDBC读数据库时，出现OOM无法透出的缺陷。修复由于错误的codeGen代码而出现 Table program cannot be compiled...
默认配置映射关系
RocketMQ 版 部分事件$.data.body 云消息队列 MQTT 版 部分事件$.data.body 云消息队列 RabbitMQ 版 部分事件$.data.body 数据传输服务DTS 部分事件$.data 数据总线 DataHub 默认入参 目标端类型 模式 值 云消息队列 Kafka 版 部分事件$....
默认配置映射关系
RocketMQ 版 部分事件$.data.body 云消息队列 MQTT 版 部分事件$.data.body 云消息队列 RabbitMQ 版 部分事件$.data.body 数据传输服务DTS 部分事件$.data 数据总线 DataHub 默认入参 目标端类型 模式 值 云消息队列 Kafka 版 部分事件$....
默认配置映射关系
RocketMQ 版 部分事件$.data.body 云消息队列 MQTT 版 部分事件$.data.body 云消息队列 RabbitMQ 版 部分事件$.data.body 数据传输服务DTS 部分事件$.data 数据总线 DataHub 默认入参 目标端类型 模式 值 云消息队列 Kafka 版 部分事件$....
附录一：运维服务产品清单
Elasticsearch elasticsearch 大数据 大数据计算 大数据计算服务 odps 大数据 大数据计算 实时计算Flink版 sc 大数据 大数据计算 E-MapReduce emapreduce 大数据 大数据计算 数据总线 datahub 云计算基础 存储服务 对象存储 oss 云计算基础...
选型指导
在线预测服务PAI-EAS 此外，为保证服务的便捷运维，数据便捷回流，以及后续代码级更加灵活的开发，我们建议开通如下服务：序号 模块/用途 云服务 1 数据总线DataHub 用于实时日志回流，持续更新用户行为，用于模型训练 2 日志服务SLS 用户...
支持的连接器
数据总线DataHub√流模式和批模式 SQL和DataStream 不支持更新和删除结果表数据，只支持插入数据。云数据库Redis×流模式 SQL 是 Upsert Kafka√流模式 SQL 是 Elasticsearch√流模式和批模式 SQL和DataStream 是 云原生数据仓库 ...
附录1 云产品监控指标
表格存储 PCDN 安全加速 智能媒体管理 云通信 物联网平台-服务端订阅 物联网平台-实例 监控与管理 操作审计 视频服务 媒体处理 音视频通信RTC 视频直播 视频点播 视频点播-播放质量 大数据（数加）分析型数据库 数据总线DataHub 阿里云...
支持资源中心的云服务及资源类型
DBInstance PolarDB-X数据库实例 ACS:DRDS:PolarDBXInstance 数据传输 实例 ACS:DTS:Instance 数据总线DataHub 项目 ACS:DataHub:Project DDoS原生防护 实例 ACS:DdosBgp:Instance DDoS高防（新BGP）实例 ACS:DdosCoo:Instance 域名 域名 ...
支持的产品
airec 区域级 推荐全链路深度定制开发平台 区域级 数据总线 datahub 区域级 datav数据可视化 全局 大数据计算服务MaxCompute 区域级 DataWorks智能数据建模 区域级 云原生数据湖分析dla 区域级 实时数仓 Hologres 可用区级 实时数仓 ...
事件目标参数
请求参数 参数 类型 是否必选 示例值 描述 EventBusName String 是 default 事件总线的名称。更多信息，请参见 使用限制。RuleName String 是 MNSRule 事件规则的名称。更多信息，请参见 使用限制。Description String 否 MNS的过滤规则。...
ALIYUN:DATAHUB:Project
ALIYUN:DATAHUB:Project类型用于创建数据总线项目。阿里云支持在以下地域创建数据总线项目：中国（杭州）中国（上海）中国（北京）中国（张家口）中国（深圳）新加坡 马来西亚（吉隆坡）德国（法兰克福）印度（孟买）语法 {"Type":"ALIYUN:...
ALIYUN:ROS:AutoEnableService
DataHub：数据总线。DataWorks：数据工场。EDAS：企业级分布式应用服务。EMAS：移动研发平台。FC：函数计算。FNF：Serverless工作流。MaxCompute：大数据计算服务。MNS：消息服务。Cloud Backup：云备份（Cloud Backup）。IMM：智能媒体...
数据总线的审计事件
数据总线已与操作审计服务集成，您可以在操作审计中查询用户操作数据总线产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了用户通过Open...
LinUcb训练任务配置
数据总线项目名。xxx_rec datahub.topic 数据总线topic。item_bhv_log datahub.sub.id 数据总线订阅ID。16255766364793VNMA datahub.access.id 用户名。datahub.access.key 密码。datahub.start.in.ms 日志数据的开始消费时间戳（单位毫秒...
Datahub Service(DataHub)
Datahub Service(DataHub)
支持服务关联角色的云服务
DataHub datahub.aliyuncs.com AliyunServiceRoleForDataHub DataHub服务关联角色 dwconnection.datahub.aliyuncs.com AliyunServiceRoleForDataHubDWConnection DataHub-DataWorks Connection服务关联角色 密钥管理服务 secretsmanager-rds...
alicloud_datahub_subscription
The subscription is the basic unit of resource usage in Datahub Service under Publish/Subscribe model.You can manage the relationships between user and topics by using subscriptions.Refer to details.->NOTE:Available since ...
alicloud_datahub_project
The project is the basic unit of resource management in Datahub Service and is used to isolate and control resources.It contains a set of Topics.You can manage the datahub sources of an application by using projects.Refer ...
DataHub数据源
DataHub数据源作为数据中枢，为您提供读取和写入DataHub数据库的双向通道，能够快速解决海量数据的计算问题。本文为您介绍DataWorks的DataHub数据同步的能力支持情况。支持的版本 DataHub Reader通过DataHub的Java SDK读取DataHub中的数据...
创建DataHub数据源
通过创建DataHub数据源能够实现Dataphin读取DataHub的业务数据或向DataHub写入数据。本文为您介绍如何创建DataHub数据源。背景信息 DataHub即阿里云流式数据服务DataHub，如果您使用的是阿里云流式数据服务DataHub，在对接Dataphin进行数据...
Spark对接DataHub
本文介绍如何在E-MapReduce的Hadoop集群，运行Spark作业消费DataHub数据、统计数据个数并打印出来。Spark Streaming消费DataHub 准备工作 使用DataHub的订阅功能订阅Topic，详细信息请参见 创建订阅。消费DataHub数据 运行Spark Streaming...
alicloud_datahub_service
Using this data source can open DataHub service automatically.If the service has been opened,it will return opened.For information about DataHub and how to use it,see What is DataHub.->NOTE:Available in v1.111.0+->NOTE:The...
创建DataHub数据源
通过创建DataHub数据源能够实现Dataphin读取DataHub的业务数据或向DataHub写入数据。本文为您介绍如何创建DataHub数据源。背景信息 DataHub即阿里云流式数据服务DataHub，如果您使用的是阿里云流式数据服务DataHub，在对接Dataphin进行数据...
alicloud_datahub_topic
The topic is the basic unit of Datahub data source and is used to define one kind of data or stream.It contains a set of subscriptions.You can manage the datahub source of an application by using topics.Refer to details.->...
DataHub数据源
本文介绍如何使用DataHub数据源进行数据分析或者交互式开发。建表语法 CREATE TABLE tbName USING datahub OPTIONS(propertyName=propertyValue[,propertyName=propertyValue]*);Table Schema 创建DataHub表时，无需显式定义表的字段信息，...
新建 DataHub 数据源
本文为您介绍如何在数据传输中新建 DataHub 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 DataHub。...
DataHub
背景信息 为了Spark能正常消费到DataHub数据，您需要将本地准备的模拟测试数据发送到DataHub，来测试Spark和DataHub的连通性。本文档假设您下载以下模拟测试代码到本地，并执行以下命令运行jar包来发送数据到 spark_test 下的 topic01。...
- 产品推荐
- 这些文档可能帮助您