云数据库 OceanBase 通过标准变配和临时变配等配置变更功能为您解决扩缩容的业务需求。本页面为您介绍不同场景的扩缩容适用场景。修改存储空间扩缩容 您可通过修改存储空间进行扩缩容的操作,具体操作参见 修改存储空间。当出现以下几种...
通过创建ClickHouse数据源能够实现Dataphin读取ClickHouse的业务数据或向ClickHouse写入数据。本文为您介绍如何创建ClickHouse数据源。背景信息 如果您使用的是数据库ClickHouse,引入ClickHouse的业务数据至Dataphin中或将Dataphin数据...
通过创建OceanBase数据源能够实现Dataphin读取OceanBase的业务数据或向OceanBase写入数据。本文为您介绍如何创建OceanBase数据源。背景信息 OceanBase即阿里云数据库OceanBase,是阿里巴巴和蚂蚁金服100%自主研发的金融级分布式关系数据库...
通过创建IBM DB2数据源能够实现Dataphin读取IBM DB2的业务数据或向IBM DB2写入数据。本文为您介绍如何创建IBM DB2数据源。背景信息 IBM DB2是一套关系型数据库管理系统。如果您使用的是IBM DB2,在对接Dataphin进行数据开发时,您需要先...
通过创建PolarDB数据源能够实现Dataphin读取PolarDB的业务数据或向PolarDB写入数据。本文为您介绍如何创建PolarDB数据源。背景信息 PolarDB是阿里云自主研发新一代关系型数据库,兼容MySQL、PostgreSQL语法的云托管数据库产品。如果您使用...
通过创建达梦(DM)数据源能够实现Dataphin读取达梦(DM)的业务数据或向达梦(DM)写入数据。本文为您介绍如何创建达梦(DM)数据源。背景信息 达梦(DM)属于OLTP类型数据库,被集成在业务系统中。达梦(DM)数据库吸收借鉴当前先进新...
通过创建HDFS数据源能够实现Dataphin读取HDFS的业务数据或向HDFS写入数据。本文为您介绍如何创建HDFS数据源。背景信息 HDFS集群由NameNode和DataNode构成master-worker(主从)模式:NameNode用于构建命名空间,管理文件的元数据等。...
通过创建OceanBase数据源能够实现Dataphin读取OceanBase的业务数据或向OceanBase写入数据。本文为您介绍如何创建OceanBase数据源。背景信息 OceanBase即阿里云数据库OceanBase,是阿里巴巴和蚂蚁金服100%自主研发的金融级分布式关系数据库...
也可以切换进入 业务数据 面板,单击选择业务数据列表中的某个业务数据,并在右侧数据展示形式对话框内选择一个数据展示的形式。说明 每次只允许在 城市基底数据 或 业务数据 面板中添加图层数据。如需添加多种图层数据,您可以按上述方法...
也可以切换进入 业务数据 面板,单击选择业务数据列表中的某个业务数据,并在右侧数据展示形式对话框内选择一个数据展示的形式。说明 每次只允许在 城市基底数据 或 业务数据 面板中添加图层数据。如需添加多种图层数据,您可以按上述方法...
也可以切换进入 业务数据 面板,单击选择业务数据列表中的某个业务数据,并在右侧数据展示形式对话框内选择一个数据展示的形式。说明 每次只允许在 城市基底数据 或 业务数据 面板中添加图层数据。如需添加多种图层数据,您可以按上述方法...
通过创建AnalyticDB for MySQL 3.0数据源能够实现Dataphin读取AnalyticDB for MySQL 3.0的业务数据或向AnalyticDB for MySQL 3.0写入数据。本文为您介绍如何创建AnalyticDB for MySQL 3.0数据源。背景信息 云原生数据仓库AnalyticDB ...
也可以切换进入 业务数据 面板,单击选择业务数据列表中的某个业务数据,并在右侧数据展示形式对话框内选择一个数据展示的形式。说明 每次只允许在 城市基底数据 或 业务数据 面板中添加图层数据。如需添加多种图层数据,您可以按上述方法...
通过创建Oracle数据源能够实现Dataphin读取Oracle的业务数据或向Oracle写入数据。本文为您介绍如何创建Oracle数据源。背景信息 Oracle是一款可移植好、可靠性好、适应高、功能强大的关系型数据库。如果您使用的是Oracle,在对接Dataphin...
在管理数据页面中,数据的类型分为 ...上传数据 管理数据页面中的数据类型有 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六大类,不同类型的数据可上传的数据格式互不相同,具体三种类型数据上传数据的详细说明请参见 上传数据。
应用场景 基于Dataphin实现数据安全保护的一些典型的场景:场景1:业务数据中敏感数据保护 您可以使用资产安全的敏感数据识别和保护功能,脱敏明文敏感数据,保证业务数据安全。例如,姓名张三脱敏后*三。场景2:开发环境数仓建设 敏感数据...
应用场景 基于Dataphin实现数据安全保护的一些典型的场景:场景1:业务数据中敏感数据保护 您可以使用资产安全的敏感数据识别和保护功能,脱敏明文敏感数据,保证业务数据安全。例如,姓名张三脱敏后*三。场景2:开发环境数仓建设 敏感数据...
通过创建Impala数据源能够实现Dataphin读取Impala的业务数据或向Impala写入数据。本文为您介绍如何创建Impala数据源。背景信息 Impala是用于处理存储在Hadoop集群中大量数据的SQL查询引擎。如果您使用的是Impala,在导出Dataphin数据至...
背景信息 STG:全称STAGE,结构与源数据保持一致的增量数据,主要用于汇聚业务系统源头数据。ODS:全称Operational Data Store,贴源层,主要负责采集业务系统并保存一定期限内的相关业务数据。DWD:全称Data Warehouse Detail,明细数据层...
在管理数据页面中,数据的类型分为 ...上传数据 管理数据页面中的数据类型有 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六大类,不同类型的数据可上传的数据格式互不相同,具体三种类型数据上传数据的详细说明请参见 上传数据。
通过创建OSS数据源能够实现Dataphin读取OSS的业务数据或向OSS写入数据。本文为您介绍如何创建OSS数据源。背景信息 OSS即阿里云对象存储OSS。如果您使用的是阿里云对象存储OSS,在对接Dataphin进行数据开发或将Dataphin的数据写入至OSS时,...
通过创建MySQL数据源能够实现Dataphin读取MySQL的业务数据或向MySQL写入数据。本文为您介绍如何创建MySQL数据源。背景信息 MySQL是一种关系型数据库。常用于网站、应用程序和商业产品,是一种常见的主要关系数据存储系统。更多详情请参见 ...
通过创建OSS数据源能够实现Dataphin读取OSS的业务数据或向OSS写入数据。本文为您介绍如何创建OSS数据源。背景信息 OSS即阿里云对象存储OSS。如果您使用的是阿里云对象存储OSS,在对接Dataphin进行数据开发或将Dataphin的数据写入至OSS时,...
新建Hologres数据源用于实现Dataphin能够读取Hologres的业务数据,及能够向Hologres写入数据。在引入Hologres的业务数据至Dataphin和将Dataphin的数据写入至Hologres的场景中,您需要先创建Hologres数据源。本文为您介绍如何新建Hologres...
租户 租户变配 增减租户规格扩缩容 当租户性能不满足业务要求或新业务数据量较少,作为测试环境使用时,您可通过修改租户规格的方式进行扩容或缩容。体验任务 本教程将带您体验如何对云数据库 OceanBase 的租户进行平滑无感扩缩容。主要...
业务数据:在业务数据页签内,可通过新建数据集上传业务数据。上传CSV数据 注意 CSV文件数据格式为不带BOM的UTF-8编码格式,CSV文件数据内容需要使用英文逗号作为分隔符,如当字段内出现分隔符(,)时,需要使用转义符(")包裹该字段,...
包含但不限于如下场景:数据迁移与同步 使用DMS任务编排配置和管理数据迁移或数据同步任务,将数据从一个数据源迁移到另一个数据源,或实现同数据源、不同数据源之间的数据实时同步。数据清洗与加工 DMS任务编排可以用于数据清洗和加工任务...
通过创建PolarDB数据源能够实现Dataphin读取PolarDB的业务数据或向PolarDB写入数据。本文为您介绍如何创建PolarDB数据源。背景信息 PolarDB是阿里云自主研发新一代关系型数据库,兼容MySQL、PostgreSQL语法的云托管数据库产品。如果您使用...
业务数据:在业务数据页签内,可通过新建数据集上传业务数据。上传CSV数据 重要 CSV文件数据格式为不带BOM的UTF-8编码格式,CSV文件数据内容需要使用英文逗号作为分隔符,如当字段内出现分隔符(,)时,需要使用转义符(")包裹该字段,...
通过创建PostgreSQL数据源能够实现Dataphin读取PostgreSQL的业务数据或向PostgreSQL写入数据。本文为您介绍如何创建PostgreSQL数据源。前提条件 若您需在Dataphin中创建基于阿里云产品的数据源,创建数据源前,需确保Dataphin的IP已添加至...
添加告警方式可参考:添加报警规则 告警项 指标类型 监控指标 默认阈值 持续时间(连续触发告警周期数)检测周期 告警级别 OB 节点数据盘使用率 单指标 节点/磁盘使用率 80%15 1 分钟 Warn 90%15 1分钟 Critical 对系统的影响 业务服务停写...
Core节点组(Kafka Broker)资源评估 评估业务需求 您需要根据业务情况,评估以下参数:扇出因子:业务数据会被下游消费的次数,不包含Kafka本身副本复制产生的消费次数。数据峰值流入:业务数据的峰值流量,单位MB/s。数据平均流入:业务...
创建数据源 在您开始同步业务数据至Dataphin平台前,需要通过添加数据源的方式连通业务数据库与Dataphin。如何创建,请参见 创建MaxCompute数据源。规范定义 创建主题域 主题域用于存放同一数据板块内不同意义的指标,如商品域、交易域、...
数据开发的流程如下所示:数据产生:业务系统每天会产生大量结构化的数据,存储在业务系统所对应的数据库中,包括MySQL、Oracle和RDS等类型。数据收集与存储:您需要同步不同业务系统的数据至MaxCompute中,方可通过MaxCompute的海量数据...
数据运营更高效:遵循应用先行、以用带存、由存而通、因通促用的理念,实现城市数据运营,驱动客户业务创新。用户角色 功能 能力 详述 数据生产方 数据开发 设计数据模型 开发数据加工逻辑 设计标准、稳定的数据模型:通过数据标准和数据...
通常,企业的业务活动是复杂多样的,在确定的数据域及业务活动下,我们需要分析多个业务活动在不同时间,不同限定范围的业务状况,因此,建议您使用批量功能,快速生成某类业务活动的多个派生指标。批量创建派生指标,详情请参见 批量创建...
热点分裂——有效解决数据热点 对于热点数据,PolarDB-X 支持两种处理方式:第一种方案是将热点数据所在的分区数据迁移到特定的数据节点,让热点数据以独享存储资源的方式服务业务,能够实现热点数据不影响非热点数据的业务。具体操作步骤...
本文为您介绍数据质量保障教程的业务场景以及如何衡量数据质量的高低。前提条件 在开始本教程前,请您首先完成 搭建互联网在线运行分析平台 教程,详情请参见 业务场景与开发流程。业务场景 要保证业务数据质量,首先您需要明确数据的消费...
本文为您介绍数据质量保障教程的业务场景以及如何衡量数据质量的高低。前提条件 在开始本教程前,请您首先完成 搭建互联网在线运行分析平台 教程,详情请参见 业务场景与开发流程。业务场景 要保证业务数据质量,首先您需要明确数据的消费...
全景监控支持业务链路配置监控场景,通过自定义监控链路和告警消息配置,可快速实现从数据生产到业务应用的全链路编排及溯源,实现全局监控和问题快速锁定。全景监控提供丰富的告警信息输出方式,包括:钉钉消息、标准协议等方式,出现问题...