产品概述
产品描述 Dataphin是集产品、技术、方法论于一体的智能大数据平台建设引擎，为您提供数据引入、规范定义、建模研发、资产管理、数据服务等全链路智能数据建设及治理服务。功能 描述 Dataphin全托管 全托管又称公共云多租户模式，只需购买...
配置AnalyticDB for MySQL 3.0输入组件
AnalyticDB for MySQL 3.0输入组件用于读取AnalyticDB for MySQL 3.0数据源的数据。同步AnalyticDB for MySQL 3.0数据源的数据至其他数据源的场景中，您需要先配置AnalyticDB for MySQL 3.0输入组件读取的数据源，再配置数据同步的目标数据...
步骤六：可视化分析
本文将使用Quick BI指导您完成本教程的可视化分析步骤，包括数据源、数据集的创建和数据大屏图表的配置。...③ 自动刷新 勾选 自动刷新，并设置刷新时间为 3秒。单击 更新，即可在 排行榜 图表中查看到数据排行榜信息。如下图所示：
步骤六：可视化分析
本文将使用Quick BI指导您完成本教程的可视化分析步骤，包括数据源、数据集的创建和数据大屏图表的配置。...③ 自动刷新 勾选 自动刷新，并设置刷新时间为 3秒。单击 更新，即可在 排行榜 图表中查看到数据排行榜信息。如下图所示：
确定需求
业务调研 充分的业务调研和需求分析是数据仓库建设的基石，直接决定数据仓库能否建设成功。在数仓建设项目启动前，您需要请相关的业务人员介绍具体的业务，以便明确各个团队的分析员、运营人员的需求，沉淀出相关文档。您可以通过调查表、...
准备数据源和计算源
在使用Dataphin前，您需要选择符合业务场景需求的数据库或数据仓库作为数据源，用于读取原始数据和写入数据建设过程中的数据；同时您需要准备MaxCompute项目、Flink项目作为Dataphin的计算源，为数据的研发提供计算资源。准备数据源 ...
Quick BI如何设置默认查询为当前月份
问题描述 Quick BI如何设置默认查询条件为当前月份？解决方案 打开查询控件编辑页面，选择查询字段为日期的年月维度字段，在查询条件配置中，勾选手动设置默认值，时间类型选择相对时间（T-0），即可看到当前的月份显示。单击确定后，即可...
配置AnalyticDB for MySQL 3.0输入组件
AnalyticDB for MySQL 3.0输入组件用于读取AnalyticDB for MySQL 3.0数据源的数据。同步AnalyticDB for MySQL 3.0数据源的数据至其他数据源的场景中，您需要先配置AnalyticDB for MySQL 3.0输入组件读取的数据源，再配置数据同步的目标数据...
任务运行资源说明
否 Spark（JAR/SQL）CPU：0.3核 内存：4GB 是 MapReduce CPU：0.2核 内存：512MB 是 任务资源配置说明 自定义资源配置CPU可配置区间 0.001CPU～4.0CPU，内存可配置区间 32MB～16GB。若您需自定义任务资源大小，您可以在任务的代码头部添加...
准备数据源和计算源
在使用Dataphin前，您需要选择符合业务场景需求的数据库或数据仓库作为数据源，用于读取原始数据和写入数据建设过程中的数据；同时您需要准备MaxCompute项目、Flink项目作为Dataphin的计算源，为数据的研发提供计算资源。准备数据源 ...
配置Amazon S3输入组件
配置Amazon S3输入组件后，可以读取Amazon S3数据源中的数据至Dataphin，进行数据集成与数据开发。本文为您介绍如何配置Amazon S3输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建Amazon S3数据源。具体操作，请参见 ...
配置Amazon S3输入组件
配置Amazon S3输入组件后，可以读取Amazon S3数据源中的数据至Dataphin，进行数据集成与数据开发。本文为您介绍如何配置Amazon S3输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建Amazon S3数据源。具体操作，请参见 ...
任务运行资源说明
否 Spark（JAR/SQL）CPU：0.3核 内存：4GB 是 MapReduce CPU：0.2核 内存：512MB 是 任务资源配置说明 自定义资源配置CPU可配置区间 0.001CPU～4.0CPU，内存可配置区间 32MB～16GB。若您需自定义任务资源大小，您可以在任务的代码头部添加...
配置AnalyticDB for MySQL 3.0输出组件
AnalyticDB for MySQL 3.0输出组件用于向MySQL数据源写入数据。同步其他数据源的数据至AnalyticDB for MySQL 3.0数据源的场景中，完成源数据源的信息配置后，需要配置AnalyticDB for MySQL 3.0输出组件的目标数据源。本文为您介绍如何配置...
新建AnalyticDB for MySQL 3.0数据源
通过创建AnalyticDB for MySQL 3.0数据源能够实现Dataphin读取AnalyticDB for MySQL 3.0的业务数据或向AnalyticDB for MySQL 3.0写入数据。本文为您介绍如何创建AnalyticDB for MySQL 3.0数据源。背景信息 云原生数据仓库AnalyticDB ...
配置AnalyticDB for MySQL 3.0输出组件
AnalyticDB for MySQL 3.0输出组件用于向MySQL数据源写入数据。同步其他数据源的数据至AnalyticDB for MySQL 3.0数据源的场景中，完成源数据源的信息配置后，需要配置AnalyticDB for MySQL 3.0输出组件的目标数据源。本文为您介绍如何配置...
升级
请您仔细核对购买信息并阅读 智能数据建设与治理服务协议，确认无误后选中 智能数据建设与治理服务协议。单击 去支付，支付成功后即可开始升级开通增值功能包。正在通过升级开通增值功能包的Dataphin实例，在Dataphin管理控制台页面，显示 ...
配置Amazon S3输出组件
配置Amazon S3输出组件，可以将外部数据库中读取的数据写入到Amazon S3，或从大数据平台对接的存储系统中将数据复制推送至Amazon S3，进行数据整合和再加工。本文为您介绍如何配置Amazon S3输出组件。前提条件 已创建Amazon S3数据源。具体...
配置Amazon S3输出组件
配置Amazon S3输出组件，可以将外部数据库中读取的数据写入到Amazon S3，或从大数据平台对接的存储系统中将数据复制推送至Amazon S3，进行数据整合和再加工。本文为您介绍如何配置Amazon S3输出组件。前提条件 已创建Amazon S3数据源。具体...
数据集成支持的数据源
不支持 ArgoDB 支持 支持 Paimon 不支持 不支持 文件数据源 FTP 支持 支持 OSS 支持 支持 Amazon S3 支持 支持 消息队列数据源 Log Service 支持 不支持 Kafka 支持 支持 RocketMQ 不支持 不支持 DataHub 支持 支持 关系型数据源 PolarDB ...
新建AnalyticDB for MySQL 3.0数据源
通过创建AnalyticDB for MySQL 3.0数据源能够实现Dataphin读取AnalyticDB for MySQL 3.0的业务数据或向AnalyticDB for MySQL 3.0写入数据。本文为您介绍如何创建AnalyticDB for MySQL 3.0数据源。背景信息 云原生数据仓库AnalyticDB ...
设置Dataphin实例的计算引擎
校验成功后，单击 确认并开始数据建设，即可开始数据建设。后续步骤 完成设置Dataphin实例的计算引擎后，您就可以准备后续数据研发过程中用于读取和写入数据的数据源、用于提供计算资源的计算源。具体操作，请参见 准备数据源和计算源。
Dataphin支持的实时数据源
关系型数据库 PolarDB 支持 支持-PolarDB-X（原DRDS，同RDS）-支持 支持 AnalyticDB for MySQL 3.0-支持 支持 AnalyticDB for PostgreSQL 6.0+-支持 支持 Postgres 支持（支持postgres-cdc）-MySQL 支持（支持mysql-cdc）支持 支持 Oracle-...
案例介绍
交易域 支付 消费者 创建（支付单）、支付、关单 供应链域 采购 供应商、商品、仓库 确认采购单、预付、发货、收货、付尾款、关单 供应链域 运输、调拨 仓库、商品、承运商、门店 确认调拨单、发运、收货、关单 履约域 配送 仓库、商品、...
账单详情
不同维度的明细账单报表 明细账单报表 操作方式 明细账单报表概述 计费项按账单月份汇总报表 在明细账单页面，统计项=“计费项”统计周期=“账单月份”按账号，账单月份，产品名称，商品名称，实例IID，计费项维度统计。计费项按天汇总报表...
SQL使用限制
IN的参数个数 1024 数量限制 IN的最大参数限制，例如 in(1,2,3….,1024)。如果 in(…)的参数过多，会影响编译性能。1024为建议值，不是限制值。jobconf.json 1 MB 长度限制 jobconf.json 的大小为1 MB。当表包含的分区数量较多时，大小可能...
分区值格式说明
表达式 系统变量列表 系统变量 说明 示例（假设业务时间：20230531 19:30:15，当前月份：5月）yyyy 表示4位的年份 2023 yy 表示2位的年份 23 mm(MM)表示月份 05 dd 表示天 31 hh24 表示24小时制 19 hh 表示12小时制 7 mi 表示分钟 30 ss ...
配置HBase输出组件
[{"index":0,"type":"string"},{"index":2,"type":"string"},{"index":1,"string","value":"_"}]表示由输出字段中的第1个字段和第3个字段，使用下划线（_）组成Rowkey。输入字段 根据上游的输入，为您展示输入字段。输出字段 为您展示输出...
逻辑表DQL操作
本文为您介绍逻辑表DQL查询语句。使用限制 当使用SELECT语句时，返回结果最多只能显示10000行结果，同时...test.dim_region_lvl3-原始城市层级维度表名，角色名为 dim_city where ds='20230101')city on(addr.city_id=city.region_lvl3_id)
资产质量概述
背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求，Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障，所以Dataphin需要定义数据分析的质量，以满足资产质量的时效性、准确性、完整性、...
逻辑表DQL操作
本文为您介绍逻辑表DQL查询语句。使用限制 当使用SELECT语句时，返回结果最多只能显示10000行结果，同时...test.dim_region_lvl3-原始城市层级维度表名，角色名为 dim_city where ds='20230101')city on(addr.city_id=city.region_lvl3_id)
计费说明-半托管
智能研发版定价 数据处理单元规格 定价（CNY/年）500 298,000 1000 397,800 1500 497,600 2000 597,400 2500 697,200 3000 797,000 数据处理单元统计规则：数据处理单元总量=（数据同步任务数+数据集成任务数）/3+计算任务数（离线和实时）...
资产质量概述
背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求，Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障，所以Dataphin需要定义数据分析的质量，以满足资产质量的时效性、准确性、完整性、...
DDL语句
创建单值分区表 CREATE TABLE(<column_name1><DATATYPE1>[NOT NULL][comment"text"],<column_name2><DATATYPE2>[NOT NULL][comment"text"],<column_name3><DATATYPE3>[NOT NULL][comment"text"],.)partitioned by(<partition_key1>...
API管理
例如，API流量限制 为每秒查询率是1000，App1的流量限制为每秒查询率是500，App2的流量限制为每秒查询率是500，App3的流量限制为每秒查询率是500，各App流量限制的总和大于API的流量限制，但流量限制的上限为API流量限制。当 APP流量限制 ...
SQL使用限制
IN的参数个数 1024 数量限制 IN的最大参数限制，例如 in(1,2,3….,1024)。如果 in(…)的参数过多，会影响编译性能。1024为建议值，不是限制值。jobconf.json 1 MB 长度限制 jobconf.json 的大小为1 MB。当表包含的分区数量较多时，大小可能...
API概览
采购单 API 标题 API概述 SplitPurchaseOrder 采购单渲染并拆单 采购单渲染拆单接口，可以依照最终主子单结构方式返回商品列表，分销商接入方可以渲染得到最终的主子单结构，方便后续接收创建采购单成功消息并回填主子单信息。...
修改日期类型
以下图为例，则表示为：从2022-11-29 开始日期起修改每年的标签日期11月01号为假日，重复3次后结束。标签日期 选择重复周期时，若选择 不重复 或按 年 重复时，您需填写该参数：不重复：请输入YYYY-MM-DD格式，多个日期请换行符分隔；可...
修改日期类型
以下图为例，则表示为：从2022-11-29 开始日期起修改每年的标签日期11月01号为假日，重复3次后结束。标签日期 选择重复周期时，若选择 不重复 或按 年 重复时，您需填写该参数：不重复：请输入YYYY-MM-DD格式，多个日期请换行符分隔；可...
基本概念
采购方(Purchaser)与分销采购店铺一一对应，分销商采购店铺通过采购方身份调用API进行商品查询、采购单创建等；渠道商 商家(Seller)渠道商商家主体 店铺(Shop)渠道商开设的店铺，分销商入驻时会与指定的渠道商此店铺建立合作关系；通过API...
- 产品推荐
- 这些文档可能帮助您