导入MySQL数据
您可以将自建MySQL数据库或RDS MySQL数据库中的数据导入到日志服务，实现数据的查询分析、加工等操作。本文介绍导入MySQL数据的操作步骤。使用限制 目前仅支持：华东1（杭州）、华东2（上海）、华北1（青岛）、华北2（北京）、华北3...
新建表
当一个字段（列）设置为自增后，其余字段（列）不可勾选，需取消勾选后，才可设置其它字段（列）为自增字段（列）。虚拟列 选择是否创建虚拟列。重要 如果已勾选虚拟列，则 必须 填写表达式。在创建虚拟列时需要定义虚拟列依赖的表达式，...
SQL命令管理数据库
删除数据库 执行如下命令，删除数据库：DROP DATABASE[TestDb]需注意，若您在删除数据库前没有对该数据库进行过任何备份，系统会返回如下提示信息：DROP DATABASE[TestDb]-Kindly reminder:your database[TestDb]does not exist any backup...
Quick BI数据库中修改了字段名称后数据集报“Unknown ...
问题描述 Quick BI数据库中修改了字段名称后数据集报错。Unknown column 'XXX' in 'field list' 问题原因 修改了数据库表字段名称后，预览数据集数据报错。解决方案 修改了字段后，在数据集刷新页面，然后点击三个点，点击字段选择，一键...
字段操作
本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时，ALTER TABLE DDL 字段操作支持的转换范围。总览 ALTER TABLE tbl_name[alter_option[,alter_option].]alter_option:{ ADD[COLUMN]col_name column_definition[FIRST...
配置逻辑表关联字段标准
说明 逻辑表对应字段关联数据标准中的值后，如果确认用标准字段的名称覆盖当前逻辑表字段的名称，则单击 确认 后，逻辑表中该字段的名称会自动更改为数据标准中对应的数据元、指标、或者维度的code值，例如：逻辑表中的手机号码原始字段...
配置逻辑表关联字段标准
说明 逻辑表对应字段关联数据标准中的值后，如果确认用标准字段的名称覆盖当前逻辑表字段的名称，则单击 确认 后，逻辑表中该字段的名称会自动更改为数据标准中对应的数据元、指标、或者维度的code值，例如：逻辑表中的手机号码原始字段...
自定义RDBMS数据库及同步数据
为了满足不同业务场景数据集成的诉求，Dataphin支持用户自定义当前系统不支持的RDBMS数据库（关系型数据库）类型的组件，并进行数据同步。您只需要准备关系型数据库的驱动，即可自定义RDBMS数据库类型的组件。本教程以MySQL为例，为您介绍...
自定义RDBMS数据库及同步数据
为了满足不同业务场景数据集成的诉求，Dataphin支持用户自定义当前系统不支持的RDBMS数据库（关系型数据库）类型的组件，并进行数据同步。您只需要准备关系型数据库的驱动，即可自定义RDBMS数据库类型的组件。本教程以MySQL为例，为您介绍...
修改地图区域样式
在 设置数据源 页面，将数据框内的area_id和value字段值修改为对应区域的字段值。area_id：area_id字段的数据必须从属于 默认数据 内的adcode值。例如在 默认数据 内设置的adcode值是浙江省330000，映射数据 栏内的area_id字段数值必须在...
Quick BI配置同环比按钮是灰的无法点击
产品名称 Quick BI 产品模块 可视化组件 概述 本文通过介绍修改字段类型、高级配置页功能等内容，帮助您解决配置同环比功能时，按钮无法点击的问题。问题描述 需要展示同比数据，指标配置同环比计算时，按钮是灰色的，无法点击 问题原因 ...
修改地图区域样式
在 设置数据源 页面，将数据框内的area_id和value字段值修改为对应区域的字段值。area_id：area_id字段的数据必须从属于 默认数据 内的adcode值。例如在 默认数据 内设置的adcode值是浙江省330000，映射数据 栏内的area_id字段数值必须在...
配置本地文件输入组件
数据内容起始行 首行内容选为字段名称时，数据内容起始行不可小于2；首行内容选为数据内容时，数据内容起始行不可小于1。新建输出字段 新建输出字段：单击 新建输出字段。根据页面提示，配置 来源序号 和 字段，选择字段类型。对于已添加的...
配置本地文件输入组件
数据内容起始行 首行内容选为字段名称时，数据内容起始行不可小于2；首行内容选为数据内容时，数据内容起始行不可小于1。新建输出字段 新建输出字段：单击 新建输出字段。根据页面提示，配置 来源序号 和 字段，选择字段类型。对于已添加的...
数据可视化展现
本场景选择 图标类型 为 分组柱状图，X轴 字段为 gender，Y轴 字段为 求和（pv），拆分 字段为 zodiac。设置字段信息。在图示位置 设置字段信息，将 gender 改为 性别，pv 改为 访问次数，zodiac 改为 星座。设置聚合方式。在图示位置设置 ...
配置API输出组件
配置API输出组件，可以将外部数据库中读取的数据写入到API，或从大数据平台对接的存储系统中将数据复制推送至API，进行数据整合和再加工。本文为您介绍如何配置API输出组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建API...
配置API输出组件
配置API输出组件，可以将外部数据库中读取的数据写入到API，或从大数据平台对接的存储系统中将数据复制推送至API，进行数据整合和再加工。本文为您介绍如何配置API输出组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建API...
数据可视化展现
在数据分析模块，DataWorks为您提供数据可视化工具，能够将加工后的数据以图表形式直观展示，便于您快速提取关键信息。本文将以场景示例形式，为您介绍如何用DataWorks完成用户画像数据的可视化展示。前提条件 在开始示例前，请确认您已经...
日期累计
说明 当数据集配置了 财年 时，且日期字段为 财年字段 时，季粒度支持 财年累计、不支持 当年累计。月粒度字段（即yyyymm格式的字段）订单日期（month）季度累计：本季度第1月至本季度当前月的累计，例如2021年4月至2021年5月的累计。财季...
配置ArgoDB输出组件
配置ArgoDB输出组件，可以将外部数据库中读取的数据写入到ArgoDB，或从大数据平台对接的存储系统中将数据复制推送至ArgoDB，进行数据整合和再加工。本文为您介绍如何配置ArgoDB输出组件。使用限制 ArgoDB输出组件支持写入文件格式为orc、...
Quick BI能否基于数据集新建字段再创建新字段
概述 本文主要介绍Quick BI能否基于数据集新建字段再创建新字段。详细信息 Quick BI不能基于数据集新创建的字段再创建新字段。可以使用数据库中的字段使用多个函数来创建新字段达到想要的结果。适用于 Quick BI
配置数据聚合
您可以将数据聚合节点类比为Flink SQL的窗口函数，该节点的作用是将解析任务中流转的消息按照窗口进行聚合计算。通过该节点聚合生成多样化的数据，可用于后续分析或输出。使用说明 目前支持的Flink SQL的窗口函数规则为滚动时间窗口...
配置DM（达梦）输出组件
配置DM（达梦）输出组件，可以将外部数据库中读取的数据写入到DM（达梦），或从大数据平台对接的存储系统中将数据复制推送至DM（达梦），进行数据整合和再加工。本文为您介绍如何配置DM（达梦）输出组件。前提条件 已创建DM（达梦）数据源...
同步任务修改
DataHub 页面现在已经支持同步字段修改，用户可以在页面上进行同步字段的修改，无需重启。同步任务字段修改 DataHub 页面现在已经支持同步字段修改，用户可以在页面上进行同步字段的修改，无需重启。具体步骤如下：在数据同步页签，点击...
配置DM（达梦）输出组件
配置DM（达梦）输出组件，可以将外部数据库中读取的数据写入到DM（达梦），或从大数据平台对接的存储系统中将数据复制推送至DM（达梦），进行数据整合和再加工。本文为您介绍如何配置DM（达梦）输出组件。前提条件 已创建DM（达梦）数据源...
Quick BI字段修改中无法使用case when表达式
问题描述 Quick BI数据集中，对字段修改时，无法使用case when表达式。问题原因 编辑字段中无法使用case when表达式对字段进行计算，表达式要用在新建计算字段中。解决方案 1.在数据集编辑页面，单击新建计算字段。2.在新建计算字段页面，...
SPL指令
要求输入数据包含该字段，类型须为 VARCHAR，且其值为非 null。否则，不执行提取操作。pattern Regexp 是 正则表达式，支持RE2正则语法。output Field 否 用于存储正则提取结果的字段名称。示例 示例1：探索式逐个进行匹配。SPL语句*|parse...
事件处理流
支持识别的事件对象分类（Class）如下：网络（Network）存储（Storage）计算（Compute）操作系统（OS）应用（Application）数据库（Database）变更（Change）支持识别的事件类型（Type）如下：可用性（Availability）时延 容量（Capacity）...
标签平台设置
Dataphin标签平台设置为使用标签模块功能的前提条件，包含时间字段设置及提供标签在线服务的服务数据源设置，其中时间字段设置包含标签表时间分区字段设置以及实时事件时间戳字段设置。标签表时间分区字段设置包含一、二、三级分区字段设置...
GetAutoIncrementUsageStatistic-获取表自增ID使用数据
传入此参数时，查询指定数据库中表自增 ID 使用情况，不传入时查询实例上所有数据库的表自增 ID 使用情况。说明 数据格式为 JSONArray，例如['db1','db2']，数据库名间用英文逗号（,）分隔。['db1','db2']RatioFilter double 是 自增 ID ...
配置Redis输出组件
配置Redis输出组件，可以将外部数据库中读取的数据写入到Redis，或从大数据平台对接的存储系统中将数据复制推送至Redis，进行数据整合和再加工。本文为您介绍如何配置Redis输出组件。前提条件 在开始执行操作前，请确认您已完成以下操作：...
修改任务字段生成重复字段
一、问题原因 情况一：当在管理后台或者项目中修改自定义字段内容（不包括字段名称）时，选择「同步修改所有引用该字段的场景」，此时出现的结果为：1、使用场景的项目中，修改者拥有修改字段权限，则新字段内容会直接覆盖旧字段；...
Graph Database（GDB）数据源
Graph Database数据源为您提供读取和写入Graph Database双向通道的功能，本文为您介绍DataWorks的Graph Database数据同步的能力支持情况。使用限制 离线读 离线写 导出GDB需要配置点任务和边任务，分别导出点数据和边数据。导出任务根据点...
配置Redis输出组件
配置Redis输出组件，可以将外部数据库中读取的数据写入到Redis，或从大数据平台对接的存储系统中将数据复制推送至Redis，进行数据整合和再加工。本文为您介绍如何配置Redis输出组件。前提条件 在开始执行操作前，请确认您已完成以下操作：...
有约束的列修改类型
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改不同约束下的列的字段类型的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型、短横线（-）表示没有、all 表示全部类型。主键（PRIMAEY KEY）约束下...
配置条件级联
配置条件级联关系（同源配置）假设仪表板中查询控件A，包含的字段为区域和省份，仪表板中查询控件B，包含的字段为城市和产品类别。此时，查询控件A和B的数据均来自同一数据集。您通过关联控件A中的区域和控件B中的城市字段，实现在控件A...
结果字段说明
result_type 字段为 cluster_info 当 result_type 字段为 cluster_info 时，result 字段中包含日志类别信息，内容如下："result":{"cluster_id":"xxxx","cluster_pattern":"xxxx","cluster_active_age":120,"cluster_alive_age":150,...
推送数据
概述 本篇文档将介绍如何向AIRec智能推荐服务推送实时数据，实时数据包括：实例启动后的所有对user、item、behavior表中数据的新增、修改、删除等操作。AIRec智能推荐根据版本的不同，有两个推送实时数据的接口，二者推送数据逻辑相同，...
合作数据管理
添加数据至合作空间 在DataTrust首页，单击顶部菜单栏的 通用计算。进入 合作数据 页面。按照下图指引，进入 添加数据 对话框。在 添加数据 对话框中，配置参数。参数 描述 数据名称 选择已创建的数据。数据别名 可根据已选数据创建别名。...
配置OSS输出组件
配置OSS输出组件，可以将外部数据库中读取的数据写入到OSS，或从大数据平台对接的存储系统中将数据复制推送至OSS，进行数据整合和再加工。本文为您介绍如何配置OSS输出组件。前提条件 已创建OSS数据源。具体操作，请参见 创建OSS数据源。...
- 产品推荐
- 这些文档可能帮助您