从RDS MySQL数据库获取数据进行数据富化
说明 日志字段的值和RDS MySQL数据库表字段的值进行等值匹配时，如果RDS MySQL数据库表字段存在多个相同的值（例如RDS MySQL数据库表有多个值为 1 的 cid 字段。e_table_map函数只获取匹配到的第一行数据。e_table_map函数只支持单行匹配，...
mysql_fdw
说明 外部表的字段名要与MySQL数据库中表的字段名相同，同时可以仅创建您想要查询的字段。例如，MySQL数据库中的表有3个字段ID、NAME、AGE，您可以仅创建其中2个字段ID、NAME。CREATE FOREIGN TABLE<表名>(<字段名><数据类型>,<字段名>...
读写MySQL数据（mysql_fdw）
说明 外部表的字段名要与MySQL数据库中表的字段名相同，同时可以仅创建您想要查询的字段。例如MySQL数据库中的表有3个字段ID、NAME、AGE，您可以仅创建其中2个字段ID、NAME。postgres=>CREATE FOREIGN TABLE<表名>(<字段名><数据类型>,...
新建及管理质量规则模板
指定某张表的字段：单击编辑框中的 仅填入表1的字段名1，快捷输入该表的字段名变量${t1.c1}。指定表+字段：单击编辑框中的 填入表名1+字段名1，快捷输入表名+字段名变量$[t1.c1]。仅支持上述变量写法，其他变量形式将统一被解析为校验表的...
新建及管理质量规则模板
指定某张表的字段：单击编辑框中的 仅填入表1的字段名1，快捷输入该表的字段名变量${t1.c1}。指定表+字段：单击编辑框中的 填入表名1+字段名1，快捷输入表名+字段名变量$[t1.c1]。仅支持上述变量写法，其他变量形式将统一被解析为校验表的...
数据集填报
选择 已有表 为对应的 控件 选择写入的 表字段名，将自动匹配表字段名的 字段描述、字段类型，您也可以自定义设置该字段是否为 主键。您可以 添加 和 删除 字段映射行。选择 新建表 您可以新建一张物理表，并自定义填写 表名、表字段名、...
通过数据同步功能同步SLS数据至数仓版
例如：AnalyticDB for MySQL 集群数据表的字段名为name，源端SLS数据字段名为user_name，系统会自动以name填充 源字段 和 目标字段，此时您需要手动修改 源字段 为user_name。同步配置 的参数说明如下：参数名称 参数说明 投递起始位点 ...
表格填报
选择 已有表 为对应的 控件 选择写入的 表字段名，将自动匹配表字段名的 字段描述、字段类型，您也可以自定义设置该字段是否为 主键。您可以 添加 和 删除 字段映射行 选择 新建表 您可以新建一张物理表，并自定义填写 表名、表字段名、...
单元格填报
选择 已有表 为对应的 控件 选择写入的 表字段名，将自动匹配表字段名的 字段描述、字段类型，您也可以自定义设置该字段是否为 主键。您可以 添加 和 删除 字段映射行。选择 新建表 您可以新建一张物理表，并自定义填写 表名、表字段名、...
通过数据同步功能同步SLS数据至湖仓版
例如：AnalyticDB for MySQL 集群数据表的字段名为name，源端SLS数据字段名为user_name，系统会自动以name填充 源字段 和 目标字段，此时您需要手动修改 源字段 为user_name。同步配置 的参数说明如下：参数名称 参数说明 投递起始位点 ...
基于Client SDK数据写入
setColumns(List<String>columns,String tableName,String schemaName)需要插入表的字段名（若是全字段插入，columnList.add("*")即可，table列表中的所有表都需要设置字段名，否则检查不会通过。setInsertIgnore(boolean insertIgnore)...
索引结构
索引表结构介绍 每个Document都是由多个field组成，每个field中包含一系列的词语，构建索引的目的是为了加快检索的速度，根据映射关系方向的不同，索引可以分为：字段（filed）：用于定义索引表的字段名及字段类型。倒排索引（index）：倒...
交叉透视表
数据元信息：设置表格中每一行或每一列表头的字段名和显示名。单击右侧的 或 图标，添加或删除一个数据元信息。单击 或 图标配置多个数据元信息的排列样式。单击 图标，即可复制当前选中数据元信息配置内容并新增一个同样配置的数据元信息...
ALTER DATABASE
ALTER DATABASE 更改一个数据库的属性。简介 ALTER DATABASE 更改一个数据库的属性。第一种形式更改某些针对每个数据库的设置。只有数据库拥有者或者超级用户可以更改这些设置。第二种形式更改数据库的名称。只有数据库拥有者或者超级用户...
管理数据表
本文为您介绍如何快速查找数据表，并查看数据表中的数据字段和数据类型等信息。查询数据表 当数据源中的数据表过多，无法快速定位到自己所需的数据表时，您可以按照...您可以在 表详情 页面，查看表的字段名称、字段类型和字段描述等信息。
通过Kettle导入至数仓版
目标表：您需要手动输入 AnalyticDB MySQL版 数据库中的表名。勾选 指定数据库字段。勾选 使用批量插入。在 表输出 的 数据库字段 选项卡中，单击 获取字段 和 输入字段映射，可以设置Excel中的列与 AnalyticDB MySQL版 表中列名间的映射...
镜像表和字段详情
最高涉密等级：为您展示该数据表的字段的敏感程度，数据分级 等级从低到高为L1、L2、L3、L4（公开到绝密）及自定义的数据分级。创建时间：为您展示该数据表的创建的时间，格式为：yyyy-mm-dd hh:mm:ss。创建人：为您展示创建该数据表的用户...
镜像表和字段详情
最高涉密等级：为您展示该数据表的字段的敏感程度，数据分级 等级从低到高为L1、L2、L3、L4（公开到绝密）及自定义的数据分级。创建时间：为您展示该数据表的创建的时间，格式为：yyyy-mm-dd hh:mm:ss。创建人：为您展示创建该数据表的用户...
创建单物理表服务单元
如果业务数据表的字段类型不在待选参数类型范围内，推荐 您选择String。服务单元字段 支持自定义勾选部分源表字段作为服务单元字段，对源表新增字段也可在编辑时添加勾选。配置数据源中字段映射到服务单元中的字段名称，您可以根据业务情况...
元表和字段资产详情
最高涉密等级：为您展示该数据表的字段的敏感程度，数据分级 等级从低到高为L1、L2、L3、L4（公开到绝密）及自定义的数据分级。创建时间：为您展示该数据表的创建的时间，格式为：yyyy-mm-dd hh:mm:ss。创建人：为您展示创建该数据表的用户...
数据表管理
更新从数据库导入的数据表 字段同步 当数据库中新增或删除有关列的字段后，通过 同步字段 功能，系统会自动检测数据库中的字段变更内容，并可根据实际业务需求选择是否对有关元数据做字段变更同步。具体操作如下：选择 知识中心>数据问答>...
元表和字段资产详情
最高涉密等级：为您展示该数据表的字段的敏感程度，数据分级 等级从低到高为L1、L2、L3、L4（公开到绝密）及自定义的数据分级。创建时间：为您展示该数据表的创建的时间，格式为：yyyy-mm-dd hh:mm:ss。创建人：为您展示创建该数据表的用户...
Schema约束
强约束 与传统关系型数据库类似，时序引擎会严格依据预先定义的表结构对写入数据的表名、字段名、数据类型进行校验。不匹配则写入失败。弱约束 写入数据的表不存在时，时序引擎不会报错，而是会自动创建对应的表。写入数据的新增一个标签...
数据注册与字段配置
离线“实验报表来源表”的格式 字段名称 字段含义 是否必填 说明 user_id 用户id 是 用户标识，可以是用户的 uid,也可以是设备 devcie_id,imei 等 exp_id 实验id 是 ab 服务返回的实验id,通过埋点回流。如果是用户的自己的推荐服务，设置...
创建AnalyticDB Schema
创建表 Schema创建成功后，接下来就可以在DLA中创建表，表分为以下两种情况：表的表名、字段名或者字段类型与AnalyticDB for MySQL 2.0表信息不一致。表的表名、字段名或者字段类型与AnalyticDB for MySQL 2.0表信息完全一致。DLA中的表名...
设计阶段
表设计的步骤如下所示：设计表名、字段名：要求相同的字段在不同表中的字段名相同，相关规范请参见 命名规范。设计主键和外键。设计字段注释：通过标注字段注释、枚举值来表明字段含义，如果枚举值过多，建议为枚举值创建维表。设计表分区...
配置ClickHouse输出组件
ClickHouse输出组件用于向ClickHouse数据源...同行映射：源表和目标表的字段名称不一致，但字段对应行的数据需要映射。只映射同行的字段。例如，endpoint_type 字段对应的数据映射至 id 字段中。单击 确认，完成ClickHouse输出组件的配置。
配置Hologres输出组件
Hologres输出组件用于向Hologres数据源写入...同行映射：源表和目标表的字段名称不一致，但字段对应行的数据需要映射。只映射同行的字段。例如，endpoint_type 字段对应的数据映射至 id 字段中。单击 确认，完成 Hologres输出组件 的配置。
表设计规范
在事实表里冗余维表的字段，即把事件发生时的各种维度属性值与该事件绑定起来。使用者无需关联多张表就可以使用数据。此方式仅可应用于数据应用层。任意用拉链表或者日快照的形式，记录维表的变化情况。这使得数据结构变得灵活、易于扩展，...
配置Hologres输出组件
同行映射：源表和目标表的字段名称不一致，但字段对应行的数据需要映射。只映射同行的字段。例如，endpoint_type 字段对应的数据映射至 id 字段中。单击 确认，完成 Hologres输出组件 的配置。后续步骤 完成输出组件的配置后，即可配置离线...
配置ClickHouse输出组件
同行映射：源表和目标表的字段名称不一致，但字段对应行的数据需要映射。只映射同行的字段。例如，endpoint_type 字段对应的数据映射至 id 字段中。单击 确认，完成ClickHouse输出组件的配置。后续步骤 完成输出组件的配置后，即可配置离线...
SQL窗口介绍
SQL窗口界面介绍 表 1.SQL窗口界面介绍 序号 区域 说明 ① 可视化操作区域 可视化地管理数据库：表 可查看当前数据库中的所有表，包含表的字段、字段类型、索引。也可以右键单击目标表，快捷编辑表结构、管理表、导出数据、导入数据、批量...
配置MaxCompute输出
数据字段结构 实时同步写入的MaxCompute表的字段结构。如果您需要新增字段，请单击 添加。分区设置 实时同步写入的MaxCompute表的分区信息。实时同步写入MCompute表支持 时间自动分区 与 根据字段内容动态分区 两种分区方式 时间自动分区：...
资源函数
keys=None,use_ssl=false,update_time_key=None,deleted_flag_key=None)说明 日志服务还支持通过res_rds_mysql函数从AnalyticDB MySQL数据库、PolarDB MySQL数据库拉取数据，您只需将加工规则中的数据库地址、数据库用户名、数据库密码、...
查看血缘关系
优势 详情 提升数据确认效率 通过溯源数据，可以全面了解数据的各个方面，包括作业涉及的产品、数据库和表情况，表字段的属性和关联关系，数据的来源、经过的处理步骤、传输路径以及最终的消费者。这样可以帮助您更好地理解数据的流向和...
通过整库迁移配置集成任务
相对于离线单条管道，离线整库迁移可以批量配置离线管道，一次性完成数据库内多张数据表的同步文件的配置。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引，进入 新建整库迁移 页面。在 新建...
Sensors Data（神策）数据源
目标表的字段列名为course_id"index":0/取来源表的第1列数据写入目标表的course_id列 },{"name":"course_name",/目标表的字段列名为course_name"index":1/取来源表的第2列数据写入目标表的course_name列 },{"name":"course_schedule",/...
使用Flink写入时序引擎
参数说明 结果表结构参数说明 字段名 数据类型 是否必选 说明 timestamp BIGINT 是 字段名必须为 timestamp，且字段类型必须为BIGINT。单位为毫秒（ms）。说明 timestamp为保留字，请用反引号（``）将timestamp括起来。字段值为13位时间戳...
配置TiDB输出组件
TiDB输出组件用于向TiDB数据源写入数据。同步其他数据源的数据至TiDB数据源的场景中，完成...映射关系 根据上游的输入和目标表的字段，可以手动选择字段映射。快速映射 包括 同行映射 和 同名映射。单击 确定，完成TiDB 输出组件 的属性配置。
配置TiDB输出组件
TiDB输出组件用于向TiDB数据源写入数据。同步其他数据源的数据至TiDB数据源的场景中，完成...映射关系 根据上游的输入和目标表的字段，可以手动选择字段映射。快速映射 包括 同行映射 和 同名映射。单击 确定，完成TiDB 输出组件 的属性配置。
- 产品推荐
- 这些文档可能帮助您