数据表管理
更新从数据库导入的数据表 字段同步 当数据库中新增或删除有关列的字段后，通过 同步字段 功能，系统会自动检测数据库中的字段变更内容，并可根据实际业务需求选择是否对有关元数据做字段变更同步。具体操作如下：选择 知识中心>数据问答>...
FineBI
您可以通过FineBI连接 云原生数据仓库AnalyticDB MySQL版，以可视化的形式帮助您进行多样数据管理，例如过滤、分组汇总、新增列、字段设置、排序等，极大的提升了数据整合的便利性和效率。前提条件 了解FineBI与 AnalyticDB MySQL版 之间的...
CREATE STREAM
physical_column_definition 是 物理列，指通常意义下的数据库字段，包括字段名称、字段类型和字段顺序等。外部系统根据物理字段读取或写入数据。column_name：物理列的列名。column_type：物理列的数据类型。column_constraint：物理列...
从RDS MySQL数据库获取数据进行数据富化
time:1563436326 data:123 city:nanjing province:jiangsu 加工规则 根据指定的RDS MySQL数据库表中的字段值（例如 content 字段的值）去匹配日志字段，其中指定的RDS MySQL数据库表中的字段值为Key-Value形式，Key对应日志字段，Value为正...
扩展字段
可类比关系型数据库中字段的 DEFAULT 值。数据类型：不可编辑。默认值：可编辑。字段类型：下拉框 Select 数据类型：指定数据为字符串或数字。数据项：定义下拉框中不同选项的键值对。处于数据兼容性考虑，数据项创建完成后无法删除，只能...
新建表
当一个字段（列）设置为自增后，其余字段（列）不可勾选，需取消勾选后，才可设置其它字段（列）为自增字段（列）。虚拟列 选择是否创建虚拟列。重要 如果已勾选虚拟列，则 必须 填写表达式。在创建虚拟列时需要定义虚拟列依赖的表达式，...
数据节点
当核对的数据量较大时，可选择参与核对字段的某个字段，针对某几位进行散列，读取到的数据就会按照散列后的值散列到不同分片中，支持后续并发排序和核对，从而提升核对效率。说明 散列字段可以与排序字段保持一致。散列位数：自定义的散列...
2023年
支持关联区域（子项、关联项、依赖项）字段显示设置及列宽调整。支持Jira迁移，详见 Jira 导入数据说明。主题开放子类型创建。自动化规则的群通知模板支持字段设置。2023-07-27 优化 子项修改状态时必填提示优化，可直接填写必填字段。全景...
结果编辑与导出
调整列宽 支持拖动调整列宽。状态栏显示字段类型和备注信息 结果集中单击某个字段，底部状态栏中支持显示该字段的类型和备注等具体信息。导出结果集 示例：以 Excel 文件格式导出表 employee 到本地磁盘中。在结果集中，单击。在 下载数据 ...
列存在性查询
ExistsQuery也叫NULL查询或者空值查询，一般用于判断稀疏数据中某一行的某一列是否存在。例如查询所有数据中address列不为空的行。说明 要对Nested字段进行列存在性查询（ExistsQuery）时，请使用嵌套类型查询（NestedQuery）进行嵌套。...
列存在性查询
ExistsQuery也叫NULL查询或者空值查询，一般用于判断稀疏数据中某一行的某一列是否存在。例如查询所有数据中address列不为空的行。说明 要对Nested字段进行列存在性查询（ExistsQuery）时，请使用嵌套类型查询（NestedQuery）进行嵌套。...
数据脱敏
您需要选择一个源数据中随着时间递增的字段作为增量列，例如创建时间、自增ID（数据库自带的自增列）等。说明 当前仅有RDS数据支持增量脱敏。分片字段 否 DSC 执行静态脱敏时会对源数据进行字段分片，通过并发处理的方式提高脱敏效率。您可...
数据上传
DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理，为您提供便捷的数据传输服务，助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...
MongoDB数据导入
查询ObjectId字段 示例数据 在数据库 test_mongodb 中创建名为 test_objectid 的集合，示例如下：db.createCollection("test_objectid");向 test_objectid 集合中插入文档，示例如下：db.test_objectid.insert({ 'id':1,})查询 test_...
交叉表
移动端 支持设置行维度名称、行维度列宽和数据内是否显示行维度字段。说明 交叉表的宽度在移动端显示超过手机屏幕一半时，会分成两屏显示。序号列 勾选后报表列头会显示序号。①支持设置序号列名称。②支持勾选 总计行不显示序号。说明 仅...
数据集组合
当您的多个数据表关联性较灵活，比如在不同场景下需要用到不同的数据表进行关联分析时，建议您针对单张数据表分别创建数据集，并在仪表板中使用数据集组合能力，您可以根据需求灵活地调整关联数据集的数量和关联关系的配置。案例：左表 右...
使用拆分字段
拆分原则 数据表拆分的首要原则，就是要尽可能找到数据表中的数据在业务逻辑上的主体，并确保大部分（或核心的）数据库操作都是围绕这个主体的数据进行，然后可使用该主体对应的字段作为拆分字段，进行分库分表。选择业务逻辑主体 业务逻辑...
分区表系统视图
PolarDB PostgreSQL版（兼容Oracle）提供了以下几个系统视图和系统函数，供您查看数据库中分区表的相关信息。pg_partitioned_table 返回字段说明 列名 描述 partrelid 分区表 pg_class 项的OID。partstrat 分区策略。取值如下：h：哈希分区...
CREATE DATABASE
差异说明 宽表引擎和时序引擎对不同语法要素的支持情况如下：语法要素 宽表引擎 时序引擎 数据库名（database_identifier）〇 〇 数据库属性（attribute_definition）✖️ 〇 使用说明 数据库名（database_identifier）数据库名需遵循以下...
配置自助取数
列字段支持设置 数据展示格式、对齐方式、排序、聚合方式 和 字段显示内容。您也可以单击行/列右边的 图标，批量配置字段格式。说明 自助取数不支持同环比、百分比、累计计算等高级计算。根据业务需要，您可选择添加过滤器。具体请参见 ...
分区表系统视图
PolarDB PostgreSQL版 提供了以下几个系统视图和系统函数，供您查看数据库中分区表的相关信息。pg_partitioned_table 返回字段说明 列名 描述 partrelid 分区表 pg_class 项的OID。partstrat 分区策略。取值如下：h：哈希分区表 l：列表...
多维分析表
说明 维度较多时，会给数据库带来较大性能压力，请结合数据库性能控制维度数量选择。图表概述 使用场景 相对于趋势分析表着重于单一指标随时间推移的变化趋势，而多维分析表则侧重于在同一时间点下不同维度间数据的相互影响和组合效应。...
CREATE INDEX
索引主要用于改进数据库性能（虽然不当使用会导致性能下降）。索引的键字段以列名的形式指定，也可以使用括号中的表达式的形式指定。可以指定多个字段以创建多列索引。索引字段可以是一个从表行的一个或多个列的值进行计算的表达式。此功能...
删除有约束的列
删除普通键（KEY）约束下的列 如果删除的 普通键 列中包含上述表格中的字段类型，通过 ALTER TABLE DDL 语句进行删除列操作时，MySQL 数据库和 OceanBase 数据库 MySQL 租户的区别与删除主键（PRIMARY KEY）约束下的列一致。删除全文索引...
趋势分析表
按容器自适应：系统会根据字段值自适应展示列宽。自定义：设置字段值的展示宽度。单位为像素，默认值160。在 计算方式 中，设置趋势分析表格的计算方式。配置项名称 配置项说明 计算方式 支持设置趋势分析表的计算方式。计算方式可以选择 ...
列存索引
对宽表所有字段创建列存索引，将列存索引数据按时间戳字段 ts 按天分区：CREATE INDEX my_ts_idx USING COLUMNAR ON my_ts_tbl(*)PARTITION BY ENUMERABLE(ifnull(substring(from_unixtime(ts),0,10),'unknown')AS dt,bucket(128,id))WITH...
查看审计日志
在日志服务控制台查看审计日志 日志服务存储了数据库审计系统审计到的数据库操作日志，在数据库审计系统查看到的审计日志来源是日志服务。您可以在日志服务控制台查看和下载数据库审计服务创建的Project和Logstore中记录的审计日志数据。...
配置Redis输出组件
配置Redis输出组件，可以将外部数据库中读取的数据写入到Redis，或从大数据平台对接的存储系统中将数据复制推送至Redis，进行数据整合和再加工。本文为您介绍如何配置Redis输出组件。前提条件 在开始执行操作前，请确认您已完成以下操作：...
配置Redis输出组件
配置Redis输出组件，可以将外部数据库中读取的数据写入到Redis，或从大数据平台对接的存储系统中将数据复制推送至Redis，进行数据整合和再加工。本文为您介绍如何配置Redis输出组件。前提条件 在开始执行操作前，请确认您已完成以下操作：...
通过日志服务迁移日志数据至MaxCompute
说明 日志服务数据的一个字段最多允许映射到一个MaxCompute表的列（数据列或分区列），不支持字段冗余，同一个字段名第二次使用时其投递的值为null，如果null出现在分区列会导致数据无法被投递。MaxCompute分区列 按顺序左边填写与...
配置HBase输出组件
同步其他数据源的数据至HBase数据源的场景中，完成源数据的信息配置后，需要配置HBase输出组件的目标数据源。本文为您介绍如何配置HBase输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。按照下图指引，...
行业算法版表结构
DOUBLE,BOOLEAN,DATETIME,STRING,DECIMAL,MAP,ARRAY,TINYINT,SMALLINT,INT,FLOAT,CHAR,VARCHAR,DATE,TIMESTAMP,BINARY,INTERVAL_DAY_TIME,INTERVAL_YEAR_MONTH,STRUCT 行业算法版表的字段类型与数据库表的字段类型的对应关系 行业算法版表 ...
配置列映射
配置示例 宽表和索引表的列映射采用JSON文件实现，列映射的配置示例如下，将宽表 testTable 的数据同步至索引表 democollection，宽表的 f:name 这一列映射到索引表的 f_name_s 这一列，宽表的 f:age 这一列映射到索引表的 f_age_i 这一列...
湖仓一体
本章节介绍如何通过 云数据库 SelectDB 版 提供的联邦查询技术，对数据湖、数据库、远端文件等外部数据源进行联邦分析。为您提供简单、快速的数据分析体验。概述 云数据库 SelectDB 版 提供多源数据目录功能（Multi-Catalog或Catalog），...
图文解释
Manifest 格式中 data 字段的下一级字段均对应一个数据集字段，字段名 可自定义，在配置数据集字段名时选择对应的字段名即可。图片文件支持常见的JPG、PNG等格式。sam_embedding_url 用于SAM分割的embedding数据，目前使用前需要用户自行预...
自定义RDBMS数据库及同步数据
为了满足不同业务场景数据集成的诉求，Dataphin支持用户自定义当前系统不支持的RDBMS数据库（关系型数据库）类型的组件，并进行数据同步。您只需要准备关系型数据库的驱动，即可自定义RDBMS数据库类型的组件。本教程以MySQL为例，为您介绍...
自定义RDBMS数据库及同步数据
为了满足不同业务场景数据集成的诉求，Dataphin支持用户自定义当前系统不支持的RDBMS数据库（关系型数据库）类型的组件，并进行数据同步。您只需要准备关系型数据库的驱动，即可自定义RDBMS数据库类型的组件。本教程以MySQL为例，为您介绍...
手动修正数据
列表默认为您展示 项目空间、表名称、字段名称、敏感字段类型，同时，您还可以单击 操作 列的 血缘关系 进入 查看敏感数据血缘（公测）模块查看字段级别的数据血缘关系。对于 敏感字段类型 识别结果有误的字段，单击右侧 敏感字段类型 列的...
表属性管理
所有者 表对象所在的数据库。最近修改日期 显示最近修改表属性的日期。行数据量 显示行数。大小 显示数据大小。基本信息页面提供以下功能键：功能项 说明 编辑 单击，修改基本信息。刷新 单击，刷新基本信息。导出 单击右上角的导出图标，...
新建离线物理表
② 字段列表 字段列表为您展示字段的 序号、字段名称、数据类型、字段说明、字段标准、数据分类、数据分级 等字段的详细信息。序号：表字段序号。每新增1个字段，自增+1。字段名称：表字段名称。您可输入字段名称或中文关键词，将自动匹配...
- 产品推荐
- 这些文档可能帮助您