编辑态下,导航栏提供了以下操作键功能编辑表中的数据:功能 说明 添加行 单击该功能键将在表中指定位置插入一个空行。双击单元格以插入数据,ODC 提供了校验和工具来帮助您更快捷的插入数据。例如,当前单元格在日期类型的列中,ODC 会为...
恢复数据表 进入表回收站页面,单击对应数据库的Tab页,查看当前表回收站中的数据表列表。在数据表列表中,找到需要恢复的表,单击恢复。清理数据表 进入表回收站页面,单击目标数据库页签,查看当前表回收站中的数据表列表。如果您需要...
忽略:忽略上传的数据,目标表中的数据不会更新。更新(replace):上传的数据会全量覆盖目标表的旧数据,未配置列映射的字段强制写为NULL。更新(update):上传的数据覆盖目标表的旧数据,但仅覆盖配置有列映射的字段数据。说明 仅...
truncate:清空表中的数据,其内部实现是将指定的表下线、删除、重建,该操作会丢失Region分区 truncate_preserve:清空表中的数据,其内部实现是将指定的表下线、删除、重建,并且Region分区与旧表保留一致 进入和退出Shell环境 执行以下...
Left Join:左表中的数据不变,右表中的数据为两张表的交集。Right Join:左表中的数据为两张表的交集,右表中的数据不变。Join条件+新增条件 单击+新增条件,从多个数据源中选择Join的条件字段。说明 等号(=)左侧为数据源左表字段,右侧...
目标数据表 选择同步到的目标数据源中的表名。生命周期(可选)设置目标表的留存天数,如未设置,默认将保留1天。说明 生命周期决定了目标表在多长时间之后被自动删除。比如设置了生命周期为1天,则表在1天后会被自动删除。特别注意,并不...
表 选择Hologres数据源中的数据表。如果Hologres数据源中还没有数据表,则需要提前创建数据表。具体操作,请参见 表。写入模式 源数据源的数据写入目标数据源(Hologres数据源)的模式。写入模式包括SDK模式和SQL模式,适用场景说明如下:...
当新的动态表转化为流时,您需要指定 转化格式,对动态表前后更改信息进行编码:Upsert流:动态表中的数据支持通过INSERT、UPDATE和DELETE操作修改,当转换为流时,会将INSERT和UPDATE操作编码为upsert message,将DELETE操作编码为delete ...
表 选择Hologres数据源中的数据表。写入模式 源数据源的数据写入目标数据源(Hologres数据源)的模式。写入模式包括SDK模式和SQL模式,适用场景说明如下:Hologres 0.8版本推荐选择SDK模式。Hologres 0.9及之后版本推荐选择SQL模式。加载...
日志表中的数据量很庞大,在业务分析使用时,通常会按PC端、APP端来统计分析。由于PC端、APP端采用不同的体系采集数据,所以通常需要按照终端设计多个明细DWD表。如果终端较多但数据量不大,例如,一个终端的数据量小于1 TB但采集次数较多...
MaxCompute Studio可以将CSV、TSV等格式的本地数据文件导入至MaxCompute表中,也可将MaxCompute表中的数据导出到本地文件。MaxCompute Studio通过Tunnel导入导出数据。前提条件 导入导出数据使用MaxCompute Tunnel,因此要求MaxCompute ...
云数据库SelectDB版 支持的表引擎如下:Aggregate表引擎 Unique表引擎 Duplicate表引擎 索引(Index)索引是对表中一列或多列的值进行排序的一种结构,使用索引 可以快速过滤表中的数据,提高数据的查询效率。目前 云数据库SelectDB版 支持...
同时Dataphin支持恢复或清除回收站中的数据表。本文为您介绍如何在回收站中清除表和恢复表。介绍页面 在Dataphin首页,单击顶部菜单栏的 资产。在 资产 页面,按照下图指引,进入 我的治理 页面。在 资源 页面,单击左侧导航栏 回收站列表...
同时Dataphin支持恢复或清除回收站中的数据表。本文为您介绍如何在回收站中清除表和恢复表。介绍页面 在Dataphin首页,单击顶部菜单栏的 资产。在 资产 页面,按照下图指引,进入 我的治理 页面。在 资源 页面,单击左侧导航栏 回收站列表...
表属性VERSIONS被设置为0导致数据被删除 宽表的VERSIONS属性的值为0,表示表中的数据不会保留,任何写入的数据都将被删除,无法查询。如果建表时未设置VERSIONS属性,则VERSIONS的值默认为1,即表中的数据仅保留一个版本。更多介绍,请参见...
索引 索引(Index)是对表(Table)中一列或多列的值进行排序的一种结构,使用索引(Index)可以快速过滤表中的数据,提高数据的查询效率。目前云数据库Doris版主要支持两类索引:内建的智能索引,包括ZoneMap索引和前缀索引。自建的二级...
表 选择AnalyticDB for PostgreSQL数据源中的数据表为数据同步的目标表。如果AnalyticDB for PostgreSQL数据源中还没有数据表,您也可以执行如下步骤,简单快速的生成目标表:单击 一键生成目标表。Dataphin会自动为您匹配创建表的代码,...
内核术语 名词 描述 分布式表 按照一定的拆分规则根据拆分键将一张表中的数据拆分到多个数据库与数据表中。广播表 广播表不做拆分,且所在数据库的所有数据节点均具有该表的副本。单表 没有做拆分的表为单表。数据库模式 创建数据库时通过...
当数据出现泄露时,管理员可以在获取到泄露的数据后,通过提取水印,将数据中的备注信息提取出来,就可以定位到泄漏数据的是员工A。水印使用限制详情,请参见 水印使用限制。设置敏感数据要移动的目标位置,测试 写入权限,并单击 下一步。...
表格存储 表格存储是构建在阿里云飞天分布式系统之上的分布式NoSQL数据存储服务,MaxCompute 2.0支持直接通过外部表方式访问表格存储中的表数据并进行处理,详情请参见 Tablestore外部表。更多表格存储信息,请参见 表格存储。对象存储OSS ...
在 编辑表数据 对话框中,修改时间戳和数据值。单击 确定,保存修改后的数据。SQL执行器 在集群管理系统的左侧导航栏中,选择 数据查询>SQL执行器。在 namespace 下拉列表中选择命名空间,页面右侧会自动显示该命名空间中的表。可选:获取...
加载策略 向目标数据源(HDFS数据源)写入数据时,数据写入表中的策略。加载策略包括覆盖数据、追加数据、文件名冲突报错,适用场景说明如下:覆盖数据:覆盖数据策略下,先删除目标目录下的文件,再新增数据文件。追加数据:追加数据策略...
test TableId long 否 MaxCompute、RDS 等资产表中的列所属的资产表唯一标识 ID。说明 根据资产表的 ID 查询数据安全中心连接授权的数据资产表中列的数据,资产表 ID 可调用 DescribeTables 接口获取。11132334 RuleId long 否 资产表中列...
test TableId string 否 MaxCompute、RDS 等资产表中的列所属的资产表唯一标识 ID。说明 根据资产表的 ID 查询数据安全中心连接授权的数据资产表中列的数据,资产表 ID 可调用 DescribeTables 接口获取。11132334 RuleId long 否 资产表中...
列名映射 在弹出的 编辑表 对话框中的 列 区域,取消选中 全表同步,然后设置对应的列在目标库实例中的名称。说明 修改列名后,您可以将鼠标放置在列名后的,查看原列名。单击 确定。根据提示完成后续操作。库表列名批量映射 在 配置任务...
MaxCompute的表类似于传统关系型数据库中的表,可以存储结构化数据,并且使用SQL进行查询和分析。MaxCompute中不同类型计算任务的操作对象(输入、输出)都是表。您可以 创建表、删除表以及向表中导入数据。说明 DataWorks的数据开发模块...
表名映射 在弹出的 编辑表 对话框中,设置该数据表在目标实例中的名称。列名映射 在弹出的 编辑表 对话框中,设置对应的列在目标实例中的名称。说明 在此步骤中,您还可以通过取消对应列的复选框来过滤不需要迁移的列。单击 确定。根据提示...
将OSS数据导回至PolarStore 导回在OSS上归档的普通表中的数据 如果您有低频修改归档到OSS上冷数据的需求,您可以通过 ALTER ENGINE 语法将OSS数据导回至PolarStore进行修改。数据导回至PolarStore后,会同步删除OSS上的冷数据。修改完数据...
新建数据归档 示例:将数据库 odc_test 中的表 student 归档至数据库 test2 中。信息项 示例值 所属数据源 mysql_4.2.0 源端数据库名称 odc_test 目标数据库名称 test2 表名称 student 在 SQL 开发窗口左侧导航栏的 任务 页签中,单击 数据...
如果表非Transactional表,您需要把源分区或源表中的数据导入到新分区或新表中,在导入过程中执行相应的更新逻辑操作。新分区或新表可以与源分区或源表相同,即就地更新。如何删除MaxCompute表或分区中的数据?MaxCompute支持通过 delete ...
Dataphin数据源表开发方式 Dataphin数据源表开发方式是指您在开发Flink_SQL任务时,可以直接访问在Dataphin中所创建的数据源中的表进行任务开发。如果您希望使用此种方式,需要先在数据源上配置数据源编码。具体操作,请参见 数据源管理...
加载策略包括覆盖数据和追加数据,适用场景说明如下:覆盖数据 即以当前来源表为准,覆盖目标表中的历史数据。追加数据 即在目标表的已有的数据基础上追加数据,且不修改历史数据。(可选参数)分区 如果选择了分区表,则需要选择数据表的...
加载策略包括覆盖数据和追加数据,适用场景说明如下:覆盖数据 即以当前来源表为准,覆盖目标表中的历史数据。追加数据 即在目标表的已有的数据基础上追加数据,且不修改历史数据。(可选参数)分区 如果选择了分区表,则需要选择数据表的...
Dataphin数据源表开发方式 Dataphin数据源表开发方式是指您在开发Flink_SQL任务时,可以直接访问在Dataphin中所创建的数据源中的表进行任务开发。如果您希望使用此种方式,需要先在数据源上配置数据源编码。具体操作,请参见 数据源管理...
无锁数据变更 将结合表中的主键或非空唯一键,分批对表中的目标数据进行操作,在保证执行效率的同时,尽可能地减小了对数据库性能、空间的影响。历史数据清理 支持历史数据清理,可以根据设定的规则定期清理历史数据。可编程对象 支持存储...
数据质量支持您保留数据质量监控过程中从数据表中发现的非预期数据,帮助您快速排查、定位问题,提升数据质量。本文为您介绍如何管理数据质量监控过程中从数据表中发现的非预期数据。背景信息 问题数据表 数据质量支持在部分规则校验不通过...
加载策略 包括:覆盖数据 即以当前来源表为准,覆盖目标表中的历史数据。追加数据 即在目标表的已有的数据基础上追加数据,且不修改历史数据。解析方案 非必填项。数据输出前和输出完成的特殊处理方式,比如为了满足服务的持续可用性,当前...
当数据库中表的数据量过大时,可能会影响查询数据速率,在不考虑将数据迁移到其他数据库的情况下,您可以将数据库中的历史数据或使用频率低的冷数据归档在当前数据库下的其他表中。同时,结合DMS提供的归档时清理源表功能,帮助您提升数据...
区块接口节点说明 区块定义内部和外部的数据传输,依靠蓝图编辑器中的 数据接口 节点、事件接口 节点和 动作接口 节点进行配置,不同接口的区别如下:数据接口:用于接收外部数据源传入区块的数据,再通过蓝图编辑器分发数据给内部的组件。...
加载策略 包括:覆盖数据 即以当前来源表为准,覆盖目标表中的历史数据。追加数据 即在目标表的已有的数据基础上追加数据,且不修改历史数据。解析方案 非必填项。数据输出前和输出完成的特殊处理方式,比如为了满足服务的持续可用性,当前...