聚合函数
位聚合函数 bitwise_and_agg(x)→bigint 返回所有输入值二进制与的结果，以二进制补码表示。bitwise_or_agg(x)→bigint 返回所有输入值二进制或的结果，以二进制补码表示。映射表聚合函数 histogram(x)→map,bigint>返回一个包含输入参数...
同步时源库为PolarDB-X 2.0的注意事项及限制
若源端PolarDB-X 2.0待同步的表名中含大写字母，则仅支持库表结构同步。PolarDB分布式版 需兼容MySQL 5.7版本。其他限制 执行数据同步前需评估源库和目标库的性能，同时建议业务低峰期执行数据同步。否则全量数据初始化时将占用源库和目标...
迁移时源库为PolarDB-X 2.0的注意事项及限制
若源端PolarDB-X 2.0待迁移的表名中含大写字母，则仅支持库表结构迁移。源库的操作限制：在库表结构迁移和全量迁移阶段，请勿执行库或表结构变更的DDL操作，否则数据迁移任务会失败。迁移期间如需切换 PolarDB分布式版 的网络类型，切换...
PolarDB-X 2.0迁移至Tablestore
待迁移的表或列名称符合Tablestore实例的命名规范：表或列的名称由大小写字母、数字或下划线（_）组成，且只能以字母或下划线开头。表或列的名称长度为1~255个字符。费用说明 迁移类型 链路配置费用 公网流量费用 结构迁移和全量数据迁移 ...
使用DTS同步
待同步的表或列名称符合如下规范：表或列的名称由大小写字母、数字或下划线（_）组成，且只能以字母或下划线开头。表或列的名称长度为1~255个字符。同步初始化类型说明 同步初始化类型 说明 结构初始化 DTS将源库中待同步对象的结构定义...
PolarDB-X 2.0同步至Tablestore
待同步的表或列名称符合Tablestore实例的命名规范：表或列的名称由大小写字母、数字或下划线（_）组成，且只能以字母或下划线开头。表或列的名称长度为1~255个字符。费用说明 同步类型 链路配置费用 库表结构同步和全量数据同步 不收费。...
如何对JSON类型进行高效分析
本文介绍了PolarDB IMCI为应对海量结构化与半结构化数据分析场景，通过整合列式JSON、虚拟列、秒级加减列、表列数扩展及列存索引等系列功能而构建出的扩展流计算方案，以及该方案的应用案例。背景 随着应用场景多样化与快速迭代，业务系统...
从RDS MySQL同步至Tablestore
待同步的表或列名称符合Tablestore实例的命名规范：表或列的名称由大小写字母、数字或下划线（_）组成，且只能以字母或下划线开头。表或列的名称长度为1~255个字符。费用说明 同步类型 链路配置费用 库表结构同步和全量数据同步 不收费。...
表的创建和使用
表分区（二级分区）清空的举例如下：truncate table tbl partition 20170103 truncate table tbl partition 20170103,20170104,20170108 表元信息查看 desc table_name show create table table_name 建表样例 建一个分区表 create table ...
通过整库迁移配置集成任务
说明 目标表名仅支持英文字母、数字及下划线。如来源表名含有其他字符，请配置表名转换规则。④ 管道统计 当前已选择的管道数。同步来源为FTP。请先单击 下载Excel模板，按照模板指引填写模板后上传模板文件。请严格按照模板文件的格式填写...
通过整库迁移配置集成任务
说明 目标表名仅支持英文字母、数字及下划线。如来源表名含有其他字符，请配置表名转换规则。④ 管道统计 当前已选择的管道数。同步来源为FTP。请先单击 下载Excel模板 并按照模板指引填写模板后上传模板文件。请严格按照模板文件的格式...
二进制数据类型
第二，对二进制串的操作会处理实际上的字节，而字符串的处理和取决于区域设置。简单说，二进制字串适用于存储那些程序员认为是“裸字节”的数据，而字符串适合存储文本。bytea 类型支持两种用于输入和输出的格式：“十六进制”格式和“转义...
数据配置
说明 表名配置规则是英文字母、数据或者下划线，表名不要超过20个字符。字段名称，命名规则是英文字母或下划线，不能以下划线开头，每个字段名不要超过30个字符。每个excel最多支持30个字段的数据写入和查询，超出的部分会忽略。2、非结构...
云消息队列 RocketMQ 版
类别 详情 支持类型 源表和结果表 运行模式 仅支持流模式 数据格式 CSV和二进制格式 特有监控指标 源表 numRecordsIn numRecordsInPerSecond numBytesIn numBytesInPerScond currentEmitEventTimeLag currentFetchEventTimeLag ...
新建数据填报
物理表名 和 表字段名 只能包含小写字母、数字和下划线（_），必须以小写字母或数字作为开头和结尾。此时在数据填报列表中，可以查看新增的数据。您也可以在对应的数据库中，查看新增的数据。移动端数据填报 前提条件：已创建数据填报页面...
数据类型
JSON/二进制JSON类型，采用二进制JSON格式存储，通过JSON函数访问JSON内部字段。默认支持1048576字节（1MB），可调大到2147483643字节（2GB）。可通过BE配置 jsonb_type_length_soft_limit_bytes 调整。AGG_STATE/聚合函数，只能配合 state...
通过控制台使用分析存储
时序表名称必须由大小写字母、数字或下划线（_）组成，且只能以字母或下划线（_）开头，长度在1~128个字符之间。重要 时序表名称不能与已存在的数据表名称和时序表名称重复。数据生命周期 时序表中数据的过期时间，单位为秒。当系统判断...
支持的数据脱敏算法
本文介绍支持的数据脱敏算法。...在源数据表抽取数据并确认数值范围后，对该字段（在范围内）进行列级别的打散重排和随机选择，实现混淆脱敏。随机洗牌 打散重排/随机选择 敏感类型：设备敏感 位置敏感 适用场景：数据存储
附录：DataHub消息格式
DataHub类型 写入DML消息 写入上游心跳消息 写入DDL消息 源表和目标topic映射方式 数据类型 Tuple 支持 不支持 不支持 单表对单topic DataHub支持的类型 Blob 支持 支持 支持 单库（多表）对单topic Blob二进制数据 Tuple类型由于schema各...
新建手工表
本文为您介绍如何基于Dataphin分析平台新建手工表。操作步骤 在Dataphin首页，单击顶部菜单栏中的 分析。按照下图操作指引，进入 新建手工表 对话框。在 新建手工表 对话框，配置参数。参数 描述 表名称 请输入表名称。仅允许数字、字母、...
新建手工表
本文为您介绍如何基于Dataphin分析平台新建手工表。操作步骤 在Dataphin首页，单击顶部菜单栏中的 分析。按照下图操作指引，进入 新建手工表 对话框。在 新建手工表 对话框，配置参数。参数 描述 表名称 请输入表名称。仅允许数字、字母、...
代码模式建模
数据表创建完成后，您可以使用脚本模式通过FML语句配置表的字段及分区信息。本文为您介绍如何使用FML语句配置数据表的相关内容。前提条件 DataWorks目前不支持通过FML语言创建数据表，您需要提前使用可视化界面创建好维度表、明细表、汇总...
使用OSS Foreign Table进行数据湖分析
功能介绍 OSS FDW基于PG FDW（PostgreSQL Foreign Data Wrapper）框架进行开发，通过OSS FDW，您可以进行如下操作：将OSS数据导入本地表（行存表或列存表）进行分析加速。直接查询分析OSS的海量数据。OSS外表与本地表关联分析。OSS FDW支持...
时序表操作
时序表的命名规则为由大小写字母、数字或下划线（_）组成，且只能以字母或下划线（_）开头，长度在1~128个字符之间。重要 时序表的名称不能与当前已存在的数据表、二级索引表和时序表的名称相同。数据生命周期 时序表中数据的过期时间，...
通过控制台使用时序模型
时序表的命名规则为由大小写字母、数字或下划线（_）组成，且只能以字母或下划线（_）开头，长度在1~128个字符之间。时序表名称不能与已存在的数据表名称重复。数据生命周期 时序表中数据的过期时间，单位为秒。当系统判断当前时间减去用户...
同步数据到时序表
由于当前时序模型中时序表的列名不支持大写字母，如果配置为false，且列名中有大写字母，写入会报错。tablestore.timeseries.toLowerCase=true#是否将所有非主键以及时间的字段以field的形式存储在时序表，默认为true，如果为false，则只...
MaxCompute数据迁移至OTS
在 数据导入向导 对话框，至少输入3个字母来搜索需要导入数据的表，单击 下一步。选择数据导入方式 为 上传本地数据，单击 选择文件 后的 浏览.选择本地数据文件，配置导入信息。示例数据如下。qwe,145,F asd,256,F xzc,345,M rgth,234,F...
数据脱敏
表示以字母 e 开头的任何小写英文表名。识别对象-列名 否 使用列名称匹配的正则表达式。识别对象-列备注 否 使用列备注匹配的正则表达式。脱敏算法 是 识别出的敏感列默认使用的脱敏算法。规则描述 否 识别规则的描述。脚本：以敏感列所属...
通用限制
单实例中表的个数 64个 限制值包含数据表、二级索引表和时序表的数量。重要 由于时序表包括时间线元数据表和时间线数据表，因此一个时序表会使用两个表名额。如果业务需求超过限制，请 提交工单 联系我们。实例名称长度 3~16 Bytes 实例...
创建和管理自定义存储表
物联网平台数据服务提供离线数据存储功能，支持自定义分区表、事务表和时序表。自定义存储表可以作为数据服务中数据解析、SQL分析任务和数据可视化的数据源，可以作为数据解析、SQL分析任务的结果输出表，可以集成时序表数据到实时计算...
新增数据表
数据表是项目中的原始数据，可通过数据校验和数据授权后，被项目的控制台作为离线样本使用。当您新建表结构模板后，可基于新建的表结构模板新增数据表。本文介绍通过管理控制台新增数据表的方法。前置准备 在添加数据表前，需确保您已完成...
新建离线物理表
步骤二：引入或添加字段 在离线物理表开发页面，为离线物理表引入或添加字段。离线物理表字段支持引入和手动添加方式为离线物理表添加字段。各添加字段方式配置说明如下：引 入字段 在离线物理表开发页面，可选 从表引入 和 从建表语句引入...
新建离线物理表
步骤二：引入或添加字段 在离线物理表开发页面，为离线物理表引入或添加字段。离线物理表字段支持引入和手动添加方式为离线物理表添加字段。各添加字段方式配置说明如下：引 入字段 在离线物理表开发页面，可选 从表引入 和 从建表语句引入...
二级索引限制
单表二级索引个数 5 每张数据表最多创建5个索引表。索引列个数 1～4 索引表中最多添加4个索引列，索引列为数据表主键和预定义列的任意组合。主键列个数 8 索引表的主键由索引列和数据表自动补齐的主键列组成。索引列的数据类型 String、...
配置汇总逻辑表属性
汇总逻辑表属性包括基本信息、主键信息和汇总逻辑表的自定义参数。本文为您介绍如何配置汇总逻辑表的表属性。操作步骤 在Dataphin首页，单击顶部菜单栏 研发。默认进入数据 开发 页面。按照下图操作指引，进入汇总逻辑表 属性 配置页面。在...
配置汇总逻辑表属性
汇总逻辑表属性包括基本信息、主键信息和汇总逻辑表的自定义参数。本文为您介绍如何配置汇总逻辑表的表属性。操作步骤 在Dataphin首页，单击顶部菜单栏 研发。默认进入数据 开发 页面。按照下图操作指引，进入汇总逻辑表 属性 配置页面。在...
时序模型介绍
功能特性 创建和管理时序表 通过控制台、SDK、CLI工具等方式列出实例中的全部时序表、创建一张时序表、查询时序表的配置信息、更新时序表的配置信息以及删除一张时序表。在创建或者更新时序表的配置信息时，您可以设置时序表中数据自动过期...
Windows实例系统更新失败，提示“0x80070422（服务...
具体操作，请参见 方案二：使用SFC工具修复二进制文件。解决方案 方案一：通过PowerShell或修改注册表启用服务 远程连接Windows实例。具体操作，请参见 通过密码或密钥认证登录Windows实例。选择以下任一方式，启用被禁用的服务。执行...
Kudu连接器
Kudu表名称和列名称仅支持小写字母。修改Kudu连接器配置 修改Kudu连接器配置，详情请参见 配置连接器。进入EMR控制台的Presto服务的 配置 页面，在 服务配置 区域，单击 kudu.properties 页签。您可以看到以下参数，参数值请根据您实际情况...
ST_CreateChunkTable
创建数据库块表。语法 boolean ST_CreateChunkTable(cstring tableName)参数 参数名称 描述 tableName 数据库块表的名称。命名要求如下：以字母开头，以字母或数字结尾。由小写字母、数字或下划线（_）组成。长度为2~64个字符。名称在当前...
- 产品推荐
- 这些文档可能帮助您