冷数据归档常见问题
归档后的冷数据的数据格式发生变化，会导致占用的空间容量发生变化。具体变化如下：如果原表位于InnoDB引擎，归档后的数据的数据量可能会变小。如果原表位于X-Engine引擎，归档后的数据的数据量可能会变大。归档为CSV格式的数据的数据量...
公共参数
调用成功返回的数据格式是JSON格式，外部系统可以在请求时传入参数来制定返回的数据格式。为了便于查看，本文档中的返回示例做了格式化处理，实际返回结果是没有进行换行、缩进等处理的。XML格式?xml version="1.0"encoding="utf-8?结果的...
注意事项
DataV组件要求的数据格式是个数组，数据服务生成的API返回结果是个带有错误码的完整JSON，因此要使用过滤器对API结果进行处理。您可以在DataV中添加过滤器，也可以直接在数据服务配置API时添加过滤器。一般来说，对于未分页查询的API，直接...
如何优化数据导入导出
sed 's/\t/,/g'>/home/data_1000w.csv#csv文件以逗号分隔，数据格式：188092293,27267211,59775766593-64673028018-.-09474402685,01705051424-.-54211554755 原始数据格式适合load data语句导入数据，使用方法可参考：LOAD DATA 语句，...
导入结构和数据
创建导入任务时在面板中的 导入内容 项中选择了 ZIP 压缩文件 后还需在 数据格式 项中选择压缩包中的数据格式是 CSV 格式 或 SQL 格式。批量导入时支持导入 SQL 文件，SQL 文件是以.sql 结尾包含可直接在数据库中执行的 SELECT、INSERT、...
使用数据订阅功能传输数据后日期数据格式发生变化
概述 本文主要介绍MySQL中数据类型为Date的数据，通过数据订阅传输数据后，数据格式由 YYYY-MM-DD 格式变化为 YYYY:MM:DD 的原因。详细信息 DTS默认数据存储格式为 YYYY:MM:DD，YYYY-MM-DD 是展现出来的格式，实际存储是 YYYY:MM:DD 格式。...
脚本和输出语法
脚本的解析能力包括获取消息内容、转换数据格式、处理字符串、组装JSON格式数据和处理二进制数据等。输出文件是使用固定的JSON数组格式，将设备上报数据或脚本解析后的数据，映射到数字孪生节点中。本文介绍如何编写脚本和输出文件。背景...
数据格式描述文件
Ingestion Spec（数据格式描述）是Druid对要索引数据的格式以及如何索引该数据格式的一个统一描述，它是一个JSON文件，一般由三部分组成。{"dataSchema":{.},"ioConfig":{.},"tuningConfig":{.} } 键 格式 描述 是否必须 dataSchema JSON...
名词解释
数据类型介绍 Tuple类型下只支持写入数据是有格式的数据，支持以下几种数据类型 类型 含义 值域 BIGINT 8字节有符号整型-9223372036854775807~9223372036854775807 DOUBLE 8字节双精度浮点数-1.0_10^308~1.0_10^308 BOOLEAN 布尔类型 True/...
通过Excel导入逻辑表
通过导入标准格式的Excel文件或者Visual Paradigm格式文件方式，批量创建逻辑表以及逻辑表的质量规则；同时支持将导出的逻辑表文件快速导入，实现工作组间的逻辑表信息迁移。本文介绍如何通过Excel导入逻辑表。操作步骤 登录 数据资源平台...
通过Excel导入逻辑表
通过导入标准格式的Excel文件或者Visual Paradigm格式文件方式，批量创建逻辑表以及逻辑表的质量规则；同时支持将导出的逻辑表文件快速导入，实现工作组间的逻辑表信息迁移。本文介绍如何通过Excel导入逻辑表。操作步骤 登录企业数据智能...
ActionTrail日志清洗
日志数据格式复杂，不利于直接分析 ActionTrail中保存的是JSON格式的数据，一行内有多条数据，数据以一个Array的形式保存，例如[{"eventId":"event0".},{"eventId":"event1".}]。理论上可以分析上述格式的JSON数据，但非常不便，需要先把每...
命令行界面介绍
数据点由 time（一个时间戳）、measurement（测量指标，例如“cpu_load”）、至少一个key-value格式的 field（测量值，例如“value=0.64”或者“temperature=21.2”）和零或多个包含测量值元数据的key-value格式的 tag（例如“host=server...
添加云产品数据源
数据格式 操作 JSON 在 样例数据 框中，直接配置JSON格式的样例数据。仅支持输入单行数据。重要 不支持输入数组格式的数据。ProtoBuf 单击 上传.desc文件，上传.desc文件，用于解析ProtoBuf格式数据。生成.desc文件方法，请参见 附录：生成...
矩形
如果配置数据源为 设备，仅支持选择 属性，支持数据格式为单精度数字、双精度数字、整数、布尔型和枚举型。此时，支持设置设备离线时组件是否可见。若数据源的数据格式为数值型，需要 转换整数型为布尔值 或 转换数字为枚举型 后设置对应的...
Kafka实时入湖建仓分析
数据解析配置 的参数说明如下：参数名称 参数说明 消息数据格式 Kafka的Value字段的数据存储格式，固定为JSON。Schema设置模式 默认为 手动设置，会从Kafka的Topic获取一条样例数据进行Schema的推断设置。消息样例数据 通过调整样例数据对...
指示灯
如果配置数据源为 设备，仅支持选择 属性，支持数据格式为单精度数字、双精度数字、整数、布尔型和枚举型。此时，支持设置设备离线时组件是否可见。若数据源的数据格式为数值型，需要 转换整数型为布尔值 或 转换数字为枚举型 后设置对应的...
配置API输出组件
配置API输出组件，可以将外部数据库中读取的数据写入到API，或从大数据平台对接的存储系统中将数据复制推送至API，进行数据整合和再加工。本文为您介绍如何配置API输出组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建API...
配置API输出组件
配置API输出组件，可以将外部数据库中读取的数据写入到API，或从大数据平台对接的存储系统中将数据复制推送至API，进行数据整合和再加工。本文为您介绍如何配置API输出组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建API...
区域热力层（v3.x版本）
当地理边界geojson数据接口请求完成时 地理边界geojson数据接口请求返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据源 页签的 数据响应结果 区域。当内置...
pg_authid
目录 pg_authid 包含关于数据库授权标识符（角色）的信息。角色把“用户”和“组”的概念包含在内。一个用户实际上就是一个 rolcanlogin 标志被设置的角色。任何角色（不管 rolcanlogin 设置与否）都能够把其他角色作为成员，参见 pg_auth_...
命令行界面
pretty 美观地输出JSON格式的数据，方便阅读。ssl 对请求使用HTTPS。type 确定使用哪种交互式的Shell。默认值是 influxql。如果要使用Flux REPL Shell，请设置-type 的值为 flux。username 'username' influx 用于连接服务器的用户名。类似...
自定义区域下钻层（v3.x版本）
当自定义topojson数据接口请求完成时 自定义topojson数据接口请求返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据源 页签的 数据响应结果 区域。当区域被点击...
自定义区域下钻层（v4.x版本）
当自定义topojson数据接口请求完成时 自定义topojson数据接口请求返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据源 页签的 数据响应结果 区域。当区域被点击...
区域热力层（v4.x版本）
当地理边界geojson数据接口请求完成时 地理边界GeoJSON数据接口请求返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据源 页签的 数据响应结果 区域。当内置...
锦鲤翻牌器
事件 事件 说明 当数据接口请求完成时 数据接口请求返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据源 页签的 数据响应结果 区域。动作 动作 说明 导入数据接口 ...
锦鲤翻牌器列表
事件 事件 说明 当数据接口请求完成时 数据接口请求返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据源 页签的 数据响应结果 区域。动作 动作 说明 导入数据接口 ...
进度环图
事件 事件 说明 当接口描述请求完成时 数据接口请求返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据源 页签的 数据响应结果 区域。动作 动作 说明 导入接口描述 ...
信息标签层（v4.x版本）
事件 事件 说明 当数据接口请求完成时 数据接口请求返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据源 页签的 数据响应结果 区域。动作 动作 说明 导入数据接口 ...
Redis数据源
DataWorks数据集成支持使用Redis Writer将数据写至Redis，本文为您介绍DataWorks的Redis数据离线写入能力。使用限制 数据导入过程仅支持使用 独享数据集成资源组。使用Redis Writer向Redis写入数据时，如果Value类型是List，重跑同步任务的...
接口
数据格式说明 不同组件支持返回数据格式不同，其中需注意的组件有：表格组件 如果接口返回的数据格式和 静态数据 中的格式相同，则是否分页展示的规则也相同。接口数据源也支持动态返回每页的内容，如果开启表格组件的 分页器，需要满足...
操作示例
以同样的方式，配置 串行 数据处理 节点（此步骤作用是将列表的数据格式转换成标题的数据格式）。上图中的示例转换格式的规则如下。return[{ value:data.content }];单击右上角的 预览，在预览页面进行交互操作（例如单击列表某一格等），...
处理数据
本文档为您介绍如何将CSV格式的文件处理成JSON格式的数据。等值面组件需要的数据格式如下图所示。您需要对数据做进一步的加工处理，让其更符合DataV的数据规范。裁剪面：研究区域的边界数据。这里是全国区域，是一个GeoJSON格式的数据。...
概述
同一份数据以不同的格式保存，数据所占用的存储空间不同，使用DLA扫描数据时所花费的时间和费用也不同。通常情况下，同一份数据以ORC格式和PARQUET格式存储时，其数据扫描性能要优于普通文本CSV格式。因此，您可以将文本类型的数据转换为...
什么是数据传输服务DTS
数据传输服务DTS（Data Transmission Service）是阿里云提供的实时数据流服务，支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助您构建...
输入和输出数据的格式
云数据库ClickHouse输入和输出数据格式的详细信息，请参见 输入和输出数据的格式。
创建与管理下载任务
说明 字段重命名在字段显示内容里设置：如果配置自助取数或交叉表的 数据展示格式 为 自动，且没有设置对齐方式、字段重命名等，则导出的Excel中的数据不带格式，此时选择带格式Excel或纯数据Excel，效果一致。如果配置自助取数任务或者...
备份集下载功能概览
全量数据 支持如下数据库引擎：MySQL SQL Server MariaDB PostgreSQL Oracle MongoDB 说明 MongoDB的数据格式为 json，其余的数据格式均为 CSV。支持如下数据库引擎：MySQL SQL Server 说明 MySQL的数据为Xtrabackup产生的数据格式，并进行...
什么是消息解析
物联网平台定义设备消息的标准数据格式为Alink JSON。对于低配置且资源受限或者对网络流量有要求的设备，不适合直接构造JSON数据与物联网平台通信，可将原数据透传到物联网平台。物联网平台提供消息解析功能，可以根据您提交的脚本，将消息...
地图数据格式
本文档为您介绍DataV地图组件主要使用的GCJ-02坐标系和GeoJSON地理数据格式，以及通过坐标拾取器快速获取基于GCJ-02坐标位置的方法。GCJ-02坐标系 目前，DataV的地图组件主要使用GCJ-02坐标系。GCJ-02是由中国国家测绘局（G表示国家Guojia...
- 产品推荐
- 这些文档可能帮助您