数据集成服务
表格存储支持通过DataWorks数据集成实现的数据迁移场景包括将数据库数据迁移到表格存储、表格存储数据跨实例或者跨账号迁移同步和将表格存储数据迁移到OSS或者MaxCompute。将数据库数据迁移到表格存储 DataWorks提供各种异构数据源之间稳定...
概述
增量数据同步到MaxCompute后，您可以在MaxCompute中使用merge_udf.jar包将表格存储的增量数据转换为全量数据格式。具体操作，请参见 将表格存储的增量数据转换为全量数据格式。准备工作 已确认和记录表格存储中要同步到MaxCompute的实例和...
导出结构和数据
设置项 说明 数据格式 ODC 目前支持将数据导出为 CSV 格式 和 SQL 格式。当 导出内容 为 仅导出结构 时，只支持导出数据为 SQL 格式。文件编码 ODC 目前支持 ASCII、ISO-8859-1、GB2312、GBK、GB18030、Unicode（UTF-8）、Unicode（UTF-16...
将MaxCompute数据同步到表格存储
选择 数据去向 为 Tablestore，并选择 数据源名称 为表格存储数据源。系统会自动测试资源组与所选数据源之间连通性。测试可连通后，单击 下一步。在 提示 对话框，单击 确认使用脚本模式。重要 表格存储仅支持脚本模式。当存在不支持向导...
功能发布记录
更新映射表属性列 2022年05月 功能名称 功能描述 发布时间 发布地域 相关文档 多元索引支持日期数据类型 通过将数据表中整型（Integer）或者字符串（String）类型的数据在多元索引中映射为日期数据类型，您可以使用日期数据类型来实现性能...
将表格存储的增量数据转换为全量数据格式
其中 function_name 为 步骤二：新建并注册函数 中的函数名称，para_list 为 附录：模式选择 中的参数列表，custom_para_list 为自定义参数列表，stream_table_name为增量表的名称，primary_keys 为 表格存储 数据表的主键列表，SequenceID...
同步增量数据到MaxCompute
在 网络与资源配置 步骤，选择 数据来源 为 Tablestore Stream，并选择 数据源名称 为 表格存储 数据源。选择资源组。选择资源组后，系统会显示资源组的地域、规格等信息以及自动测试资源组与所选数据源之间连通性。重要 请与新增数据源时...
使用教程
在默认情况下，外表的字段名即为表格存储上表的列名（主键列名或属性列名）。但有时外表的字段名和表上列名并不一致（例如处理大小写或字符集相关的问题），此时需要指定tablestore.columns.mapping。该参数为一个英文逗号分隔的字符串，每...
区域热力层（v4.x版本）
数据提取。使用GeoJSON行政区划边界提取小工具 DataV.GeoAtlas，最低可以提取区县级边界数据，区域adcode可以查阅 省市区adcode与经纬度映射表，提取方法如下。省级：区域热力层默认显示为全国范围内，各个省和直辖市区域热力层数据，可以...
Kafka数据接入
无 度量名称字段 将该字段映射为 表格存储 时序模型中的度量名称字段（_m_name），表示时序数据所度量的物理量或者监控指标的名称，比如temperature、speed等，不能为空。当 表格存储 选择时序模型时显示该参数。measurement 数据源字段 将...
导入数据至电子表格
本文将为您介绍如何将数据导入电子表格。前提条件 已创建一个空白的电子表格，详情请参见 创建电子表格。进入电子表格的编辑页面 进入数据分析 页面，单击左侧菜单栏的 图标，在 全部电子表格 列表中单击目标文件的 文件名，进入电子表格的...
UTL_ENCODE
uudecode-\x7575656e636f64652074657374(1 row)UUENCODE 该函数将输入数据的RAW类型表示编码为对应的UUENCODE格式的RAW类型数据。语法 UTL_ENCODE.UUENCODE(r IN RAW,type IN INTEGER DEFAULT 1,filename IN VARCHAR2 DEFAULT NULL,...
概述
大部分阿里云用户以CSV格式将数据存储在OSS上，若要提高数据扫描性能，需要借助第三方工具对文件进行格式转换，然后将转换后的数据上传至OSS，整个过程比较繁琐。为减轻用户工作量，您可以直接使用DLA来转换文件格式。假设将1.2GB的数据以...
使用Go语言驱动
格式为 schema:/accessKeyId:accessKeySecret@endpoint/instanceName?param1=value1&.¶mN=valueN]。主要字段说明如下：schema（必选）：表格存储驱动使用的协议，一般设置为https。accessKeyId:accessKeySecret（必选）：阿里云账号...
通用文字识别
能够将文档中的文字元素（单字、文字块、行等）和相应的版面格式（标题、段落、表格）抽离并按顺序输出。目前仅支持单页文档。说明 文档智能解析：从文档中提取出逻辑层级结构、文本内容、表格内容、Key-value键值字段、样式信息等。基于对...
写入时序数据
示例文件中的每一行代表一行时序数据，每一行的数据格式为 measurement_name,tags fields timestamp。配置文件的示例如下：cpu,hostname=host_0,region=cn-hangzhou usage_user=58i,usage_system=2i,usage_idle=24i 1609459200000000000 ...
时序模型介绍
表格存储的时序模型是针对时间序列数据的特点进行设计，适用于物联网设备监控、设备采集数据、机器监控数据等场景，支持自动构建时序元数据索引、丰富的时序查询能力等功能。时序模型通过时序表存储时间序列数据，能提供高并发写入和查询...
数据转发到表格存储（Tablestore）
新版云产品流转功能还支持将数据流转到表格存储（Tablestore时序模型），使用示例，请参见 数据转发到表格存储（Tablestore）时序模型。云网关产品和设备，及MQTT型实例下产品和设备，不支持使用云产品流转（旧版）功能。如果流转对应产品...
通过控制台投递数据到OSS
通过表格存储控制台创建投递任务，将表格存储数据表中的数据投递到OSS Bucket中存储。前提条件 已开通OSS服务且在表格存储实例所在地域创建Bucket，详情请参见 开通OSS服务。说明 数据湖投递支持投递到和表格存储相同地域的任意OSS Bucket...
表格产品说明书
在表格中，将数据划分为以下两大类型。类型 说明 文本型 纯文字、文字与数字混合等。例如姓名、2005级A班。数值型 纯数值构成，可用于计算。说明 默认情况下，表格将文本型数据居左排列，数值型数据居右排列。输入文本 在表格中，文本是指...
函数总览
jwt_decoding 基于JSON Web Token（JWT）标准，将数据解码为原始JSON。hashids_encoding 使用Hashids库对数据进行编码。hashids_decoding 对已使用Hashids库编码的数据进行解码。解析函数 ua_parse_device 解析User-Agent中的设备信息。ua_...
概述
为降低数据存储成本，达到冷热数据分离管理的目的，您可以将共享存储中的冷数据转存至OSS：对于普通表，您可以将冷数据 归档为CSV或ORC格式 并存储在OSS上，随后 PolarDB 节点可通过阿里云内网访问OSS上的数据。对于分区表，您可以将冷数据...
配置学区地图轮播列表交互
连线完成后，每条连线中间会自动添加一个 串行数据处理 节点，将节点分别命名为 提取散点数据 和 地图父组件定位缩放。具体操作方法请参见 什么是蓝图编辑器。将 初中学校列表 和 小学学校列表 的 当点击单行时 事件分别与 提取散点数据 和...
SQL查询
无需将数据下载至本地再传至线上。您可根据需要设置表的生命周期。电子表格：用于同步查询结果至 电子表格，对查询结果进行更大区域的查看等操作。详情请参见：分析数据。电子表格并分享：用于同步查询结果至 电子表格，并通过电子表格的...
归档为CSV或ORC格式
冷数据归档功能不支持将数据文件归档到用户自建的OSS Server中。对InnoDB引擎中的表使用冷数据归档功能时，执行冷数据归档操作的表中必须有主键。冷数据归档完成后，OSS上的归档表只读，且查询性能较差。您需要提前测试数据归档后是否能...
数据脱敏
当数据出现泄露时，管理员可以在获取到泄露的数据后，通过提取水印，将数据中的备注信息提取出来，就可以定位到泄漏数据的是员工A。水印使用限制详情，请参见 水印使用限制。设置敏感数据要移动的目标位置，测试 写入权限，并单击 下一步。...
同步数据到时序表
由于写入时序数据时，Kafka侧的消息记录必须为JSON格式，因此启动Tablestore Sink Connector时需要使用Jsonconverter，且不需要提取schema以及不需要输入key，请在connect-standalone.properties和connect-distributed.properties中按照...
Iceberg概述
Iceberg是一种开放的数据湖表格式。您可以借助Iceberg快速地在HDFS或者阿里云OSS上构建自己的数据湖存储服务，并借助开源大数据生态的Spark、Flink、Hive和Presto等计算引擎来实现数据湖的分析。核心能力 Apache Iceberg设计初衷是为了解决...
MaxCompute数据迁移至OTS
本文为您介绍如何将MaxCompute数据迁移至表格存储OTS（Table Store）。前提条件 开通MaxCompute和DataWorks。在DataWorks上完成创建业务流程，本例使用DataWorks简单模式。详情请参见 创建业务流程。操作步骤 在DataWorks上创建表。登录 ...
自定义表格模板
功能简介 自定义表格模板 是针对固定版式的单页有框线表格表单数据提供的一款定制化产品。用户仅需通过一张模板数据的可视化拖拉拽配置参照字段、识别字段或表头&待识别的列表区域，字段属性等，无需进行数据标注和模型训练，即可实现相同...
自定义表格模板
功能简介 自定义表格模板是针对固定版式的单页有框线表格表单数据提供一款定制化产品。用户仅需通过一张模板数据的可视化拖拉拽配置参照字段、识别字段或表头&待识别的列表区域，字段属性等，无需进行数据标注和模型训练，即可实现相同版式...
映射富化函数
例如：数据表名为test，且设置加工规则为 output_fields=["province","pop"]，output_table_name="table_name"，如果数据表test中匹配到数据列["province","pop"]，则输出字段为 province:xxx,pop:xxx,table_name:test。encoding String 否...
全局操作函数概览
e_to_metric 将日志格式转化为时序存储（MetricStore）的格式。字段操作函数 v 获得日志特定字段的值。e_set 添加新字段或为现有字段设置新的字段值。e_drop_fields 删除符合条件的日志字段。e_keep_fields 保留符合条件的日志字段。e_pack...
使用SQL查询时序数据
假设数据源为device001，查询时序数据表中basic_metric度量类型下device001数据源在某个时刻之后的数据。SELECT*FROM timeseries_table WHERE_m_name="basic_metric"AND_data_source="device001"AND_time>(UNIX_TIMESTAMP()-900)*1000000 ...
API概览
文档格式转换 API API概述 PDF转Word 将PDF转换为可编辑的Word文档，精准识别文本内容，并保留原始文档的版面样式信息。图片转Word 将图片转换为可编辑的Word文档，最多同时支持30张图片转换，精准识别文本内容，并保留原始文档的版面样式...
数据转发到表格存储（Tablestore）宽表模型
使用限制 新版和旧版云产品流转功能均支持将数据流转到表格存储（Tablestore）。旧版云产品流转使用示例，请参见 数据转发到表格存储（旧版）。物联网平台实例及所在地域支持将数据转发到表格存储（Tablestore）宽表模型。支持的地域详细...
基本概念
仪表板 仪表板采用了更加灵活的磁贴式布局来显示报表数据的交互，它不仅可以将数据以可视化的方式呈现，还支持通过各种数据筛选和查询，使用各种数据展现方式，突出数据中的关键字段。如果您想了解更多制作仪表板的内容，请参见 概述。数据...
数据转发到表格存储
您可以使用规则引擎数据流转功能，将数据转发到表格存储（Tablestore）中存储。前提条件 已将设备接入到企业版实例。具体操作，请参见 设备接入和上报数据。已开通表格存储服务。具体操作，请参见 开通表格存储服务。创建数据表 登录 表格...
数据转发到表格存储（Tablestore）时序模型
使用限制 仅 华东2（上海）、华北2（北京）、华南1（深圳）、新加坡、日本（东京）地域的企业版实例下，新版云产品流转功能支持将数据流转到表格存储（Tablestore）时序模型中。物联网平台实例及所在地域支持将数据转发到表格存储...
数据源插件说明
{“title”:”the content”,”body”:”the content”} 中提取出键值title的内容，若内容为JsonArray格式，则将转化为系统中Array类型字段内容“请确保提取出来的键值和目标表字段类型一致，否则对应的数据会丢失”。此处的JsonArray格式...
- 产品推荐
- 这些文档可能帮助您