使用Kafka（离线与实时）
MaxCompute与Kafka的集成能够提供高效、可靠的数据处理和分析能力，适用于需要实时处理、大规模数据流和复杂数据分析的场景。本文介绍消息队列Kafka版和自建Kafka数据的写入流程，以及自建Kafka数据的写入示例。Kafka数据写入MaxCompute...
从 MySQL 到 TSDB 的数据迁移
本文主要介绍如何使用阿里巴巴的开源工具Datax 实现从 MySQL 到 TSDB 的数据迁移。背景 本文主要介绍如何使用阿里巴巴的开源工具Datax 实现从 MySQL 到 TSDB 的数据迁移。DataX相关使用介绍请参阅 DataX 的 README 文档。下面将首先介绍 ...
2020年
本文介绍 PolarDB PostgreSQL版（兼容Oracle）的产品功能动态，分别为内核小版本、控制台、时空数据库和API的更新说明。说明 您可通过如下语句查看 PolarDB PostgreSQL版（兼容Oracle）的内核小版本的版本号：show polar_version;2020年12...
MySQL生态兼容
PolarDB-X 将兼容MySQL以及周边生态作为核心设计目标之一。本文从SQL语法、事务行为、导入导出等维度总结了兼容性的相关特性。MySQL协议 PolarDB-X 通讯协议兼容MySQL协议，可以使用常见的驱动直接连接到 PolarDB-X 实例，包括JDBC Driver...
创建数据脱敏规则
DataWorks支持多种脱敏场景，您需根据需要选择合适场景创建相应数据脱敏规则。本文为您介绍如何创建脱敏规则，并在DataWorks中进行脱敏查询。背景信息 DataWorks的脱敏场景分为静态脱敏和动态脱敏：动态脱敏：包括 数据开发/数据地图展示...
附录：DataHub消息格式
nopk add column holo text","ddlMeta":"rO0ABXNyACljb20uYWxpYmFiYS5kaS5wbHVnaW4uY2VudGVyLm1ldGEuRERMTWV0YQLb5Cx/YWXtAgACTAAHZGRsVGV4dHQAEkxqYXZhL2xhbmcvU3RyaW5nO0wACXN0YXRlbWVudHQAKkxjb20vYWxpYmFiYS9mYXN0c3FsL3NxbC9hc3QvU1...
模式匹配
本文介绍了 PolarDB PostgreSQL版（兼容Oracle）支持的模式匹配。说明 如果你的模式匹配的要求超出了这些，请考虑用 Perl 或 Tcl 写一个用户定义的函数。虽然大部分的正则表达式搜索都能被很快地执行，但是正则表达式仍可能被人为地弄成...
插件配置概述
阿里云Logstash支持100余款系统默认插件，包含开源和自研Logstash插件，能够提升集群在数据传输和处理、日志调试等各方面的能力。本文介绍阿里云Logstash支持的系统默认插件。阿里云Logstash仅支持系统默认插件，不支持自定义插件。系统...
2019年
它在统一的计算资源和数据集权限体系之上，提供Spark计算框架，支持您以熟悉的开发使用方式提交运行Spark作业，满足更丰富的数据处理分析需求。2019-07-23 全部区域 概述 新增 西南（成都）区域 MaxCompute服务在 西南（成都）区域开通。...
DescribeProtectionModuleRules
调用DescribeProtectionModuleRules查询指定WAF防护功能模块（包括Web入侵防护、数据安全、Bot管理、访问控制或限流、网站白名单等模块）的规则配置记录。使用说明 本接口用于分页查询指定WAF防护功能模块（包括Web入侵防护、数据安全、Bot...
CREATE TABLE
CREATE TABLE语句用于在Lindorm宽表引擎或时序引擎中创建表，支持多种数据类型，例如VARCHAR、TIMESTAMP、BIGINT等；支持多种表属性，例如数据有效期TTL、压缩算法COMPRESSION等。您可以灵活搭配各种表属性和数据类型，设计出更贴合业务...
事件操作函数
如果上一步的值是一个列表或JSON列表格式的字符串，则按照此列表分裂并结束处理。否则使用 sep、quote 或 lstrip 将上一步的值进行CSV解析，根据解析后的多个值进行分裂并结束处理。参数说明 参数名称 参数类型 是否必填 说明 字段名 ...
层级生成器功能介绍
层级生成器是一款用于生成自定义下钻区域树形结构数据的小工具，本文介绍层级生成器的详细功能。进入层级生成器 单击 DataV.GeoAtlas地理小工具系列，即可打开 层级生成器 工具页面。层级生成器界面概述 层级生成器界面主要分成两大主要...
MySQL数据源
支持的MySQL版本 离线读写：支持MySQL 5.5.x、MySQL 5.6.x、MySQL 5.7.x、MySQL 8.0.x，兼容 Amazon RDS for MySQL、Azure MySQL。离线同步支持读取视图表。实时读取：数据集成实时读取MySQL数据是基于实时订阅MySQL实现的，当前仅支持实时...
DataV封装ECharts功能介绍
本文从index.js文件、package.json文件以及实操演示三个方面介绍DataV自定义组件如何封装Echarts。课程说明 index.js与package.json文件的作用 package.json是用来定义接入DataV时组件的配置项，例如开放给您配置的组件样式、组件静态数据...
什么是云数据库Redis版
支持String（字符串）、List（链表）、Set（集合）、Sorted Set（有序集合）、Hash（哈希表）、Stream（流数据）等多种数据结构，同时支持Transaction（事务）、Pub/Sub（消息订阅与发布）等高级功能。在社区版的基础上推出企业级内存数据...
通过脚本模式生成API
数据服务支持通过脚本模式或向导模式生成API，相对于向导模式，您可以自行编写API的查询SQL，支持多表关联、复杂查询和聚合函数等功能，满足您个性化查询需求。本文为您介绍如何通过脚本模式生成API。前提条件 配置API前，请先在 工作空间...
版本及存储引擎
本文介绍云数据库MongoDB支持的版本、引擎及版本和引擎之间的适配关系，帮助您选择适合您的业务需求的实例。支持版本 云数据库MongoDB支持如下版本：说明 您可以在实例运行期间手动升级数据库版本，但版本升级后不支持降级。详情请参见 ...
PAI图像语义分割预测
PAI-EasyVision提供图像分割的训练和预测功能，支持多机分布式训练和预测。本文为您介绍如何通过PAI-EasyVision使用已有的模型完成图像分割离线任务。数据格式 请参见 输入数据格式。图像语义分割预测 基于已有的文件列表，您可以通过PAI...
CreateProtectionModuleRule
调用CreateProtectionModuleRule，在指定的WAF防护功能模块（包括Web入侵防护、数据安全、高级防护、Bot管理、访问控制或限流等模块）中创建规则配置。使用说明 本接口用于在指定的WAF防护功能模块（包括Web入侵防护、数据安全、高级防护、...
通过DataX导入数据
本文介绍使用DataX SelectDB Writer同步数据至 云数据库 SelectDB 版。概述 DataX是阿里巴巴开源的一个异构数据源离线同步工具，致力于实现包括关系型数据库（MySQL、Oracle等）、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定...
ST_BuildPyramid
algorithm 创建金字塔的重采样算法，取值如下：Near：最邻近 Average：平均值 Bilinear：二次线性 Cubic：三次卷积 storageOption JSON字符串，存储选项。描述raster对象金字塔的分块存储信息。该选项只针对基于对象存储OSS的栅格对象有效...
表流读写
说明 详细内容请参考Databricks官网文章：表流读写 有关演示这些功能的Databricks笔记本，请参阅 入门笔记本二。Delta Lake通过readStream和writeStream与Spark结构化流式处理深度集成。Delta Lake克服了许多流式处理系统和文件相关的常见...
Python 2 UDTF
annotate()signature 为函数签名字符串，用于标识输入参数和返回值的数据类型。执行UDTF时，UDTF函数的输入参数和返回值类型要与函数签名指定的类型一致。查询语义解析阶段会检查不符合函数签名定义的用法，检查到类型不匹配时会报错。具体...
Flume插件
产品介绍 Flume-DataHub插件是基于Flume开发的DataHub数据订阅/发布插件，可以将采集到的数据写入DataHub，也可以从DataHub读取数据写入其他系统。该插件遵守Flume插件开发规范，安装方便，可以很方便的向DataHub发布/订阅数据。产品安装 ...
Kafka数据接入
通过创建Tablestore Sink Connector，将 云消息队列 Kafka 版 实例的数据源Topic导出到 表格存储（Tablestore）。前提条件 云消息队列 Kafka 版 已为实例开启Connector。具体操作，请参见 开启Connector。已为实例创建数据源Topic。更多...
Python 2 UDAF
说明 在编写UDAF代码过程中，您可以根据MaxCompute项目的数据类型版本选取合适的数据类型，更多数据类型版本及各版本支持的数据类型信息，请参见 数据类型版本说明。合法函数签名示例如下。函数签名示例 说明@annotate('bigint,double->...
OSS数据源
OSS数据源配置模式 OSS数据源配置支持 数仓模式 和 自由模式，两种模式差异如下：OSS数据源配置 使用场景 OSS路径格式要求 识别精度 性能 数仓模式 用户直接上传数据到OSS，并期望构建可分析与计算的标准数据仓库。库/表/文件”或者“库/表...
2020年
无 2020年5月 oss_fdw插件 新增oss_fdw插件，用于Aliyun OSS外部表支持，您可以通过OSS外部表将数据库数据写入到OSS，也可以通过OSS外部表将OSS数据加载到数据库中，OSS外部表支持并行和压缩，极大提高了导入和导出数据的性能，同时也可以...
支持的函数
本文为您介绍实时计算Flink版支持的所有内置函数。支持的函数 Flink全托管VVR 3.0.0版本在Flink V1.12的基础上增加了部分内置函数，详情请参见 标量函数、表值函数 和 聚合函数。下表展示的是Flink全托管在Flink V1.15版本的基础上支持的...
ALTER TABLE
云原生数据仓库AnalyticDB MySQL版 支持通过 ALTER TABLE 修改表结构，包括修改表名、列名、列类型、普通索引、聚集索引、外键索引、分区函数的格式、冷热分层存储策略。本文介绍 ALTER TABLE 语法。语法 ALTER TABLE table_name { ADD ANN...
CREATE INDEX
Lindorm提供了 三种 高效易用的索引：二级索引、搜索索引和列存索引，分别适用于非主键匹配场景、多维查询场景 和列存储数据查询场景。在使用CREATE INDEX语法创建索引时，您可以指定索引类型并添加索引属性。引擎与版本 CREATE INDEX语法...
ST_SubRaster
storageOption 返回结果的存储选项，为JSON字符串。具体信息，请参见 storageOption。options JSON字符串表示的操作选项。具体信息，请参见 Options。storageOption参数如下。参数名称 描述 类型 默认值 说明 chunking 是否使用分块存储。...
ST_SubRaster
storageOption 返回结果的存储选项，为JSON字符串。具体信息，请参见 storageOption。options JSON字符串表示的操作选项。具体信息，请参见 Options。storageOption参数如下。参数名称 描述 类型 默认值 说明 chunking 是否使用分块存储。...
ST_BuildPyramid
algorithm 创建金字塔的重采样算法，取值如下：Near：最邻近 Average：平均值 Bilinear：二次线性 Cubic：三次卷积 storageOption JSON字符串，存储选项。描述raster对象金字塔的分块存储信息。该选项只针对基于对象存储OSS的栅格对象有效...
ST_BuildPyramid
algorithm 创建金字塔的重采样算法，取值如下：Near：最邻近 Average：平均值 Bilinear：二次线性 Cubic：三次卷积 storageOption JSON字符串，存储选项。描述raster对象金字塔的分块存储信息。该选项只针对基于对象存储OSS的栅格对象有效...
ST_BuildPyramid
algorithm 创建金字塔的重采样算法，取值如下：Near：最邻近 Average：平均值 Bilinear：二次线性 Cubic：三次卷积 storageOption JSON字符串，存储选项。描述raster对象金字塔的分块存储信息。该选项只针对基于对象存储OSS的栅格对象有效...
通过向导模式生成API
数据服务支持通过向导模式或脚本模式生成API，相对于脚本模式，您无需编码能力，可以可视化地配置API。本文为您介绍如何通过向导模式生成API。前提条件 配置API前，请先在 工作空间管理>数据源管理 页面配置数据源。详情请参见 配置数据源...
jsoncpp
更正文档 概述 JSON是一种轻量级的数据交换格式。它可以表示数字，字符串，值的有序序列以及名称/值对的集合。JsonCpp是一个C+库，它允许处理JSON值，包括在字符串之间进行序列化和反序列化。它还可以在反序列化/序列化步骤中保留现有注释...
UDT示例
cast(gson.fromJson('["a","b","c"]',List.class)as List)-反序列化JSON字符串，注意Gson的接口，直接反序列化后是List类型，这里强制转换成List，方便后续使用。from@a;相比于内建函数 字符串函数，该方法不仅使用方便，还会在提取JSON...
- 产品推荐
- 这些文档可能帮助您