公告
本文为您提供关于MaxCompute使用功能的各项更新记录。DataWorks独享资源组PyODPS节点升级公告 尊敬的MaxCompute用户：DataWorks将于北京时间 2024年03月11日（周一）至 2024年04月25日（周四）期间，逐步升级各个地域的独享资源组，以增强...
PolarDB MySQL版5.6版本发布日志
2020-11-12 问题修复 修复SELECT语句在使用DYNAMIC RANGE AND INDEX MERGE情况下出现OOM（Out Of Memory）的问题。修复某些情况下创建或删除账号导致集群崩溃的问题。修复某些情况下无法重连STANDBY节点的问题。修复当主备切换发生异常时...
字符串函数
返回结果如下：+-+|export_set(5,'a','b',',',2)|+-+|a,b|+-+将6转换为二进制，从右至左取其前十位的值，其中1用 1 表示，0用 0 表示，1 和 0 之间用逗号（,）分隔，语句如下：SELECT export_set(6,'1','0',',',10);返回结果如下：+-+|...
cplusplus
task1 count 9 demo_task1 lock demo_task2 count 9 demo_task1 unlock demo_task2 lock demo_task2 unlock demo_task2 count 4 注意事项 说明 rtti_test.cpp测试依赖打开rtti功能（dynamic_cast或typeid），因此不能使用-fno-rtti编译选项...
域名配置功能函数
off dynamic_route_adapt_cache String 否 是否开启自适应缓存开关：on：开启。off（默认）：关闭。off 配置示例：{"Functions":[{"functionArgs":[{"argName":"enable","argValue":"on"},{"argName":"static_route_type","argValue":".txt...
在DTS迁移或同步任务中配置ETL
本文介绍在DTS链路内配置ETL的操作步骤及相关语法信息，帮助您在数据过滤、数据脱敏、记录数据修改时间和数据变更审计等场景下使用ETL功能。背景信息 DTS是一个数据迁移和同步服务，通常用于数据搬迁或实时数据传输。但有时候用户有数据...
对话知识抽取
说明 本服务由NLP自学习平台提供，直接调用API即可使用。服务开通与资源包购买 使用前，请确认是否已经开通服务，开通后可购买资源包。服务开通：开通地址 购买资源包：购买地址 服务调用与调试 模型调用文档参考：模型调用 SDK示例文档...
数据类型
SQL字段类型 目前SQL支持的字段类型主要分为三类：AtomicType:基本原子类型 ArrayType:对应于多值字段，内部包含一个AtomicType MultiSetType:对应于子表，内部包含多个...如果存在类型不一致的场景，可以使用CAST操作符来转换类型；
数据类型
SQL字段类型 目前SQL支持的字段类型主要分为三类：AtomicType:基本原子类型 ArrayType:对应于多值字段，内部包含一个AtomicType MultiSetType:对应于子表，内部包含多个...如果存在类型不一致的场景，可以使用CAST操作符来转换类型；
typeconv-func
被一个函数调用引用的特定函数使用下面的过程来决定。函数类型决定 从 pg_proc 系统目录中选择要被考虑的函数。如果使用一个非模式限定的函数名称，那么函数被认为是那些在当前搜索路径中可见并有匹配的名字和参数个数的函数。如果给出一个...
词法结构
例如，想要显式指定数据库db中的表tbl时，可以用 db.tbl 来指定。重要 在SQL词法解析层面，对于标识符的约束条件仅有以上这些。但是将这些标识符用作具体语义时，需遵循对应存储引擎的相关约束。具体如下：Lindorm宽表引擎：通用限制。...
不兼容SQL重写
Warning信息 WARNING:[1,48]implicit conversion from STRING to DOUBLE,potential data loss,use CAST function to suppress 推荐改法 select*from t1 join t2 on t.double_value=cast(t2.string_value as double);window.ref.prev.window...
关键缺陷通知
当查询仅涉及Shard数据，且使用了PQE或SQE执行MaxCompute外部表或数据湖外部表的查询时，查询完成后不会系统主动触发资源回收，只能使用Query Master的垃圾回收机制来回收资源。当Query Master压力较大时，查询操作会因退出延迟而占用大量...
命令行工具详情
介绍如何使用DashScope python命令行工具进行模型定制 前言 为了方便您使用模型定制功能，我们提供了python命令行工具，本文档介绍模型定制python命令行的详细使用方式 使用命令行进行模型定制及部署 前提条件 已开通服务并获得API-KEY：...
数据倾斜调优
本文为您介绍使用MaxCompute过程中常见的数据倾斜场景以及对应的解决方案。MapReduce 在了解数据倾斜之前首先需要了解什么是MapReduce，MapReduce是一种典型的分布式计算框架，它采用分治法的思想，将一些规模较大或者难以直接求解的问题...
步骤一：部署客户端
本实践选择gRPC TLS建立客户端和TensorFlow Serving之间的通信连接，并设置TensorFlow Serving域名来创建单向TLS Keys和证书，用来建立安全通信通道。该脚本将会创建ssl_configure文件夹，里面包含server和client相应的证书。service_...
收发事务消息
pthread_create(&thread,NULL,consumeHalfMessageThread,static_cast*>(&transProducer));endif try { for(int i=0;i;i+){ PublishMessageResponse pmResp;TopicMessage pubMsg("Hello,mq,trans_msg!pubMsg.putProperty("a",std:to_...
SQL诊断
基于慢Query日志的数据，Hologres提供SQL诊断的能力，通过对不同维度的趋势、明细分析，可以辅助您了解实例的使用情况并做相应的优化，以达到更好的效果。本文为您介绍如何使用SQL诊断。功能介绍与建议 当前SQL诊断支持的诊断内容如下：...
基于GitHub公开事件数据集的离线实时一体化实践
INSERT into TABLE dwd_github_events_odps PARTITION(ds)SELECT CAST(GET_JSON_OBJECT(col,'$.id')AS BIGINT)AS id,CAST(GET_JSON_OBJECT(col,'$.actor.id')AS BIGINT)AS actor_id,GET_JSON_OBJECT(col,'$.actor.login')AS actor_login,...
基于GitHub公开事件数据集的离线实时一体化实践
INSERT into TABLE dwd_github_events_odps PARTITION(ds)SELECT CAST(GET_JSON_OBJECT(col,'$.id')AS BIGINT)AS id,CAST(GET_JSON_OBJECT(col,'$.actor.id')AS BIGINT)AS actor_id,GET_JSON_OBJECT(col,'$.actor.login')AS actor_login,...
聚集函数
默认情况下，这种排序是不指定的，但可以通过在聚合调用中写入 ORDER BY 子句来控制。或者，从排序的子查询提供输入值通常也可以。例如：SELECT xmlagg(x)FROM(SELECT x FROM test ORDER BY y DESC)AS tab;注意，如果外部查询级别包含其他...
2021年
同时MaxCompute可以支持用过滤条件来筛选需要清空数据的分区。2021-11-23 全部地域 清空分区数据 MaxCompute集成网易有数BI工具（商业化）发布 MaxCompute集成网易有数BI无缝对接，支持网易有数BI对MaxCompute直连场景下BI分析，同时可以...
Range Clustering
又可以用组合键来精确定位某张表，示例命令如下：SELECT count(*)from mf_project.mf_tab WHERE project_name="xxxdw"AND name="adm_ctu_cle_kba_midun_trade_dd"AND type="TABLE;甚至可以用于区域查询，比如统计以 adm 开头的表：SELECT ...
使用EXPLAIN阅读查询计划
查询优化器使用数据库的数据统计信息来选择具有最小总代价的查询计划，查询代价通过磁盘I/O取得的磁盘页面数作为单位来度量。可以使用EXPLAIN和EXPLAIN ANALYZE语句发现和改进查询计划。EXPLAIN的语法如下：EXPLAIN[ANALYZE][VERBOSE]...
执行计划
Dynamic Table Scan—使用一个分区选择函数来选择分区。Function Scan节点包含分区选择函数的名称，可以是下列之一：gp_partition_expansion：选择表中的所有分区。gp_partition_selection：基于一个等值表达式选择一个分区。gp_partition_...
规则vs触发器
许多触发器可以干的事情同样也可以用PostgreSQL规则系统来实现。目前不能用规则来实现的东西之一是某些约束，特别是外键。可以放置一个合格的规则在一列上，这个规则在列的值没有出现在另一个表中时把命令重写成 NOTHING。但是这样做数据就...
插入或覆写数据（INSERT INTO|INSERT OVERWRITE）
本文中的命令您可以在如下工具平台执行：MaxCompute客户端 使用SQL分析连接 使用云命令行（odpscmd）连接 使用DataWorks连接 MaxCompute Studio 前提条件 执行 insert into 和 insert overwrite 操作前需要具备目标表的更新权限（Update）...
Quick BI仪表板想展示小数点后4位小数，数据集设置...
概述 Quick BI仪表板想展示小数点后4位小数，数据集设置展示为4位小数，查看SQL的话展示decimal(15,3)。详细信息 这种情况是因为字段本身类型不是数字，而是在数据集上...针对该情况，可以写计算字段用CAST()函数来解决。适用于 Quick BI v4.5
typeconv-oper
我们可以用一个显式造型来帮助它：SELECT~CAST('20' AS int8)AS"negation;negation-21(1 row)示例4 数组包含操作符类型决定 这里是另一个决定带有一个已知和一个未知输入的操作符的例子：SELECT array[1,2],2,3}' as"is subset;is subset-t...
AWS只读权限脱敏
背景 当前AWS提供的只读权限策略可以访问 S3 等存储产品的业务数据，用户为了避免业务数据的泄露，需要一个更小权限的策略来实现业务数据的隔离。方案 基于原有AWS 管理的只读权限策略（ReadOnlyAccess），通过自定义策略拒绝数据库/存储等...
Hints
很多客户希望用’,’而不是’|’作为分隔符，因为’,’本身有特殊语义，目前通过[,]来转义，比如 result-col-del=[,],result-row-del=\r 有时候我们使用同步查询的时候也想把结果保存一份到OSS上，可以用这个hint：force-persist-result=...
重载子程序
根据限定符的使用及执行子程序调用的位置，可以单独调用每个子程序，如前面章节所述。但是，只要形参的某些方面不同，就可以声明具有相同子程序类型和名称的子程序，即使是同辈。这些特征（子程序类型、名称、和形参规格）通常称为程序签名...
复杂类型函数
您可以在MaxCompute SQL中使用复杂类型函数处理复杂数据类型，例如ARRAY、MAP、STRUCT、JSON。本文为您提供MaxCompute SQL支持的复杂类型函数的命令格式、参数说明及示例，指导您使用复杂类型函数完成开发。MaxCompute SQL支持的复杂类型...
Forall and Bulk Collect
比如用户提交一个数组，要求PL/SQL将这个数组的元素一条条插入到表里面，或者拿来更新表里面的值，又或是删除表里的值。解决方案 类似Oracle FORALL的批量插入用法，用一个数组表示条件，另一个数组表示VALUE如果有多个条件或者value时，...
云消息队列 RocketMQ 版
RocketMQ 5.x请使用结果表属性字段来指定写出消息的 tag。nameServerSubgroup NameServer组。String 否 无 内网服务（阿里云经典网络或VPC）：必须配置 'nameServerSubgroup'='nsaddr4client-internal'。公网服务：无需配置 ...
JSON和JSONB类型
JSON和JSONB介绍 近年来随着移动端应用的普及，应用埋点、用户标签计算等场景开始诞生，为了更好的支撑这类场景，越来越多的大数据系统开始使用半结构化格式来存储此类数据，以获得更加灵活的开发和处理。常用的半结构化类型为JSON和JSONB...
使用OpenSSL动态引擎
您可以使用以下命令来验证它是否支持：openssl engine-c 如果OpenSSL支持动态引擎加载，你将得到一个类似于以下的响应："(dynamic)Dynamic engine loading support"RSA加密和解密程序 运行以下命令来导出环境变量。用CU用户的用户名替换 ...
创建MaxCompute投递任务（新版）
系统保留字段_extract_others_有曾用名_extract_others_，可兼容使用。MaxCompute分区列的值不支持配置为MaxCompute的保留字和关键字。更多信息，请参见 保留字与关键字。MaxComute分区表的分区不能为空。MaxCompute分区列必须要配置确定的...
改进版swing相似度计算算法
整数，默认值为1 do_supplement_by_adamic_adar 当相似item数量不足topN时，是否尝试用Adamic/Adar算法补足 boolean,默认值为true FQA 1.java.lang.ClassCastException:com.aliyun.odps.io.LongWritable cannot be cast to ...
文件分析
S3表函数会根据 use_path_style 参数来决定是否使用Path Style访问方式，默认为Virtual-hosted Style方式。必选参数。s3.access_key 访问S3的用户身份密钥。必选参数。s3.secret_key 访问S3的用户加密认证字符串。必选参数。s3.region 默认...
- 产品推荐
- 这些文档可能帮助您