数据倾斜调优
本文为您介绍使用MaxCompute过程中常见的数据倾斜场景以及对应的解决方案。MapReduce 在了解数据倾斜之前首先需要了解什么是MapReduce，MapReduce是一种典型的分布式计算框架，它采用分治法的思想，将一些规模较大或者难以直接求解的问题...
范围类型
subtype 差异函数采用两个 subtype 输入值，并且返回表示为一个 float8 值的差（即 X 减 Y）。在我们上面的例子中，可以使用常规 float8 减法操作符之下的函数。但是对于任何其他 subtype，可能需要某种类型转换。还可能需要一些关于如何把...
BE参数配置
主要起以下两个作用：当建表的storage_format设置为Default时，通过该配置来选取BE的存储格式。进行Compaction时选择BE的存储格式。delete_worker_count 默认值：3 说明：执行数据删除任务的线程数。disable_mem_pools 默认值：false 说明...
实时数仓Hologres
本文为您介绍如何使用实时数仓Hologres连接器。背景信息 实时数仓Hologres 是一站式实时数据仓库引擎，支持海量数据实时写入、实时更新、实时分析，支持标准SQL（兼容PostgreSQL协议），支持PB级数据多维分析（OLAP）与即席分析（Ad Hoc）...
数学函数和操作符
每一种这样的函数都有两个变体，一个以弧度度量角，另一个以角度度量角。三角函数 acos(double precision)→double precision 反余弦，结果为弧度 acos(1)→0 acosd(double precision)→double precision 反余弦，结果为度数 acosd(0.5)→...
维度建模
本文从维度建模的基本概念以及工具实践两方面为您介绍如何使用维度建模。维度建模储备知识介绍 基本概念 说明 智能建模强依赖于Kimball维度建模理论，请您在实际操作前务必阅读一下数仓分层和维度建模中的基本概念。维度建模：关于维度建模...
COPY
当前可以把一个数据回车表示为一个反斜线和回车，把一个数据新行表示为一个反斜线和新行。不过，未来的发行可能不会接受这些表示。如果在不同的机器之间（例如从 Unix 到 Windows）传输 COPY 文件，它们也很容易受到破坏。COPY TO 将用一个...
WITH查询（公共表表达式）
我们可以项这个有循环倾向的查询增加两个列 path 和 cycle：WITH RECURSIVE search_graph(id,link,data,depth,path,cycle)AS(SELECT g.id,g.link,g.data,1,ARRAY[g.id],false FROM graph g UNION ALL SELECT g.id,g.link,g.data,sg.depth+1...
值表达式
一个标量子查询 一个数组构造器 一个行构造器 另一个在圆括号（用来分组子表达式以及重载优先级）中的值表达式 在这个列表之外，还有一些结构可以被分类为一个表达式，但是它们不遵循任何一般语法规则。一个例子是 IS NULL 子句。列引用 ...
JSON类型
不过，实际上这类问题更可能发生在其他实现中，因为把 JSON 的 number 基本类型表示为 IEEE 754 双精度浮点是很常见的（这也是 RFC 7159 明确期待和允许的）。当在这类系统间使用 JSON 作为一种交换格式时，应该考虑丢失数字精度的风险。...
日期/时间类型
本数据库从来不会在确定文字串的类型之前检查其内容，因此会把上面两个都看做是 timestamp without time zone。因此要保证把上面的文字当作 timestamp with time zone 看待，就要给它正确的显式类型：TIMESTAMP WITH TIME ZONE '2004-10-19...
执行计划
执行计划类似于一棵有节点的树，执行和阅读的顺序是自底而上。计划中的每个节点表示一个操作，例如表扫描、表连接、聚集或者排序。阅读的顺序是从底向上：每个节点会把结果输出给直接在它上面的节点。一个计划中的底层节点通常是表扫描操作...
如何支持超大事务
接着，创建另一个表tb2，表结构和数据与tb完全一致。此时，每个表的大小约为16 GB。最后，创建一个临时表tmp，其表结构和tb也相同，然后开启事务，执行下面的语句：INSERT INTO tmp SELECT tb.id,tb.c FROM tb,tb2 WHERE tb.c=tb2.c AND tb...
控制结构
从一个函数返回 有两个命令让我们能够从函数中返回数据：RETURN 和 RETURN NEXT。RETURN RETURN expression;带有一个表达式的 RETURN 用于终止函数并把 expression 的值返回给调用者。这种形式被用于不返回集合的PL/SQL函数。如果一个函数...
CREATE TABLE
CREATE TABLE 用于在当前数据库中创建一个新的、初始为空的表。简介 CREATE TABLE 将在当前数据库中创建一个新的、初始为空的表。该表将由发出该命令的用户所拥有。如果给定了一个模式名（例如 CREATE TABLE myschema.mytable.），那么该表...
复杂类型函数
ARRAY_INTERSECT 计算两个ARRAY数组的交集。ARRAY_JOIN 将ARRAY数组中的元素按照指定字符串进行拼接。ARRAY_MAX 计算ARRAY数组中的最大值。ARRAY_MIN 计算ARRAY数组中的最小值。ARRAY_NORMALIZE 返回根据指定p范数（p Norm）对数组元素规范...
系统信息函数和运算符
如果一个服务器进程持有一个与被阻塞进程的锁请求冲突的锁（硬阻塞），或者正在等待一个与被阻塞进程的锁请求冲突并且在等待队列中位于其前面的锁（软阻塞），那么这个服务器进程就会阻塞另一个服务器进程。当使用并行查询时结果总是列出...
SELECT
RECURSIVE 的另一个效果是 WITH 查询不需要被排序：一个查询可以引用另一个在列表中比它靠后的查询（循环引用或者互递归没有实现）。如果没有 RECURSIVE，WITH 查询只能引用在 WITH 列表中位置更前面的兄弟 WITH 查询。当 WITH 子句中有多...
数据类型格式化函数
在 to_date、to_number 以及 to_timestamp 中，文本和双引号字符串会导致跳过该字符串中所包含的字符数量，例如"XX"会跳过两个输入字符（不管它们是不是 XX）。说明 在本数据库 12 之前，可以使用非字母或非数字字符跳过输入字符串中的任意...
DBMS_LOB
COMPARE(lob_1,lob_2[,amount[,offset_1[,offset_2]]])函数 INTEGER 在给定的长度和偏移范围内，对两个大对象进行逐字节的精确比较。CONVERTOBLOB(dest_lob IN OUT,src_clob,amount,dest_offset IN OUT,src_offset IN OUT,blob_csid,lang_...
INSERT
当底层索引被以重叠方式替换成另一个或多或少等效的索引时，推断将能继续正确地工作，例如在删除要被替换的索引之前使用 CREATE UNIQUE INDEX.CONCURRENTLY。输出 成功完成时，INSERT 命令会返回以下形式的命令标签：INSERT oid count ...
新版合并请求
说明 对比Codeup老版合并请求优势如下：通过“版本差异”视图，可以直观地看到两个不同分支或提交序列的差异（这比通过传统的 git diff 更易于理解，因为 git diff 通常只展示两个特定状态之间的差异，而不是一系列变更之间的差异）；...
输入和输出
[local10,local11])} func step2(input2 Input)(output2 Output){ } func step3(input3 Input)(output3 Output){ } func step4(input4 Input)(output4 Output){ } 在这个例子中，流程包含了两个子步骤：step1 和 step4。step1 是一个并行...
RDS MySQL 5.6开放参数一览表
参数名称 大版本 是否动态参数 默认值 取值范围 小版本范围 中文描述 automatic_sp_privileges 5.6 1 ON[ON|OFF]无限制 当该变量的值为ON（默认值）时，如果用户无法执行、修改或删除存储过程，则服务器会自动授予创建者执行和修改存储过程...
JSON函数和操作符
另一个维度的成员数为二维，每个内部数组恰好有两个元素，它们被视为键/值对。所有值都转换为JSON 字符串。json_object(text[])→json jsonb_object(text[])→jsonb json_object('{a,1,b,"def",c,3.5}')→{"a":"1","b":"def","c":"3.5"} ...
聚集函数
聚集函数从一个输入值的集合计算出一个单一值。支持部分模式的聚合函数具备参与各种优化的条件，例如并行聚合。通用聚集函数 array_agg(anynonarray)→anyarray 将所有输入值，包括空值，收集到一个数组中。No array_agg(anyarray)→...
PolarDB HTAP实时数据分析技术解密
本文介绍IMCI背后的技术路线和具体方案。背景信息 PolarDB MySQL版 是因云而生的一个数据库系统。除云上OLTP场景外，大量客户也对PolarDB提出了实时数据分析的性能需求。对此，PolarDB技术团队提出了In-Memory Column Index（IMCI）的技术...
ECS实例数据传输的实现方式
当您需要为云服务器ECS进行软件部署、数据备份和恢复、数据导入和导出等操作时，您可以使用类Unix/Linux平台上常用的文件传输工具实现。本文通过介绍文件传输的基本原理，以及常用的NETCAT、SCP和Rsync文件传输工具，您可以根据实际需要...
SelectObject
未编码前的值最多为两个字符，以字符的ANSI值表示，例如在Java中使用 表示换行。子节点：None 父节点：CSV（输入、输出），JSON（输出）FieldDelimiter 字符串 指定CSV列分隔符，以Base64编码。默认值为,（可选）。未编码前的值必须为一个...
电子表格支持函数说明
RANDBETWEEN 返回介于两个整数之间（包括这两个整数）的随机数。ROMAN 将数字格式设置为罗马数字形式。ROUND 按标准规则，将数值的指定小数位之后的部分四舍五入。ROUNDDOWN 将数值舍入到指定的小数位数，一概向下进行舍入。ROUNDUP 将数值...
数组类型
array_dims-[1:5][1:2](1 row)当一个 N 维数组被放在另一个 N+1 维数组的前面或者后面时，结果和上面的例子相似。每一个 N 维子数组实际上是 N+1 维数组外维度的一个元素。例如：SELECT array_dims(ARRAY[1,2]|ARRAY[[3,4],[5,6]]);array_...
数字类型
一个这种列将不会把输入值转化成任何特定的比例，而带有比例声明的 numeric 列将把输入值转化为该比例（SQL 标准要求缺省的比例是 0，即转化成整数精度。我们觉得这样做有点没用。如果你关心移植性，那你最好总是显式声明精度和比例）。...
模式匹配
另一个非标准扩展是，在转义字符后面跟着一个字母或数字提供了对为 POSIX 正则表达式定义的转义序列的访问；参见下面的正则表达式字符项逃逸表，正则表达式类缩写逃逸表，和正则表达式约束逃逸表。一些例子：'abc' SIMILAR TO 'abc' true '...
使用EXPLAIN阅读查询计划
查询优化器使用数据库的数据统计信息来选择具有最小总代价的查询计划，查询代价通过磁盘I/O取得的磁盘页面数作为单位来度量。可以使用EXPLAIN和EXPLAIN ANALYZE语句发现和改进查询计划。EXPLAIN的语法如下：EXPLAIN[ANALYZE][VERBOSE]...
词法结构
一个美元引用的字符串常量由一个美元符号（$）、一个可选的另个或更多字符的“标签”、另一个美元符号、一个构成字符串内容的任意字符序列、一个美元符号、开始这个美元引用的相同标签和一个美元符号组成。例如，这里有两种不同的方法使用...
函数（Functions）
Fn:Join只能把多个字符串拼接成一个字符串，而Fn:Sub可以把多个字符串或数字拼接成字符串，更为简洁和直观，因此推荐您使用Fn:Sub。声明 Fn:Join:delimiter-string1-string2-.参数 delimiter：分隔符。分隔符可以为空，表示将所有的值直接...
概述
因此这个查询的行为会不同于 x<->z&y<->z，它将匹配一个含有两个单独序列 x z 以及 y z 的文档（这个特定的查询一点用都没有，因为 x 和 y 不可能在同一个位置匹配，但是对于前缀匹配模式之类的更复杂的情况，这种形式的查询就会有用武之地...
我是系统集成商
业务实体定义 进入 系统管理 和 业务实体访问，将列出所有系统中的业务实体，可以单击 新建业务实体：在新页面中新建业务实体名称、编码、类型以及联系地址和描述，其中业务实体类型分成内部组织、供应商和客户，对于设备制造厂商通过工业...
约束
我们将前两个约束称为列约束，而第三个约束为表约束，因为它独立于任何一个列定义。列约束也可以写成表约束，但反过来不行，因为一个列约束只能引用它所依附的那一个列（本数据库并不强制要求这个规则，但是如果我们希望表定义能够在其他...
高效基因序列检索助力快速分析肺炎病毒
因此，生物科学家们采用词向量算法对基因序列单元进行向量化，两个基因单元相似度很高，说明需要这两个基因单元共同来表达和完成相应的功能。总体而言，AnalyticDB MySQL版 基因向量抽取算法分为三步：在氨基酸序列中定义词 生物信息学中用...
- 产品推荐
- 这些文档可能帮助您