负载均衡
PolarDB MySQL版 提供了 事务写前读拆分（默认值，即原来的事务拆分功能）和 事务全（写前读、写后读）拆分 两个级别的事务拆分能力：事务写前读拆分 Proxy会将事务中第一个写请求前的读请求发送到只读节点，从而减轻主节点的负载。...
UploadDocumentAsync-异步上传文档
{"title":"mytitle","page":1} ChunkSize integer 否 处理大型数据的切分策略：数据拆分成较小的部分时每个块的大小。最大值 2048。250 ChunkOverlap integer 否 处理大型数据的切分策略：在分块处理时，连续的块之间重叠的数据量。最大值...
数据集拆分
支持随机拆分和前后拆分两种方式。计算逻辑原理 随机拆分：按照拆分比例随机将输入数据集拆分成两个不同的数据集。前后拆分：按照拆分比例从前往后按顺序将输入数据集拆分成两个不同的数据集。参数说明 IN端口-输入参数 参数名 参数描述 ...
数据操作篇
这时候可以考虑将这个表拆分为两个，一个表存储商品数量和商品价格，另一个表存储商品简介。压缩较大的属性列文本 如果属性列是较大的文本，应用程序可以考虑将属性列压缩之后再以 Binary 类型存储到表格存储中。这样做节省了空间、减少了...
数据库代理发布记录
当前 PolarDB MySQL版 数据库代理包含 1.x.x 和 2.x.x 两大版本，两个版本的区别如下：1.x.x 2021年2月1日前创建的集群下的数据代理版本，该版本不再进行新功能迭代开发，只进行问题修复。2.x.x 2021年2月1日（包含）后新创建的集群下的...
Quick BI报表中新建的计算字段有部分值为空
问题描述 Quick BI报表中新建的计算字段有部分值为空是什么原因？问题原因 空值字段相加后的结果也是空值。解决方案 对引用字段的空值进行处理，比如值为空时置为0。适用于 Quick BI
CREATE TABLE（DRDS模式）
您可以先根据ID列的值进行哈希运算，将表中数据分布在多个子库中，每个子库中的数据再根据bid列值的哈希运算结果分布在3个物理表中。CREATE TABLE multi_db_multi_tbl(id bigint not null auto_increment,bid int,name varchar(30),primary...
专属KMS应用部署
将CA证书文件拆分为2个证书文件。CA证书文件内容有两部分，均以-BEGIN CERTIFICATE-开头，以-END CERTIFICATE-结尾。第一部分为rootca.pem的内容，第二部分为subca.pem的内容。文件1：rootca.pem-BEGIN CERTIFICATE-...
文本摘要训练
模型结构 文本（新闻标题）摘要训练组件的模型结构采用标准的Transformer结构，包括Encoder和Decoder两部分，分别表示对文本进行编码和解码。在具体训练的过程中，模型的输入为新闻原文，目标为新闻的标题。使用说明 您可以在文本摘要训练...
聚合优化和执行
'))")SortAgg可以通过如下Hint语句来关闭：/*+TDDL:cmd_extra(ENABLE_SORT_AGG=false)*/两阶段聚合优化 将聚合运算拆分为部分聚合（Partial Agg）和最终聚合（Final Agg）两个阶段，先对部分结果集做聚合，然后将这些部分聚合结果汇总，...
字符串函数
拆分 request_uri 字段的值并返回第一个子串（即文件路径部分），然后统计不同路径对应的请求数量。字段样例 request_uri:/request/path-2/file-6?name=value&age=18 request_uri:/request/path-2/file-0?name=value&age=18 request_uri:/...
通用联邦学习模板
step 2 数据拆分：将数据拆分为训练集和测试集，用于验证模型的各项指标数据。note：在模板中，选择了拆分比例80%，即80%数据用于训练（输出表1），20%数据用于测试（输出表2）。用户可自行调整需求。step 3 训练侧特征工程：选择和提取...
业产技融合分层协作方案
如果将需求拆分为两个技术任务，分给前端和后端，就比较容易区分。小结：业产技分层协作方案希望解决的是让业务、产品、技术团队清晰地看到产品交付的价值，用价值将团队聚合成一个整体。业务团队建立业务空间，管理原始业务诉求。这些诉求...
创建索引
如果设置分词符为正斜线（/），则原始日志被拆分为 url、pic 和 abc.gif 三个词，您通过任意一个词或词的模糊查询都可以找到该日志，例如 url、abc.gif、pi*、/url/pic/abc.gif。如果设置分词符为正斜线（/）和半角句号（.），则原始日志被...
支持的函数
STR_TO_MAP(string1[,string2,string3])使用分隔符将string1拆分为键值对后返回一个 map。SUBSTR(string[,integer1[,integer2]])返回字符串的子字符串，从位置integer1开始，长度为integer2。时间函数 DATE string 以yyyy-MM-dd的形式返回...
Map映射函数和运算符
示例 日志服务数据加工日志中 etl_context 字段值和 progress 字段值都为map类型，您可以使用map_concat函数将这两个字段值合并为一个Map。字段示例 etl_context:{ project:"datalab-148*6461-...
字符串函数
REGEXP_EXTRACT 将字符串按照指定规则拆分为组后，返回指定组的字符串。REGEXP_INSTR 返回字符串从指定位置开始，与指定规则匹配指定次数的子串的起始或结束位置。REGEXP_REPLACE 将字符串中，与指定规则在指定次数匹配的子串替换为另一...
内建函数概述
FROM_UNIXTIME 将数字型的UNIX值转换为日期值。GETDATE 获取当前系统时间。ISDATE 判断一个日期字符串能否根据指定的格式串转换为一个日期值。LASTDAY 获取日期所在月的最后一天。TO_DATE 将指定格式的字符串转换为日期值。TO_CHAR 将日期...
优化聚合与排序
两阶段聚合优化 两阶段聚合，即通过将Agg拆分为部分聚合（Partial Agg）和最终聚合（Final Agg）的两个阶段，先对部分结果集做聚合，然后将这些部分聚合结果汇总，得到整体聚合的结果。例如下面的 SQL 中，HashAgg 中拆分出的部分聚合...
CREATE TABLE
如果新表显式地为列指定了任何默认值，这个默认值将覆盖来自该列继承声明中的默认值。否则，任何父表都必须为该列指定相同的默认值，或者会报告一个错误。CHECK 约束本质上也采用和列相同的方式被融合：如果多个父表或者新表定义中包含相同...
从RDS同步至MaxCompute
UPDATE 当操作类型为UPDATE时，DTS会将UPDATE操作拆为两条增量日志。这两条增量日志的record_id、operation_flag及utc_timestamp对应的值相同。第一条增量日志记录了更新前的值，所以before_flag取值为Y，after_flag取值为N。第二条增量...
画像分析-RoaringBitmap优化方案
Bitmap 加工和查询 依据上述方案按列拆分的思路，将 dws_userbase 表与 dws_shop_cust 表进行拆分，按照分别为省份、性别的列Bitmap拆分为一个表，但是性别只有男、女两个选项，压缩出来的Bitmap只能分布于集群中的两个节点，计算存储都很...
字符串函数
KEYVALUE_TUPLE 将字符串拆分为多个Key-Value对，并将Key-Value对分开，返回多个Key对应的Value。LENGTH 计算字符串的长度。LENGTHB 计算字符串以字节为单位的长度。LOCATE 在字符串中查找另一指定字符串的位置。LPAD 将字符串向左补足到...
查询语法
JSON类型 针对JSON对象中的字段，您可根据其值，将数据类型设置为long、double或text，并开启统计功能。根据JSON对象中的字段的类型使用不同的运算符。运算符 重要 in运算符只能小写，其他运算符不区分大小写。日志服务保留以下运算符的...
数据问答最佳实践
星型结构：将数据分为事实表和维度表（数量>3张）两部分，事实表记录了数据的度量值，维度表则记录度量值的维度信息。不支持的问答能力：复杂的多列查询且很难使用一条查询语句获取数据的。如：参与航天日直播活动中奖的有几个人，分别是谁...
排查Redis实例内存使用率高的问题
Redis实例的内存开销主要由两部分组成：业务数据的内存开销，该部分一般作为重点分析对象。非业务数据的内存开销，例如主备复制的积压缓冲区、Redis进程初始化消耗的内存等。返回示例及各参数对应的解释如下：说明 下述返回信息中，内存...
流程质检规则创建
例如：我们需要将流程拆分为按售前投诉和售后投诉两条分支，在对话中缺少判断信息情况下，结合参数节点，对业务系统回传的订单号字段判断是否为空，就可以实现这个需求。3).触发节点 功能说明：通过配置不同组合的触发条件，前置定义不同的...
专属KMS Java SDK
将CA证书文件拆分为2个证书文件。CA证书文件内容有两部分，均以-BEGIN CERTIFICATE-开头，以-END CERTIFICATE-结尾。默认第一部分为rootca.pem的内容，第二部分为subca.pem的内容。文件1：rootca.pem-BEGIN CERTIFICATE-...
专属KMS Java SDK
将CA证书文件拆分为2个证书文件。CA证书文件内容有两部分，均以-BEGIN CERTIFICATE-开头，以-END CERTIFICATE-结尾。默认第一部分为rootca.pem的内容，第二部分为subca.pem的内容。文件1：rootca.pem-BEGIN CERTIFICATE-...
数据加工
合并 合并用于将两张表合并为一张表，合并的数据在行上扩展。合并节点用于将数据输入1节点和数据输入2节点中，名称相同的字段进行合并。从左侧的节点操作区，拖拽 合并 至画布区。连接需要合并的节点。配置合并节点。此时，合并节点中的...
SKEWJOIN HINT
当两张表Join存在热点，导致出现长尾问题时，您可以通过取出热点key，将数据分为热点数据和非热点数据两部分处理，最后合并的方式，提高Join效率。SkewJoin Hint可以通过自动或手动方式获取两张表的热点key，分别计算热点数据和非热点数据...
列运算
todict 将字符串按分隔符拆分为一个Dict，传入的两个参数分别为项目分隔符和Key-Value分隔符（返回dict,string>类型）。strptime 格式化时间，时间格式和Python标准库相同，详情请参见 Python 时间格式化。时间相关操作 对于DATETIME类型...
PolarDB-X 2.0同步至DataHub
如果增量日志的操作类型为UPDATE，那么增量更新会被拆分成两条记录（分别记录更新前和更新后的值），且 dts_record_id 的值相同。dts_operation_flag new_dts_sync_dts_operation_flag String 操作类型，取值：I：INSERT操作。D：DELETE...
SKEWJOIN HINT
当两张表Join存在热点，导致出现长尾问题时，您可以通过取出热点key，将数据分为热点数据和非热点数据两部分处理，最后合并的方式，提高Join效率。SkewJoin Hint可以通过自动或手动方式获取两张表的热点key，分别计算热点数据和非热点数据...
PolarDB MySQL版同步至DataHub
通过数据传输服务DTS（Data Transmission Service），您可以将 PolarDB MySQL版 集群同步至 阿里云流式数据服务DataHub，实现增量数据的实时同步，帮助您快速实现使用流计算等大数据产品实时分析数据。前提条件 创建源 PolarDB MySQL版 ...
配置监控告警
最多支持1万个维值组合，超过部分将不做监控。设置完成度量目标后，您还可以对 监控检测时 间进行选择。支持 每小时、每天、每周、每月 四种粒度方式。除每小时粒度之外，其他三种粒度 方式均支持多选。同时您可以设置是否开启 波动分析，...
V5.1.x系列实例版本说明
新增拆分函数UNI_HASH能让分库数一样的两张表的JOIN保持为非跨库JOIN，不再受到分表数目的影响。增加支持ISNULL()函数。支持只读库因同步延迟过大自动切断流量并回流主库的功能。性能优化 优化权限相关的SQL错误提示，与MySQL保持一致。...
消息过滤
消费者订阅了某个主题后，云消息队列 RocketMQ 版 会将该主题中的所有消息投递给消费者。若消费者只需要关注部分消息，可通过设置过滤条件在 云消息队列 RocketMQ 版 服务端进行过滤，只获取到需要关注的消息子集，避免接收到大量无效的...
迁移时源库为PostgreSQL的注意事项及限制
如为增量迁移任务，DTS要求源数据库的WAL日志保存24小时以上，如为全量迁移和增量迁移任务，DTS要求源数据库的WAL日志至少保留7天以上（您可在全量迁移完成后将WAL日志保存时间设置为24小时以上），否则DTS可能因无法获取WAL日志而导致任务...
v3 API 签名机制
schema_demo/tab/actions/bulk 构建 query 部分 query 部分由查询参数构成，参数为键值对形式 为需要指定的查询参数设置对应的参数值，并去掉value为空的参数（value为空的参数不计算签名）再对每一个参数按照先比较 参数名 后比较 参数值 ...
- 产品推荐
- 这些文档可能帮助您