路由算法
说明 若未配置路由算法，则在对逻辑表的数据进行操作时，会遍历逻辑表对应的每一个物理表，整体操作时间会成倍增加。路由算法由路由字段+算法组成。使用场景 分表数据查询 分表数据变更 分表数据导出 配置说明 您可通过目标逻辑库找到对应...
发送 HTTP 请求（Java）
填写入参，他是一个object可以将实体类作为参数传进来，若想使用query方式传参需要将参数拼接至gatewayUrl 注意：若api后端协议是SOFARPC/DUBBO入参必须和后端服务接口入参完成一直，否则会出现序列化失败或者找不到接口的情况，参数字段为...
列存索引中HashMatch算子的实现
设计方案 HashMatch实现主要分为build与probe两个阶段，其中build阶段将左表每一行按join谓词作为key构建出散列表，而probe阶段则遍历右表每一行并根据其对应的join谓词查找散列表，最终针对不同join类型依匹配结果输出对应结果集。...
PolarDB MySQL版8.0.2版本发布日志
2024-04-17 问题修复 修复Statement Outline和Concurrency Control等功能在执行Reload操作时，出现的内存泄漏的问题。修复左连接 INFORMATION_SCHEMA 库中的表时结果错误的问题。修复了当已创建DLM策略的表的表结构发生变更后，DLM策略仍能...
分析请求调用链路
背景信息 在应用运行过程中，当出现服务调用异常或资源访问失败时，开发人员通常会选择断点调试来排查问题。但断点调试在某些场景下并不适用，可能存在如下问题：缺乏整体调用概况：上层服务收到请求后，往往会拆分成多个子请求，最后将...
分析请求调用链路
背景信息 在应用运行过程中，当出现服务调用异常或资源访问失败时，开发人员通常会选择断点调试来排查问题。但断点调试在某些场景下并不适用，可能存在如下问题：缺乏整体调用概况：上层服务收到请求后，往往会拆分成多个子请求，最后将...
分析请求调用链路
背景信息 在应用运行过程中，当出现服务调用异常或资源访问失败时，开发人员通常会选择断点调试来排查问题。但断点调试在某些场景下并不适用，可能存在如下问题：缺乏整体调用概况：上层服务收到请求后，往往会拆分成多个子请求，最后将...
调度策略
如果第一个任务等待出队时间超过预定时间（一般为几分钟），则系统会按照 遍历策略 尝试对第一个任务和第二个任务进行出队操作。如果第二个任务等待出队时间也超过预定时间，系统会对第一个、第二个和第三个任务按照 遍历策略 尝试出队操作...
Python 3 UDAF
返回值为GENERATOR类型，调用者以遍历方式获取表的内容，每次遍历可得到以数组形式存在的表中的一条记录。具体使用方法请参见 引用资源（Python UDF 3）和 引用资源（Python UDTF 3）。使用说明 按照 开发流程，完成Python 3 UDAF开发后，...
什么是应用防护
目录遍历 网站自身的配置缺陷可能会使得网站目录被任意浏览，导致隐私信息泄露。攻击者可以利用该信息对网站进行攻击。请检查目录遍历操作是否正常。如果异常，请检查函数的代码，并通过黑名单对相关命令（如“./”和“./”）进行限制。...
AliSQL内核小版本发布记录
RDS MySQL 8.0.31(20230630）版本目前发现有稳定性风险，具体为用户执行INSTANT ADD/DROP COLUMNS操作后有概率会导致数据损坏、实例异常重启、备份失败等问题。详情请参见 Percona Xtrabackup 8.0.29 Troubleshoolt、MySQL 8.0 INSTANT ADD...
告警规则指标说明
指标维度 节点机IP，筛选条件如下：遍历：遍历每个节点机IP，针对每台节点机的指标数据单独进行监控告警。指定筛选固定的几台节点机进行监控告警。示例：=172.20.XX.XX。无维度：汇总所有节点机的指标数据，针对所有节点机的指标数据进行...
WAF目录遍历误拦截
问题描述 WAF报目录遍历误拦截。解决方案 目录遍历防护，如果出现误拦截，客户端IP在指定的 检测时间范围 内发起的 请求总次数超过 指定数量 且404响应码占比超过 指定比例。自动封禁在短时间内发起多次目录遍历攻击的客户端IP。如果用户...
Java线程栈分析-CPU利用率持续升高
URLClassLoader里面有个ucp(URLClassPath)，它记录了当前URLClassLoader类加载器加载了哪些jar包，在类加载过程中，它会遍历所有jar包，然后逐个打开jar包并查找里面是否存在期望的类。再结合业务同学的反馈，大概有500多个jar包，所以根据...
性能说明FAQ
问题现象 在执行目录遍历的操作中出现卡顿或无响应。例如，执行 ls 命令、包含通配符*?的操作、执行 rm-rf 命令及getdents系统调用等。原因分析 执行目录遍历操作时，如果此目录同时正在被修改（如创建、删除、重命名文件），目录遍历会...
向量召回过滤优化
但因为向量检索所扫描的点数是固定的（默认扫描1%的数据），如果满足filter条件的文档非常少，会出现结果数少甚至无结果的情况。为了召回结果，只能调整扫描比例，有时甚至需要扫描全部数据才有结果。但扫描比例提高后，查询耗时会增加很多...
Python SDK示例：Table
table=o.get_table('my_new_table')for partition in table.partitions:#遍历所有分区 print(partition.name)#具体的遍历步骤，这里是打印分区名 for partition in table.iterate_partitions(spec='pt=test'):#遍历 pt=test 分区下的二级...
热点行优化
减少B-tree索引的遍历 MySQL是以B-tree索引的方式管理数据的，每次执行查询时，都需要遍历索引才能定位到目标数据行，数据表越大，索引层级越多，遍历时间就越长。在前面提到的对更新操作进行分组的机制中，只有每组的Leader遍历索引定位...
创建报警
配置为遍历：会在报警内容中透出实际触发报警的维度内容。最近N分钟 报警判断最近N分钟内数据结果是否达到触发条件。N的范围为：1~60分钟。通知方式 支持邮件、短信、钉钉机器人和Webhook四种方式。可勾选多种方式。若需设置钉钉机器人报警...
创建报警
配置为遍历：会在报警内容中透出实际触发报警的维度内容。最近N分钟 报警判断最近N分钟内数据结果是否达到触发条件。N的范围为：1~60分钟。通知方式 支持邮件、短信、钉钉机器人和Webhook四种方式。可勾选多种方式。若需设置钉钉机器人报警...
PolarDB MySQL版CPU使用率高
例如：在进行 truncate table 操作时，MySQL要遍历 buffer pool 将 truncate 表的数据页全部驱逐。此时大规格的集群中，如果 innodb_buffer_pool_instances 配置为1并且并发相对较高的情况下，就有可能出现争抢问题。这个问题在业务上线...
for-each节点逻辑原理介绍
DataWorks为您提供遍历节点（for-each节点），您可以通过for-each节点来循环遍历赋值节点传递的结果集。同时您也可以重新编排for-each节点内部的业务流程。本文为您介绍for-each节点的组成与应用逻辑。使用说明 您可通过以下内容了解遍历...
Alibaba Cloud Linux 2系统的ECS实例无法正常删除Pod...
exit_to_usermode_loop+0x95/0x100[]do_syscall_64+0x178/0x1a0[]entry_SYSCALL_64_after_hwframe+0x44/0xa9 问题原因 在进程coredump发生前任务所在cgroup已经被挂起，进程coredump发生后所有线程进入了exiting状态，cgroup遍历会忽略此...
特殊用法
unique_pkey"NOTICE:DO-SELECT 的输出 id-1 2 3(3 rows)说明 当使用 FORALL 或 FOR 语句进行循环遍历集合变量时，需要考虑集合变量中是否存在 delete 过的占位符，以防出现访问出错的问题。INSERT/UPDATE 由于记录类型在PL/SQL中支持如下...
缓冲区管理
为高效推进一致性位点，PolarDB 的后台刷脏进程（bgwriter）采用先被修改的Buffer先落盘的刷脏策略，即bgwriter会从前往后遍历FlushList，逐个刷脏，一旦有脏页写入存储，一致性位点就可以向前推进。如上图所示，如果Oldest LSN为10的...
如何避免因cgroup引起的应用性能抖动？
问题现象 在容器相关的业务场景下，系统中的应用偶然会出现请求延时增大，并且容器所属宿主机的CPU使用率中，sys指标（内核空间占用CPU的百分比）达到30%及以上。例如，通过 top 命令查看Linux系统性能数据时，CPU的sy指标达到30%。top-16:...
Tair集群无感扩缩容
社区版Redis集群常见扩缩容方案与不足 社区版Redis集群弹性扩缩容 社区版Redis集群通过Gossip协议传递数据，以槽（Slot）为数据的最小集合，并以遍历（并迁移）Key的方式迁移单个Slot。但该方案存在如下问题：稳定性较差 数据按Key迁移，...
Tair集群无感扩缩容介绍
社区版Redis集群常见扩缩容方案与不足 社区版Redis集群弹性扩缩容 社区版Redis集群通过Gossip协议传递数据，以槽（Slot）为数据的最小集合，并以遍历（并迁移）Key的方式迁移单个Slot。但该方案存在如下问题：稳定性较差 数据按Key迁移，...
什么是流程编排
点击 确定，左侧随着执行的路径遍历执行过的节点，右侧显示每个节点的执行结果，最终在结束节点可以看到返回的具体参数。如果发生了错误，左侧报错节点会红框锁定，右侧会返回报错信息，辅助调试人员排查问题。（2）应用内调试 新建流程...
读写访问文件类问题
当您访问文件系统中的文件时，...问题现象 当您混用NFS和SMB协议文件系统，导致第一次通过 net use 命令挂载NFS协议文件系统连接失败后，挂载正确的SMB协议文件系统也会出现问题。解决方案 检查确保挂载正确的文件系统后，暂时停止挂载，5分钟...
B-tree并发控制优化
线程加锁范围大：为了避免死锁，乐观操作要持有遍历路径上所有节点的S锁，悲观操作要持有所有可能修改节点的X锁。线程加锁范围大，且并发越高越会加剧锁与锁之间的竞争，尤其在一些关键节点的竞争会更明显。PolarDB MySQL版 针对性地优化了...
防盗链
通过在OSS中配置基于请求标头Referer的访问规则，可以阻止某些Referer访问您的OSS文件，从而...防盗链常见示例 防盗链常见问题 OSS被攻击恶意刷流量出现异常流量的排查方法 降低因恶意访问流量导致大额资金损失的风险 在CDN配置Referer防盗链
功能概览
否则，返回输入 repeat 循环遍历 unoin 合并子遍历的结果 修饰符 as 打标 by 为其他单步提供参数 emit 记录循环的中间结果 indexQuery[*]倒排查询 option 指定分支查询的条件 times 指定循环遍历的次数 until 指定循环遍历的终止条件 ...
时序引擎版本说明
功能优化 优化大量数据点查询遍历的性能问题。修复列数据类型相同的两张时序表无法结合的问题。3.4.9 2022年02月14日 新特性 DESCRIBE TABLE语法支持返回PRIMARY KEY。SQL语句区分大小写。SQL语句支持写入NULL的数据源（tag）或者数据内容...
流程编排
如果发生了错误，左侧报错节点会红框锁定，右侧会返回报错信息，辅助调试人员排查问题。（2）应用内调试 新建流程应用，然后关联相应的编排的流程，需要注意的是，当前应用关联的必须是已发布的流程，即使流程存在最新的草稿数据，关联执行...
如何清理孤立文档
如果 MongoDB 分片集群版实例中存在孤立文档，您在进行数据迁移或释放Shard节点任务时，可能会出现影响实例性能或产生报错等问题。因此，您在进行上述操作前需要先检查实例内是否存在孤立文档并对孤立文档进行清理。前提条件 服务器已安装...
服务编排设计器内节点说明
用户在脚本中使用的所有流程变量必须在前序节点中进行初始化（赋初值或对内部字段赋初值），否则为变量赋值后仍可能产生变量未赋值的报错，或消费类型为结构对象的变量中的某个属性时会出现空指针问题。当前引擎暂不会代替用户完成结构对象...
关闭IPVS的estimation功能
同时，内核为了降低计算资源和存储资源开销，将统计数据按照CPU维度来存放，CPU数量越多，每次统计需要遍历的CPU数量就越多。因此，当服务数量多且CPU数量也很多时，每次定时器estimation_timer统计的开销会显著增加。另一方面，Linux中...
检测攻击类型说明和防护建议
目录遍历 网站自身的配置缺陷可能会使得网站目录被任意浏览，导致隐私信息泄露。攻击者可以利用该信息对网站进行攻击。请检查目录遍历操作是否正常。如果异常，请检查函数的代码，并通过黑名单对相关命令（如“./”和“./”）进行限制。...
Gitlab远程代码执行漏洞（CVE-2021-22205）在野利用...
Hadoop 4 Nostromo nhttpd路径遍历（CVE-2019-2725）Nostromo nhttpd 5 Oracle WebLogic Server反序列化远程命令执行（CVE-2019-2725）WebLogic 6 Struts2远程命令执行 Struts2 7 WebLogic WLS组件漏洞（CVE-2019-10271）WebLogic 8 ...
- 产品推荐
- 这些文档可能帮助您