性能说明FAQ
原因分析 执行目录遍历操作时，如果此目录同时正在被修改（如创建、删除、重命名文件），目录遍历会由于缓存频繁失效而响应非常慢。对大目录执行目录遍历操作时，目录遍历会由于缓存淘汰而响应非常慢。解决方案 避免目录体量过大，控制单...
for-each节点逻辑原理介绍
DataWorks为您提供遍历节点（for-each节点），您可以通过for-each节点来循环遍历赋值节点传递的结果集。同时您也可以重新编排for-each节点内部的业务流程。本文为您介绍for-each节点的组成与应用逻辑。使用说明 您可通过以下内容了解遍历...
模型训练
如下图所示：遍历次数可以控制模型的训练时间，如果想尽快训练完，可以将此参数调小，但是通常效果也会下降。需要注意的是，并不是模型训练时间越长越好，所以没有必要把该参数设置为超过 30 的值。学习速率这个参数建议在 0.001~0.0001 ...
XML函数
产生XML内容 有一组函数和类函数的表达式可以用来从SQL数据产生XML内容。它们特别适合于将查询结果格式化成XML文档以便于在客户端应用中处理。xmlcomment xmlcomment(text)→xml 函数 xmlcomment 创建了一个XML值，它包含一个使用指定文本...
图解MySQL 8.0优化器查询解析篇
本文通过图形解说的方式介绍了MySQL 8.0 SQL优化器如何把一个简单的字符串（SQL），变成数据库执行器可以理解的执行序列，最终将数据返还给客户。强大的优化器是不需要客户关注SQL如何写的更好来更快获得需要的数据，因此优化器对原始SQL...
Schema探索
creek' LIMIT 2 key-h2o_quality,location=coyote_creek,randtag=1 h2o_quality,location=coyote_creek,randtag=2 该查询返回数据库 NOAA_water_database 中，与measurement h2o_quality 和tag location=coyote_creek 相关联的所有序列。...
版本及存储引擎
改进$graphLookup 对图遍历的支持。提升$lookup 性能，部分场景中性能提升可达百倍。说明$lookup 和$graphLookup 的更多信息，请参见$lookup(aggregation)和$graphLookup(aggregation)。查询 新增$maxN、$topN、$minN、$bottomN、$lastN 和...
InfluxQL参考
EXPLAIN查询计划的内容包括：表达式（expression）辅助field（auxiliary fields）shard的数量（number of shards）序列的数量（number of series）缓存的值（cached values）文件的数量（number of files）block的数量（number of blocks）...
飞机大战
该动画不是毁灭动画，即一直重复/毁灭动作序列 act_seq_t*achilles_destory_act=(act_seq_t*)malloc(sizeof(act_seq_t));achilles_destory_act->act_seq_maps=achilles_destory_maplist;achilles_destory_act->act_seq_len=3;achilles_...
配置for-each节点
DataWorks为您提供遍历节点（for-each节点），您可以通过for-each节点来循环遍历赋值节点传递的结果集。同时您也可以重新编排for-each节点内部的业务流程。本文以一个具体示例，通过for-each节点2次循环遍历赋值节点输出结果，并在每次循环...
设置扫描防护
扫描防护帮助网站自动阻断包含指定特征的访问请求，例如请求源IP在短期内发起多次Web攻击或目录遍历攻击、请求源IP来自常见扫描工具或阿里云恶意扫描攻击IP库。前提条件 已开通Web应用防火墙实例，且实例满足以下要求：包年包月实例：实例...
热点行优化
减少B-tree索引的遍历 MySQL是以B-tree索引的方式管理数据的，每次执行查询时，都需要遍历索引才能定位到目标数据行，数据表越大，索引层级越多，遍历时间就越长。在前面提到的对更新操作进行分组的机制中，只有每组的Leader遍历索引定位...
向量召回过滤优化
背景 目前向量检索中的过滤机制是在遍历到一个向量后，计算filter的结果看当前向量是否满足条件，如果不满足条件则放弃当前节点。因此遍历结束后，所有的向量都是满足过滤条件的。但因为向量检索所扫描的点数是固定的（默认扫描1%的数据）...
高级应用：实现复杂作业逻辑
for-each节点 DataWorks的for-each节点主要用于有循环遍历的场景，且需要与 赋值节点 联合使用，将赋值节点作为for-each节点的上游节点，将赋值节点的输出结果赋值给for-each节点后，一次次循环来遍历赋值节点的输出结果。for-each节点的...
模型优化
遍历次数一般不建议修改（除非您想快速训练完成），学习率参数有时对于模型的影响非常大，可以尝试在 0.001~0.0001 进行调整。有时候上述对于模型的调整可能对于性能的提升都不是很大，这时可以考虑从数据层面来优化。比如数据的预处理阶段...
模型优化
对于模型的优化，我们提供如下几个建议：如果您的数据集不大(例如仅几百条)，建议调整遍历次数（例如调整到10或者20次），使模型得到更充分的训练。换一个不同模型试试。不同的模型架构在不同的任务上表现可能不同，如果您发现LSTM+CRF ...
路由算法
说明 若未配置路由算法，则在对逻辑表的数据进行操作时，会遍历逻辑表对应的每一个物理表，整体操作时间会成倍增加。路由算法由路由字段+算法组成。使用场景 分表数据查询 分表数据变更 分表数据导出 配置说明 您可通过目标逻辑库找到对应...
转码
本文提供了Java SDK转码相关功能的API调用示例，包含提交转码作业、查询转码作业、取消转码作业和遍历转码作业。前提条件 使用前请先初始化客户端，详细操作请参见 初始化。提交转码作业 调用SubmitJobs接口，完成提交转码作业。说明 通过...
InnoDB Physiological Logging
优点 高效率，并且可以直接修改物理格式，任何操作都不需要重新遍历Btree到指定页面。缺点 产生的日志量大。例如：一次 DELETE 操作，逻辑日志只需要记录MLOG_COMP_REC_DELETE offset，但实际执行过程中需要修改prev_record->next_record、...
转码
本文提供了Go SDK转码相关功能的API调用示例，包含提交转码作业、查询转码作业、取消转码作业和遍历转码作业。前提条件 使用前请先初始化客户端，详细说明请参见 初始化。提交转码作业 调用SubmitJobs接口，完成提交转码作业。说明 通过SDK...
层次查询伪列
层次查询伪列如下：CONNECT_BY_ISCYCLE CONNECT_BY_ISLEAF LEVEL CONNECT_BY_ISCYCLE CONNECT_BY_ISCYCLE 用于标识层次遍历过程中环的起始位置。如果当前节点的子节点中也存在其祖先节点，CONNECT_BY_ISCYCLE 伪列返回1，否则返回0。下图中...
LLM-Copyright信息移除（DLC）
将文本用换行符分隔，按行遍历文本是否以/、#、-注释符号开头，一旦匹配到符合条件的某行，继续统计连续的注释行，直到注释符号终止，则遍历终止。最后删除文本中的连续注释片段并返回。以上步骤均检测第一次匹配到的注释片段，即默认检测...
向量介绍
检索时，从入口节点开始遍历，计算请求和入口节点的所有近邻距离，选择距离最近的近邻，作为下一步的遍历节点，进而迭代游走，直至收敛并停止检索。收敛指的是当前检索节点的所有近邻中没有比已经检索到的最近节点更接近请求。为了加速收敛...
SearchMedia-搜索媒体信息
接口说明 获取命中数据条数限制说明如下：方法一：分页遍历 对于命中的搜索结果，您可以通过设置分页参数“PageNo”（页码）和“PageSize”（每页显示的记录数）来逐步遍历最多 5000 条数据。如果搜索结果超出了 5000 条，为了保证有效地遍...
LLM-Copyright信息移除（MaxCompute）
将文本用换行符分隔，按行遍历文本是否以/、#、-注释符号开头，一旦匹配到符合条件的某行，继续统计连续的注释行，直到注释符号终止，则遍历终止。最后删除文本中的连续注释片段并返回。以上步骤均检测第一次匹配到的注释片段，即默认检测...
内核版本
Gremlin Gremlin是Apache TinkerPop框架下的图查询语言，使用Gremlin可以很方便地对图数据进行查询、修改、遍历和过滤等操作。GDB Gremlin内核版本高度兼容TinkerPop Gremlin查询语言，性能较为优秀。可以高度兼容HugeGraph、JanusGraph、...
PGVector
检索向量时首先遍历计算所有类簇的中心点，找到与目标向量最近的n个类簇中心。遍历计算n个类簇中心所在聚类中的所有元素，经过全局排序得到距离最近的k个向量。使用指南 PGVector插件可以顺序及索引检索高维向量，示例 列出了简单使用方法...
PGVector
检索向量时首先遍历计算所有类簇的中心点，找到与目标向量最近的n个类簇中心。遍历计算n个类簇中心所在聚类中的所有元素，经过全局排序得到距离最近的k个向量。使用指南 PGVector插件可以顺序及索引检索高维向量，示例 列出了简单使用方法...
PGVector
检索向量时首先遍历计算所有类簇的中心点，找到与目标向量最近的n个类簇中心。遍历计算n个类簇中心所在聚类中的所有元素，经过全局排序得到距离最近的k个向量。使用指南 PGVector插件可以顺序及索引检索高维向量，示例 列出了简单使用方法...
Python SDK示例：Table
table=o.get_table('my_new_table')for partition in table.partitions:#遍历所有分区 print(partition.name)#具体的遍历步骤，这里是打印分区名 for partition in table.iterate_partitions(spec='pt=test'):#遍历 pt=test 分区下的二级...
UDF示例：获取字符串（含分隔符）Value
遍历字符串，先用split1进行键值对分割。for(String subStr:str.split(split1)){/匹配key+split2，获取字符串剩余的value值 if(subStr.startsWith(keySplit)){ return subStr.substring(keySplit.length());} } } catch(Exception e){ ...
Steps A-G
aggregate 功能：（sideEffect）在遍历过程中，将输入objects聚合成一个list，并保存在sideEffect。备注：单步不会影响输入objects，下一个单步仍然以objects作为输入。单步生成的list是只读的，在后续遍历的任意位置可以通过 cap()取值。...
创建报警
报警维度 配置报警指标（数据集）的维度，可选择为：无、=、遍历。配置为无：报警内容中透出这个维度所有数值的和。配置为=：具体内容需手动填写。配置为遍历：会在报警内容中透出实际触发报警的维度内容。最近N分钟 报警判断最近N分钟内...
LRU 存储
fromHead 为 YES 时，从头开始遍历，否则对尾开始遍历。(BOOL)objectExistsForKey:(NSString*)key;快速判断某个 key 的对象是否存在，不会影响 LRU。(void)resetCapacity:(NSInteger)capacity;更新容量，如果新容量比原先的小，会删除部分...
特殊用法
上界的写法 FORALL i IN lower_bound.upper_bound single SQL-仅允许使用单条 SQL 或动态 SQL 语句-遍历索引的写法(对于关联数组来说，仅支持使用索引为数值的关联数组)FORALL i IN INDICES OF collection single SQL-遍历值的写法(仅支持...
沙箱机制说明
包括不限于 System.getEnv（禁止获取系统变量）System.getProperties（禁止遍历获取所有系统属性）System.getProperty()获取系统属性（部分允许,后续文章中更新提供）new File("/etc/xxx.conf")读取文件 createClassloader 创建自定义类...
示例应用程序中的组织树
该查询输出中的行按从上到下、从左到右的顺序移动，从根到叶遍历每个分支。下面是此查询的输出。ename|empno|mgr-+-+-KING|7839|JONES|7566|7839 SCOTT|7788|7566 ADAMS|7876|7788 FORD|7902|7566 SMITH|7369|7902 BLAKE|7698|7839 ALLEN|...
Web服务端漏洞类型
暴力破解 暴力破解是指攻击者通过遍历或字典的方式，向目标发起大量请求，通过判断返回数据包的特征来找出正确的验证信息，从而绕过验证机制。随着互联网众多网站的数据库被泄露，攻击者选择的样本可以更具针对性，暴力破解的成功率也在...
创建报警
报警维度 配置报警指标（数据集）的维度，可选择为：无、=、遍历。配置为无：报警内容中透出这个维度所有数值的和。配置为=：具体内容需手动填写。配置为遍历：会在报警内容中透出实际触发报警的维度内容。最近N分钟 报警判断最近N分钟内...
云数据库查询优化
遍历整个集合 您应该避免使用find+Skip+Limit的查询方式来遍历整个集合，因为这种方式随着Skip数量的增长响应时间会越来越慢，还可能会造成请求超时。您可以改为使用find+RangeQuery+Limit+Sort的方式。下面的代码给出了一个示例。将数据按...
- 产品推荐
- 这些文档可能帮助您