全表统计
centralmoment4|sum|sum2|sum3|sum4|col1|string|2|2|0|0|0|0|NULL|NULL|NULL|NULL|NULL|NULL|NULL|NULL|NULL|NULL|NULL|NULL|NULL|NULL|NULL|NULL|NULL|NULL|col2|bigint|2|2|0|0|0|0|1|2|1.5|0.5|0.7071067811865476|0.5|0|-2|2.5|4.5|8....
Hologres vs Clickhouse性能对比参考测试
Q3.3 SELECT C_CITY,S_CITY,EXTRACT(YEAR FROM LO_ORDERDATE)AS YEAR,SUM(LO_REVENUE)AS REVENUE FROM LINEORDER_FLAT WHERE C_CITY IN('UNITED KI1','UNITED KI5')AND S_CITY IN('UNITED KI1','UNITED KI5')AND LO_ORDERDATE>=DATE '1992-...
使用Explain分析SQL执行计划
table3.orders.O_ORDERDATE,temp_table3.orders.O_SHIPPRIORITY Sort|Exprs:temp_table3.SUM(lineitem.L_EXTENDEDPRICE*1.00-lineitem.L_DISCOUNT)DESC,temp_table3.orders.O_ORDERDATE ASC HashGroupby|OutputTable(3):temp_table3|...
列存索引常见问题
示例如下：*1.row*IMCI Execution Plan(max_dop=8,max_query_mem=3435134976):Project|Exprs:temp_table3.lineitem.L_ORDERKEY,temp_table3.SUM(lineitem.L_EXTENDEDPRICE*1.00-lineitem.L_DISCOUNT),temp_table3.orders.O_ORDERDATE,temp_...
Star Schema Benchmark
Q3.3 SELECT c_city,s_city,d_year,SUM(lo_revenue)AS REVENUE FROM customer,lineorder,supplier,dates WHERE lo_custkey=c_custkey AND lo_suppkey=s_suppkey AND lo_orderdate=d_datekey AND(c_city='UNITED KI1' OR c_city='UNITED KI5...
时序数据查询和分析简介
topk(3,sum by(app,proc)(rate(instance_cpu_time_ns[5m])))查找不健康的Pod。min_over_time(sum by(namespace,pod)(kube_pod_status_phase{phase=~"Pending|Unknown|Failed"})[15m:1m])>0 查询K8s DaemonSet CPU 使用率。sum(rate...
性能测试指南
Q3 SELECT sum(LO_EXTENDEDPRICE*LO_DISCOUNT)AS revenue FROM lineorder_flat WHERE toISOWeek(LO_ORDERDATE)=6 AND toYear(LO_ORDERDATE)=1994 AND LO_DISCOUNT BETWEEN 5 AND 7 AND LO_QUANTITY BETWEEN 26 AND 35;Q4 SELECT sum(LO_...
工作流调度
本文介绍如何通过可视化的工作流进行任务编排且支持Cron表达式和API。使用说明 工作流中的Job没有独立调度时间，跟随工作流的时间开始调度。工作流调度至少要有2个Job，且有...jobName=jobB,data=2 jobName=jobA,data=1 TestSimpleJobC sum=3
工作流调度
本文介绍如何通过可视化的工作流进行任务编排且支持Cron表达式和API。使用说明 工作流中的Job没有独立调度时间，跟随工作流的时间开始调度。工作流调度至少要有2个Job，且有...jobName=jobB,data=2 jobName=jobA,data=1 TestSimpleJobC sum=3
工作流调度
本文介绍如何通过可视化的工作流进行任务编排且支持Cron表达式和API。使用说明 工作流中的Job没有独立调度时间，跟随工作流的时间开始调度。工作流调度至少要有2个Job，且有...jobName=jobB,data=2 jobName=jobA,data=1 TestSimpleJobC sum=3
Hive作业调优
select k,sum(case when user1>0 then 1 end)as user1,sum(case when user2>0 then 1 end)as user2,sum(case when user3>0 then 1 end)as user3,sum(case when user4>0 then 1 end)as user4 from(select k,user_id,count(case when a>1 ...
如何通过工作流进行上下游数据传递
SchedulerX提供的工作流功能可以对多个任务进行编排，同时还支持上下游任务间的数据传递，让您的业务更加的简单易用。本文将以3个调度任务为例介绍如何通过工作流进行上下游...jobName=jobB,data=2 jobName=jobA,data=1 TestSimpleJobC sum=3
列存索引中GroupJoin算子的实现
在IMCI中，如果不使用GroupJoin，则执行计划如下：如果使用GroupJoin，执行计划如下：Q3 对TPCH的Q3而言，GroupJoin的优化需要经过一系列等价变换：select l_orderkey,sum(l_extendedprice*(1-l_discount))as revenue,o_orderdate,o_...
物化视图
当您需要优化重复且耗时较...INT|Yes|true|NULL|true|`k1`|k1_k2_sumk3|AGG_KEYS|mv_k1|INT|INT|Yes|true|NULL|true|`k1`|mv_k2|INT|INT|Yes|true|NULL|true|`k2`|mva_SUM_`k3`|BIGINT|BIGINT|Yes|false|NULL|SUM|true|`k3`|+-+-+-+-+-+-+-+-...
QueryDataService-调用数据服务API
SELECT COMPANY_T_1_.`area` AS D_AREA_2_,COMPANY_T_1_.`city` AS D_CITY_3_,SUM(COMPANY_T_1_.`profit_amt`)AS D_PROFIT_4_FROM `quickbi_test`.`company_sales_record_copy` AS COMPANY_T_1_WHERE COMPANY_T_1_.`area` LIKE '%华东%' ...
基于eRDMA增强型实例部署AI训练集群
127727:127784[0]NCCL INFO Using network AIACC-2.0-RDMA#out-of-place in-place#size count type redop time algbw busbw error time algbw busbw error#(B)(elements)(us)(GB/s)(GB/s)(us)(GB/s)(GB/s)0 0 float sum 50.50 0.00 0.00 N/...
TPC-H Benchmark
l_linestatus,sum(l_quantity)as sum_qty,sum(l_extendedprice)as sum_base_price,sum(l_extendedprice*(1-l_discount))as sum_disc_price,sum(l_extendedprice*(1-l_discount)*(1+l_tax))as sum_charge,avg(l_quantity)as avg_qty,avg(l_...
计算成本控制
SELECT t.id,SUM(t.val)AS val FROM(SELECT id,SUM(col3)AS val FROM table3 GROUP BY id UNION ALL SELECT id,SUM(col4)AS val FROM table4 GROUP BY id)t GROUP BY t.id;可以优化为-SELECT t.id,SUM(t.val)AS val FROM(SELECT id,col3 AS...
使用前须知
聚合规则 规则名称 聚合时间粒度 聚合维度 生成指标名 total 10秒 total pv body_bytes_sent_avg body_bytes_sent_sum request_length_avg request_length_sum upstream_response_time_avg upstream_response_time_p50 upstream_response_...
移动数据分析
功能：设置页面的 refer，即当前页面的来源页面 入参：refer 页面名称，需要在 setPageName 的 PageName 集合中，也可以为空 是否必须调用：否 4.3.3 设置页面停留时间 接口：(void)setDurationOnPage:(long long)durationTimeOnPage;...
参考：内核参考
{i=0}|u_i-v_i|$Cosine$1.0-\frac{\sum_{i=0}^n u_iv_i}{\sqrt{\sum_{i=0}^n u_i^2}\sqrt{\sum_{i=0}^n v_i^2}}$Minus Inner Product$-\sum_{i=0}^n u_iv_i$Canberra$\sum_{i=0}^n\frac{|u_i-v_i|}{|u_i|+|v_i|}$Bray Curtis$\frac{\sum_{i...
算子介绍
1")Project(k="k",avg_id="sum_pushed_sum/sum_pushed_count")SortAgg(group="k",sum_pushed_sum="SUM(pushed_sum)",sum_pushed_count="SUM(pushed_count)")MergeSort(sort="k ASC")LogicalView(tables="[0000-0031].sbtest1_[000-127]",...
查询执行器介绍
其中的23.601s都用在了获取了下层输出上，只有约0.3s用于分组聚合。HashJoin算子open耗时0.290s，用于拉取右表（下方的Gather）数据并构建哈希表；next耗时23.584s，用于拉取左表数据以及查询哈希表得到JOIN结果。Gather算子仅仅用于汇总多...
Amazon Redshift数据迁移至MaxCompute
步骤二：将导出至S3的数据迁移至对象存储服务OSS MaxCompute支持通过OSS的 在线迁移上云服务，将S3的数据迁移至OSS，详情请参见 AWS S3迁移教程。登录 OSS管理控制台，创建保存迁移数据的Bucket，详情请参见 控制台创建存储空间。创建RAM...
智能文创解决方案
{"metadata":{"instance":1 },"cloud":{"computing":{"instance_type":"ecs.gn6v-c8g1.2xlarge"} },"name":"test_sum_new","model_path":"oss:/examplebucket/linshi/linshi_text/finetuned_zh_model.tgz","processor_type":"python",...
质量规则参数配置
选择枚举值的校验示例：对比3、6、9，生成的校验SQL为 x in(3,6,9)。字段值域校验：校验字段、校验表 数据过滤：详情请参见 完整性/唯一性 大类的描述。值域类型：根据实际业务选择。文本：用于对文本有效性进行验证，需要确保校验字段为...
质量规则参数配置
选择枚举值的校验示例：对比3、6、9，生成的校验SQL为 x in(3,6,9)。字段值域校验：校验字段、校验表 数据过滤：详情请参见 完整性/唯一性 大类的描述。值域类型：根据实际业务选择。文本：用于对文本有效性进行验证，需要确保校验字段为...
图解MySQL 8.0优化器查询解析篇
解析和设置查询块的leave_tables（setup_tables）SELECT t1.c1 FROM t1,(SELECT t2.c1 FROM t2,(SELECT t3.c1 FROM t3 UNION SELECT t4.c1 FROM t4)AS t3a)AS t2a;未在 setup_table 调用之前，每个Query_block的leaf_tables是为0的。该函数...
SELECT
例如，在CUBE子句中给出三个表达式（n=3），运算结果为2 n=2 3=8组。以n个表达式的值分组的行称为常规行，其余的行称为超级聚集行。具体表达式如下：CUBE({ expression|(expression[,…])}[,…])ROLLUP ROLLUP 函数是聚合函数，它是GROUP ...
大规模ACK Pro集群使用建议
将单个Service的Endpoints的后端Pod数量控制在3,000以下。在大规模集群中，应使用 EndpointSlices 而非Endpoints进行网络端点的拆分和管理。拆分后，每次资源变更时传输的数据量会有效减少。如果您有自定义Controller依赖Endpoints资源进行...
2020年
ST_{Z|T|2D|2DT|3D|3DT}Intersects ST_{2D|2DT|3D|3DT}DWithin ST_{T|2D|2DT|3D|3DT}Contains ST_{T|2D|2DT|3D|3DT}Within 2020年10月 对轨迹类型提供统计信息收集功能，以及根据统计信息预估扫描代价功能。无 2020年10月 提供新的索引方式...
交叉表
例如：展开层级设置为3层时，导出到本地中的实际数据为3层内的数据。说明 交叉表如果设置了 分页，导出时只能展示当前页；可以关闭分页导出或者增加展示行数解决。导出的交叉表没有设置 小计 时，父层级无法展示数据。冻结 设置是否冻结 ...
BE 引擎召回配置
支持形式：Itemid1,itemid2,itemid3 或者 itemid1:score1,itemid2:score2 trigger 打散设置 在组装 trigger 后，传给 BE 后，有可能前面几个 trigger 就能召回足够的数据，导致后面的 trigger 不起作用，这里我们可以指定每个 trigger 的...
基于组件化EasyRec框架快速搭建深度推荐算法模型
' } keras_layer { class_name:'MLP' mlp { hidden_units:[256,128,64,1]use_final_bn:false final_activation:'linear' } } } blocks { name:'add' inputs { block_name:'wide_logit' input_fn:'lambda x:tf.reduce_sum(x,axis=1,keepdims...
AggregationType
表示统计聚合类型。枚举取值列表 AGG_AVG表示求平均值。AGG_DISTINCT_COUNT表示去重统计行数，AGG_MAX表示求最大值。AGG_MIN表示求最小值。AGG_SUM表示求和。...AGG_MIN=3;AGG_SUM=4;AGG_COUNT=5;AGG_TOP_ROWS=7;AGG_PERCENTILES=8;}
漏斗留存函数
SELECT sum(r[1]),sum(r[2]),sum(r[3]),sum(r[4]),sum(r[5]),sum(r[6]),sum(r[7])FROM(SELECT retention(ds='2017-11-25' AND event='pv',ds='2017-11-25',ds='2017-11-26',ds='2017-11-27',ds='2017-11-28',ds='2017-11-29',ds='2017-11-...
多实例并发
your-bucket/sum/inputs/bcs oss upload 1-input.txt oss:/your-bucket/sum/inputs/查看是否上传成功 bcs oss ls oss:/your-bucket/sum/inputs/3.启动任务 bcs sub-file job.cfg 4.查看结果 结果数据在 oss:/your-bucket/sum/outputs/中。...
使用Prometheus配置报警规则的最佳实践
节点状态异常 节点NotReady状态持续3分钟 Critical(sum(max_over_time(kube_node_status_condition{condition="Ready",status="true"}[3m]))by(node))or(absent(kube_node_status_condition{condition="Ready",status="true"}))>0 集群节点...
漏斗和留存函数
07-28 10:00:00+08' AND created_at)AS basic_table GROUP BY level ORDER BY level ASC)SELECT CASE level WHEN 0 THEN 'total' WHEN 1 THEN 'CreateEvent' WHEN 2 THEN 'PushEvent' WHEN 3 THEN 'IssuesEvent' END,SUM(count_user)over...
声明
例如：CREATE FUNCTION add_three_values(v1 anyelement,v2 anyelement,v3 anyelement,OUT sum anyelement)IS BEGIN sum:=v1+v2+v3;END;在实践中，使用 anycompatible 类型系列声明多态函数可能更有用，以便将输入参数自动提升为公共类型。...
- 产品推荐
- 这些文档可能帮助您