公开数据集概述
SELECT l_returnflag,l_linestatus,sum(l_quantity)AS sum_qty,sum(l_extendedprice)AS sum_base_price,sum(l_extendedprice*(1-l_discount))AS sum_disc_price,sum(l_extendedprice*(1-l_discount)*(1+l_tax))AS sum_charge,avg(l_...
画像分析-RoaringBitmap优化方案
离线处理Bitmap的过程与在线流程思路类似，也可以通过编码、聚合方式产生数据，在MaxCompute中离线构建Bitmap数据示例如下。选择project USE bitmap_demo;创建原始表 CREATE TABLE mc_dws_uid_dict(encode_uid bigint,bucket bigint,uid ...
计算成本控制
SELECT t.id,SUM(t.val)AS val FROM(SELECT id,SUM(col3)AS val FROM table3 GROUP BY id UNION ALL SELECT id,SUM(col4)AS val FROM table4 GROUP BY id)t GROUP BY t.id;可以优化为-SELECT t.id,SUM(t.val)AS val FROM(SELECT id,col3 AS...
高性能Flink SQL优化技巧
适用场景 提升普通聚合（例如SUM、COUNT、MAX、MIN和AVG）的性能，以及这些场景下的数据热点问题。使用限制 LocalGlobal是默认开启的，但是有以下限制：在minibatch开启的前提下才能生效。需要使用AggregateFunction实现Merge。判断是否...
HTTP回调事件通知
将上述三个字段进行拼接，字段中间以竖线（|）分割，后计算MD5值，即：MD5Content=回调URL|X-VOD-TIMESTAMP|AuthKey X-VOD-SIGNATURE=md5sum(MD5Content)X-VOD-SIGNATURE字段计算方法示例如下：X-VOD-SIGNATURE=md5sum...
数据问答功能概述
从技术层面上看，表格问答是基于自然语言处理（NLP）技术，把用户的问句话术转换成SQL语句，去执行对有关表格数据的 查询 与 推理，并基于此对用户问句进行回复。具体如下图所示：功能适用场景 数据问答功能适合有较多业务表格数据，且用户...
Hive作业调优
select k,sum(case when user1>0 then 1 end)as user1,sum(case when user2>0 then 1 end)as user2,sum(case when user3>0 then 1 end)as user3,sum(case when user4>0 then 1 end)as user4 from(select k,user_id,count(case when a>1 ...
2020年
修复ST_Values函数在查询某些方向的线对象时结果与坐标排序不一致的问题。修复ST_BestPyramidLevel函数在某些情况下会返回负数的问题。修复ST_BuildPyramid函数在某些情况下会重复创建金字塔的问题。修复Truncate栅格表时未能清理对应的块...
2020年
2020年8月 修复ST_Values函数在查询某些方向的线对象时结果与坐标排序不一致的问题。2020年8月 修复ST_BestPyramidLevel函数在某些情况下会返回负数的问题。2020年8月 修复ST_BuildPyramid函数在某些情况下会重复创建金字塔的问题。2020年8...
Github公开事件数据
MaxCompute将GH Archive提供的海量公开事件数据进行离线处理并开发，生成以下表：表名称 表说明 更新周期 dwd_github_events_odps Github公开事件数据事实表 T+1小时更新 dws_overview_by_repo_month Github公开事件月度指标数据聚合表 T+1...
FineReport
说明 分类名、系列名、值在设置的时候必须要有等号，否则单元格会被作为字符串处理 报表预览：报表必须先保存才能预览，单击 保存 保存报表，单击 预览，选择分页预览，即可在浏览器中查看报表。相关文档 FineReport和FineBI的区别：...
智能文创解决方案
旨在从冗长、重复的文本序列中抽取、精炼或总结出要点信息，实现各类文本生成任务，包括文本摘要生成、新闻标题生成、文案生成、问题生成、作文生成和古诗生成等。前提条件 在开始执行操作前，请确认您已完成以下准备工作。已开通PAI...
日志相关
本文将介绍常见的日志相关问题及相应的解决方案。如何根据客户端日志判断当前状态？如何根据客户端日志判断当前状态？消息队列客户端日志文件是 sofamq.log，包括 INFO、WARN、ERROR 级别的日志。此处提供常见的客户端日志打印信息，旨在...
大规模ACK Pro集群使用建议
ACK集群的性能和可用性与集群资源数量、资源访问频率、访问模式等紧密相关。不同变量组合下，API Server承载的压力和性能差异不同。在大规模的 ACK集群Pro版 中（通常为超过500个节点或者10,000个Pod的集群）中，集群管理者需要根据业务...
图解MySQL 8.0优化器查询解析篇
相当于做了下面的查询：SELECT*FROM(SELECT YEAR,country,product,SUM(profit)AS profit FROM sales GROUP BY YEAR,country,product UNION ALL SELECT YEAR,country,NULL,SUM(profit)AS profit FROM sales GROUP BY YEAR,country ...
OOM常见问题排查指南
本文将会为您介绍Hologres中出现OOM情况的原因及对应处理方法。产生OOM的基本原因 有的系统在内存资源不足时会采用磁盘缓存的方式进行算子降级（Spill to Disk），Hologres为了保障查询的效率，默认所有算子都采用内存资源进行计算，因此会...
Explain和Explain Analyze
explain select l_returnflag,l_linestatus,sum(l_quantity)as sum_qty,sum(l_extendedprice)as sum_base_price,sum(l_extendedprice*(1-l_discount))as sum_disc_price,sum(l_extendedprice*(1-l_discount)*(1+l_tax))as sum_charge,avg(l...
表表达式
num|name|num|value-+-+-+-1|a|1|xxx(1 row)这是因为放在 ON 子句中的一个约束在连接 之前 被处理，而放在 WHERE 子句中的一个约束是在连接 之后 被处理。这对内连接没有关系，但是对于外连接会带来麻烦。表和列别名 你可以给一个表或复杂...
表表达式
num|name|num|value-+-+-+-1|a|1|xxx(1 row)这是因为放在 ON 子句中的一个约束在连接 之前 被处理，而放在 WHERE 子句中的一个约束是在连接 之后 被处理。这对内连接没有关系，但是对于外连接会带来麻烦。表和列别名 你可以给一个表或复杂...
引擎指标
高级监控报警服务能够为您提供丰富的Elasticsearch指标，其中引擎指标是基于阿里云工程师丰富的运维经验，自主研发和采集的包括集群状态、查询、写入和缓存等方面的各项指标，能够帮助您排查Elasticsearch集群引擎性能及稳定性问题。...
安装cloud-init
cloud-init提供了ECS实例在启动阶段完成系统初始化配置的能力。如果您的自定义镜像未安装cloud-init，请手动安装，保证运行该镜像的ECS实例...各操作系统的软件包下载地址如下：操作系统类型 操作系统版本 二进制软件包 md5sum校验 Debian 12 ...
物化视图
当您需要优化重复且耗时较长的复杂查询时，您可以使用 云数据库 SelectDB 版 中的物化视图功能来缓存复杂查询，实现快速访问和高效数据处理。概述 物化视图是将预先计算（根据定义好的SELECT语句）的数据集，存储在 云数据库 SelectDB 版 ...
使用教程
但有时外表的字段名和表上列名并不一致（例如处理大小写或字符集相关的问题），此时需要指定tablestore.columns.mapping。该参数为一个英文逗号分隔的字符串，每个分隔之间不能添加空格，每一项都是表中列名，顺序与外表字段保持一致。说明...
统计MaxCompute TOPN费用账号及耗时作业
MaxCompute提供如下方案解决这两个问题：账号费用：您可以通过账单详情中的用量明细来查询，但是这种方式无法将用量明细归属到对应的RAM用户。Information Schema视图中的TASKS_HISTORY会记录MaxCompute项目内已完成的作业详情，且保留近14...
指标说明
nginx_ingress_controller_nginx_process_connections-nginx_ingress_controller_request_duration_seconds_sum-nginx_ingress_controller_request_duration_seconds_count（默认废弃）-nginx_ingress_controller_bytes_sent_sum-nginx_...
内建函数概述
MaxCompute自身预置了诸多函数，可以满足大部分业务场景的数据处理需求。本文为您介绍MaxCompute提供的函数类型及函数使用相关说明。背景信息 使用MaxCompute内建函数过程中，需要注意的事项请参见 注意事项。MaxCompute预置的函数类型如下...
RDS SQL Server CPU使用率高问题排查
如果您对实例（包括但不限于ECS、RDS）等进行配置与数据修改，建议提前创建快照或开启RDS日志备份等功能。如果您在阿里云平台授权或者提交过登录账号、密码等安全信息，建议您及时修改。CPU使用率高的因素有很多，其中最常见的因素说明及...
存储异常问题排查
云盘的Pod Pending问题处理，请参见下文 云盘Pod的状态为非Running。NAS的Pod Pending问题处理，请参见下文 NAS Pod的状态为非Running。OSS的Pod Pending问题处理，请参见下文 OSS Pod的状态为非Running。排查PVC处于非Bound问题。云盘的...
存储异常问题排查
云盘的Pod Pending问题处理，请参见下文 云盘Pod的状态为非Running。NAS的Pod Pending问题处理，请参见下文 NAS Pod的状态为非Running。OSS的Pod Pending问题处理，请参见下文 OSS Pod的状态为非Running。排查PVC处于非Bound问题。云盘的...
监控报警
Byte InstanceStorageSize userId、instanceId Sum 已就绪消息排队时间（Group）millisecond ReadyMessageQueueTime userId、instanceId、groupId Maximum 已就绪消息排队时间（Group&Topic）millisecond ReadyMessageQueueTimePerGidTopic...
技术支持
实时计算控制台功能主要包括：工作空间购买流程 工作空间创建流程 工作空间扩缩容流程 创建与管理项目空间流程 负责实时计算Flink版产品功能使用咨询服务、产品缺陷问题处理、集群稳定性问题处理。协助排查实时计算Flink版产品依赖的其他...
智能审核
其他常见问题请参见上文中 待处理文件地址 的说明。单击 提交任务，完成创建提交视频审核任务。任务提交后您可以在当前页签下方列表中查看任务的执行状态以及配置信息和输入、输出地址等。使用工作流提交智能审核任务 登录 媒体处理控制台...
工单状态
待我处理、所有工单 列表中显示 工单ID、问题标题、工单状态、创建人、创建时间、处理人、倒计时。状态 指工单状态，包括以下状态：待响应：指用户在工单系统中提交工单后，工单系统将该工单分派到给上班的客服账号。处理中：客服正在对该...
总览
AK泄露问题：处理AccessKey泄露事件，具体操作，请参见 AK泄露检测。云平台配置风险（云产品安全风险项）：处理云平台配置检查风险，具体操作，请参见 什么是云平台配置检查。自定义安全评分 云安全中心默认为每个扣分配置项设定了扣分分值...
消费-通过消费组实现高可靠消费
但在现实世界中，用户数、处理量规模的变化与不确定性会使得以上三个问题变得更复杂。遇到发工资的日期，用户数会大涨。柜员（Clerk）毕竟不是机器人，也需要休假，需要吃午饭。银行经理为了整体服务体验，需要增加柜员。那以什么作为判断...
查看监控任务
详情 单击相应表名后的 详情，您可以进行 查看历史结果、问题处理 和 处理日志 等操作：单击相应规则后的 查看历史记录，即可查看每次调度后的运行记录。您可以针对当前规则的运行情况填写处理意见。操作如下：单击相应规则后的 问题处理。...
查看并管理整改流程
重新校验：仅待处理、已忽略可重新校验，发起重新校验后，如果数据质量问题已经处理，可以重新执行校验规则，会按照执行后的校验状态修改治理项状态：校验不通过-未处理，校验通过-已处理。关联知识库文档：规则关联知识后，可在质量规则和...
查看并管理整改流程
重新校验：仅待处理、已忽略可重新校验，发起重新校验后，如果数据质量问题已经处理，可以重新执行校验规则，会按照执行后的校验状态修改治理项状态：校验不通过-未处理，校验通过-已处理。关联知识库文档：规则关联知识后，可在质量规则和...
服务支持
NLP自然语言处理 常见问题 调用异常自助排查（错误码汇总）服务协议 NLP自学习平台 常见问题 实体抽取项目常见问题 故障排除 私有化部署 企业智能搜索 错误码对照表 常见问题
查看并管理治理工作台
您可以在治理工作台查看数据质量在校验过程中的出错情况及针对该质量校验问题发起整改、忽略、通知等治理操作，从而实现资产质量从制定计划到实现整改的PDCA完整流程，有效提升数据质量。本文为您介绍如何查看并管理治理工作台。权限说明 ...
- 产品推荐
- 这些文档可能帮助您