组件参考：所有组件汇总
朴素贝叶斯 该组件是一种基于独立假设的贝叶斯定理的概率分类算法。K均值聚类 该组件会首先随机选择K个对象作为每个簇的初始聚类中心，然后计算剩余对象与各簇中心的距离，将其分配至距离最近的簇，再重新计算每个簇的聚类中心。DBSCAN 您...
GBDT二分类V2
梯度提升决策树(Gradient Boosting Decision Trees)二分类，是经典的基于梯度提升（Gradient Boosting）的有监督学习模型，可以用来解决二分类问题。支持计算资源 支持的计算引擎为MaxCompute。算法简介 梯度提升决策树(Gradient Boosting ...
eRDMA概述
RDMA解决了这些痛点问题。相对于TCP/IP，RDMA实现了零拷贝、内核旁路等特性，避免了拷贝、频繁的上下文切换等开销，相对于TCP/IP的通信，做到了低延迟、高吞吐以及低CPU占用。但是昂贵的价格以及运维成本让很多应用望而却步，RDMA的受众...
MongoDB 分片集群介绍
MongoDB分片集群技术用于解决海量数据的存储问题，本文介绍MongoDB分片集群相关的常用知识。什么情况下使用分片集群？当您遇到如下问题时，可以使用分片集群解决：存储容量受单机限制，即磁盘资源遭遇瓶颈。读写能力受单机限制，可能是CPU...
XGBOOST多分类
正负权重平衡 scale_pos_weight 正负样本的权重比例，用于解决类别不平衡的问题。隐私开销 epsilon 联邦学习中，差分隐私的隐私开销，数值越大，添加的噪声越小，隐私保护越弱，则越精确，训练效果越好；数值越小，隐私保护强度越强，则单...
Designer使用案例汇总
基于分箱组件实现连续特征离散化 介绍如何使用分箱组件进行连续特征离散化。人口普查统计案例（旧版）以人口普查数据为例，根据人物年龄、工作类型及教育程度等属性，快速构建学历对收入影响的统计模型。预测学生考试成绩 基于中学生的家庭...
分区表常见问题
本文汇总了 PolarDB MySQL版 分区表相关的常见问题。说明 如需了解更多关于分区表的内容，请搜索钉钉群号加群进行咨询。钉钉群号：24490017825。PolarDB MySQL版 是否支持表分区?支持。目前 PolarDB MySQL版 100%兼容MySQL，同时做了功能和...
SmartData 3.1.x版本简介
解决了 hadoop fs-ls-R 命令在文件目录层级深，目录很多的情况下，出现由于线程处于等待状态致使命令无法执行的问题。增强了 hadoop fs-stat 命令，支持显示atime和privilege等。增加了Jindo HDFS客户端路径改写功能，以减少集群迁移时修改...
生产者负载均衡
背景信息 了解生产者负载均衡策略，可以帮助您解决如下问题：消息发送的容灾策略：您可以根据生产者负载均衡策略，明确当局部节点出现故障时，消息发送如何进行容灾切换。消息发送的顺序性机制：通过生产者负载均衡策略，您可以进一步了解...
低成本RDS历史库
修改schema成本低，支持快速修改schema或者动态schema，解决历史库schema变更时间长的问题。改造成本低，可以支持SQL进行访问。满足实时查询需求，例如消费账单、聊天记录等场景历史数据的查询RT要能够和在线数据的查询RT接近。能够满足...
应用场景：低成本历史库
修改schema成本低，支持快速修改schema或者动态schema，解决历史库schema变更时间长的问题。改造成本低，可以支持SQL进行访问。满足实时查询需求，例如消费账单、聊天记录等场景历史数据的查询RT要能够和在线数据的查询RT接近。能够满足...
PolarDB处理TPC-H查询的挑战和机遇
但这里会有个trade-off，因为随着plan tree的上升，tuple的数据倾向于越来越稀疏，因此scan会越来越离散，无法利用顺序IO/Prefetch IO的优势。因此晚物化比较理想的场景是，当需要最后获取时，所涉及的tuple数量较少，比如有聚集，或者有...
使用ping命令丢包或不通时的链路测试方法
当客户端访问目标服务器或负载均衡，使用ping命令测试出现丢包或网络不通时，可以通过链路测试工具进行链路测试来判断问题来源。本文介绍如何使用链路测试工具进行链路测试。链路测试流程 通常情况下，链路测试流程如下图所示。链路测试...
性能监控指标
而连接打满的问题可以提前调整客户端或服务端的缓存连接池最大连接数限制，或者提前扩容。缓存命中率下降的严重后果会导致大量请求击穿数据库，最终导致整体服务不可用。因此，在生产环境中建议对缓存命中率设置告警，提前发现风险。CPU ...
列存索引如何实现高效数据过滤
为了解决大表扫描代价过高的问题，PolarDB IMCI引入了查询剪枝技术。该技术可以在过滤数据时，提前过滤掉不需要访问的DataPack，从而减少数据访问量，提高查询效率。具体实现方式是通过访问分区信息和统计信息，结合特定的过滤条件，在查询...
优化内部表的性能
例如，Hologres需要收集数据的采样统计信息，包括数据的分布和特征、表的统计信息、列的统计信息、行数、列数、字段宽度、基数、频度、最大值、最小值、长键值、分桶分布特征等信息。这些信息将为优化器更新算子执行预估COST、搜索空间裁剪...
基本概念
GOP值表示关键帧的间隔（即两个关键帧之间的帧数），也就是两个IDR帧之间的距离，一个帧组的最大帧数。一般而言，每一秒视频至少需要使用1个关键帧。增加关键帧个数可改善视频质量，但会同时增加带宽和网络负载。GOP值（帧数）除以帧率即为...
MaxCompute安全白皮书
Package是一种跨项目空间共享数据及资源的机制，主要用于解决跨项目空间的用户授权问题。使用Package之后，A项目空间管理员可以对B项目空间需要使用的对象进行打包授权（即创建Package），然后许可B项目空间安装这个Package。在B项目空间...
特征离散
取值如下：Isometric Discretization（等距离散）Isofrequecy Discretization（等频离散）Gini-gain-based Discretization（基于Gini增益离散）Entropy-gain-based Discretization（基于熵增益离散）离散区间个数 离散区间的个数。...
Echarts 颜色分段折线图
显示最大标签：勾选后，显示最大的刻度标签。默认自动判定，即如果标签重叠，不会显示最大的刻度标签。颜色：参考 颜色选择器说明，修改坐标轴刻度标签的颜色。字体样式：坐标轴刻度标签文字的字体风格。字体粗细：坐标轴刻度标签文字的...
基于组件化EasyRec框架快速搭建深度推荐算法模型
有层出不穷的算法idea想要快速验证？核心算法模块如何快速复用到不同场景的不同模型中？如何通过排列组合构建出新的模型？组件化EasyRec框架可以帮助你以“搭积木”的方式快速构建想要的模型结构，快来试一试吧！为何需要组件化 1....
Java SDK 说明
SDK升级到该版本后，可能会遇到以下几类问题，您可以根据实际情况进行分析解决。ISslOption 接口新增了 boolean isSmTLSSupport();方法。如果应用客户端单独实现了ISslOption接口，就必须添加此方法的实现。如果您使用非国密，则实现该方法...
新核云：借助云效解决多环境部署难题
所以我自己是从一个管理者变成一个服务者的心态，如何让我团队产研同学少加班、提高工作效率、工作舒心、别每天胆战心惊，我是来服务他们，用这个工具可以帮助他们解决问题。当我这个心态发生转变之后，其实推动起来就相对容易一点。另外...
异常处理
当您无法解决问题时，可以提供RequestId来请求OSS开发工程师的帮助。通过方法getRequestId获取。Details OSS返回的错误信息描述。通过方法getDetails获取。OSS常见错误码 错误码 描述 HTTP状态码 AccessDenied 拒绝访问 403 ...
使用代码检测提升代码质量和安全
CRITICAL:通过信息熵模型得出的可能性较高的潜在问题；MAJOR:用于测试的敏感信息字段；（4）代码安全——依赖包漏洞检测 为了杜绝安全隐患，企业需要做到以下三点：1.了解工程都使用了哪些依赖包；2.删除不需要的依赖包；3.检测并修复当前...
异常处理
当您无法解决问题时，可以提供RequestId来请求OSS开发工程师的帮助。HostId 用于标识访问的OSS集群，与请求时使用的Host一致。OSS常见错误码 错误码 描述 HTTP状态码 AccessDenied 拒绝访问 403 BucketAlreadyExists 存储空间已经存在 409 ...
朴素贝叶斯
朴素贝叶斯是一种基于独立假设的贝叶斯定理的概率分类算法。使用Designer（原Studio）的朴素贝叶斯组件，您能有效处理多样的分类问题。本文为您介绍朴素贝叶斯组件的配置方法。使用限制 支持的计算引擎为MaxCompute。组件配置 您可以使用...
Java SDK 接入
离散的用户 ID 段（用户 ID 或设备 ID 倒数第 2、3 位），如果非字母，需转化为 ASCII 码。全局（网）数据同步结果码 结果码 简述 解决方案 SUCCESS 成功 成功 ARGS_IS_NULL 必要参数为空 检查是否已完整按照非空逻辑传递参数。PAYLOAD_...
基于TairRoaring实现人群圈选方案
TairRoaring简介 用户标签筛选场景往往应用于个性化推荐、精准营销等具体业务场景，通过不同的标签辅以不同的运营营销，从而实现资源投放方的商业利益最大化。该类业务通常具备如下特点：用户标签极多，需要较高的存储空间及良好的扩展能力...
数据建模
本文介绍数据建模的相关问题。逻辑表质量规则都支持哪些云计算资源？逻辑表质量规则都包含哪些？逻辑表数据质量的强规则和弱规则有什么区别？逻辑表质量规则都支持哪些云计算资源？目前包含MaxCompute、Hive、ApsaraDB for RDS、DataHub ...
决策树
否 基尼系数 基尼系数 信息熵 建模类型：回归 参数名 参数描述 是否必填 参数默认值 参数范围 衡量分枝质量指标 衡量分枝质量的指标。均方误差：父节点和子节点之间的均方误差的差额将被用来作为特征选择的标准，这种方法通过使用叶子节点...
需求阶段
同时建议进行深入的数据探查，包括但不限于数据完整性、字段离散值分布情况、空值、零值、重复值占比等情况。技术可行性：评估当前已有数据模型能否支撑需求开发，如果不能，则需要规划模型改造方案，并充分评估其影响。同时在测试环境进行...
随机森林
功能说明 随机森林组件支持使用随机森林算法对分类或回归问题进行建模。随机森林就是通过集成学习的思想将多棵树集成的一种算法，它的基本单元是决策树，而它的本质属于机器学习的一大分支——集成学习（Ensemble Learning）方法。计算逻辑...
消费者负载均衡
背景信息 了解消费者负载均衡策略，可以帮助您解决以下问题：消息消费处理的容灾策略：您可以根据消费者负载均衡策略，明确当局部节点出现故障时，消息如何进行消费重试和容灾切换。消息消费的顺序性机制：通过消费者负载均衡策略，您可以...
气泡图
图表样式 气泡图是移动端组件中散点图的一种，与散点图相比，气泡图使用气泡来展示数据，且可以自定义气泡的大小，能够直观生动地展示多个时间下离散数据的差异。配置面板 搜索配置：单击 配置 面板右上角的 搜索配置，可在 搜索配置 面板...
气泡图
图表样式 气泡图是移动端组件中散点图的一种，与散点图相比，气泡图使用气泡来展示数据，且可以自定义气泡的大小，能够直观生动地展示多个时间下离散数据的差异。配置面板 搜索配置：单击 配置 面板右上角的 搜索配置，可在 搜索配置 面板...
低成本历史库
修改schema成本低，支持快速修改schema或者动态schema，解决历史库schema变更时间长的问题。改造成本低，可以支持SQL进行访问。满足实时查询需求，例如消费账单、聊天记录等场景历史数据的查询RT要能够和在线数据的查询RT接近。能够满足...
我是管理员
测试数据构建 测试数据结构可以在频繁的数据准备过程中确保数据安全、保障数据离散型、提高生产效率。SQL审核 SQL审核功能帮助您避免无索引SQL、不规范SQL等，降低SQL注入风险。数据库克隆 数据库克隆功能提供MySQL数据库的克隆功能。集成...
PS-SMART多分类
参数服务器PS（Parameter Server）致力于解决大规模的离线及在线训练任务，SMART（Scalable Multiple Additive Regression Tree）是GBDT（Gradient Boosting Decision Tree）基于PS实现的迭代算法。PS-SMART支持百亿样本及几十万特征的训练...
PS线性回归
线性回归（Linear Regression）是分析因变量和多个自变量之间的线性关系模型，参数服务器PS（Parameter Server）致力于解决大规模的离线及在线训练任务。PS线性回归支持千亿样本、十亿特征的大规模线性训练任务。组件配置 您可以使用以下...
- 产品推荐
- 这些文档可能帮助您