特征编码
特征编码是将非线性特征通过GBDT编码成线性特征。功能介绍 特征编码由决策树和Ensemble算法挖掘新特征的一种策略，特征来自一个或多个特征组成的决策树叶子结点的one-hot结果。例如，下图有三棵树，共有12个叶子结点。根据树的顺序依次编码...
AutoML使用限制及规格
它可以处理复杂、非线性、高纬度且计算代价较大的问题。TPE的缺点是无法发现不同参数之间的联系。参考文献：Algorithms for Hyper-Parameter Optimization GridSearch：网格搜索算法，将所搜空间均匀分成网格，然后遍历所有可能的组合来...
RGB色彩
说明 Gamma校正是一种非线性变换技术，用于调整图像的亮度和对比度。它可以纠正由于显示设备的不一致性而导致的图像亮度失真问题。后期效果 辉光 强度：设置辉光的强度值，范围为0~5。半径：设置辉光的半径大小，范围为0~1。阈值：设置辉光...
线性回归
线性回归模型具有简单、易于理解和解释的特点，同时可以通过多项式扩展等方法处理非线性数据，具有较高的泛化能力和预测准确率。但是，线性回归模型对于离群点、噪声数据和非线性关系的数据比较敏感，需要进行特征标准化和正则化处理。组件...
什么是AI分布式训练通信优化库AIACC-ACSpeed
AIACC-ACSpeed优化原理 场景说明 使用单机多卡或多机多卡进行AI分布式训练时，分布式通信的线性度可作为单卡训练扩展到多卡的性能指标，线性度的计算方式如下：单机内部扩展性：线性度=多卡性能/单卡性能/单机卡数 多机之间扩展性：线性度=...
建模优化
选择属于线性规划、非线性规划或约束类问题。添加模型序列。即创建索引，在索引创建中，选择 索引类型 为 普通索引，并赋予 索引名称，该名称将用于模型构建中的引用。您可以通过 手动输入 或者 关联表 的方式获取 索引值。定义变量。变量...
调用链采样配置最佳实践
基于核心业务多采集角度考虑，针对核心接口定向配置高比例采样率 接入可观测的诸多应用中，一般会根据业务属性区分核心应用和非核心应用；对于单个应用内，也有核心接口和非核心接口的区别。例如电商系统中，商品详情和购买流程的业务逻辑...
FM算法
FM（Factorization Machine）算法兼顾特征之间的相互作用，是一种非线性模型，适用于电商、广告及直播的推荐场景。组件配置 Designer 提供的FM算法模板包括FM训练和FM预测组件，您可以在原PAI-Studio控制台首页的 FM算法实现推荐模型 区域...
自定义TLS安全策略
DDoS高防支持TLS安全策略自定义功能，您可以根据实际业务需要，为已接入DDoS高防防护的网站业务设置合适的TLS协议版本、加密算法套件以及国密相关配置。本文介绍如何自定义TLS安全策略。默认支持的TLS协议版本 DDoS高防（中国内地）支持...
组件参考：所有组件汇总
推荐方法 FM算法 FM（Factorization Machine）算法兼顾特征之间的相互作用，是一种非线性模型，适用于电商、广告及直播的推荐场景。ALS矩阵分解 交替最小二乘ALS（Alternating Least Squares）算法的原理是对稀疏矩阵进行模型分解，评估...
光伏发电异常检测提效
例如：如下图所示：光伏发电系统的P-T曲线具有强烈的非线性，在光线充足、电池无故障的情况下，其几何形态近似于一个开口向下的马蹄形抛物线。该抛物线顶点对应的功率即为该日最大输出功率点。正常状态下P-T曲线：如下图所示：当出现外界...
用云成本需求分析
成本优化目标 在企业和组织发展的不同的阶段，企业成本核算部门会对用云提出不同的成本要求，比如，每年的企业用云成本约束，云资源使用量明显增长，但是云资源的费用较慢增长（与资源用量非线性）。这不光是对于云厂商通过自身技术迭代...
块存储FAQ
例如，云服务器ECS存储增强型实例g7se的存储I/O性能跟实例规格成线性关系，同一类型的实例规格等级越高可获得的存储IOPS和吞吐量越高。当您创建某个规格的g7se实例并挂载ESSD云盘时：如果ESSD云盘的性能总和不超过实例规格族所对应的存储I/...
相关性分析
皮尔逊相关系数：用于衡量两个数据集是否在一条线上面，即针对线性数据的相关系数计算，针对非线性数据便会有误差。肯德尔相关系数：用于反映分类变量的相关性，即针对无序序列的相关系数计算，非正太分布的数据。斯皮尔曼相关系数：用于非...
求解器用户手册
非线性规划：支持求解凸 二次规划（QP）问题、求解 半定规划（SDP）问题。优化问题的输入方式 优化问题支持3种输入方式：文件输入、数据建模APIs输入、外部建模工具调用。方式1：文件输入 支持 MPS 格式 和 LP 格式，如.mps 和.lp，以及...
申通快递迁移Oracle到Lindorm
客户感言 物流订单、巴枪等业务为非强事务要求的业务，最初选择Oracle是出于性能、稳定性的考虑，但基于菜鸟使用Lindorm，我们对Lindorm宽表引擎+搜索引擎经过充分测试后发现Lindorm的线性扩展能力更适合快递业务，0代码0迁移即可轻松应对...
新功能发布记录
设置DDoS高防报警规则 设置DDoS高防事件报警 2020-02-18 DDoS高防（新BGP）、DDoS高防（国际）控制台融合，新增地域切换菜单 DDoS高防（新BGP）和DDoS高防（国际）控制台融合，完成以下改进：在控制台上方新增地域切换菜单：中国内地地域...
最佳实践
高性能高吞吐的业务应用 需要线性扩展。高性能。业务并发量大（几万或几十万QPS），并要求线性扩展。业务对性能敏感，SQL查询要求快且稳定。手动分区 所有表均按业务场景，手动选择最合理的分区方案。业务查询SQL能改造，满足线性扩展性。
向量介绍
多模态能呈现文本无法表达的信息，如：颜色、形状、运动动态、声音、空间关系…… 同时各个领域信息的模态也有大幅度的变化：信息在这种多模态的场景下被分为两大类（结构化和非结构化）：非结构化的数据往往让计算机难以理解，传统的文本...
自动轮转密钥
原因如下：自带密钥的持久性和生命周期由用户强管控，本身就具有较高的管理难度和易错风险（例如：您需要有云下的密钥管理设施，云上云下信息需要同步，云上删除密钥材料没有任何缓冲期），而多版本带来的复杂度升级会超线性地升高易错性，...
基于TairZset实现分布式架构排行榜
背景信息 实现分布式架构排行榜有精确排名法和非精确排名法（线性插值法）两种解决方案。表 1.实现分布式架构排行榜的解决方案 解决方案 说明 精确排名法（推荐）将数据分别分配到在不同的Key上进行计算，查询时，查询目标数据在各Key中的...
HBase集群配置为高可用
HBase集群的配置为高可用，视为“合规”。应用场景 推荐您使用配置为高可用的集群，提升系统的稳定性，减少业务中断风险。风险等级 默认风险等级：中风险。当您使用该规则时，可以按照实际需求变更风险等级。检测逻辑 HBase集群的配置为高...
一键版本升级
非高可用配置集群：串行升级集群节点且需要重启生效时，如果应用正好访问到正在重启的节点，则该节点不可用。登录 Cassandra控制台，单击待进行版本升级的集群名称，进入集群详情页。在 集群详情 页，单击 小版本升级。在弹出的对话框中，...
单波段拉伸
说明 Gamma校正是一种用于调整图像亮度和对比度的非线性变换技术，可以纠正由于显示设备的不一致性而导致的图像亮度失真问题。后期效果 辉光 强度：设置辉光的强度值，范围为0~5。半径：设置辉光的半径大小，范围为0~1。阈值：设置辉光的...
HDFS的部署拓扑
本文分别为您介绍非高可用集群和高可用集群的HDFS组件的部署拓扑信息。非高可用集群 节点 组件 描述 master-1-1（部分版本为 emr-header-1）NameNode NameNode对外提供读写服务。SecondaryNameNode SecondaryNameNode合并NameNode的edits...
概述
在流计算中每个分区和RDD的Partition一一绑定，通过扩展表的分区，可以完成数据吞吐量的线性扩展。场景案例 Tablestore结合Spark的流批一体SQL实战 海量结构化数据的冷热分层一体化 Tablestore+Delta Lake（快速开始）使用方式 根据业务...
产品优势
共享读写 共享高并发读写、IO级数据一致性、线性扩展等。不支持。支持。但需要部署上层第三方商业集群文件系统后，才可使用。支持。但不支持对同一个文件的高并发读写以及IO级的数据一致性保护。协议支持 POSIX文件接口，提供与本地文件...
机器学习开发示例
已使用OSS管理控制台创建 非系统目录存储空间，详情请参见 控制台创建存储空间。警告 首次使用DDI产品创建的Bucket为系统目录Bucket，不建议存放数据，您需要再创建一个Bucket来读写数据。说明 DDI访问OSS路径结构：oss:/BucketName/Object...
概述
但随着各公司业务范围的扩展和软件系统架构持续迭代升级，系统的复杂度随之增加，面对更多的非预期事件风险，如各类软硬件故障、错误的变更、突发流量，甚至到光纤挖断、自然灾害等引起的整个机房不可用情况，如何保障系统稳定性具有很大...
功能优势
高维向量数据的高准度和高性能 以典型的人脸512维向量为例，分析型数据库MySQL版向量分析提供百亿向量100 QPS、50毫秒响应时间（RT）约束下99%的数据召回率；两亿向量1000 QPS、1秒 RT约束下99%的数据召回率。结构化和非结构化混合检索 ...
评分卡训练
评分卡是信用风险评估领域常用的建模工具，其原理是通过分箱输入将原始变量离散化后再使用线性模型（逻辑回归或线性回归等）进行模型训练，其中包含特征选择及分数转换等功能。同时也支持在训练过程中为变量添加约束条件。说明 如果未指定...
支持向量机
对于训练样本带有噪声的情况，一般采用后者，把训练样本集中错误分类的样本作为噪声 否 1.0[0,99999999]核函数类型 指定算法中要使用的内核类型 否 径向 线性 多项式 径向 sigmoid 核函数系数 核函数系数方式为手动设定时需配置 否 1[0,...
横向网关产品特性汇总
产品定位 语言栈 云原生网关 基于Envoy构建，将传统流量网关、微服务网关和安全网关三合一，通过硬件加速、WAF本地防护和Wasm插件市场等功能，构建一个低成本、高性能、高扩展、高集成的网关中间件。原生支持K8s Ingress标准，兼容Nginx ...
技术原理
HTAP PolarDB-X 1.0 解决了OLTP数据库面对海量数据下的存储、并发方面的扩展性问题，但由于缺失多机并行查询加速能力和列存储等能力，无法满足对实时性计算和复杂查询都要求较高的在线业务场景，同时还面临着ETL（Extract-Transform-Loa）...
PolarDB并行查询
目标是在为客户提供云上特有的扩展性、弹性、高可用性的同时，能够具备更低的响应延迟和更高的并发吞吐，其基本架构如下：底层的分布式共享存储突破了单机存储容量的限制，而且可以随用户的数据量增长自动弹性扩容，计算层则是一写多读的...
导入OSS数据
采集限制 限制项 说明 单个文件大小 如果是Snappy压缩格式的文件（非Framing-format格式），最大支持350 MB。如果是其他格式的文件，最大支持5 GB。单个文件大小超过限制时，导入任务会忽略整个文件。单条数据大小 单条数据最大为3 MB。...
分区设计
分区键（Partition Key）用户的分区表必须按照一种维度进行数据划分，用户在按照分区键维度进行查询时，就能做到线性性能增长，分区键通常有如下选择方法：按业务ID切分，如用户ID、商品ID等，适合每个业务ID的数据较均匀且查询简单的场景...
机器学习（MADlib）
在机器学习方面，MADlib除提供数理统计通用函数、存储过程之外，还提供一系列比较经典的监督、非监督学习算法库。前提条件 RDS PostgreSQL实例版本满足以下要求：实例大版本为PostgreSQL 12、11。实例内核小版本为20230830或以上。重要 ...
技术架构
高扩展 PolarDB-X 基于Share-Nothing的架构支持水平扩展，同时支持数据库在线扩缩容能力，在OLTP场景下可支持千万级别的并发、以及PB级别的数据存储规模，同样在OLAP场景下，引入MPP并行查询技术，扩展机器后查询能力可线性提升，满足TPC-H...
开发和测试
选择高速通道高可靠模式的开发和测试能力，您可以申请1个接入点内的资源，建立2个独立的专线连接，为您非关键业务和工作提供开发和测试恢复能力。本文为您介绍如何创建和管理开发和测试能力物理专线。前提条件 您已经开通出方向流量费。...
- 产品推荐
- 这些文档可能帮助您