业务指标趋势
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
数仓规划概述
使用DataWorks进行数据建模时，数仓架构师或者模型小组成员可以在数仓规划页面对数据分层、业务分类、数据域、业务过程、数据集市、主题域进行设计。完成设计后，模型设计师在建模过程中可以依赖数仓规划中的数据分层、业务分类、数据域、...
导入数据建模基础信息
通过导入数据建模基础信息，可以为逻辑表批量快速添加新属性。本文介绍如何批量导入数据建模基础信息。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。...
数据服务：低成本快速发布API
DataWorks的数据服务功能模块是灵活轻量、安全稳定的数据API构建平台，旨在为企业提供全面的数据共享能力，帮助用户从发布审批、授权管控、调用计量、资源隔离等方面实现数据价值输出及共享开放。功能概述 作为数据仓库与上层应用系统间的...
算法说明
哈希聚类算法 哈希聚类算法基于日志聚类功能，日志聚类功能对日志数据进行在线聚类，哈希聚类算法在 日志聚类 结果的基础上进行二次聚类，同时持续分析、监控日志数据。哈希聚类算法不依赖外部日志模板库。相似度匹配算法 相似度匹配算法...
数据加密
日志服务支持通过密钥管理服务KMS（Key Management Service）对数据进行加密存储，提供数据静态保护能力。本文主要介绍日志服务的数据加密机制以及使用KMS进行数据加密的操作步骤。前提条件 已开通密钥管理服务。更多信息，请参见 开通密钥...
导入数据建模基础信息
通过导入数据建模基础信息，可以为逻辑表批量快速添加新属性。本文介绍如何批量导入数据建模基础信息。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。...
业务指标趋势
基础值 以此数值为基础，来计算图标走势，默认基础值为 0（优先使用数据面板中的初始值）。千分位 当数据位数大于4时，系统会使用默认的分隔符进行分隔显示，符号可自定义。单击 图标控制千分位配置项的显隐。数值后缀 数值后缀样式，默认...
Designer使用案例汇总
心脏病预测 介绍如何通过数据挖掘算法构建心脏病预测模型。基于文本分析算法实现新闻分类 介绍如何通过PAI提供的文本类组件，快速构建文本分类模型。基于回归算法实现农业贷款发放预测 介绍如何通过农业贷款的历史发放情况，使用线性回归...
表结构说明
Compressed_algorithm 数据压缩算法。暂不支持。Enabled DLM策略是否生效。取值范围：ENABLED（默认）：DLM策略生效。DISABLED：DLM策略不生效。Priority_number DLM策略的执行优先级。暂不支持。Tier_partition_number 以 PARTITION COUNT...
使用扩展属性定制列存索引
具体操作请参见 设置列存数据压缩算法。order_key 用于设置列存索引的排序键。具体操作请参见 设置列索引的排序键。pruner/pruner_minmax/pruner_bloom 用于设置是否在字符串列上构建辅助索引来加速数据扫描。具体操作请参见 设置列索引...
扩展性与弹性
原地扩容在原有实例的基础上增加计算节点，这种方式通过一致性hash算法来挪动数据，扩容时挪动的数据量相对较少，扩容速度更快。而迁移扩容则是通过新建一个实例，然后将原有实例数据迁移过去的方式实现扩容，这种方式相对于原地扩容成本较...
什么是工业大脑AICS
通过输出“供、研、产、销”全链路智能算法服务，激活工业海量数据的价值，帮助工业生态伙伴快速、低成本构建行业解决方案，最终实现把人工智能与大数据技术接入到传统的生产线中，帮助生产企业实现数据流、生产流与控制流的协同，提高生产...
数据脱敏
敏感数据在使用的过程中，应根据实际使用场景进行一定程度的脱敏，数据脱敏也是满足数据相关安全法规的一项安全控制措施，在执行数据脱敏的过程中，应注意数据脱敏的程度。从脱敏程度看分为了可逆和不可逆，企业需要结合实际脱敏场景来进行...
图算法
图计算服务GraphCompute新增图算法分析功能，提供分析查询一体化解决方案，方便用户快速进行全图数据分析。功能介绍 图计算服务GraphCompute新增图算法功能，基于当前服务的数据进行算法执行，方便用户快速进行全图数据的分析。只需要开通...
PGVector
PGVector是一个高效的向量数据库插件，支持多种向量计算算法和数据类型，同时还能够高效存储与查询以向量表示的AI Embedding。本文档将为您介绍PGVector的背景、原理、使用方法及其他相关信息。背景信息 随着数据科学和机器学习等技术的...
PGVector
PGVector是一个高效的向量数据库插件，支持多种向量计算算法和数据类型，同时还能够高效存储与查询以向量表示的AI Embedding。本文档将为您介绍PGVector的背景、原理、使用方法及其他相关信息。背景信息 随着数据科学和机器学习等技术的...
产品概述
DataV-Card 可视分析创作间 DataV-Card可视分析创作间是一款专为高频数据处理的业务人员而设计的零代码数据可视分析产品。它提供简单、直观、易于使用的数据准备、洞察发现和可视化分析工具，让用户可以通过具象、生动、有趣的方式快速理解...
通过Lindorm Shell访问宽表引擎
为指定表的列族设置数据压缩算法。alter '表名',NAME=>'列族名',COMPRESSION=>'ZSTD' 为指定表的列族设置Block Encoding类型。将test表列族的Block Encoding类型设置为DATA_BLOCK_ENCODING。alter '表名',NAME=>'列族名',DATA_BLOCK_...
PGVector
PGVector是一个高效的向量数据库插件，支持多种向量计算算法和数据类型，同时还能够高效存储与查询以向量表示的AI Embedding。本文档将为您介绍PGVector的背景、原理、使用方法及其他相关信息。背景信息 随着数据科学和机器学习等技术的...
算法说明
目前智能巡检使用流式图算法、流式分解算法进行数据巡检。本文介绍流式图算法、流式分解算法的适用场景、参数配置、预览说明等内容。流式图算法 流式图算法基于Time2Graph系列模型中的原理进行研发，可对数据进行整体降噪，分析异常数据...
数据服务概述
功能介绍 数据服务采用Serverless架构，您只需要关注API本身的查询逻辑，无需关心运行环境等基础设施，数据服务会为您准备好计算资源，并支持弹性扩展，零运维成本。说明 如果使用数据服务过程中遇到问题，请单击 群邀请 加入DataWorks交流...
引用物理表质量规则
当算法运行时，画布中引用的数据质量规则也会自动运行，以检查算法输出数据是否符合要求，可在物理表监控明细查看运行结果。本文介绍如何引用逻辑表质量规则。前提条件 已搭建算法流程，具体操作，请参见 新建开发环境场景并部署运行。算法...
质量规则参数配置
统计值（重复行数/重复率）重复行数用于检查数据中重复了的行数的多少，仅计算多出来的行数，算法为总行数-去重行数。重复率=重复行数/总行数。如果需要重复数据的全部行数/重复率计算，可以使用唯一值校验模板的异常行数/异常率指标。及时...
质量规则参数配置
统计值（重复行数/重复率）重复行数用于检查数据中重复了的行数的多少，仅计算多出来的行数，算法为总行数-去重行数。重复率=重复行数/总行数。如果需要重复数据的全部行数/重复率计算，可以使用唯一值校验模板的异常行数/异常率指标。及时...
引用物理表质量规则
当算法运行时，画布中引用的数据质量规则也会自动运行，以检查算法输出数据是否符合要求，可在物理表监控明细查看运行结果。本文介绍如何引用逻辑表质量规则。前提条件 已搭建算法流程，具体操作，请参见 新建开发环境场景并部署运行。算法...
哈希分片全链路测试
算法对比：对每个数据集，通过执行不同算法（Graph、HC、Linear），得到Proxima CE结果和C++ baseline的结果，对比各自的召回率，此处设置的TopK为100。Proxima CE的recall是通过从query表中采样100条query数据做的召回，主要是与Linear...
人气模型
人气模型是什么 人气模型属于离线计算的模型，是淘宝搜索最基础的排序算法模型。人气模型会计算量化出每个商品的静态质量及受欢迎的程度的值，这个值称之为商品人气分。虽然人气模型来自淘宝搜索业务，但其实这个模型对于其他的搜索场景也...
数据安全
VPN网关产品通过加密待传输的数据实现数据安全。IPsec-VPN连接 在使用IPsec-VPN连接的过程中，本地数据中心和阿里云之间的流量均经过加密后才会进行传输以实现数据保护。每个待传输的数据包在进入IPsec-VPN连接前都会经过IPsec协议加密，...
实时Top Key统计
热Key 云原生内存数据库Tair 以最近最少使用算法LRU（Least Recently Used）为基础，经过高效的排序以及统计算法识别出当前实例的热点Key。说明 Tair 同一时间最多统计50个热点Key。通常情况下，当某个Key的QPS大于3,000时会被记录为热点...
限制说明
项目 限制说明 数据类型 云数据库 Memcache 版仅支持 Key-Value 格式的数据，不支持 array、map、list 等复杂类型的数据。数据可靠性 云数据库 Memcache 版的数据存储在内存中，服务并不保证缓存数据不会丢失，有强一致性要求的数据不适合...
Key分析
热Key 云数据库Redis以最近最少使用算法LRU（Least Recently Used）为基础，经过高效的排序以及统计算法识别出当前实例的热点Key。说明 Redis社区版实例同一时间最多统计20个热点Key，Redis企业版同一时间最多统计50个热点Key。通常情况下...
使用pgcrypto及国密SM4加密算法
AnalyticDB PostgreSQL版 内置加密解密模块pgcryoto并集成国密SM4加密算法，允许数据库用户以加密形式存储数据的某些列，为敏感数据增加了一层额外的保护。无密钥时，任何用户都无法读取以加密形式存储在数据库中的数据。注意事项 pgcrypto...
查询历史热点Key
背景信息 云原生内存数据库Tair 以最近最少使用算法LFU（Least Frequently Used）为基础，经过高效的排序以及统计算法识别出当前实例的热点Key。说明 当某个Key的QPS大于3,000时会被记录为热点Key。本文通过审计日志查询热点Key的历史记录...
加密与签名数据的格式
了解加密与签名数据的格式，可以帮助您解读加密和签名信息。加密数据格式 加密SDK（Encryption SDK）加密数据结果 加密数据结果 组成部分 说明 消息头 版本 当前版本值为1。算法 更多信息，请参见 算法。数据密钥列表 数据密钥列表由1到多...
实时Top Key统计
热Key 云数据库Redis以最近最少使用算法LRU（Least Recently Used）为基础，经过高效的排序以及统计算法识别出当前实例的热点Key。说明 Redis社区版实例同一时间最多统计20个热点Key，Tair（Redis企业版）同一时间最多统计50个热点Key。...
查询历史热点Key
背景信息 云数据库Redis以最近最少使用算法LFU（Least Frequently Used）为基础，经过高效的排序以及统计算法识别出当前实例的热点Key。说明 当某个Key的QPS大于3,000时会被记录为热点Key。本文通过审计日志查询热点Key的历史记录，如需...
新建洞察分析
洞察分析可自动通过一系列AI算法对数据内容进行洞察分析，自动生成分析结论。本文介绍如何新建洞察分析。前提条件 已完成新建数据集。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 洞察。在顶部菜单栏，选择 洞察分析...
DataWorks各版本详解
数据服务 通过向导模式生成API 支持 支持 支持 支持 全部DataWorks部署地域 通过脚本模式生成API 支持 支持 支持 支持 注册API 支持 支持 支持 支持 查看数据表 支持 支持 支持 支持 数据类型 基础关系型数据库。具体如下：PolarDB-X（DRDS...
调整实例WRITESET相关参数
WRITESET模式解决了这个问题，当该模式开启时，每个事务提交时，会将当前事务修改的数据行与其他事务修改的数据行比较，只要事务修改的数据行互相不冲突，就可以在备库并行回放，能够解决大部分的备库回放并发度不够的问题。开启条件 ...
- 产品推荐
- 这些文档可能帮助您