设置列存数据压缩算法
若要修改，需要删除原来的数据，再使用新的建表语句，指定列的新压缩算法。修改单列数据的压缩方式将在后续版本中推出。示例：CREATE TABLE t14(col1 INT COMMENT 'COLUMNAR=1 codec_opt={ZSTD}',col2 DATETIME COMMENT 'COLUMNAR=1 codec_...
Redis过期Key的逐出策略
Redis过期Key清理策略 清理过期Key的算法 数据逐出算法 使用Redis的注意事项 详细信息 Redis过期Key清理策略 为了防止一次性清理大量过期Key导致Redis服务受影响，Redis会在CPU空闲时清理过期Key。具体Redis逐出过期Key的策略如下所示：...
什么是智能众包
人工智能众包（AI Crowdsourcing）基于共享人力资源模式，为人工智能算法提供数据采集、清洗、标注等服务，帮助企业快速构建算法数据集。人工智能众包（AI Crowdsourcing）基于共享人力资源模式，为人工智能算法提供数据采集、清洗、标注等...
创建三维城市
可选，如果您需要配置算法参数，可单击 添加图层 弹窗右上角的 高级配置，在不同的城市基底数据和业务数据的参数编辑器内，查看或修改对应数据算法参数内容。单击 添加图层 弹窗右下角的 确定 即可完成三维城市的创建，并进入项目载入页面...
创建三维城市场景项目
如果您需要配置算法参数，可单击 添加图层 对话框右上角的 高级配置，在不同的城市基底数据和业务数据的参数编辑器内，查看或修改对应数据算法参数内容。单击 添加图层 对话框右下角的 确定 即可完成三维城市构建器项目的创建，并进入项目...
创建三维城市场景项目
如果您需要配置算法参数，可单击 添加图层 对话框右上角的 高级配置，在不同的城市基底数据和业务数据的参数编辑器内，查看或修改对应数据算法参数内容。单击 添加图层 对话框右下角的 确定 即可完成三维城市构建器项目的创建，并进入项目...
创建数据流
说明 数据流的最后一个节点必须是 数据输出，提供处理后的数据要写入的目标表。在左侧 任务类型 列表中，拖拽 数据输出 节点到画布的空白区域。单击 数据输出 节点，在页面下方的 数据输出 页签中配置数据输出节点。数据库：配置项 描述 ...
功能特性
配置管理 数据保护 敏感数据管理 DMS的敏感数据保护能力能根据所选的敏感数据扫描模板、敏感数据识别模型以及脱敏算法对数据进行脱敏处理，以避免敏感数据滥用，有效保护企业的敏感数据资产，防止数据泄露造成企业经营资金损失或罚款。...
组件参考：所有组件汇总
IForest异常检测 该组件使用sub-sampling算法，降低了算法的计算复杂度，可以识别数据中的异常点，在异常检测领域有显著的应用效果。One-Class SVM异常检测 该组件与传统SVM不同，是一种非监督的学习算法。您可以使用One-Class SVM异常检测...
导入与导出
整库同步：在AnalyticDB MySQL中新建一张表，表名要不同于报错的表，表结构需要和源表的表结构一致，通过 INSERT INTO SELECT 将源表中的数据写入新建表中，删除报错的表，然后通过Rename将新表更名为报错的表名，重启DTS任务即可。...
单值查询数据
本文介绍单值查询数据信息。请求路径和方法 请求路径：/api/query 请求方法：POST 描述：查询数据 请求内容（JSON 格式）名称 类型 是否必选 描述 默认值 举例 start Long 是 开始时间。单位为秒或者毫秒，判断规则详见下面的 时间戳单位...
常见问题总览
本文档介绍了 数据安全中心DSC（Data Security Center）服务的常见问题和解决方法。功能相关 数据安全 数据授权 数据扫描和识别 数据脱敏 水印使用限制 支持列表 支持识别的原子模型 支持识别的OSS文件类型 支持的数据脱敏算法
计费概述
实例类型 适用地域 计费方式 计费项 说明 企业版实例 华东2（上海）华北2（北京）华南1（深圳）新加坡 日本（东京）美国（硅谷）美国（弗吉尼亚）德国（法兰克福）包年包月 同时在线设备数 消息上下行TPS 消息转发TPS 时序数据存储IOPS...
功能更新动态（2024年）
创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 新建Doris数据源 创建GreenPlum数据源 新建Amazon S3数据源 离线集成 新增集成任务...
文档更新动态（2024年）
更新说明 创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 新建Doris数据源 创建GreenPlum数据源 数据引入-离线集成-离线单条管道-...
创建算法实例
背景信息 物联网平台数据服务针对每个数据智能算法提供以下额度，作为算法运行的规格资源。算法实例的总规格资源为 购买数量*单规格支持的额度。算法类型 单规格支持的额度 I-V曲线诊断 支持 100个 光伏阵列的I-V曲线诊断。功率时序曲线...
DataWorks交流钉钉群
在阿里巴巴内部，每天有数万数据、算法开发工程师正在使用DataWorks。您需要先单击 申请链接 加入“阿里云大数据AI平台”交流群，再扫描下方二维码加入DataWorks产品钉钉交流群，加入后，即可获得专属产品技术支持，技术直播活动，产品新...
Trajectory最佳实践
如果要对整个数据默认采用lz4压缩算法，设置方法如下：数据库使用lz4压缩 Alter database dbname Set toast_compression_use_lz4=true;数据库使用默认压缩 Alter database dbname Set toast_compression_use_lz4=false;
Trajectory最佳实践
如果要对整个数据默认采用lz4压缩算法，设置方法如下：数据库使用lz4压缩 Alter database dbname Set toast_compression_use_lz4=true;数据库使用默认压缩 Alter database dbname Set toast_compression_use_lz4=false;
Trajectory最佳实践
如果要对整个数据默认采用lz4压缩算法，设置方法如下：数据库使用lz4压缩 Alter database dbname Set toast_compression_use_lz4=true;数据库使用默认压缩 Alter database dbname Set toast_compression_use_lz4=false;
配置脱敏模板和算法
数据安全中心（Data Security Center，简称DSC）支持配置脱敏模板和脱敏算法。您可以将使用频率较高且应用场景相同的脱敏算法配置在同一个脱敏模板中，并在配置静态脱敏规则时使用已有模板，提高配置脱敏规则的效率。本文介绍如何配置脱敏...
支持的数据脱敏算法
本文介绍支持的数据脱敏算法。算法分类 分类描述 算法描述 输入参数 适用类型和典型场景 哈希脱敏 不可逆算法。适用于密码或需要通过对比进行敏感数据确认的场景。支持常见的哈希算法，并支持偏移量（加盐值）配置。MD5 Salt值 敏感类型：...
数据加密
支持的数据加密算法为AES算法（默认）和国密算法SM4。通过用户自带密钥（BYOK）加密 您可以在KMS控制台上创建主密钥CMK，并授权日志服务相应的权限。日志服务调用KMS接口时，使用该CMK创建用于数据加密的密钥。当您的主密钥CMK被删除或禁用...
表变更管理
Lindorm宽表支持多种表属性，例如列值保留版本数、数据压缩方式、数据有效期、冷热分界线等。您可以通过集群管理系统，为已创建的宽表添加或修改表属性。操作 步骤 登录集群管理系统。在左侧导航栏中，选择 数据管理>表变更管理。在 变更...
Trajectory最佳实践
如果要对整个数据库默认采用lz4压缩算法，设置方法如下：数据库使用lz4压缩 Alter database dbname Set toast_compression_use_lz4=true;数据库使用默认压缩 Alter database dbname Set toast_compression_use_lz4=false;
什么是工业大脑AICS
通过输出“供、研、产、销”全链路智能算法服务，激活工业海量数据的价值，帮助工业生态伙伴快速、低成本构建行业解决方案，最终实现把人工智能与大数据技术接入到传统的生产线中，帮助生产企业实现数据流、生产流与控制流的协同，提高生产...
用户价值
数据资源平台为用户提供了一站式数据资产定义、生产、管理与服务平台，提供企业级数据资产构建能力和一致性使用体验，助力客户快速构建数据智能平台，实现数据资源统一管理，挖掘潜在规律，优化业务决策，让大数据真正的驱动客户业务。...
数据加密
支持的数据加密算法为AES算法（默认）和国密算法SM4。通过用户自带密钥（BYOK）加密 您可以在KMS控制台上创建主密钥CMK，并授权日志服务相应的权限。日志服务调用KMS接口时，使用该CMK创建用于数据加密的密钥。当您的主密钥CMK被删除或禁用...
表结构说明
Compressed_algorithm 数据压缩算法。暂不支持。Enabled DLM策略是否生效。取值范围：ENABLED（默认）：DLM策略生效。DISABLED：DLM策略不生效。Priority_number DLM策略的执行优先级。暂不支持。Tier_partition_number 以 PARTITION COUNT...
使用扩展属性定制列存索引
具体操作请参见 设置列存数据压缩算法。order_key 用于设置列存索引的排序键。具体操作请参见 设置列索引的排序键。pruner/pruner_minmax/pruner_bloom 用于设置是否在字符串列上构建辅助索引来加速数据扫描。具体操作请参见 设置列索引...
文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
配置解密转换组件
针对上游加密过的数据，如果已知加密算法和密钥，就可以对数据进行解密，获取明文，进行后续的处理。本文为您介绍如何配置解密转换组件。前提条件 已创建离线单条管道，详情请参见 通过离线单条管道配置集成任务。已创建字段加密配置，详情...
图算法
图计算服务GraphCompute新增图算法分析功能，提供分析查询一体化解决方案，方便用户快速进行全图数据分析。功能介绍 图计算服务GraphCompute新增图算法功能，基于当前服务的数据进行算法执行，方便用户快速进行全图数据的分析。只需要开通...
质量规则参数配置
统计值（重复行数/重复率）重复行数用于检查数据中重复了的行数的多少，仅计算多出来的行数，算法为总行数-去重行数。重复率=重复行数/总行数。如果需要重复数据的全部行数/重复率计算，可以使用唯一值校验模板的异常行数/异常率指标。及时...
质量规则参数配置
统计值（重复行数/重复率）重复行数用于检查数据中重复了的行数的多少，仅计算多出来的行数，算法为总行数-去重行数。重复率=重复行数/总行数。如果需要重复数据的全部行数/重复率计算，可以使用唯一值校验模板的异常行数/异常率指标。及时...
时序异常检测
数据服务提供时序异常检测算法，采用智能时序算法，实时分析设备时序数据，准确感知设备异常现象。查看基本信息 在 物联网平台控制台 的 实例概览 页面，单击目标企业版实例卡片。...算法的 使用流程 创建算法实例 配置算法实例 查看实例运维
管理动态脱敏规则
动态脱敏用于脱敏识别规则所覆盖的数据对象，且不改变真实数据。本文为您介绍如何新建及管理动态脱敏规则。背景信息 动态脱敏规则适用于开发环境使用生产环境数据的场景。对满足条件的数据对象进行数据变形或加密实现敏感隐私数据的可靠...
增强E-R
模式识别E-R 模式识别（SchemaMatching）E-R整合了阿里巴巴内部的数据识别算法能力，该算法可在已有的数据资产中自动挖掘数据库内潜在的关联关系，即使没有对数据进行任何标识也会被挖掘出来，挖掘到的关系将用于构建数据资产知识图谱。...
PGVector
PGVector是一个高效的向量数据库插件，支持多种向量计算算法和数据类型，同时还能够高效存储与查询以向量表示的AI Embedding。本文档将为您介绍PGVector的背景、原理、使用方法及其他相关信息。背景信息 随着数据科学和机器学习等技术的...
PGVector
PGVector是一个高效的向量数据库插件，支持多种向量计算算法和数据类型，同时还能够高效存储与查询以向量表示的AI Embedding。本文档将为您介绍PGVector的背景、原理、使用方法及其他相关信息。背景信息 随着数据科学和机器学习等技术的...
- 产品推荐
- 这些文档可能帮助您