MaxCompute数据源
},"name":"Writer","category":"writer"}],"setting":{"errorLimit":{"record":"0"/错误记录数，表示脏数据的最大容忍条数。},"speed":{"throttle":true,/当throttle值为false时，mbps参数不生效，表示不限流；当throttle值为true时,表示限...
概述
安全可靠的加密数据共享 由于加密数据的密钥只由数据拥有者持有，任何其他角色都无法接触明文数据。在需要将部分数据与第三方分享时，用户希望在不泄漏自身密钥的前提下完成加密数据的分享，同时满足合规要求。注意事项 加密规则在主地址上...
亿海蓝-航运大数据的可视化案例
——亿海蓝CTO 客户简介 亿海蓝是中国的航运大数据公司，做为中国最大的AIS数据服务运营商，发展目标是通过大数据技术推动全球航运物流与互联网的融合，加速航运产业转型升级。亿海蓝目前已为全球上百万行业用户提供数据服务，客户涵盖港口...
存储空间分析
您可以在 AnalyticDB for MySQL 空间总览页面查看集群和表的总数据量、冷数据量、热数据量、索引数据量、分区数量、节点的磁盘使用率等指标。查看集群级别的数据量 通过 空间总览 可以查看当前集群的 总数据量、热数据量、冷数据量、以及 ...
冷数据归档
如下所示：对于数据量最大的冷数据，时序引擎会自动根据用户设置的基于业务时间戳的冷热分界线自动将冷数据归档到冷存储中。当需要查询冷数据时，用户可以无感知地按正常查询的方式进行冷数据查询。开通冷存储 时序引擎实例创建后本身就...
限制说明
数据大小 云数据库 Memcache 版支持的单条缓存数据的 Key 最大不超过 1 KB，Value 最大不超过 1 MB，过大的数据不适合存储。事务支持 云数据库 Memcache 版不支持事务，有事务性要求的数据不适合写入，而应该直接写入数据库。使用场景 当...
冷热分层
maxoffsetsperchannel：通道每个分区可以写入数据的最大数据量。启动Stream作业进行实时投递 根据Tablestore的主键列（UserId和OrderId）进行聚合，同时根据CDC日志的操作类型（PUT，UPDATE，DELETE），转化为对应的Delta操作。ots_record_...
基于AnalyticDB构建企业数仓
同步速率 设置同步速率可以保护读取端数据库，以避免抽取速度过大，给源库造成太大的压力。同步速率建议限流，结合源库的配置，请合理配置抽取速率。错误记录数 错误记录数，表示脏数据的最大容忍条数。独享数据集成资源组 选择任务运行的...
配置数据校验
说明 参数值为0时表示无限制，当 每秒读取的最大数据行数rps 和 每秒读取最大的Byte数byte/s 均为0时，表示不限速。每秒读取最大的Byte数byte/s 设置 校验对象。选择源库待校验的对象。在 源库对象 框中勾选需要进行数据校验的对象，然后...
双11雷达图
当预设最大值大于数据的最大value值时，预设最大值越大，雷达区域占比越少。颜色 雷达图的渐变颜色，单击右侧的 或 图标，添加或删除一个颜色区域。单击 或 图标配置多个颜色系列的排列样式。单击 图标，即可复制当前选中颜色系列配置内容...
准备数据
同步速率 设置同步速率可以保护读取端数据库，以避免抽取速度过大，给源库造成太大的压力。同步速率建议限流，结合源库的配置，请合理配置抽取速率。错误记录数 错误记录数，表示脏数据的最大容忍条数。确认当前节点的配置无误后，单击左上...
双11雷达图
当预设最大值大于数据的最大 value 值时，预设最大值越大，雷达区域占比越少。颜色 雷达图的渐变颜色，单击右侧的 或 图标，添加或删除一个颜色区域。单击 或 图标配置多个颜色系列的排列样式。单击 图标，即可复制当前选中颜色系列配置...
离线同步并发和限流之间的关系
限制和最佳实践：分布式执行模式下，配置较大任务并发度可能会对您的数据存储产生较大的访问压力，请评估数据存储的访问负载。如果您的独享资源组机器台数为1，不建议使用分布式执行模式，因为执行进程仍然分布在一台Worker节点上，无法...
SelectDB数据源
否 500000 batchSize 每批次导入数据的最大数据量。和 maxBatchRows 共同控制每批次的导入数量。每批次数据达到两个阈值之一，即开始导入这一批次的数据。否 94371840 maxRetries 每批次导入数据失败后的重试次数。否 3 labelPrefix 每批次...
导入导出表数据
Record Limit：导入数据的最大行数。Size(MB)Limit：导入数据量最大值，单位为MB。Error Record Limit：容错行数。Include Column Header：是否导入列标题。单击 OK，完成数据导入。提示 Success，表示数据导入成功，您可以在表中查看导入...
离线同步能力说明
数据集成的离线同步功能为您提供数据读取（Reader）和写入插件（Writer），方便您通过定义来源与去向数据源，并结合DataWorks调度参数使用，将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。使用限制 ...
区域热力层
最大值：组件数据中最大的value值所对应区域的颜色。无值：系统在获取区域热力边界数据时，如果缺少了某个区域的数据（当区域热力图数据中没有对应的地理边界数据中的adcode值时），这个区域的颜色就会展示为无值的颜色。面透明度：区域面...
迁移服务（MMA）
单个任务处理的最大数量（单位GB）需要迁移的分区数据大小的最大值。Hive Job配置 Hive引擎相关的任务参数，默认为MR引擎的部分配置。说明 该配置用于解决YARN容器内存不足、指定Spark运行队列等问题。数据库白名单 需要迁移的Hive数据库，...
SQL其他常见问题
但您需要注意，MaxCompute支持的DECIMAL类型数据的最大长度为38位，但实际业务处理过程中如果数据存储为最大长度，在数据处理过程中很容易出现数据溢出问题，建议调小数据长度。新创建的MaxCompute项目不支持数据类型自动隐式转换，如何...
区域热力层
最大值：组件数据中最大的 value 值所对应区域的颜色，请参见 颜色选择器说明 进行修改。仅在关闭只显示边界开关时展示。无值：系统在获取区域热力边界数据时，如果缺少了某个区域的数据（当区域热力图数据中没有对应的地理边界数据中的...
使用DataWorks
MaxCompute支持通过DataWorks的数据集成功能将MaxCompute中的数据以离线方式导出至其他数据源。当您需要将MaxCompute中的数据导出至其他数据源执行后续数据处理操作时，您可以使用数据集成功能导出数据。本文为您介绍如何将MaxCompute的...
使用限制
每个集群可创建普通账号的最大值 256 无 每个集群的最大连接数 5000 无 每个集群中的白名单分组的最大值 50 无 每个白名单分组中IP个数的最大值 1000 无 每个集群中IP白名单个数的最大值 25000 无 每个集群中分区数的最大值 102400 无 每个...
配置安全规则
将数据库添加到数据库审计系统后，您可以为数据库配置安全规则（即审计规则），当数据库的审计记录命中审计规则时，数据库审计系统会触发告警。本文介绍如何配置审计规则。背景信息 审计规则支持内置规则和自定义规则。内置规则即数据库...
雷达图
最大值 半径轴的最大值，支持自定义输入，也支持系统选择 数据最大值，取数据中的最大值。说明 默认使用数据中的最大最小值，如若不符合需求请点击下拉框输入所需的最大最小值。轴线：雷达图的半径轴轴线样式，包括线的形状、线的粗细和线...
DataStudio侧实时同步任务配置
提供任务并发数控制功能来限制数据集成读取和写入数据库的最大并发数。支持您控制同步任务是否容忍脏数据的产生。当不允许脏数据产生时，则同步任务执行过程中如果产生脏数据，任务将失败退出。当允许脏数据时：同步任务将忽略脏数据（即...
实时同步常见问题
设置并发时，源端若为RDS可结合数据库允许的最大连接数进行评估，LogHub可根据shard数来设置。升级资源组规格：当源端数据量增大，或者同步解决方案任务重新编辑过同步任务（将任务由读取单库单表变更为读取多库多表），导致当前资源组消耗...
lo-implementation
本文介绍了大对象的特性。大对象的实现将大对象分解成很多...只有大对象的拥有者（或者一个数据库超级用户）可以创建大对象、注释大对象或修改大对象的拥有者。要调整这些行为以兼容以前的发行，请见 lo_compat_privileges 的运行时参数。
ALTER DATABASE
只有数据库拥有者或者超级用户可以重命名一个数据库，非超级用户拥有者还必须拥有 CREATEDB 特权。当前数据库不能被重命名（如果你需要这样做请连接到一个不同的数据库）。第三种形式更改数据库的拥有者。要修改拥有者，你必须拥有该数据库...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
内置全密态能力
全密态云数据库是达摩院数据库与存储实验室的自研产品，可以杜绝数据库应用服务端数据拥有者以外的任何人接触到用户的明文数据，提高数据管理的强安全性和隐私性。全密态数据库（EncDB）-提供端到端（客户端到数据库服务端）全程加密的高...
Kafka数据源
offset Long timestamp Long headers String partition Long 离线写数据 DataWorks将数据写入Kafka时，支持写入JSON格式或text格式的数据，不同的数据同步方案往Kafka数据源中写入数据时，对数据的处理策略不一致，详情如下。重要 写入text...
产品和业务限制
S2n 3个 没有高配 表或分区单次导入最大数据量 min(系统最大值,ecuCountdiskSize 0.2)联系技术支持 单个分析型数据库MySQL版最多表数 256 联系技术支持 单个表组总表数 256 联系技术支持 单表最大列数 1024 暂无高配 最大一级分区数 255 暂...
同步 OceanBase 数据库的数据至 RocketMQ
如果开启，请设置 RPS（全量同步阶段每秒最多可以同步至目标端的数据行数的最大值限制）和 BPS（全量同步阶段每秒最多可以同步至目标端的数据量的最大值限制）。说明 此处设置的 RPS 和 BPS 仅作为限速限流能力，全量同步实际可以达到的...
数据上传
DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理，为您提供便捷的数据传输服务，助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...
离线同步数据质量排查
如果写出数据和目标存储已有数据发生数据约束（主键冲突、唯一键约束、外键约束等），数据库则使用来源数据update更新目标表已有数据行，在目标表存在多个数据约束的情况下，数据替换可能会失败并产生脏数据 如果写出数据和目标存储已有...
数据集成概述
基本概念 并发数 并发数是数据同步任务中，可以从源并行读取或并行写入数据存储端的最大线程数。限速 限速是数据集成同步任务可以达到的传输速度限制。脏数据 脏数据是对于业务没有意义，格式非法或者同步过程中出现异常的数据。单条数据...
区域热力层
最大值 数据面板中最大的 value 值所对应区域的颜色。无值 系统在获取区域热力边界数据时，如果缺少了某个区域的数据（当区域热力图数据中没有对应的地理边界数据中的adcode值时），这个区域的颜色就会显示为 无值 的颜色。边线配置 参数 ...
购买数据安全中心
阿里云 数据安全中心DSC（Data Security Center）为您提供以数据为中心视角的安全风险治理能力，包括数据梳理、数据脱敏、数据风险审计等。本文介绍如何购买 DSC 服务。购买指导视频 支持的地域和数据库类型 购买数据安全中心前，您需要先...
地图容器
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。详情请参见 配置组件数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
颜色映射
突出高值 将数据从最大值到均值进行线性映射，突出数据中高值的分布。突出低值 将数据从均值到最小值进行线性映射，突出数据中低值的分布。极值 将数据从均值向两侧进行线性映射，突出极值的数据分布。自定义 根据自身需要，自定义设置分段...
- 产品推荐
- 这些文档可能帮助您