产品架构
流引擎 LindormStream 是面向流式数据处理的引擎，提供了流式数据的存储和轻计算功能，兼容Kafka API和Flink SQL，帮助业务基于Lindorm快速构建基于流式数据的处理和应用。LindormStream内部包含流存储、流计算两大组件，通过两者的一体化...
常见问题
阿里云数据库HBase是基于HBase及HBase生态构建的低成本一站式数据处理平台，实现数据从处理、存储到分析全流程闭环，让客户用低成本实现一站式数据处理。相比自建HBase和EMR HBase的优势是什么？提供低成本，一站式的能力。线下或者ECS自建...
同步Redis后出现数据不一致
如下图：可能原因 单靠 info keyspace 的 expires 来判断数据是否一致会出现偏差。其统计信息的统计值不是精确值，有一定的误差。info keyspace 的输出结果中：keys 表示所有keys的数据量。expires 表示带有过期keys的数据量，包含未过期和...
SmartData常见问题
EMR-3.36.1或EMR-5.2.1之前的版本，会出现Bigboot日志占用过大的问题。当您觉得Bigboot占用日志过大时，针对已有的日志文件需要您手动删除，后续您可以参照以下步骤新增配置，将日志级别由INFO修改为WARN，以减少打印过多的日志信息。在EMR...
图像分析处理介绍
图像分析处理基于阿里云深度学习技术，对图像分析后进行相关处理，多用于特殊行业如医疗辅助诊断、工业辅助生产等应用场景。服务开通 请单击 立即开通 在对应产品页面开通该服务，具体开通方式请参见 新手指南。服务开通后会开通该能力下的...
地形
常见问题 当添加地形子组件的同时也添加了道路、建筑或其它组件时，在场景地图中可能会出现地形遮挡建筑、道路等要素的问题，该怎么解决？您可以在场景编辑器中，单击需要调整参数的地形图层，在右侧图层数据面板中，单击 重新选择数据 ...
引擎类型
流引擎 兼容SQL、Kafka接口 IoT数据处理、应用日志处理、物流时效分析、出行数据处理、轨迹实时分析等场景。流引擎是面向流式数据处理的引擎，提供了流式数据的存储和轻计算功能，帮助您轻松实现将流式数据存储至 云原生多模数据库 Lindorm...
常见问题
数据库连接问题 数据同步问题 数据迁移问题 数据订阅问题 其他问题 说明 若您有其他疑问或需求，可以 通过钉钉（钉钉通讯客户端下载地址）进入到DTS客户交流钉钉群（群号：68325004196或68640008972），进行咨询。计费问题 DTS如何计费？...
地形
地形子组件常见问题 Q：当添加地形子组件的同时也添加了道路、建筑或其它组件时，在场景地图中可能会出现地形遮挡建筑、道路等要素的问题，该怎么解决？A：您可以在场景编辑器中，单击需要调整参数的地形图层，在右侧图层数据面板中，单击 ...
地形
地形子组件常见问题 Q：当添加地形子组件的同时也添加了道路、建筑或其它组件时，在场景地图中可能会出现地形遮挡建筑、道路等要素的问题，该怎么解决？A：您可以在场景编辑器中，单击需要调整参数的地形图层，在右侧图层数据面板中，单击 ...
导入与导出
保证数据处理速度，排查数据生产消费是否同步，保证有足够的数据等待导入 AnalyticDB MySQL。保证客户端机器负载，检查CPU使用率或磁盘IO使用率等系统资源是否充足。湖仓版（3.0）集群的数据接入功能（APS)，是否会单独收取链路费用？不会...
MapReduce
海量数据挖掘：非结构化数据、时空数据和图像数据挖掘。机器学习：监督学习、无监督学习和分类算法（例如决策树、SVM）。自然语言处理：基于大数据的训练和预测。基于语料库构建单词同现矩阵，频繁项集数据挖掘、重复文档检测等。广告推荐...
SQL其他常见问题
但您需要注意，MaxCompute支持的DECIMAL类型数据的最大长度为38位，但实际业务处理过程中如果数据存储为最大长度，在数据处理过程中很容易出现数据溢出问题，建议调小数据长度。新创建的MaxCompute项目不支持数据类型自动隐式转换，如何...
基础折线图
动作 动作 说明 请求基础折线图接口描述 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如基础折线图配置了API数据源为 https://api.test ，传到 请求基础折线图接口描述 动作的数据为 { id:'1'}，则最终请求...
基础折线图
动作 动作 说明 请求基础折线图接口描述 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如基础折线图配置了API数据源为 https://api.test ，传到 请求基础折线图接口描述 动作的数据为 { id:'1'}，则最终请求...
使用限制
迁移过程中，根据不同的实例系列，会出现数据库中断或者闪断。中断或者闪断期间，与数据库、账号、网络等相关的大部分操作都无法执行。重要 基础系列只有一个数据库节点，没有备节点作为热备份，因此当该节点变更配置时，会出现半小时或更...
2021年
并且因为大数据系统保证任务级别的ACID，当作业并发运行且操作的目标表相同时，可能会出现作业冲突。需要注意的是目前UPDATE/DELETE/MERGE INTO处于公测阶段，不收取计算费用，但公测期间也暂时不对您使用此功能用于生产的作业和数据提供...
常见问题
但是在一个shard存在至少两个副本，本地表的表引擎为*MergeTree，同时使用分布式表进行读数的场景下，可能会出现读出来的数据少于写入数据的情况。无论是通过分布式表写数据，还是直接写入本地表，每个机器上都会存在数据；而通过分布式表...
3D环图
动作 动作 说明 请求3d环图接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如3D环图配置了API数据源为 https://api.test ，传到 请求3D环图接口 动作的数据为 { id:'1'}，则最终请求接口为 ...
基本柱状图（v3.0及以上版本）
动作 动作 说明 请求基本柱状图接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如基本柱状图配置了API数据源为 https://api.test ，传到 请求基本柱状图接口 动作的数据为 { id:'1'}，则最终请求接口为 ...
性能监控
数据库代理升级期间，会将新的会话连接至新规格的数据库代理，持续24小时后，依然连接原规格数据库代理的会话会出现闪断。建议您在业务低谷期执行升级操作，并确保应用具备重连机制。查看性能监控信息 进入数据库代理性能监控页面。登录 ...
词云
动作 动作 说明 请求数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如词云配置了API数据源为 https://api.test ，传到 请求数据接口 动作的数据为 { id:'1'}，则最终请求接口为 https://api.test?id=1 ...
梯形柱状图（v3.0及以上版本）
动作 动作 说明 请求梯形柱状图接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如梯形柱状图配置了API数据源为 https://api.test ，传到 请求梯形柱状图接口 动作的数据为 { id:'1'}，则最终请求接口为 ...
分组柱状图（v3.0及以上版本）
动作 动作 说明 请求分组柱状图接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如分组柱状图配置了API数据源为 https://api.test ，传到 请求分组柱状图接口 动作的数据为 { id:'1'}，则最终请求接口为 ...
区间范围柱状图（v4.x版本）
动作 动作 说明 请求区间范围柱状图接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如区间范围柱状图配置了API数据源为 https://api.test ，传到 请求区间范围柱状图接口 动作的数据为 { id:'1'}，则最终...
斑马柱状图（v3.0及以上版本）
动作 动作 说明 请求斑马柱状图接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如斑马柱状图配置了API数据源为 https://api.test ，传到 请求斑马柱状图接口 动作的数据为 { id:'1'}，则最终请求接口为 ...
Logview诊断实践
此外，在Task的 StdOut 日志里，UDF框架会打印UDF输入的记录数、输出记录数、以及处理时间，如下图所示，通过这些数据可以看出UDF是否有性能问题。一般正常情况 Speed(records/s)在百万或者十万级别，如果降到万级别，那么基本上就存在性能...
主备切换
但在切换过程中，会出现以下情况：执行切换的数据节点将出现秒级的连接闪断，可能还会出现30秒内的只读状态。在实例处于 切换中 状态时，将无法执行实例级别的操作（例如变更配置、迁移可用区等）。当实例完成主备切换后，实例状态会显示为...
调优集群性能
如下图所示，某个大表分布不均，存储节点0上的Shard_0和Shard_1中数据量较大，而在存储节点1上的Shard_2和Shard_3中数据量较小，那么当您查询这个大表时，较大概率会出现存储节点0需要处理的数据多，存储节点1上需要处理的数据少的情况，...
UpdateDIProjectConfig
因为不同目的端数据源对DDL消息处理策略可能会不同，因此DataWorks只执行转发操作。返回数据 名称 类型 示例值 描述 Success Boolean true 请求是否成功。取值如下：true：成功。false：失败。RequestId String 0000-ABCD-EFG 本次调用的...
应用场景
批处理系统 很多行业的批处理系统中通常会有大量批处理操作，包含多张大表关联的复杂计算，并且涉及到大量的数据更新。批处理意味着每一次处理的数据量很大，而且有很多张大表要做关联，经常要做一些比较复杂的查询，并且更新量也比较大，...
MongoDB（无分片键）迁移至MongoDB（分片集群架构）
待迁移的集合需具备主键或唯一约束，且字段具有唯一性，否则可能会导致目标数据库中出现重复数据。如迁移对象的粒度为集合，且需进行编辑（如集合的名称映射），则单次迁移任务最多支持迁移1000个集合。当超出数量限制，任务提交后会显示...
MongoDB（无分片键）迁移至MongoDB（分片集群架构）
待迁移的集合需具备主键或唯一约束，且字段具有唯一性，否则可能会导致目标数据库中出现重复数据。如迁移对象的粒度为集合，且需进行编辑（如集合的名称映射），则单次迁移任务最多支持迁移1000个集合。当超出数量限制，任务提交后会显示...
MongoDB（无分片键）同步至MongoDB（分片集群架构）
数据传输服务DTS（Data Transmission Service）支持在源端MongoDB的数据中分片键字段缺失的情况下，将数据同步至分片集群架构的MongoDB中，并指定分片键的默认值。本文以 云数据库MongoDB版（副本集架构）为源且 云数据库MongoDB版（分片...
LTS（原BDS）服务介绍
低成本：LTS在HBase、Phoenix、Cassandra等开源系统上有深入的优化，提供物理文件级别的数据处理，比传统的数据复制效率提高10倍。同时在CPU、缓存、内存、网络IO上的整体优化使LTS提供一个高性价比的数据通道，减少客户数据流转、处理的...
确认表血缘
导致下游取数出现问题 若当前节点 Job_B 代码中配置了依赖A表的数据，但未将产出A表数据的节点 Job_A 作为当前节点依赖的上游，则可能会出现A表数据未产出，当前节点便开始执行，最终导致 Job_B 节点产出的表数据出现问题。虽然 Job_A 的...
基础散点图
动作 动作 说明 请求基础散点图接口描述 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如散点图配置了API数据源为 https://api.test ，传到 请求基础散点图接口描述 动作的数据为 { id:'1'}，则最终请求接口为 ...
PolarDB MySQL版CPU使用率高
整个数据库系统的缓存区域，是数据交换最为频繁的位置，如果内存不足和内存页争抢，则会出现各种异常的堆积和慢查询。最典型的表现是数据库突然CPU上涨打满，并且出现慢查询。经过排查后发现该问题并非索引缺失，这个时候就有可能是内存...
冷数据归档常见问题
本文汇总了 PolarDB 冷数据归档相关的常见问题。出现"[Data Lifecycle Management]DLM storage engine is not support.The value of polar_dlm_storage_mode is OFF."报错，如何处理？您需要在 PolarDB控制台 上开启冷数据归档功能。详情请...
基础散点图
动作 动作 说明 请求基础散点图接口描述 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如散点图配置了API数据源为 https://api.test ，传到 请求基础散点图接口描述 动作的数据为 { id:'1'}，则最终请求接口为 ...
- 产品推荐
- 这些文档可能帮助您