任务运行诊断
详情请参见 数据集成常见问题。任务报警诊断 对于配置了监控报警的任务，您可在该任务 运行诊断 页面的提示信息区域，单击 查看详情，在 监控详情 对话框查看将当前任务纳入监控的规则或基线列表，以及各个规则或基线的触发情况。说明 仅当...
常见问题
本文介绍使用OSS PHP SDK的常见问题及解决方法。下载数据到本地文件时，报错 cURL error:Failled writing body(0!13769)错误原因 下载数据到本地文件时，数据无法保存至本地文件。解决方法 检查是否拥有本地文件的写入权限。检查保存的本地...
数据扫描和识别
本文介绍敏感数据扫描和识别的常见问题及解决方法。数据扫描会影响我的数据库性能吗？DSC支持扫描的数据源有哪些？数据源授权完成后需要多长时间完成扫描？DSC对于非结构化数据源（OSS）的扫描机制是怎样的？是否支持对已扫描过的OSS文件...
常见问题总览
本文档介绍了 数据安全中心DSC（Data Security Center）服务的常见问题和解决方法。功能相关 数据安全 数据授权 数据扫描和识别 数据脱敏 水印使用限制 支持列表 支持识别的原子模型 支持识别的OSS文件类型 支持的数据脱敏算法
账号与权限
本文介绍 AnalyticDB MySQL 中账号与权限的常见问题及解决方法。注意事项 本文中的常见问题适用于 AnalyticDB MySQL 数仓版（3.0）集群和 湖仓版（3.0）集群。如何获取账号的AccessKey信息？获取阿里云账号的AccessKey信息，请参见 获取...
DataWorks OpenAPI概述
DataWorks为您提供了涵盖租户、元数据、数据开发、运维中心、数据集成等多个功能模块的OpenAPI接口，不同API的QPS限制、每日调用次数上限和支持使用的DataWorks服务版本存在差异。您可参考本文了解各OpenAPI支持的DataWorks版本及地域、...
账单数据订阅及查询分析
您可在用户中心订阅不同类型的账单数据，例如，计费项明细账单、计费项账单按天汇总等。订阅成功后，账单数据将会定时同步至MaxCompute，您...相关文档 大数据分析工具的常见问题和解决方法，详情请参见 大数据分析工具的常见问题和解决方法。
数据源配置常见问题
本文介绍在DataV中连接数据源时，遇到的常见问题及相应的解决方法。数据库连接不成功，如何解决？请根据数据库的网络类型和所在地域，将相应的DataV服务器IP地址加入到您的数据库白名单或ECS的安全组设置中，或者使用代理工具来连接您的...
数据源配置常见问题
本文介绍在DataV中连接数据源时，遇到的常见问题及相应的解决方法。数据库连接不成功，如何解决？请根据数据库的网络类型和所在地域，将相应的DataV服务器IP地址加入到您的数据库白名单或ECS的安全组设置中，或者使用代理工具来连接您的...
MySQL数据源
更多其他数据集成常见问题请参见 数据集成常见问题。附录：MySQL脚本Demo与参数说明 附录：离线任务脚本配置方式 如果您配置离线任务时使用脚本模式的方式进行配置，您需要在任务脚本中按照脚本的统一格式要求编写脚本中的reader参数和...
数据导入性能优化
常见问题及解决方法 当通过程序导入数据到 AnalyticDB MySQL 性能不佳时，首先排查客户端性能是否存在瓶颈。保证数据源的数据生产速度足够大，如果数据源来自其他系统或文件，排查客户端是否有输出瓶颈。保证数据处理速度，排查数据生产...
数据导入性能优化
常见问题及解决方法 当通过程序导入数据到 AnalyticDB MySQL 性能不佳时，首先排查客户端性能是否存在瓶颈。保证数据源的数据生产速度足够大，如果数据源来自其他系统或文件，排查客户端是否有输出瓶颈。保证数据处理速度，排查数据生产...
常见问题索引
SDK集成常见问题 Q1：SDK log数据包的发送策略？Q2：SDK log数据包有多大？Q3：集成SDK后为什么没看到日志？Q4：SDK相关接口调用的顺序是否影响埋点？Q5：日志中有哪些关键字会被过滤呢？Q6：2001/2101/19999有何规定的业务含义?Q7：iOS...
公共数据集成（调试）资源组：按量计费
公共数据集成（调试）资源组是DataWorks提供的公共资源组的一种，计费方式为按量计费。本文为您介绍公共数据集成（调试）资源组的按量...常见问题 DataWorks公共数据集成（调试）资源组的常见问题，详情请参见 公共数据集成（调试）资源组。
常见问题
本文汇总了使用蚂蚁隐私计算服务平台 AntPPC 时遇到的常见问题及解决方法。多方安全建模 以下是在使用多方安全建模时，不同场景中遇到的常见问题及其解决方法。隐私求交 隐私求交场景中的常见问题和解决方法如下：Q：关联键重复怎么办？A：...
收费常见问题
本文为您介绍数据集成收费相关问题及解决方案。数据集成是怎么收费的？数据集成收费包含三种途径，详情请参见 独享数据集成资源组计费说明：包年包月、公共数据集成（调试）资源组：按量计费、公网流量计费说明。
一键MaxCompute任务出错恢复
本文为您介绍一键实时同步MaxCompute任务失败场景及恢复解决方法。常见的实时任务写入失败场景 场景分类 相关文档 Binlog无丢失场景及全增量同步任务 Binlog无丢失 Binlog有丢失场景及全增量同步任务 Binlog有丢失 Merge任务的报错失败场景...
服务支持
发布记录 DataV-Board 数据看板 DataV-TwinFabric 孪生仿真 DataV-Atlas 可视分析地图 DataV-Card 可视分析创作间 常见问题 DataV-Board 数据看板 配置项常见问题 组件使用常见问题 账号配置常见问题 视频流接入常见问题 数据源配置常见...
组件使用常见问题
使用地图瓦片组件时的常见问题 本节主要介绍DataV地图瓦片相关的常见问题及相应的解决方法。在局域网中，如何调用地图瓦片？在局域网中您可以将在线瓦片缓存在您的Web服务器上，按照标准文件夹命名的形式进行存放，例如：[缩放等级]/[行号]...
组件使用常见问题
使用地图瓦片组件时的常见问题 本节主要介绍DataV地图瓦片相关的常见问题及相应的解决方法。在局域网中，如何调用地图瓦片？在局域网中您可以将在线瓦片缓存在您的Web服务器上，按照标准文件夹命名的形式进行存放，例如：[缩放等级]/[行号]...
流式ETL
实时数据集成：ETL强大的流式数据转换处理能力大幅提升数据集成效率，低代码的开发方式也进一步降低了数据集成的难度和成本，让企业专注于数据价值实现。实时数据仓库：行业领先的流数据处理能力帮助企业快速搭建实时数据仓库。离线数仓...
什么是ETL
实时数据集成：ETL强大的流式数据转换处理能力大幅提升数据集成效率，低代码的开发方式也进一步降低了数据集成的难度和成本，让企业专注于数据价值实现。实时数据仓库：行业领先的流数据处理能力帮助企业快速搭建实时数据仓库。离线数仓...
迁移MySQL至Hologres
MySQL整库实时同步至Hologres 同步解决方案 数据集成支持同步解决方案功能，您可以通过配置同步规则，一次性实时同步数据至对应的数据源中。同步解决方案支持整库内批量同步多张表，也支持全量、增量数据一体化同步（先同步全量数据，再...
写入或更新调优指南
其他常见异常信息和排查方法请参见 Blink和Flink常见问题及诊断。数据集成调优 并发配置与连接的关系。数据集成中非脚本模式作业的连接数为每个并发三个连接，脚本模式作业可通过 maxConnectionCount 参数配置任务的总连接数，或者 ...
文档修订记录
新说明 本文以GitHub公开事件数据为例，为您介绍使用Hologres+DataWorks数据集成构建实时数仓，并通过Hologres对接BI分析工具（本文以DataV为例）的基本步骤，实现海量数据的实时分析。RDS实时同步至Hologres 2023.07.11 新增产品形态。新...
实时同步任务延迟解决方案
此时将无法通过数据集成任务设置解决延迟问题，需要从Kafka、DataHub和Loghub系统的上游数据生产侧解决数据写入倾斜问题后，延迟问题才能恢复。您可以通过在上述任务 运行详情 中切换到 运行信息 页签，查看不同Reader线程总字节数统计，...
离线同步常见问题
文档概述 问题分类 相关文档 离线同步任务运维常见问题 为什么数据源测试连通性成功，但是离线同步任务执行失败？如何切换数据集成任务执行资源组？脏数据如何排查和定位？如何查看脏数据？如果离线同步传输数据时，脏数据超出限制，是否...
2020年
MaxCompute Spark使用及常见问题 2020-12-24 新增MaxCompute Logview2.0参数详解及常见问题视频。新视频 介绍MaxCompute Logview2.0参数及常见问题。MaxCompute Logview2.0参数详解及常见问题 2020-12-21 新增STACK和GET_USER_ID函数。新...
RDS实时同步至Hologres
本文以GitHub公开事件数据为例，为您介绍使用Hologres+DataWorks数据集成构建实时数仓，并通过Hologres对接BI分析工具（本文以DataV为例）的基本步骤，实现海量数据的实时分析。示例架构 其中：待处理数据：本实践使用GitHub公开事件作为...
2023年
作业运行常见问题 2023-08-01 新增Github公开事件数据 新说明 本文为您介绍MaxCompute公开数据集中Github公开事件数据的基本信息、如何通过MaxCompute执行Github公开事件数据查询以及Query样例和分析结果。Github公开事件数据 2023年7月...
2022年
基于MaxCompute的智能推荐解决方案 基于MaxCompute+开放搜索的电商、零售行业搜索开发实践 基于MaxCompute+PAI的用户增长方案实践 基于MaxCompute的实时数据处理实践 基于MaxCompute分布式Python能力的大规模数据科学分析 基于MaxCompute+...
常见问题
本文档根据实践，介绍了本案例中比较常见的两个问题及解决方法。流计算中注册 RDS数据存储 失败。可能原因：您的RDS数据库与流计算项目不在同一区域。解决方法：需要手动将流计算服务的白名单添加到RDS白名单中，详情请参见 数据存储白名单...
用户画像分析概述
Hologres 数据集成能力方面的主要优势如下。无缝集成DataWorks产品，通过接入配置即可解决复杂数据依赖问题，构建稳定离线数据处理加载流程。为实时写入场景提供了基于LSM（Log-Structured Merge）结构的行存储，与Flink进行深度融合，能够...
常见问题
本文为您介绍数据集成任务常见问题。资源组操作及网络连通 在做离线同步时，我们需要先了解哪些DataWorks及其网络能力？同步ECS自建的数据库的数据时，如何保障数据库与DataWorks的网络连通？数据库和DataWorks不在同一个地域（Region）下...
数据服务概述
数据服务价值 为了解决常见的数据应用问题，在数据服务体系下，开发人员开发数据服务时，提供简易向导和灵活脚本两种模式，从而降低开发门槛、提高开发效率、统一代码质量，方便管理变更；业务人员应用数据服务时，提供安全、稳定的数据...
实时同步字段格式
本文为您介绍数据集成实时同步字段的格式及附加列。数据集成实时同步MySQL或Oracle数据的记录格式如下。sequence_id_operation_type_execute_time_before_image_after_image_字段1 字段2 字段3 增量事件的记录 ID，值唯一且递增。操作类型...
独享数据集成资源组
在数据集成任务高并发执行且无法错峰运行的情况下，需要专有的计算资源组来保障数据快速、稳定的传输时，建议您选择使用DataWorks的独享数据集成资源组。本文为您概要介绍独享数据集成资源组。功能介绍 独享数据集成资源组的功能亮点如下：...
Hologres SQL语句的常见问题
本文为您介绍编写和优化Hologres SQL语句时可能遇到的常见问题及解决方法。报错：Creating publication with table that without binlog is not supported now 报错：bigint out of range 报错：too many shards in this instance 报错：...
常见问题
问题分类 常见问题分为如下几种类型：计费问题 性能和规格问题 预检查问题 更多预检查问题，请参见 预检查及修复方法。数据库连接问题 数据同步问题 数据迁移问题 数据订阅问题 其他问题 说明 若您有其他疑问或需求，可以 通过钉钉（钉钉...
恢复数据库
数据库备份DBS 提供数据恢复能力，通过创建恢复任务将已完成备份的数据恢复到云数据库、本地数据库或DBS沙箱中，可用于误操作后恢复以及分析历史数据等场景。前提条件 DBS备份计划的运行状态为 运行中。已完成数据库备份。相关操作，请参见...
- 产品推荐
- 这些文档可能帮助您