在大数据平台中集成Tair
本文介绍如何在不同大数据分析平台中接入 云原生内存数据库Tair。常见大数据分析平台集成 Tair 的方法如下：大数据开发治理平台DataWorks：请参见 配置Redis Writer插件。说明 Tair 完全兼容Redis，您可以参考该文档配置 Tair 实例信息，但...
E-MapReduce弹性低成本离线大数据分析
大数据是一项涉及不同业务和技术领域的技术和工具的集合，海量离线数据分析可以应用于多种商业系统环境，例如，电商海量日志分析、用户行为画像分析、科研行业的海量离线计算分析任务等场景。离线大数据分析概述 主流的三大分布式计算框架...
大数据分析工具的常见问题和解决方法
概述 大数据分析是阿里云用户中心与DataWorks和MaxCompute联合推出的成本分析工具，提供大数据分析能力，解决因账单过大而导致无法分析的问题，当前仍处于灰度期间。在使用大数据分析时可能会碰到DataWorks或MaxCompute的权限问题，您可以...
大数据计算服务MaxCompute的审计事件
大数据计算服务MaxCompute已与操作审计服务集成，您可以在操作审计中查询用户操作MaxCompute产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计...
如何查看表和数据库的数据量大小？
执行以下命令，查询一张表的总大小（单位为MB，包含表的索引和数据）：select pg_size_pretty(pg_total_relation_size('<schemaname>.<tablename>'));执行以下命令，查询表的数据大小（单位MB，不包括索引）：select pg_size_pretty(pg_...
基于MaxCompute进行大数据BI分析
方案介绍 基于MaxCompute进行大数据BI分析的流程如下：通过数据集成同步业务数据和日志数据至MaxCompute。通过MaxCompute、DataWorks对数据进行ETL处理。同步处理后的结果数据至AnalyticDB MySQL。通过Quick BI可视化建立用户画像。方案...
Quick BI中如何实现数据量很大日增超过百万的数据分析
概述 本文档提供数据库数据量很大超过千万日增数据量的场景下，Quick BI报表加载很慢，超过十几分钟都加载不出来的问题的解决方案和思路。问题描述 客户的数据分析基本都是基于上千万条的数据量，有的可能过亿，日增也是百万以上。对于这样...
E-MapReduce本地盘实例大规模数据集测试
本文介绍如何使用阿里云E-MapReduce搭建本地盘机型集群节点，并进行大数据基准性能测试。应用范围 需要使用阿里云E-MapReduce+本地盘进行大数据业务前进行性能测试的用户。需要将线下自建大数据集群迁移到阿里云云上E-MapReduce+本地盘进行...
Dataphin管道任务中需要同步大量数据时内存设置上限
概述 描述管道任务中需要同步大量数据时内存设置上限的方法。用户通过管道任务要将大量的文件进行同步，这个内存要如何调整？详细信息 在管道任务的通道配置中，JVM配置...当管道任务同步数据较多时，可以JVM设置较大的内存。适用于 Dataphin
使用程序进行大数据导入
本文介绍如何通过编写代码的方式，离线导入大数据量到 PolarDB-X 1.0 数据库。背景信息 假设当前数据库有一个表需要导入到 PolarDB-X 1.0 数据库中，数据量大致为814万，表结构如下。CREATE TABLE `post`(`postingType` int NOT NULL,`id` ...
Quick BI新建的数据大屏无法发布
问题描述 Quick BI新建的数据大屏无法发布，找不到发布按钮。问题原因 试用用户不支持发布数据大屏。解决方案 需要购买产品后才可以看到发布按钮，才可以发布创建的数据大屏。适用于 Quick BI 公共云4.4.2版本验证
DMS数据管理预案助力业务大促
背景信息 大型活动期间，公司业务量可能出现大幅度上涨，数据库的使用与数据安全管理将面临巨大挑战。例如如下场景：临近双十一，数据库即将面临一次访问流量上的大考。筹备业务大促期间，您可评估您现有数据库的使用情况，预估活动期间的...
将Prometheus数据投递至大数据计算服务MaxCompute
当您需要将某个Prometheus实例的数据导出，进行自定义业务处理时，可以使用Prometheus数据投递功能，将Prometheus实例数据投递至大数据计算服务MaxCompute处理。MaxCompute能帮助您结合其他的数据源执行大数据计算服务，加工后用于报表分析...
将Prometheus数据投递至大数据计算服务MaxCompute
当您需要将某个Prometheus实例的数据导出，进行自定义业务处理时，可以使用Prometheus数据投递功能，将Prometheus实例数据投递至大数据计算服务MaxCompute处理。MaxCompute能帮助您结合其他的数据源执行大数据计算服务，加工后用于报表分析...
Quick BI数据大屏加载慢的优化方法
概述 Quick BI数据大屏加载慢的优化方法。详细信息 对大屏进行分页，每个大屏不要放过多的图表，使用类似幻灯片的展示形式。使用轮播组或者弹窗，对首屏不需要展示的图表进行滞后展示。如果有很多图片视频素材，对图片和视频进行压缩，...
Quick BI中试用数据大屏创建之后无法发布
概述 Quick BI中试用数据大屏创建之后无法发布。详细信息 试用客户是无法发布数据大屏，所以没有发布按钮。适用于 Quick BI 公共云专业版V4.4
大数据计算服务MaxCompute
本文为您介绍大数据计算服务MaxCompute连接器的语法结构、WITH参数和使用示例等。背景信息 大数据计算服务MaxCompute（原名ODPS）是一种快速、完全托管的EB级数据仓库解决方案，致力于批量结构化数据的存储和计算，提供海量数据仓库的解决...
Quick BI数据大屏引用SSO中的视频播放展示异常
问题描述 Quick BI数据大屏引用SSO中的视频之后，预览数据大屏视频展示不出来，浏览器控制台报如下错误：问题原因 客户上传视频的OSS没有开启跨域相关配置，该问题是因为OSS上的视频无法跨域访问导致。解决方案 在OSS侧打开跨域配置的开关...
Quick BI的数据集是否区分数据大小写
问题描述 Quick BI的数据集是否会区分数据的大小写？解决方案 数据集默认不区分数据大小写。当数据集开启Quick引擎后是区分大小写的。适用于 Quick BI 公共云专业版4.4.1版本
Quick BI数据大屏使用分享链接打开背景视频没有播放
概述 Quick BI数据大屏使用分享链接打开背景视频没有播放。详细信息 需要在视频组件中勾选静音选项后即可正常播放。适用于 Quick BI
Quick BI数据大屏下拉列表设置降序排序，默认值不是第...
概述 Quick BI数据大屏下拉列表设置降序排序，默认值不是第一条。详细信息 可以在样式中设置默认选中维值。适用于 Quick BI v4.5
OSS配置镜像回源后源和目标Object数据大小不一致
本文主要介绍OSS配置镜像回源后源和目标Object数据大小不一致的排查思路。问题描述 OSS上配置了镜像回源，回源到另外一个Bucket，但是目标Bucket上存储的Object大小和源上Object大小不一致。解决方案 OSS配置镜像回源后源和目标Object数据...
Quick BI数据大屏翻牌器不显示，也没有报错；...
问题描述 Quick BI数据大屏翻牌器不显示，也没有报错；只有翻牌器有异常，其他组件都正常。解决方案 谷歌浏览版本低，页面兼容性差，升级浏览器至最新版本即可。适用于 Quick BI
CDN加速OSS资源后访问OSS和CDN的URL返回的数据大小不...
问题描述 OSS通过PutObject等上传方式都会在Response头中记录Content-Length和Content-MD5的信息，返回给客户端，您可以根据该信息确定本地下载的文件与OSS服务器端存储的数据是否一致。但是当使用CDN加速OSS资源后，验证本地的数据，有时...
Quick BI智能报表数据集关联表报错“当前数据集最大...
问题描述 Quick BI智能报表数据集关联表报错“当前数据集最大支持关联3个数据集”。解决方案 钉钉智能报表下的钉钉数据源会有这个限制，最多只可以join3张表。适用于 Quick BI智能报表
Quick BI 助力深圳光明环境水务公司举办水务数据应用...
光明环水公司董事长李宝伟 会上，Quick BI 数据专家徐胜做了题为《大数据BI分析体系实践思考》的精彩演讲，不仅分享了阿里巴巴集团高管看数的决策分析逻辑，更是立足行业应用、介绍了 Quick BI 服务千行百业的成功实践，为水务行业数据应用...
Quick BI申请数据大屏编辑权限，报错“当前资源的编辑...
问题描述 本文主要描述了Quick BI中开发者成员申请数据大屏编辑权限，报错“当前资源的编辑权限属性为私密,不允许申请编辑权限”的解决方法。问题原因 协同授权中配置的是私密。解决方案 在协同授权给该用户授权即可。适用于 Quick BI
如果大约有50台虚拟机和3个数据库需要做容灾保护，...
混合云容灾一体机通过高效的重删压缩提供了极为高效的存储能力。原始数据大小乘以1.8倍的备份空间就可以满足绝大多数灾备场景。
Quick BI图表如何不显示数据值，以图形大小来表示数据...
概述 本文主要介绍不显示数据值，以图形大小来表示数据的大小的方法。详细信息 如何实现不显示数据值，以图形大小来表示数据的大小呢？此处以交叉表为例，方法如下：点击交叉表，在样式-功能型配置中选则需要修改的度量，并勾选自定义样式...
Quick BI数据追加后大屏上的数据还没有变
问题描述 Quick BI数据追加后大屏上的数据还没有变。问题原因 数据集有全局缓存造成数据没有更新。解决方案 关闭全局缓存策略。点击数据集的清除缓存。适用于 Quick BI 环境：公共云专业版4.5
我的程序要并发访问大量共享数据，该如何设计？
如果有大量共享数据需要并发访问，可以把数据存放在阿里云 OSS 或者 NAS 上，并且用InputMapping 的方式挂载访问。BatchCompute 会在访问的节点间自动建立起分布式缓存，可以大幅提升 OSS 和 NAS 的并发访问效率。
大数据和AI体验教程
如何使用AutoML进行自动调参训练 实操演示课程 如何查看logview并进行日志分析 实操演示课程 如何在PAI-EAS定时自动部署模型服务 实操演示课程 DLC深度学习训练平台 实操演示课程 通过MaxCompute和OSS上传数据 实操演示课程 在PAI-EAS中...
为什么迁移过程中RDS的空间大小会比源数据库大？
因为DTS进行的是逻辑迁移方式，它是将迁移数据封装成SQL后，同步到目标RDS实例中的，此时会在目标RDS实例中产生binlog数据，所以迁移过程中，RDS的空间大小可能比源数据库大。
云数据库Memcache版适合存储多大的数据？
在云数据库Memcache版中，Key支持的最大长度为250字节（Byte），Key+Value的最大长度是4,194,291字节。如果Key+Value的长度大于等于4,194,292字节会提示错误：object too large for cache。使用过大的对象会占用较大带宽，导致QPS下降，...
Quick BI如何导出百万行的数据，文件大小不超过1G
问题描述 我需要导出一张大表的数据，大概有十几万行的数据，大小差不多几百兆。解决方案 如果你要在Quick BI中导出数据量较大的表，一般使用自助取数功能解决。具体步骤如下：1，在工作空间内点击自动取数，然后新建自动取数。2，选择要...
查看云虚拟主机MySQL数据库中表的大小
当您的云虚拟主机MySQL数据库剩余可用空间较小时，您可以查看数据库中所有表的大小，并删除有异常的或者无用的表，以便享有更多的可用空间。本文为您介绍查看主机MySQL数据库中表大小的方法。操作步骤 登录待查看表大小的数据库。具体操作...
大量数据导出方案
将数据同步节点和ODPS SQL节点连线配置成依赖关系，ODPS SQL节点作为数据的产出节点，数据同步节点作为数据的导出节点。工作流调度配置完成后（可以直接使用默认配置），单击 运行。数据同步的运行日志，如下所示。2016-12-17 23:43:46.394...
查看云虚拟主机SQL Server数据库中表的大小
当您的云虚拟主机SQL Server数据库剩余可用空间较小时，您可以查看数据库中所有表的大小，并删除有异常的或者无用的表，以便享有更多的可用空间。本文为您介绍查看云虚拟主机SQL Server数据库中表的大小的方法。操作步骤 登录待查看表大小...
KingbaseES（人大金仓）数据源
KingbaseES数据源为您提供读取和写入KingbaseES双向通道...否 无 batchSize 一次性批量提交的记录数大小，该值可以极大减少数据同步系统与数据源的网络交互次数，并提升整体吞吐量。如果该值设置过大，会导致数据同步运行进程OOM异常。否 1024
Quick BI如何根据排名大小给数据分组
产品名称 Quick BI 产品模块 数据集 概述 本文通过介绍SQL的举例，可实现按数据大小顺序分组，帮助您实现对排序后分组的结果进行分析、或者分批导出超过1万条数据的需求。问题描述 有如下数据，如何实现按照订单量大小排名后，对排名进行...
- 产品推荐
- 这些文档可能帮助您