本教程通过DataWorks,联合云原生大数据计算服务MaxCompute,使用大数据AI公共数据集(淘宝、飞猪、阿里音乐、Github、TPC等公共数据),指导您如何快速进行大数据分析,快速熟悉DataWorks的操作界面与最基础的数据分析能力。DataWorks的更...
本文介绍如何在不同大数据分析平台中接入 云原生内存数据库Tair。常见大数据分析平台集成 Tair 的方法如下:大数据开发治理平台DataWorks:请参见 配置Redis Writer插件。说明 Tair 完全兼容Redis,您可以参考该文档配置 Tair 实例信息,但...
方案介绍 基于MaxCompute进行大数据BI分析的流程如下:通过数据集成同步业务数据和日志数据至MaxCompute。通过MaxCompute、DataWorks对数据进行ETL处理。同步处理后的结果数据至AnalyticDB MySQL。通过Quick BI可视化建立用户画像。方案...
能不能在数据库和BI之间加一个缓存计算层,将大数据计算推到计算层处理。数据库现在压力有点大,防止Quick BI连上后业务人员直接操作会影响正常的加工作业。问题原因 数据量太大数据集的加速缓存功能无法满足需求,需要别的方案。解决方案 ...
产品名称 Quick BI 产品模块 数据集 概述 本文通过介绍SQL的举例,可实现按数据大小顺序分组,帮助您实现对排序后分组的结果进行分析、或者分批导出超过1万条数据的需求。问题描述 有如下数据,如何实现按照订单量大小排名后,对排名进行...
问题描述 Quick BI新建的数据大屏无法发布,找不到发布按钮。问题原因 试用用户不支持发布数据大屏。解决方案 需要购买产品后才可以看到发布按钮,才可以发布创建的数据大屏。适用于 Quick BI 公共云4.4.2版本验证
概述 Quick BI数据大屏加载慢的优化方法。详细信息 对大屏进行分页,每个大屏不要放过多的图表,使用类似幻灯片的展示形式。使用轮播组或者弹窗,对首屏不需要展示的图表进行滞后展示。如果有很多图片视频素材,对图片和视频进行压缩,...
概述 Quick BI中试用数据大屏创建之后无法发布。详细信息 试用客户是无法发布数据大屏,所以没有发布按钮。适用于 Quick BI 公共云专业版V4.4
问题描述 Quick BI的数据集是否会区分数据的大小写?解决方案 数据集默认不区分数据大小写。当数据集开启Quick引擎后是区分大小写的。适用于 Quick BI 公共云专业版4.4.1版本
问题描述 Quick BI数据大屏引用SSO中的视频之后,预览数据大屏视频展示不出来,浏览器控制台报如下错误:问题原因 客户上传视频的OSS没有开启跨域相关配置,该问题是因为OSS上的视频无法跨域访问导致。解决方案 在OSS侧打开跨域配置的开关...
概述 Quick BI数据大屏使用分享链接打开背景视频没有播放。详细信息 需要在视频组件中勾选静音选项后即可正常播放。适用于 Quick BI
概述 Quick BI数据大屏下拉列表设置降序排序,默认值不是第一条。详细信息 可以在样式中设置默认选中维值。适用于 Quick BI v4.5
问题描述 Quick BI智能报表数据集关联表报错“当前数据集最大支持关联3个数据集”。解决方案 钉钉智能报表下的钉钉数据源会有这个限制,最多只可以join3张表。适用于 Quick BI智能报表
概述 本文主要介绍不显示数据值,以图形大小来表示数据的大小的方法。详细信息 如何实现不显示数据值,以图形大小来表示数据的大小呢?此处以交叉表为例,方法如下:点击交叉表,在样式-功能型配置中选则需要修改的度量,并勾选自定义样式...
问题描述 Quick BI数据追加后大屏上的数据还没有变。问题原因 数据集有全局缓存造成数据没有更新。解决方案 关闭全局缓存策略。点击数据集的清除缓存。适用于 Quick BI 环境:公共云专业版4.5
KingbaseES数据源为您提供读取和写入KingbaseES双向通道...否 无 batchSize 一次性批量提交的记录数大小,该值可以极大减少数据同步系统与数据源的网络交互次数,并提升整体吞吐量。如果该值设置过大,会导致数据同步运行进程OOM异常。否 1024
来创建与Prometheus关联的Loki数据源和相关的多数据源大盘。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以...
来创建与Prometheus关联的Loki数据源和相关的多数据源大盘。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以...
问题描述 我需要导出一张大表的数据,大概有十几万行的数据,大小差不多几百兆。解决方案 如果你要在Quick BI中导出数据量较大的表,一般使用自助取数功能解决。具体步骤如下:1,在工作空间内点击自动取数,然后新建自动取数。2,选择要...
该接口用于升级RDS MySQL的数据库大版本。接口说明 适用引擎 RDS MySQL 相关功能文档 注意 使用该接口前,请仔细阅读功能文档,确保完全了解使用接口的前提条件及使用后造成的影响后,再进行操作。RDS MySQL 升级数据库版本 调试 您可以在...
该接口用于升级RDS MySQL的数据库大版本。接口说明 适用引擎 RDS MySQL 相关功能文档 注意 使用该接口前,请仔细阅读功能文档,确保完全了解使用接口的前提条件及使用后造成的影响后,再进行操作。RDS MySQL 升级数据库版本 调试 您可以在...
问题描述 Quick BI仪表板新交叉表树形展示大类没有数据。解决方案 需要添加“分类汇总(列小计)”。适用于 Quick BI
问题描述 Quick BI仪表板新交叉表树形展示大类没有数据。如下图所示:问题原因 图表设置错误,缺少汇总维度。解决方案 添加汇总维度。如图所示:适用于 Quick BI
问题描述 本文主要描述了Dataphin即席查询下载数据,较大的数值展示为科学计数法的解决方法。问题原因 导出来的是CSV文件,显示是Excel的机制,需要我们自己设置格式。解决方案 在Excel中选中该列,设置单元格格式,在数字中将分类选为数值...
问题描述 本文主要描述了Dataphin即席查询下载数据,较大的数值最后四位数为0000的解决方法。问题原因 导出来的是csv文件,显示的时候末尾位数为0000是Excel的机制。解决方案 使用Notepad+等工具打开。适用于 Dataphin v2.9.4-3
问题描述 Quick BI数据填报树型下拉组件的预览框,最多支持展示多少条数据?解决方案 经测试,当数据量过多时,下拉框会显示暂无数据。实际端口接口会返回超过最大限制50000条的错误。所以,当数据量小于50000时均可以正常预览,超过50000...
概述 文本主要介绍Quick BI电子表格最大能展示多少条数据。详细信息 电子表格最大能展示1W条数据,默认展示的是1K条数据。如果需要展示1K以上需要手动进行调整。适用于 Quick BI 说明:本文是基于Quick BI公有云专业版4.4.1版本进行说明。
问题原因 附件数据量比较大,存在特殊字符的数据导致。解决方案 对于该问题可以从以下几个方面处理:如果客户附件有多个Sheet页,保留需要分析的Sheet页数据,再上传分析。转换成CSV格式文件上传(数据填报模块不支持CSV格式)。若附件数据...
Redis提供了List、Hash、Zset等复杂类型的数据结构,在使用Redis时可能由于Key设计不合理而导致某个Key过大。Redis作为简单的单线程模型,在获取或删除较大Key时,可能会对业务产生一定影响。在集群架构下,大Key问题还很容易造成某个子...
大数据专家服务 大数据专家服务(Bigdata Expert Service)是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障,帮助用户...
1.售前咨询渠道 尊敬的“准”大数据专家服务用户您好:如果您准备购买阿里云大数据专家服务,但是遇到如服务范围、规格、服务选择等售前方面的问题,您可以通过钉钉与我们联系,您将“当面”获得阿里云大数据专家咨询专家的建议。...
一、大数据专家服务流程指南 二、服务流程说明 用户可以根据自己实际需要,提前或者在问题发生时购买大数据专家服务,服务项包含大数据技术架构方案咨询、大数据解决方案POC、大数据搬站迁云方案咨询、跨地域迁移支持服务、大数据专家高阶...
应用场景 1.实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线,您可以实时接...大数据实时化 数仓是大数据的基础,实时化的数仓能够让BI、报表、推荐(用户标签产出)等多种业务收益,大数据系统总体向实时化迈进。
阿里云E-MapReduce(简称EMR)on ACK提供了全新构建大数据平台的方式。您可以将开源大数据服务部署在阿里云容器服务Kubernetes版(ACK)之上,利用ACK在服务部署和容器应用管理的优势,减少对底层集群资源的运维投入,以便于您可以更加专注...
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力,本文以一个零售电商行业的数仓搭建实验为例,为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现,帮助您深入了解阿里云...
DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎,为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。从2009年起,DataWorks不断沉淀阿里巴巴大数据建设方法论,支撑数据中台建设,同时与...
关键性里程碑 2009年9月,ODPS(即现在的MaxCompute)大数据平台飞天项目正式启动。2010年10月,阿里巴巴集团自主研发的第一代云计算平台稳定运行。2013年8月,平台的单集群规模已达到5000台。2014年7月,平台开始对外提供服务,完全替换...
访问频度极高业务 如社交网络、电子商务、游戏、广告等。...实现对大数据的分布式分析处理,适用于商业分析、挖掘等大数据处理场景。通过数据集成服务可自助实现数据在云数据库 Memcache 版与 MaxCompute 间的同步,简化数据操作流程。
本教程中使用阿里云大数据产品MaxCompute配合DataWorks,完成整体的数据建模和研发流程。完整的技术架构图如下图所示。其中,DataWorks的数据集成负责完成数据的采集和基本的ETL。MaxCompute作为整个大数据开发过程中的离线计算引擎。...
大数据型 使用本地SATA盘作存储数据,存储性价比高,是大数据量(TB级别的数据量)场景下的推荐机型。说明 Hadoop、Data Science、Dataflow和Druid类型的集群支持Core节点;Zookeeper和Kafka类型的集群不支持Core节点。本地SSD型 使用本地...