通过Metricbeat收集系统数据及Nginx服务数据
本文介绍如何通过阿里云Metricbeat采集器收集系统数据（CPU使用率、内存、磁盘IO和网络IO统计数据）和Nginx服务数据，并生成可视化图表。前提条件 您已完成以下操作：创建阿里云Elasticsearch（简称ES）实例。详情请参见 创建阿里云...
Dataphin离线管道抽取HANA的数据，源系统字段是...
概述 本文主要描述了Dataphin离线管道抽取HANA的数据，源系统字段是varbinary,Dataphin上使用String类型显示乱码的解决方法。详细信息 用户要使用这个字段，那这个字段就需要加工，二进制数据转换成字符串一定是乱码，所以是需要转换成其他...
Quick BI独立部署的数据源或数据集都报错“系统异常，...
问题描述 Quick BI独立部署的数据源或数据集都报错“系统异常，未找到可以使用的执行机”。问题原因 Quick BI独立部署机器之间时间不同步。解决方案 查看所有机器的时间是否同步，命令 date。如果不同步，把时间调整同步。适用于 Quick BI
迁移Hadoop文件系统数据至JindoFS
本文以OSS为例，介绍如何将Hadoop文件系统上的数据迁移至JindoFS。迁移数据 Hadoop FsShell 对于文件较少或者数据量较小的场景，可以直接使用Hadoop的FsShell进行同步：hadoop dfs-cp hdfs:/emr-cluster/README.md jfs:/emr-jfs/hadoop dfs...
数据服务系统配置
应用内存：缓存数据量较大时不建议使用，占用内存会影响系统的响应速率。适用于个别API需要开启缓存且数据量很少的场景 说明 数据缓存时间将统一获取Dataphin应用部署时设置的内存数据缓存时间，创建API时定义的缓存时间将不生效。指定...
PC端提示“系统异常未返回数据”
问题描述 Quick BI中部分用户手机钉钉扫描二维码登录，PC端提示“系统异常未返回数据”。问题原因 通过日志分析，发现“请求的员工userId不在授权范围内”。解决方案 在钉钉开放平台中，设置钉钉微应用的权限范围是“全部员工”。适用于 ...
Quick BI批量导入数据提示“导入失败：系统异常，未...
问题描述 Quick BI批量导入数据提示“导入失败：系统异常，未找到可以使用的执行机”。解决方案 找不到执行机需要排查执行机服务是否正常，所有机器时钟是否同步。适用于 Quick BI
如何恢复系统盘数据？
当您因为文件损坏无法通过SSH或VNC方式启动ECS实例时，您可以卸载该实例的系统盘，并作为数据盘挂载到其他ECS实例进行修复。背景信息 本文中A实例指需要卸载系统盘的异常ECS实例，B实例指其他可以正常远程登录的ECS实例。步骤一：创建快照 ...
数据传输系统权限策略参考
什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制（RAM）产品提供了两种类型的权限策略：系统策略和自定义策略。系统策略统一由阿里云创建，策略的版本...
离线扩容分区和文件系统（Linux数据盘）
数据盘未挂载到实例上 挂载数据盘到实例后，请参见本文档的操作步骤完成扩容。说明 如果一个已有分区采用了MBR分区格式，则不支持扩容到2 TiB及以上。为避免造成数据丢失，建议您创建一块大于2TiB的云盘，格式化一个GPT分区，再将MBR分区中...
Quick BI数据集预览数据报错：系统异常未返回数据
问题描述 Quick BI数据集预览数据报错：系统异常未返回数据。问题原因 查看日志发现是空指针报错，经与用户沟通，使用数据源为MaxCompute，数据源账号无CreateInstance权限。解决方案 给账号添加CreateInstance权限。相关文档 MaxCompute...
云数据传输系统权限策略参考
什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制（RAM）产品提供了两种类型的权限策略：系统策略和自定义策略。系统策略统一由阿里云创建，策略的版本...
查看自定义监控系统显示数据不足
本文为您介绍在金融云环境下，部分集群因数据上报地址调整导致自定义监控数据不足的原因及处理方法。问题现象 金融云用户下载自定义监控SDK并成功部署后，在控制台无法查看相关监控数据，状态显示为 数据不足。进一步测试发现，在系统内 ...
如何迁移Linux实例系统盘中的数据
执行 df-h 命令查询空间使用率，确认系统盘使用率接近100%，则需要将数据迁移至新购买的数据盘。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不...
停车场系统领域模型-数据模型定义
请参考 停车场系统领域模型-数据模型定义
财务云系统升级暂停数据更新
财务云相关系统升级，从 2020-5-14 0点-5点，暂停用户的数据操作更新，期间如下模块会报错提示。涉及内容包括：财务关联、财务单元、统一结算、统一账户，账单导出，账单OSS订阅。给您带来的不便，请谅解。
Quick BI跨源关联表创建数据集报错“系统异常未返回...
问题描述 Quick BI跨源关联表创建数据集报错“系统异常未返回数据”是什么原因？问题原因 独立部署环境需要部署quick引擎才能支持跨源分析，当前环境未部署导致跨源关联报错。解决方案 需部署quick引擎，并且关闭跨源关联的功能剪裁。适用...
Quick BI跨源关联报错“系统异常未返回数据”
问题描述 Quick BI跨源关联报错“系统异常未返回数据”。问题原因 用户使用MySQL关联后报错。解决方案 需要购买presto服务才可以支持跨源。适用于 Quick BI 公共云专业版
ECS中如何更换系统并通过快照恢复系统盘中的数据
但此时手动备份系统盘内数据到本地，相对而言较慢，且依赖公网。本文主要讲述如何较快的备份好数据，并在初始化或更换系统盘后，较快的进行恢复。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、...
停车场系统领域服务-数据模型定义
1 车辆通行 当车辆通过停车区域的时候，会上报车辆通行的数据 模型名称：iot_park_pass_record 版本 1.0 字段 数据类型 字段含义 direction Integer"0":"进场""1":"出场""2":"未知"openType Integer"0":"正常抬杆""1":"异常抬杆""2":"未知...
WMI数据仓库异常导致激活系统失败
问题描述 依次执行如下命令，确认无异常，Software Protection服务可以启动，注册表没发现明显异常，但是激活系统失败，如下图所示。ping kms.cloud.aliyuncs.com telnet kms.cloud.aliyuncs.com 1688 问题原因 WMI数据仓库异常。解决方案 ...
大数据安全治理的难点
使用大数据系统的常见人员包括开发、运营、分析师，甚至销售及HR都会来查询自己所需的数据。如此多类型的用户，授权、管理难度加大，什么样的人员需要授予什么样的权限？如果他们离职、换部门了怎么办？这其中很有可能出现 权限蠕变、过度...
应用场景
云数据库Redis版 支持持久化功能，可以直接选择Redis作为数据库系统使用。场景二：带有计数系统的库存系统 使用RDS存储商品的所有信息，通过 云数据库Redis版 来存储商品的库存信息。在高并发、大流量场景下，Redis的极高性能可以轻松应对...
云原生数据仓库AnalyticDB MySQL版系统权限策略参考
什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制（RAM）产品提供了两种类型的权限策略：系统策略和自定义策略。系统策略统一由阿里云创建，策略的版本...
高压缩引擎（X-Engine）介绍
MySQL作为世界上使用最广泛的开源数据库系统，一直缺乏一个既能满足大容量低成本要求，又具备一定读写能力的历史数据归档存储方案。虽然业界曾经推出过一些高压缩引擎，如TokuDB、MyRocks等，但受限于单物理机磁盘容量限制，存储的数据量...
【通知】数据管理DMS新版中国站系统升级通知
数据管理DMS 新版中国站计划在2023年07月02日上午07:00:00至08:00:00进行系统升级，届时可能会影响该时间段正在运行的任务编排任务和执行中的SQL任务。您可以在升级完成后（上午08:00:00），查看实际任务调度情况，如果存在失败情况可进行...
创建数仓分层
各个分层的功能介绍如下：数据引入层 ODS（Operational Data Store）ODS层用于接收并处理需要存储至数据仓库系统的原始数据，其数据表的结构与原始数据所在的数据系统中的表结构一致，是数据仓库的数据准备区。ODS层对原始数据的操作具体...
Quick BI数据填报保存报错："系统参数错误
问题描述 Quick BI数据填报保存报错："系统参数错误。问题原因 标题中存在特殊字符导致的。解决方案 将标题中的"+"去掉就可以了。适用于 Quick BI
配置跨库Spark SQL节点
示例：某电商企业的交易数据保存在MySQL在线库中，而员工数据保存在HR系统中，系统使用的数据库为Oracle，当企业需要按部门统计销售额时，需要对部门、员工和交易数据进行关联查询。以下Spark SQL语句可以实现将mysql_db在线库的交易流水表...
发布包总览概述
在发布对象期间，系统需要进入维护状态，减少并发操作可能造成的问题，发布文件结束后，需要 系统管理员 或 超级管理员 手动停止维护状态，其他用户可正常使用系统。数据架构及研发页签的对象数与发布包中的对象数不一致时，系统仅展示当前...
发布包总览概述
在发布对象期间，系统需要进入维护状态，减少并发操作可能造成的问题，发布文件结束后，需要 系统管理员 或 超级管理员 手动停止维护状态，其他用户可正常使用系统。数据架构及研发页签的对象数与发布包中的对象数不一致时，系统仅展示当前...
云原生数据仓库 AnalyticDB PostgreSQL版系统权限策略...
什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制（RAM）产品提供了两种类型的权限策略：系统策略和自定义策略。系统策略统一由阿里云创建，策略的版本...
应用场景
1.2 收益 系统解耦 对外，大数据系统与业务系统解耦，对内，大数据系统各组件之间解耦。实时通道 通过数据总线，业务数据能够实时汇入大数据系统，缩短数据分析周期。2.实时数据清洗和分析 2.1 接入多种异构数据，实时清洗并归一化 通过...
气泡图（v3.0以下版本）
系统会使用数据中的 r 字段值减去您设置的值，如果结果为负数则不显示该气泡，如果结果为正数则显示该气泡，且气泡半径为：（r值-最小值）/最大值*r值。最大值：气泡的最大值。系统会使用数据中的 r 字段值减去最小值，如果结果为负数则不...
气泡图（v3.x版本）
系统会使用数据中的 r 字段值减去您设置的值，如果结果为负数则不显示该气泡，如果结果为正数则显示该气泡，且气泡半径为：（r值-最小值）/最大值*r值。最大值 气泡的最大值。系统会使用数据中的 r 字段值减去最小值，如果结果为负数则不...
Quick BI数据集设置加速报错提示“未知的系统变量”
问题描述 Quick BI数据源为MySQL，数据集设置加速报错提示“未知的系统变量”异常信息如下：问题原因 数据源本身是8.0在数据源配置中版本选择的是5.7，系统变量差异导致的错误。解决方案 在数据源配置界面将对应版本修改为数据源实际的8.0...
典型使用场景
而接合LindormStreams+Blink/Spark，可以构建出一套完整的实时数据系统：应用解耦-实时同步到消息队列 通常业务发生之后，应用系统产生的数据需要被其他应用使用或根据这个事件驱动其他应用的业务逻辑，应用之间一般通过消息队列进行消息...
全景视角
阿里云DataWorks为您提供数据生产、数据使用、数据管理视角下的主要数据治理情况。您可以根据需求选择合适的视角，高效的进行数据治理工作。背景信息 为提高不同使用场景下的数据治理效率和质量，DataWorks为您提供以下视角：数据管理视角...
IoT数据自动化同步至云端解决方案
下图为您展示使用DataWorks数据集成完成OSS数据同步至大数据系统的解决方案流程。新建离线同步节点，详情请参见 通过向导模式配置离线同步任务。选择数据来源OSS进行读取，详情请参见 OSS Reader。选择数据去向进行写入，本文以 MaxCompute...
分析业务过程
为梳理数据之间的逻辑关系和流向，需要理解用户的业务过程及数据系统。您可以采用过程分析法，列出整个业务过程涉及的每个环节，包括技术、数据、系统环境等。分析完企业的工作职责范围（部门）后，借助工具通过逆向工程抽取业务系统的真实...
- 产品推荐
- 这些文档可能帮助您