准备工作
本文为您介绍在使用空白画布搭建数据看板前，需要完成的准备工作。准备内容 已开通DataV服务。已确定最终效果图样式。已根据效果图计算出需要添加的组件名称和数量。开通DataV服务 请参见 开通DataV服务。数据看板-最终效果图 数据看板-...
冷热分离
背景信息 在海量大数据场景下，一张表中的部分业务数据随着时间的推移仅作为归档数据或者访问频率很低，同时这部分历史数据体量非常大，比如订单数据或者监控数据，降低这部分数据的存储成本将会极大的节省企业的成本。因此，如何以极简的...
使用限制
搭建数据库复制 提供主备复制架构，其中的备（slave）实例不对用户开放，用户应用不能直接访问。重启RDS实例 必须通过控制台或API重启实例。实例数量 按量付费实例数量限制为30个。您可以前往 配额中心 申请提升配额。
客户案例
初期只有一个开发人员的情况下，可以快速地搭建数据仓库，且费用成本极低。解决方案架构如下。详细案例信息，请参见 小打卡案例。互联网金融案例：天弘基金 客户简介 天弘基金是中国总规模最大的公募基金，以成为最大的指数基金服务商为...
数据建模
Excel导入：支持将Excel里的逻辑表表名、字段信息、所属层级、关联信息导入数据模型管理，便于客户快速搭建数据仓库。Excel导出：支持将数据模型设计模块中的逻辑表及信息以Excel的形式导出，并提供按全量模型与按查询条件的方式进行导出。...
数据建模：智能数据建模
智能数据建模是阿里云DataWorks自主研发的智能数据建模产品，沉淀了阿里巴巴十多年来数仓建模方法论的最佳实践，包含数仓规划、数据标准、维度建模及数据指标四大模块，帮助企业在搭建数据中台、数据集市建设过程中提升建模及逆向建模的...
功能简介
Excel导入：支持将Excel里的逻辑表表名、字段信息、所属层级、关联信息导入数据模型管理，便于客户快速搭建数据仓库。Excel导出：支持将数据模型设计模块中的逻辑表及信息以Excel的形式导出，并提供按全量模型与按查询条件的方式进行导出。...
功能简介
Excel导入：支持将Excel里的逻辑表表名、字段信息、所属层级、关联信息导入数据模型管理，便于客户快速搭建数据仓库。Excel导出：支持将数据模型设计模块中的逻辑表及信息以Excel的形式导出，并提供按全量模型与按查询条件的方式进行导出。...
操作流程
通过Excel导入 将Excel表里的逻辑表表名、字段信息、所属层级、关联信息导入数据模型管理，便于客户快速搭建数据仓库。具体操作，请参见 通过Excel导入逻辑表。配置逻辑表关联标准字段 通过关联数据标准中的标准字段，实现字段值的统一和...
操作流程
通过Excel导入 将Excel表里的逻辑表表名、字段信息、所属层级、关联信息导入数据模型管理，便于客户快速搭建数据仓库。具体操作，请参见 通过Excel导入逻辑表。配置逻辑表关联标准字段 通过关联数据标准中的标准字段，实现字段值的统一和...
客户案例
客户需求 通过DataWorks+MaxCompute搭建数据中台，打破数据孤岛。通过Realtime Compute+MaxCompute交互式分析（Hologres）提升数据中台实时性。通过DataWorks进行全链路数据治理，提升数据质量与应用能力。价值体现 打造B2B智慧营销系统，...
图扑案例
现有解决方案中，通常依赖自建单ElasticSearch检索引擎或OpenTSDB、Prometheus等时序引擎搭建数据存储，而采集数据类型多样化使得单模引擎存储方案技术复杂且运维成本高，市场需要新一代云原生且具备多模检索能力的存储系统。某著名IT咨询...
什么是数据资源平台
解决方案：对数据资源平台中已沉淀的数据标准、数据模型、数据加工场景、数据服务API配置、云计算资源配置等数据资产进行导入导出，便于在不同环境中快速搭建数据治理工作的初始化。运营 资产注册：支持平台侧需管理的数据表资产自动化注册...
设计库
案例演示 本案例介绍通过使用可视化套件如何快速搭建数据大屏。登录 DataV控制台。在 工作台 页面，将鼠标移动到 创建PC端看板 上，单击 选择模板。在 创建看板 页面，选择 空白看板，单击 创建看板。输入看板名称后，单击 创建看板。在...
从RDS同步至MaxCompute
通过数据传输服务DTS（Data Transmission Service），您可以将 RDS MySQL 或RDS MySQL Serverless 的数据同步至MaxCompute，帮助您快速搭建数据实时分析系统。前提条件 您已完成以下操作：开通MaxCompute 创建项目 注意事项 DTS在执行全量...
从RDS同步至MaxCompute
通过数据传输服务DTS（Data Transmission Service），您可以将 RDS MySQL 或RDS MySQL Serverless 的数据同步至MaxCompute，帮助您快速搭建数据实时分析系统。前提条件 您已完成以下操作：开通MaxCompute 创建项目 注意事项 DTS在执行全量...
匿名块
从应用程序缓冲区执行并擦除块后，除非在应用程序中重新输入块代码，否则无法重新执行块。通常，相同的代码块将多次重新执行。为了反复运行代码块而不必每次都重新输入代码，通过一些简单的修改，可以将匿名块转换为存储过程或函数。以下各...
基础HAL
接口说明 获取当前时间字符串 参数说明 参数 数据类型 方向 说明 buf char*输出 指向时间字符串缓冲区的指针 len int 输入 字符串缓冲区的字节长度 返回值说明 指向时间字符串缓冲区的指针 HAL_Kv_Del 原型 int HAL_Kv_Del(const char*key)...
营销页面搭建
（只有发布并且审核通过的页面才会看到线上这个按钮，会呈现发布上线后的页面的 二维码信息（可下载）和线上链接的复制能力，供ISV营销推广使用）三、设计&搭建 提供页面搭建设计，数据配置等核心能力，让服务商快速搭建营销页面。...
Tair选型指南
重要 在确定 云原生内存数据库Tair 实例的内存容量时，首先要考虑存储的业务数据大小，其次，您还需额外考虑实例自身运行占用的必要内存开销（例如进程元数据、复制缓冲区、碎片等）。不同于开源Redis数据库，选用 Tair 时，您无需再额外...
排查Redis实例内存使用率高的问题
非业务数据的内存开销，例如主备复制的积压缓冲区、Redis进程初始化消耗的内存等。返回示例及各参数对应的解释如下：说明 下述返回信息中，内存数值的单位为字节。1)"peak.allocated"/Redis进程自启动以来消耗内存的峰值。2)(integer)...
文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
对象
pg_statio_all_indexes 显示当前数据库中每个索引的磁盘块读取总数和缓冲区命中总数，以及指定索引上与 I/O 有关的统计信息。相关参数说明如下：参数 类型 描述 relid oid 索引基表的 OID。indexrelid oid 索引OID。schemaname name 索引...
对象
pg_statio_all_indexes 显示当前数据库中每个索引的磁盘块读取总数和缓冲区命中总数，以及指定索引上与 I/O 有关的统计信息。相关参数说明如下：参数 类型 描述 relid oid 索引基表的 OID。indexrelid oid 索引OID。schemaname name 索引...
如何解决Redis内存使用率突然升高
突发访问产生大量流量超过网络带宽，导致输入缓冲区和输出缓冲区积压。客户端处理速度跟不上 Redis 的处理速度，导致输出缓冲区积压。解决方案 请依次排查内存使用率突然升高的原因，并参考对应的解决方案解决问题。排查是否写入大量新数据...
排查内存使用率高的问题
非业务数据的内存开销，例如主备复制的积压缓冲区、Tair 进程初始化消耗的内存等。返回示例及各参数对应的解释如下：说明 下述返回信息中，内存数值的单位为字节。1)"peak.allocated"/Tair进程自启动以来消耗内存的峰值。2)(integer)...
从自建Redis迁移至阿里云Redis
示例：redis-cli-h 127.0.0.1-p 6379-a Test123456 执行下述命令，关闭复制输出缓冲区的限制。config set client-output-buffer-limit 'slave 0 0 0' 操作步骤 登录 数据传输控制台。说明 若数据传输控制台自动跳转至数据管理DMS控制台，您...
从自建Redis迁移至MyBase Redis
示例：redis-cli-h 127.0.0.1-p 6379-a Test123456 执行下述命令，关闭复制输出缓冲区的限制。config set client-output-buffer-limit 'slave 0 0 0' 操作步骤 进入迁移任务的列表页面。登录 DMS数据管理服务。在顶部菜单栏中，单击 集成与...
从自建Redis迁移至阿里云Redis
示例：redis-cli-h 127.0.0.1-p 6379-a Test123456 执行下述命令，关闭复制输出缓冲区的限制。config set client-output-buffer-limit 'slave 0 0 0' 操作步骤 进入迁移任务的列表页面。登录 DMS数据管理服务。在顶部菜单栏中，单击 集成与...
从自建Redis迁移至Tair实例
示例：redis-cli-h 127.0.0.1-p 6379-a Test123456 执行下述命令，关闭复制输出缓冲区的限制。config set client-output-buffer-limit 'slave 0 0 0' 操作步骤 进入迁移任务的列表页面。登录 DMS数据管理服务。在顶部菜单栏中，单击 集成与...
备份集查询功能概览
搭建离线数据仓库：您可以将DBS备份数据作为数据湖存储，搭建离线数据仓库，实现湖仓一体，挖掘数据价值。应对审计需求：全量备份数据保存在DBS中，若有临时审计需求，可以快速过滤出需要的数据进行审计分析。快速定位数据：库-表-分区的新...
RSS指标
SortMemory rss_worker_metrics_SortMemory_Value RSS Worker当前节点上用来做排序的临时缓冲区的内存大小。单位：Byte。SortingFilesCount rss_worker_metrics_SortingFiles_Value RSS Worker文件排序队列中保存的文件数量。单位：Byte。...
Flink指标
Network 参数 指标 描述 InPool Usage flink_taskmanager_job_task_buffers_inPoolUsage 输入缓冲区使用量。OutPool Usage flink_taskmanager_job_task_buffers_outPoolUsage 输出缓冲区使用量。InputQueue Length flink_taskmanager_job_...
【漏洞公告】OpenSSL 缓冲区溢出漏洞预警（CVE-2021-...
近日，OpenSSL官方发布安全公告，披露在特定版本中存在缓冲区溢出漏洞（编号CVE-2021-3711），远程攻击者可通过发送特制的SM2内容，溢出缓冲区并在系统上执行其他代码或导致拒绝服务。漏洞信息 该漏洞是OpenSSL在解密SM2时造成的缓冲区溢出...
恢复SQL Server物理备份
支持恢复的数据库类型 目标数据库类型 说明 ECS自建数据库 需手动搭建目标数据库环境。可通过阿里云专有网络（VPC）实现快速恢复，VPC支持更安全稳定的网络连接。更多详情，请参见 什么是专有网络。本地自建数据库 需手动搭建目标数据库...
应用场景
3.实时数据仓库 3.1 数据总线替换传统数据库，构建实时数仓 从Lambda架构到Kappa架构，通过数据总线搭建原始数据层，实时明细层和实时汇总层，打造实时数据仓库。3.2 收益 统一的Kappa架构 传统Lambda架构的两条链路缩减为一条，大大降低...
通过Push模式创建数据订阅
本文介绍通过创建Lindorm Streams实现数据订阅功能，数据订阅功能的Push模式是将 云原生多模数据库 Lindorm 表格的增量数据推送至下游消息队列Kafka，您可以根据自身业务需求自由消费增量数据，搭建或实现多种业务场景。推送流程 数据订阅...
开通数据订阅
您可以在Lindorm管理控制台开通数据订阅功能，并根据自身业务需求消费增量数据，搭建多种业务场景。本文介绍在控制台开通数据订阅功能的方法。前提条件 已开通宽表引擎。操作步骤 数据订阅功能需要在控制台完成两次开通操作，分别购买流...
实时数据订阅概述
云原生多模数据库 Lindorm 支持实时数据订阅功能，实时数据订阅功能帮助您获取Lindorm的实时增量数据，您可以根据自身业务需求自由消费增量数据，搭建或实现多种业务场景。背景信息 云原生多模数据库 Lindorm 数据订阅功能支持任何一个表的...
功能介绍
本文介绍通过Lindorm Streams实现数据订阅功能，数据订阅功能将云数据库HBase增强版（云原生多模数据库Lindorm）表格的增量数据推送至下游消息队列Kafka，您可以根据自身业务需求自由消费增量数据，搭建或实现多种业务场景。推送流程 数据...
- 产品推荐
- 这些文档可能帮助您