数据管理
② 数据库列表 展示了 所属库、表名、表类型、存储大小、描述、创建时间 和 更新时间，且支持根据 表名、存储大小、创建时间 或 更新时间 进行排序。单击目标 表名，还支持查看表的详细信息。序号 区域 说明 ① 表信息 展示了 所属库、表名...
逻辑表查询
查询结果会额外提供一个字段表示数据来源的数据库、表信息，单击则可以跳转至对应的物理库表并带入查询SQL与查询条件信息。查询也可以不带路由字段作为条件，进行全表（所有分表）扫描查询操作，如汇总统计。说明 同时也支持 GROUP BY 等...
日志字段详情
字段 说明_topic_日志主题，固定为mongo_audit_log audit_type 日志类型，例如Command coll 数据集合 db 数据库名称 docs_examined 文档扫描行数 instanceid MongoDB实例ID keys_examined 索引扫描行数 latency 消耗时间 optype 操作类别 ...
find
字段名 类型 必填 说明 query Object 否 数据库操作时的查询条件。options Object 否 控制项。options 参数定义：字段名 类型 必填 说明 limit Number 否 查询的文档数量限制，最大值和默认值均为500。skip Number 否 跳过的文档数量。sort...
调整字段安全级别
当您需要提升或降低字段的安全级别时，您可参考本文在数据管理DMS的SQL Console中调整字段的安全级别。前提条件 实例已开启敏感数据保护功能。具体操作，请参见 开通敏感数据保护。设置敏感等级的影响 设置敏感等级后，对使用数据的影响：...
数据库返回“Data truncation:Truncated incorrect”...
问题描述 在DMS控制台中执行变更时，出现类似如下报错：Data truncation:Truncated incorrect XXX 问题原因 数据变更：表上的字段定义和执行的SQL类型不符合，常见的场景为表上定义是字符串类型，SQL中用了数值类型的写法。结构变更：需要...
云数据库 RDS MySQL 版如何查看表的主键字段
概述 本文介绍云数据库 RDS MySQL 版查看表主键字段的方法。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据修改...
配置Microsoft SQL Server输出组件
本文为您介绍如何配置Microsoft SQL Server输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。按照下图操作指引，进入 Microsoft SQL Server输出组件 对话框。在 Microsoft SQL Server输出配置 对话框，...
配置Microsoft SQL Server输出组件
本文为您介绍如何配置Microsoft SQL Server输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。按照下图操作指引，进入 Microsoft SQL Server输出组件 对话框。在 Microsoft SQL Server输出配置 对话框，...
查询原始日志
原始日志界面 快速分析日志 配置显示字段 系统默认显示表格存储支持的日志字段，您可以在 索引字段 节点下拖动鼠标到目标字段，单击目标字段右侧的 图标，将目标字段移动到 显示字段 节点下。此时使用 表格 或 原始 方式查看日志时只显示...
API概览
实例管理 API 标题 API概述 AddInstance 录入数据库实例 调用该API可以实现将您的数据库实例录入至DMS中，同时，可以为实例开启安全托管能力。ModifyInstance 修改实例信息 当您需要修改实例的托管模式、数据库账密、功能包等基本信息，及...
设置数据库索引
使用数据库时，对成为查询条件的字段设置索引可以有效提高查询效率，更快的获取信息。缺省情况下会对_id_字段默认创建一个非唯一索引。前提条件 创建数据表 添加记录 操作步骤 登录 EMAS管理控制台。查找您的项目，单击项目，进入EMAS 概览...
2022年
SQL Review功能对选定区间与基准区间内的数据库实例进行workload分析，并且对数据库实例中运行的SQL进行深度分析，展示数据库实例的索引优化建议、SQL改写建议、TOP SQL、新增SQL、失败SQL、SQL特征分析、执行变化SQL、性能恶化SQL和TOP...
配置同步任务中的数据来源和去向
成功将数据导入分析型数据库MySQL版后，您就可以使用分析型数据库MySQL版进行数据分析。进入 DataWorks控制台，单击对应项目操作栏中的 数据开发。单击左侧菜单栏中的 数据开发，右键单击 业务流程 新建一个流程。右键单击 步骤2 中新建的...
同构数据源访问
a|b|c-+-+-2|12|t1 3|13|t1 4|14|t1 7|17|t1 8|18|t1 1|11|t1 5|15|t1 6|16|t1 9|19|t1 10|20|t1(10 rows)相关文档 您也可以通过greenplum_fdw和gp_parallel_retrieve_cursor插件实现跨实例查询，详情请参见 跨实例查询。
数据标准概述
DataWorks数据建模支持在建模前规划制定数据标准，或在建模使用过程中根据业务情况沉淀企业业务的数据标准。通过规范约束标准代码、度量单位、字段标准、命名词典，来保障后续建模与应用过程中数据处理的一致性，从源头上保障数据的标准化...
核心自治技术案例解析
自动SQL优化前平均RT及扫描行数：自动SQL优化后平均RT及扫描行数：自动弹性 云上数据库提供基于计算规格的选项以及存储容量供用户选择，当用户业务Workload规模变化时可适当进行弹性扩缩容，但对于云原生应用而言，数据库能够根据业务...
跨库查询
当需要查询分散在不同数据库中的数据时，您...a|b|c-+-+-2|12|t1 3|13|t1 4|14|t1 7|17|t1 8|18|t1 1|11|t1 5|15|t1 6|16|t1 9|19|t1 10|20|t1(10 rows)相关文档 AnalyticDB PostgreSQL版 还提供了跨实例查询功能，详情请参见 跨实例查询。
新建数据模型
内存实体 不存储在数据库中，仅临时存储在应用程序内存中的实体。系统默认实体 系统默认实体里面既含有实体，也有内存实体。系统默认实体实际上是引用模块的实体，系统数据模块是应用的默认引用模块。操作步骤 登录 魔笔。在顶部菜单栏选择...
处理慢SQL问题
在定位数据库的性能问题时，查找慢SQL...开启自动SQL优化 DAS通过自动SQL优化服务为您提供自动SQL诊断优化和索引创建，在数据库出现慢SQL问题时，及时进行诊断和优化，帮助您时刻保持数据库系统运行在最佳状态，具体请参见 自动SQL优化。
Unpivot 列转行
也就是se_month的值-或(select*from(values('jan'),.('dec'))t(se_month))'select distinct se_month from tbl_sellers_info order by 1')as-crosstab 输出格式(js jsonb,-第一个参数SQL内对应的order by对应的字段（1个或多个）Jan ...
配置MySQL输入
MySQL输入基于Binlog实时订阅的方式，实时读取您配置的MySQL数据库表数据。本文为您介绍，如何配置MySQL输入，以及配置输入之前需要准备的网络环境及账号权限。前提条件 配置MySQL输入之前，请确保已完成以下规划与准备工作。已配置同步...
性能优化与诊断简介
在RDS MySQL日常运维中，您可以通过数据库自治服务DAS（Database Autonomy Service）来处理数据库故障、优化性能、提升效率、降低运维成本。DAS是一种基于机器学习和专家经验的云服务，实现数据库自感知、自修复、自优化、自运维和自安全，...
配置离线数据集成节点
功能特性 不限制来源表和目标表数据库类型。支持字段映射，包含修改源表和目标表字段的命名和类型映射。可配置并发迁移数据。支持通过WHERE语句，对迁移数据进行预过滤。支持前置及后置SQL语句，在导入数据前后实现数据处理。使用限制 系统...
配置HBase输出组件
同步其他数据源的数据至HBase数据源的场景中，完成源数据的信息配置后，需要配置HBase输出组件的目标数据源。本文为您介绍如何配置HBase输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。按照下图指引，...
SQL窗口介绍
SQL窗口界面介绍 表 1.SQL窗口界面介绍 序号 区域 说明 ① 可视化操作区域 可视化地管理数据库：表 可查看当前数据库中的所有表，包含表的字段、字段类型、索引。也可以右键单击目标表，快捷编辑表结构、管理表、导出数据、导入数据、批量...
查询审计日志
database 数据库名称。instance_id Lindorm实例ID。ip 发起请求的客户端IP地址。method 请求方法。requestId 请求ID。requestTimeMs 请求的响应时间，单位为毫秒（ms）。status 状态码。uri 请求的URL。userAgent 客户端的用户代理。...
MetaResource
TABLE CatalogResource CatalogResource Catalog 资源 参看字段结构 DatabaseResource DatabaseResource Database 资源 参看字段结构 TableResource TableResource Table 资源 参看字段结构 FunctionResource FunctionResource Function ...
配置并管理实时同步任务
数据集成附加字段支持的变量字段如下：EXECUTE_TIME：执行时间 UPDATE_TIME：更新时间 DB_NAME_SRC：原始数据库名称 DB_NAME_SRC_TRANSED：转换后数据库名称 DATASOURCE_NAME_SRC：源端数据源名称 DATASOURCE_NAME_DEST：目的端数据源名称 ...
Quick BI报错“column xxx is ambiguous”
产品名称 Quick BI 产品模块 数据集、仪表板 问题描述 数据集预览报错，报错内容是“column xxx is ambiguous”问题原因 添加计算字段时，字段名是手动填写的，数据集又有表关联的操作，关联的表里的某个字段与原表字段名重复，无法识别...
数据解析工作台说明
配置值转化 数据聚合 类比为Flink SQL的窗口函数，将解析任务中流转消息的字段按照窗口进行聚合计算。配置数据聚合 超时插值 在数据上报产生中断时，配置固定的策略进行补值，防止数据出现中断。配置超时插值 相邻消息计算 取当前消息与前...
横向虚拟关联
建模的数据输入分别位于己方和对方的数据库中，对字段进行匹配对齐。组件截图 二、参数说明 参数名称 参数说明 选择保留字段 选择参与方1和参与方2的匹配字段，用于后续横向建模。默认按字段名称（忽略大小写）自动匹配。字段别名默认使用...
数据探查
数据输入、合并、清洗加工、聚合和关联节点支持数据探查。本文为您介绍数据探查的操作。入口 您可以通过图示的方式进入数据探查界面。说明 合并、清洗加工、聚合和关联节点进入 数据探查 的方式同上。预览设置 数据探查支持快速采样、随机...
字段安全级别
根据存储业务的数据性质差异，字段如手机号码、身份证号码等属于敏感数据，常规查询数据时此类字段的值应该加密展现。为了根据数据的敏感程度对数据进行不同策略的脱敏和管理，数据管理DMS将敏感数据分为3个安全级别。根据数据的敏感程度，...
DTS任务填写字段说明
创建DTS任务填写字段详解 名称 含义 说明 目标端实例ID 目标端数据库实例的ID 您不需要填写，系统会自动为您输入。源端实例ID 源端数据库实例的标识 您不需要填写，系统会自动为您输入。目标Region 目标实例所在的地域 您不需要填写，系统...
新建数据库
操作步骤 新建数据库 您可以使用以下两种方式来新建数据库：Hologres管控台新建数据库 Hologres管控台 支持以可视化的方式新建数据库，在Hologres管控台进入对应实例的详情页，选择 数据库管理，单击 新增数据库 进行创建。说明 当前版本的...
配置PostgreSQL输出组件
选择Dataphin系统已配置的数据源，且数据源需同时具备以下两个条件：数据源的类型与输出组件的类型一致。执行 属性配置 的账号具有该数据源的同步写权限，如果没有权限，则需要申请数据源权限，详情请参见 申请数据源权限。同时您也可以...
数据建模
质量规则配置：支持可视化与自定义SQL方式制定表级与字段级质量规则，并提供手工创建逻辑表字段时通过关联数据元自动生成质量规则的功能。一致性：支持当前逻辑表和已物化物理表的字段一致性对比，支持当前逻辑表与数据开发所引用的节点中...
跨实例查询
a|b|c-+-+-2|12|t1 3|13|t1 4|14|t1 7|17|t1 8|18|t1 1|11|t1 5|15|t1 6|16|t1 9|19|t1 10|20|t1(10 rows)性能测试 以下内容为跨实例查询的TPC-H性能测试，测试数据量为1 TB，并分别在数据库本地和目标端数据库中执行查询。大数据场景...
表格
数据展示 页签左侧 数据源 显示已配置的数据源名称，维度 和 度量 显示从数据源中自动解析的属性字段。说明 数据源属性字段匹配规则：维度：布尔型、字符型、时间型字段。度量：数值型字段。（可选）单击左上角 数据表，查看已配置数据源的...
- 产品推荐
- 这些文档可能帮助您