采集数据
user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构数据源间的数据同步，完成数仓数据...
采集数据
user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构数据源间的数据同步，完成数仓数据...
数据库画像
特性以左树右表形式呈现，左树包含该数据库采集到的所有特性列表，点击某个特性，右边列表展示具有该特性的数据库对象。搜索框支持任意字段的查询功能。外部依赖 提供DBLink列表和详情信息，对于包含外部依赖的数据库，改造时需要考虑跨库...
SearchDatabase-搜索数据库详情列表
test SearchRange string 否 权限范围，取值如下：HAS_PERMSSION：有权限的数据库 OWNER：我 Owner 的数据库 MY_FOCUS：我关注的数据库 UNKNOWN：不限 HAS_PERMSSION SearchTarget string 否 搜索目标，取值如下：DB：不限（不区分单库或...
SEO相关问题
友情链接也称为网站交换链接、互惠链接、互换链接、联盟链接等，是具有一定资源互补优势的网站之间的简单合作形式，即分别在自己的网站上放置对方网站的LOGO图片或文字的网站名称，并设置对方网站的超链接（点击后，切换或弹出另一个新的...
建表并上传数据
登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。在 数据开发 页面，鼠标悬停至 图标，单击 新建表>MaxCompute>表。您也可以打开相应的业务流程，右...
搜索索引使用限制
搜索索引（SearchIndex）服务在使用过程中存在以下限制：数据类型 索引列支持的数据类型包括：BOOLEAN，BYTE，SHORT，INT，LONG，FLOAT，DOUBLE，STRING，CHAR，BINARY，TIMESTAMP，JSON。重要 宽表引擎仅2.6.5及以上版本支持JSON和...
概览信息
本文介绍如何查看及搜索数据资产。前提条件 已在运营模块中公开数据表、API和指标等数据资产。背景信息 在运营公开一条数据，资产首页刷新数量实时+1。在运营隐藏一条数据，资产首页刷新数量实时-1。操作步骤 登录企业数据智能平台。在页面...
概览信息
本文介绍如何查看及搜索数据资产。前提条件 已在运营模块中公开数据表、API和指标等数据资产。背景信息 在运营公开一条数据，资产首页刷新数量实时+1。在运营隐藏一条数据，资产首页刷新数量实时-1。操作步骤 登录 数据资源平台控制台。在...
使用NimoShake将Amazon DynamoDB迁移至阿里云
NimoShake（又名DynamoShake）是阿里云研发的数据同步工具，您可以借助该工具将Amazon DynamoDB数据库迁移至阿里云。前提条件 已经创建阿里云MongoDB实例，详情请参见 创建副本集实例 或 创建分片集群实例。背景信息 本文档主要介绍...
添加及管理监控对象
数据源 ① 筛选及搜索区 您可以通过数据源的名称搜索质量规则。您也可以根据 我负责的、校验开关、最近一次校验状态、质量负责人、数据源类型、用途 条件进行精确筛选。② 列表区 为您展示 数据源名称、校验开关、生效/总质量规则数、最近...
添加及管理监控对象
数据源 ① 筛选及搜索区 您可以通过数据源的名称搜索质量规则。您也可以根据 我负责的、校验开关、最近一次校验状态、质量负责人、数据源类型、用途 条件进行精确筛选。② 列表区 为您展示 数据源名称、校验开关、生效/总质量规则数、最近...
通过Robots协议屏蔽搜索引擎抓取网站内容
概述 Robots协议（也称为爬虫协议、机器人协议等）的全称是网络爬虫排除标准（Robots Exclusion Protocol），网站通过Robots协议告诉搜索引擎哪些页面可以抓取，哪些页面不能抓取。若有些页面访问消耗性能比较高，不希望被搜索引擎抓取，...
DataWorks on EMR Serverless StarRocks最佳实践
DataWorks支持StarRocks数据源，通过数据源对接EMR Serverless StarRocks，可实现EMR Serverless StarRocks的数据集成、开发、分析、数据服务等功能。本文为您介绍EMR Serverless StarRocks在DataWorks上的操作流程。背景信息 了解EMR ...
数据管理
不支持展示系统库Information_schema和 AnalyticDB MySQL 的数据。操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。在 湖仓版（3.0）页签下，单击目标 集群ID。在左侧...
添加数据集
DataV数据集支持多种数据源的接入，如数据库、excel表格文件等，通过对数据的结构化存储和元数据的汇集整理，提供高效实用的数据建模能力，可用的算子包括常见的数据聚合函数、按不同时间粒度划分、地理信息处理等。本文为您介绍如何在...
使用tcpdump抓包分析网络问题
本文介绍如何开启tcpdump，以便在容器出现网络异常时，抓取网络报文，分析定位问题。背景信息 容器出现网络异常时，您可能需要抓取网络报文来分析定位问题，但实际操作时可能会碰到以下问题：抓包需要使用exec进入容器，但网络异常时，容器...
查看数据分类预置模型
③筛选及搜索区 您可根据数据分类名称的关键字快速搜索数据分类。也可根据 数据分级 筛选对应指定分级的数据分类。④ 数据分类层级目录 为您展示数据分类的名称/描述、分类缩写、数据分级、所属分类层级信息。同时，您可对数据分类执行查看...
查看数据分类预置模型
③筛选及搜索区 您可根据数据分类名称的关键字快速搜索数据分类。也可根据 数据分级 筛选对应指定分级的数据分类。④ 数据分类层级目录 为您展示数据分类的名称/描述、分类缩写、数据分级、所属分类层级信息。同时，您可对数据分类执行查看...
数据采集2.0
如果有区分业务场景，就可以填pc,ios,android等 必须 8 trace_id STRING 用于区分行为针对的doc是来自哪个搜索服务商输出的结果 如果是来自开放搜索的结果，该字段值设置为 Alibaba，如果是来自其他服务商的结果，业务侧可以自己取名字 ...
回收站列表
为防止对数据表的误操作，Dataphin支持将您删除后的数据表短期存留在回收站。同时Dataphin支持恢复或清除回收站中的数据表。本文为您介绍如何在回收站中清除表和恢复表。介绍页面 在Dataphin首页，单击顶部菜单栏的 资产。在 资产 页面，...
管理数据源
您可以根据数据源的类型进行筛选，快速查找指定类型的数据源，也可以通过右上角的搜索框模糊搜索指定数据源。单击目标数据源的 数据源标识，查看该数据源的详细信息。复制数据源 在 OceanBase 管理控制台的左侧导航栏，单击 数据传输>数据...
底纹报表
说明 目前OpenSearch对底纹进行的数据统计指标各包括：核心指标，流量指标，点击指标，引导搜索指标，四个维度：核心指标 指标名 定义 计算公式 依赖 意义 底纹PV 请求底纹且返回成功的次数，即不包括被限流等原因导致返回错误的请求 每...
添加数据
相关操作 在 数据管理 页面，执行如下操作：操作 说明 搜索数据 在左上角的搜索框中，输入关键字，单击 图标，筛选需要的目标数据。查看数据详情 在数据列表，单击目标数据 操作 列的 详情，可查看空间数据基本信息、空间信息和缩略图。...
创建数据流
前提条件 支持的数据库类型：MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB分布式版、AnalyticDB MySQL 3.0、其他来源MySQL SQL Server：RDS SQL Server、MyBase SQL Server、其他来源SQL Server PostgreSQL：RDS PostgreSQL...
数据质量教程概述
在整体数据链路的处理过程中，为保证最终产出数据的质量，您需要对数据仓库ODS、CDM和ADS层的数据分别进行监控。数据仓库分层的定义请参见 数仓分层。本教程基于 搭建互联网在线运行分析平台 教程，ods_user_trace_log、dw_user_trace_log...
分区索引
时间范围分区 对于一些时间序列的数据，可以按照时间范围分区，例如按照周或者月进行分区，同一时间范围内的数据将会聚集存储，并且可以自动淘汰旧分区的数据。按照时间范围分区的语法示例如下：创建索引，按照业务的时间列orderTime分区，...
时间选择器
说明 如果您的数据源类型为MySQL或其他类型的数据库，并且需要使用时间选择器组件展示时间类型（DateTime、Date等）的字段，可在DataV的数据源配置中使用SQL语句，将时间类型转换为字符串类型。selectRange 设置可选择范围区间。...
数据服务API
数据地图支持对当前租户下所有工作空间的数据服务API进行搜索和定位，实现数据服务API的高效查找。进入API查找界面 进入数据地图页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据治理>数据地图，在右侧页面中单击 ...
搜索（审计）
数据库自治服务DAS 提供搜索（审计）功能，查询并导出SQL语句对应的各种信息，本文介绍如何在SQL洞察和审计中使用搜索功能。重要 如果您开通了DAS企业版 V3，搜索功能将更名为审计功能。前提条件 已在DAS中接入对应的数据库实例，并且接入...
CREATE TABLE
CREATE TABLE语法用来创建Lindorm搜索表。语法 CREATE TABLE[IF NOT EXISTS]table_name '(' column_definition(',' column_definition)*[',' PRIMARY KEY '(' primary_key ')']')'[PARTITION BY RANGE TIME '(' time_partition_key=value '...
SQL备份与回滚（公测中）
DMS为您提供了两种备份策略：通用备份：非MySQL的关系型数据库固定使用该备份方式，系统会先找出受变更影响的数据行，并生成INSERT或REPLACE INTO语句。精确备份：RDS MySQL、PolarDB MySQL版、RDS MariaDB 及自建MySQL数据库可使用精确...
通过Logstash迁移自建Elasticsearch数据
如果您想要通过Logstash将自建Elasticsearch集群中的数据迁移至Lindorm搜索引擎，可以参考本文的操作步骤配置脚本和迁移任务。前提条件 自建Elasticsearch（简称ES）集群为7.0.0~7.10.1版本。已开通搜索引擎（Elasticsearch兼容版）。如何...
概述
其核心思想是不仅仅返回最精确的结果项，而是只搜索可能是近邻的数据项，以提高检索效率。通过在可接受范围内牺牲一定的精确度，实现了向量数据库与传统数据库的显著区别。为了将ANNS向量索引更加方便地应用到实际的生产环境中，目前业界...
概述
PolarDB for AI 功能通过一系列MLOps和内置的模型解决了数据、特征和模型的割裂状态，实现了基于数据库的数据智能的一站式服务。本文介绍了 PolarDB for AI 功能的相关特性。背景信息 随着数据的累积，数据驱动的智能应用（例如：搜索、...
添加开源Elastic Search数据源
通过开源Elastic Search和DataV结合使用，可以实现数据分析和搜索结果的大屏展示。本文介绍在DataV中添加并使用开源Elastic Search数据源的方法。前提条件 已准备好待添加的开源Elastic Search数据源。添加开源Elastic Search数据源 登录 ...
进程监控
在 进程监控 页面，您可以查看拉取进程和写入进程的监控信息，并...暂停抓取数据 进程暂停，数据抓取操作处于暂停状态 启动 停止 重启 销毁 成功 进程执行成功 停止 重启 停止 进行已停止执行 停止 重启 销毁 迁移中 数据正在迁移中 停止 重启
空间数据管理概览
空间数据管理页面内提供了我的主页、我的项目、我的数据和空间档案四大功能模块，用户可以在这里创建项目，上传数据和添加模型等。本文为您介绍空间数据管理页面的结构与功能，帮助您快速使用空间构建平台。进入空间构建平台 空间构建平台...
查询备份数据
通过数据备份和日志备份进行恢复，可以将某个备份集的数据恢复到原实例、新实例或其他已有实例等。更多恢复方案，请参见 数据恢复方案概览。功能费用 当前公测阶段，免费使用（含临时实例）。仅当数据恢复到新实例时，收取新实例费用，费用...
查看资源角色
在搜索结果的数据库列表中，在目标数据库的 数据Owner 列查看数据库的Owner。表Owner：在SQL窗口单击页面左上角扩展功能区的，在表列表中查看、编辑表的Owner。说明 只有安全协同模式实例中的表存在表Owner。我拥有的资源 登录 数据管理DMS...
- 产品推荐
- 这些文档可能帮助您