数据扫描和识别
支持扫描的数据源类型如下：结构化数据：RDS、PolarDB、PolarDB-X、MongoDB、OceanBase、自建数据库 非结构化数据：OSS 大数据：TableStore、MaxCompute、ADB-MYSQL、ADB-PG 数据源授权完成后需要多长时间完成扫描？DSC 完成数据源授权后，...
数据质量概述
数据质量帮助您第一时间感知源端数据的变更与ETL（Extract Transformation Load）中产生的脏数据，自动拦截问题任务，有效阻断脏数据向下游蔓延。避免任务产出不符合预期的问题数据，影响正常使用和业务决策。同时也能显著降低问题处理的...
数据迁移
本文为您介绍数据迁移的最佳实践，包含将其他业务平台的业务数据或日志数据迁移至MaxCompute，或将MaxCompute的数据迁移至其它业务平台。背景信息 传统关系型数据库不适合处理海量数据，如果您的数据存放在传统的关系型数据库且数据量庞大...
配置自定义区域右下角组件数据
配置 轮播列表柱状图 数据方法可参考上述 基本折线图 数据的配置步骤。说明 轮播列表柱状图 组件的数据需要 value 和 content 两个字段，所以要在CSV文件中设置 value 和 content 这两列。value：标识该地区感染人数。content：标识地区。...
配置自定义区域右下角组件数据
配置 轮播列表柱状图 数据方法可参考上述 基本折线图 数据的配置步骤。说明 轮播列表柱状图 组件的数据需要 value 和 content 两个字段，所以要在CSV文件中设置 value 和 content 这两列。value：标识该地区感染人数。content：标识地区。...
查看敏感数据识别结果
仅支持在 结构化数据、半结构化数据、非结构化数据 或 大数据 分类下分别选择一个或多个数据类型，不支持跨分类同时选择多个数据类型。如果您未选中任意数据类型，数据安全中心默认展示所有数据类型下的敏感数据识别结果。数据模板：在 ...
Dataphin支持的数据源
背景信息 Dataphin支持对接的数据源包括大数据存储型数据源、文件数据源、消息队列数据源、关系型数据源和NoSQL数据源，各模块支持对接的数据源类型说明如下：如果您需要在Dataphin中连接某数据源，则需要先在数据源管理中创建该数据源。...
使用须知
购买图数据库GDB实例后，您不需要做数据库的基础运维（例如高可用、安全补丁等），但需要注意图数据库GDB本身的一些使用约束。功能 使用约束 实例部署 仅支持在以下地域创建GDB实例：中国：华南1（深圳）、华北2（北京）、华北1（青岛）、...
Dataphin支持的数据源
背景信息 Dataphin支持对接的数据源包括大数据存储型数据源、文件数据源、消息队列数据源、关系型数据源和NoSQL数据源，各模块支持对接的数据源类型说明如下：如果您需要在Dataphin中连接某数据源，则需要先在数据源管理中创建该数据源。...
外部表概述
但这两种方法都有不足之处：第一种方法需要在MaxCompute系统外部做一次中转，如果OSS数据量太大，还需要考虑如何并发来加速，无法充分利用MaxCompute的大规模计算能力。第二种方法通常需要申请UDF网络访问权限，还需要开发者自己控制作业...
我是安全管理员
解决方案 数据归档概述 数据归档功能支持定时将大表的数据归档至其他数据库，同时支持源表数据删除、表空间整理回收等。一键建仓 一键创建实时同步的数据仓库，数据在秒级的延迟下，同步至AnalyticDB MySQL版数据库中。数据库迁移 通过创建...
在GDB控制台清除实例数据
当图数据库GDB实例中的数据不再使用但需要保留该实例时，您可以通过图数据库GDB提供的清除数据功能清除实例中的数据。本文介绍在图数据库GDB控制台上清除图数据库GDB实例数据的方法。注意事项 清除实例数据后仅保留实例账号信息，且清除的...
使用curl命令导入数据文件
本文介绍使用curl命令将数据文件从对象存储OSS的Bucket中导入至图数据库GDB实例、查看导入任务和取消导入任务的方法。前提条件 已创建目标图数据库GDB实例，创建方法请参见 创建主实例。说明 如果Bucket是在对象存储控制台创建，请确保图...
数据分析概述
DataWorks提供的数据分析平台，可以流畅地进行数据处理、分析、加工及可视化操作。在数据分析板块中，您不仅可以在线洞察数据，还可以编辑和共享数据。本文为您介绍数据分析平台的优势、功能、权限等概要信息。产品优势 与本地数据分析相比...
数据源管理概述
功能介绍 多数据源类型接入：Dataphin内置丰富的数据源类型，支持对接的数据源包括大数据存储型数据源、文件型数据源、消息队列型数据源、关系型数据源和NoSQL数据源。更多信息，请参见 Dataphin支持的数据源。自定义数据源类型：在内置的...
数据源管理概述
功能介绍 多数据源类型接入：Dataphin内置丰富的数据源类型，支持对接的数据源包括大数据存储型数据源、文件型数据源、消息队列型数据源、关系型数据源和NoSQL数据源。更多信息，请参见 Dataphin支持的数据源。自定义数据源类型：在内置的...
数据集成
数据源支持情况 数据集成目前支持40种以上的数据源类型（包括关系型数据库、非结构化存储、大数据存储、消息队列等），通过定义来源与去向数据源，并使用数据集成提供的数据抽取插件（Reader）、数据写入插件（Writer），实现任意结构化、...
亿海蓝-航运大数据的可视化案例
——亿海蓝CTO 客户简介 亿海蓝是中国的航运大数据公司，做为中国最大的AIS数据服务运营商，发展目标是通过大数据技术推动全球航运物流与互联网的融合，加速航运产业转型升级。亿海蓝目前已为全球上百万行业用户提供数据服务，客户涵盖港口...
数据分析整体趋势
随着Google等互联网企业崛起，以Hadoop为代表的基于传统x86服务器集群的大数据技术迅速发展，同时开源分布式数据库如Greenplum等也成为相应替代方案，为广大中小企业，尤其是互联网行业大大降低了数据分析的技术和成本门槛，还有分布式技术...
数据重排
在MaxCompute的使用过程中，如果已经积累了大量数据占用了大量存储资源，且已经通过削减数据存储生命周期和删除非必要数据等方式进行了治理，在您的存储预算有限，计算资源还有冗余的情况下，可以考虑使用数据重排方式对存储空间进行优化。...
名词解释
下表列出了图数据库GDB所涉及到的基本概念。概念 说明 地域 地域（Region）是指您所购买的图数据库GDB实例的服务器所处的地理位置。需要在开通图数据库GDB实例时指定地域，购买实例后暂不支持更改。可用区 可用区是指在同一地域下具有独立...
查看集群日报与分析
Hive库冷热数据分布Top信息会展示如下：库极冷数据量分布Top 库冷数据量分布Top 库温数据量分布Top 库热数据量分布Top 说明 冷数据是长时间不访问的数据，推荐放到冷备存储，例如OSS冷备等。冷热数据分布可以帮助您了解集群使用情况，有...
内核版本
本文为您介绍图数据库GDB不同内核版本的功能差异。Gremlin Gremlin是Apache TinkerPop框架下的图查询语言，使用Gremlin可以很方便地对图数据进行查询、修改、遍历和过滤等操作。GDB Gremlin内核版本高度兼容TinkerPop Gremlin查询语言，...
基于Delta Table构建近实时增全量一体化链路实践
面对当前日益复杂且对数据时效性要求极高的近实时业务场景，MaxCompute基于Delta Table推出了集大规模存储、高效批量处理和近实时能力于一体的近实时增量一体化架构。本文为您介绍该架构的工作原理及其优势。背景和现状 在当前典型的数据...
全景视角
背景信息 为提高不同使用场景下的数据治理效率和质量，DataWorks为您提供以下视角：数据管理视角：在数据资产管理、数据安全加固、数据权限管理等数据管理场景下，建议您使用数据管理视角，关注查看数据管理过程中，表的统计数据、安全权限...
数据传输与迁移概述
MaxCompute提供多种渠道，以便您从业务系统或外部数据源写入数据到MaxCompute，或者从MaxCompute写出数据到外部系统或外部数据源。数据传输渠道 SDK-Tunnel渠道 外表（湖仓一体）JDBC渠道 场景数据写入MaxCompute 离线数据批量写入（数据...
预览区块
如下图所示，可以在右侧数据页签输入额外的数据，单击下方的 测试 按钮，即可查看对应组件中显示数据内容的变更。图 1.输入不同数据 图 2.测试新增数据成果 测试事件 在事件页签中，单击某个事件对应区块中的组件，查看组件内部抛出的数据...
RAM用户访问图数据库GDB
图数据库GDB支持RAM用户访问。本文介绍从创建RAM用户到RAM用户登录图数据库GDB控制台的方法。操作步骤 创建RAM用户，具体请参见 创建RAM用户。授予RAM用户访问图数据库GDB控制台的权限，具体请参见 为RAM用户授权。说明 选择权限时，在搜索...
配置区块接口
如果您需要与三维城市构建器项目外的其他可视化组件之间进行交互联动，则需要为项目配置数据接口、事件和动作设置。三维城市构建器项目场景编辑器中提供了区块接口设置的功能，可用于自定义设置项目的数据接口、事件和动作。本文介绍在项目...
配置区块接口
如果您需要与三维城市构建器项目外的其他可视化组件之间进行交互联动，则需要为项目配置数据接口、事件和动作设置。三维城市构建器项目场景编辑器中提供了区块接口设置的功能，可用于自定义设置项目的数据接口、事件和动作。本文介绍在项目...
使用GdbLoader脚本导入数据文件
本文介绍使用GdbLoader脚本将数据文件从对象存储OSS的Bucket中导入至图数据库GDB实例、查看导入任务和取消导入任务的方法。前提条件 已创建目标图数据库GDB实例，创建方法请参见 创建主实例。说明 如果Bucket是在对象存储控制台创建，请...
设置白名单
图数据库GDB实例创建成功后，您需要为图数据库GDB实例设置白名单，以允许外部设备访问图数据库GDB实例。默认的白名单只包含默认的IP地址（127.0.0.1），表示任何设备均无法访问该实例。背景信息 在初次使用目标实例前，需要先设置实例的白...
设置白名单
您需要设置白名单后才能获取图数据库GDB的连接地址。本教程将指导您如何设置白名单。前提条件 已根据快速入门完成创建实例步骤，具体操作，请参见 创建实例。操作步骤 登录 图数据库GDB控制台。在页面左上角，选择实例所在地域。单击目标...
申请外网地址
图数据库GDB支持申请外网连接地址，用于通过外网连接实例的场景。背景信息 图数据库GDB实例支持的网络类型为专有网络和外网，关于连接地址的详细说明请参见下表。地址类型 说明 专有网络VPC（Virtual Private Cloud）专有网络是一种隔离的...
通过Cypher Shell连接实例
本章节介绍如何通过Cypher Shell连接和操作图数据库GDB。前提条件 进行实例连接操作前，请确保以下前提条件：如从外网连接，请确保已经申请外网地址；如使用ECS虚拟机连接，请确保您的ECS与图数据库GDB实例处于同一个VPC网络环境。请确保您...
产品优势
本文介绍图数据库GDB的产品优势，帮助您更好地了解GDB。兼容并包，集多种图查询语言于一身 高度兼容Neo4j、JanusGraph等图数据库引擎，支持 OpenCypher、Gremlin 查询语言，降低迁移成本和研发门槛。快速弹性、高可用、易运维、尽享云原生...
修改实例描述
您可以将图数据库GDB的实例描述修改为便于记忆的名称，方便您在后续使用过程中进行识别。本文介绍修改图数据库GDB实例描述的方法。操作步骤 登录 图数据库控制台。在页面左上角，选择实例所在地域。通过以下任意一种方法修改图数据库GDB...
准备工作
可选：创建与图数据库GDB实例、ElasticSearch实例所属地域和可用区相同，网络类型相同且使用同一个网络的ECS实例，具体请参见 创建ECS实例。配置基本参数 开启ElasticSearch实例 自动创建索引 关闭 自动创建索引 将导致图数据库GDB的数据...
专家服务
您可以通过图数据库GDB提供的专家服务功能了解在使用图数据库GDB过程中的疑问。关注数据库的 开发者社区。加入 阿里云开发者社区粉丝群，在群中可以探讨问题并获取专家服务（扫一扫以下钉钉群二维码）。
创建只读实例
本文介绍创建图数据库GDB只读实例的方法。前提条件 主实例为 高可用版，且已生成备份数据。只读实例目前仅支持内核版本为Gremlin和OpenCypher的主实例。如果当前实例规格为gdb.r5.*机型系列，请先进行一次升级操作，选择相同的规格与容量，...
- 产品推荐
- 这些文档可能帮助您