配置Hive输入组件

Hive输入组件用于读取Hive数据源的数据。同步Hive数据源的数据至其他数据源的场景中,您需要先配置Hive输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置Hive输入组件。使用限制 Hive输入组件支持数据格式为 orc、...

配置AnalyticDB for MySQL 3.0输入组件

AnalyticDB for MySQL 3.0输入组件用于读取AnalyticDB for MySQL 3.0数据源的数据。同步AnalyticDB for MySQL 3.0数据源的数据至其他数据源的场景中,您需要先配置AnalyticDB for MySQL 3.0输入组件读取的数据源,再配置数据同步的目标数据...

配置MaxCompute输入组件

MaxCompute输入组件用于读取MaxCompute数据源的数据。同步MaxCompute数据源的数据至其他数据源的场景中,您需要先配置MaxCompute输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置MaxCompute输入组件。前提条件 在...

配置SAP HANA输入组件

SAP HANA输入组件用于读取SAP HANA数据源的数据。同步SAP HANA数据源的数据至其他数据源的场景中,您需要先配置SAP HANA输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置SAP HANA输入组件。操作步骤 请参见 通过离...

配置AnalyticDB for MySQL 3.0输入组件

AnalyticDB for MySQL 3.0输入组件用于读取AnalyticDB for MySQL 3.0数据源的数据。同步AnalyticDB for MySQL 3.0数据源的数据至其他数据源的场景中,您需要先配置AnalyticDB for MySQL 3.0输入组件读取的数据源,再配置数据同步的目标数据...

配置MaxCompute输入组件

MaxCompute输入组件用于读取MaxCompute数据源的数据。同步MaxCompute数据源的数据至其他数据源的场景中,您需要先配置MaxCompute输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置MaxCompute输入组件。前提条件 在...

新建及管理动态脱敏规则

脱敏规则用于管理脱敏的数据范围及具体的脱敏方式。本文为您介绍如何新建及管理动态脱敏规则。背景信息 动态脱敏规则常用于查询某些敏感的生产数据场景。对满足条件的数据对象进行数据变形或加密实现敏感隐私数据的可靠保护。新建动态脱敏...

新建及管理识别规则

所属分类层级 选择数据分类的层级,如需创建目录,请参见 管理数据分类目录。分类名称 选择该层级下当前可用的数据分类,如需创建,请参见 新建及管理数据分类。说明 当计算引擎为StarRocks且字段类型为HLL(HyperLoglog)时,暂无法为您...

新建及管理识别规则

所属分类层级 选择数据分类的层级,如需创建目录,请参见 管理数据分类层级。分类名称 选择该层级下当前可用的数据分类,如需创建,请参见 新建及管理数据分类。扫描范围 识别方式支持 且、或 两种方式。识别类型包括 数据板块、项目 和 ...

管理动态脱敏白名单

数据分类 选择数据分类。如需创建数据分类,您也可以单击 无可用数据分类,去新建>按钮创建,详情请参见 管理数据分类。生效账号 选择本次白名单生效的用户账号。生效场景 选择脱敏规则应用的场景。系统支持 即席查询 和 写开发表 应用场景...

管理动态脱敏白名单

数据分类 选择数据分类。如需创建数据分类,您也可以单击 无可用数据分类,去新建>按钮创建,详情请参见 管理数据分类。生效账号 选择本次白名单生效的用户账号。生效场景 选择脱敏规则应用的场景。系统支持 即席查询 和 写开发表 应用场景...

上传管道脚本

在数据 开发 页面,单击项目名称后的 图标,选择数据开发的 Dev 或 Basic 项目空间。如果您当前访问的是 Dev 或 Basic 项目空间,且项目空间为您的数据开发空间,则无需选择项目空间。在数据 开发 页面,鼠标悬停至顶部菜单栏的 开发 上,...

上传管道脚本

在数据 开发 页面,单击项目名称后的 图标,选择数据开发的 Dev 或 Basic 项目空间。如果您当前访问的是 Dev 或 Basic 项目空间,且项目空间为您的数据开发空间,则无需选择项目空间。在数据 开发 页面,鼠标悬停至顶部菜单栏的 开发 上,...

应用管理

智能双录质检将易于使用的 AI 检测能力封装为 SDK 提供给企业或软件开发商,由企业或软件开发商根据业务具体需求开发使用双录质检业务的应用。应用管理则主要用来管理接入智能双录质检服务的应用。在此,您可以创建、禁用/启用和删除应用。...

工业视觉智能基本概念

工作区 通过预设的场景帮助用户识别自身需求,用户通过工作区管理自己的数据集与模型。工作区是完整视觉智能能力的承载主体,用户可以对工作区进行独立授权。数据集 工业视觉智能产品的视觉智能模型通过深度学习来获得,而深度学习依赖于...

创建Oracle数据

数据源配置 选择需要配置的数据源:如果业务数据源区分生产数据源和开发数据源,则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源,则选择 生产数据源。标签 您可根据标签给数据源进行分类打标,如何创建标签,请参见 ...

创建Oracle数据

数据源配置 选择需要配置的数据源:如果业务数据源区分生产数据源和开发数据源,则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源,则选择 生产数据源。标签 您可根据标签给数据源进行分类打标,如何创建标签,请参见 ...

快速入门

通过快速入门功能,可以帮助您快速理解智能双录质检核心功能的使用流程及效果。智能双录质检核心功能是对双录 App 录制的视频文件通过 AI 检测规则进行质检分析。智能双录质检基于通用保险的一般质检流程预置了通用保险质检流程,您可以...

公告

2023年07月11日-数据处理单元拓展及数据萃取功能下架通知 2023年07月11日起,Dataphin售卖变更如下:智能研发版和基础研发版可选的数据处理单元规格拓展,支持3500、4000、4500、5000。数据萃取功能下架,不支持新购和升级,历史已购客户...

数据源管理概述

在使用Dataphin前,您可将需要引入Dataphin的数据源接入到Dataphin中,已接入的数据源可用于读取原始数据和写入数据建设过程中的数据。Dataphin具备丰富的数据源类型接入,支持对接如MaxCompute、Hive等数据仓库,也支持对接企业传统数据库...

数据源管理概述

在使用Dataphin前,您可将需要引入Dataphin的数据源接入到Dataphin中,已接入的数据源可用于读取原始数据和写入数据建设过程中的数据。Dataphin具备丰富的数据源类型接入,支持对接如MaxCompute、Hive等数据仓库,也支持对接企业传统数据库...

答疑支持

若您在使用智能数据建设与治理Dataphin的过程中有任何疑问,您可通过答疑支持联系我们,为您答疑解惑。操作步骤 在Dataphin页面,按照以下操作指引或单击蓝色小机器人选择 答疑支持,进入答疑支持页面后,输入您需解答的问题。依次单击 ...

答疑支持

若您在使用智能数据建设与治理Dataphin的过程中有任何疑问,您可通过答疑支持联系我们,为您答疑解惑。使用说明 需保证网络连通、Dataphin已升级至3.14.1及以上版本且已经对接工单系统(如需对接可联系运维部署团队)方可使用工单功能。...

新建自定义数据

完成自定义数据源类型后,您可将该类型的数据源接入到Dataphin中,为后续进行集成开发做准备。前提条件 已有自定义数据源类型。具体操作,请参见:新建离线自定义源类型。新建实时自定义源类型。操作步骤 请参见 数据源管理入口,进入 数据...

流量监控

智能接入网关管理控制台,您可以查看智能接入网关实例的监控数据,如流量、数据包、时延、丢包WAN口带宽、应用加速带宽和DPI应用统计等。操作步骤 登录 智能接入网关管理控制台。在顶部菜单栏,选择智能接入网关的目标区域。在 智能接入...

配置本地文件输入组件

本地文件输入组件可用于将本地文件的TXT、excel、CSV格式的数据。同步至其他数据源的场景中。本文为您介绍如何配置本地文件输入组件。使用限制 仅支持手动任务配置本地文件输入组件。操作步骤 请参见,进入离线管道组件开发页面。按照下图...

配置本地文件输入组件

本地文件输入组件可用于将本地文件的TXT、excel、CSV格式的数据。同步至其他数据源的场景中。本文为您介绍如何配置本地文件输入组件。使用限制 仅支持手动任务配置本地文件输入组件。操作步骤 请参见 离线管道组件开发入口,进入离线管道...

新建自定义数据

完成自定义数据源类型后,您可将该类型的数据源接入到Dataphin中,为后续进行集成开发做准备。前提条件 已有自定义数据源类型。具体操作,请参见:新建离线自定义源类型。新建实时自定义源类型。操作步骤 请参见 数据源管理入口,进入 数据...

新功能发布记录

2023-09-07 新加坡正式开服 新增 智能开放搜索 OpenSearch-智能问答版在新加坡正式开服 2023-08-23 支持多轮对话、自定义Prompt参数 新增 支持多轮对话、自定义Prompt参数 2023-08-11 支持多模型可选择,优化非结构话数据导入和人工干预 ...

产品计费

智能双录质检提供三种模式的检测服务,分别是本地双录质检、远程双录质检和云端双录质检。这三种检测服务均采用后付费方式进行计费,本文分别对三种服务的计费规则进行说明。本地双录质检 当您使用智能双录质检提供的 SDK(Android 或 iOS...

功能更新动态(2022年之前)

2021年08月19日 华北2(北京)、华东1(杭州)计费说明 2021年08月24日 华南1(深圳)2021年08月26日 华东2(上海)系统将依据您选择的数据处理单元规格分配不同的默认调度资源,选购的规格越高,分配的调度资源越多,可以支持的任务并发数...

申请、续期和交还表权限

数据板块:当表类型选择为 逻辑视图、建模逻辑表 和 标签逻辑表 时,建议选择逻辑表所在的数据板块。项目:当表类型选择为 物理表、元表、镜像表、物理视图 时,建议选择物理表所在的项目。说明 批量申请权限最多选择100张数据表。筛选项为...

申请、续期和交还表权限

数据板块:当表类型选择为 逻辑视图、建模逻辑表 和 标签逻辑表 时,建议选择逻辑表所在的数据板块。项目:当表类型选择为 物理表、元表、镜像表、物理视图 时,建议选择物理表所在的项目。说明 批量申请权限最多选择100张数据表。筛选项为...

管理数仓规划待发布对象

选择您需替换数据源对象属性的数据源类型。如MaxCompute。添加圈规则。单击+添加规则 并在新增的规则项中配置您替换规则。替换规则之间支持 且 运算。配置圈范围。设置规则配置项。配置项根据数据源类型不同,支持不同配置项类型,请以...

管理数仓规划待发布对象

选择您需替换数据源对象属性的数据源类型。如MaxCompute。添加圈规则。单击+添加规则 并在新增的规则项中配置您替换规则。替换规则之间支持 且 运算。配置圈范围。设置规则配置项。配置项根据数据源类型不同,支持不同配置项类型,请以...

管理元数据

您也可以单击 图标,通过选择 数据对象、存储类型、引用状态、负责人 快速筛选元数据。参数 描述 元数据名称 元数据的名称。存储类型 元数据的 存储类型,存储类型为Dataphin的离线计算引擎类型。由于计算引擎类型包括Hive和MaxCompute,...

步骤六:可视化分析

连接数据库 选择创建的数据库。显示名称 系统自动填充,无需填写。数据库地址 系统自动填充,无需填写。端口 默认 3306 端口。数据库 选择 flink_dataphin 数据库。用户名、密码 填写访问数据库的用户名和密码。数据库版本 选择 8.0 版本。...

步骤六:可视化分析

连接数据库 选择创建的数据库。显示名称 系统自动填充,无需填写。数据库地址 系统自动填充,无需填写。端口 默认 3306 端口。数据库 选择 flink_dataphin 数据库。用户名、密码 填写访问数据库的用户名和密码。数据库版本 选择 8.0 版本。...

管理元数据

您也可以单击 图标,通过选择 数据对象、存储类型、引用状态、负责人 快速筛选元数据。参数 描述 元数据名称 元数据的名称。存储类型 元数据的 存储类型,存储类型为Dataphin的离线计算引擎类型。由于计算引擎类型包括Hive和MaxCompute,...

变更管控

变更管控功能是指在变更环节(如提交、发布、运维操作等),通过配置管控规则及生效范围,在执行变更前进行相应的校验,并根据规则校验结果决定是否可以通过该环节的约束,从而避免非预期的数据变更或者误删除等高危操作,影响下游业务使用...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 智能数据建设与治理 Dataphin 云数据库 RDS 数据库备份 云服务器 ECS 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用