实时消费Kafka数据
当您需要将Kafka数据写入 AnalyticDB PostgreSQL版，且不希望使用其他数据集成工具时，可以通过实时数据消费功能直接消费Kafka数据，减少实时处理组件依赖，提升写入吞吐。Apache Kafka是一个容错、低延迟、分布式的发布-订阅消息系统。...
API概览
GetDBInstanceConnectivityDiagnosis 获取数据库实例网络连通性诊断结果 获取用户输入IP地址到指定数据库实例的网络连通性诊断结果。缓存分析 API 标题 API概述 CreateCacheAnalysisJob 创建缓存分析任务 调用CreateCacheAnalysisJob接口，...
常用管理
错误信息提示 在 画布编辑器 页面右上角，通过单击 图标查看当前画布中的错误信息，包括但不限于 组件数据获取失败、过滤器执行错误。报错类型 说明 组件数据获取失败 组件请求数据源发生错误时，产生该报错。数据源的请求可能发生在组件...
读取OSS数据
recordid|patientid|direction|+-+-+-+|1|51|S|3|48|NE|4|30|W|5|47|S|7|53|N|8|63|SW|10|31|N|+-+-+-+示例：读取OSS数据-分区表（内置文本数据解析器）基于 示例：通过内置文本数据解析器创建OSS外部表-分区表 中创建的OSS外部表mc_oss_...
全文检索
人们通常选择数据库或数据仓库存储文本数据，但是将文本数据中有价值的信息提取出来并进行高效分析，往往需要涉及多个数据处理系统配合来实现，用户的使用门槛通常较高、维护成本较大。通常在使用数据仓库进行文本数据的加工和分析时，离不...
将数据写入OSS
实现示例如下：示例：通过内置文本数据解析器将数据写入OSS-非分区路径 示例：通过内置文本数据解析器将数据写入OSS-分区路径 示例：通过内置文本数据解析器将数据以压缩方式写入OSS 示例：通过内置开源数据解析器将数据写入OSS 通过自定义...
自媒体：易撰
业务挑战 数据获取端写入并发压力过大，TPS约5000。业务端存在复杂查询，查询涉及的数据时间跨度大。单表10亿级数据，亿级数据需要多维度查询。业务端数据存储量大，TB级数据存储诉求，且数据量持续高速增长。业务端数据有更新诉求，对事务...
单行文本
单行文本为基本控件，在表单中使用广泛，常用于添加单行文本数据的场景。应用场景 单行文本用于添加内容较短、单行数据的文本信息，例如 姓名、职位、公司名称 等。单行文本用于添加固定数值类信息，例如 手机号、身份证号 等。效果图 效果...
用户价值
数据应用更智能：提供面向业务人员的无代码业务模型构建能力和数据分析能力，大大降低数据获取和分析门槛，让业务人员可以直接使用数据，积累沉淀业务模型，能够向上层应用提供更加智能的数据。数据资产更清晰：从宏观到微观助力数据管理方...
使用全局变量
过滤器引用 说明 新版DataV服务中的 getCallbackValue 和 getLocalValue 的数据获取效果一样，为了兼容旧版DataV服务，保留了 getLocalValue，建议您优先使用 getCallbackValue。在 画布编辑器 页面，单击上方 快捷搜索 框。输入 按钮 和 ...
API概览
本产品（数据湖构建/2020-...ListDatabases 获取元数据库列表 获取数据湖元数据库列表，分页查询，可以根据数据库名称匹配。表 表 CreateTable 新增元数据表 新增数据湖的元数据表。DeleteTable 删除元数据表 根据名称删除数据湖的元数据表。...
全量数据同步
RDS MySQL数据源已有ys_yhkh表作为数据同步来源表，表结构及数据获取请参见 RDS脚本。操作步骤 登录 数据资源平台控制台。在页面左上角，选择>协同。在顶部菜单栏，单击 图标，选择目标工作组。在左侧导航栏，单击>离线数据同步。在 离线...
基于Tair Vector实现图文多模态检索
通过CLIP模型对图片、文本数据进行预处理，并通过Vector的 TVS.HSET 命令，将其名称和其特征信息存入Tair中。具体实现可参见示例代码中的 insert_images 函数（写入图片）和 upsert_text 函数（写入文本）。进行多模态查询。以文搜图 通过...
外部数据
不管使用什么外部数据包装器，本数据库会要求外部数据包装器从外部数据源获取数据，或者在更新命令的情况下传送数据到外部数据源。访问远程数据可能需要在外部数据源的授权。这些信息通过一个用户映射提供，它基于当前的本数据库角色提供了...
内容分发网络CDN的审计事件
BatchDescribeDomainBpsData 获取加速域名的网络带宽监控数据。BatchSetCdnDomainConfig 进行域名批量配置。BatchSetCdnDomainServerCertificate 批量设置域名下证书功能是否启用及修改证书信息。BatchStartCdnDomain 批量启用状态为停用的...
创建Impala数据源
元数据获取方式：支持 元数据库、HMS、DLF 三种源数据获取方式。获取方式不同，所需配置信息不同。元数据库获取方式 参数 说明 数据库类型 请根据集群中使用的元数据库类型，选择对应的数据库类型。Dataphin支持选择 MySQL。MySQL 数据库...
DTS订阅通道
本文档主要介绍如何添加DTS数据源以及配置数据源的参数获取。前提条件 已购买数据通道服务LTS，具体操作，请参见 开通LTS。操作步骤 登录 HBase控制台。在 集群列表 页，单击BDS目标实例ID。在 基本信息 页，单击 UI访问 区域中 BDS，进入 ...
API概览
ListDataCorrectPreCheckDB 获取预检查环节的数据库列表 获取数据变更工单中预检查环节的数据库列表。ExecuteDataCorrect 执行数据变更工单 执行数据变更工单。RetryDataCorrectPreCheck 重新执行数据变更工单预检查 重新执行数据变更工单...
视频点播VOD的审计事件
DescribeVodDomainTrafficData 获取加速域名的网络流量监控数据。DescribeVodDomainUsageData 查询加速流量或带宽用量数据。DescribeVodDomainUvData 获取域名UV数据。DescribeVodMultiUsageData 获取多种计算方式的用量数据。...
需求分析
可根据原始日志数据获取到如下有效信息。字段名称 字段说明$remote_addr 发送请求的客户端IP地址。remote_user 客户端登录名。time_local 服务器本地时间。request 请求，包括HTTP请求类型+请求URL+HTTP协议版本号。status 服务端返回状态...
增量数据同步
RDS MySQL数据源已有ys_yhkh表作为数据同步来源表，表结构及数据获取请参见 RDS脚本。操作步骤 登录 数据资源平台控制台。在页面左上角，选择>协同。在顶部菜单栏，单击 图标，选择目标工作组。在左侧导航栏，单击>离线数据同步。在 离线...
添加DTS数据源
本文介绍如何在 云原生多模数据库 Lindorm 控制台上添加DTS数据源。前提条件 云原生多模数据库 Lindorm 实例已开通LTS服务，具体操作请参见 开通LTS服务。操作步骤 登录LTS服务。具体操作，请参见 登录LTS服务。在左侧导航栏，选择 数据源...
自定义文本库
try {/将返回所有文本库，包括文本反垃圾的关键词文本库、文本反垃圾的相似文本库、图片广告的关键词文本库、语音反垃圾的关键词文本库。DescribeKeywordLibResponse describeKeywordLibResponse=client.getAcsResponse...
获取文本（网页）
1.组件介绍 说明 必要前置组件：打开新网页 或 获取已打开的网页 利用本组件可以获取Chrome、Edge、IE浏览器指定页面中目标控件的文本内容。2.输入项 说明 请参照可视化编辑器内组件面板中各输入项的帮助信息 3.输出项 说明 请参照可视化...
自定义文本库
if"textKeyword"=libType and"TEXT"=resourceType and"FEEDBACK"=source:textAntispamKeywordLibs.append(keywordLib)print(json.dumps(textAntispamKeywordLibs))获取相似文本文本库列表（包含自定义和系统回流的相似文本文本库）#coding=...
数据分析概述
流动：在线数据分析可以从不同数据源获取数据进行查询和分析，并将分析结果分享至指定成员。安全：您无需下载数据至本地，即可在线上完成数据的分析，并可以控制分析和分享数据的权限。进入数据分析 登录 DataWorks控制台，切换至目标地域...
获取文本（窗口）
1.组件介绍 说明 必要前置组件：获取窗口 利用本组件操作Windows上运行程序的窗口，使其获取指定窗口元素的文本。2.输入项 说明 请参照可视化编辑器内组件面板中各输入项的帮助信息 3.输出项 说明 请参照可视化编辑器内组件面板中各输出项...
数据管理的审计事件
数据管理已与操作审计服务集成，您可以在操作审计中查询用户操作数据管理产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了用户通过Open...
数据追踪
CreateDataTrackOrder-创建数据追踪工单 GetDataTrackJobDegree-获取数据追踪任务进度 GetDataTrackJobTableMeta-获取数据追踪表元数据信息 GetDataTrackOrderDetail-获取数据追踪工单详情 SearchDataTrackResult-搜索数据追踪日志解析结果...
产品优势
数据安全中心DSC（Data Security Center）可扫描和识别海量数据，帮您实时获取数据的安全状态。本文介绍 数据安全中心 的产品优势。合规性 使用数据安全中心产品，可以帮助企业满足等保2.0对“云计算环境下安全审计”及“个人信息保护”的...
迭代器功能说明
从迭代器获取数据 迭代器数据响应结果应为复杂数组类型，数组的每一项数据可向内传递给子级组件。根据就近原则，迭代器内组件可获取最近一级父级迭代器的单元数据项，经过组件过滤器，得到最终的响应结果。组件从迭代器中获取数据操作步骤...
表
PyODPS支持对MaxCompute表的基本操作，包括创建表、创建表的Schema、同步表更新、获取表数据、删除表、表分区操作...获取表数据 获取表数据的方法有多种，常用方法如下：使用入口对象的 read_table()方法。处理一条记录。for record in o.read...
迭代器功能说明
从迭代器获取数据 迭代器数据响应结果应为复杂数组类型，数组的每一项数据可向内传递给子级组件。根据就近原则，迭代器内组件可获取最近一级父级迭代器的单元数据项，经过组件过滤器，得到最终的响应结果。组件从迭代器中获取数据操作步骤...
BI分析模式数据面板功能介绍
使用BI分析模式配置组件数据是一个全新的数据配置功能，需要与您准备的数据集内容相结合，您可以使用BI分析模式，为组件自由分配所需数据集的字段内容，合理配置图表数据映射和其他数据筛选等功能。本文介绍BI分析模式下组件数据配置面板...
添加实时数仓Hologres数据源
选择内网数据库的网络类型（包括 专有网络 和 经典网络）。专有网络 打开 VPC 开关，进入 专有网络 模式。填写数据库信息。参数 说明 VPC ID Hologres实例绑定的指定VPC的VPC ID。进入 Hologres管理控制台 的实例详情页，从 网络信息 的...
内置全密态能力
PolarDB PostgreSQL版（兼容Oracle）提供全密态数据库功能，数据在用户侧加密后传入数据库管理系统，数据明文对于数据库服务端不可见，实现了端到端的全程加密的数据强安全性。全密态云数据库是达摩院数据库与存储实验室的自研产品，可以...
API概览
数据库网关提供以下相关API接口。网关管理 API 描述 CreateGateway 调用CreateGateway创建一个新网关。ModifyGateway 调用ModifyGateway修改网关的基本信息。DeleteGateway 调用DeleteGateway删除网关信息。StopGateway 调用StopGateway...
Power BI连接
在 获取数据 页面，选择 数据库>PostgreSQL数据库，并单击 连接。在 连接 页面，填写数据库连接信息后，单击 确定。说明 若连接失败请确认数据库连接信息是否正确，检查数据库白名单是否添加Power BI所在服务器IP地址，确认无误后重新登录...
概述
Apache Flume是一个分布式、可靠和高可用的系统，可以从大量不同的数据源有效地收集、聚合和移动日志数据，从而集中式的存储数据。使用场景 Flume使用最多的场景是日志收集，也可以通过定制Source来传输其他不同类型的数据。Flume最终会将...
添加实时数仓Hologres数据源
选择内网数据库的网络类型（包括 专有网络 和 经典网络）。专有网络 打开 VPC 开关，进入 专有网络 模式。填写数据库信息。参数 说明 VPC ID Hologres实例绑定的指定VPC的VPC ID。进入 Hologres管理控制台 的实例详情页，从 网络信息 的...
- 产品推荐
- 这些文档可能帮助您