LLM智能问答版钉钉、飞书智能机器人发布
企业内部文档搜索、知识库搜索、内容搜索、电商、营销等业务场景的客户 2.有对话式搜索需求的客户 3.希望构建企业专属LLM模型，但资源、人力、预算相对较少的客户 4.无开发人力，但期望实现在钉钉、飞书等群聊中接入智能助手的客户 新增...
基于向量检索服务与TextEmbedding实现语义搜索
本教程演示如何使用向量检索服务（DashVector），结合 灵积模型服务 上的 Embedding API，来从0到1构建基于文本索引的构建+向量检索基础上的语义搜索能力。具体来说，我们将基于QQ 浏览器搜索标题语料库（QBQTC：QQ Browser Query Title ...
Go应用构建并部署K8s
3、配置代码扫描 在镜像构建任务前面添加代码扫描任务，搜索“Go 代码扫描“，选中添加Go 代码扫描任务。4、配置单元测试 在Go代码扫描下面添加Go单元测试任务，搜索“Go 单元测试“，选中添加Go 代码单元测试。5、配置镜像构建任务 你需要...
内容社区行业
结合内容搜索场景及行业难题，更精准的构建索引并识别用户查询意图，与通用版相比效果更优。策略排序 创建应用后，需要结合业务场景手动配置并调试相应的排序策略。在应用结构模板和索引结构模板基础上，提供内容行业常用排序表达式，无需...
通用行业/游戏行业算法版对比
结合游戏搜索场景及行业难题，更精准的构建索引并识别用户查询意图，与通用版相比效果更优。策略排序 创建应用后，需要结合业务场景手动配置并调试相应的排序策略。在应用结构模板和索引结构模板基础上，提供游戏行业常用基础排序、业务...
通用行业/内容社区行业算法版对比
结合内容搜索场景及行业难题，更精准的构建索引并识别用户查询意图，与通用版相比效果更优。策略排序 创建应用后，需要结合业务场景手动配置并调试相应的排序策略。在应用结构模板和索引结构模板基础上，提供内容行业常用基础排序、业务...
小程序场景
第二轮为精排，对粗排的结果做更精细筛选-人气模型——量化出每个商品的静态质量及受欢迎的程度的值，不断训练统计形成人气分，构建更精细化的排序模型，精准命中搜索需求 下拉提示 在用户输入查询词的过程中，智能推荐候选query，帮助用户...
RPA开发者-快速入门
构建一个RPA工程 本节将快速引导您利用RPA构建一个 可视化本地工程：打开百度、搜索“阿里云”、并将搜索结果记录到本地的简单场景。若您希望以编码的方式构建工程，请参考编码模式下的 编辑器使用说明。具体流程：步骤一：打开百度 在开始...
常见问题
本文为您介绍数据湖构建的常见问题。如何申请数据湖构建产品的公测资格？数据湖构建如何收费？数据湖构建与OSS有什么区别？什么情况下我需要使用数据湖构建？如何申请数据湖构建产品的公测资格？请使用阿里云 主账号 进行公测资格申请（请...
构建环境
构建环境调试 云效使用docker镜像的方式提供构建环境，镜像可以公开下载到，具体的镜像地址可以在构建日志中看到（信息红色字体标识，可以搜索关键字build image）,如下图所示：构建命令在日志中也可以看到（信息红色标识，可搜关键字build...
概述
数据湖构建可以帮助用户快速构建云上数据湖，采用统一的管理视角治理数据湖。本产品目前处于公测阶段，您可以随时开通使用，目前数据湖构建所有功能均为免费使用阶段。用户使用流程 数据湖构建将帮助您快速简洁抽取源数据到统一数据湖的...
角色管理
本文档主要为您说明如何管理数据湖构建中的角色。说明 子账号需要具备admin（数据湖管理员）或 super_administrator（超级管理员）的权限，才可以进行角色相关操作。查看角色信息 1.打开 数据湖构建控制台，并打开数据权限管理-角色菜单。2...
用户管理
本文档主要为您说明如何管理数据湖构建中已添加的用户。查看用户列表 1.打开 数据湖构建控制台，并打开数据权限管理-用户菜单。2.打开用户列表信息页面。说明 此处管理的用户为添加到数据湖构建中的用户，目前仅支持添加RAM用户到数据湖...
服务等级协议
自2021年1月起，数据湖构建（DLF）服务等级协议（SLA）生效。详细内容参考 数据湖构建服务等级协议。
产品简介
阿里云数据湖构建（Data Lake Formation，简称 DLF）是一款全托管的快速帮助用户构建云上数据湖及Lakehouse的服务，为客户提供了统一的元数据管理、统一的权限与安全管理、便捷的数据入湖能力以及一键式数据探索能力。DLF可以帮助用户快速...
使用OpenAPI
本文为您介绍使用数据湖构建OpenAPI的基本信息及注意事项。说明 关于如何使用阿里云OpenAPI，请参见学习文档：使用OpenAPI。基本信息 版本说明 版本号 说明 2020-07-10 推荐 接入点说明 参见 服务接入点。用户身份 用户身份 支持情况 阿里...
应用场景
典型业务场景：电商零售智能搜索、内容社区智能搜索、游戏智能搜索、教育搜题等 适用客户：开箱即用，适合有智能搜索诉求的中小企业及开发者 高性能检索版 版本特性：大数据检索性能深度优化，实现秒级响应，实时查询能力，支持一站式快速...
使用限制
您在使用数据湖构建（Data Lake Formation，简称DLF）控制台和接口时，产品做了如下限制，请在使用时注意不要超过相应的限制值，以免出现异常。数据湖元数据 限制项 用户配额 单表QPS 500 单表分区数量 100万 数据湖入湖预处理作业 限制项 ...
快速入门
数据湖构建（Data Lake Formation，DLF）产品主要使用流程如下。前提条件 注册阿里云账号，并完成 实名认证。创建数据源 创建数据湖的入湖来源，当前支持阿里云RDS MySQL和PolarDB作为数据来源。您需要输入RDS MySQL连接的用户名和密码。...
关系数据库全量入湖
本文为您介绍如何在数据湖构建（Data Lake Formation，简称DLF）中使用关系数据库全量入湖任务将RDS或PolarDB数据批量同步到数据湖中。重要 数据入湖功能已经停止更新，如果您有数据入湖需求请参考：数据入湖停止更新公告。前提条件 已开通...
数据目录
什么是数据目录（Catalog）数据目录（Catalog）是数据湖构建（Data Lake Formation）的元数据最上层实体，它可以包含多个数据库。适用场景 主要适用于元数据隔离的场景，比如多个E-MapReduce集群，每个集群绑定不同的Catalog，每个EMR集群...
GetRegionStatus-获取数据湖构建服务开通状态
获取数据湖构建指定地域的服务开通状态。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 GET/webapi/...
入湖基础操作
数据湖构建（Data Lake Formation，简称DLF）支持多种入湖任务类型用于快速构建数据湖，通过入湖任务，您可以定义数据入湖的方式和所消耗的资源。本文为您介绍入湖任务的基础操作。重要 数据入湖功能已经停止更新，如果您有数据入湖需求请...
授权信息
本文为您介绍 数据湖构建（DataLake）为RAM权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。数据湖构建（DataLake）的RAM代码（RamCode）为 dlf,dlf-dss，支持的授权粒度为 OPERATION。权限策略通用结构 权限策略支持...
Location托管
Location托管可以将数据湖OSS中的存储数据托管到数据湖构建（DLF）中进行管理和分析，在托管Location后将可以为你提供 存储概览，生命周期管理介绍，数据表-数据概况（如数据访问频次，数据最后更新时间等），以及存储权限（规划中）等数据...
取消授权
本文档主要为您说明如何取消已有授权权限。操作步骤 1.打开 数据授权控制台，并以数据湖管理员身份或已有授权权限的用户身份登录，并打开数据...搜索您想要取消的授权信息。3.点击您要取消的授权信息后的“取消授权”按钮，完成取消授权操作。
数据湖构建之MaxCompute湖仓一体最佳实践
MaxCompute+DLF湖仓一体方案打破数据湖与数据仓库割裂的体系，架构上将数据湖的灵活性、生态丰富与数据仓库的企业级能力进行融合，构建数据湖和数据仓库融合的数据管理平台。本文介绍湖仓一体的具体方案。背景信息 大数据计算服务...
基于Delta lake的一站式数据湖构建与分析实战
企业构建和应用数据湖一般需要经历数据入湖、数据湖存储与管理、数据湖探索与分析等几个过程。本文主要介绍基于阿里云数据湖构建（DLF）构建一站式的数据入湖与分析实战。背景信息 随着数据时代的不断发展，数据量爆发式增长，数据形式也变...
权限设置
操作步骤 开启权限 打开 数据构建控制台 依次打开菜单：数据权限-权限设置 在数据目录（Catalog）的右侧，如数据目录处于关闭状态，点击“开启”操作，将会提示确认开启弹出框，确认后，完成权限开启。关闭权限 打开 数据构建控制台 依次...
存储概览
数据湖构建DLF后续还将推出生命周期管理功能，帮助您对湖内数据进行自动归档。目前功能开发中。存储格式分布 统计表的存储格式分布情况。大小文件分布和排名 统计大小文件分布及排名情况，根据业务情况，针对小文件较多的表进行优化，提高...
Kafka实时入湖
本文为您介绍如何在数据湖构建（Data Lake Formation，简称DLF）中使用Kafka实时入湖任务将数据同步到数据湖中。重要 数据入湖功能已经停止更新，如果您有数据入湖需求请参考：数据入湖停止更新公告。前提条件 已开通数据湖构建服务，尚未...
元数据迁移
元数据迁移提供可视化的元数据迁移能力，可以帮您快速的将Hive Metastore的元数据迁移到数据湖构建（DLF）中。前提条件 支持Hive版本：2.3.x 版本。支持元数据库类型：MySQL。创建元数据迁移任务 创建迁移任务 打开 数据湖构建控制台。选择...
湖格式管理
操作步骤 查看优化策略 打开数据湖构建控制台 点击菜单湖管理-湖格式管理 查看优化策略列表，如下图所示 设置优化策略阈值 在优化策略列表页，点击设置阈值，可以为策略设置执行的阈值，满足阈值后，将会自动执行优化策略。禁用优化策略 在...
DLF中数据入湖功能停止更新公告
数据湖构建（DLF）产品的数据入湖功能已于2023年02月15日停止更新，但会持续运维已有数据入湖作业。为了确保您业务连续性，建议您采用其他方式进行数据入湖，推荐使用 数据集成概述 或 Flink CDC：如 MySQL CDC DataStream Connector。停止...
基本配置
都会先将非在线版本删除再创建新版本 由于用户配置应用结构信息可能比较耗时，开放搜索将应用结构的保存和索引重建分开，即便索引构建失败，当前用户配置的应用结构信息仍然保留 使用流程 注：为全面展示基本配置的内容，这里以自定义分析...
基本配置
都会先将非在线版本删除再创建新版本 由于用户配置应用结构信息可能比较耗时，开放搜索将应用结构的保存和索引重建分开，即便索引构建失败，当前用户配置的应用结构信息仍然保留 使用流程 注：为全面展示基本配置的内容，这里以自定义分析...
Flink VVP+DLF数据入湖与分析实践
数据湖构建（DLF）可以结合阿里云实时计算Flink版（Flink VVP），以及Flink CDC相关技术，实现灵活定制化的数据入湖。并利用DLF统一元数据管理、权限管理等能力，实现数据湖多引擎分析、数据湖管理等功能。本文为您介绍Flink+DLF数据湖方案...
元数据管理
元数据管理是构建数据湖重要一环，通过有效集中式的元数据管理，可以提升数据资产价值。您可以使用该功能管理元数据库和元数据表。创建元数据库 登录 数据湖管理控制台，选择 元数据 目录下的 元数据管理。单击 新建数据库。配置元数据库...
计费模式
本文介绍数据湖构建中各资源的计费规格，包括入湖作业资源用量、数据存储对象和元数据请求三部分。计量计费项 重要 DLF产品目前所有功能为 0折扣活动阶段，即使超过免费阶梯限定后，目前也均不会产生实际计费。元数据对象的存储量 元数据...
构建镜像
镜像构建提供将应用的源代码编译成镜像的服务能力。镜像成功构建后，默认会推送至 LHC 默认的镜像中心。创建构建 本部分介绍如何通过单元化应用服务控制台完成镜像构建操作。前提条件 已创建应用。操作步骤 登录控制台，在左侧导航栏单击 ...
- 产品推荐
- 这些文档可能帮助您