API概览
数据服务 数据服务 GetUpsertCollectionDataJob 获取异步上传向量数据任务 通过JobId获取异步上传向量数据的任务的进度和结果。UpsertCollectionDataAsync 异步上传向量数据 使用本地文件或公网可免密访问的文件链接异步上传向量数据，最大...
后续指引
说明 相关文档 数据迁移 上传下载数据 MaxCompute提供Tunnel批量数据通道、Streaming Tunnel流式数据写入通道和DataHub实时数据通道三种数据上传下载的通道，同时还支持基于DataHub和Tunnel提供的SDK实现上传下载数据，满足多样化场景需求...
更新数据
示例 请求：（此处省略了请求Header参数及编码等因素）http://ha-cn-*.ha.aliyuncs.com/update/$table_name/actions/bulk/下面的待上传数据，需要放到body体中[{"cmd":"add","fields":{"id":1,"name":"Test Data Push"} }]成功返回 无任何...
表设计最佳实践
使用MaxCompute Tunnel SDK上传数据时，如果创建了Session却没有上传数据，而是直接Commit，则会产生大量空目录（在服务侧等同于小文件）。使用MaxCompute客户端执行Tunnel命令上传时，将本地大文件切分过小会导致上传后产生大量小文件。...
管理数据库资产
支持加密审计的数据库需满足以下条件：数据库类型为自建数据库MySQL 5.6 加密算法为AES256-SHA和AES128-SHA（单向认证）如果您的MySQL数据库满足上述条件并配置了SSL证书，您需要打开 使用SSL 开关，并在 SSL密钥 处上传数据库使用的证书，...
TableTunnel
TableTunnel是访问MaxCompute Tunnel服务的入口类，仅支持表数据（非视图）的上传和下载。TableTunnel接口定义及说明 TableTunnel接口定义如下，详情请参见 Java-sdk-doc。public class TableTunnel { public DownloadSession ...
数据处理
示例 请求：（此处省略了请求Header参数及编码等因素）http://host/v3/openapi/apps/app_schema_demo/tab/actions/bulk //下面的待上传数据，需要放到body体中[{"cmd":"ADD","fields":{"id":1,"name":"Test Data Push"}}]成功返回 {"errors...
典型场景
文件上传：数据上传后，DLA元数据发现功能可自动发现并构建好元数据体系。数据ETL：DLA支持Spark，提供强大的数据ETL能力，把ODS层的原始数据清洗为结构化的DW数据。机器学习：DLA支持Spark，支持开源算法库。交互式分析：DLA提供Presto...
应用场景
通过结合其他云产品，云数据库RDS可以适用于更多典型的应用场景。自建库搭配RDS实现异地容灾 RDS搭配异构数据库实现数据多样化存储 RDS结合开放搜索服务实现复杂搜索 开启读写分离扩展RDS处理能力 RDS搭配大数据计算服务实现大规模数据计算
代码搜索
DataWorks的代码搜索功能，用于通过关键字搜索节点中的代码片段，并展示包含该代码片段的所有节点及片段的详细内容。当目标表数据产生变更，您需要查找操作源（即导致目标表数据变更的任务）时，可以使用该功能。本文以数据开发功能为例，...
行为反馈
该字段是开放搜索为了区分服务端上报和移动端采集的SDK而设置的 非必须如果是通过开放搜索SDK做上报，会默认设置该值为”opensearch_sdk”3 sdk_version STRING 数据上报使用的SDK版本号 非必须如果是通过开放搜索SDK做上报，会默认设置该...
管理数据分级
区域 描述 ① 搜索区 您可以根据数据分级的名称关键字，快速搜索数据分级。② 数据分类信息 为您展示数据分级、数据分级的名称、更新人、更新时间、分级描述信息。③ 操作区 编辑：在 编辑数据分级 对话框，修改 分级名称 和 分级描述，...
功能简介
通过统一的数据资产目录，沉淀数据供给方生产的各类型数据，帮助数据使用者快速了解和获取业务需要的高质量数据资产，促进数据资产发挥更大的业务价值。同时，通过查看数据资产全局血缘，清晰的了解数据资产的上下游关联。概览 对数据资产...
功能简介
通过统一的数据资产目录，沉淀数据供给方生产的各类型数据，帮助数据使用者快速了解和获取业务需要的高质量数据资产，促进数据资产发挥更大的业务价值。同时，通过查看数据资产全局血缘，清晰的了解数据资产的上下游关联。概览 对数据资产...
应用场景
数据标准：管理数据标准和构建数据模型，将数据标准贯彻到数据质量分析、保障及检查的全过程中，将散乱的多源异构数据加工成标准、干净的数据资产，确保数据的完整性、一致性、准确性和可用性。数据建模：通过数据建模模块提供的各种数据...
地理搜索框
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
功能特性
功能集 功能 功能描述 参考文档 上传数据 Tunnel（离线）MaxCompute的客户端（odpscmd）、Studio等数据上传下载工具均通过Tunnel功能实现数据的上传与下载。Tunnel（离线）Kafka（离线与实时）支持将消息队列Kafka版数据导入MaxCompute。...
发现
通过统一的数据资产目录，沉淀数据供给方生产的各类型数据，帮助资产运营管理者进行高价值、可共享的数据资源的注册、编目分类和公开运营，帮助数据使用者快速了解和获取业务需要的高质量数据资产，促进数据资产发挥更大的业务价值。...
资产目录
资产目录为您展示不同资产对象类型的元数据信息，同时支持搜索、访问及收藏等功能，为您提供高效、快捷、准确的数据查找入口。本文为您介绍资产目录相关详情。页面入口 在Dataphin首页，单击顶部菜单栏的 资产，默认进入数据 目录 页面。...
资产目录
资产目录为您展示不同资产对象类型的元数据信息，同时支持搜索、访问及收藏等功能，为您提供高效、快捷、准确的数据查找入口。本文为您介绍资产目录相关详情。页面入口 在Dataphin首页，单击顶部菜单栏的 资产，默认进入数据 目录 页面。...
全量备份数据上云（SQL Server 2008 R2本地盘）
以本地文件为例，说明如何通过File.length()获取上传数据的大小。final File sampleFile=new File(filePath);long fileLength=sampleFile.length();int partCount=(int)(fileLength/partSize);if(fileLength%partSize!0){ partCount+;}/遍...
应用场景
该方案优势如下：全托管免运维 弹性扩展能力 开放数据湖架构 一站式的数据开发平台 数据查询与分析场景 在传统数据平台下，数据仓库工程师和数据分析师通常面临两个不同的环境，甚至使用不同的引擎和语法，导致数据指标和算子行为存在差异...
项目编辑器页面管理
如果此处无待添加的数据，请参见 上传数据 章节上传所需数据文件。在映射字段属性页面，单击属性下拉框，选择映射数据样例中某个已有的字段内容，配置映射属性字段，完成后单击 下一步 即可进入预览数据页面。在预览数据页面查看数据解析...
项目编辑器页面管理
如果此处无待添加的数据，请参见 上传数据 章节上传所需数据文件。在映射字段属性页面，单击属性下拉框，选择映射数据样例中某个已有的字段内容，配置映射属性字段，完成后单击 下一步 即可进入预览数据页面。在预览数据页面查看数据解析...
友盟数据分析
U-DOP数据开放平台是友盟+为开发者提供的数据开放和私域数据融合的平台，通过一键订阅分析模板、拖拽式自助分析报表来快速完成数据分析工作。U-DOP数据开放平台不仅仅为您提供了U-App的统计明细数据，同时包含了多主题的分析模板和可订阅的...
教育搜题
开放搜索集成了 教育搜题行业专属的教育分词器，同时在此基础之上用户还可上传自己的分词词条定制个性化的分词器。示例 Query 下面三角形的面积是多少平方厘采？拼写纠错 下面三角形的面积是多少平方厘米？学科类目预测 数学 分词 下面 ...
简单上传示例
Tunnel SDK是MaxCompute提供的离线批量数据通道服务，主要提供大批量离线数据上传和下载。典型的表数据上传流程 创建表，如果是分区表先创建分区。创建TableTunnel。创建UploadSession。创建RecordWriter，写入Record。提交上传。示例 ...
全量备份数据上云（SQL Server 2008 R2云盘、2012及...
以本地文件为例，说明如何通过File.length()获取上传数据的大小。final File sampleFile=new File(filePath);long fileLength=sampleFile.length();int partCount=(int)(fileLength/partSize);if(fileLength%partSize!0){ partCount+;}/遍...
地理搜索框
当搜索框的数据发生变化时，会触发数据请求，抛出临时变量，动态加载不同区域的数据。默认抛出数据中的 name 和 adcode 值，具体配置请参见 组件交互配置。蓝图交互 单击页面左上角的 图标，进入 蓝图 页面。在 图层节点 页签下，添加当前...
增量备份数据上云（SQL Server 2008 R2云盘、2012及...
以本地文件为例，说明如何通过File.length()获取上传数据的大小。final File sampleFile=new File(filePath);long fileLength=sampleFile.length();int partCount=(int)(fileLength/partSize);if(fileLength%partSize!0){ partCount+;}/遍...
数据传输与迁移概述
MaxCompute提供多种渠道，以便您从业务系统或外部数据源写入数据到MaxCompute，或者从MaxCompute写出数据到外部系统或外部数据源。数据传输渠道 SDK-Tunnel渠道 外表（湖仓一体）JDBC渠道 场景数据写入MaxCompute 离线数据批量写入（数据...
SQL Server实例级别迁移上云
以本地文件为例，说明如何通过File.length()获取上传数据的大小。final File sampleFile=new File(filePath);long fileLength=sampleFile.length();int partCount=(int)(fileLength/partSize);if(fileLength%partSize!0){ partCount+;}/遍...
新功能发布记录
时间 特性 类别 描述 2023-12-26 智能开放搜索 OpenSearch-LLM智能问答版表格问答功能发布，支持对接MaxCompute 新增 OpenSearch智能问答版支持表格数据，提供针对表格数据的智能问答能力，支持MaxCompute数据源快速导入。2023-11-27 智能...
数据上云工具
MaxCompute平台支持丰富的数据上传和下载工具（其中大部分工具已经在GitHub公开源代码，以开源社区的方式进行维护）。您可以根据实际应用场景，选择合适的工具进行数据的上传和下载。阿里云数加产品 MaxCompute客户端（Tunnel通道系列）...
数据分析概述
进入 数据分析 首页，页面包含以下两个区域：快捷入口：在 快捷入口 区域，单击对应图标进入 SQL查询、电子表格、数据上传 等模块进行数据分析操作。最近编辑：在 最近编辑 区域，可以查看最近编辑的文件，单击文件名打开文件进行后续操作...
数据开发与运行
超过30M的资源需要通过[tunnel]（使用Tunnel命令上传下载数据）上传，上传后再使用MaxCompute资源功能添加到DataWorks进行后续的资源使用操作。详情请参考常见问题：通过odpscmd上传的资源如何在DataWorks上使用？通过odpscmd上传的资源...
Dataphin支持的数据源
数据服务作为统一的数据服务出口，实现了数据的统一市场化管理，有效地降低数据开放门槛的同时，保障了数据开放的安全。数据服务概述 标签工厂 标签工厂是通过标签创建到服务全链路的构建，为企业数据研发团队以及开发工程师提供一站式标签...
手动/定时索引重建
对于用户上传的数据（包括通过各个数据源的同步过来的数据）行业算法版会在系统中保存一份镜像。如果有涉及到应用结构变更、或者需要导入全量数据的情况下，需要进行索引重建操作。目前有4种操作会触发索引重建：手动索引重建：一般用于...
数据上传下载成本优化
本文为您介绍如何优化数据上传和下载的同步成本。尽可能使用经典网络和VPC网络 您可以使用内部网络（经典网络或VPC）实现零成本数据导入和导出。网络设置详情请参见 配置Endpoint。合理利用ECS的公共下载资源 如果您的ECS使用包月资源，...
混合查询最佳实践
背景介绍 OpenSearch-向量检索版的混合搜索 混合搜索的方式能帮助文本数据搜索，将语义搜索与关键词搜索相结合，获得更好的效果。在向量检索版中，您可以使用稀疏-稠密向量进行混合检索。对比传统的 文本+向量 多路召回，向量检索版中的...
- 产品推荐
- 这些文档可能帮助您