运维中心入门
若您仅需在数据开发（DataStudio），即开发环境，查询数据及相关SQL代码、测试代码的实际运行情况与期望值是否相符，或验证代码的正确性，而无需将数据或SQL代码发布至生产环境并操作生产环境引擎，则可通过 新建临时查询文件 实现。...
使用FeatureStore Python SDK搭建推荐系统
同步用户表：rec_sln_demo_user_table_preprocess_all_feature_v1（单击查看详情）CREATE TABLE IF NOT EXISTS rec_sln_demo_user_table_preprocess_all_feature_v1 like pai_online_project.rec_sln_demo_user_table_preprocess_all_...
主备容灾
云HBase通过master节点自动切换、数据两副本、快速自动failover等手段最大程度的保证了HBase实例服务和数据可用性，但是面对可用区级别的断电、断网及其他极端故障单个HBase集群无法满足用户的高可用要求，针对跨可用区灾备需求我们提供了...
物化视图增量刷新（预览版）
增量刷新会通过特定算法，只计算变更部分的数据，然后定向更新物化视图中的数据，且增量刷新相较于全量刷新开销更低，可以更高频地更新。如果您仅需要刷新变更的数据，可以选择增量刷新物化视图。本文介绍如何在创建物化视图时指定增量刷新...
DescribeOutlineBinding-查询 Outline 绑定信息
根据 SQLID 查询一条 SQL 在数据库中被绑定的 Outline 信息或限流信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息...
日志实时入仓快速入门
此时，如果您希望创建一个数据同步的作业，将该Topic中的日志数据都同步到Hologres中，则可以按照以下步骤进行：步骤一：配置IP白名单 步骤二：准备Kafka测试数据 步骤三：创建Hologres Catalog 步骤四：创建并启动数据同步作业 步骤五：...
MaxCompute数据源
假设用户的MaxCompute 数据表mytable，分区为ds=20220113，首次配置数据源索引重建之后，以后每天产出一个新分区（新分区数据是表的全量数据），需要召回引擎版实例扫描到新分区然后自动进行索引重建拉取新分区数据，此时就需要：自动索引...
MaxCompute数据源
假设用户的MaxCompute 数据表mytable，分区为ds=20220113，首次配置数据源索引重建之后，以后每天产出一个新分区（新分区数据是表的全量数据），需要向量检索版实例扫描到新分区然后自动进行索引重建拉取新分区数据，此时就需要：自动索引...
Flink_SQL任务开发方式
Dataphin的Flink_SQL任务支持多种开发方式，包括原生DDL+DML开发、使用Dataphin元表进行开发、使用Dataphin数据源表进行开发、以及使用计算源物理表进行开发，且不同开发方式所创建的表支持任意混用，包括镜像表。不同开发方式的使用方法、...
表格存储是否支持存储JSON数据？
当前表格存储未直接支持存储JSON格式的数据。但是您可以通过字符串方式存储JSON数据，然后通过多元索引中的数组和嵌套类型实现JSON数据的灵活查询。更多信息，请参见 数组和嵌套类型。
绑定交互式分析实例
Hologres实例名称 下拉框可选 无 数据库名 需要绑定的DB名 当前建议绑定开发环境的DB 服务器 Hologres实例的网络地址 实例选择后自动生成 端口 Hologres实例的网络地址 实例选择后自动生成 连通性测试 测试是否连通 无 进入HoloStudio开发 ...
半结构化分析
其中，JSON数据类型直接存储输入文本，会保存JSON数据中语义无关的空格，并且会保持JSON对象键的顺序，以及JSON数据中重复的键和键对应的数据。对于重复键在查询的时候会将最后一个遇到键的值当作有效值。JSONB数据类型则是以二进制格式来...
更新映射表属性列
执行ALTER TABLE语句后，SQL引擎会异步进行刷新，最多30秒完成刷新。在此期间执行返回所有列等操作时可能不会返回新添加的列。只有通过CREATE TABLE语句创建的映射表才支持使用ALTER TABLE语句更新属性列。通过DESCRIBE操作自动绑定的映射...
Flink_SQL任务开发方式
Dataphin的Flink_SQL任务支持多种开发方式，包括原生DDL+DML开发、基于Catalog开发、使用Dataphin元表进行开发、使用Dataphin数据源表进行开发、以及使用计算源物理表进行开发，且不同开发方式所创建的表支持任意混用，包括镜像表。...
列式JSONB
为了提升JSONB数据的查询效率，Hologres从 V1.3版本开始支持对于JSONB类型开启列式存储优化，能够降低JSONB数据的存储大小并加速查询。本文将会为您介绍Hologres中列式JSONB的使用。列式JSONB原理介绍 如下图所示开启JSONB列式存储优化后，...
JSON和JSONB类型
select*from json_populate_recordset(null:myrowtype,'[{"a":1,"b":2},{"a":3,"b":4}]')a|b-+-1|2 3|4 jsonb_populate_recordset(base anyelement,from_json jsonb)json_array_elements(json)setof json 把一个JSON数组扩展成一个JSON值的...
结果回调
支持的异步调用目标服务 当您为函数配置了异步调用目标，并且异步调用后的结果符合条件时，函数计算 会将请求上下文和数据推送至对应服务。您可以针对不同函数、别名和版本配置不同的目标服务。目前支持的异步调用目标服务如下：消息服务 ...
必读：简单模式和标准模式的区别
绑定后不同工作空间模式下，DataWorks模块对应操作的数据源如下表所示：DataWorks模块 标准模式 简单模式 数据开发 操作开发环境数据源（实例，项目、数据库）操作生产环境数据源（实例，项目、数据库）运维中心 开发环境运维中心：操作...
管理Kafka JSON Catalog
本文将从以下方面为您介绍如何管理Kafka JSON Catalog：创建Kafka JSON Catalog 查看Kafka JSON Catalog 使用Kafka JSON Catalog 删除Kafka JSON Catalog 使用限制 Kafka JSON Catalog仅支持消息格式为JSON的Topic，暂不支持其他格式。...
Routine Load
例行导入（Routine Load）功能，支持用户提交一个常驻的导入任务，通过不断的从指定的数据源读取数据，将数据导入到Doris中。本文主要介绍Routine Load功能的实现原理、使用方式以及最佳实践。使用限制 当前仅支持从Kafka进行例行导入。...
自动扩缩容
系统可以通过监控队列中积压的数据数量来实现推理服务的自动扩缩容，从而有效地控制推理服务实例的数量。本文为您介绍如何为推理服务配置自动扩缩容。实现原理 在异步推理场景中，系统可以根据队列的状态动态地对推理服务的实例数量进行...
RenameTable-更新元数据表的名称
仅用于更新数据湖元数据表的名称。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 ...
技术原理
扩展性原理 扩展性本质在于分而治之，PolarDB-X 1.0 计算资源通过水平拆分（分库分表）和垂直拆分，将数据分散到多个存储资源MySQL以实现获取数据读写并发和存储容量分散的效果。水平拆分（分库分表）PolarDB-X 1.0 具备数据水平拆分的能力...
UpdateTable-更新元数据表信息
根据名称更新数据湖元数据表信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 ...
App侧发送验证请求实践教程
无痕验证需要采集页面上的用户行为信息，并且需要一个动作去触发验证，而这种情况下开发者通常会使用JavaScript自动触发验证，可能导致无痕验证不通过，同时也计算了一次验证费用。使用WKWebView在iOS App中接入验证码2.0（Swift）iOS应用...
结果回调
支持的异步调用目标服务 当您为函数配置了异步调用目标，并且异步调用后的结果符合条件时，函数计算 会将请求上下文和数据推送至对应服务。您可以针对不同函数、别名和版本配置不同的目标服务。目前支持的异步调用目标服务如下：消息服务...
区域热力层
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
DsgQuerySensResult
该API功能对应数据保护伞控制台界面的查询功能，通过与租户ID关联，获取指定租户的敏感数据识别结果。支持根据数据源类型、项目空间等维度进行筛选。支持对某个字段进行升降序排序。支持分页查询。调试 您可以在OpenAPI Explorer中直接运行...
SQL查询介绍
SQL查询为表格存储的多数据引擎提供统一的访问接口，兼容MySQL的查询语法，适用于在海量数据中进行在线数据访问类型的场景。您可以通过SQL查询功能对表格存储中的数据进行复杂的查询和高效的分析。背景信息 为了满足用户业务平滑迁移到表格...
基于模型生成ETL代码
维度表、明细表、汇总表等模型表发布后，DataWorks智能数据建模的模型开发功能支持快速生成代码框架，帮助您提高后续数据开发效率。本文为您介绍如何通过模型开发功能生成代码框架。前提条件 模型表已发布，操作详情请参见 发布模型至引擎...
路况层
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据结果 展示数据请求的响应结果。当数据源发生改变时，可单击右侧的 图标，实时查看...
路况层
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时，可单击右侧的 图标，实时查看数据响应结果。说明 还可将...
设置空间碎片自动回收功能的配置参数
调用UpdateAutoResourceOptimizeRulesAsync接口，采用异步方式，批量设置指定数据库实例空间碎片自动回收功能的配置参数。接口说明 说明 异步调用后不会立即返回完整结果，首先需要调用该接口获取 ResultId，然后使用返回数据的 ResultId，...
数据开发与运行
本文为您介绍数据开发的相关问题。资源 如何在pyodps调用第三方包？如何在节点内使用资源？如何下载上传到DataWorks的资源？超过30M的资源如何上传？通过odpscmd上传的资源如何在DataWorks上使用？在DataWorks如何上传自己本地编写的jar并...
GenerateDISyncTaskConfigForCreating
调用GenerateDISyncTaskConfigForCreating接口，异步生成创建数据集成同步任务的异步线程ID。后续您需要通过该ID，调用 QueryDISyncTaskConfigProcessResult 接口获取异步生成创建数据集成同步任务需要的参数，通过该参数创建数据集成同步...
LogHub（SLS）实时ETL同步至Hologres
在 数据输出预览 窗口，您可以根据需要修改输入数据，或单击 手工构造数据 按钮自定义输入数据，再单击 预览 按钮，查看当前数据处理节点对数据的处理结果，当数据处理节点对输入数据处理异常，或产生脏数据时，也会反馈出异常信息，能够...
ClickHouse SQL
ClickHouse SQL可实现分布式SQL查询及处理结构化数据，提高作业的执行效率。DataWorks的ClickHouse SQL节点可进行ClickHouse SQL任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用ClickHouse SQL节点进行任务开发的主要...
AssociateRouteTable-将路由表和交换机绑定
接口说明 AssociateRouteTable 接口属于异步接口，即系统返回一个请求 ID，但该路由表并未绑定完成，系统后台的绑定任务仍在进行。您可以调用 DescribeVSwitchAttributes 查询路由表的绑定状态：当交换机处于 Pending 状态时，表示路由表...
V5.1.x系列实例版本说明
优化JSON_SET、JSON_OBJECT、JSON_EXTRACT、JSON_UNQUOTE、JSON_REMOVE、JSON_MERGE、JSON_KEYS、JSON_REPLACE、JSON_INSERT函数在复杂SQL中的支持。优化对Navicat的兼容性。修复问题 修复SHOW FULL STATS的元信息类型错误的问题。修复单库...
获取异步预测结果
调用GetAsyncPredict获取异步预测结果。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是 ...
- 产品推荐
- 这些文档可能帮助您