配置MySQL输入
MySQL输入基于Binlog实时订阅的方式，实时读取您配置的MySQL数据库表数据。本文为您介绍，如何配置MySQL输入，以及配置输入之前需要准备的网络环境及账号权限。前提条件 配置MySQL输入之前，请确保已完成以下规划与准备工作。已配置同步...
JSON_TUPLE
或['']这两种字符解析JSON，当JSON的Key本身包含.时，可以用['']来替代。返回值说明 返回STRING类型。说明 如果JSON为空或者为非法的JSON格式，返回NULL。如果键Key为空或者不合法（JSON中不存在）返回NULL。如果JSON合法，键Key也存在，则...
Flume消费
sourceAsField 否 当 deserializer 为 JSON 时，用于设置是否将日志Source作为一个字段，字段名称为_source_。默认为false。tagAsField 否 当 deserializer 为 JSON 时，用于设置是否将日志Tag作为字段，字段名称为_tag_：{tag名称}。默认...
同步方案选取指南
当您在使用关系型数据库（RDS）遇到查询慢的问题时，可将RDS中的数据同步至阿里云Elasticsearch进行查询分析。阿里云Elasticsearch是一个基于Lucene的实时分布式的搜索与分析引擎，可近乎于准实时地存储、查询和分析超大数据集。您可以通过...
0016-00000838
问题描述 SelectObject指定的JSON文件类型不合法。问题原因 您发起了SelectObject请求，但是用于指定JSON...如果您希望通过Range标签指定查询文件的范围，需要保证目标文件类型为CSV或者Type为LINES的JSON。相关文档 查询文件 RestoreObject
FineBI
配置外接MySQL数据库，导入数据失败 处理方法：检查版本号和编码方式。具体操作，请参见 配置外接数据库，目前FineBI支持MySQL 5.x版本。检查外接MySQL数据库是否使用utf8（– UTF-8 Unicode）编码为字符集排列规则，或新建一个utf8编码的...
公告：投递到日志服务SLS的事件中增加新字段
变更说明 操作审计将在投递到SLS的事件中增加以下字段：字段名称 字段类型 描述 示例 requestParameterJson String requestParameters的JSON格式。requestParameters为API请求的输入参数。{"AcsHost":"actiontrail....
配置同步任务
数据库类型 数据源 关系型数据库 MySQL、Oracle、Microsoft SQL Server、PostgreSQL、AnalyticDB for PostgreSQL NoSQL数据存储 MongoDB、ElasticSearch 配置同步任务 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。...
文本查询
选中该选项 树形下拉 当展示类型为 树形下拉 时，支持同数据集和非同数据集取值，展示形式支持 树形展示 和 平铺展示 两种。选择数据集company_sales_record并单击 开始配置。在 树形结构设计 对话框，配置各层级 查询值字段 和 显示名称...
数据集常见问题
在数据库中修改某字段类型后，如何处理数据集该字段类型没有更新的问题？如何处理重新加载被删除的数据源后，表结构同步成功但数据同步依然失败的问题？如何在数据集中添加已删除的维度或度量？MaxCompute数据源同步表结构是否有延迟？源...
结果轮询
该选项包含以下两个子字段：字段名 描述 expr 表示通过 jmespath 查询语句指定的JSON结果中的被轮询字段。to 表示被轮询字段的目标值。示例 示例场景 执行创建ECS实例的命令后，调用 DescribeInstances 接口查询一台或多台实例的详细信息。...
查询和分析JSON日志
本文以查询和分析JSON类型的网站日志为例，为您介绍查询和分析JSON日志的步骤，并提供SQL语句示例。前提条件 已采集JSON日志。具体操作，请参见 使用极简模式采集日志。步骤一：创建索引 登录 日志服务控制台。在Project列表区域，单击目标...
用户
类型 必选 说明 marker string 查询起始标识 limit string 返回数据最大条数,范围：[1-100]，默认：100 返回 字段 类型 必选 说明 result IListRes 是 结果 IListRes 字段 类型 必选 说明 items IUserItem[]是 用户列表 getUser 方法 重要 ...
基础数据类型
AnalyticDB MySQL支持的基础数据类型 类型 数据类型 说明 与MySQL数据类型差异 数值类型 boolean 布尔类型 值只能是 0 或 1，存储字节数1比特位。取值 0 的逻辑意义为假。取值 1 的逻辑意义为真。一致。tinyint 微整数类型 取值范围-128~...
创建数据库账号
开放了更多权限，可满足个性化和精细化的权限管理需求，例如可按用户分配不同表的查询权限等。AnalyticDB MySQL版 中的高权限账号相当于MySQL中的root账号。普通账号 数仓版（3.0）集群只能通过SQL语句进行创建，创建方式，详情请参见 ...
ALTER RESOURCE GROUP
AnalyticDB MySQL 数仓版（3.0）集群支持通过 ALTER RESOURCE GROUP 修改资源组的资源量、查询类型、用户绑定关系属性。前提条件 AnalyticDB MySQL 集群需同时满足如下条件：集群为 数仓版（3.0）。集群系列需为弹性模式集群版（新版）。...
使用kettle将本地数据导入AnalyticDB MySQL 2.0
本文以Excel为例，介绍如何通过kettle将本地Excel数据迁移到 云原生数据仓库AnalyticDB MySQL版 2.0集群。背景信息 Kettle是一款非常受欢迎的开源ETL工具软件，主要用于数据整合、转换和迁移。Kettle除了支持各种关系型数据库，HBase ...
用户
类型 必选 说明 marker string 查询起始标识 limit string 返回数据最大条数,范围：[1-100]，默认：100 返回 字段 类型 必选 说明 result IListRes 是 结果 IListRes 字段 类型 必选 说明 items IUserItem[]是 用户列表 getUser 方法 重要 ...
索引结构
支持创建为索引字段的类型 INT，INT_ARRAY，TEXT，SHORT_TEXT，LITERAL，LITERAL_ARRAY，TIMESTAMP，GEO_POINT 不支持创建为索引字段的类型 FLOAT，FLOAT_ARRAY，DOUBLE，DOUBLE_ARRAY 支持创建为属性字段的类型 INT，INT_ARRAY，LITERAL，...
绑定或解绑数据库账号
背景信息 AnalyticDB MySQL版 数仓版（3.0）弹性模式集群版（新版）支持不同数据库账号绑定到不同的资源组，通过资源组隔离实现计算任务的优先级调度，保障核心业务不受复杂计算和突发状况影响，同时将不同的查询分类，合理分配资源使集群...
字段操作
本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时，ALTER TABLE DDL 字段操作支持的转换范围。总览 ALTER TABLE tbl_name[alter_option[,alter_option].]alter_option:{ ADD[COLUMN]col_name column_definition[FIRST...
数值查询
当关联字段为数值类型时，展示类型 仅可选 数值输入框，聚合方式支持多种聚合函数、方差、标准差，条件形式 支持 单条件、或条件、且条件 三种。以下以 求和、且条件 为例进行设置。说明 单条件仅可设置一个筛选条件，如下图所示。锁定筛选...
用户管理
上传bizCode=HOUSEHOLD_FACE 字段名 类型 备注 data JSON 用户ID 用户ID 字段名 类型 备注 identityId String 用户ID faceId String 用户ID 2.2修改用户 Path路径/solution/community/paas/user/update 请求方式 post 接口版本 1.0.2 字段...
API概览
DescribeAdbMySqlTables 查询数据库下所有表信息 枚举AnalyticDB MySQL湖仓版（3.0）集群指定数据库下所有表信息。DescribeAdbMySqlSchemas 查询所有数据库列表 枚举指定AnalyticDB MySQL湖仓版（3.0）集群下所有数据库列表。GetViewDDL ...
索引结构
支持创建为索引字段的类型 INT，INT_ARRAY，TEXT，SHORT_TEXT，LITERAL，LITERAL_ARRAY，TIMESTAMP，GEO_POINT 不支持创建为索引字段的类型 FLOAT，FLOAT_ARRAY，DOUBLE，DOUBLE_ARRAY 支持创建为属性字段的类型 INT，INT_ARRAY，LITERAL，...
Schema约束
数据写入方式与Schema约束的选择 在Lindorm时序引擎中，数据写入时的Schema约束策略与数据的写入方式是密切相关的，具体如下表所示。写入方式 Schema约束策略 修改Schema约束策略的示例 JDBC Driver 仅支持强约束。不涉及。Java Native SDK...
数据编码与解码
您使用Logtail采集日志时，可以使用processor_base64_encoding、processor_base64_decoding或processor_md5插件对字段值进行编解码。本文介绍各个插件的参数说明和配置示例。重要 表单配置方式：采集文本日志和容器标准输出时可用。JSON...
通过数据同步功能同步SLS数据至数仓版
通过 AnalyticDB for MySQL 的数据同步功能，您可以将SLS中指定时间点之后产生的数据实时同步至 数仓版（3.0）集群，以满足日志数据实时分析的需求。前提条件 数仓版（3.0）集群与日志服务SLS的 Project和 Logstore位于同一地域。具体操作...
概述
SQL语句为例介绍两种查询方式的使用样例。通过多元索引方式访问数据时，在多元索引的col1中可以获取col1的值为'阿%'的一行数据pk1=1，在多元索引的col2中可以获取col2的值为'a'的两行数据pk1=1和pk1=2，然后将两次中间结果的数据进行union...
配置同步任务
数据库类型 数据源 关系型数据库 MySQL、Oracle、Microsoft SQL Server、PostgreSQL、AnalyticDB for PostgreSQL 开源大数据数仓存储 Hive、TDH Inceptor 说明 HBase作为数据源或者目标数据源，支持的版本为HBase V1.1.x、HBase V0.94.x。...
数组和嵌套类型
多元索引除了提供Long、Double、Boolean、Keyword、Text和GeoPoint等基本类型外，还提供了数组类型和嵌套类型两种特殊类型。如果想了解更多Array和Nested的对比，请参见 Array和Nested对比。数组类型 数组类型属于附加类型，可以附加在Long...
自定义RDBMS数据库及同步数据
操作流程 自定义并应用MySQL数据库组件的流程如下：步骤 描述 步骤一：配置网络和创建数据表 在您开始自定义并应用RDBMS数据库组件前，需要配置RDS MySQL实例和Dataphin间的网络，及创建同步数据的源表和目标表。步骤二：创建自定义数据源 ...
优化建议
查询尽量在单机完成，最为简单的方式就是在分区字段上指定等值条件，使操作只发送到一个后台数据库节点。若不指定，则操作需要发送到每个后台节点，可能导致性能大幅下降；尽量避免分布式事务和分布式查询；同时使用其他适用于MySQL的优化...
自定义RDBMS数据库及同步数据
操作流程 自定义并应用MySQL数据库组件的流程如下：步骤 描述 步骤一：配置网络和创建数据表 在您开始自定义并应用RDBMS数据库组件前，需要配置RDS MySQL实例和Dataphin间的网络，及创建同步数据的源表和目标表。步骤二：创建自定义数据源 ...
云盘
const result=await client.getDrive(params,options)举例 const drive_id='123' const result=await client.getDrive({drive_id})assert(result.drive_id=drive_id)/true 参数说明 字段 类型 必选 说明 params object 是 要查询的云盘的 ...
过滤日志
您在使用Logtail采集日志时，您可以使用processor_filter_regex插件或processor_filter_key_regex插件过滤日志。本文介绍各个插件的参数说明和配置示例。重要 表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志...
文件操作
const result=await client.listFiles(params,options)举例 const {items=[]}=await client.listFiles({ drive_id:'1001',parent_file_id:'root' })参数说明 字段 类型 必选 说明 params IListFileReq 是 查询参数 options ...
数据加工
合并字段 说明 仅字段类型为 文本 时，才支持此操作。筛选 筛选方式支持枚举筛选、条件筛选、和字段对比。更多的筛选示例请参见仪表板的 复合查询示例展示。修改字段类型 在 字段列表 视图下，修改字段类型。说明 转换为日期字段时，支持...
如何使用MySQL连接模块
简介 魔笔平台提供MySQL连接模块，可提供快速访问MySQL数据库的能力，本文介绍如何使用MySQL连接模块。适用场景 在搭建应用时，如需访问外部MySQL数据库的能力，以及基本的增删改查和表的DDL操作能力，可以直接引用魔笔平台提供的 MySQL...
数据表管理
根据实际业务需求，填写数据表名称、更新时间列信息，选择数据源和物理表等：数据源：即在知识中心>数据问答>数据源管理中创建的数据源，当前数据源类型仅支持为MySQL数据库。物理表：即数据库下的具体表格。更新时间列：即数据库的物理表...
- 产品推荐
- 这些文档可能帮助您