概述
本文主要介绍需要实时获取HBase表的数据变更场景。数据写入HBase之后，很多业务场景下需要实时获取或者订阅HBase表的数据变更。当数据被更新时，触发其他应用的业务处理，如物流订单生成后触发仓库作业。对接实时计算，用于业务数据驱动的...
尺寸映射器使用说明
方法二：单击打开 散点半径 配置项左侧的 图标，在鼠标悬浮态提示 关闭视觉映射 时，使用尺寸映射器，由散点的数据驱动映射，可对散点尺寸使用范围滑动条进行配置。尺寸映射器功能说明 功能 说明 面板折叠时配置尺寸范围映射 在尺寸映射器...
应用场景
数据驱动的业务 云数据库Cassandra可以支持数百个节点的集群规模，适合大数据量的存储。在一些需要应用大量数据对用户行为进行分析的场景中，可以通过整合多种数据来源，存储用户行为数据，构建用户画像，实时存储在Cassandra中，提供大...
什么是云数据库Cassandra
Cassandra已有10年多的沉淀，基于Amazon DynamoDB的分布式设计和Google Bigtable的数据模型。具备诸多优异特性：采用分布式架构、无中心、支持多活、弹性可扩展、高可用、容错、一致性可调、提供类SQL查询语言CQL等。Cassandra为互联网业务...
形状映射器使用说明
方法二：单击打开 矢量形状 配置项左侧的 图标，在鼠标悬浮态提示 关闭视觉映射 时，使用形状映射器，由散点的数据驱动映射，可对散点图形进行多选配置。形状映射器功能说明 功能 说明 面板折叠时切换配置形状映射 在形状映射器设置为折叠...
形状映射器使用说明
方法二：单击打开 矢量形状 配置项左侧的 图标，在鼠标悬浮态提示 关闭视觉映射 时，使用形状映射器，由散点的数据驱动映射，可对散点图形进行多选配置。功能说明 功能 说明 面板折叠切换映射形状 在形状映射器折叠状态时，单击形状下拉...
颜色映射器使用说明
方法二：单击打开 散点颜色 配置项左侧的 图标，在鼠标悬浮态提示 关闭视觉映射 时，使用颜色映射器，由散点的数据驱动映射，可对散点颜色进行多选配置。功能说明 功能 说明 面板折叠切换映射颜色 在颜色映射器为折叠状态时，单击颜色显示...
尺寸映射器使用说明
方法二：单击打开 散点半径 配置项左侧的 图标，在鼠标悬浮态提示 关闭视觉映射 时，使用尺寸映射器，由散点的数据驱动映射，可对散点尺寸使用范围滑动条进行配置。功能说明 功能 说明 面板折叠配置尺寸范围映射 在尺寸映射器折叠状态时，...
常见问题
迁移与同步 为什么OSS外表导入ORC、PARQUET等格式的数据，出现内存报错或OOM挂掉？如何处理导入数据报错：too many parts？为什么DataX导入速度慢？为什么Hive导入后其数据行数跟ClickHouse对不上？为什么Kafka导入后其数据行数跟...
颜色映射器使用说明
方法二：单击打开 散点颜色 配置项左侧的 图标，在鼠标悬浮态提示 关闭视觉映射 时，使用颜色映射器，由散点的数据驱动映射，可对散点颜色进行多选配置。颜色映射器功能说明 功能 说明 面板折叠时切换配置颜色映射 在颜色映射器折叠状态时...
迭代器功能说明
在区块编辑器面板中可先添加一个或多个组件组成的单元模板（即成组），再通过迭代器的数据驱动，生成一个列表，列表项的数量与迭代器数据中数组的长度一致。本文介绍迭代器的功能及操作说明。迭代器即列表生成器，列表中每一项称为一个迭代...
迭代器功能说明
在区块编辑器面板中可先添加一个或多个组件组成的单元模板（即成组），再通过迭代器的数据驱动，生成一个列表，列表项的数量与迭代器数据中数组的长度一致。本文介绍迭代器的功能及操作说明。迭代器即列表生成器，列表中每一项称为一个迭代...
配置Hologres输入组件
输入过滤 配置Hologres输入组件读取数据时需要过滤掉的数据。例如，ID>112。输出字段 输出字段区域展示了已选中表的所有字段。如果不需要将某些字段输出至下游组件，则您可以删除对应的字段：如果需要删除少量的字段，则可以单击 操作 列下...
配置Hologres输入组件
输入过滤 配置Hologres输入组件读取数据时需要过滤掉的数据。例如，ID>112。输出字段 输出字段区域展示了已选中表的所有字段。如果不需要将某些字段输出至下游组件，则您可以删除对应的字段：如果需要删除少量的字段，则可以单击 操作 列下...
PolarDB for AI NL2SQL正式商业化，欢迎免费体验！
基于MLOps和内置的模型，PolarDB for AI 为数据驱动的智能应用提供了高效、可靠、方便的数据智能能力，打破了数据库和业务应用之间的系统墙，提供了基于数据库数据智能的一站式服务。为了让不熟悉SQL语言的用户能方便地从数据库中取数分析...
逻辑数仓
数据管理DMS提供的逻辑数仓具有强大的数据源管理能力，可以实现将企业的异构数据源进行逻辑聚合，形成物理分散、逻辑统一的虚拟数仓，然后快速地提供数据分析和访问服务，满足业务人员、BI分析师、运营人员等各种角色的需求。背景信息 企业...
SQL优化技术
实现架构 DAS自动SQL优化是一个基于数据驱动的闭环流程，上图简单描述了整个流程：异常事件：异常事件是触发自动SQL优化的引信，异常事件由DAS事件中心统一管理，异常事件产生自实时异常检测、离线分析、workload检测、告警系统等等。...
DBeaver连接MaxCompute
修改和保存了数据源配置定义后，当前的数据源已经为支持MaxCompute JDBC驱动的数据源。在 通用JDBC连接设置 对话框的 常规 页签填写 路径 信息。参数 说明 路径 连接MaxCompute项目的URL。格式为<MaxCompute_endpoint>?project=...
数据库导出
当您需要进行数据库备份、导出数据库表进行数据分析等操作，您可使用 数据管理DMS 的数据导出功能，该功能可通过提交工单的方式导出数据库。前提条件 数据库类型如下：MySQL系列：自建MySQL、RDS MySQL、PolarDB MySQL版、AnalyticDB ...
通过数据同步功能同步Kafka至湖仓版（推荐）
注意事项 Kafka中创建的Topic数据超过一定的时间会被自动清理，如果Topic数据过期，同时数据同步任务失败，重新启动同步任务时读取不到被清理掉的数据，会有丢失数据的风险。因此请适当调大Topic数据的生命周期，并在数据同步任务失败时...
数据水印
影响行数（必选）预估本次导出会影响的数据行数，您可以在SQLConsole中使用 count 命令进行统计。说明 在预检查阶段，系统将会显示实际影响行数，您可以再次校验是否符合预期，及时发现异常，避免发生数据安全事故。跳过校验（可选）是否跳...
ST_FDWDrivers
获得所有Ganos FDW支持的数据源驱动列表。语法 setof record ST_FDWDrivers(out integer id,out text driver_name,out text open_options);参数 参数名称 描述 id 驱动序号。driver_name 数据驱动名称。open_options 数据驱动打开参数。...
ST_FDWDrivers
获得所有Ganos FDW支持的数据源驱动列表。语法 setof record ST_FDWDrivers(out integer id,out text driver_name,out text open_options);参数 参数名称 描述 id 驱动序号。driver_name 数据驱动名称。open_options 数据驱动打开参数。...
ST_FDWDrivers
获得所有Ganos FDW支持的数据源驱动列表。语法 setof record ST_FDWDrivers(out integer id,out text driver_name,out text open_options);参数 参数名称 描述 id 驱动序号。driver_name 数据驱动名称。open_options 数据驱动打开参数。...
新建注册上挂指标
您可以将物理表中的指标字段上挂至汇总逻辑表进行数据分析。...参数 描述 数据类型 选择上挂指标的数据类型。度量单位 选择上挂指标的度量单位。业务负责人 选择上挂指标的业务负责人。描述 填写对上挂指标的简单描述。配置完成后单击 确定。
新建注册上挂指标
您可以将物理表中的指标字段上挂至汇总逻辑表进行数据分析。...参数 描述 数据类型 选择上挂指标的数据类型。度量单位 选择上挂指标的度量单位。业务负责人 选择上挂指标的业务负责人。描述 填写对上挂指标的简单描述。配置完成后单击 确定。
新建离线自定义源类型
驱动上传 选择上传的数据库驱动。说明 仅支持.jar类型的文件，文件不超过 200MB。描述信息 描述 对自定义的数据源的简单描述。不超过128个字。单击 创建。新建其他类型数据源 在 新建离线自定义源类型 页面，配置参数。区域 参数 描述 基本...
新建离线自定义源类型
驱动上传 选择上传的数据库驱动。说明 仅支持.jar类型的文件，文件不超过 200MB。描述信息 描述 对自定义的数据源的简单描述。不超过128个字。单击 创建。新建其他类型数据源 在 新建离线自定义源类型 页面，配置参数。区域 参数 描述 基本...
ST_ForeignTables
driver 使用的数据源驱动程序，可以通过 ST_FDWDrivers 函数获得。如果传入空字符串，则表示使用默认的驱动尝试访问。id 表名序号。table_name 表名称。示例 使用默认的驱动 SELECT table_name FROM(select(ST_ForeignTables('OSS:/<ak_id>...
ST_ForeignTables
driver 使用的数据源驱动程序，可以通过 ST_FDWDrivers 函数获得。如果传入空字符串，则表示使用默认的驱动尝试访问。id 表名序号。table_name 表名称。示例 使用默认的驱动 SELECT table_name FROM(select(ST_ForeignTables('OSS:/<ak_id>...
什么是数据库自治服务DAS
数据库的安全风险大 随着数据价值的提升，企业的数据面临着越来越多的内部或者外部的攻击，数据泄漏、数据丢失等问题层出不穷。未授权或者不可预期或者错误的数据库访问和使用。数据泄漏。数据损坏。黑客攻击。软硬件bugs，导致数据异常。...
ST_ForeignTables
driver 使用的数据源驱动程序，可以通过 ST_FDWDrivers 函数获得。如果传入空字符串，则表示使用默认的驱动尝试访问。id 表名序号。table_name 表名称。示例 使用默认的驱动 SELECT table_name FROM(select(ST_ForeignTables('OSS:/<ak_id>...
用户价值
数据资源平台为用户提供了一站式数据资产定义、生产、管理与服务平台，提供企业级数据资产构建能力和一致性使用体验，助力客户快速构建数据智能平台，实现数据资源统一管理，挖掘潜在规律，优化业务决策，让大数据真正的驱动客户业务。...
数据倾斜诊断
您也可以添加过滤条件，查看指定Schema或指定表的数据倾斜情况，查询语句如下：查看指定Schema下所有表的数据倾斜情况：SELECT*FROM adbpg_toolkit.diag_skew_tables WHERE schema_name='名称>';查看指定表的数据倾斜情况：SELECT*FROM ...
配置管理
提交数据变更时的原因分类。示例以及详情请参见 附录：数据变更原因分类。数据变更的执行方式 取值：COMMITOR：表示审批通过后由提交者执行。AUTO：表示审批通过后自动执行。LAST_AUDITOR：表示由最后一个审批人执行。审批流的审批节点是否...
ODBC
PolarDB PostgreSQL版（兼容Oracle）提供了Unix、Linux系统版本和Windows系统版本的ODBC驱动，本文将介绍在不同系统中如何使用ODBC驱动。前提条件 已经在 PolarDB 集群创建用户，如何创建用户请参见 创建数据库账号。已经将需要访问 ...
如何处理Tair集群数据倾斜
下图介绍两个典型的数据倾斜场景，如下图所示，虽然Key均匀地分布在集群中，每个数据分片节点2个Key，但仍产生了数据倾斜：Replica 1 节点中 key1 的QPS明显高于其他Key，属于典型的 数据访问倾斜，会导致该Key所在的数据分片节点CPU使用率...
如何处理Redis集群数据倾斜
下图介绍两个典型的数据倾斜场景，如下图所示，虽然Key均匀地分布在集群中，每个数据分片节点2个Key，但仍产生了数据倾斜：Replica 1 节点中 key1 的QPS明显高于其他Key，属于典型的 数据访问倾斜，会导致该Key所在的数据分片节点CPU使用率...
自定义RDBMS数据库及同步数据
步骤三：创建数据源实例 基于自定义的数据源组件类型（test_rdbms_mysql），创建 test_rdbms_mysql 类型的数据源实例。完成创建数据源实例后，即可将RDS MySQL实例的业务数据引入至Dataphin实例。步骤四：创建离线管道任务 基于自定义的...
自定义RDBMS数据库及同步数据
步骤三：创建数据源实例 基于自定义的数据源组件类型（test_rdbms_mysql），创建 test_rdbms_mysql 类型的数据源实例。完成创建数据源实例后，即可将RDS MySQL实例的业务数据引入至Dataphin实例。步骤四：创建离线管道任务 基于自定义的...
- 产品推荐
- 这些文档可能帮助您