地址变换表可以做什么-地址变换表可以做什么文档介绍内容-阿里云

配置MaxCompute输出组件

Dataphin会自动为您匹配创建目标表的代码，包括目标表名称（默认为来源表名）、字段类型（基于Dataphin字段做了初步的转换）等信息。您可以根据业务情况修改创建目标表的SQL脚本后，单击新建。目标表新建成功后，Dataphin自动将新建的目标...

配置MaxCompute输出组件

Dataphin会自动为您匹配创建目标表的代码，包括目标表名称（默认为来源表名）、字段类型（基于Dataphin字段做了初步的转换）等信息。您可以根据业务情况修改创建目标表的SQL脚本后，单击新建。目标表新建成功后，Dataphin自动将新建的目标...

专有网络类型ECS固定公网IP转为弹性公网IP

IP地址保持不变，原有的公网IP地址直接转换为弹性公网IP地址。公网带宽计费方式转换后，公网带宽计费方式保持不变。关于费用转换后的EIP将单独计费，单独产生账单。关于EIP计费，请参见 EIP计费概述。重要如果固定公网IP转换为EIP后，...

配置TDH Inceptor输出组件

Dataphin会自动为您匹配创建目标表的代码，包括目标表名称（默认为来源表名）、字段类型（基于Dataphin字段做了初步的转换）等信息。您可以根据业务情况修改创建目标表的SQL脚本后，单击新建。目标表新建成功后，Dataphin自动将新建的目标...

配置Hive输出组件

Dataphin会自动为您匹配创建目标表的代码，包括目标表名称（默认为来源表名）、字段类型（基于Dataphin字段做了初步的转换）等信息。您可以根据业务情况完成创建目标表的SQL脚本的修改，并单击新建。目标表新建成功后，Dataphin自动将新建...

配置流程

例如A表中包含字段1、字段2和字段3，B表中包含字段2、字段3和字段4，对两张表通过做JOIN操作后，需要输出字段2和字段3，则需要在目标库侧创建做JOIN操作后的C表，C表中包含字段2和字段3。由于ETL功能暂不支持全量数据同步，所以您只能对...

公共规范

将出现大量空值和零值的统计汇总表，依据其空值和零值分布状况可以做适当的水平和垂直切分，以减少存储和下游的扫描数据量。空值处理原则汇总类指标的空值：空值处理，填充为零，当前MaxCompute基于列存储的压缩技术不会由于填充大量空值...

转换IP地址

您在使用Logtail采集日志时，可以使用processor_geoip插件将日志中的IP地址转换为地理位置（国家、省份、城市、经纬度）。本文介绍processor_geoip插件的参数说明和配置示例。重要表单配置方式：采集文本日志和容器标准输出时可用。JSON...

空间回收

对系统影响：不会锁表，表可以正常读写。会导致CPU、I/O使用率增加，可能影响查询的性能。什么情况下做VACUUM FULL？锁表，通过重建表，回收所有空洞空间。对做了大量更新后的表，建议尽快执行VACUUM FULL。频率：至少每周执行一次。如果...

组件参考：所有组件汇总

KV2Table 该组件可以将KV（Key:Value）格式的表转换为普通表格式。Table2KV 该组件分为可分化方式和PAI命令方式，可以转化普通表为KV（Key:Value）格式的表。特征工程特征重要性过滤特征重要性过滤组件为线性特征重要性、GBDT特征重要性...

数据集成侧同步任务能力说明

您还可以使用内置的变量组合生成目标表名，同时，对转换后的目标表名支持添加前缀和后缀。为目标字段赋值全增量同步任务默认同名映射，将源端字段写入目标端同名字段中。同时，支持您为目标表新增字段并为字段赋值常量或变量。单击目标...

SharedMergeTree表引擎

CREATE TABLE my_table(key UInt64,value String)ORDER BY key 如果您使用Replacing、Collapsing、Aggregating、Summing、VersionedCollapsing、Graphite MergeTree表，它们将自动转换为相应的基于SharedMergeTree的表引擎。CREATE TABLE ...

MySQL分库分表同步至MaxCompute

手工添加逻辑表在自动生成逻辑表与期望的匹配结果不符时，可以编辑逻辑表匹配规则，也可以通过手工添加逻辑表添加没有扫描到的逻辑表。单击手工添加逻辑表，有几个逻辑表需要同步，就在此处添加几个。同一逻辑表的数据会同步到目标表...

概述

分区表是将一个大的逻辑表，按照分区规则分割成多个小的物理表，大的逻辑表为分区表，小的物理表为分区，每一个分区在存储引擎上独立组织管理数据和索引。分区规则主要包括 RANGE、LIST、HASH 三种，您需要指定分区键，根据分区键字段的值...

什么是VPC NAT网关

VPC NAT网关能够为VPC内的ECS实例提供私网地址转换服务，使多个ECS实例可以通过中转私网地址（即NAT IP地址）访问您的本地数据中心IDC或其他VPC。ECS实例也可以通过使用VPC NAT网关的中转私网地址对外提供私网访问服务。产品功能 VPC NAT...

整库离线同步至Elasticsearch

分区设置：您可以选择同步的数据源表的某一列做为分区列，该参数需要和 shard数量、replica数量配合使用。默认不开启分区功能。不开启分区：不填写该参数，默认使用文档的_id作为routing起到将文档均匀分布到多个分片上防止数据倾斜的作用...

网络FAQ

更换公网IP地址问题创建实例后，我可以更换公网IP（IPv4）地址吗？为什么在ECS管理控制台上，我看不到更换公网IP选项？除了更换公网IP地址，我还可以更换私网IP地址吗？如果在创建实例时未分配公网IP（IPv4）地址，实例创建成功后怎么获得...

分区表常见问题

大版本升级过程中，是否可以把普通单表转换为分区表？可以。具体操作步骤如下：需要先在源库中添加一个无主键的辅助表，如 create table t1(a int)，这样可以确保大版本升级过程中的预检查失败任务中断；开始进行大版本升级任务，直到预...

数据源常见问题

探索空间的数据表可以关联其他数据源吗？添加自建MySQL数据源时，出现“数据源连通性异常，请检查参数是否正确”。是否支持连接采用kerberos认证的Hive自建数据源？是否支持连接Hologres数据源？支持哪些数据源？请参见概述。是否支持连接...

网络架构介绍

也可以通过NSX NAT和阿里云公网NAT网关的二次DNAT目的地址转换实现用户业务的公网发布。ACVS租户隔离网络不同用户之间相互隔离的网络环境，用于连接VMware NSX虚拟网络和云企业网。访问VPC专有网络路径（同一地域）业务网络和VPC专有网络...

数仓性能优化

针对数仓的性能优化，主要是针对表和数据分布的优化。表设计的最佳实践请参见表设计最佳实践。Hash Clustering Hash Clustering表的优势在于可以实现Bucket Pruning优化、Aggregation优化以及存储优化。在创建表时，使用 clustered by ...

数仓性能优化

针对数仓的性能优化，主要是针对表和数据分布的优化。表设计的最佳实践请参见表设计最佳实践。Hash Clustering Hash Clustering表的优势在于可以实现Bucket Pruning优化、Aggregation优化以及存储优化。在创建表时，使用 clustered by ...

更换公网IP地址

如果您的ECS实例分配了公网IP地址，您可以通过更换公网IP地址，满足因网络安全优化、IP屏蔽或封禁、资源迁移等业务场景下需要更换公网IP地址的需求。本文介绍如何更换公网IP地址。背景信息公网IP包括固定公网IP和弹性公网IP（EIP），无论...

优化内部表的性能

数据量大的表tmp1在数据量小的表tmp上方，使用数据量小的表tmp做Hash表，如下图所示。并且tmp1表展示的行数为1000万行，表明统计信息已经更新。当发现explain返回结果中 rows=1000，说明缺少统计信息。一般性能不好时，其原因通常是优化器...

TRUNCATE

简介 TRUNCATE 可以从一组表中快速地移除所有行。它具有和在每个表上执行无条件 DELETE 相同的效果，不过它会更快，因为它没有实际扫描表。此外，它会立刻回收磁盘空间，而不是要求一个后续的 VACUUM 操作。在大表上它最有用。语法 ...

常见问题

联动两个表可以联动么，例如单击某个饼状图的一个条件，可以联动显示另一个图表？有的同一数据集的两个表可以用高级联动功能，而有的同一个数据集的两个表却不能使用高级联动功能？图表联动设置时提示“请设置维度关联关系，并关联非同源...