迁移方案概述
VPC具有以下优势：安全的网络环境 VPC基于隧道技术，实现数据链路层的隔离，为每个租户提供一个独立、隔离的安全网络。不同VPC之间网络完全隔离。可控的网络配置 您可以完全掌控自己的虚拟网络，例如选择自己的IP地址范围、配置路由表和...
产品优势
由于使用隧道封装技术对云服务器的IP报文进行封装，所以云服务器的数据链路层（二层MAC地址）信息不会进入物理网络，实现了不同云服务器间二层网络隔离，因此也实现了不同VPC间二层网络隔离。VPC内的云服务器使用安全组防火墙进行三层网络...
故障排查
排查第2层（数据链路）问题。排查第1层（物理）问题。排查路由问题 本地接入设备能ping通云上边界路由器网关VBR的IP，并且已建立了BGP对等会话，如果您的本地服务器依然无法ping通云上VPC的ECS实例，请通过以下步骤排查该问题：若您使用...
设置SSL加密
选择 数据安全 页签，单击 数据链路SSL。开启SSL加密。打开 当前状态 开关。在弹出的 开启SSL加密 对话框中，单击 确定。单击页面左下角 下载CA证书。可选：关闭SSL加密。关闭 当前状态 开关。在弹出的 关闭SSL加密 对话框中，单击 确定。...
安全性
网络和数据链路 AnalyticDB PostgreSQL版 做为云原生分布式系统拥有非常高的安全性，首先每个新建实例使用专有网络，也称为VPC（Virtual Private Cloud），VPC是一种隔离的网络环境，安全性和性能均高于传统的经典网络。根据使用场景可选择...
数据开发
数据集成是稳定高效、弹性伸缩的数据同步平台，致力于提供复杂网络环境下、丰富的异构数据源之间高速稳定的数据移动及同步能力。更多关于数据集成支持的数据源情况，请参见 数据集成。步骤一：购买并配置独享数据集成资源组 本教程需将存储...
层次调用规范
层次调用规范 ADS应用层优先调用数据仓库公共层数据。如果已经存在CDM层数据，不允许ADS应用层跨过CDM中间层从ODS层重复加工数据。CDM中间层应该积极了解应用层数据的建设需求，将公用的数据沉淀到公共层，为其他数据层次提供数据服务。...
层次调用规范
层次调用规范 ADS应用层优先调用数据仓库公共层数据。如果已经存在CDM层数据，不允许ADS应用层跨过CDM中间层从ODS层重复加工数据。CDM中间层应该积极了解应用层数据的建设需求，将公用的数据沉淀到公共层，为其他数据层次提供数据服务。...
开启智能存储分层
您可以在开启智能存储分层功能后，修改 Logstore属性 页面中的存储层数据保存时间参数，将存储的保存时间延长，实现不同存储层间数据的转换。重要 存储保存时间配置存在相应限制，具体信息，请参见 数据存储生命周期管理。开启智能存储分层...
点播CDN常见问题
这部分包头消耗的网络流量至少占通过日志统计流量的2.74%（按最大IP数据包1500字节，其中TCP/IP包头40字节，应用层数据1460字节），应用层数据越小占比越大，通常在3%左右。TCP重传由于互联网中网络情况较为复杂，在出现网络拥堵、设备故障...
数仓场景：即席查询
mysql-h127.0.0.1-P 9030-uroot 执行以下命令，查询ODS层数据。执行以下命令，使用数据库。use flink_cdc;执行以下命令，查看orders表信息。select*from orders;返回信息如下所示。order_id|order_revenue|order_region|customer_id|+-+-+-...
数仓场景：即席查询
执行以下命令，查询ODS层数据。执行以下命令，使用数据库。use flink_cdc;执行以下命令，查看orders表信息。select*from orders;返回信息如下所示。order_id|order_revenue|order_region|customer_id|+-+-+-+-+|1|10|beijing|1|2|10|...
常见问题
同时，Hyperledger Fabric的联盟链网络也保证了数据分布在多方手里，仅修改一方数据是无效的。链码管理 正常上传链码，为何报错？答：出现类似如下错误提示时，{“Action”:”CreateChaincode”,”RequestId”:”AD33-CEA3”,”Message”:...
使用XIHE BSP SQL进行作业开发
执行结果如下：+-+-+-+|id|name|age|+-+-+-+|4|Ban|25|1|Anna|18|3|Cindy|12|+-+-+-+步骤三：创建ADS层数据表 ADS层表数据是对DWD层数据做了更精细地过滤，可直接用于业务分析，对查询速率有一定的要求，因此创建ADS层数据表时需添加索引。...
数仓场景：增量数据实时统计
StarRocks从Kafka分别订阅各层数据，将各层数据持久化到StarRocks中，用于之后的查询分析。方案特点 该方案主要特点如下：增量计算的数据由Flink进行清洗加工转换和聚合汇总，各层应用数据通过Kafka分别持久化到StarRocks中。Flink加工的...
自动归档
第一次备份自动归档后，您的备份库归档层数据大小为：1024*2MB+2048*1MB（512KB按照1MB计算）=4GB 如果后续备份1024个2MB对象没发生改变，但是2048个512KB对象发生了变化，自动归档后归档层新增数据大小为：2048*1MB（512KB按照1MB计算）=2...
通过Lindorm-cli连接并使用宽表引擎
连接Lindorm宽表使用的网络类型 网络类型 说明 专有网络（推荐）专有网络VPC（Virtual Private Cloud）是您自己的云上私有网络，不同的专有网络之间二层逻辑隔离，具有较高的安全性。Lindorm-cli部署在 ECS实例 上时，通过专有网络连接至...
使用Spark SQL进行作业开发
步骤三：创建ADS层数据表 ADS层表数据是对DWD层数据做了更精细地过滤，可直接用于业务分析，对查询速率有一定的要求，因此创建ADS层数据表时需添加索引。本教程从DWD层数据表 adb_spark_dwd 中读取age列大于15的数据并写入ADS层数据表 adb_...
lwip
网络层 4.网卡层 本文将2，3，4统称为协议层 应用层支持：arp,dhcpd,dns,httpd,ifconfig,iperf,lsfd,mdns,netbiosns,ping,sendfile,snmp,sntp,telnetd,tftp 协议层支持：IP(Internet Protocol,IPv4 and IPv6)including packet forwarding ...
数仓场景：分钟级准实时分析
利用第三方任务调度器（例如Airflow）将各层数据表按血缘关系进行任务编排，再按具体的分钟间隔作为一个微批粒度进行任务调度，依次构建ODS之上的各层数据表。方案特点 该方案主要特点是：计算逻辑在StarRocks侧，适用于高频查询场景，各层...
MSHA应用双活架构接入Helloworld
MSHA控制台录入数据层配置，包括数据源、数据同步链路和数据保护规则。数据保护规则状态为生效，不允许读写分离，主数据库在北京单元，且北京单元的数据库Read及Write均显示 图标。北京单元的数据库显示如下图：数据保护规则如下图：测试...
数仓场景：增量数据实时统计
StarRocks从Kafka分别订阅各层数据，将各层数据持久化到StarRocks中，用于之后的查询分析。方案特点 该方案主要特点如下：增量计算的数据由Flink进行清洗加工转换和聚合汇总，各层应用数据通过Kafka分别持久化到StarRocks中。Flink加工的...
MongoDB 6.0新特性概览
弹性 MongoDB 6.0在原有弹性的基础上，推出了如下新特性以及优化项：将数据块（Chunk）规格的默认值从64 MB调整为128 MB，有效降低了数据迁移频率以及网络和路由层的开销。支持 configureCollectionBalancing 命令，此命令支持的功能如下：...
版本及存储引擎
弹性 推出了如下新特性以及优化项：将数据块（Chunk）规格的默认值从64 MB调整为128 MB，有效降低了数据迁移频率以及网络和路由层的开销。支持 configureCollectionBalancing 命令，此命令支持的功能如下：支持为不同的分片表设置不同的...
典型使用场景
在库中对ODS层数据进行加工，形成CDM（Common Data Model）和ADS（Application Data Service）层。典型操作包括INSERT INTO SELECT,CREATE TABLE AS等。按业务需求对库中数据进行查询分析，或供下游系统消费处理。典型的查询分析场景包括...
数据质量风险监控
DWS和ADS层数据量较小、逻辑复杂，偏重数据的准确性。说明 如需了解各分层的详细说明，请参见 数仓分层。以下为不同数据资产等级和数仓层次数据的数据质量监控建议，仅供参考。操作步骤 ODS层数据质量监控。ODS层表中的数据来源于OSS上的...
数据质量风险监控
DWS和ADS层数据量较小、逻辑复杂，偏重数据的准确性。说明 如需了解各分层的详细说明，请参见 数仓分层。以下为不同数据资产等级和数仓层次数据的数据质量监控建议，仅供参考。操作步骤 ODS层数据质量监控。ODS层表中的数据来源于OSS上的...
热力层
事件 事件 说明 当热力层数据接口请求完成时 数据接口请求返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据 页签的 数据响应结果 区域。动作 动作 说明 请求热力...
热力层
事件 事件 说明 当热力层数据接口请求完成时 数据接口请求返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据 页签的 数据响应结果 区域。动作 动作 说明 请求热力...
常见问题
问题分析 如果A端的Socket因为主动关闭或者因为异常退出被关闭，B端仍发送数据，发送的第一个数据包则引发Connect reset by peer异常（A端连接断开后，B端给通道中写数据）。A端退出，但退出时并未关闭该连接，B端如果仍然从连接中读数据则...
区域下钻热力层（v2.x版本）
区域下钻热力层默认显示全国范围内各省和直辖市区域热力层数据，如下图所示。说明 区域 area_id 值可以查阅 省市区adcode与经纬度映射表。如果您需要使用地市级区域热力层，可修改 area_id 值。以浙江省为例，通过 省市区adcode与经纬度...
备份集自动归档到备份服务器
连接方式 选择连接方式，当前支持：非加密连接 SSL安全连接：SSL（Secure Sockets Layer）能在传输层对网络连接进行加密，提升通信数据的安全性和完整性，但会增加网络连接响应时间。选择 SSL安全连接 前，请先在RDS实例中开启SSL，更多...
RDS术语
DMS Data Management，数据管理，是一种阿里云提供的图形化的数据管理工具，集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持MySQL、SQL Server、PostgreSQL、MongoDB、...
RDS术语
A AliPG 阿里云支持一系列兼容PostgreSQL的云数据库服务产品，这些云数据库服务采用统一的数据库内核（简称AliPG），AliPG兼容PostgreSQL开源数据库，于2015年正式商用，支持PostgreSQL主流大版本，已稳定运行多年，支撑了大量阿里巴巴集团...
高可用虚拟IP（HaVip）
您的应用无法像传统方式一样修改主机IP地址，且整个虚拟网络是基于3层的隧道技术，ARP被终结在发送端，主机无法声明IP地址。为此，阿里云推出HaVip功能，解决此问题。使用场景 场景一：面向公网的高可用服务 如下图所示，ECS1和ECS2实例...
作业开发入门概述
DWD：数据明细层，对ODS层数据进行清洗、过滤等处理。本教程以过滤为例。ADS：数据应用层，面向业务进行数据分析、生产报表等使用的数据。您可以选择Spark SQL和XIHE BSP SQL任意一种方式进行作业开发。选择不同方式进行作业开发时，需要...
RDS术语
DMS Data Management，数据管理，是一种阿里云提供的图形化的数据管理工具，集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持MySQL、SQL Server、PostgreSQL、MongoDB、...
RDS术语
数据库代理 RDS数据库代理是位于数据库服务端和应用服务端之间的网络代理服务，用于代理应用服务端访问数据库时的所有请求，具有高可用、高性能、可运维、简单易用等特点，同时提供自动读写分离、事务拆分、连接池等高级功能。更多信息，请...
RDS术语
数据库代理 RDS数据库代理是位于数据库服务端和应用服务端之间的网络代理服务，用于代理应用服务端访问数据库时的所有请求，具有高可用、高性能、可运维、简单易用等特点，同时提供自动读写分离、事务拆分、连接池等高级功能。更多信息，请...
01新建模型目录
DWD：全称Data Warehouse Detail，明细数据层，该层数据和源数据基本保持一致，保存着最细粒度的数据，一般存放所有的明细数据，是所有后期分析的数据基础。具有数据量大，查询计算较慢的特点。DWS：全称Data Warehouse Summary，汇总数据...
- 产品推荐
- 这些文档可能帮助您