JindoTable表或分区访问冷度收集
示例：查询最久未被访问的表或分区的20条记录。jindo table-leastUseStat-n 20 返回如下图所示三列结果。第一列为表的名字，格式：数据库名.表名。第二列为分区名字，格式：第一分区列=列值/第二分区列=列值/.，如果表为非分区表则为空。第...
日志字段详情
日志服务提供的日志包含OSS访问记录日志的全部信息，但是日志字段与OSS自带日志字段不同，如下表所示。更多信息，请参见 访问日志。OSS自带日志字段 日志服务-OSS日志字段 Remote IP client_ip Time time Request-URI request-uri ...
Cassandra
由于只有CU的计算资源和Cassandra网络可以联通，因此所有访问Cassandra表的SQL语句都需要指定 hint：/*+cluster=your-vc-name*/，这样SQL才会在CU中执行。查询数据示例如下：mysql>/*+cluster=vc-test*/select*from test_user where first_...
OceanBase
访问数据由于只有CU的计算资源和OceanBase网络可以联通，因此所有访问OceanBase表的SQL语句都需要指定 hint：/*+cluster=your-vc-name*/，这样SQL就会在CU中执行。例如：mysql>/*+cluster=vc-test*/insert into oceanbase_test.person ...
基于Go ORM框架的应用开发
重要 如果应用部署在ECS实例，建议您通过 专有网络 访问Lindorm实例，可获得更高的安全性和更低的网络延迟。如果应用部署在本地，在通过公网连接Lindorm实例前，需在控制台开通公网地址。开通方式：在控制台选择 数据库连接>宽表引擎，在 ...
云连接网授权
云连接网CCN（Cloud Connect Network）实例被连接到转发路由器实例后，云连接网实例关联的本地网络可以通过转发路由器实例访问PrivateZone服务，在本地网络访问PrivateZone服务前，您需要为云连接网实例授权。本文介绍在不同场景下如何为云...
运行失败
跨网络访问。Tunnel Endpoint设置错误导致的读取MaxCompute table count失败。详情参考 Tunnel命令常见问题。用户可以通过添加启动参数-tunnel_endpoint 指定有效的Tunnel Endpoint重新运行。运行过程中MapReduce里的java NPE(java.lang....
需求分析
dwd_log_info_di 用户网站访问信息宽表：dws_user_info_all_di 用户画像数据：ads_user_info_1d 根据规范设计数据流：本实验使用数据集成离线同步任务将用户信息数据与用户网站访问记录数据分别同步至MaxCompute各表，并通过ODPS SQL任务，...
需求分析
dwd_log_info_di 用户网站访问信息宽表：dws_user_info_all_di 用户画像数据：ads_user_info_1d 根据规范设计数据流：本实验使用数据集成离线同步任务将用户信息数据与用户网站访问记录数据分别同步至MaxCompute各表，并通过ODPS SQL任务，...
跨账号授权
确保实例网络类型配置为 允许任意网络访问。使用MaxCompute访问表格存储 跨账号访问的操作与同账号下的访问相同，只是在创建外部表时要使用角色ARN（即rolearn）。账号B通过MaxCompute创建外部表，指定 准备工作 中创建的角色ARN来访问表格...
HBase外部表（HBase标准版或增强版）
注意MaxCompute通过外部表的方式访问HBase时，网络打通包括通过Network建立MaxCompute和VPC的网络链路，也需要打开HBase的白名单，详情请参见 设置白名单。说明 HBase增强版是基于云原生多模数据库Lindorm内核研发的，HBase增强版实例也...
HiveMetastore
由于只有CU的计算资源和HiveMetastore网络可以联通，因此所有访问HiveMetastore表的SQL语句都需要指定 hint：/*+cluster=your-vc-name*/，这样SQL才会在CU中执行。查询数据示例如下：mysql>/*+cluster=vc-test*/select*from dlaDb....
功能特性
Control Policy Network ACL 表格存储中的NetWork ACL是基于资源的网络访问控制功能，可以用于为单个实例配置网络访问方式。Network ACL Instance Policy 表格存储中的Instance Policy是基于资源的授权策略，可以用于为单个实例配置访问...
Hologres数据源
endpoint 包括经典网络、公网和VPC三种网络类型，请根据数据集成资源组和Hologres实例所在的网络环境选择正确的 endpoint 类型，否则会出现网络不通或者性能受限的情况：经典网络示例：instance-id-region-endpoint-internal.hologres....
MaxCompute表数据
配置规则：按表（单表）使用记录 通过 频繁关联 和 访问统计 维度为您展示表的使用记录。频繁关联：为您展示有多少人在使用当前的表数据。访问统计：通过读取趋势图、字段热度明细、读取TOP人员等图标方式为您展示表的使用记录。查看表的...
功能概述
记录类型：PrivateZone支持的记录类型如下表所示。记录类型 描述 A IPv4地址 AAAA IPv6地址 CNAME 别名记录，指向另外一个域名 MX 邮件服务器记录，标识该域名的邮件服务器 TXT 双引号标记的一些字符串 PTR 将IP地址反向映射到域名 TTL：...
JindoTable使用说明
天数为1时，表示查询从本地时间当天0:00开始到现在的所有访问记录。示例：查询近七天，访问最多的20条表或分区的记录。jindo table-accessStat-d 7-n 20-cache 语法 jindo table-cache {-t}[-p][-pin]功能 表示缓存指定表或分区的数据至...
JindoTable使用说明
天数为1时，表示查询从本地时间当天0:00开始到现在的所有访问记录。示例：查询近七天，访问最多的20条表或分区的记录。jindo table-accessStat-d 7-n 20-cache 语法 jindo table-cache {-t}[-p][-pin]功能 表示缓存指定表或分区的数据至...
JindoTable使用说明
天数为1时，表示查询从本地时间当天0:00开始到现在的所有访问记录。示例：查询近七天，访问最多的20条表或分区的记录。jindo table-accessStat-d 7-n 20-cache 语法 jindo table-cache {-t}[-p][-pin]功能 表示缓存指定表或分区的数据至...
JindoTable使用说明
天数为1时，表示查询从本地时间当天0:00开始到现在的所有访问记录。示例：查询近七天，访问最多的20条表或分区的记录。jindo table-accessStat-d 7-n 20-cache 语法 jindo table-cache {-t}[-p][-pin]功能 表示缓存指定表或分区的数据至...
为云连接网授权
云连接网CCN（Cloud Connect Network）实例被加载到云企业网后，如果云连接网关联的本地网络需要访问PrivateZone服务，您需要先为云连接网授权。场景一：所有实例的账号相同 如下表所示，云连接网实例、部署了PrivateZone服务的专有网络VPC...
功能发布记录（2020~2021年）
新增 基于自建Spring Cloud Gateway或Zuul网关实现全链路灰度 历史发布记录 表 7.云原生网关 版本主题 核心功能 发布时间 云原生网关重磅功能升级，张家口开服 升级多服务多版本权重路由，请参见 路由方式概述。升级路由级别CORS跨域策略，...
RDS数据源配置
请注意，如果发生用户端的变更操作，如删除数据库表、变更访问权限、清理 binlog 日志或修改数据库密码等，可能会导致 OpenSearch 无法成功订阅并同步所配置表的binlog。在这种情况下，由于增量数据无法同步，OpenSearch 将不承担任何责任...
功能特性
PostGIS地理信息分析 Proxima向量计算 Oracle兼容函数 Clickhouse兼容函数 聚合函数 Hologres Binlog 支持单表级别的Binlog，用于记录表数据的修改记录。通过Hologres Binlog，实现数仓分层间的全链路实时开发，缩短数据端到端加工延迟，...
RDS数据源配置
请注意，如果发生用户端的变更操作，如删除数据库表、变更访问权限、清理 binlog 日志或修改数据库密码等，可能会导致 OpenSearch 无法成功订阅并同步所配置表的 binlog。在这种情况下，由于增量数据无法同步，OpenSearch 将不承担任何责任...
从RDS原生实时同步
删除网络访问白名单中的 127.0.0.1，填入 引擎详情 页下方显示的当前访问IP，单击 确认。单击 内部引擎控制详情，跳转至HybridDB for MySQL控制台（内部），如下图所示。使用HybridDB for MySQL实例的账号和密码登录HybridDB for MySQL内部...
DataWorks的审计事件
GetOpRiskData 查询租户下所有DataWorks工作空间指定日期中有风险的敏感数据访问记录。GetOpSensitiveData 查询租户下所有DataWorks工作空间指定日期的敏感数据访问记录。GetOptionValueForProject 查询项目下的扩展程序的选项值。...
UDAF概述
如果您的UDF涉及访问VPC网络中的资源时，需要先创建MaxCompute与目标VPC网络间的网络连接，才可以直接通过UDF访问VPC网络中的资源，操作详情请参见 通过UDF访问VPC网络资源。读取表数据 目前版本不支持使用UDF/UDAF/UDTF读取以下场景的表...
容器镜像服务的审计事件
ListInstanceEndpoint 查询实例网络访问入口列表。ListInstanceMigrateRule 查询实例迁移规则列表。ListInstanceRegion 查询实例地域列表。ListNamespace 查询命名空间列表。ListRepoBuildRecord 查询镜像仓库构建记录列表。...
流日志概述
专有网络VPC（Virtual Private Cloud）提供流日志功能，可以记录VPC网络中弹性网卡ENI（Elastic Network Interface）传入和传出的流量信息，帮助您检查访问控制规则、监控网络流量和排查网络故障。功能发布及地域支持情况 首次使用流日志...
使用访问日志
全球加速提供访问日志功能，可以记录所有访问终端节点的流量信息，帮助您检查访问控制规则、排查网络故障等。访问日志介绍 您可以选择为全球加速实例的一个或者多个终端节点组创建访问日志，采集到的访问日志将会投递到终端节点组所在地域...
使用访问日志
全球加速提供访问日志功能，可以记录所有访问终端节点的流量信息，帮助您检查访问控制规则、排查网络故障等。访问日志介绍 您可以选择为全球加速实例的一个或者多个终端节点组创建访问日志，采集到的访问日志将会投递到终端节点组所在地域...
MaxCompute UDF概述
如果您的UDF涉及访问VPC网络中的资源时，需要先创建MaxCompute与目标VPC网络间的网络连接，才可以直接通过UDF访问VPC网络中的资源，操作详情请参见 通过UDF访问VPC网络资源。读取表数据 目前版本不支持使用UDF/UDAF/UDTF读取以下场景的表...
MaxCompute安全白皮书
网络安全 访问控制 MaxCompute目前提供的Endpoint包含经典网络、公网和VPC网络，在网络上支持按照Project级别配置基于IP白名单的访问控制。目前MaxCompute支持的具体情况如下：经典网络、VPC网络、Internet网络三网隔离，只能访问各自对应...
配置网络
如果您需要函数能够访问VPC内的资源，或允许指定的VPC来调用函数，那么您需要手动为服务配置网络访问能力。网络配置为服务级别，即对服务下的所有函数生效。本文介绍如何通过 函数计算 控制台为服务配置网络。注意事项 为服务绑定VPC资源时...
网络开通流程
外部表访问VPC网络（详情请参见：RDS外部表、HBase外部表、Lindorm外部表）。代码如下：在建表语句中设置参数 TBLPROPERTIES('networklink'='<networklink_name>')湖仓一体配置Networklink（详情请参见：MaxCompute湖仓一体概述）。...
2021年
新功能 安装Package后，如果您需要对Package进行更细微的权限控制，例如控制只能访问Package内的部分资源或控制只能访问Package内表的部分列，您可以通过MaxCompute提供的细粒度授权或LABEL授权实现。Package的权限控制 2021-03-12 支持...
配置网络
网络访问能力 使用VPC功能会降低 函数计算 的冷启动效率，建议非必要勿配置该功能。您可优先选择使用RAM授权方式访问资源，例如 表格存储Tablestore。通过网络地址访问函数或通过函数访问网络地址时，会产生流量。流量可分为以下类型。公网...
PolarDB MySQL版8.0.2版本发布日志
修复分区表的所有分区在分区剪枝阶段都被裁剪掉的情况下，使用RANGE INDEX访问分区表的全局二级索引时，触发ASSERT CRASH（断言错误）的问题。修复将冷数据归档为ORC格式时，因表中存在Blob类型的字段导致归档失败的问题。修复MRR等场景下...
采集数据
前提条件 已为您准备该实验所需的用户信息数据和用户网站访问记录数据，并分别存放于平台提供的RDS MySQL及OSS上，您可直接在DataWorks注册使用。无需单独开通RDS服务与OSS服务，无需单独准备测试数据，但需自行创建DataWorks工作空间，并...
- 产品推荐
- 这些文档可能帮助您