产品特点
内网DNS解析相当于一个您独自管理的内网DNS，您可以用它来创建一些只能在域名生效范围（通过关联一个或多个VPC）内被访问到的域名或者子域名。原理 内网DNS解析利用阿里云VPC（Virtual Private Cloud）的隧道隔离特性（具体请查看 什么是...
Flink
Zeppelin的SQL开发环境和Flink自带的SQL-Client类似，但提供了更多的特性，具体内容如下：同时支持Batch SQL和Streaming SQL Zeppelin中同时支持Batch SQL和Streaming SQL，%flink.ssql 用来执行Streaming SQL，%flink.bsql 用来执行Batch ...
组合类型
定义了类型之后，我们可以用它们来创建表：CREATE TABLE on_hand(item inventory_item,count integer);INSERT INTO on_hand VALUES(ROW('fuzzy dice',42,1.99),1000);或函数：CREATE FUNCTION price_extension(inventory_item,integer)...
上下游存储
排查方法 通过以下步骤来确认Flink与Kafka之间是否存在代理或端口映射等转发机制：使用ZooKeeper命令行工具（zkCli.sh或zookeeper-shell.sh）登录您Kafka使用的ZooKeeper集群。根据您的集群实际情况执行正确的命令，来获取您的Kafka Broker...
ListClusters-获取集群列表
调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中使用，用来给RAM用户或RAM角色授予调用此API的权限。具体说明如下：操作：是指具体的权限点。访问级别：是指每个操作的访问级别，取值为写入（Write）、读取...
多可用区部署
云原生多模数据库 Lindorm 支持创建多可用区的实例。该方案将一个Lindorm实例部署在多个可用区，多可用区实例具备更高的容灾能力，同时Lindorm实例可以实现多个可用区之间数据的强一致，也可以在数据最终一致下发出请求返回最快的结果，...
ListExternalSAMLIdPCertificates-查询SAML签名证书...
调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中使用，用来给RAM用户或RAM角色授予调用此API的权限。具体说明如下：操作：是指具体的权限点。访问级别：是指每个操作的访问级别，取值为写入（Write）、读取...
ExecuteScript-执行SQL脚本
调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中使用，用来给RAM用户或RAM角色授予调用此API的权限。具体说明如下：操作：是指具体的权限点。访问级别：是指每个操作的访问级别，取值为写入（Write）、读取...
CreateDownload-创建下载任务
调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中使用，用来给RAM用户或RAM角色授予调用此API的权限。具体说明如下：操作：是指具体的权限点。访问级别：是指每个操作的访问级别，取值为写入（Write）、读取...
GetOpLog-获取指定时间内的操作日志详情列表
SQL 审核 DT_SYNC：库表同步 DT_DETAIL：库表详情 DB_TASK：任务管理 INSTANCE_MANAGE：实例管理 USER_MANAGE：用户管理 SECURITY_RULE：安全规则 CONFIG_MANAGE：配置管理 RESOURCE_AUTH：资源授权 ACCESS_WHITE_IP：访问 IP 白名单 NDDL...
DescribeDownloadTask-查询下载任务列表
调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中使用，用来给RAM用户或RAM角色授予调用此API的权限。具体说明如下：操作：是指具体的权限点。访问级别：是指每个操作的访问级别，取值为写入（Write）、读取...
DescribeHubClusters-查询已创建的主控实例列表
调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中使用，用来给RAM用户或RAM角色授予调用此API的权限。具体说明如下：操作：是指具体的权限点。访问级别：是指每个操作的访问级别，取值为写入（Write）、读取...
Endpoint
MaxCompute还提供了外部表功能，支持创建外部表来读取OSS、OTS、MC-Hologres、HBase及RDS存储的数据，详情请参见 OSS外部表、Tablestore外部表、Hologres外部表、HBase外部表（HBase标准版或增强版）和 RDS外部表。Tunnel服务：连接地址为...
数据对接期
智能推荐服务提供了可以用来测试的全量数据，可以从如下链接下载对应的数据，用以启动服务，快速测试SDK的推送和查询等相关功能。测试完毕后，可以通过新建数据版本的方式更换掉测试的全量数据，也可以直接通过增量的方式，推送覆盖原来的...
Spark Load
配置ETL集群 配置集群 Spark作为一种外部计算资源在Doris中用来完成ETL工作，引入Resource Management来管理Doris使用的这些外部资源。提交Spark导入任务之前，需要配置执行ETL任务的Spark集群，参数配置如下所示，详情参见下面的创建资源...
CDC测试
您可以参照本文进行测试，来了解您所购买的 PolarDB-X 实例CDC节点的性能情况。背景信息 PolarDB-X 的CDC节点是 PolarDB-X 数据库实例的日志节点，负责提供兼容MySQL Binlog的Binlog日志服务，您可基于CDC对Binlog进行消费订阅，满足不同...
在DTS迁移或同步任务中配置ETL
例如 script:e_set(`new_column`,dt_now())，此处 new_column 需要您手动在目标端添加。操作步骤 创建同步任务，具体请参见 同步方案概览。在 配置任务对象及高级配置 步骤的 高级配置 中，配置ETL功能 选择 是，在输入框中按照 数据处理...
SQL调优
并行度优化 并行度是衡量并行计算并行程度的一个指标，从执行计划上来看，例如ID为M1的任务，使用1000个Instance来执行，我们就说M1的并行度是 1000。需要注意的是：调整并行度不一定是越多越好，Instance数量过多会从如下两个方面影响执行...
开发自定义组件示例
当系统调用Job的split方法得到很多configuration后，会用每一个configuration实例化一个Task，Task的方法依次执行的顺序是：init，*prepare，getInputRowMeta，startRead，post，destroy，同样的，destroy和post方法的不同是，destroy总是...
开发自定义组件示例
当系统调用Job的split方法得到很多configuration后，会用每一个configuration实例化一个Task，Task的方法依次执行的顺序是：init，*prepare，getInputRowMeta，startRead，post，destroy，同样的，destroy和post方法的不同是，destroy总是...
邮件推送常见退信代码及处理方法
如果是验证码类等处罚类型邮件，请用触发地址类型发送此类邮件。SPF、DKIM、DMARC协议未正确配置或校验不通过 550 5.7.26 ...
纠删码
重要 单可用区本地SSD实例和多可用区本地SSD实例需联系Lindorm技术支持（钉钉号：s0s3eg3），由技术专家评估当前实例是否可以开启。节点数目限制：至少7个节点。说明 以RS-4-2算法为例，开启EC纠删码功能后数据副本会被打散分布至6个节点上...
搜索处理
参数格式：raw_query=content content:原始查询词 re_search：功能说明 用来设置重查策略，当前只支持按照total hits的阈值来设置。参数格式：re_search=strategy:threshold,params:total_hits#${COUNT} COUNT:触发重查时的total_hits上限...
自定义日志查询与分析
基于特定时间分组统计 如果想知道特定时间范围内某个设备的登录趋势，可使用如下SQL：_topic_:aegis-log-login and ip:1.2.XX.XX|select date_trunc('day',_time_)as dt,count(1)as PV group by dt order by dt 这里使用内置字段_time_，传...
2020年
ST_{Z|T|2D|2DT|3D|3DT}Intersects ST_{2D|2DT|3D|3DT}DWithin ST_{T|2D|2DT|3D|3DT}Contains ST_{T|2D|2DT|3D|3DT}Within 对轨迹类型提供统计信息收集功能，以及根据统计信息预估扫描代价功能。无 提供新的索引方式TrajGist，提供更好的...
2020年
ST_{Z|T|2D|2DT|3D|3DT}Intersects ST_{2D|2DT|3D|3DT}DWithin ST_{T|2D|2DT|3D|3DT}Contains ST_{T|2D|2DT|3D|3DT}Within 2020年10月 对轨迹类型提供统计信息收集功能，以及根据统计信息预估扫描代价功能。无 2020年10月 提供新的索引方式...
ALTER TABLE
对多可用区实例来说，有2个IDC，不指定idcName时Major Compaction操作的执行规则如下：宽表引擎版本低于2.6.4.2：只会对idc1进行Major Compaction。宽表引擎为2.6.4.2及以上版本：默认对所有的IDC进行Major Compaction。指定idcName，表示...
列运算
df=lens[[lens.unix_timestamp.astype('datetime').rename('dt')]]>>>df[df.dt,>>>df.dt.year.rename('year'),>>>df.dt.month.rename('month'),>>>df.dt.day.rename('day'),>>>df.dt.hour.rename('hour')].head(5)dt year month day hour 0...
Dataphin管道任务从Oracle抽取数据到MySQL，运行报错...
问题描述 Dataphin管道任务从Oracle抽取数据到MySQL，运行报错“DlinkTaskPluginCollector-java.sql.SQLException:流已被关闭”、“java....解决方案 建议修改表结构，可以将LONG类型的字段用别的类型来代替，如TEXT或者CLOB。适用于 Dataphin
PAI-REC推荐算法定制的最佳实践文档
1,0))is_click,.from${behavior_table} where between dt=${bizdate_start} and dt=${bizdate_end} group by req_id,user_id,item 其中维度计算的公式：其中count表示特征枚举值个数。当特征取值个数多的时候，用Log函数。EMB_SQRT4_STEP8:...
列存索引
例如：普通分区表达式为日期字段 dt，宽表单日数据量为50 GB，宽表主键字段为(id,dt)，可以将分区表达式配置为 PARTITION BY ENUMERABLE(dt,bucket(200,id))。WITH(`key`='value')使用 WITH 关键字为列存索引指定以下参数：lindorm_...
solr语法转化
q：必选参数，相当于OpenSearch中query查询，具体转化规则如下：q 转化规则‘:‘暂不支持 range索引，用filter的区间段来转化+A=>A-A=>不支持 A AND B=>A AND B A AND-B=>A ANDNOT B A OR B=>A OR B A OR+B=>A RANK B A AND B OR C=>A AND ...
solr语法转化
q：必选参数，相当于OpenSearch中query查询，具体转化规则如下：q 转化规则‘:‘暂不支持 range索引，用filter的区间段来转化+A=>A-A=>不支持 A AND B=>A AND B A AND-B=>A ANDNOT B A OR B=>A OR B A OR+B=>A RANK B A AND B OR C=>A AND ...
语雀
Node具有单线程（single-threaded）、非阻塞（non-blocking）、异步（asynchronously programming）等特性，这些特性一方面非常适合于构建可扩展的网络应用，用来实现Web服务这类I/O密集型的应用。但是，Node对CPU密集型的场景不够友好，...
语雀
Node具有单线程（single-threaded）、非阻塞（non-blocking）、异步（asynchronous programming）等特性，这些特性一方面非常适合于构建可扩展的网络应用，用来实现Web服务这类I/O密集型的应用。但是，Node对CPU密集型的场景不够友好，一旦...
Amazon Redshift应用和数据迁移至AnalyticDB ...
当创建 AnalyticDB PostgreSQL版 实例时，如果不知道如何选择规格，根据Amazon Redshift中每个Node Slice的规格来选择合适的 AnalyticDB PostgreSQL版 节点规格。示例 源Amazon Redshift实例包含4个Compute Node（每个Node下包含两个Node ...
应用
onLaunch/onShow 方法的参数 属性 类型 描述 query Object 当前小程序的 query path String 当前小程序的页面地址 Native 启动传参方法为：URL 启动传参方法为：query 从启动参数的 query 字段解析而来,path 从启动参数 page 字段解析而来...
Tunnel命令常见问题
命令来判断分区是否存在，并通过 alter table table_name add[if not exists]partition partition_spec 来创建对应的分区。使用Tunnel Upload命令上传数据时，报错Column Mismatch，如何解决？通常是因为数据源文件的行分隔符有问题，将多...
分区投影
如果您的表每天都会增加一个分区（比如 dt=2021-02-19），而您不想每天都去手动添加分区。如果您的数据存储在OSS中，里面建有大量的分区（比如几万个），但是您只需要查询其中的一小部分分区。限制说明 启用分区投影的表存在以下SQL命令...
配置规则：按模板（批量）
包括avg、count、sum、min、max、count_distinct、user_defined、table_count、table_size、table_dt_load_count、table_dt_refuseload_count、null_value、null_value/table_count、(table_count-count_distinct)/table_count、table_...
- 产品推荐
- 这些文档可能帮助您