开启或关闭连接池
如果您的业务场景中，短连接较多或需要频繁创建和销毁连接，建议您开启RDS PostgreSQL的连接池功能，该功能可以帮助您有效降低频繁创建和销毁连接对实例性能的影响，控制数据库服务器的负载和资源使用。背景 PgBouncer是一个开源的数据库...
Hive数据脱敏
Ranger支持对Hive数据的脱敏处理（Data Masking），即可以对Select的返回结果脱敏，以屏蔽敏感信息。背景信息 该功能只针对HiveServer2的场景（例如，Beeline、JDBC和Hue等途径执行的Select语句）。操作步骤 说明 本文Ranger截图以2.1.0...
Dataiku连接
Database AnalyticDB PostgreSQL版 实例的数据库名称。User AnalyticDB PostgreSQL版 实例的数据库账号。Password AnalyticDB PostgreSQL版 实例的账号密码。更多参数 其余更多参数说明，请参见 Dataiku官方文档。参数填写完成后，单击页面...
Hive Metastore使用加密文件访问RDS
DataLake或Custom集群类型 操作 Key Value 说明 修改 javax.jdo.option.ConnectionPassword 设置为空 表示连接Hive Metastore时不需要提供密码。新增 hadoop.security.credential.provider.path jceks:/file/etc/emr/hive-conf/hive.jceks ...
Database
名称 类型 描述 示例值 object 数据库对象 CreateTime integer 创建时间，Unix 时间戳秒数 1608707407 Description string 元数据库描述文本 this is a hive database LocationUri string 元数据库保存路径，例如 HDFS 路径/hdfs/hivedb/...
DLF统一元数据
仅EMR-3.30.0及之后版本和EMR-4.5.0及之后版本，支持选择DLF统一元数据作为Hive数据库。切换元数据存储类型 您可以通过修改Hive参数的方式，切换Hive MetaStore的存储方式。说明 如果需要迁移数据库的元数据信息，请参见 EMR元数据迁移公告...
加载矢量数据
准备工作 在加载矢量数据之前，请确保在数据库中已输入如下命令，来创建ganos_geometry扩展：CREATE EXTENSION ganos_geometry CASCADE shp2pgsql命令行工具 shp2pgsql 命令行工具是一个将Esri Shapefile文件转换为SQL文件的命令行工具。...
加载矢量数据
准备工作 在加载矢量数据之前，请确保在数据库中已输入如下命令，来创建ganos_geometry扩展：CREATE EXTENSION ganos_geometry CASCADE shp2pgsql命令行工具 shp2pgsql 命令行工具是一个将Esri Shapefile文件转换为SQL文件的命令行工具。...
Golang
database="database_name"/数据库连接的超时时间。connectTimeout="10s")func main(){/打开数据库连接。url:=fmt.Sprintf("%s:%s@tcp(%s:%d)/s?timeout=s",user,password,host,port,database,connectTimeout)db,err:=sql.Open("mysql",url)...
数据源中心
数据库名 是 输入连接HIVE/IMPALA的数据库名称。j dbc连接参数 否 用于数据源连接的参数设置。格式为 {"key1":"value1","key2":"value2".}。测试连通性 否 添加数据源时支持使用调度资源组测试连通性。说明 如果工作流中使用了该数据源，...
DatabaseInput
名称 类型 描述 示例值 object 数据库对象 Description string 元数据库描述文本 this is a hive database LocationUri string 元数据库保存路径，例如可填写 HDFS 路径/hdfs/hivedb/data Name string 元数据库名称，校验长度 128，不支持...
Golang访问（2.0版）
连接AnalyticDB MySQL 2.0 package main import("database/sql""fmt"_"github.com/go-sql-driver/mysql" )const(user="xxx"password="xxx"host="127.0.0.1"port=3306 database="xxx"/数据库连接的超时时间 connectTimeout="10s")func main...
分片集群实例连接说明
登录MongoDB数据库 获取如下信息：数据库连接地址，获取方法请参见 数据库连接地址。数据库账号，初始账号为root。重要 不建议在生产环境中直接使用root账号连接数据库。您可以根据业务需求创建用户并分配权限，详情请参见 使用DMS管理...
副本集实例连接说明
云数据库MongoDB副本集实例分别提供了主从节点和只读节点的单独连接地址，以及用于应用程序连接的高可用ConnectionStringURI和ReadOnly ConnectionstringURI地址。本文介绍副本集实例连接地址的获取方式及连接说明。获取数据库连接地址 ...
与Hive、MySQL、Oracle数据类型映射表
在进行数据迁移或集成操作时，即当您需要将其他数据库数据导入MaxCompute或将MaxCompute数据导出至其他数据库时，您需要参照数据类型映射表，设置表字段的数据类型映射关系。正确的数据类型映射关系可以确保数据在不同数据库中能够正确地...
设置数据库代理连接地址
说明 无法释放开通代理时默认创建的代理连接地址 相关文档 配置数据库代理连接地址访问策略 通过代理连接地址连接数据库 相关API API 描述 DescribeDBProxy 查询数据库代理详情。DescribeDBProxyEndpoint 查询数据库代理的连接地址信息。...
Power BI连接
说明 若连接失败请确认数据库连接信息是否正确，检查数据库白名单是否添加Power BI所在服务器IP地址，确认无误后重新登录。配置项 描述 服务器 AnalyticDB PostgreSQL版实例的外网连接地址和端口号。示例值：gp-bp152460513z*o-master.gpdb...
配置Hive输出组件
Hive输出组件用于向Hive数据源写入数据。同步其他数据源的数据至Hive数据源的场景中，完成源数据源的信息配置后，需要配置Hive输出组件写入数据的目标数据源。本文为您介绍如何配置Hive输出组件。使用限制 Hive输出组件支持写入文件格式为 ...
常见问题
上传文件至群空间时，需要先连接数据库（支持MySQL、SQL Server、MaxCompute、Oracle中任意一种），且连接数据库的用户需要具备该数据库中表的创建和读写权限。请参见 创建文件数据源。高级版是否支持翻牌器、排行榜和桑基图？支持。您需要...
配置Hive输入组件
Hive输入组件用于读取Hive数据源的数据。同步Hive数据源的数据至其他数据源的场景中，您需要先配置Hive输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置Hive输入组件。使用限制 Hive输入组件支持数据格式为 orc、...
连接实例
云数据库 SelectDB 版 采用MySQL网络连接协议，支持兼容MySQL生态的命令行工具、JDBC/ODBC驱动和可视化工具等连接 云数据库 SelectDB 版 实例。本文介绍如何通过MySQL协议连接 云数据库 SelectDB 版 实例。前提条件 目标 云数据库 SelectDB...
Go
Go 驱动连接数据库 步骤一：获取数据库连接参数 参考 获取连接参数 文档，获取相应的租户连接参数，例如：$obclient-hxxx.xxx.xxx.xxx-P3306-u a*-p*-Dtest 数据库连接参数包含了访问数据库所需的参数信息，在验证示例代码前，可通过数据库...
Dataphin集成任务同步数据到Hive报错“GSS initiate ...
问题描述 Dataphin集成任务同步数据到Hive报错“GSS initiate failed”。问题原因 Hive数据源kerberos认证没有成功。解决方案 检查Hive数据源的连通性以及集群认证的相关票证是否正常。适用于 Dataphin
Python使用说明
E-MapReduce使用的Python 3版本为Python 3.6.4。支持Python 3.6.4 EMR-2.10.0及后续版本和EMR-3.10.0及后续版本，支持Python 3.6.4。Python文件安装目录为/usr/bin/python3.6。EMR-2.10.0和EMR-3.10.0之前版本默认不支持Python 3版本，您...
C3P0 连接池连接 OceanBase 数据库示例程序
本文将介绍如何使用 C3P0 连接池、MySQL Connector/J 和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入、删除、更新和查询数据等。点击下载 c3p0-mysql-jdbc 示例工程 前提条件 您已安装 OceanBase 数据库...
PySpark Python环境介绍
Spark2 python3.7/usr/local/bin/python3.7 Spark3 python3.7/usr/local/bin/python3.7 EMR-3.42.0版本、EMR-5.8.0版本 Spark2 python3.6/bin/python3.6 Spark3 python3.6/bin/python3.6 Python第三方库安装 安装pip3.8。部分EMR版本（EMR ...
配置官方公共层
v10.2.0 README.md Python310-Opencv4x Python 3.10 Custom.Debian10 一个跨平台的计算机视觉库 v4.7.0.68 README.md SQLite3 Python 3.9 Node.js 16 Node.js 14 Java 11 Java 8 Custom 一种轻量型、进程内的关系型数据库 3.41.1 README.md...
安装
CentOS、Red Hat Enterprise Linux：yum-y install python3-pip Ubuntu、Debian：apt-get-y install python3-pip OpenSUSE、SUSE：zypper-n install python3-pip 安装SDK 安装阿里云SDK前，请确保您已下载并在项目中引入 Extension....
连接集群
云数据库ClickHouse 支持通过DMS（Data Management Service）、ClickHouse命令行工具或其它客户端（DataGrip、DBeaver）连接 云数据库ClickHouse 集群。本文介绍如何通过DMS连接 云数据库ClickHouse 集群。背景信息 DMS是阿里云提供的图形...
查看集群日报与分析
Hive库信息 Hive库信息包含以下部分：Hive库详细信息 Hive库文件大小分布Top信息 Hive库冷热数据分布Top信息 Hive库存储格式分布Top信息 Hive库详细信息提供以下数据：存储使用量排名：名称、存储量，日环比和日增量。文件数量排名：名称、...
Hive
您已登录云原生数据库分析DLA控制台，在 云原生数据湖分析DLA控制台 上创建了 Spark虚拟集群。您已开通对象存储OSS（Object Storage Service）服务。如何开通，请参见 开通OSS服务 准备创建Spark计算节点所需要的 交换机ID 和 安全组ID，...
基本概念
数据库（Database）数据库属于目录，内部包含表、列、视图、函数和数据类型等。表（Table）表属于数据库。在 云数据库SelectDB版 中，表 是存储结构化数据的一种特殊形式。一张表由行（Row）和（Column）组成，其中行表示一行数据，列表示...
RDS PostgreSQL CSV或SQL文件恢复到自建数据库
您可以使用RDS PostgreSQL的备份下载功能，将云盘实例的快照备份数据转换成CSV文件或SQL文件导出，然后通过该文件将数据恢复到自建PostgreSQL数据库中。操作步骤 本示例以RDS PostgreSQL云盘实例的SQL文件恢复至ECS实例（CentOS 7.8 64位）...
Navicat
Navicat是一套快速、可靠且价格相宜的数据库管理工具，专为简化数据库的管理及降低系统管理成本而设。Navicat提供图形化用户界面，您可以简单、方便地创建本机到 AnalyticDB MySQL版 集群的远程连接，然后使用Navicat进行数据管理。前提...
从备份文件恢复到自建MySQL数据库
您可以使用 PolarDB 的备份文件下载功能，将云盘实例的快照备份数据转换成CSV文件或SQL文件导出，然后通过该文件将数据恢复到自建MySQL数据库中。前提条件 PolarDB MySQL版 集群要求 集群版本要求：当前仅 PolarDB MySQL版 企业版的集群版...
宣布阿里云 Python SDK 即将终止 Python 2.7 和 ...
声明内容 从 2024 年 5 月 1 日起，阿里云 Python SDK 将不再继续支持 Python 2.7 运行时和低于版本 Python 3.6 的 Python 3 运行时，也就是正式终止对 Python 2.7 和 Python 3.6 及以下版本的支持。Python 2.7-将于 2024 年 5 月 1 日停止...
RDS MySQL快照备份文件恢复到自建数据库
您可以使用RDS MySQL的备份下载功能，将云盘实例的快照备份数据转换成CSV文件或SQL文件导出，然后通过该文件将数据恢复到自建MySQL数据库中。前提条件 RDS实例需满足以下条件：MySQL数据库版本：8.0、5.7（支持Serverless实例）存储类型：...
环境说明
版本 标识符 操作系统 架构 Python 3.10 python3.10 Debian 10 x86_64 Python 3.9 python3.9 Debian 9 x86_64 Python 3.6 python3 Debian 9 x86_64 重要 函数计算 已计划停止对Python 2.7运行时的支持。具体信息，请参见 运行时终止策略。...
在函数中配置官方公共层
v10.2.0 README.md Python310-Opencv4x Python 3.10 Custom.Debian10 一个跨平台的计算机视觉库 v4.7.0.68 README.md SQLite3 Python 3.9 Node.js 16 Node.js 14 Java 11 Java 8 Custom 一种轻量型、进程内的关系型数据库 3.41.1 README.md...
通过SkyWalking上报Python应用数据
neo4j psycopg[binary]Python≥3.11-3.1.*Python≥3.7-3.0.18、3.1.*sw_psycopg psycopg2-binary Python≥3.10-暂不支持 Python≥3.7-2.9 sw_psycopg2 pymongo Python≥3.7-3.11.*sw_pymongo pymysql Python≥3.7-1.0 sw_pymysql pyramid ...
- 产品推荐
- 这些文档可能帮助您