URL_DECODE
指定编码格式，支持GBK或UTF-8等标准编码格式，不输入默认为UTF-8。返回值说明 返回STRING类型UTF-8编码的字符串。input 或 encoding 值为NULL时，返回NULL。使用示例-返回示例for url_decode:/(fdsf)。select url_decode('%E7%A4%BA%E4%BE...
Quick BI中数据填报填入颜文字Emoji时，报错...
更多信息 MySQL 字符编码查询：1、查询所有表的编码 SELECT TABLE_NAME,TABLE_COLLATION FROM information_schema.TABLES 2、查询数据库的编码 show create database db1;3、查询单个表的编码 show create table user;4、查询单个表所有...
导入结构和数据
背景信息 ODC 支持批量导入数据库对象的结构和数据。通过 ODC 导入任务可以分别导入数据库对象的结构和数据、仅导入数据或者仅导入结构。导入结构和数据：同时导入数据库对象的定义语句及其数据。仅导入数据：仅导入表/视图对象的数据。仅...
GORM 连接 OceanBase 数据库示例程序
本文将介绍如何使用 GORM 和 OceanBase 数据库构建一个应用程序，实现创建表、插入数据和查询数据等基本操作。点击下载 gorm-oceanbase 示例工程 前提条件 安装 OceanBase 数据库、Go 语言和相关驱动，并确保已经正确配置了环境变量。说明 ...
创建文件数据源
数据字段 文件上传至数据库后，会以数据库表的形式存储，数据库字段名称 和 字段类型 为生成数据库表的字段名和类型，而 文件字段名 为上传文件的表头名，会变成数据库表的字段备注。您可以在文件上传时，修改 文件字段名、数据库字段名称 ...
Dataphin中管道任务将FTP数据同步至HIVE，运行报错"您...
问题描述 Dataphin中管道任务抽取FTP数据，报错“ERROR DlinkTaskPluginCollector-脏数据:{"message":"您尝试读取的列越界,源文件该行有[31]列,您尝试读取第[32]列,数据详情[.]”，且读取的中文数据有乱码。完整的报错信息如下：2021-11-08...
表达式函数概览
res_rds_mysql 从RDS MySQL数据库中拉取数据库表内容或SQL执行结果，支持定期更新数据。res_log_logstore_pull 从另一个Logstore中拉取数据，支持持续拉取数据。res_oss_file 从OSS中获取特定Bucket下的文件内容，支持定期更新数据。
RDS MySQL如何保证数据库字符编码正确
概述 本文主要介绍RDS MySQL如何保证数据库字符编码正确。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据修改，...
迁移服务（MMA）
数据库黑名单 不需要迁移的Hive数据库，多个值之间以英⽂逗号分隔。Metastore访问并发量 访问Hive MetaStore的并发量，⽤于提⾼获取Hive元数据的速度。表黑名单 不需要迁移的Hive数据库表。单个表的格式为 dbname.tablename,多个表之间以英...
通过Hive访问云数据库HBase
云数据库HBase支持通过Hive读写数据，本文介绍如何配置Hive并读写云数据库HBase的数据。前提条件 已将Hive所在的Hadoop集群所有的节点的IP加入到云数据库HBase实例的白名单中，具体操作请参见 设置白名单。已获取云数据库HBase的zookeeper...
配置CDH6使用文件存储 HDFS 版
命令，进入存储Hive元数据的MySQL数据库。修改表DBS中的数据。执行 SELECT*FROM DBS LIMIT 5;命令，查询表DBS中的数据。返回结果示例如下：+-+-+-+-+-+-+-+|DB_ID|DESC|DB_LOCATION_URI|NAME|OWNER_NAME|OWNER_TYPE|CREATE_TIME|+-+-+-+-+-...
Hive数据迁移
表黑名单,格式为db.table 不需要迁移的Hive数据库表。单个表的格式为 dbname.tablename,多个表之间以英⽂逗号分隔。表白名单，格式为db.table 需要迁移的Hive数据库表。单个表的格式为 dbname.tablename，多个表之间以英⽂逗号分隔。单击...
Quick BI连接hive数据源报错："Required field&39;...
问题描述 Quick BI连接hive数据源报错："Required field&39;client_protocol&39;is unset!Struct:TOpenSessionReq(client_protocol:null,configuration:{use:database=group3_dm}。问题原因 hive版本属于cdh hive，quick bi支持的是apache ...
FineBI
检查外接MySQL数据库是否使用utf8（– UTF-8 Unicode）编码为字符集排列规则，或新建一个utf8编码的数据库 create database finedb character set utf8。配置外接数据库为AnalyticDB，连接失败 处理方法：外界数据库需要配置本地MySQL，而...
查看集群日报与分析
Hive库存储格式分布Top信息展示如下：库TextFile存储格式数据量分布Top 库Parquet存储格式数据量分布Top 库ORC存储格式数据量分布Top Hive表信息 Hive表信息包含以下部分：Hive表详细信息 Hive表文件大小分布Top信息 Hive表冷热数据分布Top...
CreateDatabase
400 Database.AddError Instance%s add database minidoc error 实例%s添加数据库minidoc错误 404 InvalidDBCluster.NotFound The DBClusterId provided does not exist in our records.当前的记录中不存在提供的DBClusterId。访问 错误...
自建Hive数据仓库迁移到阿里云E-MapReduce
可靠性 使用阿里云数据库RDS保存Hive的元数据信息，可以提升数据可靠性和服务可用性，免除客户运维自建MySQL数据库的工作。架构图 方案详情 请参见 阿里云自建Hive数据仓库跨版本迁移到阿里云EMR。icmsDocProps={'productMethod':'created'...
Dataphin同步Hive数据源Textfile格式表，报错“脏数据...
问题描述 Dataphin同步Hive数据源Textfile格式表，可能会遇到以下问题：1.数据中存在与列分隔符相同的字符，这样会导致读取数据错位。2.数据中存在换行符，也会导致报错“脏数据”问题原因 本身Hive Textfile格式文件读取数据时是按照列...
CDH6与文件引擎集成
三、安装HIVE服务 安装MySQL数据库，并创建用来存储hive元数据信息的数据库。登入CDH6任意的一台机器，执行如下指令，进行安装。切换到 root sudo su-#下载 MySQL的rpm 源 root@cdhlindorm001~/tool$wget ...
如何清理孤立文档
数据库列表 var databasesToProcess=["database1","database2","database3"];shardNames.forEach(function(shardName){/遍历指定的数据库列表 databasesToProcess.forEach(function(dbName){ var dbInstance=db.getSiblingDB(dbName);获取...
基本概念
阿里云视频点播支持视频编码格式：H.264/AVC（默认）、H.265/HEVC，音频编码格式：MP3（默认）、AAC、VORBIS、FLAC。转码 视频转码（Video Transcoding）是指将已经压缩编码的视频码流转换成另一个视频码流，以适应不同的网络带宽、不同的...
UTL_ENCODE
encoding 输入数据的编码格式。取值如下：UTL_ENCODE.BASE64 UTL_ENCODE.QUOTED_PRINTABLE NULL 返回值 返回值 描述 VARCHAR2 解码字符串结果。示例 该示例展示了如何将通过对应的编码函数得到的数据进行解码。select utl_encode.text_...
2020年
迁移ECS自建MySQL数据库至MaxCompute 2020年2月更新记录 时间 特性 类别 描述 产品文档 2020-02-26 新增内建函数 TABLE_EXISTS 和 PARTITION_EXISTS。新说明 新增内建函数 TABLE_EXISTS 和 PARTITION_EXISTS。TABLE_EXISTS PARTITION_...
SYS_CONTEXT
LANG 当前数据库的编码（ENCODING）。OS_USER 当前后端的OS认证用户。TERMINAL 应用程序名称（Application_name）。CLIENT_IDENTIFIER 客户端ID。MODULE 会话中当前的模块（DBMS_APPLICATION_INFO.MODULE）。具体内容，请参见 DBMS_...
SYS_CONTEXT
LANG 当前数据库的编码（ENCODING）。OS_USER 当前后端的OS认证用户。TERMINAL 应用程序名称（Application_name）。CLIENT_IDENTIFIER 客户端ID。MODULE 会话中当前的模块（DBMS_APPLICATION_INFO.MODULE）。具体内容，请参见 DBMS_...
使用DLF元数据
本文以Hive数据源为例。CREATE EXTERNAL CATALOG hive_catalog properties("type"="hive","hive.metastore.type"="DLF");参数 是否必选 说明 type 是 数据源的类型。支持的数据源类型有hive、hudi、iceberg、deltalake。dlf.catalog.id 否 ...
基本概念
阿里云视频点播支持视频编码格式：H.264/AVC（默认）、H.265/HEVC，音频编码格式：MP3（默认）、AAC、VORBIS、FLAC。比特率（Bitrate）比特率是指每秒传送的比特（bit）数，单位为bps(Bit Per Second)，比特率越高，传送的数据越大。在视频...
外表统计信息
本文介绍 云数据库 SelectDB 版 中外表统计信息收集功能，包括 使用方法和实现原理，为您进行查询性能优化提供参考。外表统计信息的收集方式、内容基本与内表统计信息一致，更多信息请参见 统计信息。注意事项 目前支持收集Hive、Iceberg和...
Dataphin集成任务同步数据到Hive报错“GSS initiate ...
问题描述 Dataphin集成任务同步数据到Hive报错“GSS initiate failed”。问题原因 Hive数据源kerberos认证没有成功。解决方案 检查Hive数据源的连通性以及集群认证的相关票证是否正常。适用于 Dataphin
Dataphin支持的数据源
在使用Dataphin前，您需要选择符合业务场景需求的数据库或数据仓库作为数据源，用于读取原始数据和写入数据建设过程中的数据。Dataphin集成了丰富的数据引擎，支持接入MaxCompute、Hive等数据仓库，也支持对接企业传统数据库，如MySQL、...
加载矢量数据
单击菜单栏 Database>DB Manager.在弹出的数据库连接对话框中，选择需要导入的数据源并单击 Import Layer/File.在弹出的导入矢量数据对话框中，指定需要导入的矢量数据并设置导入选项，最后单击 OK 执行导入操作。
加载矢量数据
单击菜单栏 Database>DB Manager.在弹出的数据库连接对话框中，选择需要导入的数据源并单击 Import Layer/File.在弹出的导入矢量数据对话框中，指定需要导入的矢量数据并设置导入选项，最后单击 OK 执行导入操作。
签名机制
其它字符编码成%XY 的格式，其中 XY 是字符对应ASCII码的16进制。示例：半角双引号（"）对应%22。扩展的UTF-8字符，编码成%XY%ZA…的格式。空格（）编码成%20，而不是加号（+）。该编码方式与 application/x-www-form-urlencoded MIME格式...
签名机制
编码时可以先用标准库的方式编码，然后把编码后的字符串中的加号（+）替换成%20，星号（*）替换成%2A，%7E 替换回波浪线（~），即可得到上述规则描述的编码字符串。本算法可以用下面的 percentEncode 方法来实现：private static final ...
签名机制
编码时可以先用标准库的方式进行编码，然后把编码后的字符串中的加号（+）替换成%20，星号（*）替换成%2A，%7E 替换回波浪号（~），即可得到上述规则描述的编码字符串。本算法可以用下面的 percentEncode 方法来实现：private static final...
签名方法
其它字符编码成%XY 的格式，其中 XY 是字符对应ASCII码的16进制。示例：半角双引号（"）对应%22。扩展的UTF-8字符，编码成%XY%ZA…的格式。空格（）编码成%20，而不是加号（+）。该编码方式与 application/x-www-form-urlencodedMIME 格式...
管理数据库
数据库 待访问的Hive数据库名称。可选参数。访问方式 支持以下访问方式：LDAP：需设置用户名和密码。EMR集群中设置的用户，详情请参见 管理用户。免密登录：仅需设置用户名。网络检测 单击 测试连通性，可以测试网络连通性。StarRocks 参数...
Quick BI新建hive数据源后将简单SQL放到数据集中运行...
问题描述 Quick BI新建hive数据源后将简单SQL放到数据集中运行报错io.grpc.StatusRuntimeException:INTERNAL:java.sql.SQLException:org.apache.spark.sql.catalyst.parser.ParseException，错误情况如下：问题原因 将spark数据源当作hive...
快速使用EMR Notebook
数据库 待访问的Hive数据库名称。访问方式 支持以下访问方式：LDAP：EMR集群中设置的用户名和密码，详情请参见 管理用户。免密登录：仅需设置用户名。网络检测 单击 测试连通性，可以测试网络连通性。单击 添加数据库。步骤三：新建...
接入金融级实人认证服务
其它字符编码成%XY的格式，其中XY是字符对应ASCII码的16进制。示例：半角双引号（"）对应%22。扩展的UTF-8字符，编码成%XY%ZA…的格式。空格（）编码成%20，而不是加号（+）。该编码方式与 application/x-www-form-urlencoded MIME 格式...
- 产品推荐
- 这些文档可能帮助您