UDF示例：Python UDF使用第三方包
背景信息 通过Python UDF使用第三方包支持的场景如下：使用Numpy包（Python 3 UDF）您需要修改Numpy包的后缀格式，基于MaxCompute客户端上传Numpy包，并注册函数。函数注册成功后即可通过Python 3 UDF调用。使用需要编译的第三方包 您需要...
使用WebIDE打包函数第三方依赖
Python Python运行时已经内置部分第三方库。更多信息，请参见 Python内置模块。如果您需要安装其他第三方库，可以在终端默认的/code 目录执行以下命令。pip install-t.flask#或 pip install-t.-r requirements.txt 使用上述方式，您的代码...
Python
前提条件 确保本地已部署 Python 语言运行环境。Python 3.x 连接 OceanBase 数据库 Python 3.x 需要 PyMySQL 驱动进行 OceanBase 数据库连接及使用。步骤一：获取数据库连接参数 参考 获取连接参数 文档，获取相应的租户连接参数，例如：$...
阿里邮箱导出的通讯录由TXT格式转换为CSV格式的方法
概述 本文主要介绍在阿里邮箱中，将TXT格式的通讯录转换为CSV格式的方法。详细信息 通过Office或者WPS新建一个表格文件，选择 数据 页签下 自文本 功能，找到已下载的员工账号文件，单击 打开，弹出 文本导入向导 窗口。说明 本文以Office ...
新增数据表
数据表类型为 CSV 文件数据表 填写以下关于 CSV 文件数据表的信息。参数 说明 所属节点 选择目标数据表所属的节点，节点为 前置准备 的步骤 1 中安装、部署和授权的节点。数据地址 数据表文件的存储地址。填写的路径为节点中~/nueva/agent/...
SQL查询概述
下载数据：单击 可以下载运行结果为CSV或Excel格式的数据文件。说明 数据文件格式及是否需要下载审批由 管理中心->数据下载 决定。更多信息，请参见 数据下载配置。行列转化：单击 可以切换运行结果的行列展示方式。可视化分析：支持将运行...
SQL查询概述
下载数据：单击 可以下载运行结果为CSV或Excel格式的数据文件。说明 数据文件格式及是否需要下载审批由 管理中心->数据下载 决定。更多信息，请参见 数据下载配置。行列转化：单击 可以切换运行结果的行列展示方式。可视化分析：支持将运行...
查看同步任务
OSS 实时 No 同步数据到对象存储OSS指定Bucket的文件中，将以csv格式保存 ElasticSearch 实时 Yes 同步数据到ElasticSearch指定Index中，Shard之间数据同步不保证时序，所以需将同样ID的数据写入相同的Shard中 MySQL 实时 Yes 同步数据到...
CSV
本文为您介绍CSV格式的使用方法和类型映射。背景信息 CSV格式允许基于CSV结构读写CSV数据。当前，CSV结构是基于表结构推导而来的。支持CSV格式的连接器包括：消息队列Kafka、Upsert Kafka、消息队列RocketMQ、StarRocks 和 对象存储OSS。...
通过OSS外表访问OSS数据
假设CSV格式的数据文件 t.CSV 中的内容为：NULL 2 通过OSS外表读取CSV格式文件中的数据会有以下两种情况：当 sql_mode 设置为 STRICT_TRANS_TABLES 时，执行如下命令，查询CSV格式文件中的数据：select*from t;报错信息如下：ERROR 1364(HY...
权限操作审计
单击 资产权限审计 下的 导出，即可导出选中数据源的权限操作审计详情文件至本地（保存为CSV格式）。③ 列表区 为您展示数据对象的名称、环境、操作对象/操作人、操作时间、权限类型、操作类型、有效期、操作的原因信息。
权限操作审计
单击 资产权限审计 下的 导出，即可导出选中数据源的权限操作审计详情文件至本地（保存为CSV格式）。③ 列表区 为您展示数据对象的名称、环境、操作对象/操作人、操作时间、权限类型、操作类型、有效期、操作的原因信息。
FTP数据源
FTP数据源为您提供读取和写入FTP双向通道的功能，本文为您介绍DataWorks的FTP数据同步的能力支持情况。使用限制 FTP Reader实现了从远程FTP文件读取数据并转为数据同步协议的功能，远程FTP文件本身是无结构化数据存储。对于数据同步而言，...
导出至HDFS
注意事项 AnalyticDB MySQL版 集群仅支持导出文件格式为CSV和Parquet的数据至HDFS。不支持导出文件格式为ORC的数据。AnalyticDB MySQL版 集群不支持自定义行级写入的 INSERT 语法，如 INSERT INTO VALUES 和 REPLACE INTO VALUES。不支持...
Quick BI如何将CSV格式的本地文件上传到数据源
概述 本文主要描述本地上传CSV格式文件的方法。详细信息 数据源的本地上传文件中，点击上传文件，在选择文件时只能看到xlsx格式的文件。需要您在文件类型的选项中选择所有文件才能找到CSV格式的文件。适用于 Quick BI
数据湖管理FAQ
目前OSS元数据发现支持的CSV格式为：无文件头，只有数据行的情况。有第一行作为文件头的情况。其他非标准CSV情况都不支持。多库合并/一键建仓相关问题 如何处理一键建仓连接数据库报错：Access denied for user？原因：一般是由于修改了...
云数据库的导入与导出
数据导出 您可以将数据库中的内容导出为JSON或者CSV格式的文件，导出结果中的每行数据都对应数据库中的一条记录。导出格式 是否必须指定导出字段 默认导出内容 建议使用场景 JSON格式 不必须 默认导出全部内容，指定字段时仍会导出_id字段 ...
Python程序如何连接RDS MySQL数据库
详细信息 Python标准的数据库接口为Python DB-API，大多数Python数据库接口使用该标准。Python2 参考如下步骤，先安装MySQLdb模块，然后使用import语句导入。通过编译或者pip安装MySQLdb。参考如下Python代码进行连接。import MySQLdb db=...
SDK简介
按应用语言 语言 文档 Java语言 通过OpenTelemetry上报Java应用数据 通过Jaeger上报Java应用数据 通过Zipkin上报Java应用数据 通过SkyWalking上报Java应用数据 Go应用 通过OpenTelemetry上报Go应用数据 Kitex接入可观测链路 OpenTelemetry ...
SDK简介
按应用语言 语言 文档 Java语言 通过OpenTelemetry上报Java应用数据 通过Jaeger上报Java应用数据 通过Zipkin上报Java应用数据 通过SkyWalking上报Java应用数据 Go应用 通过OpenTelemetry上报Go应用数据 Kitex接入可观测链路 OpenTelemetry ...
准备工作概述
OpenTelemetry 版 通过Jaeger上报Go应用数据 通过SkyWalking上报Go应用数据 通过Zipkin上报Go应用数据 Python应用 通过OpenTelemetry上报Python应用数据 通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过...
准备工作概述
OpenTelemetry 版 通过Jaeger上报Go应用数据 通过Zipkin上报Go应用数据 通过SkyWalking上报Go应用数据 Python应用 通过OpenTelemetry上报Python应用数据 通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过...
导入数据并查询
创建OSS外表语法 创建OSS CSV格式外表 示例的 oss_import_test_data.txt 文件为CSV格式，本节介绍CSV格式的OSS外表创建语法。CREATE TABLE IF NOT EXISTS oss_import_test_external_table(uid string,other string)ENGINE='OSS' TABLE_...
概述
同一份数据以不同的格式保存，数据所占用的存储空间不同，使用DLA扫描数据时所花费的时间和费用也不同。通常情况下，同一份数据以ORC格式和PARQUET格式存储时，其数据扫描性能要优于普通文本CSV格式。因此，您可以将文本类型的数据转换为...
数据源管理常见问题
在添加数据对话框中，设置 类型，选择 DataV数据代理服务，域名 为数据代理服务的域名、端口 也是数据代理服务的端口，key 和 Secret 需要将数据代理服务的密钥复制粘贴过来即可。配置完成后，单击 获取数据列表，需要注意的是在配置连接...
数据源管理常见问题
在添加数据对话框中，设置 类型，选择 DataV数据代理服务，域名 为数据代理服务的域名、端口 也是数据代理服务的端口，key 和 Secret 需要将数据代理服务的密钥复制粘贴过来即可。配置完成后，单击 获取数据列表，需要注意的是在配置连接...
连接方式概述
ODC 支持连接 OceanBase 数据库的 MySQL 租户和 Oracle 租户，同时为数据库开发者提供了数据库日常开发操作、WebSQL、SQL 诊断、会话管理和数据导入导出等功能。使用 OceanBase 开发者中心连接 OceanBase 租户的具体操作示例请参见 通过 ...
图生文
数据格式示例 说明 CSV 及 XLSX 格式中每一列数据；Manifest 格式中 data 字段的下一级字段均对应一个数据集字段，字段名 可自定义，在配置数据集字段名时选择对应的字段名即可。图片文件支持常见的JPG、PNG等格式。CSV 及 XLSX 格式 image...
oss_fdw
概述 oss_fdw 插件是 PolarDB PostgreSQL版（兼容Oracle）的一个外部数据包装器（FDW，Foreign Data Wrapper），能够将 阿里云对象存储OSS（Object Storage Service）上的数据与数据库中的外部表定义关联，使用户能够将数据库表的数据存放...
oss_fdw
概述 oss_fdw 插件是 PolarDB PostgreSQL版（兼容Oracle）的一个外部数据包装器（FDW，Foreign Data Wrapper），能够将 阿里云对象存储OSS（Object Storage Service）上的数据与数据库中的外部表定义关联，使用户能够将数据库表的数据存放...
oss_fdw
概述 oss_fdw 插件是 PolarDB PostgreSQL版（兼容Oracle）的一个外部数据包装器（FDW，Foreign Data Wrapper），能够将 阿里云对象存储OSS（Object Storage Service）上的数据与数据库中的外部表定义关联，使用户能够将数据库表的数据存放...
oss_fdw
概述 oss_fdw 插件是 PolarDB PostgreSQL版 的一个外部数据包装器（FDW，Foreign Data Wrapper），能够将 阿里云对象存储OSS（Object Storage Service）上的数据与数据库中的外部表定义关联，使用户能够将数据库表的数据存放到OSS上的同时...
图文解释
数据格式示例 说明 CSV 及 XLSX 格式中每一列数据；Manifest 格式中 data 字段的下一级字段均对应一个数据集字段，字段名 可自定义，在配置数据集字段名时选择对应的字段名即可。图片文件支持常见的JPG、PNG等格式。sam_embedding_url 用于...
最佳实践
解析Syslog标准格式数据 解析Nginx日志 解析Java报错日志 提取字符串动态键值对 特定格式文本数据加工 解析CSV格式日志 复杂JSON数据加工 转换Log为Metric 从其他Logstore获取数据进行数据富化 从OSS获取IPIP库进行IP地址数据富化 从OSS...
使用COPY命令导出Hologres的数据至OSS
FORMAT 选择数据格式，其格式可以为text，csv 或者binary。默认为text。DELIMITER 指定分隔文件每行中各列的字符，这必须是一个单一的单字节字符。各数据格式的字符说明如下：text格式中默认是一个制表符（如\t）。csv格式默认是一个逗号...
Dataphin管道任务同步csv文件到中台乱码
问题描述 用户同步csv文件数据到中台，发现数据乱码。问题原因 csv编码格式和中台数据库编码格式不一样。解决方案 对齐两边编码格式即可。适用于 Dataphin 管道任务
OSS数据源
重要 准备OSS数据时，如果数据为CSV文件，则必须为标准格式的CSV文件。例如，如果列内容在半角引号（"）内，需要替换成两个半角引号（""），否则会造成文件被错误分割。离线写 OSS Writer实现了从数据同步协议转为OSS中的文本文件功能，OSS...
添加数据
背景信息 空间数据支持添加的 数据类型与格式有：数据类型 数据格式 矢量 Shapefile GeoJSON CSV GDB PostGIS 栅格 GeoTIFF Images NetCDF 倾斜摄影 OSGB S3M 3DTiles BIM RVT DGN IFC 点云 LAS PCD 三维模型 OBJ 3DS glTF FBX 栅格瓦片 ...
使用COPY命令导入或导出本地数据
本文为您介绍如何使用...原始字符集 GBK UTF-8 CP936 ISO-8859 首行为标题 勾选则设置首行数据为标题。单击 下一步，单击 导入总览 页面的 执行，完成本地文件一键导入。在 导入总览 页面您可以查看本地文件导入的Schema、数据库、表等信息。
通过Tunnel迁移日志数据至MaxCompute
本文使用的示例数据为 loghub.csv。背景信息 Tunnel是MaxCompute的批量上传数据工具，适用于离线计算场景。Tunnel详细信息请参见 Tunnel使用说明。操作步骤 在MaxCompute客户端（odpscmd）执行如下命令创建表 loghub，用于存储上传的日志...
- 产品推荐
- 这些文档可能帮助您