配置说明
默认值为空，使用Record Value中的所有字段作为数据表的属性列。属性名格式为tablestore.<tablename>.columns.whitelist.name和tablestore.<tablename>.columns.whitelist.type。其中为数据表名称的占位符。tablestore.test.columns....
创建元数据
在基于HBase、Elasticsearch或MongoDB数据源创建服务单元之前，需要先创建对应数据源中数据表的元数据，以实现通过元数据确定数据源中数据表的结构。后续您可以通过该元数据读取到对应数据源的数据。本文为您介绍如何创建HBase、...
创建同步ElasticSearch
对于ES6，DataHub同步数据时，将会以用户选择的列的列名作为一条数据的type，如果选择多列，则多列的列名会以“|”分割作为一条数据的type，并且ES6支持以任意名称作为type。例如：DataHub Schema:f1 string,f2 string,f3 string,f4 string...
交叉透视表
条件 条件样式：设置数据透视表的条件样式，您可单击 控制条件样式的显隐。单击右侧的 或 图标，添加或删除一个条件样式。单击 或 图标配置多个条件样式的排列样式。单击 图标，即可复制当前选中的条件样式配置并新增一个同样配置的条件...
ALTER DATABASE
如果想要修改时序数据库的指定属性，或为其添加新的数据库属性，您可以使用 ALTER DATABASE 语句。引擎与版本 ALTER DATABASE语法 仅适用于时序引擎。无版本限制。语法 alter_database_statement:=ALTER DATABASE database_identifier[WITH...
图编辑
Inverted INDEX：需配置索引字段和pkey（主键）字段 字段结构 该数据表包含的字段属性 导入字段：如果是MaxCompute数据源，提前进行可读权限授权，具体请参考 离线存储授权 数据TTL及Done分区 数据TTL:数据生命周期 如果是API更新（即增量...
导入数据至维表
创建完成维表后，您可以在维表中直接写入数据，也可以导入电子表格、本地CSV文件和Excel文件的数据至维表，为后续数据分析做准备。前提条件 已创建完成一个维表，详情请参见 创建维表。操作步骤 在 维表 页面，单击 全部维表 下相应的 文件...
数据注册与字段配置
维度字段的定义与来源表中的定义保持一致即可。离线指标和实时指标不能混用一个结果表。离线指标结果表只需要有 dt 日期字段即可。实时指标至少要有 hh 小时字段。有了“实验报表来源表”之后，打开控制台“指标管理-数据注册”页面，即可...
索引结构
支持创建为索引字段的类型 INT，INT_ARRAY，TEXT，SHORT_TEXT，LITERAL，LITERAL_ARRAY，TIMESTAMP，GEO_POINT 不支持创建为索引字段的类型 FLOAT，FLOAT_ARRAY，DOUBLE，DOUBLE_ARRAY 支持创建为属性字段的类型 INT，INT_ARRAY，LITERAL，...
索引结构
支持创建为索引字段的类型 INT，INT_ARRAY，TEXT，SHORT_TEXT，LITERAL，LITERAL_ARRAY，TIMESTAMP，GEO_POINT 不支持创建为索引字段的类型 FLOAT，FLOAT_ARRAY，DOUBLE，DOUBLE_ARRAY 支持创建为属性字段的类型 INT，INT_ARRAY，LITERAL，...
新建及管理标签属性
说明 不同的属性字段类型支持的属性字段取值不同。字符型、数值型、日期时间型：支持自定义输入、枚举值（单选）、枚举值（多选）。布尔型：枚举值（单选）。布尔字段类型不支持设置取值约束，默认为 True 和 False。自定义输入：填写标签...
设计阶段
源表字段的数据格式。源表增量规则。探查完成后，最终产出 数据探查报告。如果发现当前数据无法支撑需求的实现，则要将需求退回给数据产品经理，由数据产品经理发起迭代需求流程。系分设计 系分设计包括表设计、Mapping设计和调度设计三...
二级索引简介
将数据表的一个预定义列作为索引表的属性列后，查询数据时无需反查数据表即可得到该列的值，但是同时增加了相应的存储成本。反之则需要根据索引表反查数据表。使用全局二级索引时，请选择合适的列作为索引表的第一个主键列。由于可能导致...
元数据
背景信息 元数据（字典）是属于数据库本身的一些数据，包含数据库名、数据库字符集、表名、表的大小、表的记录行数、表的字符集、表的字段、表的索引、表的描述、字段的类型、字段的精度、字段的描述等。所有信息均来源于 information_...
配置ClickHouse输出组件
阿里云数据库ClickHouse创建数据表的操作，请参见 创建表；非阿里云数据库ClickHouse创建数据表的操作，请参见 ClickHouse官方文档。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。按照下图指引，进入 ...
配置Hologres输出组件
使用限制 不支持写入Hologres数据库的视图。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。在离线单条管道脚本的开发页面，按照下图操作指引，进入 Hologres输出配置 对话框。在 Hologres输出配置 对话框，配置...
配置Hologres输出组件
使用限制 不支持写入Hologres数据库的视图。操作步骤 请参见 配置离线单条管道，进入离线单条管道脚本的开发页面。在离线单条管道脚本的开发页面，按照下图操作指引，进入 Hologres输出配置 对话框。在 Hologres输出配置 对话框，配置参数...
配置AnalyticDB for PostgreSQL输出组件
同步其他数据源的数据至AnalyticDB for PostgreSQL数据源的场景中，完成源数据的信息配置后，需要配置AnalyticDB for PostgreSQL输出组件的目标数据源。本文为您介绍如何配置AnalyticDB for PostgreSQL输出组件。操作步骤 请参见 离线管道...
GDB中配置ES信息
endpoint=${your-es-endpoint}&port=${your-es-port}&username=${your-es-username}&password=${your-es-password}"将${username} 改为您的图数据库GDB实例的用户名。将${password} 改为您的图数据库GDB实例的密码。将${your-gdb-endpoint}...
数据集成服务
当您的现有业务对数据库的并发读写、扩展性和可用性的要求较高，且需要使用复杂的检索或大数据分析时，如果原有数据库的数据架构不能满足现在的业务需求或改造成本较大，则您可以通过DataWorks数据集成服务将现有数据库中的数据迁移到...
虚拟列
当 Schema生成方式 设置为 自动生成 时，系统会自动将数据表的主键列和属性列作为索引字段，可根据需要选择字段类型以及设置是否开启数组。说明 字段名 和 字段类型 需与数据表匹配。数据表字段类型与多元索引字段类型的对应关系请参见 ...
通过办公安全平台保障LDAP用户安全访问
建立办公安全平台SASE（Secure Access Service Edge）与轻型目录访问协议（LDAP）的连接，您的企业用户直接以LDAP账号登录办公安全平台，方便您在办公安全平台管控LDAP用户的访问权限，从而保障企业的办公数据安全。本文介绍如何建立办公...
API概览
本产品（数据湖构建/2020-...ListDatabases 获取元数据库列表 获取数据湖元数据库列表，分页查询，可以根据数据库名称匹配。表 表 CreateTable 新增元数据表 新增数据湖的元数据表。DeleteTable 删除元数据表 根据名称删除数据湖的元数据表。...
数据集填报
您可在提示弹窗处一键转换，也可以在字段数据集表格字段配置页面底部自行切换。字段配置 数据集表格转换为明细表后将进入该字段的配置面板，所有拖入的数据集的字段都会出现在面板左侧。您可以在不同字段之间切换，当您点击到一个还没有...
工作项模板管理
2.设置字段模板 云效Projex支持属性字段的添加、删除、默认值设置、必填设置、展示顺序调整。默认的系统字段不支持删除。添加字段：支持字段检索及信息查看。如果检索不到所需字段，可跳转至 基本信息管理 新建字段（需要企业级字段管理...
MongoDB数据导入
返回结果：+-+|CAST(_id AS string)|+-+|641002ad883a73eb0d7291a7|+-+说明 如果要将ObjectId字段导入到 AnalyticDB MySQL 中，需要先创建用于存储ObjectId字段的数据库和数据表，具体操作，请参见 导入MongoDB非嵌套文档 中的步骤5~7。...
虚拟列
使用虚拟列功能时，您可以通过修改多元索引Schema或者新建多元索引来实现新字段新数据类型的查询功能，而无需修改表格存储的存储结构及数据。前提条件 已初始化Client。具体操作，请参见 初始化。已创建数据表，且数据表的数据生命周期...
管理明细及汇总表任务字段
逻辑表支持的操作详情如下：单字段补数据：汇总逻辑表的指标支持单字段补数据。进行单字段补数据时，需要配置以下参数。实例名称：由Dataphin系统自动生成，生成格式 自定义（逻辑表名称）_字段英文名_逻辑表模型ID_运行日期_时间戳。支持...
管理明细及汇总表任务字段
逻辑表支持的操作详情如下：单字段补数据：汇总逻辑表的指标支持单字段补数据。进行单字段补数据时，需要配置以下参数。实例名称：由Dataphin系统自动生成，生成格式 自定义（逻辑表名称）_字段英文名_逻辑表模型ID_运行日期_时间戳。支持...
单元格填报
选择 已有表 为对应的 控件 选择写入的 表字段名，将自动匹配表字段名的 字段描述、字段类型，您也可以自定义设置该字段是否为 主键。您可以 添加 和 删除 字段映射行。选择 新建表 您可以新建一张物理表，并自定义填写 表名、表字段名、...
通过SQL模式创建API（Dataphin表）
试运行输入值 需要配置成绑定字段的字段值，可以在 数据预览 页面选择绑定字段的字段值。单击 解析参数 后，Dataphin会自动解析出API SQL的入参和出参并分别添加至 请求参数 和 返回参数 区域。请求参数和返回参数的基本信息基本一致，下表...
DataSource
instance-id","dbName":"my_db","dbTableName":"my_table","dbUser":"my","dbPassword":"my_passwd","filter":"","autoSync":true } 结构 字段 类型 描述 instanceId String 实例ID dbName String 数据库名 dbTableName String 数据库表名 ...
DataSource
instance-id","dbName":"my_db","dbTableName":"my_table","dbUser":"my","dbPassword":"my_passwd","filter":"","autoSync":true } 结构 字段 类型 描述 instanceId String 实例ID dbName String 数据库名 dbTableName String 数据库表名 ...
客户属性
客户属性 是绘制 用户画像 的基本数据来源之一，通过这些数据可以有效地对客户进行画像分析，客户属性主要是利用一些字段来完善客户的信息数据，例如性别、姓名、手机号等。一般记录客户属性数据的来源有引导注册、完善个人资料等。客户...
查看并管理明细及汇总表实例
例如，对某个逻辑表任务节点进行补数据时，需要先了解该逻辑表任务节点归属的物化节点，并对物化节点进行逐一补数据操作，这样补数据操作过程复杂，且无法保障数据一致性。在 逻辑运维视角 下，您只需要选择需要运维的字段或逻辑表实例节点...
查看并管理明细及汇总表实例
例如，对某个逻辑表任务节点进行补数据时，需要先了解该逻辑表任务节点归属的物化节点，并对物化节点进行逐一补数据操作，这样补数据操作过程复杂，且无法保障数据一致性。在 逻辑运维视角 下，您只需要选择需要运维的字段或逻辑表实例节点...
配置MaxCompute输出
大数据计算服务MaxCompute（原名ODPS）为您提供完善的数据导入方案，能够快速解决海量数据的计算问题。前提条件 配置MaxCompute输出节点前，您需要先配置好相应的输入或转换数据源，详情请参见 实时同步能力说明。背景信息 写入数据不支持...
配置离线数据集成节点
功能特性 不限制来源表和目标表数据库类型。支持字段映射，包含修改源表和目标表字段的命名和类型映射。可配置并发迁移数据。支持通过WHERE语句，对迁移数据进行预过滤。支持前置及后置SQL语句，在导入数据前后实现数据处理。使用限制 系统...
通过控制台使用多元索引
前提条件 已创建数据表，且数据表的最大版本数（max Versions）必须为1，数据生命周期（Time to Live）必须满足如下条件中的任意一个。具体操作，请参见 数据表操作。数据表的数据生命周期为-1（数据永不过期）。数据表的数据生命周期不为-...
管理Schema
在Milvus中，Schema定义了向量数据库中数据的组织结构，包括字段名称和类型等。通过定义Schema来管理和查询数据，以支持高效的搜索和分析操作。本文为您介绍Collection和字段的Schema定义以及如何在Milvus中创建Schema。前提条件 已确保所...
- 产品推荐
- 这些文档可能帮助您