数据开发常见问题
su hdfs/usr/lib/hadoop-current/sbin/start-balancer.sh-threshold 10 执行以下命令，查看Balancer运行情况：方式一 less/var/log/hadoop-hdfs/hadoop-hdfs-balancer-emr-header-xx.cluster-xxx.log 方式二 tailf/var/log/hadoop-hdfs/...
功能特性
密码策略 定期改密 控制定期修改密码，包括密码有效时长、过期提醒、提醒方式/周期、密码过期效果（禁止登录/强制改密/仅提醒）密码策略 密码历史 在修改密码时检测历史密码数，新旧密码不可重复 密码策略 忘记密码 控制是否支持忘记密码，...
偏好类标签
偏好类标签是基于导入的或上报后存储的用户行为表、订单明细表数据，将用户出现次数最多或数值最大的属性作为标签值，例如：用户偏好的购物时段/价格区间/渠道/主题/品类、用户购买的最高单品价格。示例1：将用户偏好的前3个品类创建为标签...
忠诚度标签
忠诚度标签是基于导入的或上报后存储的用户行为表、订单明细表数据，将用户最后一次或首次行为的时间等属性或距今天数，或者累计行为天数作为标签值。例如：最近一次购买/访问时间或距今天数、累计消费/活跃天数。示例1：将用户90天内最后...
基本概念（V4）
用户属性 用户属性 规定了用户的基础信息体系，实际取值来源于导入的用户标签表，当表字段映射了用户属性时，用户属性值采用该字段的值。后续使用时，仅展示映射的用户属性，不再展示原始标签。用户属性与 ID Mapping 配合使用，帮助您构建...
配置ECS远程命令节点
说明 设置Windows实例执行命令的用户密码名称。具体操作，请参见 设置普通用户执行云助手命令。命令配置 命令配置 是 输入需要在ECS实例中执行的命令。例如，执行命令 python/home/admin/hello.py。可选：配置输出变量。输出变更可以被下游...
访问链接与端口
说明 Hadoop集群默认的用户名和密码均为admin。DataLake和自定义集群默认的用户名为admin，密码为admin1234。访问Flink UI（EMR-3.29.0之前版本）早期版本Flink组件仅支持通过SSH隧道方式访问Web UI时，请参见 通过SSH隧道方式访问开源组件...
管理子账号
在 编辑用户 对话框，单击最下方的 重置密码。在 提示 对话框，单击 确定。系统自动为子账号分配密码。回到 编辑用户 对话框，单击 确定。删除子账号 登录云市场 交付中心。在左侧导航栏，选择>用户管理。在子账号列表，单击目标子账号 ...
管理员工子账号
在 编辑用户 对话框，单击最下方的 重置密码。在 提示 对话框，单击 确定。系统自动为子账号分配密码。回到 编辑用户 对话框，单击 确定。删除子账号 登录云市场 交付中心。在子账号列表，单击目标子账号 操作 列的 删除。在 确定删除吗？...
查询作业信息
KnoxPassword String my_knox_password Knox的用户密码，执行Zeppelin Notebook时必须提供。GmtCreate Long 1538017814000 创建时间。CategoryId String FC-5BD9575E3462*作业所在目录ID。Id String FJ-BCCAE48B90CC*作业ID。AlertConf ...
使用CreateCluster API创建集群
选择安装应用 必须安装的依赖应用 不可同时安装的互斥应用 HDFS Hadoop-Common OSS-HDFS OSS-HDFS Hadoop-Common HDFS Hive Hadoop-Common、YARN 无 Spark2 Hadoop-Common、YARN、Hive Spark3 Spark3 Hadoop-Common、YARN、Hive Spark2 Tez...
Ranger概述
旧版数据湖场景（Hadoop集群）默认的用户名和密码均为admin。如果忘记默认密码，请参见 常见问题。首次登录后，需要修改密码并妥善保存。单击上方的 Settings。修改 admin 的密码。单击右上角的 admin>Log Out。修改后即可使用新的密码登录...
通过ES-Hadoop将HDFS中的数据写入Elasticsearch
ES-Hadoop是Elasticsearch推出的专门用于对接Hadoop生态的工具，可以让数据在Elasticsearch和Hadoop之间双向移动，无缝衔接Elasticsearch与Hadoop服务，充分使用Elasticsearch的快速搜索及Hadoop批处理能力，实现交互式数据处理。...
迁移HDFS数据到OSS
在进行数据迁移、数据拷贝的场景中，最常用的是Hadoop自带的DistCp工具。但是该工具不能很好利用对象存储OSS的特性，导致效率低下并且不能保证数据一致性。此外，该工具提供的功能选项较单一，无法很好地满足用户的需求。阿里云Jindo ...
数据湖集群
如果您仍使用密码方式登录集群，则可以继续使用root用户。新增 emr-metadata 命令 数据湖集群的每个节点默认增加一个可执行命令 emr-metadata，该命令会输出当前节点关于集群的相关元数据信息。例如，集群ID、节点的角色、instanceId以及...
异构数据源访问
etc/hadoop目录：在集成了Hadoop和Hive的安装中，也可能放在Hadoop的配置目录中，以确保Hive能够正确地与Hadoop集群进行交互。core-site.xml Hadoop核心配置项，如I/O设置和文件系统的配置等。yarn-site.xml YARN配置项，负责集群资源管理...
配置Lindorm Spark节点
任务编排的Lindorm Spark节点可以通过Lindorm计算引擎高效地完成分布式计算任务，满足用户在数据生产、交互式分析、机器学习和图计算等场景中的计算需求，同时可以方便地读取Lindorm宽表引擎数据，与OSS上的数据进行联合分析。前提条件 您...
静态列（static column）实战
场景 需要 Cassandra 中使用一张表记录用户基本信息（比如 email、密码等）以及用户状态更新。通常来说，用户的基本信息一般很少会变动，但是用户状态会经常变化，如果每次状态更新都把用户基本信息都加进去，将浪费大量的存储空间。为了...
创建集群
通过阿里云E-MapReduce（简称EMR），您可以轻松构建和运行Hadoop、Spark、Hive、Presto等开源大数据框架，以进行大规模数据处理和分析等操作。本文为您介绍在EMR on ECS上创建集群的操作步骤和相关配置，帮助您快速搭建和管理大数据集群。...
创建DataFlow Kafka集群
高级设置 根据需求配置 ECS应用角色：当用户的程序在EMR计算节点上运行时，可不填写阿里云AccessKey来访问相关的云服务（例如OSS），EMR会自动申请一个临时AccessKey来授权本次访问。ECS应用角色 用于控制这个AccessKey的权限。引导操作：...
获取用户凭证报告
通过RAM您可以生成和下载阿里云账号和RAM用户的登录凭证信息，包括控制台登录密码、访问密钥（AccessKey）和多因素认证（MFA）。您可以使用用户凭证报告进行合规性审计。使用限制 如果RAM用户数量超过3500个，将无法生成用户凭证报告。操作...
2022年
新说明 MaxCompute支持通过使用阿里云的访问控制RAM（Resource Access Management）服务授权，将您云账号下MaxCompute资源的访问及管理权限授予RAM用户和RAM角色，按需为用户分配最小权限，从而降低企业的信息安全风险。本文为您介绍...
通过SSH隧道方式访问开源组件Web UI
在E-MapReduce（简称EMR）集群中，为了确保集群安全，Hadoop、Spark和Flink等开源组件的Web UI的端口均未对外开放。鉴于此安全机制，您无法直接访问这些组件的管理界面。EMR提供了控制台和SSH隧道两种方式进行安全访问。本文为您介绍如何...
设置登录方式
本文为您介绍如何设置云SSO用户的登录方式，包括用户名密码登录和单点登录（SSO登录）。登录方式 云SSO提供了以下两种用户登录方式，且只能启用一种登录方式。例如：启用用户名密码登录的时候，会自动禁用单点登录，反之亦然。用户名密码...
静态用户名密码管理
开源客户端访问 云消息队列 RabbitMQ 版 服务端时，需要传入用户名和密码进行权限认证，认证通过才允许访问服务端。本文介绍如何在 云消息队列 RabbitMQ 版 控制台创建和删除静态用户名密码。背景信息 用户名和密码可通过阿里云访问控制...
Hive Metastore使用加密文件访问RDS
执行以下命令，将凭据文件移动到Hive的配置文件目录，并将该文件的所有者更改为hive用户或hadoop用户。DataLake或Custom集群类型 sudo mv/tmp/hive.jceks$HIVE_CONF_DIR sudo chown hive$HIVE_CONF_DIR/hive.jceks Hadoop集群类型 sudo mv/...
管理用户
执行以下命令，重置用户密码。from django.contrib.auth.models import User user=User.objects.get(username='<your_username>')user.set_password('<your_new_password>')user.save()说明 代码中的和需要替换为待重置密码的用户名和新...
准备工作
数据准备 产品 数据收集 说明 E-MapReduce的Hadoop集群 登录EMR Header服务器的IP地址、用户名和密码。用于通过远程登录工具（如putty等）登录EMR Header服务器进行Spark流批处理。表格存储Tablestore 访问表格存储服务的AccessKey ID和...
阿里云短信接入最佳实践
变量参数 含义${authType} 适用于登录通知，表示用户当前登录的方式${username} 用户名${minutes} 验证码的有效期${password} 用户密码${code} 验证码${lastTime} 适用于修改密码通知的短信模板中，表示修改密码的最晚时间${address} 登录...
忘记客户端登录密码怎么办？
普通终端用户忘记阿里云网络客户端登录密码，需要联系管理员重置密码。管理员可以通过下述步骤为终端用户修改密码。操作步骤 登录 智能接入网关控制台。在左侧导航栏，选择 智能接入网关APP>APP实例管理。在顶部菜单栏，选择目标区域。在 ...
使用限制
用户、密码和数据库管理 HybridDB for MySQL默认需要通过管理控制台进行用户、密码和数据库管理（包括创建、删除、修改权限、修改密码）。同时，HybridDB for MySQL也支持用户通过数据库客户端自行管理用户、密码和数据库。
远程连接ECS实例时提示用户名或密码不正确
如果通过VNC和其他远程登录方式都无法远程登录ECS实例，且提示用户名或密码错误，则说明用户名或密码不正确，可参见 重置实例登录密码，重置密码后再进行尝试。Linux系统：说明 如果非root用户登录Linux实例，建议先使用root用户登录实例后...
通过密码认证登录Linux实例
您可以在您本地的Windows、Linux、macOS、Android、iOS等环境中，使用用户名密码验证的方式远程连接Linux实例。前提条件 已创建实例。已为实例设置登录密码。如果未设置或密码丢失，必须重置实例密码。具体操作，请参见 重置实例登录密码。...
配置自建RDS
执行以下命令，切换为hadoop用户。su-hadoop 执行以下命令，进行初始化。schematool-initSchema-dbType mysql 待初始化成功后，则可以使用自建的RDS作为Hive的元数据库。说明 在初始化之前，Hive的Hive MetaStore、HiveServer2和Spark的...
创建Hadoop计算源
Hadoop计算源用于绑定Dataphin项目空间与Hadoop项目，为Dataphin项目提供处理离线计算任务的计算源。如果Dataphin系统的计算引擎设置为Hadoop，则只有项目空间添加了Hadoop计算源，才支持规范建模、即席查询、Hive任务、通用脚本等功能。...
密码策略
提醒修改密码：最宽松的处理方式。每次使用过期密码登录，均会进行改密提醒，但用户每次均可跳过。密码过期只对用户登录产生影响，不会对账户本身的状态产生影响。密码历史 IDaaS 允许管理员开启密码历史检查，在用户修改密码时，将禁止...
云实例监控
用户名和密码 InfluxDB的用户名和密码。单击 写入数据库验证，将自动进行InfluxDB的数据库的用户名和密码验证。说明 如果用户存在，将验证是否对指定的数据库具备读写权限。如果用户不存在，将自动创建用户。执行创建。说明 如果失败，会...
使用Alibaba Cloud Linux等保2.0三级版镜像
由于等保合规的要求，等保镜像不支持使用密钥对的方式远程连接ECS实例，只支持用户名密码的方式。因此 登录凭证 请选择 自定义密码。远程连接ECS实例，并手动进行等级保护加固的配置。按照《GB/T22239-2019信息安全技术网络安全等级保护...
用户管理
本文介绍如何通过Databricks 数据洞察的用户管理功能，管理集群DDI用户。DDI用户信息存储在集群自带的OpenLDAP中，主要用于在DDI集群内的身份认证。DDI用户可以用于访问链接与端口，查看组件Web UI时的用户身份认证，也可以在开启组件LDAP...
Workbench工具远程连接Linux实例时提示“用户名或密码...
登录实例失败，原因：用户名或密码不正确 问题原因 可能导致此问题的常见原因如下：忘记密码。复制粘贴或手动输入了错误的账号或密码。Linux实例的SSH配置不允许root用户登录。解决方案 说明 如果您对实例或数据有修改、变更等风险操作，...
- 产品推荐
- 这些文档可能帮助您