分组向量检索
向量检索服务DashVector支持分组向量检索，对于上面的两个场景可以通过 分组检索Doc 接口分别设置 group_by_field 为“文档ID”和“商品ID”，然后执行分组向量检索。使用示例 前提条件 已创建Cluster：创建Cluster。已获得API-KEY：API-...
列运算
本文为您介绍DataFrame API中的列运算。列运算 from odps.df import DataFrame iris=DataFrame(o.get_table('pyodps_iris'))lens=DataFrame(o.get_table...您可以使用 func 接口，该接口默认函数返回值为STRING，可以用 rtype 参数指定返回值...
从Spark导入数据至ClickHouse
rand.nextLong()).mkString("")Test(i,randString,rand.nextBoolean(),rand.nextLong(),rand.nextGaussian())})val df=spark.createDataFrame(rdd)df.write.mode(SaveMode.Append).jdbc(jdbcUrl,tableName,getCKJdbcProperties(user,...
数学函数
RAND 命令格式 double rand(bigint)命令说明 返回DOUBLE类型的随机数，返回值区间是0～1。参数说明 seed：可选。BIGINT类型。随机数种子，决定随机数序列的起始值。说明 您可以通过 seed 确定随机数序列，seed 确定后，即可固定该函数的...
Misc相关
示例 r=rand(1,100)rand_hit 函数详细信息，请参见下表：项目 描述 语法 rand_hit(ratio)。说明 按指定概率返回真假。参数 ratio：为真概率，有效值范围为[0-100]。返回值 按ratio概率返回 true。例如：当ratio为100时，返回 true，当ratio...
更新Doc
当类型为Tuple时，可以为(id,vector)或(id,fields)顺序，等同于 Doc 对象。Doc 对象的fields参数，可自由设置“任意”的KeyValue数据，Key必须为 str 类型，Value必须为 str or int or bool or float。当Key在创建Collection时预先定义过，...
分组检索Doc
by_demo')ret=collection.insert([('1',np.random.rand(4),{'document_id':'paper-01','chunk_id':1,'content':'xxxA'}),('2',np.random.rand(4),{'document_id':'paper-01','chunk_id':2,'content':'xxxB'}),('3',np.random.rand(4),{'...
插入Doc
当类型为Tuple时，可以为(vector)、(id,vector)、(vector,fields)或(id,vector,fields)顺序，等同于 Doc 对象。Doc 对象的fields参数，可自由设置“任意”的KeyValue数据，Key必须为 str 类型，Value必须为 str or int or bool or float。...
分歧争端机
变化量都超过阈值，则进行下一步处理 if((y_change>SHAKE_Y_THRESHOLD)&(z_change>SHAKE_Z_THRESHOLD)){/生成100以下的随机数 rand_value=rand()%100;将随机数转化为需要显示的字符 itoa(rand_value,showstr,10);清除屏幕memory OLED_Clear...
插入或更新Doc
当类型为Tuple时，可以为(vector)、(id,vector)、(vector,fields)或(id,vector,fields)顺序，等同于 Doc 对象。Doc 对象的fields参数，可自由设置“任意”的KeyValue数据，Key必须为 str 类型，Value必须为 str or int or bool or float。...
HDFS与ClickHouse间的数据导入与导出
您可以通过HDFS表引擎或表函数读写数据。本文为您介绍如何将HDFS中的数据导入至ClickHouse集群以及如何从ClickHouse集群导出数据到HDFS。前提条件 已创建Hadoop集群，详情请参见 创建集群。已创建ClickHouse集群，详情请参见 创建...
鉴权代码示例
s-%s-%s-%s"%(path,exp,rand,uid,key)hashvalue=md5sum(sstring)auth_key="%s-%s-%s-%s"%(exp,rand,uid,hashvalue)if args:return"%s%s%s%s&auth_key=s"%(scheme,host,path,args,auth_key)else:return"%s%s%s%s?auth_key=s"%(scheme,host,...
鉴权代码示例
s-%s-%s-%s"%(path,exp,rand,uid,key)hashvalue=md5sum(sstring)auth_key="%s-%s-%s-%s"%(exp,rand,uid,hashvalue)if args:return"%s%s%s%s&auth_key=s"%(scheme,host,path,args,auth_key)else:return"%s%s%s%s?auth_key=s"%(scheme,host,...
AI编译器优化
highfeature_t=torch.rand(batch_size,448,4,50).cuda()attention_sum_t=torch.rand(batch_size,1,4,50).cuda()decoder_attention_t=torch.rand(batch_size,1,4,50).cuda()et_mask=torch.rand(batch_size,4,50).cuda()return(decoder_input...
实时精准营销（人群圈选）
您可以通过RDS PostgreSQL实现实时精准营销，快速圈选目标用户。前提条件 创建RDS PostgreSQL实例。说明 本文介绍的方案三需要使用 位图计算（roaringbitmap）插件，因此，如果使用方案三，请确保RDS PostgreSQL实例为12或以上版本，本示例...
OSS与ClickHouse间的数据导入与导出
CREATE TABLE IF NOT EXISTS product.orders_all ON CLUSTER cluster_emr(`uid` UInt32,`date` DateTime,`skuId` UInt32,`order_revenue` UInt32)Engine=Distributed(cluster_emr,product,orders,rand());说明 示例中的 {shard} 和 {...
鉴权方式A说明
sstring="URI-Timestamp-rand-uid-PrivateKey"（URI是用户的请求对象相对地址，不包含参数，如/Filename）md5hash=md5sum(sstring)鉴权逻辑说明 DCDN 服务器接到资源访问请求后，判断最终生成鉴权URL请求中的 timestamp+鉴权URL有效时长 ...
步骤五：启动实例并插入数据
WHILE i(id,buyer_id,sku_type,sku_quantity,gmt_create)VALUES(default,FLOOR(RAND()*10),getSkuId(),FLOOR(RAND()*10),current_timestamp());SET i=i+1;SELECT SLEEP(3);END WHILE;END$DELIMITER;执行PROCEDURE生成数据并写入 CALL ...
步骤五：启动实例并插入数据
WHILE i(id,buyer_id,sku_type,sku_quantity,gmt_create)VALUES(default,FLOOR(RAND()*10),getSkuId(),FLOOR(RAND()*10),current_timestamp());SET i=i+1;SELECT SLEEP(3);END WHILE;END$DELIMITER;执行PROCEDURE生成数据并写入 CALL ...
鉴权方式A说明
sstring="URI-Timestamp-rand-uid-PrivateKey"（URI是用户的请求对象相对地址，不包含参数，如/Filename）md5hash=md5sum(sstring)鉴权逻辑说明 CDN 服务器接到资源访问请求后，判断最终生成鉴权URL请求中的 timestamp+鉴权URL有效时长 ...
概述
import mars.tensor as mt a=mt.random.rand(10000,50)b=mt.random.rand(50,5000)a.dot(b).execute()Mars DataFrame接口 和Pandas保持一致，且支持大规模数据处理和分析。示例代码如下。import mars.dataframe as md ratings=md.read_csv('...
鉴权方式A说明
sstring="URI-timestamp-rand-uid-PrivateKey"md5hash=md5sum(sstring)URI：用户的请求对象相对地址，不包含参数，例如：/Filename。PrivateKey：视频点播控制台配置的主Key或备Key，二者皆可。配置方法请参见 开启鉴权并配置鉴权URL。md5...
测试块存储性能
读取和写入的值可以以read、write格式单独指定，其中任何一个都可以为空以将该值保留为其默认值。size 表示测试文件大小。FIO会将指定的文件大小全部读/写完成，然后才停止测试，除非受到其他选项（例如运行时）的限制。如果未指定该参数，...
使用说明
import mars.dataframe as md import mars.tensor as mt md.DataFrame(mt.random.rand(10,3)).execute()#使用execute方法自动提交任务至创建的集群。停止并释放集群 当Mars集群超过3天会被自动释放。不再需要使用Mars集群时，您可以通过...
导入密钥材料
当您创建密钥材料来源为外部的密钥时，KMS不会为您创建的用户主密钥（CMK）生成密钥材料，此时您可以将自己的密钥材料导入到CMK中。本文为您介绍如何导入外部密钥材料。背景信息 用户主密钥（CMK）是KMS的基本资源，由密钥ID、基本元数据...
数学函数
SQL分析提供了常见的数学函数供您在开发过程中使用，您可以根据实际需要选择合适的数学函数，进行数据计算、数据转换相关操作。本文为您提供SQL分析支持的数学函数的命令格式、参数说明及示例，指导您使用数学函数完成开发。SQL分析支持的...
X-Engine性价比优势
实例中创建32张表，每张表1亿条记录，最终TokuDB和X-Engine分别占用411 GB和400 GB磁盘空间，由此可见X-Engine可以替代TokuDB，满足您的低成本存储需求。Sysbench测试命令：#TokuDB prepare数据库 sysbench/usr/share/sysbench/oltp_update...
向量动态量化
type':'DT_VECTOR_INT8' })print(ret)collection=client.get('quantize_demo')#正常写入向量数据，该向量数据会按照创建collection时定义的量化策略自动进行量化 collection.insert(('1',np.random.rand(768).astype('float32')))#通过id...
概述
AnalyticDB MySQL Spark全密态计算引擎是首批通过信通院隐私计算可信执行环境《产品性能》和《安全功能》两项认证的产品，它可以加密敏感数据，避免数据泄露。您可以通过本文，了解Spark全密态计算引擎在安全合规等领域的应用场景、功能...
优化PyTorch模型
dummy=torch.rand(1,3,224,224).cuda()#构造测试数据。调用 blade.optimize 函数进行模型优化，详细的参数解释请参见 Python接口文档。模型优化的代码示例如下。如果您在优化中遇到问题，可以加入Blade客户群，咨询相关人员，详情请参见 ...
X-Engine测试最佳实践
mysql-password=*"time="-time=3600"database="-mysql-db=sbtest"tables="-tables=32"threads="-threads=512"table_size="-table_size=1000000"distribution="-rand-type=pareto-rand-pareto-h=0.9"#formulate the sysbench command cmd='...
Sysbench测试（标准版）
也可以通过GitHub下载开源版本的Sysbench，请参见 下载链接。测试场景说明 数据量：不同规格采用不同数据量压测。压测场景：使用Sysbench oltp_read_write场景压测。压测时长：每个场景300秒。实例参数设置：全部采用开箱参数，不手动设置...
内置函数概述
Misc相关 包括：base64_enc、base64_dec、url_escape、url_unescape、rand、rand_hit、crc、tonumber、base64_enc_safe、base64_dec_safe、randomseed。数组类型相关 包括：arr_concat、arr_insert、arr_remove、arr_sort、arr_len。请求...
内置函数概述
Misc相关 Misc相关函数包括：base64_enc、base64_dec、url_escape、url_unescape、rand、rand_hit、crc、tonumber、base64_enc_safe、base64_dec_safe、randomseed。数组类型相关 数组类型相关函数包括：arr_concat、arr_insert、arr_...
使用PAI Python SDK训练和部署PyTorch模型
PAI Python SDK 是PAI提供的Python SDK，提供了更易用的...训练作业超参 用户可以通过读取${PAI_CONFIG_DIR}/hyperparameters.json 文件获取到训练作业的超参，也可以通过环境变量获取到训练作业超参，详细可见文档：训练作业预置环境变量 ...
内置函数概述
Misc相关 Misc相关函数包括：base64_enc、base64_dec、url_escape、url_unescape、rand、rand_hit、crc、tonumber、base64_enc_safe、base64_dec_safe、randomseed。数组类型相关 数组类型相关函数包括：arr_concat、arr_insert、arr_...
性能白皮书
.inserts[1]:set(id)param[tnum].inserts[2]:set(k)param[tnum].inserts[3]:set_rand_str(large_template)param[tnum].inserts[4]:set_rand_str(large_template)stmt[tnum].deletes:execute()stmt[tnum].inserts:execute()end end function...
将RDS PostgreSQL作为RDS MySQL实时分析库
背景信息 当需要使用RDS PostgreSQL数据库特有的功能来分析MySQL中的数据，使用GIS处理时空数据或进行用户画像分析时，可以使用DTS功能将RDS MySQL中的数据实时迁移到RDS PostgreSQL数据库中，使PostgreSQL数据库作为MySQL的实时分析库。...
基于透传协议开发虚拟光照度探测器
} 重新将代码编译运行之后可以到云端查看属性的上报日志信息如下。说明：由于使用的软件定时器不是很准，上报的时间间隔并非是严格的5s。光照度过高告警上报 默认阈值为99，当超过该值时会触发光照度过高告警。Uint8_t threshold=99;告警...
Go SDK快速入门
通过line与offset参数可以实现翻页效果。例如首次查询line=100、offset=0,第二次查询line=100、offset=100。当语句包含分析语句时，line、offset、reverse取值无效，以分析语句的limit、offset、order by子句为准，此时建议line、offset、...
- 产品推荐
- 这些文档可能帮助您