news 2026/5/10 3:07:39

CANN/asc-devkit And API文档

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
CANN/asc-devkit And API文档

And

【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言,原生支持C和C++标准规范,主要由类库和语言扩展层构成,提供多层级API,满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit

产品支持情况

产品

是否支持

Ascend 950PR/Ascend 950DT

Atlas A3 训练系列产品 / Atlas A3 推理系列产品

Atlas A2 训练系列产品 / Atlas A2 推理系列产品

Kirin X90

Kirin 9030

功能说明

每对elements按位与运算,公式表达如下:

函数原型

  • 整个tensor参与计算

    dst = src0 & src1;
  • tensor前n个数据计算

    template <typename T> __aicore__ inline void And(const LocalTensor<T>& dst, const LocalTensor<T>& src0, const LocalTensor<T>& src1, const int32_t& count)
  • tensor高维切分计算

    • mask逐bit模式

      template <typename T, bool isSetMask = true> __aicore__ inline void And(const LocalTensor<T>& dst, const LocalTensor<T>& src0, const LocalTensor<T>& src1, uint64_t mask[], const uint8_t repeatTime, const BinaryRepeatParams& repeatParams)
    • mask连续模式

      template <typename T, bool isSetMask = true> __aicore__ inline void And(const LocalTensor<T>& dst, const LocalTensor<T>& src0, const LocalTensor<T>& src1, uint64_t mask, const uint8_t repeatTime, const BinaryRepeatParams& repeatParams)

参数说明

表 1模板参数说明

参数名

描述

T

操作数数据类型。

Atlas A2 训练系列产品 / Atlas A2 推理系列产品,支持的数据类型为:int16_t、uint16_t。

Atlas A3 训练系列产品 / Atlas A3 推理系列产品,支持的数据类型为:int16_t、uint16_t。

Ascend 950PR/Ascend 950DT,支持的数据类型为:int8_t、uint8_t、int16_t、uint16_t、int32_t、uint32_t、int64_t、uint64_t。

Kirin X90,支持的数据类型为:int16_t、uint16_t。

Kirin 9030,支持的数据类型为:int16_t、uint16_t。

isSetMask

是否在接口内部设置mask。

  • true,表示在接口内部设置mask。
  • false,表示在接口外部设置mask,开发者需要使用SetVectorMask接口设置mask值。这种模式下,本接口入参中的mask值必须设置为占位符MASK_PLACEHOLDER。

表 2参数说明

参数名

输入/输出

描述

dst

输出

目的操作数。

类型为LocalTensor,支持的TPosition为VECIN/VECCALC/VECOUT。

LocalTensor的起始地址需要32字节对齐。

src0、src1

输入

源操作数。

类型为LocalTensor,支持的TPosition为VECIN/VECCALC/VECOUT。

LocalTensor的起始地址需要32字节对齐。

两个源操作数的数据类型需要与目的操作数保持一致。

count

输入

参与计算的元素个数。

mask[]/mask

输入

mask用于控制每次迭代内参与计算的元素。

  • 连续模式:表示前面连续的多少个元素参与计算。取值范围和操作数的数据类型有关,数据类型不同,每次迭代内能够处理的元素个数最大值不同。当操作数为16位时,mask∈[1, 128];当操作数为32位时,mask∈[1, 64];当操作数为64位时,mask∈[1, 32]。

repeatTime

输入

重复迭代次数。矢量计算单元,每次读取连续的256Bytes数据进行计算,为完成对输入数据的处理,必须通过多次迭代(repeat)才能完成所有数据的读取与计算。repeatTime表示迭代的次数。

repeatParams

输入

控制操作数地址步长的参数。BinaryRepeatParams类型,包含操作数相邻迭代间相同datablock的地址步长,操作数同一迭代内不同datablock的地址步长等参数。

返回值说明

约束说明

  • 操作数地址对齐要求请参见通用地址对齐约束。

  • 操作数地址重叠约束请参考通用地址重叠约束。

  • 使用整个tensor参与计算接口符号重载时,运算量为目的LocalTensor的总长度。

  • 针对Ascend 950PR/Ascend 950DT,uint8_t/int8_t/uint64_t/int64_t数据类型仅支持tensor前n个数据计算接口。

  • 特别地,针对uint32_t/int32_t类型的And操作,支持通过ReinterpretCast的方式来实现:使用Local Tensor的ReinterpretCast转换成uint16_t/int16_t后再调用And进行计算。直接传入uint32_t/int32_t类型的数据,在不同版本型号上表现会有所差异,考虑到算子在各个版本中的兼容性,不建议使用这种直接传入的方式:

    • 整个tensor参与计算和tensor前n个数据计算接口支持传入uint32_t/int32_t类型,但是tensor前n个数据计算的count需要设置为期望计算个数的2倍才能精度符合预期;tensor高维切分计算接口直接编译报错提示不支持该数据类型。上述说明适用于以下型号:

      Atlas A2 训练系列产品/Atlas A2 推理系列产品

      Atlas A3 训练系列产品/Atlas A3 推理系列产品

调用示例

  • tensor高维切分计算样例-mask连续模式

    uint64_t mask = 128; // repeatTime = 4,一次迭代计算128个数,共计算512个数 // dstBlkStride, src0BlkStride, src1BlkStride = 1,单次迭代内数据连续读取和写入 // dstRepStride, src0RepStride, src1RepStride = 8,相邻迭代间数据连续读取和写入 AscendC::And(dstLocal, src0Local, src1Local, mask, 4, { 1, 1, 1, 8, 8, 8 });
  • tensor高维切分计算样例-mask逐bit模式

    uint64_t mask[2] = { UINT64_MAX, UINT64_MAX }; // repeatTime = 4,一次迭代计算128个数,共计算512个数 // dstBlkStride, src0BlkStride, src1BlkStride = 1,单次迭代内数据连续读取和写入 // dstRepStride, src0RepStride, src1RepStride = 8,相邻迭代间数据连续读取和写入 AscendC::And(dstLocal, src0Local, src1Local, mask, 4, { 1, 1, 1, 8, 8, 8 });
  • tensor前n个数据计算样例

    AscendC::And(dstLocal, src0Local, src1Local, 512);

结果示例如下:

输入数据src0Local:[1 2 3 ... 512] 输入数据src1Local:[513 512 511 ... 2] 输出数据dstLocal:[1 0 3 ... 0]

【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言,原生支持C和C++标准规范,主要由类库和语言扩展层构成,提供多层级API,满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit

创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/5/10 3:02:58

Allegro PCB设计许可不够用?不想买新许可,浮动许可回收

Allegro PCB设计许可不够用&#xff1f;不想买新许可&#xff0c;浮动许可回收能救命&#xff01;你是不是经常在深夜加班时接到开发主管的电话"许可证不够&#xff0c;项目要停"&#xff1f;我们几个项目组去年就这么被干趴下的。当时公司采购部说要花钱买许可证&am…

作者头像 李华
网站建设 2026/5/10 3:00:14

基于Helm与Kubernetes的5G核心网云原生部署实践

1. 项目概述与核心价值最近在折腾5G核心网部署&#xff0c;发现了一个宝藏项目&#xff1a;Orange-OpenSource/towards5gs-helm。这可不是一个简单的Helm Chart仓库&#xff0c;它背后是Orange这家全球领先的电信运营商的开源实践&#xff0c;目标是把复杂的5G核心网组件&#…

作者头像 李华
网站建设 2026/5/10 2:58:49

CANN/hcomm通信配置能力定义

HcclCommConfigCapability 【免费下载链接】hcomm HCOMM&#xff08;Huawei Communication&#xff09;是HCCL的通信基础库&#xff0c;提供通信域以及通信资源的管理能力。 项目地址: https://gitcode.com/cann/hcomm 功能说明 定义通信域初始化时支持的相关配置信息。…

作者头像 李华
网站建设 2026/5/10 2:57:47

基于Agent-as-a-Service架构的多智能体编排平台设计与实现

1. 项目概述与核心价值最近在GitHub上看到一个挺有意思的项目&#xff0c;叫agentbnb&#xff0c;作者是Xiaoher-C。光看名字&#xff0c;你可能会联想到Airbnb&#xff0c;但它的内核其实是一个智能体&#xff08;Agent&#xff09;的“托管平台”。简单来说&#xff0c;它提供…

作者头像 李华
网站建设 2026/5/10 2:54:41

本地TTS服务器部署指南:热冷混合架构与OpenAI兼容API实践

1. 项目概述&#xff1a;一个为本地AI应用量身打造的高性能TTS服务器如果你正在本地运行像OpenClaw或Open-WebUI这样的AI智能体&#xff0c;并且希望语音合成这个环节也完全留在你的私有网络内&#xff0c;不让任何音频数据流出&#xff0c;那么你很可能需要一个既强大又灵活的…

作者头像 李华