使用TmpBuf实现VectorAdd样例【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言原生支持C和C标准规范主要由类库和语言扩展层构成提供多层级API满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit概述本样例基于TPipe::InitBuffer接口初始化TBuf内存空间并在计算过程中使用TBuf临时缓冲区进行数据转换实现了bfloat16_t数据类型的向量加法Add样例。注意本样例仅适用于基于TPipe和TQue的编程模式。本样例支持的产品及CANN软件版本产品CANN软件版本Ascend 950PR/Ascend 950DT CANN 9.1.0Atlas A3 训练系列产品/Atlas A3 推理系列产品 CANN 9.0.0Atlas A2 训练系列产品/Atlas A2 推理系列产品 CANN 9.0.0目录结构介绍├── tmp_buffer │ ├── scripts │ │ ├── gen_data.py // 输入数据和真值数据生成脚本 │ │ └── verify_result.py // 验证输出数据和真值数据是否一致的验证脚本 │ ├── CMakeLists.txt // 编译工程文件 │ ├── data_utils.h // 数据读入写出函数 │ ├── tmp_buffer.asc // Ascend C样例实现 调用样例 │ └── README.md // 样例说明文档样例描述样例功能本样例调用Cast接口将bfloat16_t类型的输入数据转换为float类型存入TBuf临时缓冲区完成Add计算后再调用Cast接口转换回bfloat16_t类型。样例规格样例类型(OpType)Add样例输入nameshapedata typeformatx[1, 2048]bfloat16_tNDy[1, 2048]bfloat16_tND样例输出z[1, 2048]bfloat16_tND核函数名tmp_buffer_custom样例实现Kernel实现调用TPipe::InitBuffer接口为TQue和TBuf分配内存空间其中TBuf用于存储临时数据。调用DataCopy基础API将数据从GMGlobal Memory搬运到UBUnified Buffer。调用Cast接口将bfloat16_t类型数据转换为float类型并存入TBuf临时缓冲区。调用Add接口对两个输入tensor执行加法操作。调用Cast接口将float类型的计算结果转换为bfloat16_t类型并存入TQue分配的UBUnified Buffer空间。调用DataCopy基础API将计算结果从UBUnified Buffer搬运至GMGlobal Memory。调用实现使用内核调用符调用核函数。编译运行在本样例根目录下执行如下步骤编译并执行样例。配置环境变量请根据当前环境上CANN开发套件包的安装方式配置环境变量。source ${install_path}/cann/set_env.sh说明${install_path}为CANN包安装目录未指定安装目录时默认安装至/usr/local/Ascend下。样例执行在本样例目录下执行如下命令。mkdir -p build cd build; # 创建并进入build目录 cmake -DCMAKE_ASC_ARCHITECTURESdav-2201 ..;make -j; # 编译工程默认npu模式 python3 ../scripts/gen_data.py # 生成测试输入数据 ./demo # 执行编译生成的可执行程序执行样例 python3 ../scripts/verify_result.py output/output.bin output/golden.bin # 验证输出结果是否正确使用 CPU调试 或 NPU仿真 模式时添加-DCMAKE_ASC_RUN_MODEcpu或-DCMAKE_ASC_RUN_MODEsim参数即可。示例如下cmake -DCMAKE_ASC_RUN_MODEcpu -DCMAKE_ASC_ARCHITECTURESdav-2201 ..;make -j; # cpu调试模式 cmake -DCMAKE_ASC_RUN_MODEsim -DCMAKE_ASC_ARCHITECTURESdav-2201 ..;make -j; # NPU仿真模式注意切换编译模式前需清理 cmake 缓存可在 build 目录下执行rm CMakeCache.txt后重新 cmake。编译选项说明选项可选值说明CMAKE_ASC_RUN_MODEnpu默认、cpu、sim运行模式NPU 运行、CPU调试、NPU仿真CMAKE_ASC_ARCHITECTURESdav-2201默认、dav-3510NPU 架构dav-2201 对应 Atlas A2 训练系列产品/Atlas A2 推理系列产品和 Atlas A3 训练系列产品/Atlas A3 推理系列产品dav-3510 对应 Ascend 950PR/Ascend 950DT执行结果执行结果如下说明精度对比成功test pass!【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言原生支持C和C标准规范主要由类库和语言扩展层构成提供多层级API满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考
CANN/asc-devkit使用TmpBuf实现向量加法
使用TmpBuf实现VectorAdd样例【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言原生支持C和C标准规范主要由类库和语言扩展层构成提供多层级API满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit概述本样例基于TPipe::InitBuffer接口初始化TBuf内存空间并在计算过程中使用TBuf临时缓冲区进行数据转换实现了bfloat16_t数据类型的向量加法Add样例。注意本样例仅适用于基于TPipe和TQue的编程模式。本样例支持的产品及CANN软件版本产品CANN软件版本Ascend 950PR/Ascend 950DT CANN 9.1.0Atlas A3 训练系列产品/Atlas A3 推理系列产品 CANN 9.0.0Atlas A2 训练系列产品/Atlas A2 推理系列产品 CANN 9.0.0目录结构介绍├── tmp_buffer │ ├── scripts │ │ ├── gen_data.py // 输入数据和真值数据生成脚本 │ │ └── verify_result.py // 验证输出数据和真值数据是否一致的验证脚本 │ ├── CMakeLists.txt // 编译工程文件 │ ├── data_utils.h // 数据读入写出函数 │ ├── tmp_buffer.asc // Ascend C样例实现 调用样例 │ └── README.md // 样例说明文档样例描述样例功能本样例调用Cast接口将bfloat16_t类型的输入数据转换为float类型存入TBuf临时缓冲区完成Add计算后再调用Cast接口转换回bfloat16_t类型。样例规格样例类型(OpType)Add样例输入nameshapedata typeformatx[1, 2048]bfloat16_tNDy[1, 2048]bfloat16_tND样例输出z[1, 2048]bfloat16_tND核函数名tmp_buffer_custom样例实现Kernel实现调用TPipe::InitBuffer接口为TQue和TBuf分配内存空间其中TBuf用于存储临时数据。调用DataCopy基础API将数据从GMGlobal Memory搬运到UBUnified Buffer。调用Cast接口将bfloat16_t类型数据转换为float类型并存入TBuf临时缓冲区。调用Add接口对两个输入tensor执行加法操作。调用Cast接口将float类型的计算结果转换为bfloat16_t类型并存入TQue分配的UBUnified Buffer空间。调用DataCopy基础API将计算结果从UBUnified Buffer搬运至GMGlobal Memory。调用实现使用内核调用符调用核函数。编译运行在本样例根目录下执行如下步骤编译并执行样例。配置环境变量请根据当前环境上CANN开发套件包的安装方式配置环境变量。source ${install_path}/cann/set_env.sh说明${install_path}为CANN包安装目录未指定安装目录时默认安装至/usr/local/Ascend下。样例执行在本样例目录下执行如下命令。mkdir -p build cd build; # 创建并进入build目录 cmake -DCMAKE_ASC_ARCHITECTURESdav-2201 ..;make -j; # 编译工程默认npu模式 python3 ../scripts/gen_data.py # 生成测试输入数据 ./demo # 执行编译生成的可执行程序执行样例 python3 ../scripts/verify_result.py output/output.bin output/golden.bin # 验证输出结果是否正确使用 CPU调试 或 NPU仿真 模式时添加-DCMAKE_ASC_RUN_MODEcpu或-DCMAKE_ASC_RUN_MODEsim参数即可。示例如下cmake -DCMAKE_ASC_RUN_MODEcpu -DCMAKE_ASC_ARCHITECTURESdav-2201 ..;make -j; # cpu调试模式 cmake -DCMAKE_ASC_RUN_MODEsim -DCMAKE_ASC_ARCHITECTURESdav-2201 ..;make -j; # NPU仿真模式注意切换编译模式前需清理 cmake 缓存可在 build 目录下执行rm CMakeCache.txt后重新 cmake。编译选项说明选项可选值说明CMAKE_ASC_RUN_MODEnpu默认、cpu、sim运行模式NPU 运行、CPU调试、NPU仿真CMAKE_ASC_ARCHITECTURESdav-2201默认、dav-3510NPU 架构dav-2201 对应 Atlas A2 训练系列产品/Atlas A2 推理系列产品和 Atlas A3 训练系列产品/Atlas A3 推理系列产品dav-3510 对应 Ascend 950PR/Ascend 950DT执行结果执行结果如下说明精度对比成功test pass!【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言原生支持C和C标准规范主要由类库和语言扩展层构成提供多层级API满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考
