CANN/asc-devkit FP8数据转换函数

CANN/asc-devkit FP8数据转换函数 __half22hif82_rna【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言原生支持C和C标准规范主要由类库和语言扩展层构成提供多层级API满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit产品支持情况产品是否支持Ascend 950PR/Ascend 950DT√Atlas A3 训练系列产品/Atlas A3 推理系列产品xAtlas A2 训练系列产品/Atlas A2 推理系列产品xAtlas 200I/500 A2 推理产品xAtlas 推理系列产品AI CorexAtlas 推理系列产品Vector CorexAtlas 训练系列产品x功能说明将half2类型数据的两个分量遵循CAST_ROUND模式转换为hifloat8_t精度返回转换后的hifloat8x2_t类型数据。函数原型inline hifloat8x2_t __half22hif82_rna(const half2 x)参数说明表 1参数说明参数名输入/输出描述x输入源操作数。返回值说明将输入的两个分量遵循CAST_ROUND模式转换成的hifloat8x2_t类型数据。约束说明SIMT编程场景当前不支持使用该接口。需要包含的头文件使用该接口需要包含simt_api/asc_fp8.h头文件。#include simt_api/asc_fp8.h调用示例SIMD与SIMT混合编程场景// 使用短向量可提升数据搬运效率 __simt_vf__ __launch_bounds__(1024) inline void simt_half22hif82_rna(__gm__ half2* input, __gm__ hifloat8x2_t* output, uint32_t input_total_length) { uint32_t idx blockIdx.x * blockDim.x threadIdx.x; // 每个线程处理1个half2类型的数据即2个half类型的数据因此idx input_total_length / 2的线程不处理数据 if (idx input_total_length /2) { return; } output[idx] __half22hif82_rna(input[idx]); } __global__ __vector__ void cast_kernel(__gm__ half* input, __gm__ uint8_t* output, uint32_t input_total_length) { asc_vf_callsimt_half22hif82_rna(dim3(1024), (__gm__ half2*)input, (__gm__ hifloat8x2_t*)output, input_total_length); }【免费下载链接】asc-devkit本项目是CANN 推出的昇腾AI处理器专用的算子程序开发语言原生支持C和C标准规范主要由类库和语言扩展层构成提供多层级API满足多维场景算子开发诉求。项目地址: https://gitcode.com/cann/asc-devkit创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考