news 2026/9/10 2:47:24

CANN/ge GetKernelArgs API文档

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
CANN/ge GetKernelArgs API文档

GetKernelArgs

【免费下载链接】geGE(Graph Engine)是面向昇腾的图编译器和执行器,提供了计算图优化、多流并行、内存复用和模型下沉等技术手段,加速模型执行效率,减少模型内存占用。 GE 提供对 PyTorch、TensorFlow 前端的友好接入能力,并同时支持 onnx、pb 等主流模型格式的解析与编译。项目地址: https://gitcode.com/cann/ge

产品支持情况

全量芯片支持。

头文件/库文件

  • 头文件:#include <graph/custom_op.h>
  • 库文件:liblowering.so

功能说明

获取指定位置和索引的kernel args。

函数原型

const KernelArgs* GetKernelArgs(Placement placement, size_t index) const

参数说明

参数名输入/输出描述
placement输入kPlacementHost获取host args,kPlacementDevice获取device args。
index输入args索引,与MallocReadOnlyDevArgs的调用顺序对应(首次malloc对应index 0,后续依次递增)。

返回值说明

KernelArgs指针。

约束说明

调用示例

graphStatus UpdateHostArgs(gert::UpdateArgsContext *ctx) override { // 获取输入输出张量的最新地址 const gert::Tensor *input_x = ctx->GetInputTensor(kInputX); const gert::Tensor *input_y = ctx->GetInputTensor(kInputY); const gert::Tensor *output_z = ctx->GetOutputTensor(kOutputZ); if (input_x == nullptr || input_y == nullptr || output_z == nullptr) { LOG_ERROR("UpdateHostArgs failed, input_x=", input_x, " input_y=", input_y, " output_z=", output_z); return GRAPH_FAILED; } // 获取host侧args指针 const gert::KernelArgs *host_args = ctx->GetKernelArgs(gert::Placement::kPlacementHost, 0); if (host_args == nullptr) { LOG_ERROR("UpdateHostArgs failed, host_args is null"); return GRAPH_FAILED; } // 仅刷新args中的地址字段 auto *args = static_cast<AddArgs *>(host_args->args_data); args->x_ptr = input_x->GetAddr(); args->y_ptr = input_y->GetAddr(); args->z_ptr = const_cast<void *>(output_z->GetAddr()); return GRAPH_SUCCESS; }

【免费下载链接】geGE(Graph Engine)是面向昇腾的图编译器和执行器,提供了计算图优化、多流并行、内存复用和模型下沉等技术手段,加速模型执行效率,减少模型内存占用。 GE 提供对 PyTorch、TensorFlow 前端的友好接入能力,并同时支持 onnx、pb 等主流模型格式的解析与编译。项目地址: https://gitcode.com/cann/ge

创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/9/10 2:43:17

社区家政小程序开发公司排名,上门服务系统搭建

社区家政小程序开发公司排名&#xff0c;上门服务系统搭建当下社区上门家政服务行业持续升温&#xff0c;保洁养护、家电维修、居家护理、便民修缮等服务需求日益常态化。众多中小家政企业、社区服务站点都开始摒弃传统线下登记、公域平台入驻的运营模式&#xff0c;转向自主搭…

作者头像 李华
网站建设 2026/9/10 2:40:00

NILMTK实战:非侵入式负荷监测工具包的环境配置与数据分解

简介&#xff1a;面向非侵入式负荷监测&#xff08;NILM&#xff09;研究者的完整可运行项目包&#xff0c;基于REDD低频数据集&#xff0c;内置CO和FHMM两种分解预测方法&#xff0c;适合在PyCharm中直接导入调试。资源共1046个文件&#xff0c;460.46MB&#xff0c;以Python源…

作者头像 李华
网站建设 2026/9/10 2:34:30

在线视频压缩实战:90%体积缩减的四层技术逻辑

1. 项目概述&#xff1a;为什么“在线视频压缩”成了2024年最被低估的刚需技能&#xff1f;你有没有遇到过这样的场景&#xff1a;拍了一段3分钟的旅行vlog&#xff0c;用手机原生相机录下来——文件大小直接飙到1.2GB&#xff1b;想发到朋友圈&#xff0c;提示“视频过大&…

作者头像 李华
网站建设 2026/9/10 2:32:42

Django在线学习平台生产级骨架:多APP架构与部署实战

简介&#xff1a;本资源是一套完整的基于Django框架开发的在线学习平台毕业设计项目&#xff0c;面向计算机类专业本科生及初学者&#xff0c;解决课程设计、毕业设计选题难、工程实践缺范例、Web全栈开发流程不清晰等实际问题。压缩包共783个文件&#xff0c;涵盖97个Python后…

作者头像 李华
网站建设 2026/9/10 2:31:49

pip十大高级用法:Python包管理实践指南

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

作者头像 李华