K230 nncase 常见问题解答#

cover

版权所有©2023北京嘉楠捷思信息技术有限公司

免责声明#

您购买的产品、服务或特性等应受北京嘉楠捷思信息技术有限公司(“本公司”,下同)及其关联公司的商业合同和条款的约束,本文档中描述的全部或部分产品、服务或特性可能不在您的购买或使用范围之内。除非合同另有约定,本公司不对本文档的任何陈述、信息、内容的正确性、可靠性、完整性、适销性、符合特定目的和不侵权提供任何明示或默示的声明或保证。除非另有约定,本文档仅作为使用指导参考。

由于产品版本升级或其他原因,本文档内容将可能在未经任何通知的情况下,不定期进行更新或修改。

商标声明#

logo、“嘉楠”和其他嘉楠商标均为北京嘉楠捷思信息技术有限公司及其关联公司的商标。本文档可能提及的其他所有商标或注册商标,由各自的所有人拥有。

版权所有 © 2023北京嘉楠捷思信息技术有限公司。保留一切权利。 非经本公司书面许可,任何单位和个人不得擅自摘抄、复制本文档内容的部分或全部,并不得以任何形式传播。

目录#

[toc]

1. 安装 whl包出错#

Q:xxx.whl is not a supported wheel on this platform.#

  • A:升级 pip pip install --upgrade pip


2.编译模型时报错#

2.1 System.NotSupportedException#

Q:编译模型报错“System.NotSupportedException: Not Supported *** op: XXX”#

  • A:该异常表明 XXX算子尚未支持,可以在nncase Github Issue中提需求。当前目录下 ***_ops.md文档,可以查看各个推理框架中已经支持的算子。如果 XXX属于 FAKE_QUANTDEQUANTIZEQUANTIZE等量化相关的算子,表明当前模型属于量化模型,nncase目前不支持这类模型,请使用浮点模型来编译 kmodel

2.2 System.IO.IOException#

Q:运行出现错误”The configured user limit (128) on the number of inotify instances has been reached, or the per-process limit on the number of open file descriptors has been reached”#

  • A:使用 sudo gedit /proc/sys/fs/inotify/max_user_instances修改128为更大的值即可。

2.3 initialize相关#

Q:编译模型出现错误 RuntimeError: Failed to initialize hostfxr#

  • A:需要安装dotnet-sdk-7.0

    • Linux:

      sudo apt-get update
      sudo apt-get install dotnet-sdk-7.0
      
    • Windows: 请自行查阅微软官方文档。

2.4 “KeyNotFoundException”#

Q: “The given key ‘K230’ was not present in the dictionary”#

  • A:需要安装nncase-kpu

    • Linux:使用pip安装nncase-kpu pip install nncase-kpu

    • Windows:在nncase github tags界面下载对应版本的whl包,然后使用pip安装。

      安装nncase-kpu之前,请先检查nncase版本,然后安装与nncase版本一致的nncase-kpu。

      > pip show nncase | grep "Version:"
       Version: 2.8.0
      (Linux)  > pip install nncase-kpu==2.8.0
      (Windows)> pip install nncase_kpu-2.8.0-py2.py3-none-win_amd64.whl
      

3. 推理时报错#

Q: PC推理出现错误 nncase.simulator.k230.sc: not found#

或者以下情况:

  • "nncase.simulator.k230.sc: Permision denied."

  • "Input/output error."

  • A:将nncase的安装路径加入到 PATH环境变量中,并检查一下nncase和nncase-kpu版本是否一致,如果不一致,请安装相同版本的Python包 pip install nncase==x.x.x.x nncase-kpu==x.x.x.x

    root@a52f1cacf581:/mnt# pip list | grep nncase
    nncase                       2.1.1.20230721
    nncase-kpu                   2.1.1.20230721
    

4. k230开发板推理时报错#

Q:data.size_bytes() == size = false (bool)#

  • A:推理时输入数据有错误,与模型输入节点shape、type不匹配。当编译模型时配置了前处理相关参数,模型输入节点shape和type信息会有相应的更新。请以模型编译时配置的 input_shapeinput_type为准来生成输入数据。

Q:抛出 std::bad_alloc异常#

  • A:通常是因为内存分配失败导致的,可做如下排查。

    • 检查生成的kmodel是否超过当前系统可用内存

    • 检查App是否存在内存泄露

Q:加载模型时抛出异常#

加载kmodel代码如下时,抛出异常 terminate:Invalid kmodel

interp.load_model(ifs).expect("Invalid kmodel");