一、问题现象(附报错日志上下文):
数据预处理session放在host侧处理规避报错,但最终性能受到影响。
二、软件版本:
pycharm toolkit:
frequently-used
AI Engine:
Ascend-Powered-Engine TF1.15-python3.7-caan5.0.2
Image Path:
ascend-share/5.0.4.alpha002_tensorflow-ascend910-cp37-euleros2.8-aarch64-training:1.15.0-21.0.2_1207
三、开启profiling后summary的链接地址:
(1)profiling地址:
URL:
https://e-share.obs-website.cn-north-1.myhuaweicloud.com?token=L3lk84zLqQcBNkRgeI5kfMdeavbHI9lz29XirHL7rCS98d0M9SjKCxvdYQHD3AjZaSfmyJL8BAeaLsxGQVvoGfsavwbuavVjUdavGRxatQ6N/mrbvcsVeVjcOF3+7s4oHIJQK9oEjJbOzouKP0yuqzvjDjxdrtPAaQzTpmxyvPHpOldMsMwAECUfvr7EMh1LYvtgbEcmqIL1EooFUSr832W5ftMyKyDRXDyu1/VwVAIHAH2KmcIqFZoNaVsSSbLNM+TgrTly12W0/jXDFAOPk80lmHfHjc42nle5cCLim62qg07gR6+6lPyDrOwfZjgTBkJuDUBzRJgQBBLtuiJKXf9muAj45qY8+Our8Q6BSPFUaPhvF02Am08hg7xW1+rYEjPaLERcQMntNwJ/2Jt9NK7CkXkVAevV03Jj6SPWmhSDU8e/UDbQlNSdek1Os/lrA+pOH9z8IcGOMajyoZIb/WtIcT+S02WLXmX8VIyrxTabhxRtP8DvRiv6A2JR0iL3mlbFzx/LBFkP0ByvjmQ4MU9pdCsMGjlsDHxYAcY4cW87U4laZiFlYzzVOlovU+XeOtOSoBDdVz8Kzqb5xHo5rg==
提取码:
123456
提取码:
123456
*有效期至: 2023/01/03 21:58:00 GMT+08:00
你好,能否在训练脚本中使能混合精度 + lossscale,看一下性能是否有提升。
此处可能存在不合适展示的内容,页面不予展示。您可通过相关编辑功能自查并修改。
如您确认内容无涉及 不当用语 / 纯广告导流 / 暴力 / 低俗色情 / 侵权 / 盗版 / 虚假 / 无价值内容或违法国家有关法律法规的内容,可点击提交进行申诉,我们将尽快为您处理。
模型性能问题是由于tf.py_func函数使用导致,该部分逻辑在昇腾CANN场景无法下沉到NPU执行。会在后续版本进行优化。
登录 后才可以发表评论