2.4K Star 8.2K Fork 4.4K

GVPMindSpore / mindspore

 / 详情

[ST][MS][2.2master][mobilenetv1][910 x86 8p]网络性能劣化,FPS:14259<18610

TODO
Bug-Report
创建于  
2023-07-31 14:35
name about labels
Bug Report Use this template for reporting a bug kind/bug

Describe the current behavior / 问题描述 (Mandatory / 必填)

mobilenetv1网络在910 x86机器出现性能劣化,arm环境性能是达标的
模型仓地址:https://gitee.com/mindspore/models/tree/master/official/cv/MobileNet/mobilenetv1

Environment / 环境信息 (Mandatory / 必填)

  • Hardware Environment(Ascend/GPU/CPU) / 硬件环境:

Please delete the backend not involved / 请删除不涉及的后端:
/device ascend/

  • Software Environment / 软件环境 (Mandatory / 必填):
    -- MindSpore version (e.g., 1.7.0.Bxxx) :
    -- Python version (e.g., Python 3.7.5) :
    -- OS platform and distribution (e.g., Linux Ubuntu 16.04):
    -- GCC/Compiler version (if compiled from source):

run:HISI_C30/20230720
mindspore:master_20230728021529_4a7eaf1b3275

  • Excute Mode / 执行模式 (Mandatory / 必填)(PyNative/Graph):

Please delete the mode not involved / 请删除不涉及的模式:

/mode graph

Related testcase / 关联用例 (Mandatory / 必填)

用例仓地址:solution_test/cases/02network/00cv/mobilenetv1/train
用例:
test_ms_mobilenetv1_imagenet_train_infer_8p_0006.py

Steps to reproduce the issue / 重现步骤 (Mandatory / 必填)

  1. get code from models
  2. cd models/official/cv/MobileNet/mobilenetv1
  3. "Usage: bash run_distribute_train.sh [cifar10|imagenet2012] [RANK_TABLE_FILE] [DATASET_PATH] PRETRAINED_CKPT_PATH
  4. 验证网络是否训练成功
  5. 验证网络性能是否达标

Describe the expected behavior / 预期结果 (Mandatory / 必填)

1、网络训练成功
2、网络性能达标

Related log / screenshot / 日志 / 截图 (Mandatory / 必填)

910 X86
输入图片说明
输入图片说明

910 arm
输入图片说明
输入图片说明

Special notes for this issue/备注 (Optional / 选填)

走给何茂华

评论 (5)

zhangjie18 创建了Bug-Report
zhangjie18 添加了
 
kind/bug
标签
zhangjie18 添加了
 
v2.2.0
标签
zhangjie18 添加了
 
attr/performance
标签
zhangjie18 添加了
 
stage/perf-tuning
标签
zhangjie18 添加了
 
sig/modelzoo
标签
展开全部操作日志

Please assign maintainer to check this issue.
请为此issue分配处理人。
@zhangjie18

感谢您的反馈,您可以评论//mindspore-assistant更快获取帮助,更多标签可以查看标签列表

  1. 如果您刚刚接触MindSpore,或许您可以在教程找到答案
  2. 如果您是资深Pytorch用户,您或许需要:
    与PyTorch典型区别 / PyTorch与MindSpore API映射表
  3. 如果您遇到动态图问题,可以设置mindspore.set_context(pynative_synchronize=True)查看报错栈协助定位
  4. 模型精度调优问题可参考官网调优指南
  5. 如果您反馈的是框架BUG,请确认您在ISSUE中提供了MindSpore版本、使用的后端类型(CPU、GPU、Ascend)、环境、训练的代码官方链接以及可以复现报错的代码的启动方式等必要的定位信息
  6. 如果您已经定位出问题根因,欢迎提交PR参与MindSpore开源社区,我们会尽快review
zhangjie18 修改了描述
zhongjicheng 负责人zhongjicheng 修改为hemaohua
hemaohua 添加协作者hemaohua
hemaohua 负责人hemaohua 修改为代宇鑫

对比单卡性能x86明显优于arm,per step time 分别是:
arm: 96.494483ms
x86: 66.878112ms

2023.08.04 CCB:
暂时不在X86看护,改为ARM环境看护。
补充试验:8个进程跑单卡用例,看ARM和X86多卡间性能的抖动是否一致。

代宇鑫 添加协作者代宇鑫
代宇鑫 负责人代宇鑫 修改为wangshengnan123
代宇鑫 里程碑B-SIG-ModelZoo 修改为B-SIG-Parallel
wangshengnan123 添加了
 
rct/cann
标签
linzhengshu 添加了
 
v2.2.10
标签
wuweikang 添加了
 
ccb/bug
标签
tanghuikang 优先级主要 修改为次要
zhunaipan 添加了
 
v2.2.12
标签
zhunaipan 添加了
 
v2.2.13
标签
zhunaipan 添加了
 
v2.2.14
标签
yuchaojie 移除了
 
rct/cann
标签
yuchaojie 移除了
 
rct/cann
标签
zhunaipan 添加了
 
r2.2
标签

登录 后才可以发表评论

状态
负责人
项目
里程碑
Pull Requests
关联的 Pull Requests 被合并后可能会关闭此 issue
分支
开始日期   -   截止日期
-
置顶选项
优先级
预计工期 (小时)
参与者(5)
Python
1
https://gitee.com/mindspore/mindspore.git
git@gitee.com:mindspore/mindspore.git
mindspore
mindspore
mindspore

搜索帮助