MegEngine / MegEngine/Models

COCO数据集测试速度异常

Offen
#105 2 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen
Vorherrschende Sprache
Python
Sterne
306
Forks
96
PR-Merge-Kennzahlen
Keine gemergten PRs in 30 T.

Beschreibung

## 背景

**COCO数据集测试速度异常**

![image](https://user-images.githubusercontent.com/84311688/125907829-cb264fd8-e402-4743-b8f3-ef7b731fd2f9.png)

## 任务描述

按照首页readme安装megengine和Models,从 [hub.py](https://github.com/MegEngine/Models/blob/11013f6b3b252df71098b27714e39d9802d2520d/official/vision/detection/configs/atss_res50_coco_3x_800size.py#L18) 下载 预训练权重,直接在coco数据集上进行测试。代码未做任何改动,采用8卡测试,最终结果mAP为42.6(正常),但是耗时将近6m30s(不正常),正常8卡时间应该在1min左右

python:3.6
megengine版本:v1.4.0

## 目标

希望多卡测试速度正常,请确认问题并帮忙修复

Beitragsleitfaden

Für dieses Repository ist kein Beitragsleitfaden indexiert

Rechercherichtung

Reproduziere die COCO-Evaluierung mit official/vision/detection/configs/atss_res50_coco_3x_800size.py und dem angegebenen Setup aus MegEngine v1.4.0, Python 3.6 und acht Karten. Vergleiche die Laufzeit von knapp 6m30s mit der erwarteten Dauer von ungefähr einer Minute und bestätige dabei, dass mAP bei 42.6 bleibt; abgeschlossen ist die Aufgabe, wenn Tests mit mehreren Karten die erwartete Geschwindigkeit erreichen.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Bewertung

Tech-Stack
python
Bereich
distributed-systems, machine-learning, performance
Issue-Typ
Bug
Schwierigkeit
4/5
Geschätzter Aufwand
3-5 Tage
Aktivitätsstatus
Veraltet
Klarheit
Größtenteils klar
Anfängerfreundlichkeit
38/100

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.