Windows build importlib performance regression
Chưa có ai nhận issue này.
Đánh giá
- Độ khó
- 4/5
- Thời gian dự kiến
- 3-5 ngày
- Mức phù hợp với người mới
- 35/100
- Loại issue
- Lỗi
- Độ rõ ràng
- Khá rõ ràng
- Mức độ hoạt động
- Đình trệ
- Công nghệ
- python
- Lĩnh vực
- operating-systems, performance
Hướng nghiên cứu
Bắt đầu bằng cách tái hiện sự khác biệt về thời gian trên Windows 10 với import_models.py và some_class.py được cung cấp bằng cách sử dụng -X importtime, sau đó so sánh các lần chạy trước và sau python -m compileall . cũng như với -B. Kiểm tra các đường dẫn import của importlib và các đường dẫn import dành riêng cho Windows có liên quan đến việc tải module. Công việc được xem là hoàn tất khi xác định được nguyên nhân khiến import đã được cache chậm hơn và ghi lại hoặc sửa regression bằng một so sánh đã được xác minh.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
Bug report
I've a file import_models.py:
import time
from ctypes import c_longdouble
from multiprocessing import Value
def import_models_func(_, import_value, exec_value):
init = time.process_time()
import some_class
import_value.value = time.process_time() - init
exec_value.value = 0
if __name__ == '__main__':
import_models_func(0, Value(c_longdouble, lock=False), Value(c_longdouble, lock=False))
The some_class.py is:
import time
class SomeClass:
__slots__ = ('a', 'b', 'c')
def __init__(self):
self.a = time.time()
self.b = self.a / 100
self.c = self.b ** 2
B = 2
for _ in range(10):
B **= 2
@property
def a_val(self):
return self.a
@a_val.getter
def a_val(self):
return self.a
@property
def b_val(self):
return self.b
@b_val.getter
def b_val(self):
return self.b
@property
def c_val(self):
return self.c
@c_val.getter
def c_val(self):
return self.c
The directory containing both files has no __pycache__. I run python -X importtime import_models.py and receive:
import time: 521 | 521 | some_class
Then I run python -m compileall . and re-run the command above, the output is:
import time: 548 | 548 | some_class
I've tried the sampling with multiprocessing governor, which is run with -B. The governor runs this scenario for 100 times, both mean and median statistics values of the timing measured mostly provide with the same results: the timing without __pycache__ is less than when the source files are pre-compiled. Which is a non-sense keeping in mind what the pre-compiled byte-code cache is built for.
I've searched for Windows-related fixes through the versions 3.9 to 3.12 and found nothing about this regression.
Linux build in a native (non-WSL, non-emulated) environment does not have such an issue (the bytecode-compiled version gets imported faster, up to 10 times, than a raw non-compiled source)
Your environment
- CPython versions tested on: Python 3.9.13 (tags/v3.9.13:6de2ca5, May 17 2022, 16:36:42) [MSC v.1929 64 bit (AMD64)] on win32
- Operating system and architecture: Windows 10 Enterprise 21H2 19044.2251
- Ngôn ngữ chính
- Python
- Star
- 77.2k
- Fork
- 36k
- Merge trung bình
- 1 ngày 9 giờ
- Pull request đã merge (30 ngày)
- 558
Hướng dẫn đóng góp
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của python/cpython
-
docs pending
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
-
stdlib type-feature
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
-
stdlib type-feature
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 72/100
-
build type-bug
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 76/100
-
stdlib topic-email type-feature
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 70/100
Tất cả issue của python/cpython
Issue tương tự
-
Độ khó 1/5 Dưới một giờ Mức phù hợp với người mới 90/100
-
bug
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 86/100
zostera/django-bootstrap4#894 ·
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
use-agent-os/agent-os#3276 ·
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 88/100
zephyrproject-rtos/zephyr#119726 ·
-
area/auth bug comp/agent P3 platform/discord type/security
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 88/100
NousResearch/hermes-agent#117848 ·