AutoX_NLP/ nlp_feature.py, OOV问题优化
Đang mở
AutoX_NLP
call-for-contributions
- Ngôn ngữ chính
- Jupyter Notebook
- Star
- 551
- Fork
- 143
- Chỉ số merge pull request
- Không có pull request nào được merge trong 30 ngày
Mô tả
当前Word2Vec和Glove模型无法处理测试数据中未见过的词，需要对测试数据重新进行词表构建，对整体效果影响较大。
代码链接：[https://github.com/4paradigm/AutoX/blob/master/autox/autox_nlp/feature_engineer/nlp_feature.py](url)
Hướng dẫn đóng góp
Chưa lập chỉ mục được hướng dẫn đóng góp cho kho mã nguồn này
Hướng nghiên cứu
The issue points to nlp_feature.py in autox/autox_nlp/feature_engineer/. Examine how Word2Vec and GloVe models are built and applied, focusing on vocabulary handling for OOV (out-of-vocabulary) words. Look at the test data pipeline to see where the vocabulary is constructed. The goal is to modify the feature engineering to better handle unseen words, likely by adjusting the vocabulary building or embedding fallback strategy.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Đánh giá
- Công nghệ
- machine-learning, python
- Lĩnh vực
- machine-learning
- Loại issue
- Lỗi
- Độ khó
- 4/5
- Thời gian dự kiến
- 3-5 ngày
- Mức độ hoạt động
- Đình trệ
- Độ rõ ràng
- Khá rõ ràng
- Mức phù hợp với người mới
- 30/100