4paradigm / 4paradigm/AutoX

AutoX_NLP/ nlp_feature.py, OOV问题优化

Abierto
#51 0 comentarios 0 reacciones 0 asignados Ver en GitHub
AutoX_NLP call-for-contributions
Lenguaje dominante
Jupyter Notebook
Estrellas
551
Forks
143
Métricas de merge de PR
Sin PR fusionados en 30 d

Descripción

当前Word2Vec和Glove模型无法处理测试数据中未见过的词,需要对测试数据重新进行词表构建,对整体效果影响较大。
代码链接:[https://github.com/4paradigm/AutoX/blob/master/autox/autox_nlp/feature_engineer/nlp_feature.py](url)

Guía de contribución

No hay ninguna guía de contribución indexada para este repositorio

Línea de trabajo

The issue points to nlp_feature.py in autox/autox_nlp/feature_engineer/. Examine how Word2Vec and GloVe models are built and applied, focusing on vocabulary handling for OOV (out-of-vocabulary) words. Look at the test data pipeline to see where the vocabulary is constructed. The goal is to modify the feature engineering to better handle unseen words, likely by adjusting the vocabulary building or embedding fallback strategy.

Escrito por el modelo de indexación a partir del texto del issue.

Evaluación

Stack tecnológico
machine-learning, python
Área
machine-learning
Tipo de issue
Error
Dificultad
4/5
Tiempo estimado
3-5 días
Estado de actividad
Estancado
Claridad
Bastante claro
Aptitud para principiantes
30/100

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.