Пайплайн для обновления базы
Abierto
- Lenguaje dominante
- Python
- Estrellas
- 27
- Forks
- 11
- Merge medio
- 2 d 15 h
- PR fusionados (30 d)
- 12
Descripción
- от сервиса получить данные о статьях
- скачать pdf для нужных статей (тул от нирсии)
- запустить пайплайн для обработки статей (на вход pdf + метаданные из базы)
сначала запустить на тестовой выборке, потом обработать всю базу, потом настроить регулярные обновления
http://fpin-projects.ru:12280/docs#/
Guía de contribución
Línea de trabajo
Start with the service API documentation at http://fpin-projects.ru:12280/docs#/ and determine the entry points for retrieving article metadata and downloading PDFs. Then map the existing article-processing pipeline and define a test-sample run, a full-database run, and the regular-update mechanism as separate completion stages.
Escrito por el modelo de indexación a partir del texto del issue.
Evaluación
- Stack tecnológico
- python
- Área
- data-engineering, databases
- Tipo de issue
- Nueva funcionalidad
- Dificultad
- 5/5
- Tiempo estimado
- Más de una semana
- Estado de actividad
- Tranquilo
- Claridad
- Necesita aclaración
- Aptitud para principiantes
- 20/100