4paradigm / 4paradigm/OpenMLDB

mirror site issue

Ouverte
#3,524 0 commentaires 0 réactions 1 personne assignée Réclamée par @vagetablechicken Voir sur GitHub
Langage dominant
C++
Étoiles
1.7k
Forks
331
Merge moyen
12 j 12 h
PR mergées (30 j)
1

Description

- [x] spark support sha256sum
- [ ] ~~a workflow to check mirror site files sha256sum, if not match, scp files(the mirror machine is slow to download, so scp)~~ can't ssh through external IP, so can't add workflow
- [x] scp set timeout to avoid slow periodic tasks
- [x] change mirror site, can't by ip now, use openmldb.com, ref #3617
- [x] gen sha256sum file on mirror site
- [ ] periodically check sha256sum, if no or mismatch
- [x] cp with timeout(if network is bad, abort and retry later, don't be stubborn)

Guide de contribution

Ouvrir le guide de contribution

Piste de recherche

Look for existing mirror site scripts or workflows in the repository, likely in a scripts/ or .github/ directory. Understand the current scp and sha256sum generation processes. The task involves setting up a periodic check for file integrity on the mirror site, which may require cron jobs or GitHub Actions. Test the scp timeout and sha256sum verification locally before implementing the periodic check.

Rédigé par le modèle d'indexation à partir du texte de l'issue.

Évaluation

Stack technique
bash, shell
Domaine
devops, infrastructure
Type d'issue
Fonctionnalité
Difficulté
3/5
Temps estimé
1-2 jours
Activité
À l'abandon
Clarté
Plutôt claire
Accessibilité débutants
40/100

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.