euroargodev / euroargodev/clean_CTD-RDB_for2021v01release

Use in the MedSea: content duplicate check takes too long

Offen
#1 0 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen
Vorherrschende Sprache
MATLAB
Sterne
1
Forks
0
PR-Merge-Kennzahlen
Keine gemergten PRs in 30 T.

Beschreibung

**Problem**: The content duplicate check code has a step where the profiles that are suspicious of being content duplicates are found by comparing the deep portion of the profile (deeper than 800 db). Afterwards, the entire profiles are compared.
Since profiles are shallower in the MedSea, all profiles are check against all profiles and then the duplicate check takes too long.
Therefore the profile portion to be checked to find those suspicious profiles should be defined by the user.

**Problem found by**: @Anto79124

**To do**: Identify where this needs to be changed and add an argument to the deep content comparison function

Beitragsleitfaden

Für dieses Repository ist kein Beitragsleitfaden indexiert

Bewertung

Dieses Issue wurde noch nicht bewertet.

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.