apache / apache/parquet-java

Add a new API in `PageReadStore` to return row ranges directly

Ouverte
#2,627 0 commentaires 0 réactions 0 personnes assignées Voir sur GitHub

Personne n'a encore pris cette issue.

Component: Parquet Priority: Major Type: enhancement
Langage dominant
Java
Étoiles
3.1k
Forks
1.6k
Merge moyen
3 j 12 h
PR mergées (30 j)
33

Description

Environment: Currently PageReadStore.getRowIndexes convert row ranges into row indexes and return that, however for some use cases (e.g., Spark) it's more efficient to operate directly on row ranges. Therefore, it may be useful to have another API in PageReadStore to return row ranges instead.
Reporter: Chao Sun / @sunchao

Note: This issue was originally created as PARQUET-2061. Please see the migration documentation for further details.

Guide de contribution

Aucun guide de contribution indexé pour ce dépôt

Par où commencer

  1. Lisez l'issue en entier, puis le guide de contribution du projet.
  2. Signalez en commentaire que vous la prenez — cela évite que deux personnes fassent le même travail.
  3. Forkez le dépôt et travaillez sur une branche.
  4. Ouvrez une pull request qui référence le numéro de l'issue.

Piste de recherche

Commencez par localiser PageReadStore et son point d’entrée getRowIndexes. Examinez la manière dont les plages de lignes sont actuellement converties en index de lignes, puis déterminez la forme de l’API publique nécessaire pour renvoyer directement les plages. Le travail est terminé lorsque des appelants tels que Spark peuvent obtenir les plages de lignes sans cette conversion.

Rédigé par le modèle d'indexation à partir du texte de l'issue.

Évaluation

Stack technique
java
Domaine
backend-api-design, data-engineering
Type d'issue
Fonctionnalité
Difficulté
4/5
Temps estimé
3-5 jours
Activité
À l'abandon
Clarté
Plutôt claire
Accessibilité débutants
38/100

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.