apache / apache/parquet-java

ParquetMetadata.fromJSON method doesn't work

Offen
#1,481 0 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen
Component: Java Component: Parquet Priority: Major Type: bug
Vorherrschende Sprache
Java
Sterne
3.1k
Forks
1.6k
Ø Merge
3 T. 12 Std.
Gemergte PRs (30 T.)
33

Beschreibung

I wrote a simple testCase to test the fromJSON method below and it fails because ParquetMetadata does not implement default constructors.

```

@Test public void testFromJSON() {
MessageType schema = parseMessageType("message test { optional binary some_null_field; }");
parquet.hadoop.metadata.FileMetaData fileMetaData =
new parquet.hadoop.metadata.FileMetaData(schema, new HashMap(), null);
List blockMetaDataList = new ArrayList();
BlockMetaData blockMetaData = new BlockMetaData();
blockMetaData.addColumn(createColumnChunkMetaData());
blockMetaDataList.add(blockMetaData);
ParquetMetadata metadata = new ParquetMetadata(fileMetaData, blockMetaDataList);

String metadataStr = ParquetMetadata.toJSON(metadata);
System.out.println(ParquetMetadata.toPrettyJSON(metadata));
ParquetMetadata m2 = ParquetMetadata.fromJSON(metadataStr);
}
```

**Reporter**: [Vihang Karajgaonkar](https://issues.apache.org/jira/secure/ViewProfile.jspa?name=vihangk1)

**Note**: *This issue was originally created as [PARQUET-851](https://issues.apache.org/jira/browse/PARQUET-851). Please see the [migration documentation](https://issues.apache.org/jira/browse/PARQUET-2502) for further details.*

Beitragsleitfaden

Für dieses Repository ist kein Beitragsleitfaden indexiert

Rechercherichtung

Beginne bei ParquetMetadata.fromJSON und dem zugehörigen ParquetMetadata.toJSON-Aufruf aus der Reproduktion, und führe dann den mitgelieferten Testfall mit FileMetaData und BlockMetaData aus. Erledigt ist die Aufgabe, wenn von toJSON serialisierte Metadaten an fromJSON übergeben werden können, ohne dass dies aufgrund fehlender Standardkonstruktoren fehlschlägt.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Bewertung

Tech-Stack
java
Bereich
data-engineering
Issue-Typ
Bug
Schwierigkeit
3/5
Geschätzter Aufwand
1-2 Tage
Aktivitätsstatus
Veraltet
Klarheit
Größtenteils klar
Anfängerfreundlichkeit
35/100

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.