apache/datafusion-comet

Ver en GitHub

Apache DataFusion Comet Spark Accelerator

Estrellas: 1.3k
Forks: 377
Issues abiertos para principiantes: 11
Issues indexados: 596
Merge medio: 2 d 11 h
PR fusionados (30 d): 244

Lenguaje dominante: Scala
Licencia: Apache-2.0
Último push a GitHub: 19/9/2026
Última indexación: 14/9/2026
Guía de contribución: Guía de contribución
Código de conducta: Código de conducta
Etiquetas para principiantes: good first issue help wanted

Para principiantes Todo

Abierto Todos

565 issues abiertos indexados

Remove memory accounting from Comet's on-heap mode Abierto

area:memory area:shuffle enhancement requires-triage

apache/datafusion-comet#6063 · 1 asignado · Abierto el 20/9/2026
Mermaid diagrams are missing from the published docs site (dropped at build time since #6021) Abierto

bug documentation requires-triage

Dificultad 4/5 3-5 días Aptitud para principiantes 55/100

apache/datafusion-comet#6062 · 1 comentario · Abierto el 20/9/2026
ci: a transient Maven Central failure in lint-java is reported as a scalafix violation Abierto

requires-triage

Dificultad 2/5 1-3 horas Aptitud para principiantes 84/100

apache/datafusion-comet#6060 · Abierto el 20/9/2026
Native Iceberg scan: support abfs/abfss (Azure Data Lake Storage Gen2) locations Abierto

requires-triage

Dificultad 4/5 3-5 días Aptitud para principiantes 48/100

apache/datafusion-comet#6058 · Abierto el 20/9/2026
Nightly CI failed on 2026-09-20 Abierto

ci-nightly-failure

Dificultad 4/5 3-5 días Aptitud para principiantes 35/100

apache/datafusion-comet#6057 · Abierto el 20/9/2026
Allow row-based build sides (such as JDBC) to convert to Arrow for native BroadcastHashJoin Abierto

requires-triage

Dificultad 4/5 3-5 días Aptitud para principiantes 55/100

apache/datafusion-comet#6056 · Abierto el 19/9/2026
Consider accounting for Comet in spark.executor.memoryOverhead when off-heap memory is enabled Abierto

area:memory enhancement priority:medium user experience

apache/datafusion-comet#6050 · 2 comentarios · 1 asignado · Abierto el 19/9/2026
Variance and standard deviation return incorrect results for large nearby values Abierto

requires-triage

Dificultad 4/5 3-5 días Aptitud para principiantes 48/100

apache/datafusion-comet#6044 · Abierto el 19/9/2026
Sliding-window SUM(BIGINT) ignores ANSI and TRY overflow semantics Abierto

requires-triage

apache/datafusion-comet#6043 · 1 comentario · 1 asignado · Abierto el 19/9/2026
Audit Comet logical-link repair across AQE replanning Abierto

enhancement requires-triage

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

apache/datafusion-comet#6034 · Abierto el 19/9/2026
Tuning guide does not explain that Comet's memory comes out of the executor container Abierto

documentation requires-triage

Dificultad 3/5 1-2 días Aptitud para principiantes 76/100

apache/datafusion-comet#6032 · Abierto el 18/9/2026
Memory management cgroup diagram does not show which config value sizes each region Abierto

requires-triage

Dificultad 2/5 1-3 horas Aptitud para principiantes 86/100

apache/datafusion-comet#6028 · Abierto el 18/9/2026
Native S3 scan on EKS/IRSA turns a transient STS throttle into a hard 403 storm Abierto

enhancement requires-triage

Dificultad 5/5 Más de una semana Aptitud para principiantes 42/100

apache/datafusion-comet#6024 · Abierto el 18/9/2026
Native Parquet S3 scan fails on credential provider classes that Spark/Hadoop accept Abierto

enhancement requires-triage

apache/datafusion-comet#6022 · 1 asignado · Abierto el 18/9/2026
Nested floating-point IN membership does not match Spark for signed zero Abierto

requires-triage

apache/datafusion-comet#6019 · 1 comentario · 1 asignado · Abierto el 18/9/2026
Legacy mode negation of a scalar signed minimum errors where the array path wraps Abierto

requires-triage

Dificultad 3/5 1-2 días Aptitud para principiantes 74/100

apache/datafusion-comet#6015 · Abierto el 18/9/2026
perf: broadcast hash join rebuilds the build-side hash table in every task Abierto

enhancement performance requires-triage

apache/datafusion-comet#6013 · 2 comentarios · 1 asignado · Abierto el 18/9/2026
Evaluate rotating the native shuffle spill file at a byte threshold Abierto

requires-triage

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

apache/datafusion-comet#6010 · Abierto el 18/9/2026
Free and account for spill range metadata in the native shuffle writer Abierto

requires-triage

Dificultad 4/5 3-5 días Aptitud para principiantes 55/100

apache/datafusion-comet#6009 · Abierto el 18/9/2026
Text-format source on a broadcast build side blocks native `BroadcastHashJoin` Abierto

enhancement requires-triage

apache/datafusion-comet#6008 · 1 reacción · 1 asignado · Abierto el 18/9/2026
Native Parquet write only supports `file:`/`hdfs:` outputs — falls back on `s3a://` Abierto

enhancement

apache/datafusion-comet#6007 · 1 comentario · 1 reacción · 2 asignados · Abierto el 17/9/2026
Track evaluation masks for data-dependent errors beyond unbase64 operator fallback Abierto

requires-triage

Dificultad 5/5 Más de una semana Aptitud para principiantes 28/100

apache/datafusion-comet#6006 · Abierto el 17/9/2026
SUM(decimal) returns NULL or throws under ANSI when an intermediate sum overflows the buffer precision but the final result fits Abierto

area:aggregation bug correctness priority:high requires-triage

Dificultad 4/5 3-5 días Aptitud para principiantes 52/100

apache/datafusion-comet#6002 · Abierto el 17/9/2026
Global aggregate with no grouping keys and no aggregate functions falls back to Spark ("No group by or aggregation") Abierto

enhancement requires-triage

apache/datafusion-comet#6001 · 1 comentario · 1 asignado · Abierto el 17/9/2026
Nightly Miri workflow has failed every night since 2026-07-01 Abierto

area:ci bug requires-triage

Dificultad 4/5 3-5 días Aptitud para principiantes 45/100

apache/datafusion-comet#5999 · Abierto el 17/9/2026
Improve memory accounting: bound the JVM Arrow allocator and make native reclaim work Abierto

requires-triage

apache/datafusion-comet#5997 · 1 asignado · Abierto el 17/9/2026
TRY_CAST on narrowing map keys fails where Spark returns a map with a null key Abierto

requires-triage

apache/datafusion-comet#5995 · 1 comentario · 1 asignado · Abierto el 17/9/2026
Support Spark-compatible native hash and xxhash64 for decimals with precision >18 Abierto

area:expressions enhancement performance requires-triage

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

apache/datafusion-comet#5994 · Abierto el 17/9/2026
Iceberg serde: residual reflection failures can silently drop residual filtering Abierto

bug requires-triage

Dificultad 4/5 3-5 días Aptitud para principiantes 48/100

apache/datafusion-comet#5992 · Abierto el 16/9/2026
analyze_trace.rs over-counts pool reservations by summing per-thread counters Abierto

area:memory bug requires-triage

apache/datafusion-comet#5990 · 1 asignado · Abierto el 16/9/2026
Nightly SNAPSHOT publishing is blocked until ASF Infra provisions Nexus credentials Abierto

area:ci enhancement requires-triage

apache/datafusion-comet#5985 · 1 asignado · Abierto el 16/9/2026
[Variant] Preserve typed-value precedence without residual pre-rewriting Abierto

requires-triage

Dificultad 5/5 Más de una semana Aptitud para principiantes 28/100

apache/datafusion-comet#5980 · Abierto el 16/9/2026
[Variant] Remove the extra Spark byte-reconstruction pass Abierto

requires-triage

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

apache/datafusion-comet#5978 · Abierto el 16/9/2026
[Variant] Replace missing-key metadata repair with native permissive reconstruction Abierto

requires-triage

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

apache/datafusion-comet#5979 · Abierto el 16/9/2026
[Variant] Consolidate Spark-compatible missing-value validation and errors Abierto

requires-triage

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

apache/datafusion-comet#5977 · Abierto el 16/9/2026
Audit remaining native Partial-to-Spark Final aggregate compatibility Abierto

enhancement requires-triage

Dificultad 5/5 Más de una semana Aptitud para principiantes 30/100

apache/datafusion-comet#5975 · Abierto el 16/9/2026
Columnar shuffle rejects range partitioning based on a native-serde check it never uses Abierto

requires-triage

Dificultad 3/5 1-2 días Aptitud para principiantes 72/100

apache/datafusion-comet#5971 · 1 comentario · Abierto el 15/9/2026
ci: cancel merge queue runs on the first job failure Abierto

area:ci enhancement requires-triage

Dificultad 4/5 3-5 días Aptitud para principiantes 58/100

apache/datafusion-comet#5969 · Abierto el 15/9/2026
test: cover Java float rendering through SQL file tests and consolidate the Iceberg partition path suites Abierto

enhancement requires-triage

apache/datafusion-comet#5968 · 1 asignado · Abierto el 15/9/2026
Forward Spark-generated runtime Bloom predicates into native Parquet readers Abierto

enhancement requires-triage

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

apache/datafusion-comet#5965 · 1 comentario · Abierto el 15/9/2026
Investigate mixed-type duplicate Parquet roots: Spark field-ID reads return anomalous values Abierto

requires-triage

Dificultad 4/5 3-5 días Aptitud para principiantes 35/100

apache/datafusion-comet#5964 · 1 comentario · Abierto el 15/9/2026
Compute safe reusable expressions before broadcast materialization Abierto

requires-triage

Dificultad 5/5 Más de una semana Aptitud para principiantes 28/100

apache/datafusion-comet#5962 · Abierto el 15/9/2026
fair_unified memory pool caps the pool total at pool_size / num_consumers instead of each consumer's share Abierto

area:memory bug requires-triage

apache/datafusion-comet#5961 · 1 asignado · Abierto el 15/9/2026
Delegate Delta physical schema preparation to DeltaParquetFileFormat.prepareSchemaForRead Abierto

requires-triage

Dificultad 4/5 3-5 días Aptitud para principiantes 48/100

apache/datafusion-comet#5949 · Abierto el 15/9/2026
Route Delta deletion-vector metadata preparation through the scan's instrumented reader Abierto

requires-triage

Dificultad 4/5 3-5 días Aptitud para principiantes 48/100

apache/datafusion-comet#5948 · Abierto el 15/9/2026
Add envelope and provider contract tests for the Delta plan-data injector Abierto

requires-triage

Dificultad 3/5 1-2 días Aptitud para principiantes 68/100

apache/datafusion-comet#5947 · Abierto el 15/9/2026
Make the Delta contrib's file-planning boundary explicit Abierto

requires-triage

Dificultad 4/5 3-5 días Aptitud para principiantes 50/100

apache/datafusion-comet#5946 · Abierto el 15/9/2026
Reuse the common native scan builder for ordinary columns in the Delta deletion-vector path Abierto

requires-triage

Dificultad 4/5 3-5 días Aptitud para principiantes 58/100

apache/datafusion-comet#5945 · Abierto el 15/9/2026
Share the native-reader admission checks between the core Parquet scan and the Delta contrib Abierto

requires-triage

Dificultad 4/5 3-5 días Aptitud para principiantes 55/100

apache/datafusion-comet#5944 · Abierto el 15/9/2026
Native Delta scan: derive the task injection key from a stable scan identity Abierto

requires-triage

Dificultad 3/5 1-2 días Aptitud para principiantes 72/100

apache/datafusion-comet#5943 · Abierto el 15/9/2026

apache/datafusion-comet

Recibe los nuevos issues en tu correo