apache / apache/hugegraph-computer

improve(core): vertices and edges loading optimization

Abierto
#288 0 comentarios 0 reacciones 0 asignados Ver en GitHub
feature
Lenguaje dominante
Java
Estrellas
65
Forks
52
Métricas de merge de PR
Sin PR fusionados en 30 d

Descripción

### Feature Description (功能描述)

`ComputerOptions.INPUT_FILTER_CLASS` default value is `DefaultInputFilter`.
`org.apache.hugegraph.computer.core.input.filter.DefaultInputFilter`
```java
public class DefaultInputFilter implements InputFilter {

@Override
public Vertex filter(Vertex vertex) {
vertex.properties().clear();
return vertex;
}

@Override
public Edge filter(Edge edge) {
edge.properties().clear();
return edge;
}
}
```
Load all properties first, then clear.

Could we specify some properties when loading vertices or edges? May could improve performance.
Just like mysql:
```sql
select a, b, c
```
instead of
```sql
select *
```

`org.apache.hugegraph.computer.core.input.hg.HugeVertexFetcher`
```java
@Override
public Iterator fetch(InputSplit split) {
Shard shard = toShard(split);
return this.client().traverser().iteratorVertices(shard,
this.pageSize());
}
```
But it seems that the traverser api does not yet support specifying some properties to load vertices or edges on the server side.

Guía de contribución

No hay ninguna guía de contribución indexada para este repositorio

Línea de trabajo

Empieza leyendo DefaultInputFilter y HugeVertexFetcher; después, inspecciona la API del traverser que usa iteratorVertices para determinar si se admite la selección de propiedades en el servidor. El issue estará completo cuando la carga de vértices y aristas pueda solicitar únicamente las propiedades seleccionadas, en lugar de cargar todas las propiedades y eliminarlas después.

Escrito por el modelo de indexación a partir del texto del issue.

Evaluación

Stack tecnológico
java
Área
distributed-systems
Tipo de issue
Nueva funcionalidad
Dificultad
5/5
Tiempo estimado
Más de una semana
Estado de actividad
Estancado
Claridad
Necesita aclaración
Aptitud para principiantes
30/100

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.