apache / apache/arrow-java

[JNI][Gandiva] LLVM generated code can't access some system functions on certain platforms

Aberta
#657 0 comentários 0 reações 0 responsáveis Ver no GitHub
Type: bug
Linguagem predominante
Java
Estrelas
94
Forks
152
Merge médio
3d 16h
PRs com merge (30d)
11

Descrição

### Describe the bug, including details regarding any error messages, version, and platform.

When linux loads libraries there are different options for symbols visibility like: RTLD_LOCAL, RTLD_GLOBAL. Default in Java is RTLD_LOCAL which makes all symbols inside Gandiva library only visible to the Gandiva library.

The problem is when LLVM compiles code and loads it into Java process that code won't be able to find any symbols imported by Gandiva. One example is 'sinhl' from libgcc which causes sinh function to fail when it is present in SQL query executed by Dremio using Gandiva engine. By importing JNA package we can control how to load Gandiva library and set Global symbol visibility.

See also: https://github.com/apache/arrow/issues/40839

Guia de contribuição

Abrir o guia de contribuição

Direção de pesquisa

Comece pelo caminho de carregamento de bibliotecas do JNI/Gandiva e pelo comportamento padrão RTLD_LOCAL do Java descrito na issue; compare-o com a abordagem do JNA e com a issue relacionada do Apache Arrow. Reproduza a falha de sinh envolvendo sinhl em uma plataforma Linux afetada e, em seguida, verifique se o código gerado pelo LLVM consegue resolver os símbolos de sistema importados do Gandiva.

Escrita pelo modelo de indexação a partir do texto da issue.

Avaliação

Stack de tecnologia
java
Domínio
backend
Tipo de issue
Bug
Dificuldade
4/5
Tempo estimado
3-5 dias
Status de atividade
Estagnada
Clareza
Razoavelmente clara
Facilidade para iniciantes
35/100

Receba novas issues na sua caixa de entrada

Um resumo curto de issues do GitHub para quem está começando.