AI-Hypercomputer / AI-Hypercomputer/JetStream

Question about producing the logits from Jetstream (context and generated output) like gather_all_token_logits in TRTLLM

Aberta
#153 0 comentários 0 reações 0 responsáveis Ver no GitHub
Linguagem predominante
Python
Estrelas
457
Forks
67
Métricas de merge de PRs
Nenhum PR com merge em 30d

Descrição

Any example to set it up? Thanks

Guia de contribuição

Abrir o guia de contribuição

Avaliação

Esta issue ainda não foi avaliada.

Receba novas issues na sua caixa de entrada

Um resumo curto de issues do GitHub para quem está começando.