microsoft / microsoft/PlanetaryComputerExamples

multiple reads of nasa-nex-gddp-cmip6 dataset from MultiZarrToZarr concatenated metadata returns all nans

Aberta
#289 2 comentários 0 reações 0 responsáveis Ver no GitHub

Ninguém assumiu esta issue ainda.

Linguagem predominante
Jupyter Notebook
Estrelas
455
Forks
225
Métricas de merge de PRs
Nenhum PR com merge em 30d

Descrição

Simply running twice cells 13 & 14 of the notebook that read and plot point single variable time-series for a point will reproduce this issue where the first run will have the valid values but second will be all nans. I encountered this when parallelizing reading of the files with dask that results in multiple reads and the unexpected result.

Guia de contribuição

Abrir o guia de contribuição

Primeiros passos

  1. Leia a issue inteira e depois o guia de contribuição do projeto.
  2. Comente na issue dizendo que vai assumir — evita que duas pessoas façam o mesmo trabalho.
  3. Faça um fork do repositório e trabalhe em uma branch.
  4. Abra um pull request que referencie o número da issue.

Direção de pesquisa

Comece pelas células 13 e 14 em datasets/nasa-nex-gddp-cmip6/nasa-nex-gddp-cmip6-example.ipynb e reproduza duas vezes a leitura da série temporal pontual. Inspecione o comportamento dos metadados concatenados pelo MultiZarrToZarr, incluindo leituras repetidas ou paralelas. Está concluído quando a segunda leitura retorna os mesmos valores válidos que a primeira, em vez de retornar apenas NaNs.

Escrita pelo modelo de indexação a partir do texto da issue.

Avaliação

Stack de tecnologia
jupyter-notebook
Domínio
data-engineering
Tipo de issue
Bug
Dificuldade
3/5
Tempo estimado
1-2 dias
Status de atividade
Estagnada
Clareza
Razoavelmente clara
Facilidade para iniciantes
45/100

Receba novas issues na sua caixa de entrada

Um resumo curto de issues do GitHub para quem está começando.