Sharing the 1.3B-Pile@300B model

The 1.3B-Pile@300B model is quite strong:
https://docs.google.com/spreadsheets/d/1CI8Q9RCblLRzUOPJ6ViqBmo284-8ojluQ-CmaEuhuv0/edit#gid=1295801165

lambada 0.6088 piqa 0.7160 hellaswag 0.5209 --> these are all better than gpt-neo 1.3B.

Could you share the model? Thank you.

Non vengono indicati file del repository, test o punti di ingresso; l’issue fornisce solo un link a Google Sheets con i risultati dei benchmark e chiede di condividere il modello. Inizia esaminando i risultati collegati e determinando il percorso di distribuzione previsto. «Completato» non è definito, perché non sono specificati alcun meccanismo di consegna né verifiche di accettazione.

Scritto dal modello di indicizzazione a partire dal testo della issue.