AI4Finance-Foundation / AI4Finance-Foundation/FinRL

Question about the entropy loss

Ouverte
#940 4 commentaires 0 réactions 0 personnes assignées Voir sur GitHub
bug discussion good first issue
Langage dominant
Jupyter Notebook
Étoiles
16.3k
Forks
3.5k
Métriques de merge des PR
Aucune PR mergée en 30 j

Description

using the Stock_NeurIPS2018_SB3.ipynb notebook , default parameters
the results seems to be ok
![image](https://user-images.githubusercontent.com/7637589/227836948-d46501cc-e323-4d78-9a4d-2013be625060.png)
but after checking the tensorboard log , I found something confused
![image](https://user-images.githubusercontent.com/7637589/227837330-a7bb9f2c-fa66-4406-8a9c-1de3716486c6.png)
![image](https://user-images.githubusercontent.com/7637589/227837535-95be07ea-0bfa-4ccd-b530-5fd98e51e37b.png)
1. Why the entropy loss is negative and keep gowing?
2. The train/reward indicate the agent not learning something useful ?
3. After checking the actions of the agents action on the trade dataset , the actions almost the same , buy some shares and keep holding....

Guide de contribution

Aucun guide de contribution indexé pour ce dépôt

Évaluation

Cette issue n'a pas encore été évaluée.

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.