agentscope-ai / agentscope-ai/Trinity-RFT

请问chord中的sft和rl数据的具体设置应该是?

Đang mở
#331 5 bình luận 0 reaction 0 người được giao Xem trên GitHub
Ngôn ngữ chính
Python
Star
701
Fork
79
Merge trung bình
8 giờ 7 phút
Pull request đã merge (30 ngày)
1

Mô tả

作者您好,感谢您十分有趣的工作(ON-POLICY RL MEETS OFF-POLICY EXPERTS: HARMONIZING SUPERVISED FINE-TUNING AND REINFORCEMENT LEARNING VIA DYNAMIC WEIGHTING)。我想运行一下chord代码,但我对chord的sft数据集和rl数据集是哪些不太清楚。我是直接下载chord 例子中提到的datajuicer/Trinity-ToolAce-RL-split和datajuicer/Trinity-ToolAce-SFT-split,然后替换yaml文件中相应的路径即可嘛?
此外,您在论文中提到对于数学推理任务,采样了5k sft和20k rl数据,但我好像没有找到相应文件的下载路径?请问这些文件是暂时还未开源嘛?您计划共享相应的文件嘛?

Hướng dẫn đóng góp

Mở hướng dẫn đóng góp

Đánh giá

Issue này chưa được đánh giá.

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.