Classification : Implement cron job to update status of jobs/batch

Problem

Both the Fine-Tuning API and the Batch API in OpenAI run asynchronously. Once a request is created, the job continues processing on OpenAI’s side, and the status only updates when the job progresses (e.g., queued → running → succeeded/failed).

Currently, to know whether a fine-tuning job or batch job has completed, the user must manually call the Retrieve API for each object. This manual polling is tedious, inefficient, and not scalable.

Proposed Solution

• Set up a cron job (or background worker) that:

• Periodically calls the Retrieve API for both fine-tuning and batch jobs.

• Updates the database with the latest job status and results.

• Ensures that when users query the database, they receive up-to-date information without needing to manually poll OpenAI endpoints.

Bắt đầu với các entry point của Fine-Tuning API và Batch API Retrieve API được mô tả trong issue, sau đó theo dõi cách trạng thái job và kết quả được lưu trữ trong cơ sở dữ liệu. Xác định hành vi của worker định kỳ cho cả hai loại job, bao gồm các lần cập nhật trạng thái và kết quả được truy xuất. Hoàn thành có nghĩa là các truy vấn cơ sở dữ liệu cung cấp thông tin hiện tại mà không cần polling thủ công.