ai-cfia / ai-cfia/api-test

Investigate Discrepancy in Test Scores and Zero Scores Compared to a Public Search Engine

Đang mở
#12 1 bình luận 0 reaction 2 người được giao Được @k-allagbe nhận Xem trên GitHub
Ngôn ngữ chính
Python
Star
1
Fork
0
Chỉ số merge pull request
Không có pull request nào được merge trong 30 ngày

Mô tả

## Summary
Investigate the reasons behind user-generated tests resulting in significantly lower scores compared to AI-generated tests. Additionally, look into why there are instances of zero scores or poor scores in comparison to Bing. Finally, ensure that the relevance and finesse of search results are on par or better than Bing's standards. Verify if all documents are indexed to eliminate any indexing issues.

## Tasks
- [ ] Analyze user-generated questions
- [ ] Investigate reasons for zero scores and poor performance compared to Bing
- [ ] Conduct a comparative analysis with Bing to benchmark search result relevance and finesse
- [ ] Verify the indexing status of all documents to rule out indexing problems

## Acceptance Criteria
- User and AI-generated test scores are compared to identify variations
- Clear reasons for zero scores or poor performance are outlined
- Search relevance and finesse match or surpass Bing's standards
- Assurance that all documents are correctly indexed to prevent indexing issues

Hướng dẫn đóng góp

Chưa lập chỉ mục được hướng dẫn đóng góp cho kho mã nguồn này

Đánh giá

Issue này chưa được đánh giá.

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.