devAmaresh / devAmaresh/SkinSenseAI

Allow Image Uploads in AI Chat

Đang mở
#2 0 bình luận 1 reaction 0 người được giao Xem trên GitHub
enhancement
Ngôn ngữ chính
JavaScript
Star
51
Fork
1
Chỉ số merge pull request
Không có pull request nào được merge trong 30 ngày

Mô tả

Currently, the AI chat supports only text-based interactions. For a richer user experience, especially in skincare analysis, users should be able to upload images (e.g., selfies or product labels) directly in the chat. The AI assistant can then analyze these images contextually and provide personalized responses.

Proposed Solution:

Add image upload support in the chat UI (frontend).

Update backend API to accept multipart/form-data for chat messages.

Integrate image analysis (using existing Gemini/OpenAI image APIs).

Store image metadata in chat history for better continuity.

Hướng dẫn đóng góp

Chưa lập chỉ mục được hướng dẫn đóng góp cho kho mã nguồn này

Hướng nghiên cứu

Bắt đầu bằng cách xác định các entry point của chat UI, chat API ở backend và lịch sử trò chuyện được đề cập trong issue. Xem lại cách các tin nhắn văn bản hiện tại được gửi và lưu trữ, sau đó xác định multipart/form-data, các image API hiện có của Gemini/OpenAI và metadata của hình ảnh kết hợp với nhau như thế nào. Công việc được hoàn thành khi người dùng có thể tải hình ảnh lên, nhận phân tích theo ngữ cảnh và thấy metadata của hình ảnh được giữ nguyên trong lịch sử trò chuyện.

Do mô hình lập chỉ mục viết ra từ nội dung của issue.

Đánh giá

Công nghệ
javascript
Lĩnh vực
ai, full-stack
Loại issue
Tính năng
Độ khó
5/5
Thời gian dự kiến
Hơn một tuần
Mức độ hoạt động
Đình trệ
Độ rõ ràng
Khá rõ ràng
Mức phù hợp với người mới
25/100

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.