googleapis / googleapis/python-aiplatform
`pyspark` connector to read & write from/to `Vertex AI Feature Store`
Đang mở
api: vertex-ai
- Ngôn ngữ chính
- Python
- Star
- 905
- Fork
- 465
- Merge trung bình
- 1 ngày 13 giờ
- Pull request đã merge (30 ngày)
- 44
Mô tả
- Currently, one can only use ai platform sdk or pandas to do CRUD operations on Vertex AI feature store.
- It would be nice, if there's a way to utilize `pyspark` to do the same so that one can scale their ETL for these operations for large datasets
Hướng dẫn đóng góp
Hướng nghiên cứu
The issue names no files, tests, or entry points; start by reviewing the existing AI Platform SDK and pandas CRUD paths for Vertex AI Feature Store and how a PySpark ETL connector would fit. Done means a defined way to read and write Feature Store data through PySpark at large-dataset scale.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Đánh giá
- Công nghệ
- google-cloud, python, spark
- Lĩnh vực
- cloud, data-engineering, machine-learning
- Loại issue
- Tính năng
- Độ khó
- 5/5
- Thời gian dự kiến
- Hơn một tuần
- Mức độ hoạt động
- Đình trệ
- Độ rõ ràng
- Cần làm rõ
- Mức phù hợp với người mới
- 28/100