bigscience-workshop / bigscience-workshop/data_tooling

Create dataset offenseval_dravidian

Đang mở
#347 0 bình luận 0 reaction 0 người được giao Xem trên GitHub
data catalog
Ngôn ngữ chính
HTML
Star
91
Fork
47
Chỉ số merge pull request
Không có pull request nào được merge trong 30 ngày

Mô tả

- uid: offenseval_dravidian
- type: primary
- description:
- name: Offenseval Dravidian
- description: Gold standard corpus for offensive language identification of code-mixed text in Dravidian languages (Tamil-English, Malayalam-English, and Kannada-English).
- homepage: https://huggingface.co/datasets/offenseval_dravidian
- validated: True
- languages:
- language_names:
- Indic
- Tamil
- Kannada
- Malayalam
- language_comments:
- language_locations:
- Southern Asia
- India
- validated: False
- custodian:
- name: Bharathi Raja Asoka Chakravarthi (
- in_catalogue:
- type: A private individual
- location: Ireland
- contact_name: Bharathi Raja Asoka Chakravarthi
- contact_email: bharathiraja.akr@gmail.com
- contact_submitter: False
- additional: https://github.com/bharathichezhiyan
- validated: False
- availability:
- procurement:
- for_download: Yes - it has a direct download link or links
- download_url: https://zenodo.org/record/4750858#.YZZArr1BydZ , https://huggingface.co/datasets/offenseval_dravidian
- download_email:
- licensing:
- has_licenses: Yes
- license_text:
- license_properties:
- open license
- license_list:
- cc-by-4.0: Creative Commons Attribution 4.0 International
- pii:
- has_pii: Yes
- generic_pii_likely: somewhat likely
- generic_pii_list:
- dates (birth, death, etc.)
- numeric_pii_likely: none
- numeric_pii_list:
- sensitive_pii_likely: somewhat likely
- sensitive_pii_list:
- racial or ethnic origin
- religious or philosophical beliefs
- political opinions
- data concerning a person's sex life or sexual orientation
- no_pii_justification_class:
- no_pii_justification_text:
- validated: False
- source_category:
- category_type: website
- category_web: social media
- category_media:
- validated: False
- media:
- category:
- text
- text_format:
- .CSV
- audiovisual_format:
- image_format:
- database_format:
- .CSV
- text_is_transcribed: No
- instance_type: Sentence and its offensive index
- instance_count: 10K

Hướng dẫn đóng góp

Chưa lập chỉ mục được hướng dẫn đóng góp cho kho mã nguồn này

Hướng nghiên cứu

Tạo offenseval_dravidian.json từ bản ghi đầy đủ trong issue, trước tiên kiểm tra các tệp JSON của dataset ở gần đó để xác định vị trí và định dạng được mong đợi. Công việc được hoàn tất khi mục danh mục mới là JSON hợp lệ và giữ nguyên siêu dữ liệu dataset, các liên kết tải xuống, thông tin cấp phép và các trường về quyền riêng tư đã được cung cấp.

Do mô hình lập chỉ mục viết ra từ nội dung của issue.

Đánh giá

Lĩnh vực
data
Loại issue
Tính năng
Độ khó
1/5
Thời gian dự kiến
Dưới một giờ
Mức độ hoạt động
Đình trệ
Độ rõ ràng
Đặc tả rõ ràng
Mức phù hợp với người mới
55/100

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.