bigscience-workshop / bigscience-workshop/data_tooling
Create dataset offenseval_dravidian
- Ngôn ngữ chính
- HTML
- Star
- 91
- Fork
- 47
- Chỉ số merge pull request
- Không có pull request nào được merge trong 30 ngày
Mô tả
- uid: offenseval_dravidian
- type: primary
- description:
- name: Offenseval Dravidian
- description: Gold standard corpus for offensive language identification of code-mixed text in Dravidian languages (Tamil-English, Malayalam-English, and Kannada-English).
- homepage: https://huggingface.co/datasets/offenseval_dravidian
- validated: True
- languages:
- language_names:
- Indic
- Tamil
- Kannada
- Malayalam
- language_comments:
- language_locations:
- Southern Asia
- India
- validated: False
- custodian:
- name: Bharathi Raja Asoka Chakravarthi (
- in_catalogue:
- type: A private individual
- location: Ireland
- contact_name: Bharathi Raja Asoka Chakravarthi
- contact_email: bharathiraja.akr@gmail.com
- contact_submitter: False
- additional: https://github.com/bharathichezhiyan
- validated: False
- availability:
- procurement:
- for_download: Yes - it has a direct download link or links
- download_url: https://zenodo.org/record/4750858#.YZZArr1BydZ , https://huggingface.co/datasets/offenseval_dravidian
- download_email:
- licensing:
- has_licenses: Yes
- license_text:
- license_properties:
- open license
- license_list:
- cc-by-4.0: Creative Commons Attribution 4.0 International
- pii:
- has_pii: Yes
- generic_pii_likely: somewhat likely
- generic_pii_list:
- dates (birth, death, etc.)
- numeric_pii_likely: none
- numeric_pii_list:
- sensitive_pii_likely: somewhat likely
- sensitive_pii_list:
- racial or ethnic origin
- religious or philosophical beliefs
- political opinions
- data concerning a person's sex life or sexual orientation
- no_pii_justification_class:
- no_pii_justification_text:
- validated: False
- source_category:
- category_type: website
- category_web: social media
- category_media:
- validated: False
- media:
- category:
- text
- text_format:
- .CSV
- audiovisual_format:
- image_format:
- database_format:
- .CSV
- text_is_transcribed: No
- instance_type: Sentence and its offensive index
- instance_count: 10K
Hướng dẫn đóng góp
Chưa lập chỉ mục được hướng dẫn đóng góp cho kho mã nguồn này
Hướng nghiên cứu
Tạo offenseval_dravidian.json từ bản ghi đầy đủ trong issue, trước tiên kiểm tra các tệp JSON của dataset ở gần đó để xác định vị trí và định dạng được mong đợi. Công việc được hoàn tất khi mục danh mục mới là JSON hợp lệ và giữ nguyên siêu dữ liệu dataset, các liên kết tải xuống, thông tin cấp phép và các trường về quyền riêng tư đã được cung cấp.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Đánh giá
- Lĩnh vực
- data
- Loại issue
- Tính năng
- Độ khó
- 1/5
- Thời gian dự kiến
- Dưới một giờ
- Mức độ hoạt động
- Đình trệ
- Độ rõ ràng
- Đặc tả rõ ràng
- Mức phù hợp với người mới
- 55/100