Upload folder using huggingface_hub

multitask_config.json

@@ -0,0 +1,7 @@
+{
+  "model_name": "asosoft/KuBERT-Central-Kurdish-BERT-Model",
+  "num_sentiment": 3,
+  "num_offensive": 2,
+  "dropout": 0.2,
+  "vocab_size": 50259
+}

tokenizer_config.json

@@ -0,0 +1,213 @@
+{
+  "add_prefix_space": false,
+  "backend": "tokenizers",
+  "bos_token": "<|endoftext|>",
+  "clean_up_tokenization_spaces": true,
+  "cls_token": "[CLS]",
+  "do_basic_tokenize": true,
+  "do_lower_case": true,
+  "eos_token": "<|endoftext|>",
+  "errors": "replace",
+  "extra_special_tokens": [
+    "<|endoftext|>",
+    "<|startoftranscript|>",
+    "<|¡|>",
+    "<|¢|>",
+    "<|£|>",
+    "<|¤|>",
+    "<|¥|>",
+    "<|¦|>",
+    "<|§|>",
+    "<|¨|>",
+    "<|©|>",
+    "<|ª|>",
+    "<|«|>",
+    "<|¬|>",
+    "<|®|>",
+    "<|¯|>",
+    "<|°|>",
+    "<|±|>",
+    "<|²|>",
+    "<|³|>",
+    "<|´|>",
+    "<|µ|>",
+    "<|¶|>",
+    "<|·|>",
+    "<|¸|>",
+    "<|¹|>",
+    "<|º|>",
+    "<|»|>",
+    "<|¼|>",
+    "<|½|>",
+    "<|¾|>",
+    "<|¿|>",
+    "<|À|>",
+    "<|Á|>",
+    "<|Â|>",
+    "<|Ã|>",
+    "<|Ä|>",
+    "<|Å|>",
+    "<|Æ|>",
+    "<|Ç|>",
+    "<|È|>",
+    "<|É|>",
+    "<|Ê|>",
+    "<|Ë|>",
+    "<|Ì|>",
+    "<|Í|>",
+    "<|Î|>",
+    "<|Ï|>",
+    "<|Ð|>",
+    "<|Ñ|>",
+    "<|Ò|>",
+    "<|Ó|>",
+    "<|Ô|>",
+    "<|Õ|>",
+    "<|Ö|>",
+    "<|×|>",
+    "<|Ø|>",
+    "<|Ù|>",
+    "<|Ú|>",
+    "<|Û|>",
+    "<|Ü|>",
+    "<|Ý|>",
+    "<|Þ|>",
+    "<|ß|>",
+    "<|à|>",
+    "<|á|>",
+    "<|â|>",
+    "<|ã|>",
+    "<|ä|>",
+    "<|å|>",
+    "<|æ|>",
+    "<|ç|>",
+    "<|è|>",
+    "<|é|>",
+    "<|ê|>",
+    "<|ë|>",
+    "<|ì|>",
+    "<|í|>",
+    "<|î|>",
+    "<|ï|>",
+    "<|ð|>",
+    "<|ñ|>",
+    "<|ò|>",
+    "<|ó|>",
+    "<|ô|>",
+    "<|õ|>",
+    "<|ö|>",
+    "<|÷|>",
+    "<|ø|>",
+    "<|ù|>",
+    "<|ú|>",
+    "<|û|>",
+    "<|ü|>",
+    "<|ý|>",
+    "<|þ|>",
+    "<|ÿ|>",
+    "<|Ā|>",
+    "<|ā|>",
+    "<|Ă|>",
+    "<|ă|>",
+    "<|Ą|>",
+    "<|ą|>",
+    "<|Ć|>",
+    "<|ć|>",
+    "<|Ĉ|>",
+    "<|ĉ|>",
+    "<|Ċ|>",
+    "<|ċ|>",
+    "<|Č|>",
+    "<|č|>",
+    "<|Ď|>",
+    "<|ď|>",
+    "<|Đ|>",
+    "<|đ|>",
+    "<|Ē|>",
+    "<|ē|>",
+    "<|Ĕ|>",
+    "<|ĕ|>",
+    "<|Ė|>",
+    "<|ė|>",
+    "<|Ę|>",
+    "<|ę|>",
+    "<|Ě|>",
+    "<|ě|>",
+    "<|Ĝ|>",
+    "<|ĝ|>",
+    "<|Ğ|>",
+    "<|ğ|>",
+    "<|Ġ|>",
+    "<|ġ|>",
+    "<|Ģ|>",
+    "<|ģ|>",
+    "<|Ĥ|>",
+    "<|ĥ|>",
+    "<|Ħ|>",
+    "<|ħ|>",
+    "<|Ĩ|>",
+    "<|ĩ|>",
+    "<|Ī|>",
+    "<|ī|>",
+    "<|Ĭ|>",
+    "<|ĭ|>",
+    "<|Į|>",
+    "<|į|>",
+    "<|İ|>",
+    "<|ı|>",
+    "<|IJ|>",
+    "<|ij|>",
+    "<|Ĵ|>",
+    "<|ĵ|>",
+    "<|Ķ|>",
+    "<|ķ|>",
+    "<|ĸ|>",
+    "<|Ĺ|>",
+    "<|ĺ|>",
+    "<|Ļ|>",
+    "<|ļ|>",
+    "<|Ľ|>",
+    "<|ľ|>",
+    "<|Ŀ|>",
+    "<|ŀ|>",
+    "<|Ł|>",
+    "<|ł|>",
+    "<|Ń|>",
+    "<|Ûķ|>",
+    "<|ÛĮ|>",
+    "<|ا|>",
+    "<|ĠØ|>",
+    "<|ÙĪ|>",
+    "<|ÙĨ|>",
+    "<|ر|>",
+    "<|Ú©|>",
+    "<|ĠÙ|>",
+    "<|ت|>",
+    "<|اÙĨ|>",
+    "<|Ûİ|>",
+    "<|د|>",
+    "<|Ùħ|>",
+    "<|Ġب|>",
+    "<|ÛĨ|>",
+    "<|س|>",
+    "<|translate|>",
+    "<|transcribe|>",
+    "<|startoflm|>",
+    "<|startofprev|>",
+    "<|nocaptions|>",
+    "<|notimestamps|>"
+  ],
+  "is_local": false,
+  "local_files_only": false,
+  "mask_token": "[MASK]",
+  "model_max_length": 12,
+  "never_split": null,
+  "pad_token": "<|endoftext|>",
+  "processor_class": "WhisperProcessor",
+  "return_attention_mask": false,
+  "sep_token": "[SEP]",
+  "strip_accents": null,
+  "tokenize_chinese_chars": true,
+  "tokenizer_class": "BertTokenizer",
+  "unk_token": "[UNK]"
+}