--- language: - ne - en tags: - sentence-transformers - sentence-similarity - feature-extraction - generated_from_trainer - dataset_size:98620 - loss:CachedMultipleNegativesRankingLoss - loss:MultipleNegativesRankingLoss base_model: intfloat/multilingual-e5-small widget: - source_sentence: वित्तीय वर्ष २०८१ देखि प्रदेश सरकारको पोर्टलबाट प्रादेशिक न्यायिक सहायता कोषमा अनलाइन आवेदन दिन मिल्ने नीति कुन हो? sentences: - 'नीति सूचना: प्रादेशिक न्यायिक सहायता कोषको लागि नागरिकले अनलाइन माध्यमबाट दरखास्त दिन पाउने व्यवस्था वित्तीय वर्ष २०८१ बाट लागू भएको छ। यस अन्तर्गत आवेदकले सम्बन्धित प्रदेश सरकारको आधिकारिक पोर्टलमार्फत निवेदन पेश गर्न सक्नेछन्।' - 'नीति सूचना: नागरिकले प्रादेशिक न्यायिक सहायता कोषबाट सहायता लिन केन्द्रीय कार्यालयमा उपस्थित हुनुपर्छ भन्ने व्यवस्था खारेज गरिएको छ। अब सेवा भौतिक रूपमा मात्र उपलब्ध हुनेछ, अनलाइन प्रणाली लागू हुँदैन।' - 'कार्यविधि सूचना: प्रादेशिक न्यायिक सहायता कोषको लागि दरखास्त दिने अनलाइन माध्यम वित्तीय वर्ष २०८२ देखि लागू हुने गरी तयार गरिएको छ। हाललाई कागजी निवेदन मात्र मान्य हुन्छ।' - 'स्थानीय निकायले जारी गरेको नीति सूचना: वित्तीय वर्ष २०८१ मा प्रादेशिक न्यायिक सहायता कोषको लागि छुट्ट्याइएको बजेट ४ करोड रुपैयाँ थियो। यस्तो रकम केन्द्रीय कोषभन्दा फरक छ। आवेदकले प्रदेश सरकारको पोर्टलबाट मात्र निवेदन दिनुपर्ने व्यवस्था गरिएको छ।' - 'नीति सूचना: केन्द्रीय न्यायिक सहायता कोषको लागि अनलाइन आवेदन प्रणाली वित्तीय वर्ष २०८१ बाट सञ्चालनमा आएको छ। प्रादेशिक कोषभन्दा फरक रूपमा केन्द्रीय पोर्टलबाट नै दरखास्त दिनुपर्ने व्यवस्था छ।' - source_sentence: डोल्पाको चिटिमुख उच्च भूभाग हिउँदमा बन्द र मुस्ताङको लोमान्थाङ ट्रेक वर्षायाममा बन्द भनेर उल्लेख गरिएको integrated planning framework अन्तर्गतको नीति सूचना खोज्नुहोस्। sentences: - हिमाली संरक्षण नीति २०८१ अनुसार, डोल्पा जिल्लाको साइबेर्टियन चिटिमुख भूभागमा हिउँदमा पर्यटक प्रवेश निषेध गरिएको छ। यस नीतिले त्यहाँको जैविक विविधता संरक्षण गर्न खोजेको छ। तर यस नीतिमा मुस्ताङको लोमान्थाङ मार्गको यात्रा सिजनबारे कुनै उल्लेख छैन। - 'पर्यटन मन्त्रालयको सूचना: मुस्ताङको लोमान्थाङ पदयात्रा मार्ग वर्षायाममा बन्द हुन्छ र यसका लागि विशेष अनुमति आवश्यक पर्दछ। यो नीति कारवाहीले उच्च भूभागको सुरक्षा गर्छ। तर डोल्पा जिल्लाको चिटिमुख क्षेत्रको हिउँद प्रवेश नियम यसमा समावेश छैन।' - 'पर्यटन तथा भूगोल विभागको नीति सूचना: डोल्पा जिल्लाको चिटिमुख उच्च भूभाग हिउँदमा पर्यटक प्रवेश निषेधित क्षेत्र हो। त्यसैगरी मुस्ताङ जिल्लाको लोमान्थाङ पदयात्रा मार्ग वर्षायाममा बन्द रहन्छ। यी दुवै नियम संघीय पदयात्रा सुरक्षा प्रोटोकल अन्तर्गत एकीकृत रूपमा लागू हुन्छन् र दुई जिल्लाबीचको पर्यटकीय मार्ग योजनामा यी सिजन प्रतिबन्धहरूलाई आधार मानिन्छ।' - 'कान्तिपुर क्षेत्रीय योजना आदेश: डोल्पा र मुस्ताङ दुवै जिल्लामा पदयात्रा नियमहरू लागू छन्। डोल्पाको चिटिमुख क्षेत्र हिउँदमा बन्द हुन्छ भने लोमान्थाङ मार्ग वर्षायाममा। तर यो आदेशले दुई ठाउँबीचको कुनै संयुक्त पदयात्रा मार्ग वा जोड विस्तार गर्दैन।' - 'स्थानीय सरकार परिपत्र: लोमान्थाङ पुग्ने यात्रुले डोल्पा हुँदै जान पाउँछन् तर चिटिमुख क्षेत्रमा हिउँदभरि बास बस्न पाइँदैन। यसले पर्यटन प्रवर्धनलाई उच्च प्राथमिकता दिन्छ। सिजन रूट सम्बन्ध भने स्पष्ट छैन।' - source_sentence: म आफ्नो कार यात्राको लागि बीमा गराउन चाहन्छु, त्यसको लागि के-कस्ता कागजातहरू चाहिन्छ? sentences: - टिकट रद्द गर्नको लागि, कृपया तपाईंले टिकट बुक गरेको यात्रा कम्पनीको आधिकारिक वेबसाइट वा मोबाइल एपमा गएर 'टिकट रद्द गर्नुहोस्' विकल्प प्रयोग गर्नुहोस्। रद्द प्रक्रिया पूरा भएपछि फिर्ता रकमको जानकारी तपाईंलाई दिइनेछ। - पासवर्ड रिसेट गर्नको लागि, कृपया बैंकको आधिकारिक वेबसाइटमा गएर 'पासवर्ड बिर्सिए' विकल्प प्रयोग गर्नुहोस् वा बैंकको ग्राहक सेवा केन्द्रमा सम्पर्क गर्नुहोस्। - कार यात्रा बीमाका लागि तपाईंलाई सवारी साधनको दर्ता प्रमाणपत्र, चालककोใบपुर्जा, र व्यक्तिगत विवरणको फोटोकपी चाहिन्छ। - source_sentence: gas stove ma brass burner ra auto ignition bhayeko kun thik hola? Pigeon vs Sunflame ko specs k kasto cha? sentences: - We are offering a special deal on the Havells 2 Burner Induction Cooktop (IC-2000) at NPR 3,900. It has a sleek black glass surface, 2000W power, and 8 pre-set cooking modes. This induction cooktop is perfect for Nepali homes that prefer energy-efficient cooking without using gas cylinders. - New stock of Himalayan Pink Salt Lamps has arrived at NPR 1,200 each. These lamps come with a wooden base and a 15-watt bulb, providing a warm, soothing glow for your living room. Ideal for home decoration and creating a relaxing ambiance in Kathmandu's chilly evenings. - The Prestige Omega Deluxe 3 Burner Gas Stove (PIC 3.0) costs NPR 6,800 and has a stainless steel body with anti-slip rubber feet. It includes a 5-year warranty on the burner head and a 2-year warranty on the body. This model is ideal for large families who need multiple burners for simultaneous cooking. - The Pigeon by Stovekraft 2 Burner Gas Stove (PIC-2B-SS) with toughened glass top and brass burners is priced at NPR 4,500. It offers a heat output of 2.5 kW per burner and comes with a 1-year warranty. In comparison, the Sunflame GT-707 2 Burner Stove features stainless steel body, auto-ignition, and a higher heat output of 2.8 kW per burner, costing NPR 5,200. For Nepali kitchens, the Sunflame model is better for faster cooking due to its higher BTU, while the Pigeon is more budget-friendly with durable brass burners. - source_sentence: yo printer haru nepal ma kati samma shipping time lagcha ra delivery charge kati ho? sentences: - The Canon PIXMA TS6420 and HP Envy 6055e are both popular all-in-one printers for home offices. The Canon offers better photo print quality, while the HP has a slightly lower cost per page for text documents. Both support wireless printing and are available in Nepal, but the HP Envy often comes with a longer warranty period from local dealers. For a budget-friendly option with good overall performance, the HP Envy 6055e is a strong choice in Kathmandu. - A desk organizer can help you keep your workspace tidy. Many Nepali users prefer wooden or metal organizers with multiple compartments for pens, papers, and accessories. Prices for these organizers range from NPR 800 to NPR 3,000 depending on the material and size. - Nepal's postal service has introduced a new tracking system for international parcels. Customers can now track their shipments in real-time using a mobile app. This service is available for all major courier companies in the country. - The Canon PIXMA TS6420 has a 5-color individual ink system for vibrant photos, while the HP Envy 6055e uses a 2-cartridge system. Both printers have a 100-sheet input tray and support borderless printing up to 5x7 inches. The Canon model is slightly larger but offers a dedicated photo tray for glossy paper. datasets: - jangedoo/nepali-qa-9k - jangedoo/nepali-ecommerce-retrieval - jangedoo/ne-en-cross-lingual - jangedoo/sanoir-general - jangedoo/ne-wiki-qa pipeline_tag: sentence-similarity library_name: sentence-transformers metrics: - cosine_accuracy@10 - cosine_precision@10 - cosine_precision@50 - cosine_recall@10 - cosine_recall@50 - cosine_ndcg@10 - cosine_mrr@10 - cosine_map@10 - src2trg_accuracy - trg2src_accuracy - mean_accuracy - pearson_cosine - spearman_cosine - cosine_precision@3 - cosine_recall@3 model-index: - name: SentenceTransformer based on intfloat/multilingual-e5-small results: - task: type: information-retrieval name: Information Retrieval dataset: name: multi lang news ir type: multi_lang_news_ir metrics: - type: cosine_accuracy@10 value: 0.9706446661550269 name: Cosine Accuracy@10 - type: cosine_precision@10 value: 0.09706446661550268 name: Cosine Precision@10 - type: cosine_precision@50 value: 0.019727551803530315 name: Cosine Precision@50 - type: cosine_recall@10 value: 0.9706446661550269 name: Cosine Recall@10 - type: cosine_recall@50 value: 0.9863775901765157 name: Cosine Recall@50 - type: cosine_ndcg@10 value: 0.926478849487046 name: Cosine Ndcg@10 - type: cosine_mrr@10 value: 0.9121327157109959 name: Cosine Mrr@10 - type: cosine_map@10 value: 0.9121327157109965 name: Cosine Map@10 - task: type: information-retrieval name: Information Retrieval dataset: name: en news ir type: en_news_ir metrics: - type: cosine_accuracy@10 value: 0.9796640141467727 name: Cosine Accuracy@10 - type: cosine_precision@10 value: 0.09796640141467726 name: Cosine Precision@10 - type: cosine_precision@50 value: 0.01978779840848806 name: Cosine Precision@50 - type: cosine_recall@10 value: 0.9796640141467727 name: Cosine Recall@10 - type: cosine_recall@50 value: 0.9893899204244032 name: Cosine Recall@50 - type: cosine_ndcg@10 value: 0.9480388007104246 name: Cosine Ndcg@10 - type: cosine_mrr@10 value: 0.93758192637503 name: Cosine Mrr@10 - type: cosine_map@10 value: 0.9375819263750298 name: Cosine Map@10 - task: type: information-retrieval name: Information Retrieval dataset: name: ne news ir type: ne_news_ir metrics: - type: cosine_accuracy@10 value: 0.9722033898305085 name: Cosine Accuracy@10 - type: cosine_precision@10 value: 0.09722033898305084 name: Cosine Precision@10 - type: cosine_precision@50 value: 0.01980338983050847 name: Cosine Precision@50 - type: cosine_recall@10 value: 0.9722033898305085 name: Cosine Recall@10 - type: cosine_recall@50 value: 0.9901694915254238 name: Cosine Recall@50 - type: cosine_ndcg@10 value: 0.922837429073493 name: Cosine Ndcg@10 - type: cosine_mrr@10 value: 0.9068890234059728 name: Cosine Mrr@10 - type: cosine_map@10 value: 0.9068890234059727 name: Cosine Map@10 - task: type: translation name: Translation dataset: name: translation type: translation metrics: - type: src2trg_accuracy value: 0.9735449735449735 name: Src2Trg Accuracy - type: trg2src_accuracy value: 0.9788359788359788 name: Trg2Src Accuracy - type: mean_accuracy value: 0.9761904761904762 name: Mean Accuracy - task: type: semantic-similarity name: Semantic Similarity dataset: name: stsb en type: stsb_en metrics: - type: pearson_cosine value: 0.8318928494866499 name: Pearson Cosine - type: spearman_cosine value: 0.8416233773004035 name: Spearman Cosine - task: type: semantic-similarity name: Semantic Similarity dataset: name: stsb ne type: stsb_ne metrics: - type: pearson_cosine value: 0.7475189303832809 name: Pearson Cosine - type: spearman_cosine value: 0.7428854222271736 name: Spearman Cosine - task: type: information-retrieval name: Information Retrieval dataset: name: nepali qa 9k type: nepali_qa_9k metrics: - type: cosine_accuracy@10 value: 0.8711111111111111 name: Cosine Accuracy@10 - type: cosine_precision@10 value: 0.08711111111111111 name: Cosine Precision@10 - type: cosine_precision@50 value: 0.019977777777777775 name: Cosine Precision@50 - type: cosine_recall@10 value: 0.8711111111111111 name: Cosine Recall@10 - type: cosine_recall@50 value: 0.9988888888888889 name: Cosine Recall@50 - type: cosine_ndcg@10 value: 0.5319288256700926 name: Cosine Ndcg@10 - type: cosine_mrr@10 value: 0.4276267636684313 name: Cosine Mrr@10 - type: cosine_map@10 value: 0.4276267636684304 name: Cosine Map@10 - task: type: information-retrieval name: Information Retrieval dataset: name: nepali query passage 10k type: nepali_query_passage_10k metrics: - type: cosine_accuracy@10 value: 0.94 name: Cosine Accuracy@10 - type: cosine_precision@3 value: 0.2783333333333334 name: Cosine Precision@3 - type: cosine_precision@10 value: 0.09399999999999999 name: Cosine Precision@10 - type: cosine_precision@50 value: 0.0197 name: Cosine Precision@50 - type: cosine_recall@3 value: 0.835 name: Cosine Recall@3 - type: cosine_recall@10 value: 0.94 name: Cosine Recall@10 - type: cosine_recall@50 value: 0.985 name: Cosine Recall@50 - type: cosine_ndcg@10 value: 0.7961329560792322 name: Cosine Ndcg@10 - type: cosine_mrr@10 value: 0.7495942460317458 name: Cosine Mrr@10 - type: cosine_map@10 value: 0.749594246031746 name: Cosine Map@10 - task: type: information-retrieval name: Information Retrieval dataset: name: nepali ecomm type: nepali_ecomm metrics: - type: cosine_accuracy@10 value: 0.8494117647058823 name: Cosine Accuracy@10 - type: cosine_precision@3 value: 0.2156862745098039 name: Cosine Precision@3 - type: cosine_precision@10 value: 0.08494117647058823 name: Cosine Precision@10 - type: cosine_precision@50 value: 0.019623529411764706 name: Cosine Precision@50 - type: cosine_recall@3 value: 0.6470588235294118 name: Cosine Recall@3 - type: cosine_recall@10 value: 0.8494117647058823 name: Cosine Recall@10 - type: cosine_recall@50 value: 0.9811764705882353 name: Cosine Recall@50 - type: cosine_ndcg@10 value: 0.6384162402367405 name: Cosine Ndcg@10 - type: cosine_mrr@10 value: 0.5717917833800185 name: Cosine Mrr@10 - type: cosine_map@10 value: 0.5717917833800187 name: Cosine Map@10 - task: type: information-retrieval name: Information Retrieval dataset: name: sanoir general type: sanoir_general metrics: - type: cosine_accuracy@10 value: 0.9685746352413019 name: Cosine Accuracy@10 - type: cosine_precision@3 value: 0.30190796857463525 name: Cosine Precision@3 - type: cosine_precision@10 value: 0.0968574635241302 name: Cosine Precision@10 - type: cosine_precision@50 value: 0.01975308641975309 name: Cosine Precision@50 - type: cosine_recall@3 value: 0.9057239057239057 name: Cosine Recall@3 - type: cosine_recall@10 value: 0.9685746352413019 name: Cosine Recall@10 - type: cosine_recall@50 value: 0.9876543209876543 name: Cosine Recall@50 - type: cosine_ndcg@10 value: 0.8676131470610388 name: Cosine Ndcg@10 - type: cosine_mrr@10 value: 0.8344449788894237 name: Cosine Mrr@10 - type: cosine_map@10 value: 0.8344449788894234 name: Cosine Map@10 --- # SentenceTransformer based on intfloat/multilingual-e5-small This is a [sentence-transformers](https://www.SBERT.net) model finetuned from [intfloat/multilingual-e5-small](https://huggingface.co/intfloat/multilingual-e5-small) on the [nepali_qa_9k](https://huggingface.co/datasets/jangedoo/nepali-qa-9k), [ecommerce](https://huggingface.co/datasets/jangedoo/nepali-ecommerce-retrieval), [cross_lingual](https://huggingface.co/datasets/jangedoo/ne-en-cross-lingual), [sanoir_general](https://huggingface.co/datasets/jangedoo/sanoir-general) and [ne_wiki_qa](https://huggingface.co/datasets/jangedoo/ne-wiki-qa) datasets. It maps sentences & paragraphs to a 384-dimensional dense vector space and can be used for retrieval. ## Model Details ### Model Description - **Model Type:** Sentence Transformer - **Base model:** [intfloat/multilingual-e5-small](https://huggingface.co/intfloat/multilingual-e5-small) - **Maximum Sequence Length:** 512 tokens - **Output Dimensionality:** 384 dimensions - **Similarity Function:** Cosine Similarity - **Supported Modality:** Text - **Training Datasets:** - [nepali_qa_9k](https://huggingface.co/datasets/jangedoo/nepali-qa-9k) - [ecommerce](https://huggingface.co/datasets/jangedoo/nepali-ecommerce-retrieval) - [cross_lingual](https://huggingface.co/datasets/jangedoo/ne-en-cross-lingual) - [sanoir_general](https://huggingface.co/datasets/jangedoo/sanoir-general) - [ne_wiki_qa](https://huggingface.co/datasets/jangedoo/ne-wiki-qa) - **Languages:** ne, en ### Model Sources - **Documentation:** [Sentence Transformers Documentation](https://sbert.net) - **Repository:** [Sentence Transformers on GitHub](https://github.com/huggingface/sentence-transformers) - **Hugging Face:** [Sentence Transformers on Hugging Face](https://huggingface.co/models?library=sentence-transformers) ### Full Model Architecture ``` SentenceTransformer( (0): Transformer({'transformer_task': 'feature-extraction', 'modality_config': {'text': {'method': 'forward', 'method_output_name': 'last_hidden_state'}}, 'module_output_name': 'token_embeddings', 'architecture': 'BertModel'}) (1): Pooling({'embedding_dimension': 384, 'pooling_mode': 'mean', 'include_prompt': True}) (2): Normalize({}) ) ``` ## Usage ### Direct Usage (Sentence Transformers) First install the Sentence Transformers library: ```bash pip install -U sentence-transformers ``` Then you can load this model and run inference. ```python from sentence_transformers import SentenceTransformer # Download from the 🤗 Hub model = SentenceTransformer("jangedoo/sanolm-v1") # Run inference queries = [ 'yo printer haru nepal ma kati samma shipping time lagcha ra delivery charge kati ho?', ] documents = [ 'The Canon PIXMA TS6420 and HP Envy 6055e are both popular all-in-one printers for home offices. The Canon offers better photo print quality, while the HP has a slightly lower cost per page for text documents. Both support wireless printing and are available in Nepal, but the HP Envy often comes with a longer warranty period from local dealers. For a budget-friendly option with good overall performance, the HP Envy 6055e is a strong choice in Kathmandu.', 'The Canon PIXMA TS6420 has a 5-color individual ink system for vibrant photos, while the HP Envy 6055e uses a 2-cartridge system. Both printers have a 100-sheet input tray and support borderless printing up to 5x7 inches. The Canon model is slightly larger but offers a dedicated photo tray for glossy paper.', 'A desk organizer can help you keep your workspace tidy. Many Nepali users prefer wooden or metal organizers with multiple compartments for pens, papers, and accessories. Prices for these organizers range from NPR 800 to NPR 3,000 depending on the material and size.', ] query_embeddings = model.encode_query(queries) document_embeddings = model.encode_document(documents) print(query_embeddings.shape, document_embeddings.shape) # [1, 384] [3, 384] # Get the similarity scores for the embeddings similarities = model.similarity(query_embeddings, document_embeddings) print(similarities) # tensor([[0.4183, 0.1906, 0.1803]]) ``` ## Evaluation ### Metrics #### Information Retrieval * Datasets: `multi_lang_news_ir`, `en_news_ir`, `ne_news_ir` and `nepali_qa_9k` * Evaluated with [InformationRetrievalEvaluator](https://sbert.net/docs/package_reference/sentence_transformer/evaluation.html#sentence_transformers.sentence_transformer.evaluation.InformationRetrievalEvaluator) with these parameters: ```json { "query_prompt_name": "query", "corpus_prompt_name": "document" } ``` | Metric | multi_lang_news_ir | en_news_ir | ne_news_ir | nepali_qa_9k | |:--------------------|:-------------------|:-----------|:-----------|:-------------| | cosine_accuracy@10 | 0.9706 | 0.9797 | 0.9722 | 0.8711 | | cosine_precision@10 | 0.0971 | 0.098 | 0.0972 | 0.0871 | | cosine_precision@50 | 0.0197 | 0.0198 | 0.0198 | 0.02 | | cosine_recall@10 | 0.9706 | 0.9797 | 0.9722 | 0.8711 | | cosine_recall@50 | 0.9864 | 0.9894 | 0.9902 | 0.9989 | | **cosine_ndcg@10** | **0.9265** | **0.948** | **0.9228** | **0.5319** | | cosine_mrr@10 | 0.9121 | 0.9376 | 0.9069 | 0.4276 | | cosine_map@10 | 0.9121 | 0.9376 | 0.9069 | 0.4276 | #### Translation * Dataset: `translation` * Evaluated with [TranslationEvaluator](https://sbert.net/docs/package_reference/sentence_transformer/evaluation.html#sentence_transformers.sentence_transformer.evaluation.TranslationEvaluator) | Metric | Value | |:------------------|:-----------| | src2trg_accuracy | 0.9735 | | trg2src_accuracy | 0.9788 | | **mean_accuracy** | **0.9762** | #### Semantic Similarity * Datasets: `stsb_en` and `stsb_ne` * Evaluated with [EmbeddingSimilarityEvaluator](https://sbert.net/docs/package_reference/sentence_transformer/evaluation.html#sentence_transformers.sentence_transformer.evaluation.EmbeddingSimilarityEvaluator) | Metric | stsb_en | stsb_ne | |:--------------------|:-----------|:-----------| | pearson_cosine | 0.8319 | 0.7475 | | **spearman_cosine** | **0.8416** | **0.7429** | #### Information Retrieval * Datasets: `nepali_query_passage_10k`, `nepali_ecomm` and `sanoir_general` * Evaluated with [InformationRetrievalEvaluator](https://sbert.net/docs/package_reference/sentence_transformer/evaluation.html#sentence_transformers.sentence_transformer.evaluation.InformationRetrievalEvaluator) with these parameters: ```json { "query_prompt_name": "query", "corpus_prompt_name": "document" } ``` | Metric | nepali_query_passage_10k | nepali_ecomm | sanoir_general | |:--------------------|:-------------------------|:-------------|:---------------| | cosine_accuracy@10 | 0.94 | 0.8494 | 0.9686 | | cosine_precision@3 | 0.2783 | 0.2157 | 0.3019 | | cosine_precision@10 | 0.094 | 0.0849 | 0.0969 | | cosine_precision@50 | 0.0197 | 0.0196 | 0.0198 | | cosine_recall@3 | 0.835 | 0.6471 | 0.9057 | | cosine_recall@10 | 0.94 | 0.8494 | 0.9686 | | cosine_recall@50 | 0.985 | 0.9812 | 0.9877 | | **cosine_ndcg@10** | **0.7961** | **0.6384** | **0.8676** | | cosine_mrr@10 | 0.7496 | 0.5718 | 0.8344 | | cosine_map@10 | 0.7496 | 0.5718 | 0.8344 | ## Training Details ### Training Datasets
nepali_qa_9k #### nepali_qa_9k * Dataset: [nepali_qa_9k](https://huggingface.co/datasets/jangedoo/nepali-qa-9k) at [33f9def](https://huggingface.co/datasets/jangedoo/nepali-qa-9k/tree/33f9defac3c4991494d10cc5ad6acb0b5236c9b0) * Size: 6,480 training samples * Columns: question and answer * Approximate statistics based on the first 100 samples: | | question | answer | |:---------|:----------------------------------------------------------------------------------|:-----------------------------------------------------------------------------------| | type | string | string | | modality | text | text | | details | | | * Samples: | question | answer | |:---------------------------------------------------------------------------------------|:----------------------------------------------------------------------------------------------------------------------------------------------------------------------| | मेरो ल्यापटप धेरै ढिलो (slow) भइरहेको छ, के गर्ने? | ल्यापटपको प्रदर्शन सुधार गर्न, अनावश्यक सफ्टवेयर हटाउनुहोस्, RAM र प्रोसेसरको प्रयोग जाँच गर्नुहोस्, र सिस्टमलाई अपडेट गर्नुहोस्। | | मलाई अचानक ज्वरो आएको छ, मैले के गर्नुपर्छ? | यदि तपाईंलाई ज्वरो आएको छ भने, आराम गर्नुहोस्, पर्याप्त पानी पिउनुहोस्, र यदि ज्वरो धेरै छ वा असहजता महसुस हुन्छ भने तुरुन्त डाक्टरसँग परामर्श लिनुहोस्। | | मेरो मोबाइलको डाटा ब्याकअप कसरी गर्न सकिन्छ? विभिन्न विकल्पहरू के-के छन्? | तपाईंले आफ्नो मोबाइल सेटिङ्समा गएर क्लाउड सर्भिस (जस्तै Google Drive वा iCloud) प्रयोग गरेर वा विशेष ब्याकअप एपहरू मार्फत डाटा ब्याकअप गर्न सक्नुहुन्छ। | * Loss: [CachedMultipleNegativesRankingLoss](https://sbert.net/docs/package_reference/sentence_transformer/losses.html#cachedmultiplenegativesrankingloss) with these parameters: ```json { "scale": 20.0, "similarity_fct": "cos_sim", "mini_batch_size": 64, "gather_across_devices": false, "directions": [ "query_to_doc" ], "partition_mode": "joint", "hardness_mode": null, "hardness_strength": 0.0 } ```
ecommerce #### ecommerce * Dataset: [ecommerce](https://huggingface.co/datasets/jangedoo/nepali-ecommerce-retrieval) at [4b7dd81](https://huggingface.co/datasets/jangedoo/nepali-ecommerce-retrieval/tree/4b7dd8188039018701baa94eb56a1a63d0ab16d5) * Size: 1,367 training samples * Columns: query, document, negative1, negative2, and negative3 * Approximate statistics based on the first 100 samples: | | query | document | negative1 | negative2 | negative3 | |:---------|:-----------------------------------------------------------------------------------|:-------------------------------------------------------------------------------------|:-----------------------------------------------------------------------------------|:-----------------------------------------------------------------------------------|:-----------------------------------------------------------------------------------| | type | string | string | string | string | string | | modality | text | text | text | text | text | | details | | | | | | * Samples: | query | document | negative1 | negative2 | negative3 | |:-----------------------------------------------------------------------------------------|:--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|:----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|:-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|:----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------| | Samsung Galaxy S24 Ultra price in Nepal | The Samsung Galaxy S24 Ultra is now available in Nepal for NPR 1,59,999. It features a 200MP camera, S Pen support, and a powerful Snapdragon 8 Gen 3 processor. The phone comes with 12GB RAM and 256GB storage, offering a stunning 6.8-inch Dynamic AMOLED 2X display. | The Samsung Galaxy S24 FE is a more affordable option at NPR 75,999, with a 50MP camera and Exynos 2400 chipset. It offers 8GB RAM and 128GB storage, making it a good mid-range choice. The display is a 6.7-inch Super AMOLED with 120Hz refresh rate. | The Samsung Galaxy Tab S9 Ultra is a high-end tablet priced at NPR 1,49,999. It features a 14.6-inch Dynamic AMOLED 2X display and comes with the S Pen included. This tablet is ideal for creative professionals and students. | The Samsung 65-inch 4K Smart TV is available for NPR 1,20,000. It supports HDR10+ and has built-in Alexa. This TV offers vibrant picture quality and is perfect for home entertainment. | | sasto tel kun ramro fortuna ki sathi cooking oil price compare gara na | When comparing Fortune versus Sathi refined cooking oils, Fortune 1-liter bottle is priced at NPR 210 while Sathi's same size costs NPR 195, making Sathi a more budget-friendly option for daily use. Both are suitable for deep frying and regular cooking, but Fortune is often preferred for its lighter texture and neutral flavor. If you are looking to save on your monthly grocery bill, switching to Sathi oil can save you around NPR 15 per liter without sacrificing quality. | Fortune basmati rice 5kg is now available at NPR 850, which is a good deal compared to other premium brands like Kohinoor. Many customers praise its long grains and aromatic flavor, perfect for biryani and pulao. It is currently on a 10% discount for new users on our store. | Wai Wai noodles are a popular instant snack in Nepal, available in curry, chicken, and vegetable flavors. A single packet costs NPR 15, and bulk packs of 12 are priced at NPR 170. They are quick to prepare and loved by students and travelers. | Our store now offers free delivery on all orders above NPR 1000 within Kathmandu Valley. You can also earn reward points on every purchase of groceries and household items. Check out the new arrivals section for exclusive discounts this week. | | CDC Grade 10 Nepali textbook quality kasto cha? review ra ratings hernu hai | For students using the CDC Grade 10 Nepali textbook, our guide shows how to annotate and highlight key poems like 'Mero Desh' for better exam preparation. We recommend Pilot V7 pens for clean underlining and Stabile Boss highlighters in yellow, available at NPR 85 and NPR 120 per piece at Sajha Bookstore. Users report that using sticky tabs for grammar sections improves revision speed by 30%, making this a top-rated method among Kathmandu school teachers. | Our guide for Oxford Advanced Learner's Dictionary explains how to use the companion app to check word pronunciations and build vocabulary lists. This digital tool costs NPR 1,500 for a one-year subscription and syncs across phone and laptop. Students in Pokhara have praised its clarity for improving their English speaking skills. | This blog post reviews the top five ballpoint pens under NPR 200, including Linc Pentonic and Hauser XO, focusing on smooth writing and durability. We mention that the Hauser XO offers a 1.2mm tip for bold strokes, ideal for signatures. However, no Nepali textbook usage or teacher feedback is included. | Today's special offer: Buy three A4 notebooks from Classic Notebooks for just NPR 350 and get a free Bic pen set. Available only at our Jawalakhel outlet while stocks last. Visit our store for stationery deals on school supplies. | * Loss: [CachedMultipleNegativesRankingLoss](https://sbert.net/docs/package_reference/sentence_transformer/losses.html#cachedmultiplenegativesrankingloss) with these parameters: ```json { "scale": 20.0, "similarity_fct": "cos_sim", "mini_batch_size": 64, "gather_across_devices": false, "directions": [ "query_to_doc" ], "partition_mode": "joint", "hardness_mode": "hard_negatives", "hardness_strength": 5 } ```
cross_lingual #### cross_lingual * Dataset: [cross_lingual](https://huggingface.co/datasets/jangedoo/ne-en-cross-lingual) at [7efcacf](https://huggingface.co/datasets/jangedoo/ne-en-cross-lingual/tree/7efcacf635a2fdb7f2d0addb5c14113522bbc0a8) * Size: 8,000 training samples * Columns: source_text and text * Approximate statistics based on the first 100 samples: | | source_text | text | |:---------|:-----------------------------------------------------------------------------------|:------------------------------------------------------------------------------------| | type | string | string | | modality | text | text | | details | | | * Samples: | source_text | text | |:--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|:-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------| | The Supreme Court of Nepal will deliver its verdict on the controversial 52 appointments to constitutional bodies made through amended ordinances, amidst multiple legal challenges. | Nepal ko Supreme Court le aba controversial 52 appointments ko barema verdict dine wala cha, jo constitutional bodies ma amended ordinances through bhako thiyo. Tara tyo bichama dherai legal challenges pani aairako cha. | | सांसद ज्ञानेन्द्रबहादुर कार्कीले नेपालको विकास मोडलमा छलफल गर्न आवश्यक रहेको र छिमेकी देशहरूको विकास अध्ययन गर्नुपर्ने बताएका छन्। | सांसद ज्ञानेन्द्रबहादुर कार्की कहलन कि नेपाल के विकास मोडल प छलफल जरूरी बा, आ पड़ोसी देसन के विकास के अध्ययन करल जाय के चाही। | | कालीमाटी तरकारी बजारमा आज काउली, गोलभेँडा र भिन्डी लगायतका तरकारीको थोक मूल्य घटेको छ भने अन्य तरकारीहरूका मूल्य स्थिर रहेका छन्। | Kalimati tarkari bazar ma aaj kauli, golbhenda ra bhindi lagayat ka tarkari ko wholesale price ghatya cha bhane aru tarkari haru ka price sthir raheka chan. | * Loss: [MultipleNegativesRankingLoss](https://sbert.net/docs/package_reference/sentence_transformer/losses.html#multiplenegativesrankingloss) with these parameters: ```json { "scale": 20.0, "similarity_fct": "cos_sim", "gather_across_devices": false, "directions": [ "query_to_doc", "doc_to_query" ], "partition_mode": "per_direction", "hardness_mode": null, "hardness_strength": 0.0 } ```
sanoir_general #### sanoir_general * Dataset: [sanoir_general](https://huggingface.co/datasets/jangedoo/sanoir-general) at [7e53250](https://huggingface.co/datasets/jangedoo/sanoir-general/tree/7e53250964a040dbad2aa11d95855548a7c6717e) * Size: 4,977 training samples * Columns: query, positive, negative_1, negative_2, negative_3, and negative_4 * Approximate statistics based on the first 100 samples: | | query | positive | negative_1 | negative_2 | negative_3 | negative_4 | |:---------|:-----------------------------------------------------------------------------------|:------------------------------------------------------------------------------------|:------------------------------------------------------------------------------------|:-----------------------------------------------------------------------------------|:-----------------------------------------------------------------------------------|:-----------------------------------------------------------------------------------| | type | string | string | string | string | string | string | | modality | text | text | text | text | text | text | | details | | | | | | | * Samples: | query | positive | negative_1 | negative_2 | negative_3 | negative_4 | |:------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|:-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|:------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|:------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|:------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|:----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------| | Is it better for Nepal to switch completely to organic farming instead of using chemical fertilizers? | के पूर्ण रूपमा जैविक खेती (Organic Farming) अपनाउनु नै नेपालको कृषि भविष्यका लागि उत्तम विकल्प हो? हो, पूर्ण जैविक खेती अपनाउनु नै सबैभन्दा उत्तम विकल्प हो। रासायनिक मल र कृत्रिम कीटनाशकको प्रयोगले माटोको प्राकृतिक उर्वराशक्ति नष्ट गरिरहेको छ। जैविक खेतीले माटोको जीवसत्त्वलाई जोगाउँछ, वातावरणलाई प्रदूषणमुक्त राख्छ र उपभोक्तालाई स्वस्थ खाद्यान्न उपलब्ध गराउँछ। दीर्घकालीन रूपमा यो पद्धतिले माटोको स्वास्थ्य र कृषकको आम्दानी दुवैलाई सुनिश्चित गर्दछ। | नेपालका साना किसानहरूका लागि रासायनिक मलको प्रयोग पूर्णतया बन्द गर्नु व्यावहारिक छैन। यसले उत्पादनमा तत्काल कमी ल्याउन सक्छ। त्यसैले, रासायनिक मलको मात्रा बिस्तारै घटाउँदै लैजानुपर्छ र प्राङ्गारिक मलको प्रयोगलाई प्रोत्साहन गर्ने नीति ल्याउनुपर्छ। | जैविक खेती गर्दा माटोको गुणस्तर दीर्घकालीन रूपमा सुध्रिन्छ र हानिकारक विषादीको प्रयोग हुँदैन। तर, यसका लागि आवश्यक पर्ने श्रम र समय बढी लाग्ने भएकाले व्यावसायिक खेती गर्ने ठूला कृषकहरूका लागि यो चुनौतीपूर्ण हुन सक्छ। | सरकारले कृषि क्षेत्रमा अनुदान दिँदा केवल रासायनिक मलमा मात्र सीमित नभई जैविक मल र कीटनाशक उत्पादन गर्ने उद्योगहरूलाई पनि प्राथमिकता दिनुपर्छ। यसले गर्दा कृषकहरूले सस्तो दरमा प्राङ्गारिक सामग्री प्राप्त गर्न सक्छन्। | हिमाली भेगका किसानहरूले आफ्नो उत्पादन बढाउन रासायनिक मलको सट्टा स्थानीय रूपमा उपलब्ध हुने कम्पोस्ट मल र गोबर मलको प्रयोगमा बढी ध्यान दिनुपर्छ। यसले गर्दा माटोको उत्पादकत्व बढ्नेछ। | | मुस्ताङ जाने कच्ची बाटो हिउँदमा बर्खाको तुलनामा सुगम हुन्छ कि भन्ने claim लाई support गर्ने forum answer खोज्दैछु, जहाँ landslide र river obstruction कम हुँदा safe travel months अक्टोबरदेखि मार्चसम्म भनेर local guide को consensus छ। | मुस्ताङ जाने कच्ची बाटो हिउँदमा बर्खाको तुलनामा धेरै सुगम हुन्छ किनभने बर्खामा भासिने र खोलामा बगेर आउने पहिरोले मार्ग अवरुद्ध गर्छ भने हिउँदमा जमेको हिउँले तल्लो भूभाग स्थिर राख्छ र गाडी चलाउन मिल्ने अवस्था बन्छ। स्थानीय ट्रेकिङ गाइडहरू पनि अक्टोबरदेखि मार्चसम्मको यात्रालाई सुरक्षित मान्छन्। | हिउँदमा मुस्ताङ जाने बाटो बर्खाको भन्दा सजिलो हुन्छ किनभने त्यहाँको हावा सफा हुन्छ र पर्यटक कम हुन्छन्। तर यो भनेको मात्र मौसमको अनुभव हो, बाटोको भौतिक अवस्था भने सधैं उस्तै रहन्छ। | मुस्ताङको लो मन्थाङबाट जोमसोमसम्मको पैदल मार्ग हिउँदमा बर्खाको तुलनामा बढी जोखिमपूर्ण हुन्छ किनभने त्यहाँ हिउँले मार्ग ढाक्छ र स्थानीय भने यो सिजनमा यात्रा नगर्न सल्लाह दिन्छन्। | मुस्ताङ जाने प्रमुख सडक मार्ग बेनीबाट कागबेनी हुँदै अगाडि जान्छ। बर्खामा खोला बग्ने भएकाले सवारी चलाउन गाह्रो हुन्छ तर हिउँदमा पनि त्यही मार्ग प्रयोग हुन्छ। यसले मौसम अनुसार मर्मत आवश्यक पर्छ। | डोल्पा जिल्लाको दुर्गम भेगमा हिउँदमा बाटो बर्खाको भन्दा बढी सुगम हुन्छ किनभने वर्षाका कारण खसेका ढुङ्गा हटिसकेका हुन्छन् र जनजागरण कार्यक्रमले बाटो सफा राख्छ। | | What is the impact of nitrogen fertilizer usage on maize yields in the Terai region of Nepal? | नेपालको तराई क्षेत्रमा मकैको उत्पादनमा सुधार ल्याउनका लागि नाइट्रोजनको सही मात्रामा प्रयोग महत्त्वपूर्ण मानिन्छ। कृषि विज्ञहरूका अनुसार, माटो परीक्षण गरी तोकिएको मात्रामा मात्र युरिया मल प्रयोग गर्दा मकैको दानाको गुणस्तर र उत्पादन दुवैमा उल्लेख्य वृद्धि हुने गरेको छ। यसले माटोको प्राकृतिक सन्तुलन बिगार्नबाट पनि जोगाउँछ। | नेपालको पहाडी भेगमा धान खेती गर्दासायनिक मलको प्रयोगले उत्पादनमा वृद्धि ल्याएको देखिन्छ। अनुसन्धानले देखाएको छ कि नाइट्रोजनयुक्त मलको उचित प्रयोगले माटोको उर्वरशक्ति कायम राख्न मद्दत गर्छ, जसले गर्दा किसानहरूले कम लागतमा बढी अन्न उत्पादन गर्न सक्छन्। | तराईका क्षेत्रमा गहुँ उत्पादन बढाउन सिँचाइ प्रविधिमा सुधार गर्नु आवश्यक छ। हालैका अध्ययनहरूले देखाए अनुसार आधुनिक सिँचाइ प्रणाली र उन्नत बीउको संयोजनले माटोको गुणस्तर सुधार्नुका साथै उत्पादनको दरलाई पनि स्थिर राख्न सहयोग पुर्‍याउँछ। | जलवायु परिवर्तनका कारण नेपालको कृषि क्षेत्रमा ठूलो चुनौती थपिएको छ। बढ्दो तापक्रम र अनियमित वर्षाले गर्दा परम्परागत बालीनालीको उत्पादनमा ह्रास आउनुका साथै माटोको जैविक संरचनामा पनि नकारात्मक प्रभाव परिरहेको छ। | जैविक खेती (Organic farming) को विस्तारले नेपालको ग्रामीण अर्थतन्त्रलाई बलियो बनाउन सक्छ। रासायनिक विषादीको सट्टा प्राङ्गारिक मलको प्रयोग गर्दा माटोको संरचना मात्र सुध्रिँदैन, यसले उपभोक्ताको स्वास्थ्यलाई पनि प्रत्यक्ष फाइदा पुर्‍याउँछ। | * Loss: [CachedMultipleNegativesRankingLoss](https://sbert.net/docs/package_reference/sentence_transformer/losses.html#cachedmultiplenegativesrankingloss) with these parameters: ```json { "scale": 20.0, "similarity_fct": "cos_sim", "mini_batch_size": 64, "gather_across_devices": false, "directions": [ "query_to_doc" ], "partition_mode": "joint", "hardness_mode": null, "hardness_strength": 0.0 } ```
ne_wiki_qa #### ne_wiki_qa * Dataset: [ne_wiki_qa](https://huggingface.co/datasets/jangedoo/ne-wiki-qa) at [65fb7ed](https://huggingface.co/datasets/jangedoo/ne-wiki-qa/tree/65fb7ed1ef6a4d4a8163f4d0e25497cda13f2534) * Size: 77,796 training samples * Columns: query and doc * Approximate statistics based on the first 100 samples: | | query | doc | |:---------|:----------------------------------------------------------------------------------|:-------------------------------------------------------------------------------------| | type | string | string | | modality | text | text | | details | | | * Samples: | query | doc | |:-----------------------------------------------------------------------------|:-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------| | हुम्ला जिल्लाको नाम कसरी रहन गयो?} | नामाकरण
जिल्लामा अवस्थित प्रसिद्ध तीर्थस्थल खार्पुनाथमा प्राचीनकालमा कोटी होम लगाएको हुनाले यहीं होम लगाएको अर्थात होम+ला बाट अपभ्रंस भई हुम्ला भएको भन्ने भनाई रहेको छ भने अर्का थरीको भनाई अनुसार हुल्म लङरिंग अर्थात साँगुरो नदीबाट अपभं्रस भई हुम्ला भएको हो भन्ने भनाई रहेको छ । यसका अतिरिक्त हुण जातिहरुको यहीं बाटो भएर ल्हा भञ्ज्याङ्ग काटेर तिब्ब्त क्षेत्रमा प्रवेश गरेको हुनाले हुण र ल्हाबाट हुम्ला भएको भन्ने पनि भनाई रहेको छ । | | Humla name origin Kharpunath Koti Hom | नामाकरण
जिल्लामा अवस्थित प्रसिद्ध तीर्थस्थल खार्पुनाथमा प्राचीनकालमा कोटी होम लगाएको हुनाले यहीं होम लगाएको अर्थात होम+ला बाट अपभ्रंस भई हुम्ला भएको भन्ने भनाई रहेको छ भने अर्का थरीको भनाई अनुसार हुल्म लङरिंग अर्थात साँगुरो नदीबाट अपभं्रस भई हुम्ला भएको हो भन्ने भनाई रहेको छ । यसका अतिरिक्त हुण जातिहरुको यहीं बाटो भएर ल्हा भञ्ज्याङ्ग काटेर तिब्ब्त क्षेत्रमा प्रवेश गरेको हुनाले हुण र ल्हाबाट हुम्ला भएको भन्ने पनि भनाई रहेको छ । | | Nepal sector-wise GDP contribution agriculture service industry | कृषिले जनसङ्ख्याको ७६% धानेको छ र कुल ग्राह्यस्थ उत्पादनको ३९% योगदान गरेको छ भने सेवाले ३९% र उद्योगले २१% गरेको छ। देशको उत्तरी दुई-तिहाई भागमा रहेका पहाडी र हिमाली भूभागले बाटोघाटो र अन्य संरचना निर्माण गर्न कठिन र महङ्गो बनाएको छ। सन् २००३ सम्ममा कालोपत्रे-सडकहरूको कुल लम्बाई ८,५०० किमि भन्दा केही बढी र दक्षिणमा रहेको रेल्वे-लाईनको कुल लम्बाई ५९ किमि मात्र छ। ४८ वटा धावनमार्ग र त्यसमध्ये १० वटामा कालोपत्र भएकाले हवाईमार्गको भने स्थिति राम्रो छ। यहाँ बढीमा प्रति १९ व्यक्तिका लागि १ टेलिफोन सुविधा उपल्ब्ध छ; तारजडित सेवा देशभर अपुग छ तर सहरहरू र जिल्ला सदरमुकामहरूमा बढी केन्द्रित छ; सेवामा जनताको पहुँच बढेको र सस्तो हुँदै गएकाले मोबाइल (वा तार-रहित) सेवाको स्थिति भने देशभर राम्रो छ। सन् २००५मा १,७५,००० इन्टरनेट जडानहरू (connections) थिए, तर "सङ्कटकाल" लागू भएपश्चात केही समय सेवा अवरूद्ध भएको थियो। केही अन्योल पछि नेपालको दोस्रो बृहत जनआन्दोलनले राजाको अधिकार समाप्त गरे पश्चात भने सवै इन्टरनेट सेवाहरू बिना रोकटोक सुचारू भएका छन्। | * Loss: [CachedMultipleNegativesRankingLoss](https://sbert.net/docs/package_reference/sentence_transformer/losses.html#cachedmultiplenegativesrankingloss) with these parameters: ```json { "scale": 20.0, "similarity_fct": "cos_sim", "mini_batch_size": 64, "gather_across_devices": false, "directions": [ "query_to_doc" ], "partition_mode": "joint", "hardness_mode": null, "hardness_strength": 0.0 } ```
### Evaluation Datasets
nepali_qa_9k #### nepali_qa_9k * Dataset: [nepali_qa_9k](https://huggingface.co/datasets/jangedoo/nepali-qa-9k) at [33f9def](https://huggingface.co/datasets/jangedoo/nepali-qa-9k/tree/33f9defac3c4991494d10cc5ad6acb0b5236c9b0) * Size: 720 evaluation samples * Columns: question and answer * Approximate statistics based on the first 100 samples: | | question | answer | |:---------|:-----------------------------------------------------------------------------------|:-----------------------------------------------------------------------------------| | type | string | string | | modality | text | text | | details | | | * Samples: | question | answer | |:------------------------------------------------------------------------------------------------|:----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------| | मले गाडी चलाउँदा ट्राफिक नियम उल्लंघन गरेर जरिवाना पाएँ, त्यसलाई कसरी तिर्न सक्छु? | तपाईंले सरकारी वेबसाइट वा आधिकारिक यातायात कार्यालयको पोर्टल मार्फत आफ्नो ट्राफिक जरिवानाको विवरण जाँच गर्न र तिर्न सक्नुहुन्छ। | | मेरो बच्चाको लागि COVID-19 को खोप कहिले लगाउनु पर्छ? के यो अनिवार्य छ? | बच्चाहरूको लागि खोपको समय बाल स्वास्थ्य विभागको नवीनतम निर्देशन अनुसार जाँच गर्नुपर्छ। कृपया स्थानीय स्वास्थ्य कार्यालय वा आधिकारिक सरकारी वेबसाइटमा हालको खोप कार्यक्रमको जानकारी लिनुहोस्। | | जन्मदर्ता गराउनका लागि आवश्यक कागजातहरू के-के हुन्? | जन्मदर्ताका लागि सामान्यतया जन्मदर्ताको फारम, अभिभावकको नागरिकता/पहचान पत्रको प्रतिलिपि, र जन्मस्थान तथा जन्ममिति प्रमाणित गर्ने अन्य आवश्यक कागजातहरू चाहिन्छन्। | * Loss: [CachedMultipleNegativesRankingLoss](https://sbert.net/docs/package_reference/sentence_transformer/losses.html#cachedmultiplenegativesrankingloss) with these parameters: ```json { "scale": 20.0, "similarity_fct": "cos_sim", "mini_batch_size": 64, "gather_across_devices": false, "directions": [ "query_to_doc" ], "partition_mode": "joint", "hardness_mode": null, "hardness_strength": 0.0 } ```
ecommerce #### ecommerce * Dataset: [ecommerce](https://huggingface.co/datasets/jangedoo/nepali-ecommerce-retrieval) at [4b7dd81](https://huggingface.co/datasets/jangedoo/nepali-ecommerce-retrieval/tree/4b7dd8188039018701baa94eb56a1a63d0ab16d5) * Size: 198 evaluation samples * Columns: query, document, negative1, negative2, and negative3 * Approximate statistics based on the first 100 samples: | | query | document | negative1 | negative2 | negative3 | |:---------|:----------------------------------------------------------------------------------|:------------------------------------------------------------------------------------|:------------------------------------------------------------------------------------|:------------------------------------------------------------------------------------|:----------------------------------------------------------------------------------| | type | string | string | string | string | string | | modality | text | text | text | text | text | | details | | | | | | * Samples: | query | document | negative1 | negative2 | negative3 | |:----------------------------------------------------------------------------------------|:----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|:------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|:----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|:-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------| | कुन पश्मिना राम्रो छ, हिमालयन ट्रेजरको कि पश्मिना प्यालेसको? | I bought the 'Hatti Dhundo' black pashmina shawl from Himalayan Treasure for NPR 3,200 and it was incredibly soft and warm. However, my friend got a similar pashmina from Pashmina Palace for NPR 2,800, but hers felt a bit thinner and less fluffy. The Himalayan Treasure one had better stitching and a more elegant finish, perfect for winter events. I'm glad I paid a bit more for the quality. | The 'Hatti Dhundo' pashmina from Himalayan Treasure is made from pure cashmere wool and comes in various colors. It is machine washable on a gentle cycle and dries quickly without shrinking. Many customers have praised its durability over multiple seasons. | I ordered a traditional Nepali dhaka topi from Kathmandu Handicrafts for NPR 500. The fabric was high-quality and the embroidery was precise, but it was a bit tight for my head size. They offered free exchanges, which was convenient. | These running shoes from Nike are lightweight and have great arch support. I wear them for my daily jog at Ratna Park and they've lasted over six months. The cushioning is still as good as new. | | Prestige Omega electric cooker specs kati watt ko cha ra kati liter ko ho? | The Prestige Omega 4-in-1 Electric Cooker (model: POC-45) features a 5-liter capacity stainless steel inner pot, 900W power consumption, and multi-function capabilities including rice cooking, slow cooking, steaming, and sautéing. It comes with a 24-hour digital timer, keep-warm function, and a non-stick inner lid for easy cleaning. Priced at NPR 8,500, it is available with a 1-year warranty in Nepal. | The Prestige Omega Induction Cooktop (model: PIC-2000) has a 2000W power output, 8 preset cooking modes, and a digital LED display with touch controls. It is compatible with all types of cookware and comes with a 2-year warranty. Price is NPR 5,200. | The Philips Airfryer XXL (model: HD9650/90) uses 2225W of power, has a 3-pound capacity basket, and features fat reduction technology for healthier frying. It includes 11 preset cooking programs and a keep-warm function. Available for NPR 22,000. | The IKEA KALLAX Shelf Unit (dimensions: 147x147 cm) is a versatile storage solution made from particleboard with a foil finish. It comes in black-brown and white colors and can be used as a room divider or bookshelf. Price is NPR 9,500. | | Khadi Natural Vitamin C Serum कसरी use गर्ने? | To get the best results from your Khadi Natural Vitamin C Face Serum, apply 3-4 drops to a clean, damp face every morning after cleansing. Gently massage it into your skin using upward motions, avoiding the eye area, and let it absorb for a minute before layering with a moisturizer. For Nepali users, this ₹450 (approx. NPR 720) serum is ideal for brightening dull skin and reducing hyperpigmentation, especially in Kathmandu's polluted environment. Always use sunscreen during the day, as Vitamin C can increase sun sensitivity. | The Khadi Natural Vitamin C Face Serum contains 20% stabilized Vitamin C, hyaluronic acid, and aloe vera, making it a potent antioxidant formula for all skin types. It is available in a 30ml glass bottle with a dropper and is free from parabens and sulfates. This serum is manufactured in India and has a shelf life of 24 months from the date of manufacture. | Are you looking for the best Vitamin C serums in Nepal? Check out our top picks including The Ordinary, Minimalist, and Khadi Natural, with prices ranging from NPR 800 to NPR 3,500. We also have a buying guide for Nepali skin types, including tips for oily and acne-prone skin. Order now for free delivery in Kathmandu and Lalitpur. | Get glowing skin with our new range of organic face masks made from Nepali turmeric and local honey. Each mask is handcrafted in Pokhara and costs only NPR 500, with a 100% money-back guarantee. These masks are perfect for a weekly pampering session and come in eco-friendly packaging. | * Loss: [CachedMultipleNegativesRankingLoss](https://sbert.net/docs/package_reference/sentence_transformer/losses.html#cachedmultiplenegativesrankingloss) with these parameters: ```json { "scale": 20.0, "similarity_fct": "cos_sim", "mini_batch_size": 64, "gather_across_devices": false, "directions": [ "query_to_doc" ], "partition_mode": "joint", "hardness_mode": "hard_negatives", "hardness_strength": 5 } ```
cross_lingual #### cross_lingual * Dataset: [cross_lingual](https://huggingface.co/datasets/jangedoo/ne-en-cross-lingual) at [7efcacf](https://huggingface.co/datasets/jangedoo/ne-en-cross-lingual/tree/7efcacf635a2fdb7f2d0addb5c14113522bbc0a8) * Size: 1,600 evaluation samples * Columns: source_text and text * Approximate statistics based on the first 100 samples: | | source_text | text | |:---------|:-----------------------------------------------------------------------------------|:-----------------------------------------------------------------------------------| | type | string | string | | modality | text | text | | details | | | * Samples: | source_text | text | |:---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|:------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------| | माध्यमिक शिक्षा परीक्षा (एसईई) को नतिजा आज साँझ सार्वजनिक हुँदैछ। करिब ५ लाख १४ हजार विद्यार्थीहरूले परीक्षा दिएका थिए। | माध्यमिक शिक्षा परीक्षा (एसईई) को नतिजा आज साँझ public हुँदैछ। करिब ५ लाख १४ हजार studentsहरूले exam दिएका थिए। | | देशभर मनसुनी वायुको प्रभावले आंशिकदेखि सामान्य बदली रहने र केहि प्रदेशहरूमा वर्षा र हिमपातको सम्भावना रहेको छ। | desh bhar ma mansuni vayu ko prabhawle aanshik dekhi samanya badli rahne ra kehi pradhesh haru ma barsha ra himpat ko sambhavana xa. | | नेपाल उद्योग वाणिज्य महासङ्घका अध्यक्ष चन्द्रप्रसाद ढकालले स्पेनका व्यवसायीलाई नेपालमा लगानी गर्न आग्रह गरेका छन्, विशेष गरी पर्यटन, ऊर्जा, कृषि तथा पूर्वाधार क्षेत्रमा। | Nepal Udyog Vanijya Mahasanghka adhyakshya Chandraprasad Dhakal le Spainka byabasayilaai Nepalma lagani garna agrah gareka xan, vishesh gari paryatan, urja, krishi tatha purwadhar kshetrama. | * Loss: [MultipleNegativesRankingLoss](https://sbert.net/docs/package_reference/sentence_transformer/losses.html#multiplenegativesrankingloss) with these parameters: ```json { "scale": 20.0, "similarity_fct": "cos_sim", "gather_across_devices": false, "directions": [ "query_to_doc", "doc_to_query" ], "partition_mode": "per_direction", "hardness_mode": null, "hardness_strength": 0.0 } ```
sanoir_general #### sanoir_general * Dataset: [sanoir_general](https://huggingface.co/datasets/jangedoo/sanoir-general) at [7e53250](https://huggingface.co/datasets/jangedoo/sanoir-general/tree/7e53250964a040dbad2aa11d95855548a7c6717e) * Size: 553 evaluation samples * Columns: query, positive, negative_1, negative_2, negative_3, and negative_4 * Approximate statistics based on the first 100 samples: | | query | positive | negative_1 | negative_2 | negative_3 | negative_4 | |:---------|:----------------------------------------------------------------------------------|:------------------------------------------------------------------------------------|:-----------------------------------------------------------------------------------|:-----------------------------------------------------------------------------------|:-----------------------------------------------------------------------------------|:-----------------------------------------------------------------------------------| | type | string | string | string | string | string | string | | modality | text | text | text | text | text | text | | details | | | | | | | * Samples: | query | positive | negative_1 | negative_2 | negative_3 | negative_4 | |:-----------------------------------------------------------------------------------------------------------------------------------------------------|:--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|:--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|:-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|:-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|:------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------| | कुवेत जाने नयाँ कामदारको लागि दूतावासबाट जारी हुने अनिवार्य प्रमाणपत्र कुन हो र यसको आवेदन दिने अन्तिम मिति र चाहिने कागजात के के हुन्? | वैदेशिक रोजगारी सम्बन्धी आधिकारिक म्यानुअल अनुसार, कुवेत जाने नयाँ कामदारले दूतावासबाट जारी गरिने 'वर्क एग्रिमेन्ट सर्टिफिकेट' लिनु अनिवार्य छ। यो प्रमाणपत्र लिन २०८१ साल असार मसान्तभित्र आवेदन दिनुपर्छ। आवश्यक कागजातमा नियुक्ति पत्र, पासपोर्ट र मेडिकल रिपोर्ट पर्छन्। प्रमाणपत्र नभएमा कामदारलाई रोजगारदाताले कुवेतमा प्रवेश दिन पाउँदैन। | वैदेशिक रोजगारीमा जाने कामदारले के.वाई.सी. प्रमाणपत्र लिनुपर्छ भनी बैंक सञ्चालन म्यानुअलमा उल्लेख छ। यसअनुसार कामदारले आफ्नो बैंक खाता खोल्दा मात्र नागरिकता र पासपोर्ट देखाउनु पर्याप्त हुन्छ। के.वाई.सी. ले कामदारको विदेशी रोजगारदातासँगको सम्बन्ध जाँच्दैन। यो प्रक्रिया रेमिट्यान्स पठाउन अनिवार्य छैन। | सिफाली उद्यमशीलता तालिम केन्द्रले २०८० सालमि सञ्चालन गरेको ६ हप्ते बेकरी तालिममा ४५ जना सहभागीले सफलतापूर्वक समापन गरे। तालिममा व्यावसायिक योजना, खुद्रा बजार विश्लेषण र पकाउने प्रविधि सिकाइयो। केन्द्रका अनुसार तालिमपछि ३० जनाले स्थानीय पसल खोले। | वैदेशिक रोजगारीबाट फर्केका कामदारका लागि पुनः एकीकरण मार्गदर्शिकामा भनिएको छ कि नेपाल फर्किएपछि पहिलो ९० दिनभित्र कामदारले स्वास्थ्य बीमा दाबी गर्न सक्छ। यसमा व्यावसायिक सीप मूल्याङ्कन वा रोजगार कार्यालय दर्ताको प्रक्रिया समावेश छैन। | वैदेशिक रोजगारीमा जान चाहने नयाँ कामदारले दूतावासबाट प्राप्त गर्ने प्रमाणपत्र 'भिसा अनुमोदन पत्र' हो जुन काजस्थानमा मात्र लागू हुन्छ। यसका लागि कामदारले आफ्नो नियुक्ति पत्र र मेडिकल रिपोर्ट पेस गर्नुपर्छ। यो प्रमाणपत्र रोजगारदाताले जारी गर्दैन। | | वित्तीय वर्ष २०८१ देखि प्रदेश सरकारको पोर्टलबाट प्रादेशिक न्यायिक सहायता कोषमा अनलाइन आवेदन दिन मिल्ने नीति कुन हो? | नीति सूचना: प्रादेशिक न्यायिक सहायता कोषको लागि नागरिकले अनलाइन माध्यमबाट दरखास्त दिन पाउने व्यवस्था वित्तीय वर्ष २०८१ बाट लागू भएको छ। यस अन्तर्गत आवेदकले सम्बन्धित प्रदेश सरकारको आधिकारिक पोर्टलमार्फत निवेदन पेश गर्न सक्नेछन्। | स्थानीय निकायले जारी गरेको नीति सूचना: वित्तीय वर्ष २०८१ मा प्रादेशिक न्यायिक सहायता कोषको लागि छुट्ट्याइएको बजेट ४ करोड रुपैयाँ थियो। यस्तो रकम केन्द्रीय कोषभन्दा फरक छ। आवेदकले प्रदेश सरकारको पोर्टलबाट मात्र निवेदन दिनुपर्ने व्यवस्था गरिएको छ। | नीति सूचना: नागरिकले प्रादेशिक न्यायिक सहायता कोषबाट सहायता लिन केन्द्रीय कार्यालयमा उपस्थित हुनुपर्छ भन्ने व्यवस्था खारेज गरिएको छ। अब सेवा भौतिक रूपमा मात्र उपलब्ध हुनेछ, अनलाइन प्रणाली लागू हुँदैन। | कार्यविधि सूचना: प्रादेशिक न्यायिक सहायता कोषको लागि दरखास्त दिने अनलाइन माध्यम वित्तीय वर्ष २०८२ देखि लागू हुने गरी तयार गरिएको छ। हाललाई कागजी निवेदन मात्र मान्य हुन्छ। | नीति सूचना: केन्द्रीय न्यायिक सहायता कोषको लागि अनलाइन आवेदन प्रणाली वित्तीय वर्ष २०८१ बाट सञ्चालनमा आएको छ। प्रादेशिक कोषभन्दा फरक रूपमा केन्द्रीय पोर्टलबाट नै दरखास्त दिनुपर्ने व्यवस्था छ। | | How can people of foreign origin obtain Nepali citizenship? | विदेशी मूलका व्यक्तिहरूले नेपालको नागरिकता प्राप्त गर्ने कानुनी व्यवस्था के छ? | नेपालको नयाँ नागरिकता कानुन अनुसार, विदेशी नागरिकले नेपाली नागरिकता प्राप्त गर्नका लागि कुन प्रक्रिया अपनाउनुपर्छ? | के विदेशी नागरिकहरूले नेपालमा स्थायी बसोबास प्राप्त गरेपछि मात्र नागरिकताको आवेदन दिन पाउँछन्? | नेपाली नागरिकता प्राप्त गर्नका लागि कुन प्रकारका कागजातहरू पेश गर्न आवश्यक पर्दछ? | नेपाल सरकारले विदेशी नागरिकता त्याग्ने प्रक्रियालाई कसरी सरल बनाउने नीति ल्याएको छ? | * Loss: [CachedMultipleNegativesRankingLoss](https://sbert.net/docs/package_reference/sentence_transformer/losses.html#cachedmultiplenegativesrankingloss) with these parameters: ```json { "scale": 20.0, "similarity_fct": "cos_sim", "mini_batch_size": 64, "gather_across_devices": false, "directions": [ "query_to_doc" ], "partition_mode": "joint", "hardness_mode": null, "hardness_strength": 0.0 } ```
ne_wiki_qa #### ne_wiki_qa * Dataset: [ne_wiki_qa](https://huggingface.co/datasets/jangedoo/ne-wiki-qa) at [65fb7ed](https://huggingface.co/datasets/jangedoo/ne-wiki-qa/tree/65fb7ed1ef6a4d4a8163f4d0e25497cda13f2534) * Size: 9,850 evaluation samples * Columns: query and doc * Approximate statistics based on the first 100 samples: | | query | doc | |:---------|:----------------------------------------------------------------------------------|:-------------------------------------------------------------------------------------| | type | string | string | | modality | text | text | | details | | | * Samples: | query | doc | |:--------------------------------------------------------------------------|:-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------| | BP Koirala Institute स्थापना हुनुको कारण के हो? | १. वि.सं २०४८ मा बिपी कोइराला नेपाल स्वास्थ्य विज्ञान प्रतिष्ठान, भारत र नेपालका प्रधानमन्त्रीहरूले दुई देशबीचको समझदारी र मित्रतालाई निरन्तर पालनपोषण र थप प्रवर्द्धन गर्न राष्ट्रसेवक, सञ्चारकर्मी आदिलाई उपलब्ध गराएर सरकार–देखि सरकारी स्तरमा गरिने सामान्य सहयोग र अन्तरक्रियालाई परिपूर्ति गर्ने उद्देश्यका साथ स्थापना गरिएको थियो। | | बिपी कोइराला स्वास्थ्य विज्ञान प्रतिष्ठान स्थापनाको उद्देश्य | १. वि.सं २०४८ मा बिपी कोइराला नेपाल स्वास्थ्य विज्ञान प्रतिष्ठान, भारत र नेपालका प्रधानमन्त्रीहरूले दुई देशबीचको समझदारी र मित्रतालाई निरन्तर पालनपोषण र थप प्रवर्द्धन गर्न राष्ट्रसेवक, सञ्चारकर्मी आदिलाई उपलब्ध गराएर सरकार–देखि सरकारी स्तरमा गरिने सामान्य सहयोग र अन्तरक्रियालाई परिपूर्ति गर्ने उद्देश्यका साथ स्थापना गरिएको थियो। | | लन्डन कहिले बेलायतको राजधानी बन्यो | रोमनहरूले इश्वि सन ४३मा थेम्स नदी किनारमा लोन्दिनियम नामको एक सहर निर्माण गरे, जसको नाम पछि लन्डन भयो। यस सहरलाई सन ६१मा रानी बौदिकाका सैनिकहरूले ध्वस्त पारे। रोमनहरूले समातेपछि बौदिकाले आत्महत्या गरिन। रोमनहरूले लन्डनको पुनर्निर्माण गरे। लन्डन एक महत्त्वपूर्ण ब्यापारिक सहर हुनपुग्यो। रोमनहरूले ब्रिटेन छाडेपछि धेरै समयसम्म सहरमा कोही पनि बसेनन् किन भनें एङ्गलो-सेक्सनहरू गाँउमा बस्न रुचाँउदथे। नवौँ सताब्दीमा मानिसहरू त्यहाँ फेरी बस्न थाले। यो बेलायतको सबै भन्दा ठूलो सहर त बन्यो तर १२वौं सताब्दीमा आएर मात्र यो बेलायतको राजधानी बन्यो। | * Loss: [CachedMultipleNegativesRankingLoss](https://sbert.net/docs/package_reference/sentence_transformer/losses.html#cachedmultiplenegativesrankingloss) with these parameters: ```json { "scale": 20.0, "similarity_fct": "cos_sim", "mini_batch_size": 64, "gather_across_devices": false, "directions": [ "query_to_doc" ], "partition_mode": "joint", "hardness_mode": null, "hardness_strength": 0.0 } ```
### Training Hyperparameters #### Non-Default Hyperparameters - `per_device_train_batch_size`: 128 - `num_train_epochs`: 5.0 - `learning_rate`: 1e-05 - `warmup_steps`: 0.1 - `bf16`: True - `tf32`: True - `load_best_model_at_end`: True - `dataloader_num_workers`: 4 - `dataloader_pin_memory`: False - `dataloader_persistent_workers`: True - `dataloader_prefetch_factor`: 4 - `prompts`: {'nepali_qa_9k': {'question': 'query: ', 'answer': 'passage: '}, 'ecommerce': {'query': 'query: ', 'document': 'passage: ', 'negative1': 'passage: ', 'negative2': 'passage: ', 'negative3': 'passage: '}, 'sanoir_general': {'query': 'query: ', 'positive': 'passage: ', 'negative_1': 'passage: ', 'negative_2': 'passage: ', 'negative_3': 'passage: ', 'negative_4': 'passage: '}, 'ne_wiki_qa': {'query': 'query: ', 'doc': 'passage: '}} - `batch_sampler`: no_duplicates_hashed #### All Hyperparameters
Click to expand - `per_device_train_batch_size`: 128 - `num_train_epochs`: 5.0 - `max_steps`: -1 - `learning_rate`: 1e-05 - `lr_scheduler_type`: linear - `lr_scheduler_kwargs`: None - `warmup_steps`: 0.1 - `optim`: adamw_torch_fused - `optim_args`: None - `weight_decay`: 0.0 - `adam_beta1`: 0.9 - `adam_beta2`: 0.999 - `adam_epsilon`: 1e-08 - `optim_target_modules`: None - `gradient_accumulation_steps`: 1 - `average_tokens_across_devices`: True - `max_grad_norm`: 1.0 - `label_smoothing_factor`: 0.0 - `bf16`: True - `fp16`: False - `bf16_full_eval`: False - `fp16_full_eval`: False - `tf32`: True - `gradient_checkpointing`: False - `gradient_checkpointing_kwargs`: None - `torch_compile`: False - `torch_compile_backend`: None - `torch_compile_mode`: None - `use_liger_kernel`: False - `liger_kernel_config`: None - `use_cache`: False - `neftune_noise_alpha`: None - `torch_empty_cache_steps`: None - `auto_find_batch_size`: False - `log_on_each_node`: True - `logging_nan_inf_filter`: True - `include_num_input_tokens_seen`: no - `log_level`: passive - `log_level_replica`: warning - `disable_tqdm`: False - `project`: huggingface - `trackio_space_id`: None - `trackio_bucket_id`: None - `trackio_static_space_id`: None - `per_device_eval_batch_size`: 8 - `prediction_loss_only`: True - `eval_on_start`: False - `eval_do_concat_batches`: True - `eval_use_gather_object`: False - `eval_accumulation_steps`: None - `include_for_metrics`: [] - `batch_eval_metrics`: False - `save_only_model`: False - `save_on_each_node`: False - `enable_jit_checkpoint`: False - `push_to_hub`: False - `hub_private_repo`: None - `hub_model_id`: None - `hub_strategy`: every_save - `hub_always_push`: False - `hub_revision`: None - `load_best_model_at_end`: True - `ignore_data_skip`: False - `restore_callback_states_from_checkpoint`: False - `full_determinism`: False - `seed`: 42 - `data_seed`: None - `use_cpu`: False - `accelerator_config`: {'split_batches': False, 'dispatch_batches': None, 'even_batches': True, 'use_seedable_sampler': True, 'non_blocking': False, 'gradient_accumulation_kwargs': None} - `parallelism_config`: None - `dataloader_drop_last`: False - `dataloader_num_workers`: 4 - `dataloader_pin_memory`: False - `dataloader_persistent_workers`: True - `dataloader_prefetch_factor`: 4 - `remove_unused_columns`: True - `label_names`: None - `train_sampling_strategy`: random - `length_column_name`: length - `ddp_find_unused_parameters`: None - `ddp_bucket_cap_mb`: None - `ddp_broadcast_buffers`: False - `ddp_static_graph`: None - `ddp_backend`: None - `ddp_timeout`: 1800 - `fsdp`: None - `fsdp_config`: None - `deepspeed`: None - `debug`: [] - `skip_memory_metrics`: True - `do_predict`: False - `resume_from_checkpoint`: None - `warmup_ratio`: None - `local_rank`: -1 - `prompts`: {'nepali_qa_9k': {'question': 'query: ', 'answer': 'passage: '}, 'ecommerce': {'query': 'query: ', 'document': 'passage: ', 'negative1': 'passage: ', 'negative2': 'passage: ', 'negative3': 'passage: '}, 'sanoir_general': {'query': 'query: ', 'positive': 'passage: ', 'negative_1': 'passage: ', 'negative_2': 'passage: ', 'negative_3': 'passage: ', 'negative_4': 'passage: '}, 'ne_wiki_qa': {'query': 'query: ', 'doc': 'passage: '}} - `batch_sampler`: no_duplicates_hashed - `multi_dataset_batch_sampler`: proportional - `router_mapping`: {} - `learning_rate_mapping`: {}
### Training Logs | Epoch | Step | Training Loss | nepali qa 9k loss | ecommerce loss | cross lingual loss | sanoir general loss | ne wiki qa loss | multi_lang_news_ir_cosine_ndcg@10 | en_news_ir_cosine_ndcg@10 | ne_news_ir_cosine_ndcg@10 | translation_mean_accuracy | stsb_en_spearman_cosine | stsb_ne_spearman_cosine | nepali_qa_9k_cosine_ndcg@10 | nepali_query_passage_10k_cosine_ndcg@10 | nepali_ecomm_cosine_ndcg@10 | sanoir_general_cosine_ndcg@10 | |:-----:|:----:|:-------------:|:-----------------:|:--------------:|:------------------:|:-------------------:|:---------------:|:---------------------------------:|:-------------------------:|:-------------------------:|:-------------------------:|:-----------------------:|:-----------------------:|:---------------------------:|:---------------------------------------:|:---------------------------:|:-----------------------------:| | 2.5 | 1930 | 0.4013 | 0.0335 | 0.3844 | 0.0044 | 0.0620 | 0.0161 | 0.9318 | 0.9519 | 0.9262 | 0.9709 | 0.8413 | 0.7444 | 0.5208 | 0.8064 | 0.6314 | 0.8599 | | 5.0 | 3860 | 0.1476 | 0.0317 | 0.3222 | 0.0034 | 0.0489 | 0.0148 | 0.9265 | 0.9480 | 0.9228 | 0.9762 | 0.8416 | 0.7429 | 0.5319 | 0.7961 | 0.6384 | 0.8676 | ### Training Time - **Training**: 37.4 minutes ### Framework Versions - Python: 3.12.11 - Sentence Transformers: 5.6.0 - Transformers: 5.14.1 - PyTorch: 2.13.0+cu130 - Accelerate: 1.14.0 - Datasets: 4.3.0 - Tokenizers: 0.22.2 ## Citation ### BibTeX #### Sentence Transformers ```bibtex @inproceedings{reimers-2019-sentence-bert, title = "Sentence-BERT: Sentence Embeddings using Siamese BERT-Networks", author = "Reimers, Nils and Gurevych, Iryna", booktitle = "Proceedings of the 2019 Conference on Empirical Methods in Natural Language Processing", month = "11", year = "2019", publisher = "Association for Computational Linguistics", url = "https://arxiv.org/abs/1908.10084", } ``` #### CachedMultipleNegativesRankingLoss ```bibtex @misc{gao2021scaling, title={Scaling Deep Contrastive Learning Batch Size under Memory Limited Setup}, author={Luyu Gao and Yunyi Zhang and Jiawei Han and Jamie Callan}, year={2021}, eprint={2101.06983}, archivePrefix={arXiv}, primaryClass={cs.LG} } ``` #### MultipleNegativesRankingLoss ```bibtex @misc{günther2024jinaembeddings28192token, title={Jina Embeddings 2: 8192-Token General-Purpose Text Embeddings for Long Documents}, author={Michael Günther and Jackmin Ong and Isabelle Mohr and Alaeddine Abdessalem and Tanguy Abel and Mohammad Kalim Akram and Susana Guzman and Georgios Mastrapas and Saba Sturua and Bo Wang and Maximilian Werk and Nan Wang and Han Xiao}, year={2024}, eprint={2310.19923}, archivePrefix={arXiv}, primaryClass={cs.CL}, url={https://arxiv.org/abs/2310.19923}, } ```