minhtuan7akp/gte-vietnamese-finetune_v3

SentenceTransformer based on Alibaba-NLP/gte-multilingual-base

This is a sentence-transformers model finetuned from Alibaba-NLP/gte-multilingual-base on the csv dataset. It maps sentences & paragraphs to a 768-dimensional dense vector space and can be used for semantic textual similarity, semantic search, paraphrase mining, text classification, clustering, and more.

Model Details

Model Description

• Model Type: Sentence Transformer
• Base model: Alibaba-NLP/gte-multilingual-base
• Maximum Sequence Length: 8192 tokens
• Output Dimensionality: 768 dimensions
• Similarity Function: Cosine Similarity
• Training Dataset:
  • csv

Model Sources

• Documentation: Sentence Transformers Documentation
• Repository: Sentence Transformers on GitHub
• Hugging Face: Sentence Transformers on Hugging Face

Full Model Architecture

SentenceTransformer(
  (0): Transformer({'max_seq_length': 8192, 'do_lower_case': False}) with Transformer model: NewModel 
  (1): Pooling({'word_embedding_dimension': 768, 'pooling_mode_cls_token': True, 'pooling_mode_mean_tokens': False, 'pooling_mode_max_tokens': False, 'pooling_mode_mean_sqrt_len_tokens': False, 'pooling_mode_weightedmean_tokens': False, 'pooling_mode_lasttoken': False, 'include_prompt': True})
  (2): Normalize()
)

Usage

Direct Usage (Sentence Transformers)

First install the Sentence Transformers library:

pip install -U sentence-transformers

Then you can load this model and run inference.

from sentence_transformers import SentenceTransformer

# Download from the 🤗 Hub
model = SentenceTransformer("minhtuan7akp/gte-vietnamese-finetune_v3")
# Run inference
sentences = [
    'Cái nhàn trong thơ Mạc Thiên Tứ khác với cái nhàn trong thơ của các nho sĩ Đàng Ngoài như thế nào?',
    'Cá rồng mệt mất, kình ngao lộn tròng.\r\nOng với ve om sòm cụm liễu,\r\nBướm dập dìu lẽo đẽo chòm hoa.\r\nMây lien ba khóm một tòa,\r\nDưới trên biếc mát, gần xa xanh rè.\r\nCách bên khe tiếng ngư ra rả,\r\nGõ mạn thuyền ca họa đòi cung.\r\nDưới rùng mầy trẻ mục đồng,\r\nLưng trâu thổi địch, gió lằng theo khe.\r\nMạc Thiên Tứ còn coi đất Hà Tiên giàu đẹp của ông hơn cả \r\nchốn thị thành:\r\nTuy giang thôn nào khác Tràng an.\r\nĐâu no thỉ đó là an lạc,\r\nLựa phải chen chân chon thị thành.\r\nNgười thanh nhàn, vật thì long thạnh (thịnh),\r\nDân bang kỳ ỳ sánh kỳ tây.\r\nTư tưởng chủ đạo trong Hà Tiên thập cảnh là tư tưởng an nhàn. \r\nCái nhàn trong thơ Mạc Thiên Tứ khác với cái nhàn ưong thơ của \r\ncác nho sĩ Đàng Ngoài là nhàn ẩn sĩ, chán cảnh quan trường, còn cố \r\ncái nhàn của Mạc Thiên Tứ xuất phát từ cuộc sống lao động thanh \r\nbình, ấm no. ông đã thi vị hóa cuộc sống của người dân nơi đây:\r\nCành lành như đợi người lành,\r\nMua nhàn một khắc giá đành nghìn cân...\r\n546',
    'LỊCH SỪ VIỆT NAM - TẬP 4\r\nChia nhau lớn bé thấp cao\r\nCá rồng mệt mất, kình ngao lộn tròng.\r\nOng với ve om sòm cụm liễu,\r\nBướm dập dìu lẽo đẽo chòm hoa.\r\nMây lien ba khóm một tòa,\r\nDưới trên biếc mát, gần xa xanh rè.\r\nCách bên khe tiếng ngư ra rả,\r\nGõ mạn thuyền ca họa đòi cung.\r\nDưới rùng mầy trẻ mục đồng,\r\nLưng trâu thổi địch, gió lằng theo khe.\r\nMạc Thiên Tứ còn coi đất Hà Tiên giàu đẹp của ông hơn cả \r\nchốn thị thành:\r\nTuy giang thôn nào khác Tràng an.\r\nĐâu no thỉ đó là an lạc,\r\nLựa phải chen chân chon thị thành.\r\nNgười thanh nhàn, vật thì long thạnh (thịnh),\r\nDân bang kỳ ỳ sánh kỳ tây.\r\nTư tưởng chủ đạo trong Hà Tiên thập cảnh là tư tưởng an nhàn. \r\nCái nhàn trong thơ Mạc Thiên Tứ khác với cái nhàn ưong thơ của \r\ncác nho sĩ Đàng Ngoài là nhàn ẩn sĩ, chán cảnh quan trường, còn cố \r\ncái nhàn của Mạc Thiên Tứ xuất phát từ cuộc sống lao động thanh \r\nbình, ấm no. ông đã thi vị hóa cuộc sống của người dân nơi đây:\r\nCành lành như đợi người lành,\r\nMua nhàn một khắc giá đành nghìn cân...\r\n546\r\nChối ai lợi chuốc danh mua,\r\nVui nghề chài lưới tôm cua tháng ngày.\r\nKé gió mưa, người thi non nước,\r\nHai phía đều chiếm được thu thanh.\r\nTùng kia mấy bức xanh tươi,\r\nĐòi thanh đòi nhã, một nơi một nhàn.\r\nMạc Thiên Tứ từ khi đem đất đai quy phụ, đặt dưới quyền quản \r\nlý của chúa Nguyễn, thì cả dòng họ ông cùng ưật tự xã hội miền Hà \r\nTiên dưới quyền khai thác của ông, đã ưở nên vững vàng và phồn \r\nthịnh. Điều đó càng tạo cho ông nhiều lạc quan ữong cuộc sống và',
]
embeddings = model.encode(sentences)
print(embeddings.shape)
# [3, 768]

# Get the similarity scores for the embeddings
similarities = model.similarity(embeddings, embeddings)
print(similarities.shape)
# [3, 3]

Evaluation

Metrics

Information Retrieval

• Dataset: Alibaba-NLP/gte-multilingual-base
• Evaluated with InformationRetrievalEvaluator

Metric	Value
cosine_accuracy@1	0.4767
cosine_accuracy@3	0.7091
cosine_accuracy@5	0.7781
cosine_accuracy@10	0.8447
cosine_precision@1	0.4767
cosine_precision@3	0.2364
cosine_precision@5	0.1556
cosine_precision@10	0.0845
cosine_recall@1	0.4767
cosine_recall@3	0.7091
cosine_recall@5	0.7781
cosine_recall@10	0.8447
cosine_ndcg@10	0.6645
cosine_mrr@10	0.6063
cosine_map@100	0.6116

Training Details

Training Dataset

csv

• Dataset: csv
• Size: 19,702 training samples
• Columns: anchor, positive, and negative_1
• Approximate statistics based on the first 1000 samples:

  	anchor	positive	negative_1
  type	string	string	string
  details	min: 9 tokens mean: 26.95 tokens max: 103 tokens	min: 25 tokens mean: 373.94 tokens max: 596 tokens	min: 14 tokens mean: 370.91 tokens max: 543 tokens

• Samples:

  anchor	positive	negative_1
  Tính chất kiến trúc của đình làng triều Mạc được thể hiện qua những đặc điểm gì, như số gian, hình dạng, nội thất và cách bố trí không gian trong công trình?	Đình làng là công trình kiến trúc công cộng được dựng nên
  băng sự đóng góp của cải và công sức của cả cộng đồng làng xã.
  Ngoài chức năng là trụ sở hành chính của cả làng, ngôi đình còn là
  trung tâm sinh hoạt văn hóa làng xã, là nơi diễn ra các nghi lễ trọng
  đại trong dịp tế lễ thần Thành hoàng làng và tô chức hội hè hăng
  năm. Có thê nói, ngôi đình làng là nơi hội tụ sức mạnh của cả cộng
  đồng và là biểu trưng đặc sắc nhất của văn hóa làng xã.
  Trong các ngôi đình triều Mạc, Thân thành hoàng có lý lịch
  xuất thân khá phong phú. Tản Viên sơn thánh là vị thần có ảnh
  hưởng lớn ở xứ Đoài được thờ phụng ở đình Tây Đăng, Thanh Lũng
  và nhiều làng xã khác. Thần Cao Sơn, Quý Minh tương truyền là
  tướng tâm phúc của Hùng Vương được thờ ở đình làng Lỗ Hạnh.
  Dân làng Lỗ Hạnh còn thờ cả Phương Dung công chúa... Từ thế
  kỷ XYVI và các thế kỷ tiếp sau, Thần thành hoàng làng trở thành
  vị vua tỉnh thần ở các làng xã, tín ngưỡng thờ cúng Thân thành
  hoàng càng trở nên phong phú thê hiện qua lễ...	Nguồn tư liệu thành văn cũng như tư liệu điền dã đề cập đến
  kiến trúc đình làng triều Mạc không nhiều. Hiện nay chỉ mới xác
  định được 6 ngôi đình được xây dựng dưới triều Mạc và 8 ngôi
  đình khác được ghi chép trong văn bia, trong đó có 2 ngôi đình kiến
  trúc được xây dựng dưới triều Mạc còn khá nguyên vẹn, đó là đình
  Lỗ Hạnh và đình Tây Đăng.
  Đình Lỗ Hạnh ở làng Đông Lỗ (Hiệp Hòa, Bắc Giang) được
  xây dựng năm 1576. Niên đại tuyệt đối này được biết đến qua dòng
  lạc khoản ghi tại cốn bên phải và bên trái của đình. Dòng chữ khắc
  ở côn bên trái là "Sùng Khang thập nhất niên, lục nguyệt, thất
  nhật tạo” (làm vào ngày mùng 7 tháng 6 năm Sùng Khang thứ 11).
  Dòng chữ khắc ở cốn bên phải là "Tuế thứ Bính Tý mạnh xuân tân
  tạo" (làm mới vào tháng Giêng năm Bính Tý). Qua hai dòng lạc
  khoản có thể đoán định, đình Lỗ Hạnh được khởi công làm từ tháng
  Giêng đến tháng Sáu năm Bính Tý, niên hiệu Sùng Khang thứ 11,
  tức năm 1576.
  Đình Tây Đăng ở xã Tây Đăng (Ba Vì, Hà Nội). Dòng lạc khoả...
  Nguyễn Khắc Nhu có vai trò gì trong khởi nghĩa toàn khu vực miền núi Bắc Kỳ của Việt Nam Quốc dân Đảng vào năm 1930?	bị nổ do bất cẩn. Do đó công việc bị phát hiện. Hai người phụ trách
  cơ quan chế bom là Đỗ Cương và Quản Trác trốn thoát. Nhiều binh
  lính và dân thường bị bắt. Công việc bạo động của Xứ Nhu không
  thành. Đúng lúc này Việt Nam Quốc dân Đảng vừa thành lập, cử
  người tới mời Xứ Nhu và Việt Nam Dân quốc gia nhập Việt Nam
  Quốc dân Đảng. Hầu hết các đồng chí của Xứ Nhu trở thành đảng
  viên của Việt Nam Quốc dân Đảng ở vùng Bắc Ninh, Bắc Giang.
  Do đó, Việt Nam Quốc dân Đảng mạnh lên về số lượng1. Cùng với
  việc phát triển đảng viên ở Bẳc Ninh, Bắc Giang, Việt Nam Quốc
  dân Đảng còn thiết lập nhiều cơ sở ở các tỉnh Thái Bình, Hải Dương,
  1. Nguyễn Khắc Nhu tức Xứ Nhu (1882-1930), người làng Song Khê, huyện
  Yên Dũng, tinh Bắc Giang. Với lòng yêu nuớc và ý chí chống Pháp,
  ông dự tính thành lập một tổ chức hoạt động công khai nhăm đào tạo
  tài năng cho đất nước lấy tên là "Hội Quốc dân dục tài”. Việc này
  không thành công, ông lại lập tổ chức bí mật nhăm bạo động lật đổ ách
  áp b...	Chương VIII. Các tổ chức cách mạng ra đời...
  Nguyễn Khắc Nhu
  Nguồn: Bảo tàng Cách mạng Việt Nam/BTCM - SF 6183 -7/Đ8-a
  Tổng bộ trên thực tế là do Kỳ bộ Bắc Kỳ kiêm nhiệm.
  Ở Trung Kỳ, Việt Nam Quốc dân Đảng hầu như không phát
  triển được lực lượng do sự lấn át của các tổ chức đảng đã có trước
  với đường lối rõ ràng hom là Việt Nam Cách mạng Thanh niên và
  Tân Việt Cách mạng Đảng. Quần chúng phần lớn đã tham gia vào
  hai tổ chức này các cơ sở đã được xây dựng vững chắc từ trước.
  Ngoài một chi bộ ở Thanh Hóa, Việt Nam Quốc dân Đảng chi có
  một ít đảng viên rải rác tại các tinh Đà Năng, Phan Rang, Phan Thiết....
  Trên thực tế, Việt Nam Quốc dân Đảng chi phát triển được cơ
  sở mạnh ở Bắc Kỳ và ít nhiều ở Nam Kỳ.
  509
  LỊCH SỬ VIỆT NAM - TẬP 8
  Ở Bẳc Kỳ, sau khi thành lập (25-12-1927), Việt Nam Quốc dân
  Đảng phát triển cơ sở khá nhanh.
  Lúc bấy giờ, tại hai tỉnh Bắc Giang và Bắc Ninh, Nguyễn Khắc
  Nhu tức Xứ Nhu dự định bạo động.
  Xứ Nhu là một nhà nho yêu nước nổi tiếng trong...
  Giá gạo tháng 3-1950 ở Liên khu IV là bao nhiêu đồng/tạ và có chênh lệch gì so với giá gạo ở Liên khu III và Liên khu Việt Bắc?	ngày càng tăng nhanh, nhất là ở Việt Bắc. Giá gạo tăng mạnh
  nhất, giá thực phẩm cũng tăng dần theo giá gạo. Giá các mặt hàng
  kỹ nghệ tăng chậm hơn. Giá hàng ngoại hóa hầu như không tăng
  vỉ trong vùng Pháp chiếm đóng, hàng ngoại hóa tính bằng tiền
  Đông Dương không tăng, hom nữa nhân dân cũng ít tiêu thụ hàng
  ngoại hóa vì bị cấm.
  1. Viện Kinh tế học, Kinh tế Việt Nam từ Cách mạng Tháng Tám đến..., Sách
  đã dẫn, tr. 238.
  2. Chuơng trình và báo cáo của Bộ Kinh tế về tình hình hoạt động năm 1950.
  Trung tâm lưu trữ quốc gia in, phông Phủ Thủ tướng, Hồ sơ số 1914.
  488
  Chương VI. Việt Nam dân chủ cộng hòa xây dựng..
  Giá gạo trong những tháng đầu năm 1950 so với cuối năm 1949
  có thay đổi, Liên khu IV (Thanh Hóa) giá tăng lên 154%; Liên khu
  III (Hà Đông - Hà Nam) giá tăng lên 153%; Liên khu Việt Bắc
  (Thái Nguyên) giá tăng lên 800%.
  Giá gạo ở Thái Nguyên từ 1.625 đồng/tạ lên 13.000 đồng/tạ
  (tăng 800%); ờ Phú Thọ từ 2.650 đồng/tạ lên 7.500 đồng/tạ (tăng
  283%). Mặt khác, ...	mặt hàng tăng lên nhanh chống. Điển hình là giá gạo từ đầu năm
  1949 đến cuối năm 1952 tăng rất cao. Xem xét về giá gạo của các
  vùng miền sau đây đã chứng tỏ điều đó.
  1. Tóm tắt công tác ngoại thương 1945-1954. Phòng Lưu trữ Bộ Thương
  mại, phông Ngoại thương, hồ sơ số 11.
  314

• Loss: main.MultipleNegativesTripletCombinedLoss

Evaluation Dataset

csv

• Dataset: csv
• Size: 2,190 evaluation samples
• Columns: anchor, positive, and negative_1
• Approximate statistics based on the first 1000 samples:

  	anchor	positive	negative_1
  type	string	string	string
  details	min: 10 tokens mean: 26.56 tokens max: 108 tokens	min: 24 tokens mean: 369.01 tokens max: 559 tokens	min: 33 tokens mean: 377.56 tokens max: 672 tokens

• Samples:

  anchor	positive	negative_1
  Nguyễn Hoàng đã thực hiện những hành động gì để dần dần tách khỏi sự ràng buộc của họ Trịnh sau khi trở lại Thuận Quảng vào năm 1600, và những hành động này đã ảnh hưởng như thế nào đến mối quan hệ giữa hai dòng họ?	thẳng đối với họ Nguyễn. Trịnh Tùng đã lấy danh nghĩa vua Lê sai
  sứ giả là Thiêm đô ngự sử Lê Nghĩa Trạch đem sắc vào phủ dụ
  Nguyễn Hoàng và vẫn cho ở lại trấn thủ, hằng năm nộp thuế như
  cũ. Cùng với sắc của vua Lê, Trịnh Tùng có gửi thư kèm theo
  Chương ĩ. Sự phân liệt Đàng Trong - Đàng Ngoài...
  1, Toàn thư. quyển 17, tập IV, Sđd, tr. 200.
  2, Đại Nam thực lục, Tiền biên, quyển 1, tập I, Sđd, tr. 34.
  3, Đại Nam thực lục, Tiển biên, quyển 1, tập I, Sđd, tr. 35.
  39
  LỊCH SỬ VIỆT NAM - TẬP 4
  "khuyên giữ việc thuế cống". Nguyễn Hoàng sai sứ giả đáp lễ tạ on
  vua Lê và gửi thư cho Trịnh Tùng hẹn kết nghĩa thông gia, đem con
  gái là Ngọc Tú gả cho Trịnh Tráng (con Trịnh Tùng) lấy danh
  nghĩa hôn nhân để duy trì mối quan hệ bề ngoài giao hảo giữa hai
  dòng họ vốn có sẵn một mối thù địch.
  - Chính sách cùa họ Nguyễn từ khi Nguyễn Hoàng trở lại
  Thuận Quảng
  Năm 1600, Nguyễn Hoàng ròi được khỏi đất Bẳc trở về Thuận
  Quảng bắt đầu thực hiện một chính sách cai trị mói, dần dần tác...	gồm: 2 phủ, 9 huyện, 3 châu; Quảng Nam gồm: 3 phủ, 9 huyện’,
  về bộ máy quan chức lúc ấy, những bộ tướng ở 3 ty cũng đều do
  họ Trịnh cắt đặt, như Mai cầu làm Tổng binh Thuận Hóa dưới triều
  Lê Thế Tông (1573-1599), Vũ Chân làm Hiến sát sứ Thuận Hóa
  dưới triều Lê Kính Tông (16(X)-1619)‘*... mục đích để kiềm chế và
  kiểm soát mọi hành động cùa họ Nguyễn.
  Nhìn chung trong thời kỳ đầu, từ khi vào trấn thủ (1558) đến
  khi nhậm chức Tổng trấn tướng quân, quản lĩnh cả vùng Thuận
  Quảng (1570), Nguyễn Hoàng bên ngoài lúc nào cũng tỏ ra thần
  Chương /. Sự phân liệt Đàng Trong - Đàng Ngoài...
  1. Đại Việt thông sừ, Sđd, tr. 316.
  2, 3. Đại Nam thực lục, Tiền biên, quyến 1, tập I, Sđd, tr. 29.
  4. Đại Nam thực lục, Tiền biên, quyển 2, tập I, Sđd, tr. 45.
  35
  LỊCH SỪ VIỆT NAM - TẬP 4
  phục họ Trịnh và đã cùng góp sức với họ Trịnh đánh triều Mạc. Đôi
  khi, Nguyễn Hoàng đã từ Thuận Quảng ra Thanh Hóa chầu vua Lê
  và thăm viếng Trịnh Kiểm. Năm 1569, Nguyễn Hoàng ra Tây
  Kinh, yết kiến ...
  Báo cáo của Ủy ban Kháng chiến hành chính Hà Nội về hoạt động giáo dục bù nhìn và tình hình các giáo sư trường Chu Văn An có nội dung gì?	Tài liệu tham khảo
  21. Báo cáo sô' 2 BC/I ngày 12-11-1949 và Báo cáo sô' 463
  BC/DB ngày 25-12-1949 của Ty Công an H à Nội. Trung
  tâm Lưu trữ Quốc gia III, phông Phủ Thủ tướng, Hồ sơ
  SỐ921.
  28. Báo “Le song” ngày 11-2-1949. Trung tâm Lưu trữ Quốc
  gia III, phông Phủ Thủ tướng, Hồ sơ sô' 2002.
  29. Báo cáo của u ỷ ban Kháng chiến hành chính Hà Nội vê
  hoạt động giáo dục bù nhìn và tình hình các giáo sư
  trường Chu Văn An. Trung tâm Lưu trữ Quốc gia III,
  phông Phủ Thủ tướng, Hồ sơ số 979.
  30. Báo cáo của Tổng Giám đốc Việt N am Công an vụ sô'
  122/NCB3 ngày 1-4-1951. Trung tâm Lưu trữ Quốic gia
  III, phông Phủ Thủ tướng, Hồ sơ sô' 979.
  31. Báo cáo thành tích về cống tác công an trong 8 năm kháng
  chiến (1946-1954) của Bộ Công an. Trung tâm Lưu trữ
  Quốc gia III, phông Phủ Thủ tướng, Hồ sơ sô' 927.
  32. Báo cáo một năm kháng chiến (12-1946 đến 12-1947) của
  UBKCHC Khu 12. Trung tâm Lưu trữ Quốc gia III, phông
  Phủ Thủ tướng, Hồ sơ sô" 2000.
  33. Báo cáo thành tích quăn sự trong 8 n...	tâm Lưu trữ Quốc gia III, phông Phủ Thủ tướng, Hồ sơ
  SỐ921.
  28. Báo “Le song” ngày 11-2-1949. Trung tâm Lưu trữ Quốc
  gia III, phông Phủ Thủ tướng, Hồ sơ sô' 2002.
  29. Báo cáo của u ỷ ban Kháng chiến hành chính Hà Nội vê
  hoạt động giáo dục bù nhìn và tình hình các giáo sư
  trường Chu Văn An. Trung tâm Lưu trữ Quốc gia III,
  phông Phủ Thủ tướng, Hồ sơ số 979.
  30. Báo cáo của Tổng Giám đốc Việt N am Công an vụ sô'
  122/NCB3 ngày 1-4-1951. Trung tâm Lưu trữ Quốic gia
  III, phông Phủ Thủ tướng, Hồ sơ sô' 979.
  31. Báo cáo thành tích về cống tác công an trong 8 năm kháng
  chiến (1946-1954) của Bộ Công an. Trung tâm Lưu trữ
  Quốc gia III, phông Phủ Thủ tướng, Hồ sơ sô' 927.
  32. Báo cáo một năm kháng chiến (12-1946 đến 12-1947) của
  UBKCHC Khu 12. Trung tâm Lưu trữ Quốc gia III, phông
  Phủ Thủ tướng, Hồ sơ sô" 2000.
  33. Báo cáo thành tích quăn sự trong 8 năm kháng chiến (1946-
  1954). Trung tâm Lưu trữ Quốc gia m , phông Phủ Thủ
  tướng, Hỗ sơ số 1373.
  34. Báo cáo sô'206-CV ngày 28-2-1...
  Đặc điểm dân số của nước ta ảnh hưởng đến các ngành dịch vụ như thế nào và đòi hỏi những ngành dịch vụ nào cần được ưu tiên phát triển trong quá trình đô thị hóa?	— Trong các thành phố lớn thường hình thành các trung tâm giao dịch,
  thương mại. Đó là nơi tập trung các ngân hàng, các văn phòng đại diện
  của các công ti, các siêu thị hay các tổ hợp thương mại, dịch vụ lớn...
  Ở các thành phố lớn trên thế giới, thường dễ nhận thấy các trung tâm
  thương mại này do sự tập trung các ngôi nhà cao tầng, chọc trời. Một
  thành phố có thể có trung tâm thương mại chính và một số trung tâm
  thương mại nhỏ hơn, kết quả của sự phát triển đô thị.
  — Ở nước ta, các thành phố, thị xã thường có khu hành chính (phân
  “đô”) và khu buôn bán, dịch vụ (phân “thị'). Ở Hà Nội, Thành phố
  Hồ Chí Minh các trung tâm giao dịch, thương mại của thành phố đang
  được hình thành rõ nét.
  CÂU HỎI VÀ BÀI TẬP
  174
  1. Cho biết đặc điểm dân số của nước ta (đông, tăng còn tương đối
  nhanh, mức sống đang nâng lên và đô thị hoá đang phát triển với
  tốc độ nhanh hơn) có ảnh hưởng đến các ngành dịch vụ như thế
  nào ? Các đặc điểm đó đòi hỏi những ngành dịch vụ nào cần được
  ưu tiê...	— Ở nước ta, các thành phố, thị xã thường có khu hành chính (phân
  “đô”) và khu buôn bán, dịch vụ (phân “thị'). Ở Hà Nội, Thành phố
  Hồ Chí Minh các trung tâm giao dịch, thương mại của thành phố đang
  được hình thành rõ nét.
  CÂU HỎI VÀ BÀI TẬP
  174
  1. Cho biết đặc điểm dân số của nước ta (đông, tăng còn tương đối
  nhanh, mức sống đang nâng lên và đô thị hoá đang phát triển với
  tốc độ nhanh hơn) có ảnh hưởng đến các ngành dịch vụ như thế
  nào ? Các đặc điểm đó đòi hỏi những ngành dịch vụ nào cần được
  ưu tiên phát triển ?
  2. Tại sao các thành phố lớn cũng đồng thời là các trung tâm dịch vụ
  lớn 2
  Bài 49
  VẠI TRÒ, ĐẶC ĐIỂM. ¬
  VÀ CÁC NHÂN TỐ ẢNH HƯỞNG ĐẾN PHÁT TRIỂN
  VÀ PHÂN BỐ NGÀNH GIAO THÔNG VẬN TẢI
  I- VAI TRÒ VÀ ĐẶC ĐIỂM CỦA NGÀNH GIAO THÔNG VẬN TẢI
  1. Vai trò
  2. Đặc điểm
  — Giao thông vận tải là một ngành dịch vụ, tham gia vào việc cung ứng
  vật tư ki thuật, nguyên liệu, năng lượng cho các cơ sở sản xuất và đưa
  sản phẩm đến thị trường tiêu thụ, giúp cho cá...

• Loss: main.MultipleNegativesTripletCombinedLoss

Training Hyperparameters

Non-Default Hyperparameters

• eval_strategy: steps
• per_device_train_batch_size: 6
• per_device_eval_batch_size: 6
• learning_rate: 3e-06
• num_train_epochs: 2
• warmup_ratio: 0.05
• bf16: True
• load_best_model_at_end: True
• batch_sampler: no_duplicates

All Hyperparameters

Click to expand

• overwrite_output_dir: False
• do_predict: False
• eval_strategy: steps
• prediction_loss_only: True
• per_device_train_batch_size: 6
• per_device_eval_batch_size: 6
• per_gpu_train_batch_size: None
• per_gpu_eval_batch_size: None
• gradient_accumulation_steps: 1
• eval_accumulation_steps: None
• torch_empty_cache_steps: None
• learning_rate: 3e-06
• weight_decay: 0.0
• adam_beta1: 0.9
• adam_beta2: 0.999
• adam_epsilon: 1e-08
• max_grad_norm: 1.0
• num_train_epochs: 2
• max_steps: -1
• lr_scheduler_type: linear
• lr_scheduler_kwargs: {}
• warmup_ratio: 0.05
• warmup_steps: 0
• log_level: passive
• log_level_replica: warning
• log_on_each_node: True
• logging_nan_inf_filter: True
• save_safetensors: True
• save_on_each_node: False
• save_only_model: False
• restore_callback_states_from_checkpoint: False
• no_cuda: False
• use_cpu: False
• use_mps_device: False
• seed: 42
• data_seed: None
• jit_mode_eval: False
• use_ipex: False
• bf16: True
• fp16: False
• fp16_opt_level: O1
• half_precision_backend: auto
• bf16_full_eval: False
• fp16_full_eval: False
• tf32: None
• local_rank: 0
• ddp_backend: None
• tpu_num_cores: None
• tpu_metrics_debug: False
• debug: []
• dataloader_drop_last: False
• dataloader_num_workers: 0
• dataloader_prefetch_factor: None
• past_index: -1
• disable_tqdm: False
• remove_unused_columns: True
• label_names: None
• load_best_model_at_end: True
• ignore_data_skip: False
• fsdp: []
• fsdp_min_num_params: 0
• fsdp_config: {'min_num_params': 0, 'xla': False, 'xla_fsdp_v2': False, 'xla_fsdp_grad_ckpt': False}
• tp_size: 0
• fsdp_transformer_layer_cls_to_wrap: None
• accelerator_config: {'split_batches': False, 'dispatch_batches': None, 'even_batches': True, 'use_seedable_sampler': True, 'non_blocking': False, 'gradient_accumulation_kwargs': None}
• deepspeed: None
• label_smoothing_factor: 0.0
• optim: adamw_torch
• optim_args: None
• adafactor: False
• group_by_length: False
• length_column_name: length
• ddp_find_unused_parameters: None
• ddp_bucket_cap_mb: None
• ddp_broadcast_buffers: False
• dataloader_pin_memory: True
• dataloader_persistent_workers: False
• skip_memory_metrics: True
• use_legacy_prediction_loop: False
• push_to_hub: False
• resume_from_checkpoint: None
• hub_model_id: None
• hub_strategy: every_save
• hub_private_repo: None
• hub_always_push: False
• gradient_checkpointing: False
• gradient_checkpointing_kwargs: None
• include_inputs_for_metrics: False
• include_for_metrics: []
• eval_do_concat_batches: True
• fp16_backend: auto
• push_to_hub_model_id: None
• push_to_hub_organization: None
• mp_parameters:
• auto_find_batch_size: False
• full_determinism: False
• torchdynamo: None
• ray_scope: last
• ddp_timeout: 1800
• torch_compile: False
• torch_compile_backend: None
• torch_compile_mode: None
• include_tokens_per_second: False
• include_num_input_tokens_seen: False
• neftune_noise_alpha: None
• optim_target_modules: None
• batch_eval_metrics: False
• eval_on_start: False
• use_liger_kernel: False
• eval_use_gather_object: False
• average_tokens_across_devices: False
• prompts: None
• batch_sampler: no_duplicates
• multi_dataset_batch_sampler: proportional

Training Logs

Epoch	Step	Training Loss	Validation Loss	Alibaba-NLP/gte-multilingual-base_cosine_ndcg@10
0.0305	100	1.5054	1.4634	0.5604
0.0609	200	1.4686	1.3534	0.5753
0.0914	300	1.3303	1.2171	0.5982
0.1218	400	1.1586	1.0665	0.6212
0.1523	500	1.162	0.9608	0.6432
0.1827	600	1.1015	0.8598	0.6552
0.2132	700	1.0499	0.8052	0.6579
0.2436	800	0.848	0.7505	0.6530
0.2741	900	0.835	0.7230	0.6518
0.3045	1000	0.8449	0.7009	0.6567
0.3350	1100	0.883	0.6743	0.6554
0.3654	1200	0.8042	0.6634	0.6577
0.3959	1300	0.7773	0.6361	0.6520
0.4263	1400	0.7391	0.6246	0.6531
0.4568	1500	0.783	0.6213	0.6594
0.4872	1600	0.7654	0.6137	0.6556
0.5177	1700	0.777	0.6014	0.6617
0.5481	1800	0.6864	0.6011	0.6590
0.5786	1900	0.7966	0.5900	0.6645
0.6090	2000	0.6685	0.5864	0.6556
0.6395	2100	0.6803	0.5715	0.6552
0.6699	2200	0.7138	0.5640	0.6528
0.7004	2300	0.5671	0.5622	0.6512
0.7308	2400	0.6721	0.5581	0.6554
0.7613	2500	0.7081	0.5535	0.6569
0.7917	2600	0.6442	0.5573	0.6534
0.8222	2700	0.6348	0.5521	0.6542
0.8526	2800	0.6413	0.5511	0.6495
0.8831	2900	0.6063	0.5482	0.6463
0.9135	3000	0.6768	0.5407	0.6459
0.9440	3100	0.744	0.5386	0.6438
0.9744	3200	0.597	0.5374	0.6446
1.0049	3300	0.6116	0.5327	0.6424
1.0353	3400	0.5109	0.5341	0.6444
1.0658	3500	0.5915	0.5348	0.6483
1.0962	3600	0.5289	0.5331	0.6499
1.1267	3700	0.5823	0.5331	0.6488
1.1571	3800	0.6027	0.5300	0.6512
1.1876	3900	0.5498	0.5317	0.6455
1.2180	4000	0.5468	0.5290	0.6545
1.2485	4100	0.6068	0.5293	0.6578
1.2789	4200	0.5724	0.5302	0.6542
1.3094	4300	0.5572	0.5296	0.6589
1.3398	4400	0.698	0.5258	0.6611
1.3703	4500	0.4963	0.5255	0.6590
1.4007	4600	0.5858	0.5254	0.6610
1.4312	4700	0.5273	0.5237	0.6574
1.4616	4800	0.5185	0.5244	0.6563
1.4921	4900	0.4841	0.5249	0.6565
1.5225	5000	0.5267	0.5221	0.6544
1.5530	5100	0.5208	0.5230	0.6531
1.5834	5200	0.6043	0.5215	0.6579
1.6139	5300	0.5248	0.5187	0.6563
1.6443	5400	0.4898	0.5191	0.6553
1.6748	5500	0.5028	0.5190	0.6559
1.7052	5600	0.5865	0.5191	0.6556
1.7357	5700	0.5155	0.5201	0.6562
1.7661	5800	0.4485	0.5208	0.6590
1.7966	5900	0.6146	0.5208	0.6625
1.8270	6000	0.4956	0.5206	0.6633
1.8575	6100	0.5716	0.5199	0.6618
1.8879	6200	0.4691	0.5191	0.6628
1.9184	6300	0.5131	0.5185	0.6626
1.9488	6400	0.5636	0.5185	0.6633
1.9793	6500	0.4466	0.5184	0.6628

Framework Versions

• Python: 3.11.11
• Sentence Transformers: 4.0.2
• Transformers: 4.51.2
• PyTorch: 2.6.0+cu124
• Accelerate: 1.6.0
• Datasets: 3.5.0
• Tokenizers: 0.21.1

Citation

BibTeX

Sentence Transformers

@inproceedings{reimers-2019-sentence-bert,
    title = "Sentence-BERT: Sentence Embeddings using Siamese BERT-Networks",
    author = "Reimers, Nils and Gurevych, Iryna",
    booktitle = "Proceedings of the 2019 Conference on Empirical Methods in Natural Language Processing",
    month = "11",
    year = "2019",
    publisher = "Association for Computational Linguistics",
    url = "https://arxiv.org/abs/1908.10084",
}