SentenceTransformer based on bqbbao6/vietnamese-legal-embedding
This is a sentence-transformers model finetuned from bqbbao6/vietnamese-legal-embedding on the json dataset. It maps sentences & paragraphs to a 768-dimensional dense vector space and can be used for retrieval.
Model Details
Model Description
- Model Type: Sentence Transformer
- Base model: bqbbao6/vietnamese-legal-embedding
- Maximum Sequence Length: 512 tokens
- Output Dimensionality: 768 dimensions
- Similarity Function: Cosine Similarity
- Supported Modality: Text
- Training Dataset:
- json
Model Sources
- Documentation: Sentence Transformers Documentation
- Repository: Sentence Transformers on GitHub
- Hugging Face: Sentence Transformers on Hugging Face
Full Model Architecture
SentenceTransformer(
(0): Transformer({'transformer_task': 'feature-extraction', 'modality_config': {'text': {'method': 'forward', 'method_output_name': 'last_hidden_state'}}, 'module_output_name': 'token_embeddings', 'architecture': 'XLMRobertaModel'})
(1): Pooling({'embedding_dimension': 768, 'pooling_mode': 'mean', 'include_prompt': True})
(2): Normalize({})
)
Usage
Direct Usage (Sentence Transformers)
First install the Sentence Transformers library:
pip install -U sentence-transformers
Then you can load this model and run inference.
from sentence_transformers import SentenceTransformer
# Download from the 🤗 Hub
model = SentenceTransformer("sentence_transformers_model_id")
# Run inference
sentences = [
'Nếu thời gian phục vụ của viên chức quốc phòng còn 11 năm thì thời hạn sử dụng Chứng minh viên chức quốc phòng quy định ra sao?',
'\nĐiều 10. Thẩm quyền cấp Chứng\n\nminh quân nhân chuyên nghiệp, công nhân và viên chức quốc phòng\n\nBộ trưởng Bộ Quốc phòng quy định thẩm quyền cấp Chứng\n\nminh quân nhân chuyên nghiệp, công nhân và viên chức quốc phòng trong lực lượng\n\nthường trực của Quân đội nhân dân.\n\nĐiều 11. Thu hồi Chứng minh\n\nquân nhân chuyên nghiệp, công nhân và viên chức quốc phòng\n\n1. Quân nhân chuyên nghiệp, công nhân và viên chức\n\nquốc phòng bị thu hồi Chứng minh trong trường hợp sau đây:\n\na) Thôi phục vụ trong lực lượng thường trực của\n\nQuân đội nhân dân;\n\nb) Được cấp đổi quy định tại điểm a, b, c khoản 2\n\nĐiều 8 Nghị định này; sau khi cá nhân nhận được Chứng minh mới thì Chứng minh\n\ncũ bị thu hồi;\n\nc) Tước danh hiệu quân nhân hoặc buộc thôi việc.\n\n2. Cơ quan quản lý nhân sự quy\n\nđịnh tại điểm b, c khoản 1 Điều 9 Nghị định này\n\ncó trách nhiệm thu hồi, quản lý, hủy Chứng minh của quân nhân chuyên nghiệp,\n\ncông nhân và viên chức quốc phòng theo quy định của pháp luật.\n\nĐiều 12. Tạm giữ Chứng minh\n\nquân nhân chuyên nghiệp, công nhân và viên chức quốc phòng\n\n1. Quân nhân chuyên nghiệp, công nhân và viên chức\n\nquốc phòng bị tạm giữ Chứng minh trong thời gian bị tạm giữ, bị tạm giam, chấp\n\nhành án phạt tù.\n\n2. Trong thời gian quân nhân chuyên nghiệp, công\n\nnhân và viên chức quốc phòng bị tạm giữ Chứng minh, cơ quan tạm giữ Chứng minh\n\ncho phép quân nhân chuyên nghiệp, công nhân và viên chức quốc phòng được sử dụng\n\nChứng minh của mình để thực hiện giao dịch theo quy định của pháp luật.\n\n3. Quân nhân chuyên nghiệp, công nhân và viên chức\n\nquốc phòng được trả lại Chứng minh khi hết thời hạn bị tạm giữ, bị tạm giam, chấp\n\nhành xong án phạt tù nếu được tiếp tục phục vụ trong lực lượng thường trực của\n\nQuân đội nhân dân.\n\nĐiều 13. Trách nhiệm của cơ\n\nquan, tổ chức và cá nhân\n\n1. Bộ trưởng Bộ Quốc phòng có trách nhiệm:\n\na) Chỉ đạo xây dựng dữ liệu\n\nquản lý, bảo đảm ngân sách, cơ sở vật chất cho công tác quản lý Chứng minh quân\n\nnhân chuyên nghiệp, công nhân và viên chức quốc phòng;\n\nb) Quy định quy cách, phôi, mẫu\n\nbiểu, chất liệu Chứng minh quân nhân chuyên nghiệp, công nhân và viên chức quốc\n\nphòng;\n\nc) Kiểm tra, xử lý vi phạm về quản lý, sử dụng Chứng\n\nminh quân nhân chuyên nghiệp, công nhân và viên chức quốc phòng.\n\n2. Quân nhân chuyên nghiệp, công nhân và viên chức\n\nquốc phòng có trách nhiệm:\n\na) Quản lý, sử dụng Chứng minh đúng mục đích quy định\n\ntại khoản 2 Điều 3 Nghị định này;\n\nb) Xuất trình Chứng minh theo yêu cầu của cơ quan,\n\ntổ chức và cá nhân có thẩm quyền theo quy định của pháp luật;\n\nc) Khi xuất cảnh ra nước ngoài phải để Chứng minh tại\n\nđơn vị quản lý.\n\n3. Các cơ quan, tổ chức và cá nhân có trách nhiệm\n\ngiám sát, phát hiện, phản ánh cho các đơn vị quân đội hoặc cơ quan nhà nước có\n\nthẩm quyền về những vi phạm trong việc quản lý, sử dụng Chứng minh quân nhân\n\nchuyên nghiệp, công nhân và viên chức quốc phòng.\n\nĐiều 14. Xử lý vi phạm\n\n1. Quân nhân chuyên nghiệp, công nhân và viên chức\n\nquốc phòng sử dụng Chứng minh sai mục đích, sửa chữa, cho mượn, làm mất hoặc\n\nlưu giữ khi không còn được sử dụng, tùy theo mức độ sai phạm xử lý kỷ luật hoặc\n\nbị truy cứu trách nhiệm hình sự theo quy định của pháp luật.\n\n2. Người có hành vi làm giả, hủy hoại, lưu giữ, sử\n\ndụng Chứng minh quân nhân chuyên nghiệp, công nhân và viên chức quốc phòng của\n\nngười khác vào bất cứ mục đích gì, tùy theo mức độ sai phạm xử lý hành chính hoặc\n\nbị truy cứu trách nhiệm hình sự theo quy định của pháp luật.\n',
'\nChương I\n\nQUY\n\nĐỊNH CHUNG\n\nĐiều 1. Phạm vi điều chỉnh\n\nThông tư này quy định cấp, quản lý, sử\n\ndụng, xây dựng dữ liệu, quy cách, chất liệu phôi mẫu, cơ sở vật chất; thẩm quyền,\n\ntrình tự thủ tục cấp lần đầu, cấp đổi, cấp lại Giấy chứng minh sĩ quan; Chứng\n\nminh quân nhân chuyên nghiệp, công nhân và viên chức quốc phòng (sau đây gọi\n\nchung là Chứng minh); Thẻ hạ sĩ quan, binh sĩ tại ngũ; Thẻ sĩ quan dự bị; Thẻ\n\nquân nhân chuyên nghiệp và hạ sĩ quan, binh sĩ dự bị (sau đây gọi chung là Thẻ).\n\nĐiều 2. Đối tượng áp\n\ndụng\n\nThông tư này áp dụng đối với:\n\n1. Sĩ quan tại ngũ và sĩ quan dự bị.\n\n2. Quân nhân chuyên nghiệp tại ngũ và\n\nquân nhân chuyên nghiệp dự bị.\n\n3. Hạ sĩ quan, binh sĩ tại ngũ và hạ\n\nsĩ quan, binh sĩ dự bị.\n\n4. Công nhân và viên chức quốc phòng.\n\n5. Các cơ quan, tổ chức, đơn vị và cá\n\nnhân có liên quan.\n\nĐiều 3. Mục đích,\n\nnguyên tắc cấp, sử dụng Chứng minh và Thẻ\n\n1. Mục đích sử dụng Chứng minh\n\na) Giấy chứng minh sĩ quan quy định tại\n\nKhoản 2 Điều 1 Nghị định số 130/2008/NĐ-CP ngày 19 tháng 12\n\nnăm 2008 của Chính phủ quy định về Giấy chứng minh sĩ quan Quân đội nhân dân\n\n(sau đây gọi chung là Nghị định số 130/2008/NĐ-CP);\n\nb) Chứng minh quân nhân chuyên nghiệp,\n\ncông nhân và viên chức quốc phòng quy định tại Điều 3 Nghị định\n\nsố 59/2016/NĐ-CP ngày 01 tháng 7 năm 2016 của Chính phủ quy định về Chứng\n\nminh quân nhân chuyên nghiệp, công nhân và viên chức quốc phòng (sau đây gọi\n\nchung là Nghị định số 59/2016/NĐ-CP).\n\n2. Mục đích sử dụng Thẻ\n\na) Chứng minh người được cấp Thẻ là hạ\n\nsĩ quan, binh sĩ tại ngũ; sĩ quan dự bị; quân nhân chuyên nghiệp và hạ sĩ quan,\n\nbinh sĩ dự bị của Quân đội nhân dân;\n\nb) Phục vụ công tác quản lý hạ sĩ\n\nquan, binh sĩ tại ngũ; sĩ quan dự bị; quân nhân chuyên nghiệp và hạ sĩ quan,\n\nbinh sĩ dự bị của Quân đội nhân dân.\n\n3. Nguyên tắc cấp\n\na) Mỗi sĩ quan được cấp một Giấy chứng\n\nminh, có số hiệu riêng từ dữ liệu do Cục Cán bộ Tổng cục Chính trị quản lý;\n\nb) Chứng minh quân nhân chuyên nghiệp,\n\ncông nhân và viên chức quốc phòng quy định tại Điều 4 Nghị định\n\nsố 59/2016/NĐ-CP;\n\nc) Mỗi hạ sĩ quan, binh sĩ tại ngũ; sĩ\n\nquan dự bị; quân nhân chuyên nghiệp và hạ sĩ quan, binh sĩ dự bị được cấp một\n\nThẻ, có số hiệu riêng.\n\nĐiều 4. Kỹ thuật thu\n\nthập thông tin\n\n1. Thông tin trên tờ khai\n\na) Nhóm máu: Do cơ quan quân y đơn vị\n\ncung cấp và viết bằng chữ in hoa;\n\nb) In vân mười đầu ngón tay của người\n\nđược cấp Chứng minh vào ký hiệu các ô tờ khai; bàn tay phải P, bàn tay trái T;\n\nngón cái C, ngón trỏ T, ngón giữa G, ngón áp út N, ngón út U. Trường hợp đầu\n\nngón tay bị dị tật, bị cụt hoặc bị thương không in được vân tay thì mô tả lý do\n\nvào ô đó; không được thay thế bằng vân đầu ngón tay khác; trường hợp bàn tay có\n\ntrên năm ngón (ngón phụ) thì in ngón phụ bên cạnh ngón chính;\n\nc) Chụp ảnh chân dung: Số lượng 02 ảnh,\n\ncỡ 20 mm x 27 mm; không đội mũ, không đeo kính; sĩ quan tại ngũ và sĩ quan dự bị;\n\nquân nhân chuyên nghiệp tại ngũ và quân nhân chuyên nghiệp dự bị; hạ sĩ quan,\n\nbinh sĩ tại ngũ và hạ sĩ quan, binh sĩ dự bị mang mặc quân phục thường dùng,\n\nđúng điều lệnh; công nhân và viên chức quốc phòng mang mặc trang phục thường\n\ndùng.\n\n2. Đặc điểm nhân dạng\n\na) Thu thập chiều cao khi cấp Chứng\n\nminh;\n\nb) Đặc điểm sống mũi tính từ sơn căn đến\n\nđầu mũi, gồm: sống mũi thẳng, sống mũi lõm, sống mũi khum, sống mũi gồ gẫy; mô\n\ntả hình vẽ sau:\n\nc) Dái tai là phần thấp nhất của tai,\n\nđường viền tai tiếp giáp má, gồm: Dái tai trung bình, dái tai chúc, dái tai\n\nvuông, dái tai phật; mô tả hình vẽ sau:\n\n3. Mô tả đặc điểm riêng\n\na) Loại đặc điểm, gồm: Bớt, vết chàm,\n\nsẹo, nốt ruồi, nốt ruồi nổi;\n\nb) Hình dạng của bớt, vết chàm, sẹo, nốt\n\nruồi, nốt ruồi nổi, gồm: Hình tròn, chấm, dài, chữ nhật;\n\nc) Kích thước của bớt, vết chàm, sẹo,\n\nnốt ruồi, nốt ruồi nổi từ 0,3 cm trở lên thì xác định là kích thước và dưới 0,3\n\ncm xác định là chấm;\n\nd) Vị trí của đặc điểm riêng nổi bật\n\nnhất trên mặt cần xác định khoảng cách gần nhất so với đích; đầu lông mày phải,\n\ntrái; đuôi lông mày phải, trái; đầu mắt phải, trái; đuôi mắt phải, trái; đầu\n\nmũi, sống mũi; cánh mũi phải, trái; mép phải, trái; dái tai phải, trái. Xác định\n\ncác vị trí của đặc điểm là xác định cụ thể vị trí ở bên phải hay bên trái; trên\n\nhay dưới, trước hay sau; mô tả hình vẽ sau:\n\nVí dụ 1: Cao 1m68; sẹo chấm\n\ncách 1,5 cm trên sau đuôi lông mày trái; mô tả điểm số 4 bên trái hình vẽ trên.\n\nVí dụ 2: Cao 1m70; nốt ruồi nổi cách 1\n\ncm trên trước đuôi lông mày phải; mô tả điểm số 4 bên phải hình vẽ trên.\n\nĐiều 5. Thể thức ký,\n\nđóng dấu\n\n1. Thể thức ký là chữ ký trực tiếp của\n\nngười có thẩm quyền quy định tại Điều 12 Thông tư này.\n\n2. Thể thức đề ký, gồm: Chức vụ, cấp bậc,\n\nhọ, chữ đệm, tên của người có thẩm quyền quy định tại Điều 12 Thông tư này.\n\n3. Con dấu đóng Chứng minh và Thẻ\n\na) Dấu ướt thu nhỏ đường kính 23 mm, dấu\n\nmực sơn màu đỏ đóng trùm lên 1/3 khoảng đầu chữ ký Chứng minh và Thẻ;\n\nb) Dấu nổi đóng trùm lên 1/4 ảnh góc\n\nphải phía dưới;\n\nc) Quản lý con dấu tập trung tại cơ\n\nquan bảo mật lưu trữ, nhân viên văn thư của đơn vị giữ và đóng dấu; không dùng\n\ncon dấu này đóng vào các loại văn bản giấy tờ khác trái với quy định của pháp\n\nluật về quản lý và sử dụng con dấu.\n',
]
embeddings = model.encode(sentences)
print(embeddings.shape)
# [3, 768]
# Get the similarity scores for the embeddings
similarities = model.similarity(embeddings, embeddings)
print(similarities)
# tensor([[1.0000, 0.6827, 0.5361],
# [0.6827, 1.0000, 0.6783],
# [0.5361, 0.6783, 1.0000]])
Training Details
Training Dataset
json
-
Dataset: json
-
Size: 27,927 training samples
-
Columns: anchor, positive, and negative
-
Approximate statistics based on the first 1000 samples:
anchor positive negative type string string string details min: 10 tokensmean: 23.91 tokensmax: 43 tokens min: 170 tokensmean: 507.75 tokensmax: 512 tokens min: 21 tokensmean: 490.26 tokensmax: 512 tokens -
Samples:
anchor positive negative Thời hạn cấp đăng ký xe máy của người nước ngoài làm việc tại Việt Nam là bao lâu? Điều 9. Giấy tờ của chủ xe
- Chủ xe là người Việt Nam: Xuất trình
Chứng minh nhân dân hoặc thẻ Căn cước công dân hoặc Sổ hộ khẩu. Đối với lực lượng
vũ trang: Xuất trình Chứng minh Công an nhân dân hoặc Chứng minh Quân đội nhân
dân hoặc giấy xác nhận của thủ trưởng cơ quan, đơn vị công tác từ cấp trung
đoàn, Phòng, Công an cấp huyện hoặc tương đương trở lên (trường hợp không có giấy
chứng minh của lực lượng vũ trang).
- Chủ xe là người Việt Nam định cư ở nước
ngoài về sinh sống, làm việc tại Việt Nam: Xuất trình Sổ tạm trú hoặc Sổ hộ khẩu
hoặc Hộ chiếu (còn giá trị sử dụng) hoặc giấy tờ khác có giá trị thay Hộ chiếu.
- Chủ xe là người nước ngoài:
a) Người nước ngoài làm việc trong các
cơ quan đại diện ngoại giao, cơ quan lãnh sự, cơ quan đại diện của tổ chức quốc
tế: Giấy giới thiệu của Cục Lễ tân Nhà nước hoặc Sở Ngoại vụ và xuất trình Chứng
minh thư ngoại giao hoặc Chứng minh thư công vụ (còn giá trị sử dụng);
b) Người nước ngoài làm việc, học tập ở
Việt Nam: Xuất... | Chương III
CHI NHÁNH CỦA CƠ SỞ VĂN
HÓA NƯỚC NGOÀI TẠI VIỆT NAM
Điều 11. Điều kiện thành lập
và hoạt động
- Cơ sở văn hóa nước ngoài tại Việt Nam được thành
lập chi nhánh khi đáp ứng các điều kiện sau:
a) Đã hoạt động tại Việt Nam trong thời gian ít nhất
02 năm;
b) Tuân thủ pháp luật và các quy định hiện hành của
Việt Nam.
- Chi nhánh của cơ sở văn hóa nước ngoài tại Việt
Nam không có tư cách pháp nhân, chịu sự quản lý, điều hành và hoạt động theo ủy
quyền của cơ sở văn hóa nước ngoài tại Việt Nam.
Điều 12. Hồ sơ, trình tự, cách
thức, thời hạn giải quyết và thẩm quyền cấp Giấy chứng nhận
- Hồ sơ gồm:
a) Đơn đề nghị thành lập chi nhánh của cơ sở văn
hóa nước ngoài tại Việt Nam theo Mẫu số 06 tại Phụ
lục ban hành kèm theo Nghị định này;
b) Bản sao Giấy chứng nhận đăng ký hoặc Giấy phép
thành lập và hoạt động của cơ sở văn hóa nước ngoài tại Việt Nam;
c) Báo cáo kết quả hoạt động của cơ sở văn hóa nước
ngoài tại Việt Nam kể từ khi được cấp Giấy chứng nhận đăng ký... | | Thời hạn cấp đăng ký xe máy của người nước ngoài làm việc tại Việt Nam là bao lâu? | Điều 9. Giấy tờ của chủ
xe
- Chủ xe là người Việt Nam: Xuất trình
Chứng minh nhân dân hoặc thẻ Căn cước công dân hoặc Sổ hộ khẩu. Đối với lực lượng
vũ trang: Xuất trình Chứng minh Công an nhân dân hoặc Chứng minh Quân đội nhân
dân hoặc giấy xác nhận của thủ trưởng cơ quan, đơn vị công tác từ cấp trung
đoàn, Phòng, Công an cấp huyện hoặc tương đương trở lên (trường hợp không có giấy
chứng minh của lực lượng vũ trang).
- Chủ xe là người Việt Nam định cư ở nước
ngoài về sinh sống, làm việc tại Việt Nam: Xuất trình Sổ tạm trú hoặc Sổ hộ khẩu
hoặc Hộ chiếu (còn giá trị sử dụng) hoặc giấy tờ khác có giá trị thay Hộ chiếu.
- Chủ xe là người nước ngoài:
a) Người nước ngoài làm việc trong các
cơ quan đại diện ngoại giao, cơ quan lãnh sự, cơ quan đại diện của tổ chức quốc
tế: Giấy giới thiệu của Cục Lễ tân Nhà nước hoặc Sở Ngoại vụ và xuất trình Chứng
minh thư ngoại giao hoặc Chứng minh thư công vụ (còn giá trị sử dụng);
b) Người nước ngoài làm việc, học tập ở
Việt Nam: Xuất... | Chương II
CẤP, CẤP LẠI, GIA HẠN GIẤY
CHỨNG NHẬN ĐĂNG KÝ, GIẤY PHÉP THÀNH LẬP VÀ HOẠT ĐỘNG CỦA CƠ SỞ VĂN HÓA NƯỚC
NGOÀI TẠI VIỆT NAM
Điều 5. Hồ sơ, trình tự, cách
thức, thời hạn giải quyết và thẩm quyền cấp Giấy chứng nhận đăng ký thành lập
và hoạt động của cơ sở văn hóa nước ngoài tại Việt Nam
- Hồ sơ gồm:
a) Đơn đề nghị cấp Giấy chứng nhận đăng ký theo Mẫu số 01 tại Phụ lục ban hành kèm theo Nghị định này;
b) Dự kiến cơ cấu tổ chức và bộ máy;
c) Dự thảo Quy chế hoạt động;
d) Lý lịch người được dự kiến bổ nhiệm là người đại
diện theo pháp luật.
Các văn bản trong hồ sơ nếu bằng tiếng nước ngoài
phải kèm theo bản dịch tiếng Việt đã được công chứng.
- Trình tự, cách thức, thời hạn giải quyết và thẩm
quyền:
a) Bên nước ngoài đề nghị cấp Giấy chứng nhận đăng
ký nộp trực tiếp hoặc qua bưu điện 01 bộ hồ sơ đến Bộ Văn hóa, Thể thao và Du lịch;
b) Trường hợp hồ sơ không đầy đủ, trong thời hạn 05
ngày làm việc, kể từ ngày tiếp nhận hồ sơ, Bộ Văn hóa, Thể thao và Du lịch
t... | | Thời hạn cấp đăng ký xe máy của người nước ngoài làm việc tại Việt Nam là bao lâu? | Điều 9. Giấy tờ của chủ
xe
- Chủ xe là người Việt Nam: Xuất trình
Chứng minh nhân dân hoặc thẻ Căn cước công dân hoặc Sổ hộ khẩu. Đối với lực lượng
vũ trang: Xuất trình Chứng minh Công an nhân dân hoặc Chứng minh Quân đội nhân
dân hoặc giấy xác nhận của thủ trưởng cơ quan, đơn vị công tác từ cấp trung
đoàn, Phòng, Công an cấp huyện hoặc tương đương trở lên (trường hợp không có giấy
chứng minh của lực lượng vũ trang).
- Chủ xe là người Việt Nam định cư ở nước
ngoài về sinh sống, làm việc tại Việt Nam: Xuất trình Sổ tạm trú hoặc Sổ hộ khẩu
hoặc Hộ chiếu (còn giá trị sử dụng) hoặc giấy tờ khác có giá trị thay Hộ chiếu.
- Chủ xe là người nước ngoài:
a) Người nước ngoài làm việc trong các
cơ quan đại diện ngoại giao, cơ quan lãnh sự, cơ quan đại diện của tổ chức quốc
tế: Giấy giới thiệu của Cục Lễ tân Nhà nước hoặc Sở Ngoại vụ và xuất trình Chứng
minh thư ngoại giao hoặc Chứng minh thư công vụ (còn giá trị sử dụng);
b) Người nước ngoài làm việc, học tập ở
Việt Nam: Xuất... | Mục 3. NGƯỜI LAO ĐỘNG VIỆT NAM ĐI LÀM VIỆC Ở NƯỚC NGOÀI, LAO ĐỘNG CHO
CÁC TỔ CHỨC, CÁ NHÂN NƯỚC NGOÀI TẠI VIỆT NAM, LAO ĐỘNG LÀ NGƯỜI NƯỚC NGOÀI LÀM
VIỆC TẠI VIỆT NAM
Điều 150. Người lao động Việt Nam đi làm việc ở nước ngoài, lao động
cho các tổ chức, cá nhân nước ngoài tại Việt Nam
- Nhà nước khuyến khích doanh nghiệp, cơ quan, tổ chức, cá nhân tìm kiếm
và mở rộng thị trường lao động để đưa người lao động Việt Nam đi làm việc ở nước
ngoài.
Người lao động Việt
Nam đi làm việc ở nước ngoài phải tuân theo quy định của pháp luật Việt Nam,
pháp luật nước sở tại, trừ trường hợp điều ước quốc tế mà nước Cộng hòa xã hội
chủ nghĩa Việt Nam là thành viên có quy định khác.
- Công dân Việt Nam làm việc cho các tổ chức nước ngoài tại Việt Nam,
trong khu công nghiệp, khu kinh tế, khu chế xuất, khu công nghệ cao hoặc làm việc
cho cá nhân là công dân nước ngoài tại Việt Nam phải tuân theo pháp luật Việt
Nam và được pháp luật bảo vệ.
- Chính phủ quy định chi tiết việc tuyển dụng, ... |
-
Loss: MultipleNegativesRankingLoss with these parameters:
{ "scale": 20.0, "similarity_fct": "cos_sim", "gather_across_devices": false, "directions": [ "query_to_doc" ], "partition_mode": "joint", "hardness_mode": "hard_negatives", "hardness_strength": 5.0 }
Training Hyperparameters
Non-Default Hyperparameters
per_device_train_batch_size: 4gradient_accumulation_steps: 2learning_rate: 2e-05warmup_steps: 0.1data_seed: 42fp16: Truedataloader_num_workers: 2ddp_find_unused_parameters: Falsegradient_checkpointing: True
All Hyperparameters
do_predict: Falseprediction_loss_only: Trueper_device_train_batch_size: 4per_device_eval_batch_size: 8gradient_accumulation_steps: 2eval_accumulation_steps: Nonetorch_empty_cache_steps: Nonelearning_rate: 2e-05weight_decay: 0.0adam_beta1: 0.9adam_beta2: 0.999adam_epsilon: 1e-08max_grad_norm: 1.0num_train_epochs: 3max_steps: -1lr_scheduler_type: linearlr_scheduler_kwargs: Nonewarmup_ratio: Nonewarmup_steps: 0.1log_level: passivelog_level_replica: warninglog_on_each_node: Truelogging_nan_inf_filter: Trueenable_jit_checkpoint: Falsesave_on_each_node: Falsesave_only_model: Falserestore_callback_states_from_checkpoint: Falseuse_cpu: Falseseed: 42data_seed: 42bf16: Falsefp16: Truebf16_full_eval: Falsefp16_full_eval: Falsetf32: Nonelocal_rank: -1ddp_backend: Nonedebug: []dataloader_drop_last: Falsedataloader_num_workers: 2dataloader_prefetch_factor: Nonedisable_tqdm: Falseremove_unused_columns: Truelabel_names: Noneload_best_model_at_end: Falseignore_data_skip: Falsefsdp: []fsdp_config: {'min_num_params': 0, 'xla': False, 'xla_fsdp_v2': False, 'xla_fsdp_grad_ckpt': False}accelerator_config: {'split_batches': False, 'dispatch_batches': None, 'even_batches': True, 'use_seedable_sampler': True, 'non_blocking': False, 'gradient_accumulation_kwargs': None}parallelism_config: Nonedeepspeed: Nonelabel_smoothing_factor: 0.0optim: adamw_torch_fusedoptim_args: Nonegroup_by_length: Falselength_column_name: lengthproject: huggingfacetrackio_space_id: trackioddp_find_unused_parameters: Falseddp_bucket_cap_mb: Noneddp_broadcast_buffers: Falsedataloader_pin_memory: Truedataloader_persistent_workers: Falseskip_memory_metrics: Truepush_to_hub: Falseresume_from_checkpoint: Nonehub_model_id: Nonehub_strategy: every_savehub_private_repo: Nonehub_always_push: Falsehub_revision: Nonegradient_checkpointing: Truegradient_checkpointing_kwargs: Noneinclude_for_metrics: []eval_do_concat_batches: Trueauto_find_batch_size: Falsefull_determinism: Falseddp_timeout: 1800torch_compile: Falsetorch_compile_backend: Nonetorch_compile_mode: Noneinclude_num_input_tokens_seen: noneftune_noise_alpha: Noneoptim_target_modules: Nonebatch_eval_metrics: Falseeval_on_start: Falseuse_liger_kernel: Falseliger_kernel_config: Noneeval_use_gather_object: Falseaverage_tokens_across_devices: Trueuse_cache: Falseprompts: Nonebatch_sampler: batch_samplermulti_dataset_batch_sampler: proportionalrouter_mapping: {}learning_rate_mapping: {}
Training Logs
| Epoch | Step | Training Loss |
|---|---|---|
| 0.0057 | 10 | 1.6544 |
| 0.0115 | 20 | 1.3980 |
| 0.0172 | 30 | 1.4387 |
| 0.0229 | 40 | 1.5277 |
| 0.0286 | 50 | 1.6116 |
| 0.0344 | 60 | 1.6789 |
| 0.0401 | 70 | 1.4976 |
| 0.0458 | 80 | 1.6213 |
| 0.0516 | 90 | 1.3341 |
| 0.0573 | 100 | 1.3848 |
| 0.0630 | 110 | 1.5729 |
| 0.0687 | 120 | 1.2161 |
| 0.0745 | 130 | 1.4109 |
| 0.0802 | 140 | 1.4504 |
| 0.0859 | 150 | 1.4201 |
| 0.0917 | 160 | 1.2457 |
| 0.0974 | 170 | 1.1647 |
| 0.1031 | 180 | 1.0574 |
| 0.1089 | 190 | 1.4679 |
| 0.1146 | 200 | 1.2658 |
| 0.1203 | 210 | 1.3472 |
| 0.1260 | 220 | 1.2691 |
| 0.1318 | 230 | 1.1474 |
| 0.1375 | 240 | 1.0856 |
| 0.1432 | 250 | 1.3205 |
| 0.1490 | 260 | 1.2351 |
| 0.1547 | 270 | 1.2913 |
| 0.1604 | 280 | 1.1180 |
| 0.1661 | 290 | 1.0540 |
| 0.1719 | 300 | 0.9169 |
| 0.1776 | 310 | 0.9244 |
| 0.1833 | 320 | 1.0855 |
| 0.1891 | 330 | 1.1563 |
| 0.1948 | 340 | 1.1255 |
| 0.2005 | 350 | 1.0902 |
| 0.2062 | 360 | 0.8324 |
| 0.2120 | 370 | 0.8315 |
| 0.2177 | 380 | 0.9694 |
| 0.2234 | 390 | 0.8866 |
| 0.2292 | 400 | 1.0993 |
| 0.2349 | 410 | 0.9507 |
| 0.2406 | 420 | 0.8528 |
| 0.2463 | 430 | 1.2154 |
| 0.2521 | 440 | 1.0717 |
| 0.2578 | 450 | 1.2194 |
| 0.2635 | 460 | 1.2599 |
| 0.2693 | 470 | 1.1552 |
| 0.2750 | 480 | 1.0686 |
| 0.2807 | 490 | 1.0146 |
| 0.2865 | 500 | 0.7420 |
| 0.2922 | 510 | 0.9886 |
| 0.2979 | 520 | 1.0637 |
| 0.3036 | 530 | 0.9385 |
| 0.3094 | 540 | 1.0979 |
| 0.3151 | 550 | 0.9125 |
| 0.3208 | 560 | 0.9144 |
| 0.3266 | 570 | 1.1185 |
| 0.3323 | 580 | 0.7019 |
| 0.3380 | 590 | 0.7736 |
| 0.3437 | 600 | 0.8104 |
| 0.3495 | 610 | 1.1170 |
| 0.3552 | 620 | 0.9293 |
| 0.3609 | 630 | 0.9788 |
| 0.3667 | 640 | 1.0027 |
| 0.3724 | 650 | 0.7253 |
| 0.3781 | 660 | 0.7208 |
| 0.3838 | 670 | 0.9878 |
| 0.3896 | 680 | 0.9013 |
| 0.3953 | 690 | 0.8658 |
| 0.4010 | 700 | 0.8298 |
| 0.4068 | 710 | 0.8798 |
| 0.4125 | 720 | 1.0507 |
| 0.4182 | 730 | 0.7753 |
| 0.4239 | 740 | 0.7723 |
| 0.4297 | 750 | 0.8929 |
| 0.4354 | 760 | 0.7070 |
| 0.4411 | 770 | 1.0727 |
| 0.4469 | 780 | 0.7491 |
| 0.4526 | 790 | 0.8990 |
| 0.4583 | 800 | 0.9763 |
| 0.4641 | 810 | 0.8564 |
| 0.4698 | 820 | 0.6849 |
| 0.4755 | 830 | 0.8313 |
| 0.4812 | 840 | 0.6577 |
| 0.4870 | 850 | 1.0885 |
| 0.4927 | 860 | 0.6884 |
| 0.4984 | 870 | 0.8684 |
| 0.5042 | 880 | 0.7145 |
| 0.5099 | 890 | 0.9586 |
| 0.5156 | 900 | 0.9109 |
| 0.5213 | 910 | 0.8075 |
| 0.5271 | 920 | 0.6726 |
| 0.5328 | 930 | 0.7480 |
| 0.5385 | 940 | 0.7261 |
| 0.5443 | 950 | 0.9181 |
| 0.5500 | 960 | 0.7981 |
| 0.5557 | 970 | 0.7450 |
| 0.5614 | 980 | 0.7568 |
| 0.5672 | 990 | 0.6005 |
| 0.5729 | 1000 | 0.6393 |
| 0.5786 | 1010 | 0.7737 |
| 0.5844 | 1020 | 0.6523 |
| 0.5901 | 1030 | 0.8933 |
| 0.5958 | 1040 | 0.7308 |
| 0.6015 | 1050 | 0.8524 |
| 0.6073 | 1060 | 0.9170 |
| 0.6130 | 1070 | 0.6429 |
| 0.6187 | 1080 | 0.6829 |
| 0.6245 | 1090 | 0.7518 |
| 0.6302 | 1100 | 0.8222 |
| 0.6359 | 1110 | 0.6602 |
| 0.6416 | 1120 | 0.5789 |
| 0.6474 | 1130 | 0.8261 |
| 0.6531 | 1140 | 0.7565 |
| 0.6588 | 1150 | 0.8069 |
| 0.6646 | 1160 | 0.8518 |
| 0.6703 | 1170 | 0.7036 |
| 0.6760 | 1180 | 0.6042 |
| 0.6818 | 1190 | 0.6298 |
| 0.6875 | 1200 | 0.9252 |
| 0.6932 | 1210 | 0.5727 |
| 0.6989 | 1220 | 0.4766 |
| 0.7047 | 1230 | 0.5805 |
| 0.7104 | 1240 | 0.6802 |
| 0.7161 | 1250 | 0.6466 |
| 0.7219 | 1260 | 0.6975 |
| 0.7276 | 1270 | 0.5516 |
| 0.7333 | 1280 | 0.7434 |
| 0.7390 | 1290 | 0.5714 |
| 0.7448 | 1300 | 0.7104 |
| 0.7505 | 1310 | 0.8951 |
| 0.7562 | 1320 | 0.6752 |
| 0.7620 | 1330 | 0.6573 |
| 0.7677 | 1340 | 0.4513 |
| 0.7734 | 1350 | 0.6081 |
| 0.7791 | 1360 | 0.6877 |
| 0.7849 | 1370 | 0.5318 |
| 0.7906 | 1380 | 0.5983 |
| 0.7963 | 1390 | 0.6910 |
| 0.8021 | 1400 | 0.8350 |
| 0.8078 | 1410 | 0.7818 |
| 0.8135 | 1420 | 0.5989 |
| 0.8192 | 1430 | 0.5625 |
| 0.8250 | 1440 | 0.5985 |
| 0.8307 | 1450 | 0.5939 |
| 0.8364 | 1460 | 0.4832 |
| 0.8422 | 1470 | 0.9172 |
| 0.8479 | 1480 | 0.6958 |
| 0.8536 | 1490 | 0.5050 |
| 0.8594 | 1500 | 0.4677 |
| 0.8651 | 1510 | 0.5413 |
| 0.8708 | 1520 | 0.6121 |
| 0.8765 | 1530 | 0.3665 |
| 0.8823 | 1540 | 0.7925 |
| 0.8880 | 1550 | 0.5545 |
| 0.8937 | 1560 | 0.4468 |
| 0.8995 | 1570 | 0.5469 |
| 0.9052 | 1580 | 0.4189 |
| 0.9109 | 1590 | 0.6988 |
| 0.9166 | 1600 | 0.5545 |
| 0.9224 | 1610 | 0.3440 |
| 0.9281 | 1620 | 0.5179 |
| 0.9338 | 1630 | 0.4504 |
| 0.9396 | 1640 | 0.6153 |
| 0.9453 | 1650 | 0.5954 |
| 0.9510 | 1660 | 0.5707 |
| 0.9567 | 1670 | 0.4823 |
| 0.9625 | 1680 | 0.6213 |
| 0.9682 | 1690 | 0.5403 |
| 0.9739 | 1700 | 0.5709 |
| 0.9797 | 1710 | 0.5800 |
| 0.9854 | 1720 | 0.4414 |
| 0.9911 | 1730 | 0.3293 |
| 0.9968 | 1740 | 0.6492 |
| 1.0023 | 1750 | 0.4571 |
| 1.0080 | 1760 | 0.2592 |
| 1.0137 | 1770 | 0.3091 |
| 1.0195 | 1780 | 0.3302 |
| 1.0252 | 1790 | 0.3164 |
| 1.0309 | 1800 | 0.3126 |
| 1.0367 | 1810 | 0.3249 |
| 1.0424 | 1820 | 0.2941 |
| 1.0481 | 1830 | 0.2897 |
| 1.0539 | 1840 | 0.2844 |
| 1.0596 | 1850 | 0.3468 |
| 1.0653 | 1860 | 0.2519 |
| 1.0710 | 1870 | 0.3516 |
| 1.0768 | 1880 | 0.2328 |
| 1.0825 | 1890 | 0.3715 |
| 1.0882 | 1900 | 0.3621 |
| 1.0940 | 1910 | 0.2354 |
| 1.0997 | 1920 | 0.3146 |
| 1.1054 | 1930 | 0.2736 |
| 1.1111 | 1940 | 0.3535 |
| 1.1169 | 1950 | 0.3496 |
| 1.1226 | 1960 | 0.3438 |
| 1.1283 | 1970 | 0.2393 |
| 1.1341 | 1980 | 0.4177 |
| 1.1398 | 1990 | 0.2427 |
| 1.1455 | 2000 | 0.3128 |
| 1.1512 | 2010 | 0.2434 |
| 1.1570 | 2020 | 0.2745 |
| 1.1627 | 2030 | 0.3181 |
| 1.1684 | 2040 | 0.2577 |
| 1.1742 | 2050 | 0.3041 |
| 1.1799 | 2060 | 0.3494 |
| 1.1856 | 2070 | 0.2748 |
| 1.1913 | 2080 | 0.3530 |
| 1.1971 | 2090 | 0.2866 |
| 1.2028 | 2100 | 0.2407 |
| 1.2085 | 2110 | 0.3387 |
| 1.2143 | 2120 | 0.3145 |
| 1.2200 | 2130 | 0.1989 |
| 1.2257 | 2140 | 0.5003 |
| 1.2315 | 2150 | 0.2693 |
| 1.2372 | 2160 | 0.2996 |
| 1.2429 | 2170 | 0.1589 |
| 1.2486 | 2180 | 0.1470 |
| 1.2544 | 2190 | 0.2838 |
| 1.2601 | 2200 | 0.2119 |
| 1.2658 | 2210 | 0.3360 |
| 1.2716 | 2220 | 0.2298 |
| 1.2773 | 2230 | 0.2649 |
| 1.2830 | 2240 | 0.2484 |
| 1.2887 | 2250 | 0.3234 |
| 1.2945 | 2260 | 0.2195 |
| 1.3002 | 2270 | 0.1642 |
| 1.3059 | 2280 | 0.3009 |
| 1.3117 | 2290 | 0.4222 |
| 1.3174 | 2300 | 0.2935 |
| 1.3231 | 2310 | 0.2482 |
| 1.3288 | 2320 | 0.3331 |
| 1.3346 | 2330 | 0.2766 |
| 1.3403 | 2340 | 0.2618 |
| 1.3460 | 2350 | 0.2973 |
| 1.3518 | 2360 | 0.1719 |
| 1.3575 | 2370 | 0.2470 |
| 1.3632 | 2380 | 0.1854 |
| 1.3689 | 2390 | 0.3870 |
| 1.3747 | 2400 | 0.1819 |
| 1.3804 | 2410 | 0.3017 |
| 1.3861 | 2420 | 0.2437 |
| 1.3919 | 2430 | 0.3451 |
| 1.3976 | 2440 | 0.2190 |
| 1.4033 | 2450 | 0.1737 |
| 1.4091 | 2460 | 0.2274 |
| 1.4148 | 2470 | 0.2638 |
| 1.4205 | 2480 | 0.1861 |
| 1.4262 | 2490 | 0.1743 |
| 1.4320 | 2500 | 0.1953 |
| 1.4377 | 2510 | 0.1846 |
| 1.4434 | 2520 | 0.1845 |
| 1.4492 | 2530 | 0.1498 |
| 1.4549 | 2540 | 0.2432 |
| 1.4606 | 2550 | 0.3600 |
| 1.4663 | 2560 | 0.2323 |
| 1.4721 | 2570 | 0.2523 |
| 1.4778 | 2580 | 0.3915 |
| 1.4835 | 2590 | 0.2253 |
| 1.4893 | 2600 | 0.2855 |
| 1.4950 | 2610 | 0.2423 |
| 1.5007 | 2620 | 0.2042 |
| 1.5064 | 2630 | 0.2186 |
| 1.5122 | 2640 | 0.1972 |
| 1.5179 | 2650 | 0.2400 |
| 1.5236 | 2660 | 0.3062 |
| 1.5294 | 2670 | 0.2953 |
| 1.5351 | 2680 | 0.2395 |
| 1.5408 | 2690 | 0.1633 |
| 1.5465 | 2700 | 0.2725 |
| 1.5523 | 2710 | 0.2984 |
| 1.5580 | 2720 | 0.2596 |
| 1.5637 | 2730 | 0.2590 |
| 1.5695 | 2740 | 0.2699 |
| 1.5752 | 2750 | 0.2236 |
| 1.5809 | 2760 | 0.1359 |
| 1.5867 | 2770 | 0.2163 |
| 1.5924 | 2780 | 0.2593 |
| 1.5981 | 2790 | 0.2518 |
| 1.6038 | 2800 | 0.2300 |
| 1.6096 | 2810 | 0.2585 |
| 1.6153 | 2820 | 0.2803 |
| 1.6210 | 2830 | 0.2411 |
| 1.6268 | 2840 | 0.2384 |
| 1.6325 | 2850 | 0.2383 |
| 1.6382 | 2860 | 0.1416 |
| 1.6439 | 2870 | 0.2685 |
| 1.6497 | 2880 | 0.2284 |
| 1.6554 | 2890 | 0.2164 |
| 1.6611 | 2900 | 0.2432 |
| 1.6669 | 2910 | 0.2459 |
| 1.6726 | 2920 | 0.2015 |
| 1.6783 | 2930 | 0.1772 |
| 1.6840 | 2940 | 0.2304 |
| 1.6898 | 2950 | 0.2284 |
| 1.6955 | 2960 | 0.2189 |
| 1.7012 | 2970 | 0.1645 |
| 1.7070 | 2980 | 0.1667 |
| 1.7127 | 2990 | 0.1515 |
| 1.7184 | 3000 | 0.1379 |
| 1.7241 | 3010 | 0.2607 |
| 1.7299 | 3020 | 0.2453 |
| 1.7356 | 3030 | 0.1553 |
| 1.7413 | 3040 | 0.2300 |
| 1.7471 | 3050 | 0.1885 |
| 1.7528 | 3060 | 0.2878 |
| 1.7585 | 3070 | 0.2773 |
| 1.7643 | 3080 | 0.1462 |
| 1.7700 | 3090 | 0.2316 |
| 1.7757 | 3100 | 0.1432 |
| 1.7814 | 3110 | 0.1668 |
| 1.7872 | 3120 | 0.1548 |
| 1.7929 | 3130 | 0.2513 |
| 1.7986 | 3140 | 0.2060 |
| 1.8044 | 3150 | 0.1395 |
| 1.8101 | 3160 | 0.2295 |
| 1.8158 | 3170 | 0.2746 |
| 1.8215 | 3180 | 0.1904 |
| 1.8273 | 3190 | 0.1490 |
| 1.8330 | 3200 | 0.1162 |
| 1.8387 | 3210 | 0.2341 |
| 1.8445 | 3220 | 0.1548 |
| 1.8502 | 3230 | 0.2238 |
| 1.8559 | 3240 | 0.1826 |
| 1.8616 | 3250 | 0.2441 |
| 1.8674 | 3260 | 0.3005 |
| 1.8731 | 3270 | 0.1186 |
| 1.8788 | 3280 | 0.1669 |
| 1.8846 | 3290 | 0.2336 |
| 1.8903 | 3300 | 0.1776 |
| 1.8960 | 3310 | 0.1911 |
| 1.9017 | 3320 | 0.1378 |
| 1.9075 | 3330 | 0.1228 |
| 1.9132 | 3340 | 0.2573 |
| 1.9189 | 3350 | 0.2192 |
| 1.9247 | 3360 | 0.1799 |
| 1.9304 | 3370 | 0.2176 |
| 1.9361 | 3380 | 0.2772 |
| 1.9419 | 3390 | 0.2230 |
| 1.9476 | 3400 | 0.1763 |
| 1.9533 | 3410 | 0.1581 |
| 1.9590 | 3420 | 0.1539 |
| 1.9648 | 3430 | 0.1364 |
| 1.9705 | 3440 | 0.1505 |
| 1.9762 | 3450 | 0.1601 |
| 1.9820 | 3460 | 0.2120 |
| 1.9877 | 3470 | 0.1921 |
| 1.9934 | 3480 | 0.2681 |
| 1.9991 | 3490 | 0.2240 |
| 2.0046 | 3500 | 0.1038 |
| 2.0103 | 3510 | 0.1375 |
| 2.0160 | 3520 | 0.1026 |
| 2.0218 | 3530 | 0.1034 |
| 2.0275 | 3540 | 0.0702 |
| 2.0332 | 3550 | 0.0807 |
| 2.0390 | 3560 | 0.1080 |
| 2.0447 | 3570 | 0.0822 |
| 2.0504 | 3580 | 0.1021 |
| 2.0561 | 3590 | 0.1201 |
| 2.0619 | 3600 | 0.0882 |
| 2.0676 | 3610 | 0.0944 |
| 2.0733 | 3620 | 0.0777 |
| 2.0791 | 3630 | 0.1128 |
| 2.0848 | 3640 | 0.0765 |
| 2.0905 | 3650 | 0.0955 |
| 2.0962 | 3660 | 0.0845 |
| 2.1020 | 3670 | 0.1179 |
| 2.1077 | 3680 | 0.0918 |
| 2.1134 | 3690 | 0.0507 |
| 2.1192 | 3700 | 0.0641 |
| 2.1249 | 3710 | 0.0809 |
| 2.1306 | 3720 | 0.0846 |
| 2.1364 | 3730 | 0.0641 |
| 2.1421 | 3740 | 0.0941 |
| 2.1478 | 3750 | 0.1387 |
| 2.1535 | 3760 | 0.1092 |
| 2.1593 | 3770 | 0.0742 |
| 2.1650 | 3780 | 0.0927 |
| 2.1707 | 3790 | 0.0882 |
| 2.1765 | 3800 | 0.0744 |
| 2.1822 | 3810 | 0.0805 |
| 2.1879 | 3820 | 0.1080 |
| 2.1936 | 3830 | 0.1063 |
| 2.1994 | 3840 | 0.0489 |
| 2.2051 | 3850 | 0.0809 |
| 2.2108 | 3860 | 0.1379 |
| 2.2166 | 3870 | 0.1434 |
| 2.2223 | 3880 | 0.1392 |
| 2.2280 | 3890 | 0.0399 |
| 2.2337 | 3900 | 0.0704 |
| 2.2395 | 3910 | 0.0807 |
| 2.2452 | 3920 | 0.1028 |
| 2.2509 | 3930 | 0.0807 |
| 2.2567 | 3940 | 0.1469 |
| 2.2624 | 3950 | 0.1145 |
| 2.2681 | 3960 | 0.1074 |
| 2.2738 | 3970 | 0.0744 |
| 2.2796 | 3980 | 0.0594 |
| 2.2853 | 3990 | 0.0761 |
| 2.2910 | 4000 | 0.0941 |
| 2.2968 | 4010 | 0.1140 |
| 2.3025 | 4020 | 0.0558 |
| 2.3082 | 4030 | 0.0863 |
| 2.3140 | 4040 | 0.1404 |
| 2.3197 | 4050 | 0.0965 |
| 2.3254 | 4060 | 0.1492 |
| 2.3311 | 4070 | 0.1040 |
| 2.3369 | 4080 | 0.1056 |
| 2.3426 | 4090 | 0.0866 |
| 2.3483 | 4100 | 0.0662 |
| 2.3541 | 4110 | 0.0927 |
| 2.3598 | 4120 | 0.1034 |
| 2.3655 | 4130 | 0.1180 |
| 2.3712 | 4140 | 0.0387 |
| 2.3770 | 4150 | 0.0718 |
| 2.3827 | 4160 | 0.0487 |
| 2.3884 | 4170 | 0.0880 |
| 2.3942 | 4180 | 0.0759 |
| 2.3999 | 4190 | 0.1093 |
| 2.4056 | 4200 | 0.1527 |
| 2.4113 | 4210 | 0.0607 |
| 2.4171 | 4220 | 0.1039 |
| 2.4228 | 4230 | 0.0760 |
| 2.4285 | 4240 | 0.0642 |
| 2.4343 | 4250 | 0.0709 |
| 2.4400 | 4260 | 0.1053 |
| 2.4457 | 4270 | 0.0621 |
| 2.4514 | 4280 | 0.0902 |
| 2.4572 | 4290 | 0.0810 |
| 2.4629 | 4300 | 0.0759 |
| 2.4686 | 4310 | 0.0765 |
| 2.4744 | 4320 | 0.1230 |
| 2.4801 | 4330 | 0.0884 |
| 2.4858 | 4340 | 0.0767 |
| 2.4915 | 4350 | 0.0937 |
| 2.4973 | 4360 | 0.0864 |
| 2.5030 | 4370 | 0.1677 |
| 2.5087 | 4380 | 0.1053 |
| 2.5145 | 4390 | 0.0467 |
| 2.5202 | 4400 | 0.1052 |
| 2.5259 | 4410 | 0.0835 |
| 2.5317 | 4420 | 0.0939 |
| 2.5374 | 4430 | 0.0697 |
| 2.5431 | 4440 | 0.0877 |
| 2.5488 | 4450 | 0.1053 |
| 2.5546 | 4460 | 0.1284 |
| 2.5603 | 4470 | 0.0823 |
| 2.5660 | 4480 | 0.0441 |
| 2.5718 | 4490 | 0.0830 |
| 2.5775 | 4500 | 0.0968 |
| 2.5832 | 4510 | 0.1032 |
| 2.5889 | 4520 | 0.0705 |
| 2.5947 | 4530 | 0.0837 |
| 2.6004 | 4540 | 0.0725 |
| 2.6061 | 4550 | 0.0729 |
| 2.6119 | 4560 | 0.1458 |
| 2.6176 | 4570 | 0.0807 |
| 2.6233 | 4580 | 0.0544 |
| 2.6290 | 4590 | 0.0662 |
| 2.6348 | 4600 | 0.0980 |
| 2.6405 | 4610 | 0.0505 |
| 2.6462 | 4620 | 0.1400 |
| 2.6520 | 4630 | 0.1182 |
| 2.6577 | 4640 | 0.0831 |
| 2.6634 | 4650 | 0.0921 |
| 2.6691 | 4660 | 0.0672 |
| 2.6749 | 4670 | 0.1006 |
| 2.6806 | 4680 | 0.0998 |
| 2.6863 | 4690 | 0.0818 |
| 2.6921 | 4700 | 0.0676 |
| 2.6978 | 4710 | 0.0677 |
| 2.7035 | 4720 | 0.0546 |
| 2.7093 | 4730 | 0.0593 |
| 2.7150 | 4740 | 0.0467 |
| 2.7207 | 4750 | 0.0686 |
| 2.7264 | 4760 | 0.0865 |
| 2.7322 | 4770 | 0.0942 |
| 2.7379 | 4780 | 0.0549 |
| 2.7436 | 4790 | 0.0989 |
| 2.7494 | 4800 | 0.0505 |
| 2.7551 | 4810 | 0.0505 |
| 2.7608 | 4820 | 0.0772 |
| 2.7665 | 4830 | 0.0525 |
| 2.7723 | 4840 | 0.0807 |
| 2.7780 | 4850 | 0.0434 |
| 2.7837 | 4860 | 0.0867 |
| 2.7895 | 4870 | 0.0923 |
| 2.7952 | 4880 | 0.0708 |
| 2.8009 | 4890 | 0.0754 |
| 2.8066 | 4900 | 0.0782 |
| 2.8124 | 4910 | 0.0670 |
| 2.8181 | 4920 | 0.1044 |
| 2.8238 | 4930 | 0.0582 |
| 2.8296 | 4940 | 0.1080 |
| 2.8353 | 4950 | 0.0923 |
| 2.8410 | 4960 | 0.0524 |
| 2.8467 | 4970 | 0.1012 |
| 2.8525 | 4980 | 0.0799 |
| 2.8582 | 4990 | 0.0415 |
| 2.8639 | 5000 | 0.0672 |
| 2.8697 | 5010 | 0.0687 |
| 2.8754 | 5020 | 0.0591 |
| 2.8811 | 5030 | 0.1010 |
| 2.8869 | 5040 | 0.0537 |
| 2.8926 | 5050 | 0.0415 |
| 2.8983 | 5060 | 0.0479 |
| 2.9040 | 5070 | 0.0812 |
| 2.9098 | 5080 | 0.0768 |
| 2.9155 | 5090 | 0.0737 |
| 2.9212 | 5100 | 0.0837 |
| 2.9270 | 5110 | 0.0337 |
| 2.9327 | 5120 | 0.0621 |
| 2.9384 | 5130 | 0.0578 |
| 2.9441 | 5140 | 0.0607 |
| 2.9499 | 5150 | 0.0564 |
| 2.9556 | 5160 | 0.0868 |
| 2.9613 | 5170 | 0.0564 |
| 2.9671 | 5180 | 0.1019 |
| 2.9728 | 5190 | 0.1210 |
| 2.9785 | 5200 | 0.0589 |
| 2.9842 | 5210 | 0.1041 |
| 2.9900 | 5220 | 0.0825 |
| 2.9957 | 5230 | 0.0549 |
Training Time
- Training: 5.8 hours
Framework Versions
- Python: 3.12.13
- Sentence Transformers: 5.4.1
- Transformers: 5.0.0
- PyTorch: 2.10.0+cu128
- Accelerate: 1.13.0
- Datasets: 5.0.0
- Tokenizers: 0.22.2
Citation
BibTeX
Sentence Transformers
@inproceedings{reimers-2019-sentence-bert,
title = "Sentence-BERT: Sentence Embeddings using Siamese BERT-Networks",
author = "Reimers, Nils and Gurevych, Iryna",
booktitle = "Proceedings of the 2019 Conference on Empirical Methods in Natural Language Processing",
month = "11",
year = "2019",
publisher = "Association for Computational Linguistics",
url = "https://arxiv.org/abs/1908.10084",
}
MultipleNegativesRankingLoss
@misc{oord2019representationlearningcontrastivepredictive,
title={Representation Learning with Contrastive Predictive Coding},
author={Aaron van den Oord and Yazhe Li and Oriol Vinyals},
year={2019},
eprint={1807.03748},
archivePrefix={arXiv},
primaryClass={cs.LG},
url={https://arxiv.org/abs/1807.03748},
}