averoo commited on
Commit
1f3fbeb
·
verified ·
1 Parent(s): 057161a

Add results for baseline (open-mistral-nemo)

Browse files
Files changed (1) hide show
  1. results.json +27 -0
results.json ADDED
@@ -0,0 +1,27 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ [
2
+ {
3
+ "model_name": "baseline (open-mistral-nemo)",
4
+ "timestamp": "2025-01-15T10:59:32.807190",
5
+ "metrics": {
6
+ "retrieval": {
7
+ "hit_rate": 0.6666666666666666,
8
+ "mrr": 0.5
9
+ },
10
+ "generation": {
11
+ "rouge1": 0.6666666666666666,
12
+ "rouge2": 0.0,
13
+ "rougeL": 0.6666666666666666
14
+ }
15
+ },
16
+ "config": {
17
+ "embedding_model": "sentence-transformers/distiluse-base-multilingual-cased",
18
+ "retriever_type": "mmr",
19
+ "retrieval_config": {
20
+ "top_k": 3
21
+ }
22
+ },
23
+ "metadata": {
24
+ "dataset": "rag-news-test"
25
+ }
26
+ }
27
+ ]