update
Browse files
README.md
CHANGED
|
@@ -30,7 +30,7 @@ This llama model was trained 2x faster with [Unsloth](https://github.com/unsloth
|
|
| 30 |
from unsloth import FastLanguageModel from peft import PeftModel import torch import json from tqdm import tqdm import re HF_TOKEN = "your-token"
|
| 31 |
|
| 32 |
ベースとなるモデルと学習したLoRAのアダプタ（Hugging FaceのIDを指定）。
|
| 33 |
-
model_id = "llm-jp/llm-jp-3-13b" adapter_id = "atsunobu/llm-jp-3-13b-FineTuning-
|
| 34 |
|
| 35 |
unslothのFastLanguageModelで元のモデルをロード。
|
| 36 |
dtype = None # Noneにしておけば自動で設定 load_in_4bit = True # 今回は13Bモデルを扱うためTrue
|
|
|
|
| 30 |
from unsloth import FastLanguageModel from peft import PeftModel import torch import json from tqdm import tqdm import re HF_TOKEN = "your-token"
|
| 31 |
|
| 32 |
ベースとなるモデルと学習したLoRAのアダプタ（Hugging FaceのIDを指定）。
|
| 33 |
+
model_id = "llm-jp/llm-jp-3-13b" adapter_id = "atsunobu/llm-jp-3-13b-FineTuning-r40_2024-12-03-1000_lora"
|
| 34 |
|
| 35 |
unslothのFastLanguageModelで元のモデルをロード。
|
| 36 |
dtype = None # Noneにしておけば自動で設定 load_in_4bit = True # 今回は13Bモデルを扱うためTrue
|