Update README.md
Browse files
README.md
CHANGED
@@ -6,9 +6,14 @@ language:
|
|
6 |
# line-corporation/japanese-large-lm-1.7b-instruction-sft
|
7 |
[line-corporationさんが公開しているjapanese-large-lm-1.7b-instruction-sft](https://huggingface.co/line-corporation/japanese-large-lm-1.7b-instruction-sft)のggml変換版です。
|
8 |
|
9 |
-
*本家リポジトリはeos
|
10 |
-
*eos
|
11 |
-
|
|
|
|
|
|
|
|
|
|
|
12 |
|
13 |
## Usage
|
14 |
|
|
|
6 |
# line-corporation/japanese-large-lm-1.7b-instruction-sft
|
7 |
[line-corporationさんが公開しているjapanese-large-lm-1.7b-instruction-sft](https://huggingface.co/line-corporation/japanese-large-lm-1.7b-instruction-sft)のggml変換版です。
|
8 |
|
9 |
+
*本家リポジトリはeosトークンが固定となっているので修正しました。こちらはブランチになります*
|
10 |
+
*eosトークンは
|
11 |
+
```
|
12 |
+
<|endoftext|>
|
13 |
+
</s>
|
14 |
+
[EOS]
|
15 |
+
```
|
16 |
+
を検索して自動で設定します。また、--repeat-penalty を設定できます。*
|
17 |
|
18 |
## Usage
|
19 |
|