Update README.md

README.md

@@ -9,9 +9,9 @@ license: cc-by-nc-4.0
 
 # **Synatra-V0.1-7B**  
 Made by StableFluffy
-[Visit my website! (Currently on consturction..)](https://www.stablefluffy.kr/)
+[Visit my website! - Currently on consturction..](https://www.stablefluffy.kr/)
 
-"STRICT" cc-by-nc-4.0 license.
+## **"STRICT"** cc-by-nc-4.0 license.
 
 ## Model Details
 
@@ -33,6 +33,7 @@ text = "<s>[INST] 아이작 뉴턴의 업적을 알려줘. [/INST] "
 
 # **Model Benchmark**
 
+## KULLM Evaluation
 구름v2 repo 에서 제공되는 데이터셋과 프롬프트를 사용하여 평가했습니다.
 당시 GPT4와 현재 GPT4가 완전히 동일하지는 않기에 실제 결과와 약간의 차이가 존재 할 수 있습니다.
 
@@ -46,7 +47,18 @@ text = "<s>[INST] 아이작 뉴턴의 업적을 알려줘. [/INST] "
 | KULLM v2 | 0.742 | 2.083 | 2.107 | 1.794 | 0.548 | 3.036
 | **Synatra-V0.1-7B** | **0.960** | **2.821** | **2.755** | **2.356** | **0.934** | **4.065**
 
-  
+## KOBEST_BOOLQ, SENTINEG, WIC - ZERO_SHOT
+[EleutherAI/lm-evaluation-harness](https://github.com/EleutherAI/lm-evaluation-harness/tree/polyglot)를 사용하여 BoolQ, SentiNeg, Wic을 측정했습니다.
+
+HellaSwag와 COPA는 원본코드를 수정하는 과정에서 어려움을 겪어 아직 진행하지 않았습니다.
+**NOTE** | BoolQ는 Instruction 모델의 이해를 돕기위해 "위 글에 대한 질문에 사실을 확인하는 작업입니다.", "예, 아니오로 대답해주세요."의 프롬프트를 추가했습니다.
+SentiNeg, Wic의 경우는 [INST], [\INST]만 추가하였습니다.
+
+| Model | COPA | HellaSwag | BoolQ | SentiNeg | Wic
+| --- | --- | --- | --- | --- | ---
+| EleutherAI/polyglot-ko-12.8b | 0.7937 | 0.5954 | 0.4818 | 0.9117 | 0.3985
+| **Synatra-V0.1-7B** | **NaN** | **NaN** | **0.849** | **0.8690** | **0.849**
+
 # **Implementation Code**
 
 Since, chat_template already contains insturction format above.