metadata

license: cc-by-sa-4.0
language:
  - ko
  - en

kiqu-70b

kiqu-70b is a SFT+DPO trained model based on Miqu-70B-Alpaca-DPO using Korean datasets.

Since this model is finetune of miqu-1-70b using it on commercial purposes is at your own risk. — leaked early version Mistral-Medium

본 모델 kiqu-70b는 Miqu-70B-Alpaca-DPO 모델을 기반으로 한국어 데이터셋을 사용하여 SFT+DPO 훈련을 진행하여 제작되었습니다.

베이스 모델인 miqu-1-70b 모델이 미스트랄-미디움의 초기 유출 버전이기에 상업적 사용에 대한 risk는 본인에게 있습니다.

Beside that this model follows cc-by-sa-4.0

본 모델 자체로서는 cc-by-sa-4.0을 따릅니다.

Model Details

Base Model
miqu-1-70b (Early Mistral-Medium)

Instruction format

It follows Mistral format. Giving few-shots to model is highly recommended

본 모델은 미스트랄 포맷을 따릅니다. few-shot 사용을 적극 권장합니다.

<s>[INST] {instruction}
[/INST] {output}</s>

Multi-shot

<s>[INST] {instruction}
[/INST] {output}

[INST] {instruction}
[/INST] {output}

[INST] {instruction}
[/INST] {output}</s>
.
.
.

TBD

This model's training got sponsered by no one but support from people around Earth.

Contact Me on Discord - is.maywell