T3Q-LLM/T3Q-LLM-TE-NLI-Lora16-NEF-v1.0

Model Card for Model ID

Model Details

Model Description

This is the model card of a 🤗 transformers model that has been pushed on the Hub. This model card has been automatically generated.

• Developed by: [More Information Needed]
• Funded by [optional]: [More Information Needed]
• Shared by [optional]: [More Information Needed]
• Model type: [More Information Needed]
• Language(s) (NLP): [More Information Needed]
• License: [More Information Needed]
• Finetuned from model [optional]: [More Information Needed]

hf-causal-experimental (pretrained=T3Q-LLM/T3Q-LLM-TE-NLI-Lora16-NEF-v1.0,use_accelerate=true,trust_remote_code=true), limit: None, provide_description: False, num_fewshot: 0, batch_size: 8

Task	Version	Metric	Value		Stderr
kobest_boolq	0	acc	0.9551	±	0.0055
		macro_f1	0.9551	±	0.0055
kobest_copa	0	acc	0.7760	±	0.0132
		macro_f1	0.7758	±	0.0132
kobest_hellaswag	0	acc	0.5160	±	0.0224
		acc_norm	0.5420	±	0.0223
		macro_f1	0.5134	±	0.0224
kobest_sentineg	0	acc	0.8791	±	0.0164
		macro_f1	0.8786	±	0.0165

================================================================================

Query: 오늘 날씨 어때요?

Top 9 most similar sentences in corpus:

[1] 오늘은 날씨가 참 좋아서 외출하기에 아주 좋은 날이에요. (Score: 0.6658) [2] 나는 미래에 대한 두려움을 가지지 않고 미래를 기대하며 살고 있습니다. (Score: 0.6114) [3] 책을 읽는 것은 마음을 편안하게 해주고 지식을 넓혀줍니다. (Score: 0.5735) [4] 요리를 하며 시간을 보내는 것은 나에게 큰 즐거움을 줍니다. (Score: 0.5500) [5] 새로운 언어를 배우는 것은 마음을 더 넓게 만들어 줍니다. (Score: 0.5454) [6] 나는 어제보다 오늘 더 나은 내일을 만들기 위해 노력하고 있습니다. (Score: 0.5425) [7] Today, the weather is so nice that it's perfect for going out. (Score: 0.5206) [8] Spending time cooking brings me great joy. (Score: 0.4776) [9] Reading books relaxes the mind and broadens one's knowledge. (Score: 0.4726) [10] 음악을 들으며 산책하는 것은 스트레스를 해소하는 데에 효과적입니다. (Score: 0.4723)

================================================================================

Query: What's the weather like today?

Top 9 most similar sentences in corpus:

[1] Today, the weather is so nice that it's perfect for going out. (Score: 0.6031) [2] 오늘은 날씨가 참 좋아서 외출하기에 아주 좋은 날이에요. (Score: 0.4892) [3] 나는 미래에 대한 두려움을 가지지 않고 미래를 기대하며 살고 있습니다. (Score: 0.4804) [4] Spending time cooking brings me great joy. (Score: 0.4652) [5] Reading books relaxes the mind and broadens one's knowledge. (Score: 0.4611) [6] 나는 어제보다 오늘 더 나은 내일을 만들기 위해 노력하고 있습니다. (Score: 0.4485) [7] 책을 읽는 것은 마음을 편안하게 해주고 지식을 넓혀줍니다. (Score: 0.4267) [8] 요리를 하며 시간을 보내는 것은 나에게 큰 즐거움을 줍니다. (Score: 0.4248) [9] 새로운 언어를 배우는 것은 마음을 더 넓게 만들어 줍니다. (Score: 0.4170) [10] Listening to music while walking is effective in relieving stress. (Score: 0.4101)

================================================================================

Query: 어떤 책을 읽는 것이 좋을까요?

Top 9 most similar sentences in corpus:

[1] 책을 읽는 것은 마음을 편안하게 해주고 지식을 넓혀줍니다. (Score: 0.6988) [2] 나는 미래에 대한 두려움을 가지지 않고 미래를 기대하며 살고 있습니다. (Score: 0.6811) [3] 새로운 언어를 배우는 것은 마음을 더 넓게 만들어 줍니다. (Score: 0.6438) [4] 나는 어제보다 오늘 더 나은 내일을 만들기 위해 노력하고 있습니다. (Score: 0.6196) [5] 요리를 하며 시간을 보내는 것은 나에게 큰 즐거움을 줍니다. (Score: 0.5932) [6] Reading books relaxes the mind and broadens one's knowledge. (Score: 0.5892) [7] 오늘은 날씨가 참 좋아서 외출하기에 아주 좋은 날이에요. (Score: 0.5634) [8] Spending time cooking brings me great joy. (Score: 0.5327) [9] Today, the weather is so nice that it's perfect for going out. (Score: 0.4939) [10] Learning a new language opens up one's mind. (Score: 0.4934)

================================================================================

Query: What books do you recommend reading?

Top 9 most similar sentences in corpus:

[1] Reading books relaxes the mind and broadens one's knowledge. (Score: 0.6845) [2] Today, the weather is so nice that it's perfect for going out. (Score: 0.6050) [3] Spending time cooking brings me great joy. (Score: 0.6014) [4] Learning a new language opens up one's mind. (Score: 0.5614) [5] Listening to music while walking is effective in relieving stress. (Score: 0.5565) [6] 책을 읽는 것은 마음을 편안하게 해주고 지식을 넓혀줍니다. (Score: 0.5320) [7] 나는 미래에 대한 두려움을 가지지 않고 미래를 기대하며 살고 있습니다. (Score: 0.5170) [8] 새로운 언어를 배우는 것은 마음을 더 넓게 만들어 줍니다. (Score: 0.5029) [9] 나는 어제보다 오늘 더 나은 내일을 만들기 위해 노력하고 있습니다. (Score: 0.4747) [10] 요리를 하며 시간을 보내는 것은 나에게 큰 즐거움을 줍니다. (Score: 0.4638)

================================================================================

Query: 저는 요리를 좋아합니다.

Top 9 most similar sentences in corpus:

[1] 요리를 하며 시간을 보내는 것은 나에게 큰 즐거움을 줍니다. (Score: 0.9216) [2] 책을 읽는 것은 마음을 편안하게 해주고 지식을 넓혀줍니다. (Score: 0.7398) [3] 나는 미래에 대한 두려움을 가지지 않고 미래를 기대하며 살고 있습니다. (Score: 0.7346) [4] Spending time cooking brings me great joy. (Score: 0.7076) [5] 오늘은 날씨가 참 좋아서 외출하기에 아주 좋은 날이에요. (Score: 0.6971) [6] 새로운 언어를 배우는 것은 마음을 더 넓게 만들어 줍니다. (Score: 0.6932) [7] 나는 어제보다 오늘 더 나은 내일을 만들기 위해 노력하고 있습니다. (Score: 0.6546) [8] 음악을 들으며 산책하는 것은 스트레스를 해소하는 데에 효과적입니다. (Score: 0.5602) [9] Reading books relaxes the mind and broadens one's knowledge. (Score: 0.5369) [10] Today, the weather is so nice that it's perfect for going out. (Score: 0.5046)

================================================================================

Query: I love cooking.

Top 9 most similar sentences in corpus:

[1] Spending time cooking brings me great joy. (Score: 0.8812) [2] 요리를 하며 시간을 보내는 것은 나에게 큰 즐거움을 줍니다. (Score: 0.7354) [3] Reading books relaxes the mind and broadens one's knowledge. (Score: 0.6897) [4] Today, the weather is so nice that it's perfect for going out. (Score: 0.6842) [5] 나는 미래에 대한 두려움을 가지지 않고 미래를 기대하며 살고 있습니다. (Score: 0.6302) [6] Learning a new language opens up one's mind. (Score: 0.6216) [7] 책을 읽는 것은 마음을 편안하게 해주고 지식을 넓혀줍니다. (Score: 0.6095) [8] 새로운 언어를 배우는 것은 마음을 더 넓게 만들어 줍니다. (Score: 0.5962) [9] Listening to music while walking is effective in relieving stress. (Score: 0.5909) [10] 나는 어제보다 오늘 더 나은 내일을 만들기 위해 노력하고 있습니다. (Score: 0.5662)