5roop's picture
Add LM stuff
a65b193
raw
history blame contribute delete
328 Bytes
{"labels": [" ", "", "\u2047", "a", "b", "c", "d", "e", "f", "g", "h", "i", "j", "k", "l", "m", "n", "o", "p", "q", "r", "s", "t", "u", "v", "w", "x", "y", "z", "\u00e4", "\u00fc", "\u0107", "\u010d", "\u0111", "\u0161", "\u017e", "\u04e7", "1", "2", "3", "4", "5", "6", "7", "8", "9", "0", ".", "<s>", "</s>"], "is_bpe": false}