d558c71 333c788 d558c71 333c788 d558c71
1
2
3
4
5
6
7
8
9
10
{ "auto_map": { "AutoTokenizer": ["LlamaTokenizer"] }, "add_bos_token": false, "add_eos_token": false, "model_max_length": 4096, "tokenizer_class": "LlamaTokenizer" }
