File size: 2,817 Bytes
798e0f3 |
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 |
{
"additional_special_tokens": [
"<|pad|>",
"<|separator|>",
"<|eos|>",
"<|control1|>",
"<|control2|>",
"<|control3|>",
"<|control4|>",
"<|control5|>",
"<|control6|>",
"<|control7|>",
"<|control8|>",
"<|control9|>",
"<|control10|>",
"<|control11|>",
"<|control12|>",
"<|control13|>",
"<|control14|>",
"<|control15|>",
"<|control16|>",
"<|control17|>",
"<|control18|>",
"<|control19|>",
"<|control20|>",
"<|control21|>",
"<|control22|>",
"<|control23|>",
"<|control24|>",
"<|control25|>",
"<|control26|>",
"<|control27|>",
"<|control28|>",
"<|control29|>",
"<|control30|>",
"<|control31|>",
"<|control32|>",
"<|control33|>",
"<|control34|>",
"<|control35|>",
"<|control36|>",
"<|control37|>",
"<|control38|>",
"<|control39|>",
"<|control40|>",
"<|control41|>",
"<|control42|>",
"<|control43|>",
"<|control44|>",
"<|control45|>",
"<|control46|>",
"<|control47|>",
"<|control48|>",
"<|control49|>",
"<|control50|>",
"<|control51|>",
"<|control52|>",
"<|control53|>",
"<|control54|>",
"<|control55|>",
"<|control56|>",
"<|control57|>",
"<|control58|>",
"<|control59|>",
"<|control60|>",
"<|control61|>",
"<|control62|>",
"<|control63|>",
"<|control64|>",
"<|control65|>",
"<|control66|>",
"<|control67|>",
"<|control68|>",
"<|control69|>",
"<|control70|>",
"<|control71|>",
"<|control72|>",
"<|control73|>",
"<|control74|>",
"<|control75|>",
"<|control76|>",
"<|control77|>",
"<|control78|>",
"<|control79|>",
"<|control80|>",
"<|control81|>",
"<|control82|>",
"<|control83|>",
"<|control84|>",
"<|control85|>",
"<|control86|>",
"<|control87|>",
"<|control88|>",
"<|control89|>",
"<|control90|>",
"<|control91|>",
"<|control92|>",
"<|control93|>",
"<|control94|>",
"<|control95|>",
"<|control96|>",
"<|control97|>",
"<|control98|>",
"<|control99|>",
"<|control100|>",
"<|control101|>",
"<|control102|>",
"<|control103|>",
"<|control104|>",
"<|control105|>",
"<|control106|>",
"<|control107|>",
"<|control108|>",
"<|control109|>",
"<|control110|>",
"<|control111|>",
"<|control112|>",
"<|control113|>",
"<|control114|>",
"<|control115|>",
"<|control116|>",
"<|control117|>",
"<|control118|>",
"<|control119|>",
"<|control120|>",
"<|control121|>",
"<|control122|>",
"<|control123|>",
"<|control124|>",
"<|control125|>"
],
"eos_token": "<|eos|>",
"pad_token": "<|pad|>",
"sep_token": "<|separator|>"
}
|