Create README.md
Browse files
README.md
ADDED
|
@@ -0,0 +1,8 @@
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 1 |
+
Текст: Бля ну я ебал
|
| 2 |
+
|
| 3 |
+
Сырое: ['<bos>', 'Б', '▁ля', 'ну', 'я', 'е', '▁бал', '<eos>']
|
| 4 |
+
Чистое: ['<bos>', 'Б', 'ля', 'ну', 'я', 'е', 'бал', '<eos>']
|
| 5 |
+
|
| 6 |
+
Декод: <bos> Б ▁ля ну я е ▁бал <eos>
|
| 7 |
+
|
| 8 |
+
на выходе : Бля ну я ебал
|