Нейронки берут налог за русский язык — в отдельных тестах он требует на 40% больше токенов, чем английский. Это называют 'налогом токенизатора': среди 200 языков разница достигает 17 раз — особенно не повезло бирманскому, тибетскому и кхмерскому.
Нейронки берут налог за русский язык — в отдельных тестах он требует на 40% больше токенов, чем английский. Это называют 'налогом токенизатора': среди 200 языков разница достигает 17 раз — особенно не повезло бирманскому, тибетскому и кхмерскому.
| When | Views |
|---|---|
| 27 Oct 2026, 18:30 | 0 |
| 12 Nov 2026, 05:40 | 5.8K |
Posts in other channels we index that link to this one. (Forwards with a hidden source can't be traced.)
Nobody yet.