---
title:

Tokenizer Benchmark Viewer

date: 2025-12-02
tags: [ai, llm, benchmark ]
repo: https://github.com/korchasa/tokenizers-benchmark
demo: https://tokenizers.korchasa.dev
draft: false
---

Инструмент за анализ на „езиковия данък“ и ефективността на кодиране на текст в токени за различни модели.