PyPI · pypi:tokenizers
tokenizers активен
Последняя стабильная версия tokenizers — 0.23.3, опубликована 2026-10-09. Проверено Vigia 2026-11-13.
| Последняя стабильная версия | 0.23.3 |
|---|---|
| Опубликована | 2026-10-09 10:00:51 UTC |
| Установка | pip install --upgrade tokenizers |
| Требует | python >=3.10 |
| Лицензия | — |
| Уведомления о безопасности для последней версии | неизвестны |
| Последняя проверка | 2026-11-13 10:25:40 UTC |
| Источники | pypi.org |
Поддержка
| Активность | активен |
|---|---|
| Последняя стабильная версия | 2026-10-09 10:00:51 UTC · 35 дней назад |
| Стабильных версий за последние 12 месяцев | 4 |
| Опубликовано версий | 106 |
Эвристика, основанная только на датах публикации; не отражает скорость реакции на issues и проблемы безопасности.
История версий
| Версия | Опубликована |
|---|---|
0.23.3 | 2026-10-09 10:00:51 UTC |
0.23.2 | 2026-09-03 08:55:14 UTC |
0.23.1 | 2026-04-27 14:43:01 UTC |
0.22.2 | 2026-01-05 10:40:32 UTC |
0.22.1 | 2025-09-19 09:48:56 UTC |
0.22.0 | 2025-08-29 10:25:12 UTC |
0.21.4 | 2025-07-28 13:22:43 UTC |
0.21.2 | 2025-06-24 10:24:31 UTC |
0.21.1 | 2025-03-13 10:50:56 UTC |
0.21.0 | 2024-11-27 13:10:51 UTC |
0.20.4 отозвана | 2024-11-26 17:07:11 UTC |
0.20.3 | 2024-11-05 17:30:25 UTC |
0.20.2 | 2024-11-04 17:28:57 UTC |
0.20.1 | 2024-10-10 09:56:28 UTC |
0.20.0 | 2024-08-08 16:55:26 UTC |
0.19.1 | 2024-04-17 21:36:02 UTC |
0.19.0 | 2024-04-17 09:13:53 UTC |
0.15.2 | 2024-02-12 02:24:30 UTC |
0.15.1 | 2024-01-22 15:22:00 UTC |
0.15.0 | 2023-11-14 19:03:50 UTC |
Показаны 20 самых новых из 72 версий. JSON
Совместимость версий
Самая новая стабильная версия, заявляющая поддержку каждой версии среды выполнения (по требованиям, опубликованным с каждой версией).
| Среда | Самая новая совместимая версия |
|---|---|
python 3.8 | 0.21.0 |
python 3.9 | 0.22.2 |
python 3.10 | 0.23.3 |
python 3.11 | 0.23.3 |
python 3.12 | 0.23.3 |
python 3.13 | 0.23.3 |
Передайте эти данные своему ИИ-агенту
Vigia — бесплатный MCP-сервер: ваш агент для программирования проверяет версии, несовместимые изменения и уязвимости до того, как напишет код. Без регистрации и API-ключа.
claude mcp add --transport http vigia https://vigia.coredls.cloud/mcp
Добавить в CursorДобавить в VS Code★ Звезда на GitHub
Любой другой MCP-клиент
{ "mcpServers": { "vigia": { "url": "https://vigia.coredls.cloud/mcp" } } }Навык для агентов (SKILL.md): подсказывает агенту, когда использовать Vigia · GitHub Action для pull request
Часто задаваемые вопросы
Какая последняя версия tokenizers?
Последняя стабильная версия tokenizers — 0.23.3, опубликована 2026-10-09. Проверено Vigia 2026-11-13.
Как установить последнюю версию tokenizers?
Выполните pip install --upgrade tokenizers. Последняя стабильная версия — 0.23.3 (проверено 2026-11-13).
Устарел ли tokenizers?
Нет. В реестре tokenizers не помечен как устаревший.
Какая версия Python нужна для tokenizers?
tokenizers 0.23.3 указывает такое требование: python >=3.10.
Есть ли у tokenizers 0.23.3 известные уязвимости?
По данным, которые проверяет Vigia, известных уведомлений о безопасности для tokenizers 0.23.3 нет.
Поддерживается ли tokenizers?
За последние 12 месяцев tokenizers выпустил 4 стабильных версий; последнюю — 35 дней назад. Активность: активен.
Зафиксированные изменения
- Fri Oct 09 2026 10:03:21 GM +0000 (Coordinated Universal Time) — released 0.23.2 → 0.23.3
Связанные пакеты
- pynacl
- cloudpickle
- python-discovery
- chardet
- langchain
- websocket-client
- joblib
- isodate
- threadpoolctl
- matplotlib
- tzlocal
- nodeenv
Бейджи для README
Покажите последнюю версию, статус поддержки и признак устаревания этого пакета. Скопируйте Markdown:
[](https://vigia.coredls.cloud/pypi/tokenizers) [](https://vigia.coredls.cloud/pypi/tokenizers) [](https://vigia.coredls.cloud/pypi/tokenizers)
Для агентов
GET https://vigia.coredls.cloud/v1/packages/pypi/tokenizers
GET https://vigia.coredls.cloud/v1/packages/pypi/tokenizers/versions/{version}