crates.io · crates:tokenizers
tokenizers attivo
Fastest implementation of the most used tokenizers in AI.
| Ultima versione stabile | 0.23.2 |
|---|---|
| Pubblicata | 2026-09-03 08:49:28 UTC |
| Installa | cargo add tokenizers |
| Versione minima di Rust (rust-version) | nessuno dichiarato |
| Licenza | Apache-2.0 |
| Avvisi di sicurezza sull’ultima versione | nessuno noto |
| Ultima verifica | 2026-10-09 15:20:24 UTC |
| Fonti | api.osv.dev, crates.io |
Manutenzione
| Attività | attivo |
|---|---|
| Ultima versione stabile | 2026-09-03 08:49:28 UTC · 36 giorni fa |
| Versioni stabili negli ultimi 12 mesi | 3 |
| Versioni pubblicate | 42 |
Euristica basata solo sulle date di pubblicazione; non misura i tempi di risposta alle issue né ai problemi di sicurezza.
Cronologia delle versioni
| Versione | Pubblicata |
|---|---|
0.23.2 | 2026-09-03 08:49:28 UTC |
0.23.1 | 2026-04-27 14:39:17 UTC |
0.22.2 | 2025-12-02 12:53:51 UTC |
0.22.1 | 2025-09-19 09:46:10 UTC |
0.22.0 | 2025-08-29 10:22:26 UTC |
0.21.4 | 2025-07-28 13:19:38 UTC |
0.21.2 | 2025-06-24 10:21:08 UTC |
0.21.1 | 2025-03-13 10:45:44 UTC |
0.21.0 | 2024-11-27 13:06:48 UTC |
0.20.4 | 2024-11-26 17:03:22 UTC |
0.20.3 | 2024-11-05 17:20:12 UTC |
0.20.2 | 2024-11-04 17:17:03 UTC |
0.20.1 | 2024-10-10 09:46:24 UTC |
0.20.0 | 2024-08-08 16:45:14 UTC |
0.19.1 | 2024-04-17 21:17:09 UTC |
0.19.0 | 2024-04-17 08:52:21 UTC |
0.15.2 | 2024-02-12 02:11:46 UTC |
0.15.1 | 2024-01-22 15:01:56 UTC |
0.15.0 | 2023-11-14 18:51:49 UTC |
0.14.1 | 2023-10-06 11:11:43 UTC |
Sono mostrate le 20 più recenti su 38 versioni. JSON
Dai questi dati al tuo agente IA
Vigia è un server MCP gratuito: il tuo agente di programmazione verifica versioni, modifiche incompatibili e vulnerabilità prima di scrivere codice. Senza registrazione né chiave API.
claude mcp add --transport http vigia https://vigia.coredls.cloud/mcp
Aggiungi a CursorAggiungi a VS Code★ Stella su GitHub
Qualsiasi altro client MCP
{ "mcpServers": { "vigia": { "url": "https://vigia.coredls.cloud/mcp" } } }Skill per agenti (SKILL.md): dice all'agente quando usare Vigia · GitHub Action per le pull request
Domande frequenti
Qual è l’ultima versione di tokenizers?
L’ultima versione stabile di tokenizers è la 0.23.2, pubblicata il 2026-09-03. Verificato da Vigia il 2026-10-09.
Come installo l'ultima versione di tokenizers?
Esegui cargo add tokenizers. L'ultima versione stabile è 0.23.2 (verificato il 2026-10-09).
tokenizers è deprecato?
No. tokenizers non è indicato come deprecato nel registro.
Quale versione di Rust richiede tokenizers?
tokenizers 0.23.2 non dichiara alcun requisito sulla versione di Rust.
tokenizers 0.23.2 ha vulnerabilità note?
Nessun avviso di sicurezza noto riguarda tokenizers 0.23.2 secondo i dati consultati da Vigia.
tokenizers è ancora mantenuto?
tokenizers ha pubblicato 3 versioni stabili negli ultimi 12 mesi; la più recente 36 giorni fa. Attività: attivo.
Modifiche osservate
Nessuna modifica osservata da quando Vigia monitora questo pacchetto.
Pacchetti correlati
- monostate-impl
- inherent
- minijinja
- monostate
- crc16
- tabled_derive
- similar-asserts
- azure_core
- rustc-literal-escaper
- mac_address
- wry
- des
Badge per il tuo README
Mostra l’ultima versione, lo stato di manutenzione e l’eventuale deprecazione di questo pacchetto. Copia il Markdown:
[](https://vigia.coredls.cloud/crates/tokenizers) [](https://vigia.coredls.cloud/crates/tokenizers) [](https://vigia.coredls.cloud/crates/tokenizers)
Per gli agenti
GET https://vigia.coredls.cloud/v1/packages/crates/tokenizers
GET https://vigia.coredls.cloud/v1/packages/crates/tokenizers/versions/{version}