huggingface-tokenizers
✓Úselo cuando "tokenizadores", "tokenizador HuggingFace", "BPE", "Wordpiece" o pregunte sobre "entrenar tokenizador", "vocabulario personalizado", "tokenización", "subpalabra", "tokenizador rápido", "codificar texto"
Instalación
SKILL.md
| tokenizers | Speed, custom training, production | | SentencePiece | T5/ALBERT, language-independent | | tiktoken | OpenAI models (GPT) |
Úselo cuando "tokenizadores", "tokenizador HuggingFace", "BPE", "Wordpiece" o pregunte sobre "entrenar tokenizador", "vocabulario personalizado", "tokenización", "subpalabra", "tokenizador rápido", "codificar texto" Fuente: eyadsibai/ltk.
Abre tu terminal o herramienta de línea de comandos (Terminal, iTerm, Windows Terminal, etc.) Copia y ejecuta este comando: npx skills add https://github.com/eyadsibai/ltk --skill huggingface-tokenizers Una vez instalado, el skill se configurará automáticamente en tu entorno de programación con IA y estará listo para usar en Claude Code o Cursor
Certificado de seguridad para código seguro y confiable Instalación con un clic y configuración simplificada Compatible con Claude Code, Cursor y más
Datos (listos para citar)
Campos y comandos estables para citas de IA/búsqueda.
- Comando de instalación
npx skills add https://github.com/eyadsibai/ltk --skill huggingface-tokenizers- Fuente
- eyadsibai/ltk
- Categoría
- </>Desarrollo
- Verificado
- ✓
- Primera vez visto
- 2026-02-17
- Actualizado
- 2026-02-18
Respuestas rápidas
¿Qué es huggingface-tokenizers?
Úselo cuando "tokenizadores", "tokenizador HuggingFace", "BPE", "Wordpiece" o pregunte sobre "entrenar tokenizador", "vocabulario personalizado", "tokenización", "subpalabra", "tokenizador rápido", "codificar texto" Fuente: eyadsibai/ltk.
¿Cómo instalo huggingface-tokenizers?
Abre tu terminal o herramienta de línea de comandos (Terminal, iTerm, Windows Terminal, etc.) Copia y ejecuta este comando: npx skills add https://github.com/eyadsibai/ltk --skill huggingface-tokenizers Una vez instalado, el skill se configurará automáticamente en tu entorno de programación con IA y estará listo para usar en Claude Code o Cursor
¿Dónde está el repositorio de origen?
https://github.com/eyadsibai/ltk
Detalles
- Categoría
- </>Desarrollo
- Fuente
- skills.sh
- Primera vez visto
- 2026-02-17