Transformers
Modèles d'IA basés sur les Transformers pour le traitement du langage naturel, la vision par ordinateur et d'autres usages d'apprentissage.
posts
Tiny BPE Trainer – Un entraîneur BPE rapide et léger en C++
Tiny BPE Trainer est un entraîneur BPE rapide en C++17. Entraînez votre propre tokenizer avec cet entraîneur léger. Sortie compatible avec HuggingFace.
Continuer la lectureposts
Tokenizer C++ rapide et UTF-8 pour le NLP et le ML
Un tokenizer C++ ultra-rapide, uniquement en-tête, avec prise en charge UTF-8, codage de vocabulaire et séquences prêtes pour le transformateur, idéal pour le PNL et l'apprentissage automatique.
Continuer la lecture