https://mecanik.dev/zh-tw/tags/huggingface/Recent content in Huggingface on [ MECANIK DEV ]Hugo -- gohugo.iozh-Hant版權所有 © 2020-{year} [ MECANIK DEV ]。 版權所有。Thu, 07 Aug 2025 20:00:00 +0100https://mecanik.dev/zh-tw/posts/tiny-bpe-trainer-a-fast-and-lightweight-bpe-trainer-in-c++/Thu, 07 Aug 2025 20:00:00 +0100https://mecanik.dev/zh-tw/posts/tiny-bpe-trainer-a-fast-and-lightweight-bpe-trainer-in-c++/Tiny BPE Trainer 介紹如今，從 GPT 到 RoBERTa，大多數現代 NLP 模型都依賴於使用位元組對編碼 (BPE) 的子詞標記化。但是，如果您想用純 C++ 訓練自己的詞彙表，該怎麼辦