Hugging Face Transformers 中 AutoTokenizer 加载缓慢的问题解决 Posted on 2024-05-28 当你使用 Hugging Face Transformers 库中的 AutoTokenizer 加载预训练的分词器时，如果遇到加载时间过长的问题，可以参考本教程进行解决。 问题描述 在使用 tran…