博主您好，您上传的模型参数中缺少model_type，想问一下Tokenizer模型是哪个类型，试了t5和bart家族都不行。model是gpt2家族目前是正常使用。能否告知Tokenizer模型的model_type，非常感谢！
你好，这里的tokenizer跟LLM的tokenizer不同，是一个独立的模型，你可以参考Model card中的教程使用，谢谢
· Sign up or log in to comment
