文件名称：用于适配低版本transformers的tokenizer
文件大小：209KB
文件格式：WHL
更新时间：2022-09-05 11:38:22
transformers
解决问题： TypeError: TextEncodeInput must be Union[TextInputSequence,Tupele[InputSequence, InputSequence]] 使用方法： pip install transformers_old_tokenizer-3.1.0-py3-none-any.whl from transformers_old_tokenizer import AutoTokenizer