transformers 中的 input_ids 和 labels 是什么
input_ids 是输入文本的数字化表示，而 labels 是模型训练的目标值
在自然语言处理（NLP）和使用 transformers 库进行模型训练时，tokenizer = AutoTokenizer.from_pretrained(model_path) 这行代码是用于从预训练模型路径加载对应的分词器。input_ids 和 labels 是在使用这个分词器处理文本以及进行模型训练时非常重要的概念，下面为你详细解释：
input_ids
含义
input_ids 是分词器将输入文本转换为的一系列整数标识。在自然语言处理中，深度学习模型无法直接处理文本数据，因此需要将文本分割成更小的单元（即分词）
