很好奇为什么基于Transformer的文本情感分析的项目数据处理的地方

Transformer的项目为什么不跟seq2seq项目一样直接使用`tf.keras.preprocessing.Tokenizer`进行word2num的转换呢？