• 深度学习网络中的某一层,可以和整体网络一起更新
  • NLP任务中通常为tokenize的下一步
  • 将ID映射至高位向量空间,并进行训练